RU2009104062A - Виртуальный контроллер для визуальных отображений - Google Patents
Виртуальный контроллер для визуальных отображений Download PDFInfo
- Publication number
- RU2009104062A RU2009104062A RU2009104062/08A RU2009104062A RU2009104062A RU 2009104062 A RU2009104062 A RU 2009104062A RU 2009104062/08 A RU2009104062/08 A RU 2009104062/08A RU 2009104062 A RU2009104062 A RU 2009104062A RU 2009104062 A RU2009104062 A RU 2009104062A
- Authority
- RU
- Russia
- Prior art keywords
- independent
- control parameter
- background
- image
- displayed image
- Prior art date
Links
- 230000000007 visual effect Effects 0.000 title claims 3
- 238000000034 method Methods 0.000 claims abstract 20
- 230000011218 segmentation Effects 0.000 claims abstract 2
- 210000004247 hand Anatomy 0.000 claims 10
- 238000006073 displacement reaction Methods 0.000 claims 5
- 210000003811 finger Anatomy 0.000 claims 3
- 210000003813 thumb Anatomy 0.000 claims 3
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/0304—Detection arrangements using opto-electronic means
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/04815—Interaction with a metaphor-based environment or interaction object displayed as three-dimensional, e.g. changing the user viewpoint with respect to the environment or object
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
Abstract
1. Способ, содержащий ! детектирование (502) изображения одной или более рук напротив фона посредством камеры; ! сегментацию (504) изображения на области рук и области фона; ! с интервалами, подсчет (506) количества независимых областей фона, причем каждая часть фона, которая визуально независима от других частей фона по меньшей мере частью одной из областей рук, определяется как независимая область; ! ассоциирование (508) управляющего параметра для манипулирования отображаемым изображением на пользовательском интерфейсе с каждой подсчитанной независимой областью; ! изменение (510) отображаемого изображения посредством управляющего параметра в зависимости от каждого изменения формы и/или положения независимой области, ассоциированной с управляющим параметром. ! 2. Способ по п.1, дополнительно содержащий разобщение управляющего параметра и ассоциированной независимой области, когда независимая область снова становится связной. ! 3. Способ по п.1, в котором управляющий параметр содержит имитирование приведения в действие кнопки мыши, когда независимая область: формируется, расформировывается и вновь формируется внутри порогового интервала времени. ! 4. Способ по п.1, в котором управляющий параметр содержит имитирование и перемещение указателя мыши. ! 5. Способ по п.1, в котором управляющий параметр содержит перемещение курсора. ! 6. Способ по п.1, в котором управляющий параметр содержит перемещение отображаемого изображения по отношению к пользовательскому интерфейсу. ! 7. Способ по п.6, в котором перемещение содержит одно из: вертикальное перемещение, горизонтальное перемещение или вращательное движение. ! 8. Способ по �
Claims (20)
1. Способ, содержащий
детектирование (502) изображения одной или более рук напротив фона посредством камеры;
сегментацию (504) изображения на области рук и области фона;
с интервалами, подсчет (506) количества независимых областей фона, причем каждая часть фона, которая визуально независима от других частей фона по меньшей мере частью одной из областей рук, определяется как независимая область;
ассоциирование (508) управляющего параметра для манипулирования отображаемым изображением на пользовательском интерфейсе с каждой подсчитанной независимой областью;
изменение (510) отображаемого изображения посредством управляющего параметра в зависимости от каждого изменения формы и/или положения независимой области, ассоциированной с управляющим параметром.
2. Способ по п.1, дополнительно содержащий разобщение управляющего параметра и ассоциированной независимой области, когда независимая область снова становится связной.
3. Способ по п.1, в котором управляющий параметр содержит имитирование приведения в действие кнопки мыши, когда независимая область: формируется, расформировывается и вновь формируется внутри порогового интервала времени.
4. Способ по п.1, в котором управляющий параметр содержит имитирование и перемещение указателя мыши.
5. Способ по п.1, в котором управляющий параметр содержит перемещение курсора.
6. Способ по п.1, в котором управляющий параметр содержит перемещение отображаемого изображения по отношению к пользовательскому интерфейсу.
7. Способ по п.6, в котором перемещение содержит одно из: вертикальное перемещение, горизонтальное перемещение или вращательное движение.
8. Способ по п.1, в котором управляющий параметр содержит изменение масштаба или уменьшение размера отображаемого изображения на пользовательском интерфейсе.
9. Способ по п.1, дополнительно содержащий ассоциирование управляющего параметра с зависимостью между двумя независимыми областями, причем каждая независимая область сформирована изображением соответствующей руки.
10. Способ по п.9, в котором управляющий параметр содержит растягивание отображаемого изображения в зависимости от изменения расстояния между двумя независимыми областями.
11. Способ по п.9, в котором управляющий параметр, ассоциированный с зависимостью между двумя независимыми областями, управляет одним из:
вращения отображаемого изображения в зависимости от вращения линии между двумя независимыми областями;
вращения отображаемого изображения в направлении по часовой стрелке или против часовой стрелки, когда обе независимые области перемещаются по дуге в аналогичном направлении;
перемещением всего отображаемого изображения, когда обе независимые области перемещаются одновременно в одном и том же направлении; и
изменением масштаба отображаемого изображения, когда меняется расстояние между независимыми областями.
12. Способ по п.1, в котором область большого пальца и область указательного пальца одной из областей рук определяют интерфейс большого и указательного пальцев (TAFFI), причем область большого пальца и область указательного пальца визуально касаются друг друга, чтобы визуально разъединить часть фона от других частей фона и образовать независимую область.
13. Система, содержащая
датчик (104) изображений для детектирования изображения, включающего в себя одну или более рук напротив фона;
сегментатор (204) изображений для сегментации изображения на одну или более областей рук и фона;
отслеживающий модуль (206) для подсчета, с интервалами, количества независимых областей фона, причем каждая часть фона, которая визуально независима от других частей фона по меньшей мере частью одной из областей рук, определяется как независимая область;
модуль (210) связи, ассоциирующий управляющий параметр для манипулирования отображаемым изображением на пользовательском интерфейсе с каждой подсчитанной независимой областью; и
при этом каждое изменение формы, положения, или того и другого, независимой области, ассоциированной с управляющим параметром, модифицирует отображаемое изображение посредством управляющего параметра.
14. Система по п.13, в которой, когда независимая область вновь становится связной, модуль связи разобщает соответствующий управляющий параметр.
15. Система по п.13, в которой модуль связи ассоциирует управляющий параметр, который имитирует приведение в действие кнопки мыши, когда независимая область формируется, расформировывается и вновь формируется внутри критического интервала времени.
16. Система по п.13, в которой модуль связи ассоциирует управляющий параметр для имитации перемещения визуального индикатора, выбранного из группы визуальных индикаторов, состоящих из изображения указателя мыши, изображения курсора и по меньшей мере части отображаемого изображения, и в которой перемещение содержит перемещение, выбранное из группы перемещений, состоящих из вертикального перемещения, горизонтального перемещения, вращательного движения, перемещения с увеличением и перемещения с уменьшением масштаба.
17. Система по п.13, в которой модуль связи ассоциирует управляющий параметр с зависимостью между двумя независимыми областями, при этом каждая независимая область сформирована изображением соответствующей руки.
18. Система по п.17, в которой модуль связи ассоциирует управляющий параметр для растяжения отображаемого изображения в зависимости от изменения расстояния между двумя независимыми областями.
19. Система по п.17, в которой модуль связи ассоциирует управляющий параметр для вращения отображаемого изображения в зависимости от вращения линии между двумя независимыми областями.
20. Система для изменения отображаемого изображения на пользовательском интерфейсе посредством управляющего параметра, назначенного перемещению руки, причем система содержит
средства (104) для детектирования изображения одной или более рук напротив фона;
средства (204) для сегментации изображения на одну или более областей рук и фона;
средства (206) для подсчета, с фиксированными интервалами, количества независимых областей фона, в котором каждая часть фона, которая визуально независима от других частей фона по меньшей мере частью области рук, определяется как независимая область;
средства (210) для ассоциирования управляющего параметра для управления отображаемым изображением на пользовательском интерфейсе с каждой подсчитанной независимой областью и для изменения отображаемого изображения посредством управляющего параметра в зависимости от каждого изменения формы и/или положения независимой области, ассоциированной с управляющим параметром.
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US11/463,183 | 2006-08-08 | ||
US11/463,183 US7907117B2 (en) | 2006-08-08 | 2006-08-08 | Virtual controller for visual displays |
Publications (2)
Publication Number | Publication Date |
---|---|
RU2009104062A true RU2009104062A (ru) | 2010-08-20 |
RU2439653C2 RU2439653C2 (ru) | 2012-01-10 |
Family
ID=39033312
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
RU2009104062/08A RU2439653C2 (ru) | 2006-08-08 | 2007-05-29 | Виртуальный контроллер для визуальных отображений |
Country Status (14)
Country | Link |
---|---|
US (4) | US7907117B2 (ru) |
EP (1) | EP2049976B1 (ru) |
JP (1) | JP4965653B2 (ru) |
KR (1) | KR101292467B1 (ru) |
CN (1) | CN101501614B (ru) |
BR (1) | BRPI0714232B1 (ru) |
CA (4) | CA2880054C (ru) |
IL (1) | IL196018A (ru) |
MX (1) | MX2009000305A (ru) |
MY (1) | MY161823A (ru) |
NO (1) | NO20090116L (ru) |
RU (1) | RU2439653C2 (ru) |
WO (1) | WO2008018943A1 (ru) |
ZA (1) | ZA200810106B (ru) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
RU2672624C2 (ru) * | 2013-09-04 | 2018-11-16 | Маттиас Рат | Графический интерфейс пользователя, обеспечивающий функциональные возможности виртуального супермасштабирования |
Families Citing this family (127)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6990639B2 (en) | 2002-02-07 | 2006-01-24 | Microsoft Corporation | System and process for controlling electronic components in a ubiquitous computing environment using multimodal integration |
US7665041B2 (en) * | 2003-03-25 | 2010-02-16 | Microsoft Corporation | Architecture for controlling a computer using hand gestures |
US8745541B2 (en) | 2003-03-25 | 2014-06-03 | Microsoft Corporation | Architecture for controlling a computer using hand gestures |
US7038661B2 (en) * | 2003-06-13 | 2006-05-02 | Microsoft Corporation | Pointing device and cursor for use in intelligent computing environments |
US8133115B2 (en) | 2003-10-22 | 2012-03-13 | Sony Computer Entertainment America Llc | System and method for recording and displaying a graphical path in a video game |
US20050227217A1 (en) * | 2004-03-31 | 2005-10-13 | Wilson Andrew D | Template matching on interactive surface |
US7787706B2 (en) * | 2004-06-14 | 2010-08-31 | Microsoft Corporation | Method for controlling an intensity of an infrared source used to detect objects adjacent to an interactive display surface |
US7593593B2 (en) | 2004-06-16 | 2009-09-22 | Microsoft Corporation | Method and system for reducing effects of undesired signals in an infrared imaging system |
KR101183000B1 (ko) | 2004-07-30 | 2012-09-18 | 익스트림 리얼리티 엘티디. | 이미지 프로세싱을 기반으로 한 3d 공간 차원용 시스템 및방법 |
US8872899B2 (en) * | 2004-07-30 | 2014-10-28 | Extreme Reality Ltd. | Method circuit and system for human to machine interfacing by hand gestures |
US8681100B2 (en) | 2004-07-30 | 2014-03-25 | Extreme Realty Ltd. | Apparatus system and method for human-machine-interface |
US8560972B2 (en) | 2004-08-10 | 2013-10-15 | Microsoft Corporation | Surface UI for gesture-based interaction |
US20060071933A1 (en) | 2004-10-06 | 2006-04-06 | Sony Computer Entertainment Inc. | Application binary interface for multi-pass shaders |
US9128519B1 (en) | 2005-04-15 | 2015-09-08 | Intellectual Ventures Holding 67 Llc | Method and system for state-based control of objects |
US7636126B2 (en) | 2005-06-22 | 2009-12-22 | Sony Computer Entertainment Inc. | Delay matching in audio/video systems |
US7911444B2 (en) | 2005-08-31 | 2011-03-22 | Microsoft Corporation | Input method for surface of interactive display |
US9046962B2 (en) | 2005-10-31 | 2015-06-02 | Extreme Reality Ltd. | Methods, systems, apparatuses, circuits and associated computer executable code for detecting motion, position and/or orientation of objects within a defined spatial region |
US20070285554A1 (en) | 2005-10-31 | 2007-12-13 | Dor Givon | Apparatus method and system for imaging |
US8060840B2 (en) * | 2005-12-29 | 2011-11-15 | Microsoft Corporation | Orientation free user interface |
US8941588B2 (en) * | 2008-04-24 | 2015-01-27 | Oblong Industries, Inc. | Fast fingertip detection for initializing a vision-based hand tracker |
US7880746B2 (en) | 2006-05-04 | 2011-02-01 | Sony Computer Entertainment Inc. | Bandwidth management through lighting control of a user environment via a display device |
US7965859B2 (en) | 2006-05-04 | 2011-06-21 | Sony Computer Entertainment Inc. | Lighting control of a user environment via a display device |
US7907117B2 (en) | 2006-08-08 | 2011-03-15 | Microsoft Corporation | Virtual controller for visual displays |
US8212857B2 (en) * | 2007-01-26 | 2012-07-03 | Microsoft Corporation | Alternating light sources to reduce specular reflection |
US20080189661A1 (en) * | 2007-02-06 | 2008-08-07 | Jazzbo Technology Inc. | Video user interface |
US7979315B2 (en) * | 2007-03-14 | 2011-07-12 | Microsoft Corporation | Virtual features of physical items |
US7954067B2 (en) * | 2007-03-16 | 2011-05-31 | Apple Inc. | Parameter setting superimposed upon an image |
US20080229232A1 (en) * | 2007-03-16 | 2008-09-18 | Apple Inc. | Full screen editing of visual media |
AU2008299883B2 (en) | 2007-09-14 | 2012-03-15 | Facebook, Inc. | Processing of gesture-based user interactions |
JP4569613B2 (ja) * | 2007-09-19 | 2010-10-27 | ソニー株式会社 | 画像処理装置および画像処理方法、並びにプログラム |
US8073198B2 (en) * | 2007-10-26 | 2011-12-06 | Samsung Electronics Co., Ltd. | System and method for selection of an object of interest during physical browsing by finger framing |
US8159682B2 (en) | 2007-11-12 | 2012-04-17 | Intellectual Ventures Holding 67 Llc | Lens system |
US9171454B2 (en) * | 2007-11-14 | 2015-10-27 | Microsoft Technology Licensing, Llc | Magic wand |
US20100039500A1 (en) * | 2008-02-15 | 2010-02-18 | Matthew Bell | Self-Contained 3D Vision System Utilizing Stereo Camera and Patterned Illuminator |
US8259163B2 (en) | 2008-03-07 | 2012-09-04 | Intellectual Ventures Holding 67 Llc | Display with built in 3D sensing |
WO2009128064A2 (en) * | 2008-04-14 | 2009-10-22 | Pointgrab Ltd. | Vision based pointing device emulation |
US8595218B2 (en) * | 2008-06-12 | 2013-11-26 | Intellectual Ventures Holding 67 Llc | Interactive display management systems and methods |
TW201005579A (en) * | 2008-07-22 | 2010-02-01 | Asustek Comp Inc | Apparatus for reading electric document and method for operating electric document read |
US8847739B2 (en) * | 2008-08-04 | 2014-09-30 | Microsoft Corporation | Fusing RFID and vision for surface object tracking |
US20100031202A1 (en) * | 2008-08-04 | 2010-02-04 | Microsoft Corporation | User-defined gesture set for surface computing |
EP2342642A1 (en) * | 2008-09-04 | 2011-07-13 | Extreme Reality Ltd. | Method system and software for providing image sensor based human machine interfacing |
US20100105479A1 (en) | 2008-10-23 | 2010-04-29 | Microsoft Corporation | Determining orientation in an external reference frame |
CN101727177B (zh) * | 2008-10-30 | 2012-09-19 | 深圳富泰宏精密工业有限公司 | 鼠标模拟系统及其应用方法 |
TWI486821B (zh) * | 2008-11-28 | 2015-06-01 | Chi Mei Comm Systems Inc | 滑鼠類比系統及其應用方法 |
US8849570B2 (en) * | 2009-03-19 | 2014-09-30 | Microsoft Corporation | Projected way-finding |
US20100241999A1 (en) * | 2009-03-19 | 2010-09-23 | Microsoft Corporation | Canvas Manipulation Using 3D Spatial Gestures |
US20100241987A1 (en) * | 2009-03-19 | 2010-09-23 | Microsoft Corporation | Tear-Drop Way-Finding User Interfaces |
US8121640B2 (en) * | 2009-03-19 | 2012-02-21 | Microsoft Corporation | Dual module portable devices |
US8181123B2 (en) | 2009-05-01 | 2012-05-15 | Microsoft Corporation | Managing virtual port associations to users in a gesture-based computing environment |
US8942428B2 (en) | 2009-05-01 | 2015-01-27 | Microsoft Corporation | Isolate extraneous motions |
US20100289912A1 (en) * | 2009-05-14 | 2010-11-18 | Sony Ericsson Mobile Communications Ab | Camera arrangement with image modification |
US9417700B2 (en) | 2009-05-21 | 2016-08-16 | Edge3 Technologies | Gesture recognition systems and related methods |
US20100309140A1 (en) * | 2009-06-05 | 2010-12-09 | Microsoft Corporation | Controlling touch input modes |
KR20110007806A (ko) | 2009-07-17 | 2011-01-25 | 삼성전자주식회사 | 카메라를 이용하여 손동작을 인식하는 장치 및 방법 |
US8438503B2 (en) * | 2009-09-02 | 2013-05-07 | Universal Electronics Inc. | System and method for enhanced command input |
TWI371681B (en) * | 2009-09-18 | 2012-09-01 | Primax Electronics Ltd | Notebook computer with multi-image capture function |
EP2480951A4 (en) | 2009-09-21 | 2014-04-30 | Extreme Reality Ltd | METHOD, CIRCUITS, DEVICES AND SYSTEMS FOR A HUMAN MACHINE INTERFACE WITH AN ELECTRONIC DEVICE |
US8878779B2 (en) | 2009-09-21 | 2014-11-04 | Extreme Reality Ltd. | Methods circuits device systems and associated computer executable code for facilitating interfacing with a computing platform display screen |
GB2474536B (en) | 2009-10-13 | 2011-11-02 | Pointgrab Ltd | Computer vision gesture based control of a device |
KR101184460B1 (ko) * | 2010-02-05 | 2012-09-19 | 연세대학교 산학협력단 | 마우스 포인터 제어 장치 및 방법 |
US8818027B2 (en) * | 2010-04-01 | 2014-08-26 | Qualcomm Incorporated | Computing device interface |
EP2378394A3 (en) * | 2010-04-15 | 2015-03-25 | Electronics and Telecommunications Research Institute | User interface device and method for recognizing user interaction using same |
JP2011234229A (ja) * | 2010-04-28 | 2011-11-17 | Olympus Imaging Corp | 撮像装置 |
US10786736B2 (en) | 2010-05-11 | 2020-09-29 | Sony Interactive Entertainment LLC | Placement of user information in a game space |
US20110289462A1 (en) * | 2010-05-20 | 2011-11-24 | Microsoft Corporation | Computing Device Magnification Gesture |
US8396252B2 (en) | 2010-05-20 | 2013-03-12 | Edge 3 Technologies | Systems and related methods for three dimensional gesture recognition in vehicles |
CN101901052B (zh) * | 2010-05-24 | 2012-07-04 | 华南理工大学 | 双手互为参考的目标控制方法 |
FR2960986A1 (fr) | 2010-06-04 | 2011-12-09 | Thomson Licensing | Procede de selection d’un objet dans un environnement virtuel |
US9009594B2 (en) | 2010-06-10 | 2015-04-14 | Microsoft Technology Licensing, Llc | Content gestures |
US9132352B1 (en) * | 2010-06-24 | 2015-09-15 | Gregory S. Rabin | Interactive system and method for rendering an object |
US8655093B2 (en) | 2010-09-02 | 2014-02-18 | Edge 3 Technologies, Inc. | Method and apparatus for performing segmentation of an image |
US8582866B2 (en) | 2011-02-10 | 2013-11-12 | Edge 3 Technologies, Inc. | Method and apparatus for disparity computation in stereo images |
US8666144B2 (en) | 2010-09-02 | 2014-03-04 | Edge 3 Technologies, Inc. | Method and apparatus for determining disparity of texture |
US8467599B2 (en) | 2010-09-02 | 2013-06-18 | Edge 3 Technologies, Inc. | Method and apparatus for confusion learning |
US8963836B2 (en) | 2010-09-17 | 2015-02-24 | Tencent Technology (Shenzhen) Company Limited | Method and system for gesture-based human-machine interaction and computer-readable medium thereof |
CN102402279B (zh) * | 2010-09-17 | 2016-05-25 | 腾讯科技(深圳)有限公司 | 基于手势的人机交互方法及系统 |
US8749484B2 (en) | 2010-10-01 | 2014-06-10 | Z124 | Multi-screen user interface with orientation based control |
WO2012093394A2 (en) * | 2011-01-06 | 2012-07-12 | Pointgrab Ltd. | Computer vision based two hand control of content |
CA2806520C (en) | 2011-01-23 | 2016-02-16 | Extreme Reality Ltd. | Methods, systems, devices and associated processing logic for generating stereoscopic images and video |
US8970589B2 (en) | 2011-02-10 | 2015-03-03 | Edge 3 Technologies, Inc. | Near-touch interaction with a stereo camera grid structured tessellations |
US9189825B2 (en) * | 2011-04-12 | 2015-11-17 | Lg Electronics Inc. | Electronic device and method for displaying stereoscopic image |
WO2012145011A1 (en) * | 2011-04-22 | 2012-10-26 | Hewlett-Packard Development Company, L.P. | Systems and methods for displaying data on large interactive devices |
GB2491473B (en) * | 2011-05-31 | 2013-08-14 | Pointgrab Ltd | Computer vision based control of a device using machine learning |
JP5845002B2 (ja) * | 2011-06-07 | 2016-01-20 | ソニー株式会社 | 画像処理装置および方法、並びにプログラム |
US20130009989A1 (en) * | 2011-07-07 | 2013-01-10 | Li-Hui Chen | Methods and systems for image segmentation and related applications |
US8971572B1 (en) | 2011-08-12 | 2015-03-03 | The Research Foundation For The State University Of New York | Hand pointing estimation for human computer interaction |
US20130080932A1 (en) * | 2011-09-27 | 2013-03-28 | Sanjiv Sirpal | Secondary single screen mode activation through user interface toggle |
US9672609B1 (en) | 2011-11-11 | 2017-06-06 | Edge 3 Technologies, Inc. | Method and apparatus for improved depth-map estimation |
US8811938B2 (en) | 2011-12-16 | 2014-08-19 | Microsoft Corporation | Providing a user interface experience based on inferred vehicle state |
WO2013095671A1 (en) | 2011-12-23 | 2013-06-27 | Intel Corporation | Transition mechanism for computing system utilizing user sensing |
US9678574B2 (en) | 2011-12-23 | 2017-06-13 | Intel Corporation | Computing system utilizing three-dimensional manipulation command gestures |
US10345911B2 (en) | 2011-12-23 | 2019-07-09 | Intel Corporation | Mechanism to provide visual feedback regarding computing system command gestures |
US9684379B2 (en) * | 2011-12-23 | 2017-06-20 | Intel Corporation | Computing system utilizing coordinated two-hand command gestures |
KR20130078490A (ko) * | 2011-12-30 | 2013-07-10 | 삼성전자주식회사 | 전자 장치 및 그의 제어 방법 |
US20150220149A1 (en) * | 2012-02-14 | 2015-08-06 | Google Inc. | Systems and methods for a virtual grasping user interface |
CN102609093A (zh) * | 2012-02-16 | 2012-07-25 | 中国农业大学 | 用手势控制视频播放的方法及装置 |
US8938124B2 (en) | 2012-05-10 | 2015-01-20 | Pointgrab Ltd. | Computer vision based tracking of a hand |
ES2443265B1 (es) * | 2012-08-16 | 2014-11-13 | Eads Construcciones Aeronauticas, S.A. | Banco de fabricación o verificación de mazos eléctricos |
GB2507963A (en) * | 2012-11-14 | 2014-05-21 | Renergy Sarl | Controlling a Graphical User Interface |
TWI502519B (zh) | 2012-11-21 | 2015-10-01 | Wistron Corp | 手勢辨識模組及手勢辨識方法 |
US20140152566A1 (en) * | 2012-12-05 | 2014-06-05 | Brent A. Safer | Apparatus and methods for image/sensory processing to control computer operations |
KR20140085055A (ko) * | 2012-12-27 | 2014-07-07 | 삼성전자주식회사 | 전자 장치 및 그의 제어 방법 |
US10721448B2 (en) | 2013-03-15 | 2020-07-21 | Edge 3 Technologies, Inc. | Method and apparatus for adaptive exposure bracketing, segmentation and scene organization |
US20140282224A1 (en) * | 2013-03-15 | 2014-09-18 | Qualcomm Incorporated | Detection of a scrolling gesture |
US9201589B2 (en) | 2013-05-21 | 2015-12-01 | Georges Antoine NASRAOUI | Selection and display of map data and location attribute data by touch input |
US9696812B2 (en) * | 2013-05-29 | 2017-07-04 | Samsung Electronics Co., Ltd. | Apparatus and method for processing user input using motion of object |
GB201314984D0 (en) | 2013-08-21 | 2013-10-02 | Sony Comp Entertainment Europe | Head-mountable apparatus and systems |
US9727915B2 (en) * | 2013-09-26 | 2017-08-08 | Trading Technologies International, Inc. | Methods and apparatus to implement spin-gesture based trade action parameter selection |
ITCO20130068A1 (it) * | 2013-12-18 | 2015-06-19 | Nu Tech S A S Di De Michele Marco & Co | Metodo per fornire comandi d'utente ad un elaboratore elettronico e relativi programma per elaborare e circuito elettronico. |
US11435895B2 (en) | 2013-12-28 | 2022-09-06 | Trading Technologies International, Inc. | Methods and apparatus to enable a trading device to accept a user input |
WO2015102658A1 (en) * | 2014-01-03 | 2015-07-09 | Intel Corporation | Systems and techniques for user interface control |
KR20160037508A (ko) * | 2014-09-29 | 2016-04-06 | 삼성전자주식회사 | 디스플레이 장치 및 그의 표시 방법 |
DE102014226553A1 (de) * | 2014-12-19 | 2016-06-23 | Robert Bosch Gmbh | Verfahren zum Betreiben einer Eingabevorrichtung, Eingabevorrichtung, Kraftfahrzeug |
CN104850340B (zh) | 2015-01-30 | 2018-11-30 | 小米科技有限责任公司 | 触控显示屏上的文档显示方法及装置 |
CN106406507B (zh) * | 2015-07-30 | 2020-03-27 | 株式会社理光 | 图像处理方法以及电子设备 |
CN105159524A (zh) * | 2015-08-03 | 2015-12-16 | 小米科技有限责任公司 | 界面显示方法及装置 |
US20170249061A1 (en) * | 2016-02-29 | 2017-08-31 | Lampix | Method and Apparatus for Providing User Interfaces with Computerized Systems and Interacting with a Virtual Environment |
TWI695296B (zh) * | 2016-04-29 | 2020-06-01 | 姚秉洋 | 內建感應器及光源模組之鍵盤裝置 |
US11182853B2 (en) | 2016-06-27 | 2021-11-23 | Trading Technologies International, Inc. | User action for continued participation in markets |
EP3629973A4 (en) * | 2017-05-26 | 2021-01-27 | Covidien LP | CONTROL DEVICE FOR IMAGING DEVICE |
US11360558B2 (en) | 2018-07-17 | 2022-06-14 | Apple Inc. | Computer systems with finger devices |
KR102164706B1 (ko) * | 2018-07-19 | 2020-10-12 | 한남대학교 산학협력단 | 초고속 문서작성을 위한 손가락 제스처 인식 기반 마우스 |
TWI710973B (zh) * | 2018-08-10 | 2020-11-21 | 緯創資通股份有限公司 | 手勢識別方法、手勢識別模組及手勢識別系統 |
CN110286780B (zh) * | 2019-06-26 | 2022-06-07 | 西南民族大学 | 一种基于机器视觉的机电混合式无人值守计算机操作装置 |
US11430414B2 (en) | 2019-10-17 | 2022-08-30 | Microsoft Technology Licensing, Llc | Eye gaze control of magnification user interface |
US11360587B1 (en) | 2020-04-07 | 2022-06-14 | Apple Inc. | Deployment systems for computer system finger devices |
US20240069643A1 (en) * | 2022-08-31 | 2024-02-29 | Youjean Cho | Physical gesture interaction with objects based on intuitive design |
Family Cites Families (60)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US484568A (en) * | 1892-10-18 | Farm-gate | ||
US4843568A (en) * | 1986-04-11 | 1989-06-27 | Krueger Myron W | Real time perception of and response to the actions of an unencumbered participant/user |
JPH0736142B2 (ja) * | 1991-10-10 | 1995-04-19 | インターナショナル・ビジネス・マシーンズ・コーポレイション | 移動指示手段の運動停止を認識する方法および情報処理装置 |
US5483261A (en) * | 1992-02-14 | 1996-01-09 | Itu Research, Inc. | Graphical input controller and method with rear screen image detection |
US5594469A (en) * | 1995-02-21 | 1997-01-14 | Mitsubishi Electric Information Technology Center America Inc. | Hand gesture machine control system |
US6115482A (en) | 1996-02-13 | 2000-09-05 | Ascent Technology, Inc. | Voice-output reading system with gesture-based navigation |
US6002808A (en) * | 1996-07-26 | 1999-12-14 | Mitsubishi Electric Information Technology Center America, Inc. | Hand gesture control system |
US6720949B1 (en) * | 1997-08-22 | 2004-04-13 | Timothy R. Pryor | Man machine interfaces and applications |
US6181343B1 (en) * | 1997-12-23 | 2001-01-30 | Philips Electronics North America Corp. | System and method for permitting three-dimensional navigation through a virtual reality environment using camera-based gesture inputs |
US6195104B1 (en) * | 1997-12-23 | 2001-02-27 | Philips Electronics North America Corp. | System and method for permitting three-dimensional navigation through a virtual reality environment using camera-based gesture inputs |
US6269172B1 (en) * | 1998-04-13 | 2001-07-31 | Compaq Computer Corporation | Method for tracking the motion of a 3-D figure |
US6950534B2 (en) * | 1998-08-10 | 2005-09-27 | Cybernet Systems Corporation | Gesture-controlled interfaces for self-service machines and other applications |
US6204852B1 (en) * | 1998-12-09 | 2001-03-20 | Lucent Technologies Inc. | Video hand image three-dimensional computer interface |
JP2000298544A (ja) * | 1999-04-12 | 2000-10-24 | Matsushita Electric Ind Co Ltd | 入出力装置と入出力方法 |
US6771834B1 (en) | 1999-07-02 | 2004-08-03 | Intel Corporation | Method for segmenting a digital image |
US6417836B1 (en) | 1999-08-02 | 2002-07-09 | Lucent Technologies Inc. | Computer input device having six degrees of freedom for controlling movement of a three-dimensional object |
RU2175143C1 (ru) | 2000-04-04 | 2001-10-20 | Свириденко Андрей Владимирович | Способ дистанционного управления |
US6624833B1 (en) * | 2000-04-17 | 2003-09-23 | Lucent Technologies Inc. | Gesture-based input interface system with shadow detection |
US6531999B1 (en) * | 2000-07-13 | 2003-03-11 | Koninklijke Philips Electronics N.V. | Pointing direction calibration in video conferencing and other camera-based system applications |
US6795068B1 (en) | 2000-07-21 | 2004-09-21 | Sony Computer Entertainment Inc. | Prop input device and method for mapping an object from a two-dimensional camera image to a three-dimensional space for controlling action in a game program |
US7095401B2 (en) * | 2000-11-02 | 2006-08-22 | Siemens Corporate Research, Inc. | System and method for gesture interface |
US6600475B2 (en) * | 2001-01-22 | 2003-07-29 | Koninklijke Philips Electronics N.V. | Single camera system for gesture-based input and target indication |
JP2002259046A (ja) | 2001-02-28 | 2002-09-13 | Tomoya Sonoda | 空中で手描きした文字・記号入力システム |
US6804396B2 (en) * | 2001-03-28 | 2004-10-12 | Honda Giken Kogyo Kabushiki Kaisha | Gesture recognition system |
US6888960B2 (en) * | 2001-03-28 | 2005-05-03 | Nec Corporation | Fast optimal linear approximation of the images of variably illuminated solid objects for recognition |
US6943774B2 (en) * | 2001-04-02 | 2005-09-13 | Matsushita Electric Industrial Co., Ltd. | Portable communication terminal, information display device, control input device and control input method |
US6539931B2 (en) * | 2001-04-16 | 2003-04-01 | Koninklijke Philips Electronics N.V. | Ball throwing assistant |
US6594616B2 (en) * | 2001-06-18 | 2003-07-15 | Microsoft Corporation | System and method for providing a mobile input device |
US7007236B2 (en) * | 2001-09-14 | 2006-02-28 | Accenture Global Services Gmbh | Lab window collaboration |
JP2003131785A (ja) * | 2001-10-22 | 2003-05-09 | Toshiba Corp | インタフェース装置および操作制御方法およびプログラム製品 |
US7340077B2 (en) * | 2002-02-15 | 2008-03-04 | Canesta, Inc. | Gesture recognition system using depth perceptive sensors |
GB0204652D0 (en) * | 2002-02-28 | 2002-04-10 | Koninkl Philips Electronics Nv | A method of providing a display gor a gui |
US7821541B2 (en) * | 2002-04-05 | 2010-10-26 | Bruno Delean | Remote control apparatus using gesture recognition |
US20030214481A1 (en) * | 2002-05-14 | 2003-11-20 | Yongming Xiong | Finger worn and operated input device and method of use |
US20040001113A1 (en) * | 2002-06-28 | 2004-01-01 | John Zipperer | Method and apparatus for spline-based trajectory classification, gesture detection and localization |
US6996460B1 (en) * | 2002-10-03 | 2006-02-07 | Advanced Interfaces, Inc. | Method and apparatus for providing virtual touch interaction in the drive-thru |
US9177387B2 (en) * | 2003-02-11 | 2015-11-03 | Sony Computer Entertainment Inc. | Method and apparatus for real time motion capture |
US7665041B2 (en) * | 2003-03-25 | 2010-02-16 | Microsoft Corporation | Architecture for controlling a computer using hand gestures |
WO2004107266A1 (en) * | 2003-05-29 | 2004-12-09 | Honda Motor Co., Ltd. | Visual tracking using depth data |
US7038661B2 (en) * | 2003-06-13 | 2006-05-02 | Microsoft Corporation | Pointing device and cursor for use in intelligent computing environments |
US7411575B2 (en) * | 2003-09-16 | 2008-08-12 | Smart Technologies Ulc | Gesture recognition method and touch system incorporating the same |
KR100588042B1 (ko) * | 2004-01-14 | 2006-06-09 | 한국과학기술연구원 | 인터액티브 프레젠테이션 시스템 |
WO2005084209A2 (en) * | 2004-02-27 | 2005-09-15 | University Of Florida Research Foundation, Inc. | Interactive virtual characters for training including medical diagnosis training |
US20050212753A1 (en) * | 2004-03-23 | 2005-09-29 | Marvit David L | Motion controlled remote controller |
CN100573548C (zh) * | 2004-04-15 | 2009-12-23 | 格斯图尔泰克股份有限公司 | 跟踪双手运动的方法和设备 |
US7593593B2 (en) * | 2004-06-16 | 2009-09-22 | Microsoft Corporation | Method and system for reducing effects of undesired signals in an infrared imaging system |
US7710395B2 (en) * | 2004-07-14 | 2010-05-04 | Alken, Inc. | Head-mounted pointing and control device |
EP2000894B1 (en) | 2004-07-30 | 2016-10-19 | Apple Inc. | Mode-based graphical user interfaces for touch sensitive input devices |
US8560972B2 (en) * | 2004-08-10 | 2013-10-15 | Microsoft Corporation | Surface UI for gesture-based interaction |
JP4088282B2 (ja) | 2004-08-20 | 2008-05-21 | 清実 中村 | コンピュータ入力方法と装置 |
US7359564B2 (en) | 2004-10-29 | 2008-04-15 | Microsoft Corporation | Method and system for cancellation of ambient light using light frequency |
US8137195B2 (en) * | 2004-11-23 | 2012-03-20 | Hillcrest Laboratories, Inc. | Semantic gaming and application transformation |
US7492367B2 (en) * | 2005-03-10 | 2009-02-17 | Motus Corporation | Apparatus, system and method for interpreting and reproducing physical motion |
JP4686595B2 (ja) * | 2005-03-17 | 2011-05-25 | 本田技研工業株式会社 | クリティカルポイント解析に基づくポーズ推定 |
KR100687737B1 (ko) * | 2005-03-19 | 2007-02-27 | 한국전자통신연구원 | 양손 제스쳐에 기반한 가상 마우스 장치 및 방법 |
US7907117B2 (en) | 2006-08-08 | 2011-03-15 | Microsoft Corporation | Virtual controller for visual displays |
JP4926799B2 (ja) * | 2006-10-23 | 2012-05-09 | キヤノン株式会社 | 情報処理装置、情報処理方法 |
US8005263B2 (en) * | 2007-10-26 | 2011-08-23 | Honda Motor Co., Ltd. | Hand sign recognition using label assignment |
US9292092B2 (en) | 2007-10-30 | 2016-03-22 | Hewlett-Packard Development Company, L.P. | Interactive display system with collaborative gesture detection |
US20090221368A1 (en) * | 2007-11-28 | 2009-09-03 | Ailive Inc., | Method and system for creating a shared game space for a networked game |
-
2006
- 2006-08-08 US US11/463,183 patent/US7907117B2/en not_active Expired - Fee Related
-
2007
- 2007-05-29 CA CA2880054A patent/CA2880054C/en active Active
- 2007-05-29 JP JP2009523752A patent/JP4965653B2/ja active Active
- 2007-05-29 CN CN2007800295222A patent/CN101501614B/zh active Active
- 2007-05-29 BR BRPI0714232A patent/BRPI0714232B1/pt active IP Right Grant
- 2007-05-29 CA CA2880053A patent/CA2880053C/en active Active
- 2007-05-29 EP EP07777287.9A patent/EP2049976B1/en active Active
- 2007-05-29 KR KR1020097002523A patent/KR101292467B1/ko active IP Right Grant
- 2007-05-29 CA CA2880052A patent/CA2880052C/en active Active
- 2007-05-29 MX MX2009000305A patent/MX2009000305A/es active IP Right Grant
- 2007-05-29 CA CA2654744A patent/CA2654744C/en active Active
- 2007-05-29 RU RU2009104062/08A patent/RU2439653C2/ru active
- 2007-05-29 MY MYPI20090075A patent/MY161823A/en unknown
- 2007-05-29 WO PCT/US2007/012546 patent/WO2008018943A1/en active Application Filing
-
2008
- 2008-11-27 ZA ZA2008/10106A patent/ZA200810106B/en unknown
- 2008-12-18 IL IL196018A patent/IL196018A/en not_active IP Right Cessation
-
2009
- 2009-01-09 NO NO20090116A patent/NO20090116L/no not_active Application Discontinuation
- 2009-04-23 US US12/428,492 patent/US8115732B2/en active Active
-
2010
- 2010-10-14 US US12/904,820 patent/US8049719B2/en active Active
-
2012
- 2012-01-09 US US13/346,472 patent/US8552976B2/en active Active
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
RU2672624C2 (ru) * | 2013-09-04 | 2018-11-16 | Маттиас Рат | Графический интерфейс пользователя, обеспечивающий функциональные возможности виртуального супермасштабирования |
Also Published As
Similar Documents
Publication | Publication Date | Title |
---|---|---|
RU2009104062A (ru) | Виртуальный контроллер для визуальных отображений | |
US10511778B2 (en) | Method and apparatus for push interaction | |
CN103713737B (zh) | 用于智能眼镜的虚拟键盘系统 | |
KR101809636B1 (ko) | 컴퓨터 장치의 원격 제어 | |
CN102253713B (zh) | 面向三维立体影像显示系统 | |
KR101652535B1 (ko) | 차량 인터페이스를 위한 제스처 기반 제어 시스템 | |
KR20160080109A (ko) | 사용자 인터페이스 제어를 위한 시스템 및 기법 | |
TWI705356B (zh) | 虛擬實境場景下的輸入方法和裝置 | |
JP2008159032A (ja) | 操作制御方法およびシステム | |
WO2017021902A1 (en) | System and method for gesture based measurement of virtual reality space | |
CN103677240A (zh) | 虚拟触摸交互方法和虚拟触摸交互设备 | |
CN102750044A (zh) | 一种虚拟键盘装置及其实现方法 | |
CN203386146U (zh) | 基于红外视频定位的人机交互装置 | |
JP2008226279A (ja) | 仮想空間内位置指示装置 | |
CN103488287A (zh) | 一种数据手套输入方法 | |
CN103389793B (zh) | 人机交互方法和系统 | |
CN107885315B (zh) | 一种提高触控系统跟踪精确度的方法 | |
CN111273773B (zh) | 一种头戴式vr环境的人机交互方法及系统 | |
CN117784924A (zh) | 扩展现实空间中虚拟交互界面控制方法、装置和头戴设备 | |
CN204790887U (zh) | 一种手套式输入器 | |
WO2010142732A1 (en) | A touch method of inputting instructions for controlling a computer program, and a system for implementing the method | |
KR20130001420A (ko) | 사용자의 위치를 표시하는 장치 및 방법 | |
EP3374847A1 (en) | Controlling operation of a 3d tracking device |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PC41 | Official registration of the transfer of exclusive right |
Effective date: 20150306 |