RU2012152935A - Устройство распознавания жестов, способ распознавания жестов и программа - Google Patents

Устройство распознавания жестов, способ распознавания жестов и программа Download PDF

Info

Publication number
RU2012152935A
RU2012152935A RU2012152935/08A RU2012152935A RU2012152935A RU 2012152935 A RU2012152935 A RU 2012152935A RU 2012152935/08 A RU2012152935/08 A RU 2012152935/08A RU 2012152935 A RU2012152935 A RU 2012152935A RU 2012152935 A RU2012152935 A RU 2012152935A
Authority
RU
Russia
Prior art keywords
image
gesture recognition
front side
recognition device
state
Prior art date
Application number
RU2012152935/08A
Other languages
English (en)
Inventor
Осаму СИГЕТА
Такуро НОДА
Original Assignee
Сони Корпорейшн
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Сони Корпорейшн filed Critical Сони Корпорейшн
Publication of RU2012152935A publication Critical patent/RU2012152935A/ru

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/002Specific input/output arrangements not covered by G06F3/01 - G06F3/16
    • G06F3/005Input arrangements through a video camera
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/0304Detection arrangements using opto-electronic means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/20Analysis of motion
    • G06T7/246Analysis of motion using feature-based methods, e.g. the tracking of corners or segments
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20Movements or behaviour, e.g. gesture recognition
    • G06V40/28Recognition of hand or arm movements, e.g. recognition of deaf sign language
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10016Video; Image sequence
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30196Human being; Person

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Psychiatry (AREA)
  • Social Psychology (AREA)
  • Image Analysis (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

1. Устройство распознавания жестов, содержащее:первый блок определения, предназначенный для определения изменения сформированного изображения между состоянием, в котором передняя сторона датчика формирования изображения не закрыта, и состоянием, в котором передняя сторона датчика формирования изображения закрыта; ивторой блок определения, предназначенный для определения области, в которой градиент значения яркости сформированного изображения меньше порогового значения в сформированном изображении в состоянии, в котором передняя сторона датчика формирования изображения закрыта.2. Устройство распознавания жестов по п.1,в котором первый блок определения предназначен для определения изменения сформированного изображения на основе результата отслеживания характерных точек в сформированном изображении.3. Устройство распознавания жестов по п.2,в котором первый блок определения предназначен для определения, что характерные точки, отслеживаемые в сформированных изображениях в состоянии, в котором передняя сторона датчика формирования изображения не закрыта, потеряны в сформированных изображениях в состоянии, в котором передняя сторона датчика формирования изображения закрыта рукой.4. Устройство распознавания жестов по п.3,в котором первый блок определения предназначен для определения, верно ли то, что доля характерных точек, потерянных при отслеживании характерных точек, которые отслеживали в нескольких сформированных изображениях в течение заданного периода времени, больше или равна некоторому пороговому значению.5. Устройство распознавания жестов по п.4, дополнительно содержащее:блок определени

Claims (15)

1. Устройство распознавания жестов, содержащее:
первый блок определения, предназначенный для определения изменения сформированного изображения между состоянием, в котором передняя сторона датчика формирования изображения не закрыта, и состоянием, в котором передняя сторона датчика формирования изображения закрыта; и
второй блок определения, предназначенный для определения области, в которой градиент значения яркости сформированного изображения меньше порогового значения в сформированном изображении в состоянии, в котором передняя сторона датчика формирования изображения закрыта.
2. Устройство распознавания жестов по п.1,
в котором первый блок определения предназначен для определения изменения сформированного изображения на основе результата отслеживания характерных точек в сформированном изображении.
3. Устройство распознавания жестов по п.2,
в котором первый блок определения предназначен для определения, что характерные точки, отслеживаемые в сформированных изображениях в состоянии, в котором передняя сторона датчика формирования изображения не закрыта, потеряны в сформированных изображениях в состоянии, в котором передняя сторона датчика формирования изображения закрыта рукой.
4. Устройство распознавания жестов по п.3,
в котором первый блок определения предназначен для определения, верно ли то, что доля характерных точек, потерянных при отслеживании характерных точек, которые отслеживали в нескольких сформированных изображениях в течение заданного периода времени, больше или равна некоторому пороговому значению.
5. Устройство распознавания жестов по п.4, дополнительно содержащее:
блок определения перемещения предназначен для определения перемещения датчика формирования изображения, что делают на основе тенденции перемещения нескольких характерных точек,
при этом заданный период времени устанавливают в виде периода, в течение которого датчик формирования изображения не перемещался.
6. Устройство распознавания жестов по п.1,
в котором второй блок определения предназначен для определения области, в которой градиент значения яркости сформированного изображения меньше порогового значения на основе результата вычисления гистограммы значений яркости, относящейся к сформированному изображению.
7. Устройство распознавания жестов по п.6,
в котором второй блок определения предназначен для определения, верно ли, что значение, полученное путем нормирования суммы частот, близких к максимальной частоте, общей суммой частот, больше или равно пороговому значению во время заданного периода времени с использованием гистограммы значений яркости, соответствующей нескольким изображениям, сформированным в заданный период времени.
8. Устройство распознавания жестов по п.1,
в котором второй блок определения предназначен для определения области, в которой градиент значения яркости сформированного изображения меньше порогового значения на основе изображения контуров, соответствующего сформированному изображению.
9. Устройство распознавания жестов по п.8,
в котором второй блок определения предназначен для определения, верно ли, что доля областей контуров в изображении контуров меньше порогового значения в течение заданного периода времени с использованием изображений контуров, соответствующих нескольким изображениям, сформированным в заданный период времени.
10. Устройство распознавания жестов по п.1,
в котором первый и второй блоки определения предназначены для осуществления процесса для части сформированного изображения, а не для всего сформированного изображения.
11. Устройство распознавания жестов по п.1,
в котором первый и второй блоки определения предназначены для осуществления процесса для изображения в оттенках серого, выработанного из сформированного изображения с разрешением, которое меньше разрешения сформированного изображения.
12. Устройство распознавания жестов по п.1,
в котором распознают жест, объединяющий жест закрывания передней стороны датчика формирования изображения и жест открывания передней стороны датчика формирования изображения.
13. Устройство распознавания жестов по п.1, дополнительно содержащее:
фотографический датчик, предназначенный для формирования изображения с передней стороны.
14. Способ распознавания жестов, содержащий:
определяют изменение сформированного изображения между состоянием, в котором передняя сторона датчика формирования изображения закрыта, и состоянием, в котором передняя сторона датчика формирования изображения не закрыта; и
определяют область, в котором градиент значения яркости сформированного изображения меньше порогового значения в сформированном изображении в состоянии, в котором передняя сторона датчика формирования изображения закрыта.
15. Программа, работа которой приводит к тому, что компьютер выполняет следующее:
определяют изменение сформированного изображения между состоянием, в котором передняя сторона датчика формирования изображения закрыта, и состоянием, в котором передняя сторона датчика формирования изображения не закрыта; и
определяют область, в котором градиент значения яркости сформированного изображения меньше порогового значения в сформированном изображении в состоянии, в котором передняя сторона датчика формирования изображения закрыта.
RU2012152935/08A 2010-06-15 2011-03-30 Устройство распознавания жестов, способ распознавания жестов и программа RU2012152935A (ru)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2010-136399 2010-06-15
JP2010136399A JP5685837B2 (ja) 2010-06-15 2010-06-15 ジェスチャ認識装置、ジェスチャ認識方法およびプログラム
PCT/JP2011/057944 WO2011158542A1 (ja) 2010-06-15 2011-03-30 ジェスチャ認識装置、ジェスチャ認識方法およびプログラム

Publications (1)

Publication Number Publication Date
RU2012152935A true RU2012152935A (ru) 2014-06-20

Family

ID=45347954

Family Applications (1)

Application Number Title Priority Date Filing Date
RU2012152935/08A RU2012152935A (ru) 2010-06-15 2011-03-30 Устройство распознавания жестов, способ распознавания жестов и программа

Country Status (7)

Country Link
US (1) US20130088426A1 (ru)
EP (1) EP2584531A1 (ru)
JP (1) JP5685837B2 (ru)
CN (1) CN102939617A (ru)
BR (1) BR112012031335A2 (ru)
RU (1) RU2012152935A (ru)
WO (1) WO2011158542A1 (ru)

Families Citing this family (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110181587A1 (en) * 2010-01-22 2011-07-28 Sony Corporation Image display device having imaging device
US20130211843A1 (en) * 2012-02-13 2013-08-15 Qualcomm Incorporated Engagement-dependent gesture recognition
US9600744B2 (en) 2012-04-24 2017-03-21 Stmicroelectronics S.R.L. Adaptive interest rate control for visual search
JP5859373B2 (ja) * 2012-05-09 2016-02-10 Kddi株式会社 情報管理装置、情報管理方法、及びプログラム
KR102010955B1 (ko) * 2013-01-07 2019-08-14 삼성전자 주식회사 프리뷰 제어 방법 및 이를 구현하는 휴대 단말
US9791921B2 (en) * 2013-02-19 2017-10-17 Microsoft Technology Licensing, Llc Context-aware augmented reality object commands
JP5928386B2 (ja) * 2013-03-22 2016-06-01 カシオ計算機株式会社 表示制御装置、表示制御方法及びプログラム
US9600993B2 (en) * 2014-01-27 2017-03-21 Atlas5D, Inc. Method and system for behavior detection
US9536136B2 (en) * 2015-03-24 2017-01-03 Intel Corporation Multi-layer skin detection and fused hand pose matching
US11017901B2 (en) 2016-08-02 2021-05-25 Atlas5D, Inc. Systems and methods to identify persons and/or identify and quantify pain, fatigue, mood, and intent with protection of privacy
DE112017004394T5 (de) * 2016-09-01 2019-05-16 Mitsubishi Electric Corporation Gestenbeurteilungseinrichtung, Gestenbedienungseinrichtung und Gestenbeurteilungsverfahren
WO2018198499A1 (ja) * 2017-04-27 2018-11-01 ソニー株式会社 情報処理装置、情報処理方法、及び記録媒体
CN107479712B (zh) * 2017-08-18 2020-08-04 北京小米移动软件有限公司 基于头戴式显示设备的信息处理方法及装置
CN108288276B (zh) * 2017-12-29 2021-10-19 安徽慧视金瞳科技有限公司 一种投影交互系统中触摸模式下的干扰滤除方法
CN109409236B (zh) * 2018-09-28 2020-12-08 江苏理工学院 三维静态手势识别方法和装置
DE112021002222T5 (de) * 2021-01-26 2023-02-23 Boe Technology Group Co., Ltd. Steuerungsverfahren, elektronische Vorrichtung und Speichermedium

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07146749A (ja) 1993-11-25 1995-06-06 Casio Comput Co Ltd スイッチ装置
US6625216B1 (en) * 1999-01-27 2003-09-23 Matsushita Electic Industrial Co., Ltd. Motion estimation using orthogonal transform-domain block matching
US6346933B1 (en) * 1999-09-21 2002-02-12 Seiko Epson Corporation Interactive display presentation system
KR100444784B1 (ko) * 2001-11-15 2004-08-21 주식회사 에이로직스 에지검출을 통한 경보발생방법 및 보안 시스템
DE602004006190T8 (de) * 2003-03-31 2008-04-10 Honda Motor Co., Ltd. Vorrichtung, Verfahren und Programm zur Gestenerkennung
JP2006302199A (ja) * 2005-04-25 2006-11-02 Hitachi Ltd 部分的にウィンドウをロックする情報処理装置およびこの情報処理装置を動作させるプログラム
DE102006037156A1 (de) * 2006-03-22 2007-09-27 Volkswagen Ag Interaktive Bedienvorrichtung und Verfahren zum Betreiben der interaktiven Bedienvorrichtung
US9317124B2 (en) * 2006-09-28 2016-04-19 Nokia Technologies Oy Command input by hand gestures captured from camera
JP4967666B2 (ja) * 2007-01-10 2012-07-04 オムロン株式会社 画像処理装置および方法、並びに、プログラム
JP4898531B2 (ja) * 2007-04-12 2012-03-14 キヤノン株式会社 画像処理装置及びその制御方法、並びにコンピュータプログラム
US20090174674A1 (en) * 2008-01-09 2009-07-09 Qualcomm Incorporated Apparatus and methods for a touch user interface using an image sensor
US8184196B2 (en) * 2008-08-05 2012-05-22 Qualcomm Incorporated System and method to generate depth data using edge detection

Also Published As

Publication number Publication date
EP2584531A1 (en) 2013-04-24
CN102939617A (zh) 2013-02-20
US20130088426A1 (en) 2013-04-11
WO2011158542A1 (ja) 2011-12-22
BR112012031335A2 (pt) 2016-10-25
JP5685837B2 (ja) 2015-03-18
JP2012003414A (ja) 2012-01-05

Similar Documents

Publication Publication Date Title
RU2012152935A (ru) Устройство распознавания жестов, способ распознавания жестов и программа
US11450146B2 (en) Gesture recognition method, apparatus, and device
US20160154469A1 (en) Mid-air gesture input method and apparatus
CN106934333B (zh) 一种手势识别方法及系统
CN105718031B (zh) 手势辨识方法及其装置
CN103714345B (zh) 一种双目立体视觉检测手指指尖空间位置的方法与系统
JP2014137756A5 (ru)
JP2017045283A5 (ru)
JP2015045966A (ja) 画像処理装置、画像処理方法および画像処理プログラム
JP5180997B2 (ja) まぶた検出装置及びプログラム
JP6454984B2 (ja) 深度画像に基づく手の位置確定方法と装置
JP2012011137A5 (ru)
WO2016099729A1 (en) Technologies for robust two dimensional gesture recognition
RU2014139838A (ru) Устройство обнаружения трехмерных объектов
JP2009265732A (ja) 画像処理装置及びその方法
CN110689555A (zh) 基于前景检测的kcf跟踪目标丢失检测方法及系统
TW201501080A (zh) 目標偵測與追蹤方法及系統
JP2008015848A (ja) 物体領域探索方法,物体領域探索プログラムおよび物体領域探索装置
WO2022227548A1 (zh) 抛洒事件检测方法、装置、电子设备、存储介质及计算机程序产品
WO2014121573A1 (zh) 基于非局部均值的susan边缘检测方法及系统
Feng et al. Iris localization with dual coarse-to-fine strategy
Zhang et al. Hand gesture detection and segmentation based on difference background image with complex background
CN109461171A (zh) 基于多通道改进DoG滤波的红外弱小目标检测算法
JP2014048702A5 (ru)
JP6165513B2 (ja) ハンドジェスチャトラッキングシステム

Legal Events

Date Code Title Description
FA92 Acknowledgement of application withdrawn (lack of supplementary materials submitted)

Effective date: 20150707