RU2014101965A - IMAGE PROCESSOR CONTAINING A GESTURE RECOGNITION SYSTEM WITH RECOGNITION OF A STATIC POSITION OF HAND BRUSH, BASED ON DYNAMIC CHANGE OF TIME - Google Patents

IMAGE PROCESSOR CONTAINING A GESTURE RECOGNITION SYSTEM WITH RECOGNITION OF A STATIC POSITION OF HAND BRUSH, BASED ON DYNAMIC CHANGE OF TIME Download PDF

Info

Publication number
RU2014101965A
RU2014101965A RU2014101965/08A RU2014101965A RU2014101965A RU 2014101965 A RU2014101965 A RU 2014101965A RU 2014101965/08 A RU2014101965/08 A RU 2014101965/08A RU 2014101965 A RU2014101965 A RU 2014101965A RU 2014101965 A RU2014101965 A RU 2014101965A
Authority
RU
Russia
Prior art keywords
hand
interest
area
contour
points
Prior art date
Application number
RU2014101965/08A
Other languages
Russian (ru)
Inventor
Александр Александрович Петюшко
Иван Леонидович Мазуренко
Дмитрий Николаевич Бабин
Алексей Александрович Летуновский
Александр Борисович Холоденко
Original Assignee
ЭлЭсАй Корпорейшн
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ЭлЭсАй Корпорейшн filed Critical ЭлЭсАй Корпорейшн
Priority to RU2014101965/08A priority Critical patent/RU2014101965A/en
Priority to PCT/US2014/047744 priority patent/WO2015112194A2/en
Publication of RU2014101965A publication Critical patent/RU2014101965A/en

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/107Static hand or arm
    • G06V40/11Hand-related biometrics; Hand pose recognition
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/40Extraction of image or video features
    • G06V10/42Global feature extraction by analysis of the whole pattern, e.g. using frequency domain transformations or autocorrelation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/40Extraction of image or video features
    • G06V10/46Descriptors for shape, contour or point-related descriptors, e.g. scale invariant feature transform [SIFT] or bags of words [BoW]; Salient regional features

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Human Computer Interaction (AREA)
  • Image Analysis (AREA)
  • Image Processing (AREA)

Abstract

1. Способ, содержащий этапы, на которых:идентифицируют представляющую интерес область кисти руки в по меньшей мере одном изображении;извлекают контур представляющей интерес области кисти руки;вычисляют вектор признаков на основе, по меньшей мере частично, извлеченного контура;распознают статическую позу представляющей интерес области кисти руки с использованием операции динамического изменения масштаба времени на основе, по меньшей мере частично, вектора признаков;при этом данные этапы выполняются в процессоре изображений, который содержит процессор, соединенный с памятью.2. Способ по п. 1, в котором этапы выполняются в модуле распознавания статической позы из состава системы распознавания жестов в процессоре изображений.3. Способ по п. 1, в котором на этапе идентификации представляющей интерес области кисти руки генерируют изображение кисти руки, содержащее двоичную маску области, представляющей интерес, в которой пиксели в пределах представляющей интерес области кисти руки имеют первое двоичное значение, и пиксели за пределами представляющей интерес области кисти руки имеют второе двоичное значение, комплементарное к первому двоичному значению.4. Способ по п. 1, дополнительно содержащий этапы, на которых:идентифицируют границу ладони представляющей интерес области кисти руки;модифицируют представляющую интерес область кисти руки для исключения из представляющей интерес области кисти руки любых пикселей, расположенных ниже идентифицированной границы ладони.5. Способ по п. 1, в котором извлеченный контур содержит упорядоченный список из n точек c, c, …, c.6. Способ по п. 5, в котором вектор признаков содер�1. A method comprising the steps of: identifying a hand region of interest in at least one image; extracting a contour of the hand region of interest; calculating a feature vector based at least in part on the extracted contour; recognizing a static posture of the hand of interest area of the hand using a dynamic time zoom operation based at least in part on a feature vector; wherein these steps are performed in an image processor that includes a processor coupled to a memory. The method according to claim 1, wherein the steps are performed in a static posture recognition module of a gesture recognition system in an image processor. The method of claim 1, wherein in the step of identifying a hand region of interest, generating a hand image comprising a binary mask of the region of interest, in which pixels within the hand region of interest have a first binary value, and pixels outside the region of interest areas of the hand have a second binary value complementary to the first binary value.4. The method according to claim 1, further comprising the steps of: identifying a palm boundary of the hand area of interest; modifying the hand area of interest to exclude from the hand area of interest any pixels located below the identified palm boundary. The method according to claim 1, wherein the extracted contour contains an ordered list of n points c, c, ..., c.6. The method according to claim 5, wherein the feature vector contains

Claims (20)

1. Способ, содержащий этапы, на которых:1. A method comprising the steps of: идентифицируют представляющую интерес область кисти руки в по меньшей мере одном изображении;identifying a region of interest of the hand in at least one image; извлекают контур представляющей интерес области кисти руки;extracting the contour of the area of interest of the hand; вычисляют вектор признаков на основе, по меньшей мере частично, извлеченного контура;calculating a feature vector based at least in part on the extracted outline; распознают статическую позу представляющей интерес области кисти руки с использованием операции динамического изменения масштаба времени на основе, по меньшей мере частично, вектора признаков;recognize the static pose of the area of interest of the hand using the operation of dynamically changing the time scale based, at least in part, on the feature vector; при этом данные этапы выполняются в процессоре изображений, который содержит процессор, соединенный с памятью.however, these steps are performed in the image processor, which contains a processor connected to the memory. 2. Способ по п. 1, в котором этапы выполняются в модуле распознавания статической позы из состава системы распознавания жестов в процессоре изображений.2. The method of claim 1, wherein the steps are performed in the static pose recognition module of the gesture recognition system in the image processor. 3. Способ по п. 1, в котором на этапе идентификации представляющей интерес области кисти руки генерируют изображение кисти руки, содержащее двоичную маску области, представляющей интерес, в которой пиксели в пределах представляющей интерес области кисти руки имеют первое двоичное значение, и пиксели за пределами представляющей интерес области кисти руки имеют второе двоичное значение, комплементарное к первому двоичному значению.3. The method according to claim 1, in which at the stage of identification of the area of interest of the hand of the hand generate an image of the hand containing a binary mask of the area of interest in which the pixels within the area of interest of the hand have the first binary value, and the pixels outside areas of interest in the hand have a second binary value complementary to the first binary value. 4. Способ по п. 1, дополнительно содержащий этапы, на которых:4. The method according to claim 1, further comprising stages in which: идентифицируют границу ладони представляющей интерес области кисти руки;identify the border of the palm of interest to the area of the hand; модифицируют представляющую интерес область кисти руки для исключения из представляющей интерес области кисти руки любых пикселей, расположенных ниже идентифицированной границы ладони.modifying the area of interest of the hand of interest to exclude from the area of interest of the hand of any pixel located below the identified border of the palm. 5. Способ по п. 1, в котором извлеченный контур содержит упорядоченный список из n точек c1, c2, …, cn.5. The method according to claim 1, in which the extracted circuit contains an ordered list of n points c 1 , c 2 , ..., c n . 6. Способ по п. 5, в котором вектор признаков содержит упорядоченный список из n радиус-векторов r1, r2, …, rn, соответствующих соответственным из n точек c1, c2, …, cn контура.6. The method according to claim 5, in which the feature vector contains an ordered list of n radius vectors r 1 , r 2 , ..., r n corresponding to the corresponding of n points c 1 , c 2 , ..., c n of the contour. 7. Способ по п. 6, в котором вектор признаков дополнительно содержит упорядоченный список пар (r1, φ1), (r2, φ2), …, (rn, φn), где φk обозначает угол, связанный с радиус-вектором rk.7. The method according to claim 6, in which the feature vector further comprises an ordered list of pairs (r 1 , φ 1 ), (r 2 , φ 2 ), ..., (r n , φ n ), where φ k denotes the angle associated with radius vector r k . 8. Способ по п. 1, дополнительно содержащий этапы, на которых:8. The method according to p. 1, further comprising stages in which: определяют, соответствует ли извлеченный контур конкретному заранее определенному одному из варианта для кисти левой руки и варианта для кисти правой руки, иdetermining whether the extracted contour corresponds to a specific predetermined one of the options for the left hand and the option for the right hand, and если извлеченный контур не соответствует конкретному заранее определенному одному из варианта для кисти левой руки и варианта для кисти правой руки, то нормируют извлеченный контур, чтобы он соответствовал этому конкретному заранее определенному одному из варианта для кисти левой руки и варианта для кисти правой руки.if the extracted contour does not correspond to a specific predetermined one of the options for the left hand brush and the option for the right hand brush, then the extracted contour is normalized to correspond to this specific predetermined one of the option for the left hand brush and the option for the right hand brush. 9. Способ по п. 1, дополнительно содержащий этапы, на которых:9. The method according to p. 1, further comprising stages in which: определяют первую центральную точку в качестве центра масс извлеченного контура и вторую центральную точку в качестве центра круга с максимальным периметром, который можно вписать в извлеченный контур;determining a first central point as the center of mass of the extracted contour and a second central point as the center of the circle with a maximum perimeter that can be entered into the extracted contour; сравнивают первую и вторую центральные точки для определения того, соответствует ли извлеченный контур варианту для кисти левой руки или варианту для кисти правой руки.comparing the first and second center points to determine whether the extracted contour matches the option for the left hand or the option for the right hand. 10. Способ по п. 9, в котором вторую центральную точку определяют путем применения итерационного процесса к первоначальной центральной точке, причем итерационный процесс содержит этапы, на которых:10. The method according to p. 9, in which the second center point is determined by applying an iterative process to the original center point, and the iterative process comprises the steps in which: вычисляют расстояния между точками контура и первоначальной центральной точкой;calculate the distance between the contour points and the original center point; вычисляют локальные минимумы упомянутых расстояний;calculating local minima of said distances; вычисляют новую центральную точку, основываясь, по меньшей мере частично, на локальных минимумах; иcalculating a new center point based at least in part on local minima; and повторяют упомянутое вычисление с использованием новой центральной точки до тех пор, пока не будет удовлетворено заданное свойство сходимости.repeat the above calculation using a new center point until the specified convergence property is satisfied. 11. Способ по п. 5, дополнительно содержащий этап, на котором регулируют распределение точек извлеченного контура путем преобразования упорядоченного списка точек c1, …,cn в обработанный список из m точек cc1,…,ccm, где расстояния ||cci-cci+1|| приблизительно равны для всех i=1… m-1, и где m может, но необязательно, быть равно n.11. The method according to claim 5, further comprising adjusting the distribution of points of the extracted contour by converting an ordered list of points c 1 , ..., c n into a processed list of m points cc 1 , ..., cc m , where the distances || cc i -cc i + 1 || are approximately equal for all i = 1 ... m-1, and where m may, but not necessarily, be equal to n. 12. Способ по п. 1, в котором операция динамического изменения масштаба времени содержит этапы, на которых:12. The method according to p. 1, in which the operation of dynamically changing the time scale comprises the steps of: идентифицируют пары разрешенных списков целочисленных индексов; иidentify pairs of allowed lists of integer indices; and вычисляют минимальную сумму степени сходства по идентифицированным парам разрешенных списков целочисленных индексов.calculate the minimum sum of the degree of similarity for the identified pairs of allowed lists of integer indices. 13. Способ по п. 12, в котором разрешенные списки целочисленных индексов в конкретной одной из пар могут отличаться друг от друга на не более чем заданное пороговое значение.13. The method according to p. 12, in which the allowed lists of integer indices in a particular one of the pairs can differ from each other by no more than a predetermined threshold value. 14. Способ по п. 12, в котором не допускается, чтобы разрешенные списки целочисленных индексов в конкретной одной из пар имели длину сегмента, которая превышает заданное пороговое значение.14. The method according to p. 12, in which it is not allowed that the allowed lists of integer indices in a particular one of the pairs have a segment length that exceeds a predetermined threshold value. 15. Промышленное изделие, содержащее машиночитаемый носитель информации, на котором воплощен компьютерный программный код, который при его исполнении в процессоре изображений предписывает процессору изображений выполнять способ по п. 1.15. An industrial product containing a computer-readable storage medium on which computer program code is embodied, which, when executed in an image processor, instructs the image processor to perform the method of claim 1. 16. Устройство, содержащее:16. A device comprising: процессор изображений, содержащий схему обработки изображений и связанную с ней память;an image processor comprising an image processing circuit and associated memory; при этом процессор изображений выполнен с возможностью реализации системы распознавания жестов с использованием схемы обработки изображений и памяти, причем система распознавания жестов содержит модуль распознавания статической позы; иwherein the image processor is configured to implement a gesture recognition system using an image processing circuit and a memory, the gesture recognition system comprising a static pose recognition module; and при этом модуль распознавания статической позы выполнен с возможностью идентифицировать представляющую интерес область кисти руки в по меньшей мере одном изображении, извлекать контур представляющей интерес области кисти руки, вычислять векторы признаков на основе, по меньшей мере частично, извлеченного контура и распознавать статическую позу представляющей интерес области кисти руки с использованием операции динамического wherein the static pose recognition module is configured to identify the area of interest of the hand in the at least one image, extract the outline of the area of interest of the hand, calculate feature vectors based at least in part on the extracted outline, and recognize the static pose of the area of interest hands using dynamic operation изменения масштаба времени на основе, по меньшей мере частично, вектора признаков.time scale changes based at least in part on the feature vector. 17. Устройство по п. 16, в котором извлеченный контур содержит упорядоченный список n точек c1, c2, …, cn, и вектор признаков содержит, по меньшей мере, одно из следующего:17. The device according to p. 16, in which the extracted circuit contains an ordered list of n points c 1 , c 2 , ..., c n , and the feature vector contains at least one of the following: упорядоченный список n радиус-векторов r1, r2, …, rn, соответствующих соответственным из n точек c1, c2, …, cn контура; иan ordered list of n radius vectors r 1 , r 2 , ..., r n corresponding to the corresponding of n points c 1 , c 2 , ..., c n of the contour; and упорядоченный список пар (r1, φ1), (r2, φ2), …, (rn, φn), где φk обозначает угол, связанный с радиус-вектором rk.an ordered list of pairs (r 1 , φ 1 ), (r 2 , φ 2 ), ..., (r n , φ n ), where φ k denotes the angle associated with the radius vector r k . 18. Устройство по п. 16., в котором операция динамического изменения масштаба времени содержит:18. The device according to p. 16., in which the operation of dynamically changing the time scale contains: идентификацию пар разрешенных списков целочисленных индексов иidentification of pairs of allowed lists of integer indices and вычисление минимальной суммы степени сходства по идентифицированным парам разрешенных списков целочисленных индексов.calculation of the minimum sum of the degree of similarity for identified pairs of allowed lists of integer indices. 19. Интегральная схема, содержащая устройство по п. 16.19. An integrated circuit containing the device according to p. 16. 20. Система обработки изображений, содержащая устройство по п. 16. 20. An image processing system comprising a device according to claim 16.
RU2014101965/08A 2014-01-22 2014-01-22 IMAGE PROCESSOR CONTAINING A GESTURE RECOGNITION SYSTEM WITH RECOGNITION OF A STATIC POSITION OF HAND BRUSH, BASED ON DYNAMIC CHANGE OF TIME RU2014101965A (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
RU2014101965/08A RU2014101965A (en) 2014-01-22 2014-01-22 IMAGE PROCESSOR CONTAINING A GESTURE RECOGNITION SYSTEM WITH RECOGNITION OF A STATIC POSITION OF HAND BRUSH, BASED ON DYNAMIC CHANGE OF TIME
PCT/US2014/047744 WO2015112194A2 (en) 2014-01-22 2014-07-23 Image processor comprising gesture recognition system with static hand pose recognition based on dynamic warping

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
RU2014101965/08A RU2014101965A (en) 2014-01-22 2014-01-22 IMAGE PROCESSOR CONTAINING A GESTURE RECOGNITION SYSTEM WITH RECOGNITION OF A STATIC POSITION OF HAND BRUSH, BASED ON DYNAMIC CHANGE OF TIME

Publications (1)

Publication Number Publication Date
RU2014101965A true RU2014101965A (en) 2015-07-27

Family

ID=53682086

Family Applications (1)

Application Number Title Priority Date Filing Date
RU2014101965/08A RU2014101965A (en) 2014-01-22 2014-01-22 IMAGE PROCESSOR CONTAINING A GESTURE RECOGNITION SYSTEM WITH RECOGNITION OF A STATIC POSITION OF HAND BRUSH, BASED ON DYNAMIC CHANGE OF TIME

Country Status (2)

Country Link
RU (1) RU2014101965A (en)
WO (1) WO2015112194A2 (en)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113128324B (en) * 2020-01-16 2023-05-02 舜宇光学(浙江)研究院有限公司 Gesture segmentation method based on depth data, gesture segmentation system based on depth data and electronic equipment
CN114499655B (en) * 2021-11-23 2023-05-16 烽火通信科技股份有限公司 Method and device for improving OTDR event identification

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5845002B2 (en) * 2011-06-07 2016-01-20 ソニー株式会社 Image processing apparatus and method, and program
CN103294996B (en) * 2013-05-09 2016-04-27 电子科技大学 A kind of 3D gesture identification method
CN103455794B (en) * 2013-08-23 2016-08-10 济南大学 A kind of dynamic gesture identification method based on frame integration technology

Also Published As

Publication number Publication date
WO2015112194A3 (en) 2015-11-05
WO2015112194A2 (en) 2015-07-30

Similar Documents

Publication Publication Date Title
US9286694B2 (en) Apparatus and method for detecting multiple arms and hands by using three-dimensional image
CN108388879B (en) Target detection method, device and storage medium
RU2014111793A (en) PROCESSOR OF PROCESSING IMAGES WITH RECOGNITION OF STATIC POSES OF HAND USING TRIANGULATION AND SMOOTHING OF CIRCUITS
US9959462B2 (en) Locating and tracking fingernails in images
RU2014108820A (en) IMAGE PROCESSOR CONTAINING A SYSTEM FOR RECOGNITION OF GESTURES WITH FUNCTIONAL FEATURES FOR DETECTING AND TRACKING FINGERS
RU2014108870A (en) IMAGE PROCESSOR CONTAINING A GESTURE RECOGNITION SYSTEM WITH A FIXED BRUSH POSITION RECOGNITION BASED ON THE FIRST AND SECOND SET OF SIGNS
JP6997369B2 (en) Programs, ranging methods, and ranging devices
KR102399025B1 (en) Improved data comparison method
JP2015158712A (en) Learning device, density measurement device, learning method, learning program, and density measurement system
RU2014117521A (en) RECOGNITION OF DYNAMIC GESTURES USING PROPERTIES RECEIVED FROM SEVERAL INTERVALS
KR101796027B1 (en) Method and computing device for gender recognition based on facial image
US11315341B2 (en) Information processing apparatus, verification method, and computer-readable recording medium recording verification program
CN107272899B (en) VR (virtual reality) interaction method and device based on dynamic gestures and electronic equipment
Khurana et al. Static hand gestures recognition system using shape based features
Sethi et al. Signpro-An application suite for deaf and dumb
RU2013148582A (en) IMAGE PROCESSING PROCESSOR CONTAINING A GESTURE RECOGNITION SYSTEM WITH A COMPUTER-EFFECTIVE FIXED HAND POSITION RECOGNITION
RU2014109439A (en) PROCESSOR OF IMAGES CONTAINING A GESTURE RECOGNITION SYSTEM WITH COMPARISON OF THE POSITION OF THE HAND, BASED ON THE SIGNS OF THE CIRCUIT
RU2014101965A (en) IMAGE PROCESSOR CONTAINING A GESTURE RECOGNITION SYSTEM WITH RECOGNITION OF A STATIC POSITION OF HAND BRUSH, BASED ON DYNAMIC CHANGE OF TIME
JP2018517207A5 (en)
Mantecón et al. New generation of human machine interfaces for controlling UAV through depth-based gesture recognition
JP2018124798A (en) Image search device and image search program
KR20190132885A (en) Apparatus, method and computer program for detecting hand from video
JP2014116006A5 (en)
Ameri et al. Keyword spotting in historical documents based on handwriting graphs and Hausdorff edit distance
KR20140010500A (en) Pose recognition apparatus and method using the same

Legal Events

Date Code Title Description
FA93 Acknowledgement of application withdrawn (no request for examination)

Effective date: 20170123