RU2013146467A - Способ и устройство распознавания жестов с использованием асинхронной многопоточной обработки - Google Patents

Способ и устройство распознавания жестов с использованием асинхронной многопоточной обработки Download PDF

Info

Publication number
RU2013146467A
RU2013146467A RU2013146467/08A RU2013146467A RU2013146467A RU 2013146467 A RU2013146467 A RU 2013146467A RU 2013146467/08 A RU2013146467/08 A RU 2013146467/08A RU 2013146467 A RU2013146467 A RU 2013146467A RU 2013146467 A RU2013146467 A RU 2013146467A
Authority
RU
Russia
Prior art keywords
parallel processing
processing stream
buffer
hand
stream
Prior art date
Application number
RU2013146467/08A
Other languages
English (en)
Inventor
Иван Леонидович Мазуренко
Павел Александрович Алисейчик
Александр Борисович Холоденко
Дмитрий Николаевич Бабин
Денис Васильевич Парфенов
Original Assignee
ЭлЭсАй Корпорейшн
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ЭлЭсАй Корпорейшн filed Critical ЭлЭсАй Корпорейшн
Priority to RU2013146467/08A priority Critical patent/RU2013146467A/ru
Priority to US14/358,175 priority patent/US20150146920A1/en
Priority to PCT/US2014/034584 priority patent/WO2015057262A1/en
Publication of RU2013146467A publication Critical patent/RU2013146467A/ru

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/52Program synchronisation; Mutual exclusion, e.g. by means of semaphores
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20Movements or behaviour, e.g. gesture recognition
    • G06V40/28Recognition of hand or arm movements, e.g. recognition of deaf sign language
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00General purpose image data processing
    • G06T1/20Processor architectures; Processor configuration, e.g. pipelining
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/94Hardware or software architectures specially adapted for image or video understanding
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/107Static hand or arm
    • G06V40/113Recognition of static hand signs

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Software Systems (AREA)
  • Human Computer Interaction (AREA)
  • Psychiatry (AREA)
  • Social Psychology (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Engineering & Computer Science (AREA)
  • User Interface Of Digital Computer (AREA)
  • Image Processing (AREA)
  • Position Input By Displaying (AREA)

Abstract

1. Способ, содержащий:установление основного потока обработки и параллельного потока обработки для соответствующих частей многопоточного процесса распознавания жестов в процессоре изображений; иконфигурирование параллельного потока обработки для использования буферных схем процессора изображений так, чтобы обеспечить возможность выполнения параллельного потока обработки асинхронно с основным потоком обработки;при этом параллельный поток обработки реализует одно из оценивания шума, оценивания фона и распознавания статического положения руки для многопоточного процесса распознавания жестов.2. Способ по п. 1, в котором основной поток обработки выполняется синхронно с частотой кадров входного потока изображений, а параллельный поток обработки не выполняется синхронно с частотой кадров входного потока изображений.3. Способ по п. 2, в котором параллельный поток обработки выполняется с частотой, которая меньше, чем частота кадров входного потока кадров.4. Способ по п. 1, в котором установление параллельного потока обработки содержит установление множества параллельных потоков обработки, причем каждый из параллельных потоков обработки сконфигурирован для использования буферных схем процессора изображений, так чтобы обеспечить возможность выполнения параллельных потоков обработки асинхронно с основным потоком обработки.5. Способ по п. 4, в котором параллельные потоки обработки содержат два или более из:первого параллельного потока обработки, реализующего оценивание шума;второго параллельного потока обработки, реализующего оценивание фона; итретьего параллельного потока обработки, реализующего расп

Claims (21)

1. Способ, содержащий:
установление основного потока обработки и параллельного потока обработки для соответствующих частей многопоточного процесса распознавания жестов в процессоре изображений; и
конфигурирование параллельного потока обработки для использования буферных схем процессора изображений так, чтобы обеспечить возможность выполнения параллельного потока обработки асинхронно с основным потоком обработки;
при этом параллельный поток обработки реализует одно из оценивания шума, оценивания фона и распознавания статического положения руки для многопоточного процесса распознавания жестов.
2. Способ по п. 1, в котором основной поток обработки выполняется синхронно с частотой кадров входного потока изображений, а параллельный поток обработки не выполняется синхронно с частотой кадров входного потока изображений.
3. Способ по п. 2, в котором параллельный поток обработки выполняется с частотой, которая меньше, чем частота кадров входного потока кадров.
4. Способ по п. 1, в котором установление параллельного потока обработки содержит установление множества параллельных потоков обработки, причем каждый из параллельных потоков обработки сконфигурирован для использования буферных схем процессора изображений, так чтобы обеспечить возможность выполнения параллельных потоков обработки асинхронно с основным потоком обработки.
5. Способ по п. 4, в котором параллельные потоки обработки содержат два или более из:
первого параллельного потока обработки, реализующего оценивание шума;
второго параллельного потока обработки, реализующего оценивание фона; и
третьего параллельного потока обработки, реализующего распознавание статического положения руки.
6. Способ по п. 5, в котором конфигурирование параллельных потоков обработки содержит конфигурирование первого и второго потоков обработки для приема входа из общего входного буфера кадров буферных схем и для предоставления выхода на соответствующие буферы шума и фона буферных схем.
7. Способ по п. 5, в котором конфигурирование параллельных потоков обработки содержит конфигурирование третьего потока обработки, чтобы принимать вход из буфера параметров руки буферных схем и предоставлять выход на буфер положения руки буферных схем.
8. Способ по п. 4, в котором основной поток обработки реализует по меньшей мере подмножество из снижения шума, удаления фона, определения положения руки, отслеживания руки, оценивания динамических параметров руки и распознавания динамических жестов руки для многопоточного процесса распознавания жестов.
9. Способ по п. 8, в котором параллельные потоки обработки содержат два или более из:
первого параллельного потока обработки, реализующего оценивание шума и выполняющегося параллельно с частью снижения шума основного потока обработки;
второго параллельного потока обработки, реализующего оценивание фона и выполняющегося параллельно с частью удаления фона основного потока обработки; и
третьего параллельного потока обработки, реализующего распознавание статического положения руки и выполняющегося параллельно с частью динамических параметров руки основного потока обработки.
10. Постоянный машиночитаемый запоминающий носитель, имеющий код компьютерной программы, воплощенный в нем, причем код компьютерной программы, при исполнении в процессоре изображений, побуждает процессор изображений выполнять способ по п. 1.
11. Устройство, содержащее:
процессор изображений;
причем процессор изображений содержит буферные схемы;
при этом процессор изображений сконфигурирован для установления основного потока обработки и параллельного потока обработки для соответствующих частей многопоточного процесса распознавания жестов и для конфигурирования параллельного потока обработки для использования буферных схем так, чтобы обеспечить возможность выполнения параллельного потока обработки асинхронно с основным потоком обработки;
при этом параллельный поток обработки реализует одно из оценивания шума, оценивания фона и распознавания статического положения руки для многопоточного процесса распознавания жестов.
12. Устройство по п. 11, в котором процессор изображений сконфигурирован для установления множества параллельных потоков обработки, причем каждый из параллельных потоков обработки сконфигурирован для использования буферных схем процессора изображений так, чтобы обеспечить возможность выполнения параллельных потоков обработки асинхронно с основным потоком обработки.
13. Устройство по п. 12, в котором параллельные потоки обработки содержат два или более из:
первого параллельного потока обработки, реализующего оценивание шума;
второго параллельного потока обработки, реализующего оценивание фона; и
третьего параллельного потока обработки, реализующего распознавание статического положения руки.
14. Устройство по п. 13, в котором буферные схемы содержат:
общий входной буфер кадров, сконфигурированный для обеспечения входа для первого и второго потоков обработки; и
буферы шума и фона, сконфигурированные для приема выхода из соответствующих одних из первого и второго потоков обработки.
15. Устройство по п. 14, в котором один или более из общего входного буфера кадров, буфера шума и буфера фона содержат соответствующие двойные буферы, причем каждый двойной буфер сконфигурирован так, что данные могут записываться в первый буфер двойного буфера, в то время как данные считываются из второго буфера двойного буфера, и наоборот.
16. Устройство по п. 13, в котором буферные схемы содержат:
буфер параметров руки, сконфигурированный для обеспечения входа для третьего потока обработки; и
буфер положения руки, сконфигурированный для приема выхода из третьего потока обработки.
17. Устройство по п. 16, в котором один или более буферов параметров руки и буфера положения руки содержат соответствующие двойные буферы, причем каждый двойной буфер сконфигурирован так, что данные могут записываться в первый буфер двойного буфера, в то время как данные считываются из второго буфера двойного буфера, и наоборот.
18. Устройство по п. 12, в котором основной поток обработки реализует по меньшей мере подмножество из снижения шума, удаления фона, определения положения руки, отслеживания руки, оценивания динамических параметров руки и распознавания динамических жестов руки для многопоточного процесса распознавания жестов.
19. Устройство по п. 18, в котором параллельные потоки обработки содержат два или более из:
первого параллельного потока обработки, реализующего оценивание шума и выполняющегося параллельно с частью снижения шума основного потока обработки;
второго параллельного потока обработки, реализующего оценивание фона и выполняющегося параллельно с частью удаления фона основного потока обработки; и
третьего параллельного процесса обработки, реализующего распознавание статического положения руки и выполняющегося параллельно с частью динамических параметров руки основного потока обработки.
20. Интегральная схема, содержащая устройство по п. 11.
21. Система обработки изображений, содержащая устройство по п. 11.
RU2013146467/08A 2013-10-17 2013-10-17 Способ и устройство распознавания жестов с использованием асинхронной многопоточной обработки RU2013146467A (ru)

Priority Applications (3)

Application Number Priority Date Filing Date Title
RU2013146467/08A RU2013146467A (ru) 2013-10-17 2013-10-17 Способ и устройство распознавания жестов с использованием асинхронной многопоточной обработки
US14/358,175 US20150146920A1 (en) 2013-10-17 2014-04-18 Gesture recognition method and apparatus utilizing asynchronous multithreaded processing
PCT/US2014/034584 WO2015057262A1 (en) 2013-10-17 2014-04-18 Gesture recognition method and apparatus utilizing asynchronous multithreaded processing

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
RU2013146467/08A RU2013146467A (ru) 2013-10-17 2013-10-17 Способ и устройство распознавания жестов с использованием асинхронной многопоточной обработки

Publications (1)

Publication Number Publication Date
RU2013146467A true RU2013146467A (ru) 2015-04-27

Family

ID=52828528

Family Applications (1)

Application Number Title Priority Date Filing Date
RU2013146467/08A RU2013146467A (ru) 2013-10-17 2013-10-17 Способ и устройство распознавания жестов с использованием асинхронной многопоточной обработки

Country Status (3)

Country Link
US (1) US20150146920A1 (ru)
RU (1) RU2013146467A (ru)
WO (1) WO2015057262A1 (ru)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016130925A (ja) * 2015-01-14 2016-07-21 レノボ・シンガポール・プライベート・リミテッド 複数の電子機器が連携動作をする方法、電子機器およびコンピュータ・プログラム
DE102016109342B4 (de) * 2016-05-20 2024-02-22 Infineon Technologies Ag Radarsensorsystem zur gestenerkennung und verfahren zur radarbasierten gestenerkennung
CN111311557A (zh) * 2020-01-23 2020-06-19 腾讯科技(深圳)有限公司 内窥镜图像处理方法、装置、电子设备及存储介质
US20230315209A1 (en) * 2022-03-31 2023-10-05 Sony Group Corporation Gesture recognition on resource-constrained devices

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5759044A (en) * 1990-02-22 1998-06-02 Redmond Productions Methods and apparatus for generating and processing synthetic and absolute real time environments
US6466624B1 (en) * 1998-10-28 2002-10-15 Pixonics, Llc Video decoder with bit stream based enhancements
US7761814B2 (en) * 2004-09-13 2010-07-20 Microsoft Corporation Flick gesture
US9417700B2 (en) * 2009-05-21 2016-08-16 Edge3 Technologies Gesture recognition systems and related methods

Also Published As

Publication number Publication date
US20150146920A1 (en) 2015-05-28
WO2015057262A1 (en) 2015-04-23

Similar Documents

Publication Publication Date Title
AU2019268195A1 (en) Zero latency digital assistant
US9996386B2 (en) Mid-thread pre-emption with software assisted context switch
RU2013146467A (ru) Способ и устройство распознавания жестов с использованием асинхронной многопоточной обработки
MX2015000194A (es) Metodo de procesamiento y dispositivo para programa de aplicacion.
RU2018101252A (ru) Устройство декодирования и способ декодирования
MX371125B (es) Metodo y dispositivo para dibujar una interfaz grafica de usuario.
US9270801B2 (en) Low power audio trigger via intermittent sampling
MX2016004585A (es) Metodo y aparato para reconocimiento de huellas digitales.
RU2014144679A (ru) Способ и устройство для исполнения объекта на дисплее
WO2014195802A3 (en) Method and system for recognizing information
MX2017012505A (es) Configuracion de diferentes sensibilidades de modelos de fondo mediante regiones definidas por el usuario y filtros de fondo.
US20160182853A1 (en) Dynamic Content Adaptive Frame Rate Conversion
CN108877692A (zh) 一种调节背光亮度的方法、装置及电子设备
WO2013070425A3 (en) Conserving power through work load estimation for a portable computing device using scheduled resource set transitions
US20140363097A1 (en) Image capture system and operation method thereof
WO2014175981A3 (en) Barcode access to electronic resources for lifecycle tracking of complex system parts
EP3128415A3 (en) Computing device, process control method, and process control program
US20150199134A1 (en) System and method for resolving dram page conflicts based on memory access patterns
US10089019B2 (en) Minimizing latency from peripheral devices to compute engines
US9508386B2 (en) Method and apparatus for synchronizing audio and video signals
RU2019132899A (ru) Способ и устройство обработки сигнала и программа
KR20150105847A (ko) 음성구간 검출 방법 및 장치
EP2811456A3 (en) Filtering method and device in image processing
CN106708614B (zh) 多线程创建系统及方法、多线程处理系统及方法
WO2014205648A1 (en) Handwriting recognition based on writing speed

Legal Events

Date Code Title Description
FA93 Acknowledgement of application withdrawn (no request for examination)

Effective date: 20161018