JP2022520030A - ジェスチャ制御方法及び装置 - Google Patents
ジェスチャ制御方法及び装置 Download PDFInfo
- Publication number
- JP2022520030A JP2022520030A JP2021544350A JP2021544350A JP2022520030A JP 2022520030 A JP2022520030 A JP 2022520030A JP 2021544350 A JP2021544350 A JP 2021544350A JP 2021544350 A JP2021544350 A JP 2021544350A JP 2022520030 A JP2022520030 A JP 2022520030A
- Authority
- JP
- Japan
- Prior art keywords
- gesture recognition
- recognition result
- gesture
- target
- difference
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 112
- 238000012545 processing Methods 0.000 claims abstract description 44
- 230000004044 response Effects 0.000 claims abstract description 44
- 230000008569 process Effects 0.000 claims description 42
- 238000004590 computer program Methods 0.000 claims description 25
- 238000009499 grossing Methods 0.000 claims description 24
- 230000006870 function Effects 0.000 claims description 13
- 230000008859 change Effects 0.000 claims description 11
- 238000012800 visualization Methods 0.000 claims description 9
- 230000000007 visual effect Effects 0.000 claims description 6
- 239000005357 flat glass Substances 0.000 claims description 4
- 241001074085 Scophthalmus aquosus Species 0.000 claims description 2
- 238000010586 diagram Methods 0.000 abstract description 10
- 238000013519 translation Methods 0.000 description 7
- 230000014616 translation Effects 0.000 description 7
- 230000003287 optical effect Effects 0.000 description 5
- 230000003068 static effect Effects 0.000 description 5
- 238000006243 chemical reaction Methods 0.000 description 4
- 230000003993 interaction Effects 0.000 description 3
- 230000001960 triggered effect Effects 0.000 description 3
- 230000009471 action Effects 0.000 description 2
- 230000003213 activating effect Effects 0.000 description 2
- 238000013528 artificial neural network Methods 0.000 description 2
- 238000000926 separation method Methods 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000006855 networking Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000035945 sensitivity Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/20—Movements or behaviour, e.g. gesture recognition
- G06V40/28—Recognition of hand or arm movements, e.g. recognition of deaf sign language
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Health & Medical Sciences (AREA)
- Computer Vision & Pattern Recognition (AREA)
- General Health & Medical Sciences (AREA)
- Psychiatry (AREA)
- Social Psychology (AREA)
- Multimedia (AREA)
- User Interface Of Digital Computer (AREA)
- Image Analysis (AREA)
Abstract
Description
本願は、2019年10月22日に中国特許局に提出された、中国特許出願第201911008049.0の優先権を主張し、当該中国特許出願の全ての内容が参照により本願に援用される。
本発明は、コンピュータビジョンの技術分野に関し、特に、ジェスチャ制御方法及び装置に関する。
例えば、本願は以下の項目を提供する。
(項目1)
ジェスチャ制御方法であって、
カメラによって収集されたビデオストリームにおける時系列的に連続するNフレームの画像に対してそれぞれジェスチャ認識処理を実行して、ジェスチャ認識結果シーケンスを取得することであって、前記ジェスチャ認識結果シーケンスは、前記Nフレームの画像に含まれる複数のジェスチャの認識結果を含むことと、
前記ジェスチャ認識結果シーケンスに含まれる同一ジェスチャ認識結果の数がMより大きいか等しいことに応答して、前記同一ジェスチャ認識結果が目標ジェスチャ認識結果であると決定することであって、N及びMは両方とも1より大きい整数であり、NはMより大きいか等しいことと、
前記目標ジェスチャ認識結果に対応する制御命令を目標機器に送信するか、又は、前記目標ジェスチャ認識結果に対応する操作を実行するように目標機器を制御することと、を含む、前記ジェスチャ制御方法。
(項目2)
前記ジェスチャ認識結果シーケンスに含まれる同一ジェスチャ認識結果の数がMより大きいか等しいことに応答して、前記同一ジェスチャ認識結果が目標ジェスチャ認識結果であると決定することは、
前記ジェスチャ認識結果シーケンスに含まれる連続する同一ジェスチャ認識結果の数がMより大きいか等しいことに応答して、前記同一ジェスチャ認識結果が目標ジェスチャ認識結果であると決定することを含む、
項目1に記載のジェスチャ制御方法。
(項目3)
ジェスチャ認識結果シーケンスに含まれる同一ジェスチャ認識結果の数がMより大きいか等しいことに応答して、前記同一ジェスチャ認識結果が目標ジェスチャ認識結果であると決定する前に、前記ジェスチャ制御方法は、
前記ジェスチャ認識結果シーケンスに含まれる複数の前記同一ジェスチャ認識結果には相違ジェスチャ認識結果が含まれ、且つ前記ジェスチャ認識結果シーケンスにおける前記相違ジェスチャ認識結果の数の割合がプリセットされた値未満であることに応答して、前記相違ジェスチャ認識結果に対して平滑化処理を実行することであって、前記相違ジェスチャ認識結果は前記同一ジェスチャ認識結果とは異なることを更に含む、
項目1又は2に記載のジェスチャ制御方法。
(項目4)
前記相違ジェスチャ認識結果に対して平滑化処理を実行することは、
前記相違ジェスチャ認識結果を前記同一ジェスチャ認識結果に補正すること、又は、
前記ジェスチャ認識結果シーケンスから前記相違ジェスチャ認識結果を削除することを含む、
項目3に記載のジェスチャ制御方法。
(項目5)
前記相違ジェスチャ認識結果に対して平滑化処理を実行することは、
時系列において前記相違ジェスチャ認識結果の前にあるジェスチャ認識結果、及び時系列において前記相違ジェスチャ認識結果の後にあるジェスチャ認識結果を、連続する複数のジェスチャ認識結果として使用することを含む、
項目3に記載のジェスチャ制御方法。
(項目6)
前記カメラによって収集されたビデオストリームにおける時系列的に連続するNフレームの画像に対してそれぞれジェスチャ認識処理を実行することは、
前記ビデオストリーム内の単一フレームのカメラによって収集された画像を取得することであって、前記カメラによって収集された画像は、カメラ撮影視野空間に対応する画像であり、前記カメラ撮影視野空間は、ジェスチャ制御の有効空間領域を含む、ことと、
前記カメラによって収集された画像から、前記ジェスチャ制御の有効空間領域に対応する部分画像領域を選択することと、
前記部分画像領域に対して前記ジェスチャ認識処理を実行することと、を含む、
項目1ないし5のいずれか一項に記載のジェスチャ制御方法。
(項目7)
前記ジェスチャ制御方法は、
パラメータ調整用の可視化インターフェイスを介して、ユーザによって設定されたジェスチャ認識パラメータを受信することを更に含み、
前記ジェスチャ認識処理は、前記ジェスチャ認識パラメータに従って実行される、
項目1ないし6のいずれか一項に記載のジェスチャ制御方法。
(項目8)
前記ジェスチャ認識パラメータはMを含む、
項目7に記載のジェスチャ制御方法。
(項目9)
前記目標機器は車両を含み、前記目標ジェスチャ認識結果に対応する制御命令を目標機器に送信するか、又は、前記目標ジェスチャ認識結果に対応する操作を実行するように目標機器を制御することは、
前記目標ジェスチャ認識結果に対応する制御命令を前記車両の機能コンポーネントに送信すること、又は、
前記目標ジェスチャ認識結果に対応する操作を実行するように前記車両の機能コンポーネントを制御すること、を含む、
項目1ないし8のいずれか一項に記載のジェスチャ制御方法。
(項目10)
前記機能コンポーネントは、メディアプレーヤを備え、
前記目標ジェスチャ認識結果に対応する操作を実行するように前記車両の機能コンポーネントを制御することは、前記目標ジェスチャ認識結果に応答して、メディア再生状態を変更するように前記メディアプレーヤを制御することを含む、
項目9に記載のジェスチャ制御方法。
(項目11)
前記機能コンポーネントは、車窓コントローラを備え、
前記目標ジェスチャ認識結果に対応する操作を実行するように前記車両の機能コンポーネントを制御することは、前記目標ジェスチャ認識結果に応答して、窓ガラスを動かすように前記車窓コントローラを制御することを含む、
項目9に記載のジェスチャ制御方法。
(項目12)
前記目標ジェスチャ認識結果に対応する操作を実行するように前記車両の機能コンポーネントを制御することは、
前記目標ジェスチャ認識結果に応答して、前記画像を介して制御される機能コンポーネントに対応する機能状態インターフェイスに、前記機能コンポーネントの実行開始又は実行停止状態、音量の変化、又は目標対象に対する「いいね」マークのうちの少なくとも1つを表示することを含む、
項目9に記載のジェスチャ制御方法。
(項目13)
ジェスチャ制御装置であって、
カメラによって収集されたビデオストリームにおける時系列的に連続するNフレームの画像に対してそれぞれジェスチャ認識処理を実行して、ジェスチャ認識結果シーケンスを取得するように構成される認識処理モジュールであって、前記ジェスチャ認識結果シーケンスは、前記Nフレームの画像に含まれる複数のジェスチャの認識結果を含む、認識処理モジュールと、
前記ジェスチャ認識結果シーケンスに含まれる同一ジェスチャ認識結果の数がMより大きいか等しいことに応答して、前記同一ジェスチャ認識結果が目標ジェスチャ認識結果であると決定するように構成されるジェスチャ決定モジュールであって、N及びMは両方とも1より大きい整数であり、NはMより大きいか等しい、ジェスチャ決定モジュールと、
前記目標ジェスチャ認識結果に対応する制御命令を目標機器に送信するか、又は、前記目標ジェスチャ認識結果に対応する操作を実行するように目標機器を制御するように構成される操作制御モジュールと、を備える、前記ジェスチャ制御装置。
(項目14)
前記ジェスチャ決定モジュールは、前記ジェスチャ認識結果シーケンスに含まれる連続する同一ジェスチャ認識結果の数がMより大きいか等しいことに応答して、前記同一ジェスチャ認識結果が目標ジェスチャ認識結果であると決定するように構成される、
項目13に記載のジェスチャ制御装置。
(項目15)
前記ジェスチャ決定モジュールは、前記ジェスチャ認識結果シーケンスに含まれる複数の前記同一ジェスチャ認識結果間に相違ジェスチャ認識結果が含まれ、且つ前記ジェスチャ認識結果シーケンスにおける前記相違ジェスチャ認識結果の数の割合がプリセットされた値未満であることに応答して、前記相違ジェスチャ認識結果に対して平滑化処理を実行するように構成され、ここで、前記相違ジェスチャ認識結果は前記目標ジェスチャ認識結果とは異なる、
項目13又は14に記載のジェスチャ制御装置。
(項目16)
前記ジェスチャ決定モジュールは、
前記相違ジェスチャ認識結果を前記同一ジェスチャ認識結果に補正し、又は、
前記ジェスチャ認識結果シーケンスから前記相違ジェスチャ認識結果を削除することにより、前記相違ジェスチャ認識結果に対して平滑化処理を実行するように構成される、
項目15に記載のジェスチャ制御装置。
(項目17)
前記ジェスチャ決定モジュールは、
時系列において前記相違ジェスチャ認識結果の前にあるジェスチャ認識結果、及び時系列において前記相違ジェスチャ認識結果の後にあるジェスチャ認識結果を、連続する複数のジェスチャ認識結果として使用するように構成される、
項目15に記載のジェスチャ制御装置。
(項目18)
前記認識処理モジュールは、
カメラによって収集されたビデオストリームにおける時系列的に連続するNフレームの画像に対してそれぞれジェスチャ認識処理を実行する場合、前記ビデオストリーム内の単一フレームのカメラによって収集された画像を取得し、ここで、前記カメラによって収集された画像は、カメラ撮影視野空間に対応する画像であり、前記カメラ撮影視野空間は、ジェスチャ制御の有効空間領域を含み、
前記カメラによって収集された画像から、前記ジェスチャ制御の有効空間領域に対応する部分画像領域を選択し、
前記部分画像領域に対して前記ジェスチャ認識処理を実行するように構成される、
項目13ないし17のいずれか一項に記載のジェスチャ制御装置。
(項目19)
前記ジェスチャ制御装置は更に、
パラメータ調整用の可視化インターフェイスを介して、ユーザによって設定されたジェスチャ認識パラメータを受信することにより、前記認識処理モジュールが、前記ジェスチャ認識パラメータに従って前記ジェスチャ認識処理を実行できるようにするように構成されるパラメータ受信モジュールを備える、
項目13ないし18のいずれか一項に記載のジェスチャ制御装置。
(項目20)
前記目標機器は車両を含み、前記操作制御モジュールは、前記目標ジェスチャ認識結果に対応する制御命令を前記車両の機能コンポーネントに送信するか、又は、前記目標ジェスチャ認識結果に対応する操作を実行するように前記車両の機能コンポーネントを制御するように構成される、
項目13ないし19のいずれか一項に記載のジェスチャ制御装置。
(項目21)
前記機能コンポーネントは、メディアプレーヤを備え、
前記操作制御モジュールは、前記目標ジェスチャ認識結果に対応する操作を実行するように前記車両の機能コンポーネントを制御する場合、前記目標ジェスチャ認識結果に応答して、メディア再生状態を変更するように前記メディアプレーヤを制御するように構成される、
項目20に記載のジェスチャ制御装置。
(項目22)
前記機能コンポーネントは、車窓コントローラを備え、
前記操作制御モジュールは、前記目標ジェスチャ認識結果に対応する操作を実行するように前記車両の機能コンポーネントを制御する場合、前記目標ジェスチャ認識結果に応答して、窓ガラスを動かすように前記車窓コントローラを制御するように構成される、
項目20に記載のジェスチャ制御装置。
(項目23)
前記操作制御モジュールは更に、前記目標ジェスチャ認識結果に対応する操作を実行するように前記車両の機能コンポーネントを制御する場合、前記目標ジェスチャ認識結果に応答して、前記画像を介して制御される機能コンポーネントに対応する機能状態インターフェイスに、前記機能コンポーネントの実行開始又は実行停止状態、音量の変化、又は目標対象に対する「いいね」マークのうちの少なくとも1つを表示するように構成される、
項目20に記載のジェスチャ制御装置。
(項目24)
電子機器であって、
プロセッサと、
コンピュータプログラムが記憶されているメモリと、を備え、当該コンピュータプログラムが前記プロセッサによって実行されるときに、項目1ないし12のいずれか一項に記載のジェスチャ制御方法を実現する、前記電子機器。
(項目25)
コンピュータプログラムが記憶されているコンピュータ可読記憶媒体であって、
前記コンピュータプログラムがプロセッサによって実行されるときに、項目1ないし12のいずれか一項に記載のジェスチャ制御方法を実現する、前記コンピュータ可読記憶媒体。
Claims (25)
- ジェスチャ制御方法であって、
カメラによって収集されたビデオストリームにおける時系列的に連続するNフレームの画像に対してそれぞれジェスチャ認識処理を実行して、ジェスチャ認識結果シーケンスを取得することであって、前記ジェスチャ認識結果シーケンスは、前記Nフレームの画像に含まれる複数のジェスチャの認識結果を含むことと、
前記ジェスチャ認識結果シーケンスに含まれる同一ジェスチャ認識結果の数がMより大きいか等しいことに応答して、前記同一ジェスチャ認識結果が目標ジェスチャ認識結果であると決定することであって、N及びMは両方とも1より大きい整数であり、NはMより大きいか等しいことと、
前記目標ジェスチャ認識結果に対応する制御命令を目標機器に送信するか、又は、前記目標ジェスチャ認識結果に対応する操作を実行するように目標機器を制御することと、を含む、前記ジェスチャ制御方法。 - 前記ジェスチャ認識結果シーケンスに含まれる同一ジェスチャ認識結果の数がMより大きいか等しいことに応答して、前記同一ジェスチャ認識結果が目標ジェスチャ認識結果であると決定することは、
前記ジェスチャ認識結果シーケンスに含まれる連続する同一ジェスチャ認識結果の数がMより大きいか等しいことに応答して、前記同一ジェスチャ認識結果が目標ジェスチャ認識結果であると決定することを含む、
請求項1に記載のジェスチャ制御方法。 - ジェスチャ認識結果シーケンスに含まれる同一ジェスチャ認識結果の数がMより大きいか等しいことに応答して、前記同一ジェスチャ認識結果が目標ジェスチャ認識結果であると決定する前に、前記ジェスチャ制御方法は、
前記ジェスチャ認識結果シーケンスに含まれる複数の前記同一ジェスチャ認識結果には相違ジェスチャ認識結果が含まれ、且つ前記ジェスチャ認識結果シーケンスにおける前記相違ジェスチャ認識結果の数の割合がプリセットされた値未満であることに応答して、前記相違ジェスチャ認識結果に対して平滑化処理を実行することであって、前記相違ジェスチャ認識結果は前記同一ジェスチャ認識結果とは異なることを更に含む、
請求項1又は2に記載のジェスチャ制御方法。 - 前記相違ジェスチャ認識結果に対して平滑化処理を実行することは、
前記相違ジェスチャ認識結果を前記同一ジェスチャ認識結果に補正すること、又は、
前記ジェスチャ認識結果シーケンスから前記相違ジェスチャ認識結果を削除することを含む、
請求項3に記載のジェスチャ制御方法。 - 前記相違ジェスチャ認識結果に対して平滑化処理を実行することは、
時系列において前記相違ジェスチャ認識結果の前にあるジェスチャ認識結果、及び時系列において前記相違ジェスチャ認識結果の後にあるジェスチャ認識結果を、連続する複数のジェスチャ認識結果として使用することを含む、
請求項3に記載のジェスチャ制御方法。 - 前記カメラによって収集されたビデオストリームにおける時系列的に連続するNフレームの画像に対してそれぞれジェスチャ認識処理を実行することは、
前記ビデオストリーム内の単一フレームのカメラによって収集された画像を取得することであって、前記カメラによって収集された画像は、カメラ撮影視野空間に対応する画像であり、前記カメラ撮影視野空間は、ジェスチャ制御の有効空間領域を含む、ことと、
前記カメラによって収集された画像から、前記ジェスチャ制御の有効空間領域に対応する部分画像領域を選択することと、
前記部分画像領域に対して前記ジェスチャ認識処理を実行することと、を含む、
請求項1ないし5のいずれか一項に記載のジェスチャ制御方法。 - 前記ジェスチャ制御方法は、
パラメータ調整用の可視化インターフェイスを介して、ユーザによって設定されたジェスチャ認識パラメータを受信することを更に含み、
前記ジェスチャ認識処理は、前記ジェスチャ認識パラメータに従って実行される、
請求項1ないし6のいずれか一項に記載のジェスチャ制御方法。 - 前記ジェスチャ認識パラメータはMを含む、
請求項7に記載のジェスチャ制御方法。 - 前記目標機器は車両を含み、前記目標ジェスチャ認識結果に対応する制御命令を目標機器に送信するか、又は、前記目標ジェスチャ認識結果に対応する操作を実行するように目標機器を制御することは、
前記目標ジェスチャ認識結果に対応する制御命令を前記車両の機能コンポーネントに送信すること、又は、
前記目標ジェスチャ認識結果に対応する操作を実行するように前記車両の機能コンポーネントを制御すること、を含む、
請求項1ないし8のいずれか一項に記載のジェスチャ制御方法。 - 前記機能コンポーネントは、メディアプレーヤを備え、
前記目標ジェスチャ認識結果に対応する操作を実行するように前記車両の機能コンポーネントを制御することは、前記目標ジェスチャ認識結果に応答して、メディア再生状態を変更するように前記メディアプレーヤを制御することを含む、
請求項9に記載のジェスチャ制御方法。 - 前記機能コンポーネントは、車窓コントローラを備え、
前記目標ジェスチャ認識結果に対応する操作を実行するように前記車両の機能コンポーネントを制御することは、前記目標ジェスチャ認識結果に応答して、窓ガラスを動かすように前記車窓コントローラを制御することを含む、
請求項9に記載のジェスチャ制御方法。 - 前記目標ジェスチャ認識結果に対応する操作を実行するように前記車両の機能コンポーネントを制御することは、
前記目標ジェスチャ認識結果に応答して、前記画像を介して制御される機能コンポーネントに対応する機能状態インターフェイスに、前記機能コンポーネントの実行開始又は実行停止状態、音量の変化、又は目標対象に対する「いいね」マークのうちの少なくとも1つを表示することを含む、
請求項9に記載のジェスチャ制御方法。 - ジェスチャ制御装置であって、
カメラによって収集されたビデオストリームにおける時系列的に連続するNフレームの画像に対してそれぞれジェスチャ認識処理を実行して、ジェスチャ認識結果シーケンスを取得するように構成される認識処理モジュールであって、前記ジェスチャ認識結果シーケンスは、前記Nフレームの画像に含まれる複数のジェスチャの認識結果を含む、認識処理モジュールと、
前記ジェスチャ認識結果シーケンスに含まれる同一ジェスチャ認識結果の数がMより大きいか等しいことに応答して、前記同一ジェスチャ認識結果が目標ジェスチャ認識結果であると決定するように構成されるジェスチャ決定モジュールであって、N及びMは両方とも1より大きい整数であり、NはMより大きいか等しい、ジェスチャ決定モジュールと、
前記目標ジェスチャ認識結果に対応する制御命令を目標機器に送信するか、又は、前記目標ジェスチャ認識結果に対応する操作を実行するように目標機器を制御するように構成される操作制御モジュールと、を備える、前記ジェスチャ制御装置。 - 前記ジェスチャ決定モジュールは、前記ジェスチャ認識結果シーケンスに含まれる連続する同一ジェスチャ認識結果の数がMより大きいか等しいことに応答して、前記同一ジェスチャ認識結果が目標ジェスチャ認識結果であると決定するように構成される、
請求項13に記載のジェスチャ制御装置。 - 前記ジェスチャ決定モジュールは、前記ジェスチャ認識結果シーケンスに含まれる複数の前記同一ジェスチャ認識結果間に相違ジェスチャ認識結果が含まれ、且つ前記ジェスチャ認識結果シーケンスにおける前記相違ジェスチャ認識結果の数の割合がプリセットされた値未満であることに応答して、前記相違ジェスチャ認識結果に対して平滑化処理を実行するように構成され、ここで、前記相違ジェスチャ認識結果は前記目標ジェスチャ認識結果とは異なる、
請求項13又は14に記載のジェスチャ制御装置。 - 前記ジェスチャ決定モジュールは、
前記相違ジェスチャ認識結果を前記同一ジェスチャ認識結果に補正し、又は、
前記ジェスチャ認識結果シーケンスから前記相違ジェスチャ認識結果を削除することにより、前記相違ジェスチャ認識結果に対して平滑化処理を実行するように構成される、
請求項15に記載のジェスチャ制御装置。 - 前記ジェスチャ決定モジュールは、
時系列において前記相違ジェスチャ認識結果の前にあるジェスチャ認識結果、及び時系列において前記相違ジェスチャ認識結果の後にあるジェスチャ認識結果を、連続する複数のジェスチャ認識結果として使用するように構成される、
請求項15に記載のジェスチャ制御装置。 - 前記認識処理モジュールは、
カメラによって収集されたビデオストリームにおける時系列的に連続するNフレームの画像に対してそれぞれジェスチャ認識処理を実行する場合、前記ビデオストリーム内の単一フレームのカメラによって収集された画像を取得し、ここで、前記カメラによって収集された画像は、カメラ撮影視野空間に対応する画像であり、前記カメラ撮影視野空間は、ジェスチャ制御の有効空間領域を含み、
前記カメラによって収集された画像から、前記ジェスチャ制御の有効空間領域に対応する部分画像領域を選択し、
前記部分画像領域に対して前記ジェスチャ認識処理を実行するように構成される、
請求項13ないし17のいずれか一項に記載のジェスチャ制御装置。 - 前記ジェスチャ制御装置は更に、
パラメータ調整用の可視化インターフェイスを介して、ユーザによって設定されたジェスチャ認識パラメータを受信することにより、前記認識処理モジュールが、前記ジェスチャ認識パラメータに従って前記ジェスチャ認識処理を実行できるようにするように構成されるパラメータ受信モジュールを備える、
請求項13ないし18のいずれか一項に記載のジェスチャ制御装置。 - 前記目標機器は車両を含み、前記操作制御モジュールは、前記目標ジェスチャ認識結果に対応する制御命令を前記車両の機能コンポーネントに送信するか、又は、前記目標ジェスチャ認識結果に対応する操作を実行するように前記車両の機能コンポーネントを制御するように構成される、
請求項13ないし19のいずれか一項に記載のジェスチャ制御装置。 - 前記機能コンポーネントは、メディアプレーヤを備え、
前記操作制御モジュールは、前記目標ジェスチャ認識結果に対応する操作を実行するように前記車両の機能コンポーネントを制御する場合、前記目標ジェスチャ認識結果に応答して、メディア再生状態を変更するように前記メディアプレーヤを制御するように構成される、
請求項20に記載のジェスチャ制御装置。 - 前記機能コンポーネントは、車窓コントローラを備え、
前記操作制御モジュールは、前記目標ジェスチャ認識結果に対応する操作を実行するように前記車両の機能コンポーネントを制御する場合、前記目標ジェスチャ認識結果に応答して、窓ガラスを動かすように前記車窓コントローラを制御するように構成される、
請求項20に記載のジェスチャ制御装置。 - 前記操作制御モジュールは更に、前記目標ジェスチャ認識結果に対応する操作を実行するように前記車両の機能コンポーネントを制御する場合、前記目標ジェスチャ認識結果に応答して、前記画像を介して制御される機能コンポーネントに対応する機能状態インターフェイスに、前記機能コンポーネントの実行開始又は実行停止状態、音量の変化、又は目標対象に対する「いいね」マークのうちの少なくとも1つを表示するように構成される、
請求項20に記載のジェスチャ制御装置。 - 電子機器であって、
プロセッサと、
コンピュータプログラムが記憶されているメモリと、を備え、当該コンピュータプログラムが前記プロセッサによって実行されるときに、請求項1ないし12のいずれか一項に記載のジェスチャ制御方法を実現する、前記電子機器。 - コンピュータプログラムが記憶されているコンピュータ可読記憶媒体であって、
前記コンピュータプログラムがプロセッサによって実行されるときに、請求項1ないし12のいずれか一項に記載のジェスチャ制御方法を実現する、前記コンピュータ可読記憶媒体。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911008049.0A CN110716648B (zh) | 2019-10-22 | 2019-10-22 | 手势控制方法和装置 |
CN201911008049.0 | 2019-10-22 | ||
PCT/CN2020/105593 WO2021077840A1 (zh) | 2019-10-22 | 2020-07-29 | 手势控制方法和装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2022520030A true JP2022520030A (ja) | 2022-03-28 |
JP7479388B2 JP7479388B2 (ja) | 2024-05-08 |
Family
ID=69214071
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021544350A Active JP7479388B2 (ja) | 2019-10-22 | 2020-07-29 | ジェスチャ制御方法及び装置 |
Country Status (4)
Country | Link |
---|---|
JP (1) | JP7479388B2 (ja) |
KR (1) | KR20210141688A (ja) |
CN (1) | CN110716648B (ja) |
WO (1) | WO2021077840A1 (ja) |
Families Citing this family (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110716648B (zh) * | 2019-10-22 | 2021-08-24 | 上海商汤智能科技有限公司 | 手势控制方法和装置 |
CN113473198B (zh) * | 2020-06-23 | 2023-09-05 | 青岛海信电子产业控股股份有限公司 | 一种智能设备的控制方法及智能设备 |
EP4160377A4 (en) | 2020-07-31 | 2023-11-08 | Guangdong Oppo Mobile Telecommunications Corp., Ltd. | GESTURE CONTROL METHOD AND ASSOCIATED DEVICE |
CN111880660B (zh) * | 2020-07-31 | 2022-10-21 | Oppo广东移动通信有限公司 | 显示画面的控制方法、装置、计算机设备和存储介质 |
CN112069914A (zh) * | 2020-08-14 | 2020-12-11 | 杭州鸿泉物联网技术股份有限公司 | 一种车辆的控制方法和系统 |
WO2022166338A1 (zh) * | 2021-02-08 | 2022-08-11 | 海信视像科技股份有限公司 | 显示设备 |
CN113253847B (zh) * | 2021-06-08 | 2024-04-30 | 北京字节跳动网络技术有限公司 | 终端的控制方法、装置、终端和存储介质 |
CN113934307B (zh) * | 2021-12-16 | 2022-03-18 | 佛山市霖云艾思科技有限公司 | 一种根据手势和场景开启电子设备的方法 |
CN114463781A (zh) * | 2022-01-18 | 2022-05-10 | 影石创新科技股份有限公司 | 确定触发手势的方法、装置及设备 |
CN114461068A (zh) * | 2022-02-07 | 2022-05-10 | 中国第一汽车股份有限公司 | 一种车辆使用指导交互方法、装置、设备和介质 |
CN114889543A (zh) * | 2022-06-08 | 2022-08-12 | 中国第一汽车股份有限公司 | 一种车辆驾驶防疲劳方法、装置及车辆 |
CN115421591B (zh) * | 2022-08-15 | 2024-03-15 | 珠海视熙科技有限公司 | 手势控制装置和摄像设备 |
CN116761040B (zh) * | 2023-08-22 | 2023-10-27 | 超级芯(江苏)智能科技有限公司 | Vr云平台交互方法及交互系统 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2014030442A1 (ja) * | 2012-08-22 | 2014-02-27 | 日本電気株式会社 | 入力装置、入力方法、プログラム、及び、電子看板 |
JP2015020677A (ja) * | 2013-07-23 | 2015-02-02 | アルパイン株式会社 | 画像認識装置、ジェスチャ入力装置及びコンピュータプログラム |
JP2017027600A (ja) * | 2015-07-23 | 2017-02-02 | 株式会社リコー | 手振り識別方法と装置 |
JP2017173927A (ja) * | 2016-03-18 | 2017-09-28 | 株式会社リコー | 情報処理装置、情報処理システム、サービス処理実行制御方法及びプログラム |
JP2018036902A (ja) * | 2016-08-31 | 2018-03-08 | 島根県 | 機器操作システム、機器操作方法および機器操作プログラム |
JP2018055614A (ja) * | 2016-09-30 | 2018-04-05 | 島根県 | ジェスチャ操作システム、ジェスチャ操作方法およびプログラム |
Family Cites Families (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009093291A (ja) * | 2007-10-04 | 2009-04-30 | Toshiba Corp | ジェスチャー判定装置及び方法 |
IL204436A (en) * | 2010-03-11 | 2016-03-31 | Deutsche Telekom Ag | A system and method for remote control of online TV by waving hands |
CN103376890B (zh) * | 2012-04-16 | 2016-08-31 | 富士通株式会社 | 基于视觉的手势遥控系统 |
WO2015104919A1 (ja) * | 2014-01-10 | 2015-07-16 | コニカミノルタ株式会社 | ジェスチャー認識装置、操作入力装置およびジェスチャー認識方法 |
CN104216514A (zh) * | 2014-07-08 | 2014-12-17 | 深圳市华宝电子科技有限公司 | 一种车载设备控制方法、装置及车辆 |
US11204647B2 (en) * | 2017-09-19 | 2021-12-21 | Texas Instruments Incorporated | System and method for radar gesture recognition |
CN110308786B (zh) * | 2018-03-20 | 2023-12-26 | 厦门歌乐电子企业有限公司 | 一种车载设备及其手势识别方法 |
CN108596092B (zh) * | 2018-04-24 | 2021-05-18 | 亮风台(上海)信息科技有限公司 | 手势识别方法、装置、设备和存储介质 |
CN109409277B (zh) * | 2018-10-18 | 2020-11-24 | 北京旷视科技有限公司 | 手势识别方法、装置、智能终端及计算机存储介质 |
CN109598198A (zh) * | 2018-10-31 | 2019-04-09 | 深圳市商汤科技有限公司 | 用于识别手势移动方向的方法、装置、介质、程序及设备 |
CN109492577B (zh) * | 2018-11-08 | 2020-09-18 | 北京奇艺世纪科技有限公司 | 一种手势识别方法、装置及电子设备 |
CN110322760B (zh) * | 2019-07-08 | 2020-11-03 | 北京达佳互联信息技术有限公司 | 语音数据生成方法、装置、终端及存储介质 |
CN110716648B (zh) * | 2019-10-22 | 2021-08-24 | 上海商汤智能科技有限公司 | 手势控制方法和装置 |
-
2019
- 2019-10-22 CN CN201911008049.0A patent/CN110716648B/zh active Active
-
2020
- 2020-07-29 JP JP2021544350A patent/JP7479388B2/ja active Active
- 2020-07-29 KR KR1020217034498A patent/KR20210141688A/ko active Search and Examination
- 2020-07-29 WO PCT/CN2020/105593 patent/WO2021077840A1/zh active Application Filing
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2014030442A1 (ja) * | 2012-08-22 | 2014-02-27 | 日本電気株式会社 | 入力装置、入力方法、プログラム、及び、電子看板 |
JP2015020677A (ja) * | 2013-07-23 | 2015-02-02 | アルパイン株式会社 | 画像認識装置、ジェスチャ入力装置及びコンピュータプログラム |
JP2017027600A (ja) * | 2015-07-23 | 2017-02-02 | 株式会社リコー | 手振り識別方法と装置 |
JP2017173927A (ja) * | 2016-03-18 | 2017-09-28 | 株式会社リコー | 情報処理装置、情報処理システム、サービス処理実行制御方法及びプログラム |
JP2018036902A (ja) * | 2016-08-31 | 2018-03-08 | 島根県 | 機器操作システム、機器操作方法および機器操作プログラム |
JP2018055614A (ja) * | 2016-09-30 | 2018-04-05 | 島根県 | ジェスチャ操作システム、ジェスチャ操作方法およびプログラム |
Also Published As
Publication number | Publication date |
---|---|
KR20210141688A (ko) | 2021-11-23 |
JP7479388B2 (ja) | 2024-05-08 |
CN110716648B (zh) | 2021-08-24 |
WO2021077840A1 (zh) | 2021-04-29 |
CN110716648A (zh) | 2020-01-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP2022520030A (ja) | ジェスチャ制御方法及び装置 | |
US11144274B2 (en) | Methods, systems, and media for providing a remote control interface | |
US9344758B2 (en) | Video stream processing apparatus, method for displaying mirror video, and display device | |
US9900541B2 (en) | Augmented reality remote control | |
US20180173321A1 (en) | Apparatus, method and recording medium for controlling user interface using input image | |
US20130278837A1 (en) | Multi-Media Systems, Controllers and Methods for Controlling Display Devices | |
US20170046866A1 (en) | Method and device for presenting operating states | |
CN110764616A (zh) | 手势控制方法和装置 | |
CN109144260B (zh) | 动态动作检测方法、动态动作控制方法及装置 | |
CN108476339B (zh) | 一种遥控方法和终端 | |
US20150253949A1 (en) | Information processing apparatus, information processing method, and program | |
US20160334880A1 (en) | Gesture recognition method, computing device, and control device | |
US20230405435A1 (en) | Home training service providing method and display device performing same | |
CN110601933A (zh) | 物联网设备的控制方法、装置、设备及存储介质 | |
CN111246264A (zh) | 显示设备及其控制方法 | |
KR20150126192A (ko) | 전자 장치 및 전자 장치에서 촬영 방법 | |
US10346033B2 (en) | Electronic device for processing multi-touch input and operating method thereof | |
KR20210083016A (ko) | 전자 장치 및 그의 제어 방법 | |
US20200311398A1 (en) | Scene controlling method, device and electronic equipment | |
CN108415572B (zh) | 应用于移动终端的模块控制方法、装置及存储介质 | |
EP3848785B1 (en) | Mobile device and method for controlling mobile device | |
CN116158077A (zh) | 一种优化运动矢量的方法及其相关设备 | |
AU2015309688B2 (en) | Methods and systems for positioning and controlling sound images in three-dimensional space | |
WO2013175341A2 (en) | Method and apparatus for controlling multiple devices | |
US20230095282A1 (en) | Method And Device For Faciliating Interactions With A Peripheral Device |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210729 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210729 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20220729 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220808 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230106 |
|
A603 | Late request for extension of time limit during examination |
Free format text: JAPANESE INTERMEDIATE CODE: A603 Effective date: 20230106 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20230210 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230601 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20230609 |
|
A912 | Re-examination (zenchi) completed and case transferred to appeal board |
Free format text: JAPANESE INTERMEDIATE CODE: A912 Effective date: 20230623 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20240226 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240423 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7479388 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |