JP7412507B2 - ジェスチャ検出装置、ジェスチャ検出方法、およびプログラム - Google Patents
ジェスチャ検出装置、ジェスチャ検出方法、およびプログラム Download PDFInfo
- Publication number
- JP7412507B2 JP7412507B2 JP2022178421A JP2022178421A JP7412507B2 JP 7412507 B2 JP7412507 B2 JP 7412507B2 JP 2022178421 A JP2022178421 A JP 2022178421A JP 2022178421 A JP2022178421 A JP 2022178421A JP 7412507 B2 JP7412507 B2 JP 7412507B2
- Authority
- JP
- Japan
- Prior art keywords
- gesture
- information
- unit
- person
- notification
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000001514 detection method Methods 0.000 title claims description 83
- 238000012545 processing Methods 0.000 description 17
- 238000010586 diagram Methods 0.000 description 15
- 238000000034 method Methods 0.000 description 7
- 230000009471 action Effects 0.000 description 4
- 230000006870 function Effects 0.000 description 3
- 239000011521 glass Substances 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 230000007704 transition Effects 0.000 description 3
- 238000004378 air conditioning Methods 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 238000005401 electroluminescence Methods 0.000 description 2
- 238000003384 imaging method Methods 0.000 description 2
- 230000003213 activating effect Effects 0.000 description 1
- 238000003708 edge detection Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 238000012905 input function Methods 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Images
Landscapes
- User Interface Of Digital Computer (AREA)
- Image Analysis (AREA)
Description
(1):この発明の一態様に係るジェスチャ検出装置は、利用者のジェスチャを認識可能なジェスチャ認識部と、前記ジェスチャ認識部が、前記ジェスチャの認識を行う状態にあるときに、前記ジェスチャが行われていることを示す報知情報を出力する情報出力部と、前記利用者以外の人を検出する人検出部と、を備え、前記情報出力部は、前記利用者以外の人が検出された際に、前記報知情報を出力する、ジェスチャ検出装置である。
一態様によれば、少なくとも1つのジェスチャについてNGが付されている国や地域(文化圏)において、そのジェスチャが行われる際、筐体外にいる人に対して不快な感じを与えないようにすることができる。
一態様によれば、操作部に対する操作されたことやジェスチャ認識機能を起動させるウェイクアップワードが発話されたことなどにより遷移させることができる。
一態様によれば、利用者の所定のジェスチャに基づいて報知するようにしたので、所定のジェスチャが行われる際、筐体外にいる人に対して不快な感じを与えないようにすることができる。
一態様によれば、他のジェスチャによって報知されることを防止することができる。
一態様によれば、筐体外にいる人に対して不快な感じを与えないようにすることができる。
一態様によれば、ジェスチャが行われる前に報知するようにしたので、筐体外にいる人に対して、より不快な感じを与えないようにすることができる。
一態様によれば、筐体内でジェスチャを行いかつ筐体外に人が検出された場合に、ジェスチャが行われていることを筐体外に出力するようにしたので、筐体外にいる人に対して不快な感じを与えないようにすることができる。
一態様によれば、筐体内でジェスチャを行いかつ筐体外のジェスチャが指し示す方向に人が検出された場合に、ジェスチャが行われていることを筐体外に出力するようにしたので、筐体外にいる人に対して不快な感じを与えないようにすることができる。
一態様によれば、筐体内でジェスチャを行いかつ筐体外のジェスチャが指し示す方向に人が検出された場合に、ジェスチャが行われていることをジェスチャが指し示す方向の筐体外に出力するようにしたので、ジェスチャが指し示す方向の筐体外にいる人に対して不快な感じを与えないようにすることができる。
一態様によれば、国や地域によってタブーとされているジェスチャに応じて報知情報の出力を制御することができる。
一態様によれば、筐体内に報知情報を出力していることを報知するようにしたので、人に遠慮せずにジェスチャを行うことができる。
一態様によれば、筐体が移動している場合、筐体の移動速度に応じて報知情報を報知するか報知しないか切り替えることができる。
一態様によれば、報知情報を画像表示装置に表示させて報知するため、筐体外の人にジェスチャが筐体内で行われていることを報知することができる。
まず、ジェスチャシステム1の概要を説明する。なお、以下の例では、ジェスチャ検出装置を車両で用いる例を説明するが、これに限らない、ジェスチャ検出装置が用いられる筐体は、車両に限らない。筐体は、例えば窓の外を人が通る部屋等であってもよい。
または、報知情報には、行われている(または行われた)ジェスチャが、その国や地域でタブーなものであることを示す情報が含まれている。
ジェスチャ検出装置11の構成例を説明する。図2は、本実施形態に係るジェスチャ検出装置11の構成例を示すブロック図である。図2に示すように、ジェスチャ検出装置11は、ジェスチャ認識部111、人検出部112、記憶部113、情報出力部114、および取得部115を備える。記憶部113は、ジェスチャモデル記憶部1131、人モデル記憶部1132、および報知情報記憶部1133を備える。ジェスチャ検出装置11は、報知部13および表示部14に接続されている。なお、ジェスチャ検出装置11は、報知部13および表示部14を備えていてもよい。また、ジェスチャ検出装置11には、操作部15が接続されていてもよい。
ジェスチャ認識部111は、ジェスチャモデル記憶部1131を参照して乗員の所定のジェスチャを認識する。ジェスチャ認識部111は、例えば撮影部と画像取得部と画像処理部等を備える。なお、撮影部が備える撮影装置は1つであってもよく、複数であってもよい。ジェスチャ認識部111は、撮影された画像に対して所定の画像処理(例えば二値化処理、エッジ検出処理、特徴量抽出処理、クラスタリング処理等)を行う。ジェスチャ認識部111は、画像処理された画像とジェスチャモデル記憶部1131が記憶するモデル画像を比較して、例えばパターンマッチングの手法によって所定のジェスチャを認識する。ジェスチャ認識部111は、認識した認識結果を情報出力部114に出力する。また、ジェスチャ認識部111は、画像処理した結果に基づいて、ジェスチャが示す方向を推定し、推定した方向を示す情報を人検出部112に出力する。なお、ジェスチャが示す方向とは、例えば人差し指が指し示す方向である。なお、ジェスチャ認識部111は、例えば光を用いた検出器によって乗員の所定のジェスチャを認識するようにしてもよい。なお、乗員は、ジェスチャを行う前に、操作部15を操作して、ジェスチャを開始することを設定するようにしてもよい。この場合、ジェスチャ認識部111は、操作部15が出力する操作結果に基づいて、ジェスチャ入力を受け付ける設定にするようにしてもよい。また、操作部15は、音声を認識して操作を受け付けるようにしてもよい。操作部15は、例えばジェスチャ入力機能をオン状態にするためのウェイクアップワードが発話されることに基づいて、ジェスチャ入力を受け付けるようにしてもよい。この場合、情報出力部114は、ジェスチャ認識部111が、ジェスチャの認識を行わない状態からジェスチャの認識を行う状態に遷移したことに基づいて、報知するようにしてもよい。また、ジェスチャの認識を行わない状態からジェスチャの認識を行う状態への遷移は、操作部15に対する操作されたことやジェスチャ認識機能を起動させるウェイクアップワードが発話されたことなどにより遷移されるようにしてもよい。
人モデル記憶部1132は、例えば国や地域や宗教に特有の衣装やアクセサリーを検出できるモデルを記憶する。
次に、ジェスチャモデル記憶部1131が記憶するモデルの例を説明する。図3は、本実施形態に係るジェスチャモデル記憶部1131が記憶するモデルの例を示す図である。
図3に示すように、ジェスチャモデル記憶部1131は、ジェスチャ毎に、国(または地域、文化圏)と、その国(または地域、文化圏)の人が当該ジェスチャを不快に感じるか否かを関連付けて記憶する。ジェスチャモデル記憶部1131は、例えば第1のジェスチャに、第1の国と第2の国において当該ジェスチャを不快に感じないことを示す情報(OK)と、第3の国において当該ジェスチャを不快に感じることを示す情報(NG)とを関連付けて記憶する。なお、所定の国や地域内とは、少なくとも1つのジェスチャについてNGが付されている国や地域(文化圏)である。このため、情報出力部114は、どのジェスチャに対してもNGがついていない(すべてOK)の国(文化圏)で使用されている場合、報知を実行しなくてもよい。
次に、報知部13に報知される報知情報の例を説明する。図4は、本実施形態に係る報知部13に報知される報知情報の例を示す図である。図4において、符号g11は報知情報を表し、符号g12はジェスチャの例として人差し指による指さしを表し、符号g13は表示部14に表示される画像情報を表している。なお、符号g11に示す例は、報知情報が画像情報の例であり、車両内から見た画像例である。また、符号g11に示す例は、ジェスチャが示す方向がフロントガラスの前方下部の例である。なお、図4に示す例は、乗員が行ったジェスチャが、その国では不快に思われる場合の動作例を示している。
次に、報知部13が表示装置の例を説明する。図5は、本実施形態に係る報知部13が表示装置の例を示す図である。図5は、報知部13が車両(筐体12)のフロントガラス21の内側に取り付けられている例である。なお、報知部13は、ジェスチャを行う乗員と、人(huo)との間に設けられていればよいので、例えばフロントガラスに内蔵されていてもよく、フロントガラスの外側に設けられていてもよい。図5に示す例では、報知部13は、報知部13-1~13-4を備え、高さ方向に4分割されている。情報出力部114は、ジェスチャが指し示す方向に人が検出された場合、ジェスチャが指し示す方向に対応する報知部13-1~13-4のうちの少なくとも1つに報知情報を表示させる。
なお、報知部13は、テキストが表示される方向である横方向にも分割されていてもよい。
次に、ジェスチャと報知情報の表示可否と表示位置の関係例を説明する。図6は、本実施形態に係るジェスチャと報知情報の表示可否と表示位置の関係例を示す図である。符号g101が示す図は、例えば時刻t1において乗員が第1のジェスチャを行った際の報知情報の表示可否と表示位置の関係例を説明するための図である。符号103が示す図は、例えば時刻t2において乗員が第2のジェスチャを行った際の報知情報の表示可否と表示位置の関係例を説明するための図である。
次に、ジェスチャ検出装置11の処理手順例を説明する。図7は、本実施形態に係るジェスチャ検出装置11の処理のフローチャートである。
この構成によって、本実施形態によれば、車両内で指さし等のジェスチャを行った場合に、車両外の人とのトラブルを防ぐことができる。
また、本実施形態によれば、筐体内でジェスチャを行った場合かつジェスチャが指し示す方向に筐体外に人が検出された際に、ジェスチャが行われていることを筐体外に出力するようにしたので、筐体外の人に対して不快な感じを与えないようにすることができる。
また、本実施形態によれば、国や地域や例えば宗教等によってタブーとされているジェスチャに応じて報知情報の出力を制御することができる。
また、本実施形態によれば、筐体内に報知情報を出力していることを報知するようにしたので、乗員は、人に遠慮せずにジェスチャを行うことができる。
12…筐体、
11…ジェスチャ検出装置、
13…報知部、
111…ジェスチャ認識部、
112…人検出部、
113…記憶部、
114…情報出力部、
1131…ジェスチャモデル記憶部、
1132…人モデル記憶部、
1133…報知情報記憶部
Claims (11)
- 利用者のジェスチャを認識可能なジェスチャ認識部と、
前記ジェスチャ認識部が、前記ジェスチャの認識を行う状態にあるときに、前記ジェスチャが行われていることを示す報知情報を出力する情報出力部と、
前記利用者以外の人を検出する人検出部と、を備え、
前記情報出力部は、前記利用者以外の人が検出された際に、前記報知情報を出力する、ジェスチャ検出装置。 - 前記情報出力部は、前記ジェスチャが指し示す方向に前記人が検出された際、前記報知情報を前記方向に出力する、
請求項1に記載のジェスチャ検出装置。 - 利用者のジェスチャを認識可能なジェスチャ認識部と、
前記ジェスチャ認識部が、前記ジェスチャの認識を行う状態にあるときに、前記ジェスチャが行われていることを示す報知情報を出力する情報出力部と、を備え、
前記ジェスチャ認識部は、前記ジェスチャが指し示す方向を推定し、
前記情報出力部は、前記報知情報を前記方向に出力する、ジェスチャ検出装置。 - 前記情報出力部は、前記ジェスチャ認識部が前記ジェスチャの認識を行わない状態から前記ジェスチャの認識を行う状態に遷移したことに基づいて、前記報知情報を出力する、
請求項1から請求項3のいずれか1項に記載のジェスチャ検出装置。 - 前記情報出力部は、前記ジェスチャ認識部が、前記利用者の所定のジェスチャを認識したことに基づいて、前記報知情報を出力する、
請求項1から請求項4のいずれか1項に記載のジェスチャ検出装置。 - 前記所定のジェスチャは、
前記情報出力部に情報を出力させる指示以外のジェスチャである、
請求項5に記載のジェスチャ検出装置。 - 前記情報出力部は、
前記所定のジェスチャが行われる前に、前記報知情報を出力する、
請求項5または請求項6に記載のジェスチャ検出装置。 - 利用者のジェスチャを認識し、
前記ジェスチャの認識を行う状態にあるときに、前記ジェスチャが行われていることを示す報知情報を出力し、
前記利用者以外の人を検出し、
前記利用者以外の人が検出された際に、前記報知情報を出力する、
ジェスチャ検出方法。 - 利用者のジェスチャを認識し、
前記ジェスチャの認識を行う状態にあるときに、前記ジェスチャが行われていることを示す報知情報を出力し、
前記ジェスチャが指し示す方向を推定し、
前記報知情報を前記方向に出力する、
ジェスチャ検出方法。 - ジェスチャ検出装置のコンピュータに、
利用者のジェスチャを認識させ、
前記ジェスチャの認識を行う状態にあるときに、前記ジェスチャが行われていることを示す報知情報を出力させ、
前記利用者以外の人を検出させ、
前記利用者以外の人が検出された際に、前記報知情報を出力させる、
プログラム。 - ジェスチャ検出装置のコンピュータに、
利用者のジェスチャを認識させ、
前記ジェスチャの認識を行う状態にあるときに、前記ジェスチャが行われていることを示す報知情報を出力させ、
前記ジェスチャが指し示す方向を推定させ、
前記報知情報を前記方向に出力させる、
プログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2022178421A JP7412507B2 (ja) | 2019-12-24 | 2022-11-07 | ジェスチャ検出装置、ジェスチャ検出方法、およびプログラム |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019233172A JP7175257B2 (ja) | 2019-12-24 | 2019-12-24 | ジェスチャ検出装置、ジェスチャ検出方法、およびプログラム |
JP2022178421A JP7412507B2 (ja) | 2019-12-24 | 2022-11-07 | ジェスチャ検出装置、ジェスチャ検出方法、およびプログラム |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019233172A Division JP7175257B2 (ja) | 2019-12-24 | 2019-12-24 | ジェスチャ検出装置、ジェスチャ検出方法、およびプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2023009149A JP2023009149A (ja) | 2023-01-19 |
JP7412507B2 true JP7412507B2 (ja) | 2024-01-12 |
Family
ID=76651421
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019233172A Active JP7175257B2 (ja) | 2019-12-24 | 2019-12-24 | ジェスチャ検出装置、ジェスチャ検出方法、およびプログラム |
JP2022178421A Active JP7412507B2 (ja) | 2019-12-24 | 2022-11-07 | ジェスチャ検出装置、ジェスチャ検出方法、およびプログラム |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019233172A Active JP7175257B2 (ja) | 2019-12-24 | 2019-12-24 | ジェスチャ検出装置、ジェスチャ検出方法、およびプログラム |
Country Status (1)
Country | Link |
---|---|
JP (2) | JP7175257B2 (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2023000479A (ja) | 2021-06-18 | 2023-01-04 | 株式会社Jvcケンウッド | ビット拡張処理装置、ビット拡張処理方法、及びビット拡張処理プログラム |
Family Cites Families (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5391145B2 (ja) | 2010-05-12 | 2014-01-15 | 日本放送協会 | 不快度推定装置及び不快度推定プログラム |
JP6103875B2 (ja) | 2012-10-16 | 2017-03-29 | キヤノン株式会社 | ハンドジェスチャ認識装置及びその制御方法 |
JP2014102674A (ja) | 2012-11-20 | 2014-06-05 | Alpine Electronics Inc | ジェスチャー入力装置 |
JP2017034368A (ja) | 2015-07-30 | 2017-02-09 | ソニー株式会社 | 電子機器、制御方法、およびプログラム |
JP6699206B2 (ja) | 2016-02-02 | 2020-05-27 | 富士通株式会社 | 試料の局所構造を求める方法及びx線分析装置 |
JPWO2017138146A1 (ja) * | 2016-02-12 | 2018-02-15 | 三菱電機株式会社 | 情報表示装置及び情報表示方法 |
JP6458792B2 (ja) | 2016-11-04 | 2019-01-30 | 本田技研工業株式会社 | 車両制御システム、車両制御方法、および車両制御プログラム |
WO2018198157A1 (ja) * | 2017-04-24 | 2018-11-01 | 三菱電機株式会社 | 報知制御装置および報知制御方法 |
JP6865101B2 (ja) | 2017-05-24 | 2021-04-28 | スタンレー電気株式会社 | 灯具 |
JP6968679B2 (ja) | 2017-12-13 | 2021-11-17 | 株式会社コロナ | リモコン |
-
2019
- 2019-12-24 JP JP2019233172A patent/JP7175257B2/ja active Active
-
2022
- 2022-11-07 JP JP2022178421A patent/JP7412507B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
JP7175257B2 (ja) | 2022-11-18 |
JP2023009149A (ja) | 2023-01-19 |
JP2021101324A (ja) | 2021-07-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9275274B2 (en) | System and method for identifying handwriting gestures in an in-vehicle information system | |
US8953841B1 (en) | User transportable device with hazard monitoring | |
US10943400B2 (en) | Multimodal user interface for a vehicle | |
US10466800B2 (en) | Vehicle information processing device | |
US8085243B2 (en) | Input device and its method | |
EP3046006A1 (en) | Information processing device, gesture detection method, and gesture detection program | |
US9477315B2 (en) | Information query by pointing | |
JP5689872B2 (ja) | 車両の周辺監視装置 | |
CN110537213B (zh) | 通知控制装置及通知控制方法 | |
JP7412507B2 (ja) | ジェスチャ検出装置、ジェスチャ検出方法、およびプログラム | |
US11507194B2 (en) | Methods and devices for hand-on-wheel gesture interaction for controls | |
KR20220041831A (ko) | 음성 인식의 활성화 | |
WO2022188362A1 (zh) | 分心提醒方法及装置、电子设备和存储介质 | |
CN111045512B (zh) | 车辆、输出车辆的信息的方法及计算机可读记录介质 | |
KR20220098339A (ko) | 차량용 스크린의 제어 방법 및 장치, 전자 기기 및 저장 매체 | |
JP7313271B2 (ja) | ジェスチャ検出装置、ジェスチャ検出方法、およびプログラム | |
JP2006015803A (ja) | 車両用表示装置、および車両用表示装置を搭載した車両 | |
JP5294756B2 (ja) | 車両周囲画像提供装置および車両周囲画像提供方法 | |
JP2018195167A (ja) | 情報提供装置および情報提供方法 | |
JP7105985B2 (ja) | 運転支援装置 | |
JP2022142515A (ja) | 移動体の移動量を推定する情報処理装置、情報処理方法、及びプログラム | |
WO2020008876A1 (ja) | 情報処理装置、情報処理方法、プログラム、及び、移動体 | |
JP2017109656A (ja) | 情報生成装置、情報提示システムおよび情報生成方法 | |
KR20150135933A (ko) | 동작 인식 장치 및 그 동작 방법 | |
KR20130076214A (ko) | 운전자의 포인팅 제스처를 이용한 차량 구동 장치 및 그 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20221107 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20231020 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20231128 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20231226 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7412507 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |