JP2019079097A - ジェスチャ入力装置 - Google Patents
ジェスチャ入力装置 Download PDFInfo
- Publication number
- JP2019079097A JP2019079097A JP2017203204A JP2017203204A JP2019079097A JP 2019079097 A JP2019079097 A JP 2019079097A JP 2017203204 A JP2017203204 A JP 2017203204A JP 2017203204 A JP2017203204 A JP 2017203204A JP 2019079097 A JP2019079097 A JP 2019079097A
- Authority
- JP
- Japan
- Prior art keywords
- gesture
- unit
- display
- display unit
- determination
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000001514 detection method Methods 0.000 claims abstract description 61
- 238000012790 confirmation Methods 0.000 claims abstract description 16
- 238000003780 insertion Methods 0.000 claims description 10
- 230000037431 insertion Effects 0.000 claims description 10
- 238000005259 measurement Methods 0.000 claims description 7
- 238000004378 air conditioning Methods 0.000 description 39
- 238000000034 method Methods 0.000 description 14
- 230000000007 visual effect Effects 0.000 description 7
- 238000010586 diagram Methods 0.000 description 6
- 230000000694 effects Effects 0.000 description 5
- 238000012986 modification Methods 0.000 description 4
- 230000004048 modification Effects 0.000 description 4
- 230000010365 information processing Effects 0.000 description 3
- 208000008918 voyeurism Diseases 0.000 description 3
- 238000012217 deletion Methods 0.000 description 2
- 230000037430 deletion Effects 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 244000144985 peep Species 0.000 description 2
- 238000005452 bending Methods 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 230000005057 finger movement Effects 0.000 description 1
- 210000003128 head Anatomy 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 210000001747 pupil Anatomy 0.000 description 1
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R16/00—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
- B60R16/02—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/16—Sound input; Sound output
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Mechanical Engineering (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- General Health & Medical Sciences (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
Description
操作者のジェスチャ操作を検出するジェスチャ検出部(120)と、
ジェスチャ操作から操作対象を判定する判定部(130)と、を備え、
判定部は、ジェスチャ検出部によって検出されたジェスチャ操作が、操作者の手によって指し示される手差しジェスチャであると判定すると、指し示された対象を操作対象として選択確定することを特徴としている。
第1実施形態のジェスチャ入力装置100Aについて図1〜図4を用いて説明する。本実施形態のジェスチャ入力装置100Aは、車両に搭載され、運転者(操作者)の体の特定部位の動き(ジェスチャ操作)に基づいて、各種車両機器に対する入力操作を行うものである。
第2実施形態のジェスチャ入力装置100Bを図5〜図7に示す。第2実施形態は、上記第1実施形態に対して、運転者の声を検出して、検出した声を指示対象判定部130に出力する声検出部150を追加したものである。
第3実施形態のジェスチャ入力装置100Cを図8〜図10に示す。第3実施形態は、上記第1実施形態に対して、指差しジェスチャによって、任意の車両機器(操作対象)を選択確定した後に、表示部に任意の車両機器の操作用画面を表示し、その操作用画面に対して、操作ジェスチャが行われると入力操作が受付されるようにしたものである。
第4実施形態のジェスチャ入力装置100Dを図11、図12に示す。第4実施形態は、上記第1実施形態に対して、指差しジェスチャによって、任意の車両機器(操作対象)を選択確定した後に、任意の車両機器の操作用画面を表示し、その操作用画面に対して、手による直接的な手入力操作、あるいは、声による声入力操作が行われると入力操作が受付されるようにしたものである。
第5実施形態のジェスチャ入力装置100Eを図13〜図16に示す。第5実施形態は、上記第1〜第4実施形態に対して、操作対象を、車外に設けられ、運転者に特定の情報をもたらす複数の情報表示部116としたものである。複数の情報表示部116のうち、運転者の指差しジェスチャによって、指し示された情報表示部116が選択確定されるようになっている。
上記第5実施形態の補助ジェスチャとして、頷きのジェスチャを用いたが、これに限定されることなく、図17(b)に示すウインクや、図18(b)に示すステアリング上でのタップ操作ジェスチャ等とすることが可能である。
第6実施形態のジェスチャ入力装置100Fを図19〜図24に示す。第6実施形態は、上記第5実施形態に対して、視線計測部195を設けて、運転者に視認された複数の情報表示部116を登録リストとして作成するようにしたものである。そして、登録リストに揚げられた複数の情報表示部のいずれかに対して指差しジェスチャがあると、操作対象として選択確定するようにしている。
上記各実施形態に対して、指差しジェスチャによって操作対象が選択確定されたときに、運転者に対して確認用のフィードバックを与える機能(フィードバック部)を追加したものとしてもよい。例えば、ステアリングを振動させる振動発生部を設けて、指示対象が選択確定された後に、ステアリングを振動させるようにしてもよい。あるいは、効果音や音声を発生させる発生部を設けて、指示対象が選択確定された後に、効果音(ピッ)や音声(選択確定されました)等を運転者に伝えるようにしてもよい。これにより、運転者が指差した車両機器が、確かに選択確定されたことを知ることができ、安心して入力操作を行うことができる。
111 空調装置(操作対象)
111a 空調表示部(表示部、任意の表示部)
112 ヘッドアップディスプレイ装置(操作対象、表示装置)
112a ヘッドアップ表示部(表示部、別の表示部)
113 カーナビゲーション装置(操作対象)
113a ナビ表示部(表示部)
114a センタ表示部(表示部)
115 ルームランプ装置(任意の操作対象)
116 情報表示部
120 指示動作検出部(ジェスチャ検出部)
130 指示対象判定部(判定部)
140 表示制御部(制御部)
150 声検出部
170 車外情報取得部
195 視線計測部
Claims (15)
- 操作者のジェスチャ操作に基づいて、操作対象(111、112、113)に対する入力操作が行われるジェスチャ入力装置において、
前記操作者の前記ジェスチャ操作を検出するジェスチャ検出部(120)と、
前記ジェスチャ操作から前記操作対象を判定する判定部(130)と、を備え、
前記判定部は、前記ジェスチャ検出部によって検出された前記ジェスチャ操作が、前記操作者の手によって指し示される手差しジェスチャであると判定すると、指し示された対象を前記操作対象として選択確定するジェスチャ入力装置。 - 前記手差しジェスチャは、手の指による指差しジェスチャである請求項1に記載のジェスチャ入力装置。
- 前記操作対象は、複数設けられており、複数の前記操作対象(111、112、113)の作動状態をそれぞれ表示する複数の表示部(111a、112a、113a)を有しており、
前記判定部からの判定内容に応じて、複数の前記表示部の表示状態を制御する制御部(140)を備え、
前記判定部によって、複数の前記表示部のうち、任意の表示部(111a)に対する前記手差しジェスチャが判定され、選択確定されたのち、前記任意の表示部とは異なる別の表示部(112a)に対する別の手差しジェスチャが判定されると、
前記制御部は、前記任意の表示部における表示を、前記別の表示部に表示させる請求項1または請求項2に記載のジェスチャ入力装置。 - 前記操作対象は、複数設けられており、前記操作対象(111、112、113)の作動状態を表示する表示部(111a)を有しており、
前記判定部からの判定内容に応じて、前記表示部の表示状態を制御する制御部(140)を備え、
前記判定部によって、前記表示部に対する前記手差しジェスチャが判定され、選択確定されたのち、前記手差しジェスチャとは異なる別のジェスチャが判定されると、
前記制御部は、複数の前記操作対象のうち、前記表示部における元の操作対象の表示を、別の操作対象の表示に切替える請求項1または請求項2に記載のジェスチャ入力装置。 - 前記制御部によって、前記表示部における表示が切替えられた後に、前記判定部によって、予め定められたデフォルト用のジェスチャが判定されると、前記制御部は、所定時間、予め定めたデフォルト表示を行う請求項4に記載のジェスチャ入力装置。
- 前記操作者の声を検出して、検出した前記声を前記判定部に出力する声検出部(150)を備え、
前記判定部は、前記ジェスチャ操作の条件に、前記声検出部からの前記声の条件を加えて、前記選択確定、および前記制御部に対する表示の変更指示を行う請求項3〜請求項5のいずれか1つに記載のジェスチャ入力装置。 - 前記操作対象は、複数設けられており、前記操作対象(111、112、113、115)に対する入力操作を可能とする操作用画面を表示する表示部(112a)を有しており、
前記判定部からの判定内容に応じて、前記表示部の表示状態を制御する制御部(140)を備え、
前記判定部によって、複数の前記操作対象のうち、任意の操作対象(115)に対する前記手差しジェスチャが判定され、選択確定されると、
前記制御部は、前記表示部に前記任意の操作対象の前記操作用画面を表示し、
更に、前記判定部によって、前記手差しジェスチャの後に、前記操作用画面に対して前記手差しジェスチャとは異なる操作ジェスチャが判定されると、前記操作用画面に対する入力操作が受付けされる請求項1または請求項2に記載のジェスチャ入力装置。 - 前記操作対象は、複数設けられており、前記操作対象(111、112、113、115)に対する入力操作を可能とする操作用画面を表示する表示部(114a)を有しており、
前記判定部からの判定内容に応じて、前記表示部の表示状態を制御する制御部(140)を備え、
前記判定部によって、複数の前記操作対象のうち、任意の操作対象(115)に対する前記手差しジェスチャが判定され、選択確定されると、
前記制御部は、前記表示部に前記任意の操作対象の前記操作用画面を表示し、
更に、前記判定部によって、前記手差しジェスチャの後に、前記操作用画面に対して、前記操作者の手による手入力操作、あるいは声による声入力操作があると、前記操作用画面に対する入力操作が受付けされる請求項1または請求項2に記載のジェスチャ入力装置。 - 車両に搭載され、
前記操作対象は、車外に設けられ、前記操作者に特定の情報をもたらす情報表示部(116)であり、
前記情報表示部を取得する車外情報取得部(170)を備え、
前記判定部は、前記ジェスチャ検出部によって検出された前記手差しジェスチャと、前記車外情報取得部によって取得された前記情報表示部とを関連付けて、前記手差しジェスチャによって指し示された前記情報表示部を前記操作対象として選択確定する請求項1または請求項2に記載のジェスチャ入力装置。 - 前記情報表示部は、案内表示あるいはランドマークを含む請求項9に記載のジェスチャ入力装置。
- 前記判定部は、前記手差しジェスチャの条件に、予め定めた別のジェスチャの条件を加えて、前記選択確定する請求項9または請求項10に記載のジェスチャ入力装置。
- 前記判定部は、前記手差しジェスチャが実施されている間、あるいは前記手差しジェスチャが実施された後の所定時間の間に、前記別のジェスチャが行われたときに、前記別のジェスチャは有効であると判定する請求項11に記載のジェスチャ入力装置。
- 前記操作者の視線方向を計測する視線計測部(195)を備え、
前記判定部は、前記視線計測部による前記視線方向と、前記車外情報取得部によって取得された前記情報表示部とを関連付けて、前記操作者によって視認された複数の前記情報表示部を登録リストとして作成し、
前記判定部は、前記登録リストに揚げられた複数の前記情報表示部のいずれかに対して前記手差しジェスチャがあると、前記手差しジェスチャによって指し示された前記情報表示部を前記操作対象として選択確定する請求項9〜請求項12のいずれか1つに記載のジェスチャ入力装置。 - ナビゲーション装置(113)、あるいは表示装置(112)を備え、
前記判定部によって前記操作対象に対する選択確定が行われると、前記ナビゲーション装置による前記情報表示部に示された行先への案内、あるいは前記表示装置による前記情報表示部の内容表示が実行される請求項9〜請求項13のいずれか1つに記載のジェスチャ入力装置。 - 前記操作対象の選択確定を前記操作者に対してフィードバックするフィードバック部を備え、
前記判定部は、選択確定を行うと前記フィードバック部を作動させる請求項1〜請求項14のいずれか1つに記載のジェスチャ入力装置。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017203204A JP6819539B2 (ja) | 2017-10-20 | 2017-10-20 | ジェスチャ入力装置 |
PCT/JP2018/033391 WO2019077908A1 (ja) | 2017-10-20 | 2018-09-10 | ジェスチャ入力装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017203204A JP6819539B2 (ja) | 2017-10-20 | 2017-10-20 | ジェスチャ入力装置 |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2019079097A true JP2019079097A (ja) | 2019-05-23 |
JP2019079097A5 JP2019079097A5 (ja) | 2019-11-21 |
JP6819539B2 JP6819539B2 (ja) | 2021-01-27 |
Family
ID=66174023
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017203204A Expired - Fee Related JP6819539B2 (ja) | 2017-10-20 | 2017-10-20 | ジェスチャ入力装置 |
Country Status (2)
Country | Link |
---|---|
JP (1) | JP6819539B2 (ja) |
WO (1) | WO2019077908A1 (ja) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2021133877A (ja) * | 2020-02-28 | 2021-09-13 | 株式会社Subaru | 車両の乗員監視装置 |
JP2022071797A (ja) * | 2020-10-28 | 2022-05-16 | 株式会社日本総合研究所 | 車両及び表示方法 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001216069A (ja) * | 2000-02-01 | 2001-08-10 | Toshiba Corp | 操作入力装置および方向検出方法 |
JP2005178473A (ja) * | 2003-12-17 | 2005-07-07 | Denso Corp | 車載機器用インターフェース |
JP2007080060A (ja) * | 2005-09-15 | 2007-03-29 | Matsushita Electric Ind Co Ltd | 対象物特定装置 |
JP2016091192A (ja) * | 2014-10-31 | 2016-05-23 | パイオニア株式会社 | 虚像表示装置、制御方法、プログラム、及び記憶媒体 |
-
2017
- 2017-10-20 JP JP2017203204A patent/JP6819539B2/ja not_active Expired - Fee Related
-
2018
- 2018-09-10 WO PCT/JP2018/033391 patent/WO2019077908A1/ja active Application Filing
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001216069A (ja) * | 2000-02-01 | 2001-08-10 | Toshiba Corp | 操作入力装置および方向検出方法 |
JP2005178473A (ja) * | 2003-12-17 | 2005-07-07 | Denso Corp | 車載機器用インターフェース |
JP2007080060A (ja) * | 2005-09-15 | 2007-03-29 | Matsushita Electric Ind Co Ltd | 対象物特定装置 |
JP2016091192A (ja) * | 2014-10-31 | 2016-05-23 | パイオニア株式会社 | 虚像表示装置、制御方法、プログラム、及び記憶媒体 |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2021133877A (ja) * | 2020-02-28 | 2021-09-13 | 株式会社Subaru | 車両の乗員監視装置 |
JP7495795B2 (ja) | 2020-02-28 | 2024-06-05 | 株式会社Subaru | 車両の乗員監視装置 |
JP2022071797A (ja) * | 2020-10-28 | 2022-05-16 | 株式会社日本総合研究所 | 車両及び表示方法 |
JP2022071796A (ja) * | 2020-10-28 | 2022-05-16 | 株式会社日本総合研究所 | 情報処理システム、コンピュータプログラム、及び表示方法 |
JP7236478B2 (ja) | 2020-10-28 | 2023-03-09 | 株式会社日本総合研究所 | 情報処理システム、コンピュータプログラム、及び表示方法 |
Also Published As
Publication number | Publication date |
---|---|
WO2019077908A1 (ja) | 2019-04-25 |
JP6819539B2 (ja) | 2021-01-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10466800B2 (en) | Vehicle information processing device | |
US10528150B2 (en) | In-vehicle device | |
US9649938B2 (en) | Method for synchronizing display devices in a motor vehicle | |
US10346118B2 (en) | On-vehicle operation device | |
JP2010184600A (ja) | 車載用ジェスチャースイッチ装置 | |
US20180239441A1 (en) | Operation system | |
US9459116B2 (en) | Display method for a display system, display system and operating method for a navigation system of a vehicle | |
US10691122B2 (en) | In-vehicle system | |
KR101491169B1 (ko) | 차량의 탑재기기 조작 장치 및 그 제어 방법 | |
JPWO2017002708A1 (ja) | 画像表示制御装置 | |
JP2006264615A (ja) | 車両用表示装置 | |
JP2018055614A (ja) | ジェスチャ操作システム、ジェスチャ操作方法およびプログラム | |
WO2019077908A1 (ja) | ジェスチャ入力装置 | |
JP2014021748A (ja) | 操作入力装置及びそれを用いた車載機器 | |
WO2018116565A1 (ja) | 車両用情報表示装置及び車両用情報表示プログラム | |
JP2011255812A (ja) | 駐車支援装置 | |
KR20170010066A (ko) | 차량 내 사용자 인터페이스 제공 방법 및 그 장치 | |
JP2008185452A (ja) | ナビゲーション装置 | |
TWM564749U (zh) | 車輛多螢幕控制系統 | |
JP2010097332A (ja) | 入力支援装置 | |
JP2009126366A (ja) | 車両用表示装置 | |
CN103857551A (zh) | 用于提供在车辆中的操作装置的方法和操作装置 | |
JP4645665B2 (ja) | 操作手投影システムおよび操作手投影システム用のプログラム | |
JP2018063521A (ja) | 表示制御システムおよび表示制御プログラム | |
JP4962387B2 (ja) | ポインタ表示・移動装置およびポインタ表示・移動装置用のプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20191009 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20191125 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20201201 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20201214 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6819539 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
LAPS | Cancellation because of no payment of annual fees |