JP7491232B2

JP7491232B2 - 車両用制御装置及び車両用制御方法

Info

Publication number: JP7491232B2
Application number: JP2021017660A
Authority: JP
Inventors: 健史山元; 静香横山; 清貴田口
Original assignee: Denso Corp
Current assignee: Denso Corp
Priority date: 2021-02-05
Filing date: 2021-02-05
Publication date: 2024-05-28
Anticipated expiration: 2041-02-05
Also published as: JP2022120636A; US20230373496A1; WO2022168579A1

Description

本開示は、車両用制御装置及び車両用制御方法に関するものである。

ユーザの身体の一部を用いたジェスチャを検出し、ジェスチャに応じた操作を行わせるジェスチャ操作の技術が知られている。例えば、特許文献１には、携帯電話機において、指毎に異なるアプリケーションを対応付けて記憶しておき、任意の指を使ったジェスチャが認識されたとき、その指に割り当てられた入力操作に基づく処理を実行する技術が開示されている。

特開２０１５－２２５４９３号公報

ジェスチャ操作では、ボタン表示に対する入力と異なり、どの画面を表示している最中でも、ジェスチャによってジェスチャに応じた操作を行わせることが可能になる。よって、所望の操作を行うためのボタン表示が行われる画面にまで切り替えてから入力を行うといった手間を省くことができる。

しかしながら、特許文献１に開示の技術のように、操作内容ごとに異なるジェスチャを割り当てるとユーザの負担が増してしまう。詳しくは、操作内容と指との対応関係を５本の指ごとにユーザが記憶しておかなければならず、ユーザの負担が増してしまう。

これに対して、複数種類の操作内容に対して共通のジェスチャを割り当てることが考えられる。この場合、共通のジェスチャを、必要に応じて異なる種類の操作内容に精度良く割り当てることが要求される。例えば、車両の座席別の操作を行わせる場合に、共通のジェスチャであっても、どの座席の乗員によるジェスチャかを特定し、ジェスチャを行った乗員の座席に応じた操作を行わせることが要求される。

この開示のひとつの目的は、共通のジェスチャを用いて複数種類の操作を行わせながらも、必要に応じた種類の操作をより精度良く行わせることを可能にする車両用制御装置及び車両用制御方法を提供することにある。

上記目的は独立請求項に記載の特徴の組み合わせにより達成され、また、下位請求項は、開示の更なる有利な具体例を規定する。特許請求の範囲に記載した括弧内の符号は、ひとつの態様として後述する実施形態に記載の具体的手段との対応関係を示すものであって、本開示の技術的範囲を限定するものではない。

上記目的を達成するために、本開示の第１の車両用制御装置は、車両の乗員の体の一部である身体部分の動作による、ボタン表示に対する入力と異なる、表示される画面にかかわらないジェスチャを検出する検出部（１０１）と、検出部で検出したジェスチャを、車両に設けられる機器（１４）の操作に割り当てる割り当て部（１０２）と、検出部で検出したジェスチャに対して割り当て部で割り当てられた操作を行わせる操作制御部（１０３）とを備える車両用制御装置であって、操作制御部は、車両の車室内における位置別に異なる種類の操作である位置別操作を行わせることが可能であり、検出部は、身体部分の線状の動作が要求されるジェスチャを検出するものであり、割り当て部は、検出部で共通のジェスチャとして検出する身体部分の線状の動作の軌跡の、ジェスチャで要求される動作の軌跡に対するずれの方向性に応じて、異なる位置別操作を割り当てるものであり、車室内に設けられる表示装置での表示を制御する表示制御部（１０４，１０４ａ）を備え、表示制御部は、位置別操作のための情報を表示装置に表示させるものであり、検出部は、車室内に設けられてジェスチャの入力を受け付ける入力装置（１２）で受け付けた入力結果をもとに、身体部分の線状の動作が要求されるジェスチャを検出するものであり、表示制御部は、表示装置として、車両の運転席の前方以外に表示面が位置するとともに入力装置を含むタッチパネルである第１表示装置（１１）と、車両の運転席の前方から助手席の前方にまで少なくとも表示面が広がっているとともに入力装置を含まない第２表示装置（１３）とでの表示を制御するものであり、表示制御部は、少なくとも第２表示装置に位置別操作のための情報を表示させるものであり、操作制御部が行わせる位置別操作は、車両の運転席側と助手席側とで異なる種類の操作であり、運転席の乗員であるドライバが第１表示装置の表示面の方向を向いているか判別する判別部（１０５）を備え、表示制御部（１０４ａ）は、検出部で検出したジェスチャに対する割り当て部での位置別操作の割り当て、及び判別部での判別結果に応じて、割り当て部で割り当てられた位置別操作が行われていることを乗員にフィードバックするための情報を、第１表示装置と第２表示装置とのうちのどの表示装置に表示させるか変化させる。
上記目的を達成するために、本開示の第２の車両用制御装置は、車両の乗員の体の一部である身体部分の動作による、ボタン表示に対する入力と異なる、表示される画面にかかわらないジェスチャを検出する検出部（１０１）と、検出部で検出したジェスチャを、車両に設けられる機器（１４）の操作に割り当てる割り当て部（１０２）と、検出部で検出したジェスチャに対して割り当て部で割り当てられた操作を行わせる操作制御部（１０３）とを備える車両用制御装置であって、操作制御部は、車両の車室内における位置別に異なる種類の操作である位置別操作を行わせることが可能であり、検出部は、身体部分の線状の動作が要求されるジェスチャを検出するものであり、割り当て部は、検出部で共通のジェスチャとして検出する身体部分の線状の動作の軌跡の、ジェスチャで要求される動作の軌跡に対するずれの方向性に応じて、異なる位置別操作を割り当てるものであり、車室内に設けられる表示装置での表示を制御する表示制御部（１０４，１０４ａ）を備え、表示制御部は、位置別操作のための情報を表示装置に表示させるものであり、検出部は、車室内に設けられてジェスチャの入力を受け付ける入力装置（１２）で受け付けた入力結果をもとに、身体部分の線状の動作が要求されるジェスチャを検出するものであり、表示制御部は、表示装置として、車両の運転席の前方以外に表示面が位置するとともに入力装置を含むタッチパネルである第１表示装置（１１）と、車両の運転席の前方から助手席の前方にまで少なくとも表示面が広がっているとともに入力装置を含まない第２表示装置（１３）とでの表示を制御するものであり、表示制御部は、少なくとも第２表示装置に位置別操作のための情報を表示させるものであり、操作制御部が行わせる位置別操作は、車両の運転席側と助手席側とで異なる種類の操作であり、表示制御部（１０４）は、検出部で検出したジェスチャに対して割り当て部で割り当てられた助手席側についての操作を操作制御部が行わせる場合には、この操作が行われていることを乗員にフィードバックするための情報を、第１表示装置と第２表示装置とのいずれにも表示させる一方、検出部で検出したジェスチャに対して割り当て部で割り当てられた運転席側についての操作を操作制御部が行わせる場合には、この操作が行われていることを乗員にフィードバックするための情報を、第１表示装置と第２表示装置とのうちの第２表示装置のみに表示させる。
上記目的を達成するために、本開示の第３の車両用制御装置は、車両の乗員の体の一部である身体部分の動作によるジェスチャを検出する検出部（１０１）と、検出部で検出したジェスチャを、車両に設けられる機器（１４）の操作に割り当てる割り当て部（１０２）と、検出部で検出したジェスチャに対して割り当て部で割り当てられた操作を行わせる操作制御部（１０３）とを備える車両用制御装置であって、操作制御部は、車両の車室内における位置別に異なる種類の操作である位置別操作を行わせることが可能であり、検出部は、身体部分の線状の動作が要求されるジェスチャを検出するものであり、割り当て部は、検出部で共通のジェスチャとして検出する身体部分の線状の動作の軌跡の、ジェスチャで要求される動作の軌跡に対するずれの方向性に応じて、異なる位置別操作を割り当てるものであり、操作制御部が行わせる位置別操作は、車両の運転席側と助手席側とで異なる種類の操作であり、車室内に設けられる表示装置での表示を制御する表示制御部（１０４ａ）を備え、表示制御部は、位置別操作のための情報を表示装置に表示させるものであり、検出部は、車室内に設けられてジェスチャの入力を受け付ける入力装置（１２）で受け付けた入力結果をもとに、身体部分の線状の動作が要求されるジェスチャを検出するものであり、表示制御部は、表示装置として、車両の運転席の前方以外に表示面が位置するとともに入力装置を含むタッチパネルである第１表示装置（１１）と、車両の運転席の前方から助手席の前方にまで少なくとも表示面が広がっているとともに入力装置を含まない第２表示装置（１３）とでの表示を制御するものであり、表示制御部は、少なくとも第２表示装置に位置別操作のための情報を表示させるものであり、運転席の乗員であるドライバが第１表示装置の表示面の方向を向いているか判別する判別部（１０５）を備え、表示制御部は、検出部で検出したジェスチャに対する割り当て部での位置別操作の割り当て、及び判別部での判別結果に応じて、割り当て部で割り当てられた位置別操作が行われていることを乗員にフィードバックするための情報を、第１表示装置と第２表示装置とのうちのどの表示装置に表示させるか変化させる。

上記目的を達成するために、本開示の第１の車両用制御方法は、少なくとも１つのプロセッサにより実行される、車両の乗員の体の一部である身体部分の動作による、ボタン表示に対する入力と異なる、表示される画面にかかわらないジェスチャを検出する検出工程と、検出工程で検出したジェスチャを、車両に設けられる機器（１４）の操作に割り当てる割り当て工程と、検出工程で検出したジェスチャに対して割り当て工程で割り当てられた操作を行わせる操作制御工程とを含む車両用制御方法であって、操作制御工程では、車両の車室内における位置別に異なる種類の操作である位置別操作を行わせることが可能であり、検出工程では、身体部分の線状の動作が要求されるジェスチャを検出するものであり、割り当て工程では、検出工程で共通のジェスチャとして検出する身体部分の線状の動作の軌跡の、ジェスチャで要求される動作の軌跡に対するずれの方向性に応じて、異なる位置別操作を割り当てるものであり、車室内に設けられる表示装置での表示を制御する表示制御工程を含み、表示制御工程では、位置別操作のための情報を表示装置に表示させるものであり、検出工程では、車室内に設けられてジェスチャの入力を受け付ける入力装置（１２）で受け付けた入力結果をもとに、身体部分の線状の動作が要求されるジェスチャを検出するものであり、表示制御工程では、表示装置として、車両の運転席の前方以外に表示面が位置するとともに入力装置を含むタッチパネルである第１表示装置（１１）と、車両の運転席の前方から助手席の前方にまで少なくとも表示面が広がっているとともに入力装置を含まない第２表示装置（１３）とでの表示を制御するものであり、表示制御工程では、少なくとも第２表示装置に位置別操作のための情報を表示させるものであり、操作制御工程で行わせる位置別操作は、車両の運転席側と助手席側とで異なる種類の操作であり、運転席の乗員であるドライバが第１表示装置の表示面の方向を向いているか判別する判別工程を含み、表示制御工程では、検出工程で検出したジェスチャに対する割り当て部での位置別操作の割り当て、及び判別工程での判別結果に応じて、割り当て工程で割り当てられた位置別操作が行われていることを乗員にフィードバックするための情報を、第１表示装置と第２表示装置とのうちのどの表示装置に表示させるか変化させる。
上記目的を達成するために、本開示の第２の車両用制御方法は、少なくとも１つのプロセッサにより実行される、車両の乗員の体の一部である身体部分の動作による、ボタン表示に対する入力と異なる、表示される画面にかかわらないジェスチャを検出する検出工程と、検出工程で検出したジェスチャを、車両に設けられる機器（１４）の操作に割り当てる割り当て工程と、検出工程で検出したジェスチャに対して割り当て工程で割り当てられた操作を行わせる操作制御工程とを含む車両用制御方法であって、操作制御工程では、車両の車室内における位置別に異なる種類の操作である位置別操作を行わせることが可能であり、検出工程では、身体部分の線状の動作が要求されるジェスチャを検出するものであり、割り当て工程では、検出工程で共通のジェスチャとして検出する身体部分の線状の動作の軌跡の、ジェスチャで要求される動作の軌跡に対するずれの方向性に応じて、異なる位置別操作を割り当てるものであり、車室内に設けられる表示装置での表示を制御する表示制御工程を含み、表示制御工程では、位置別操作のための情報を表示装置に表示させるものであり、検出工程では、車室内に設けられてジェスチャの入力を受け付ける入力装置（１２）で受け付けた入力結果をもとに、身体部分の線状の動作が要求されるジェスチャを検出するものであり、表示制御工程では、表示装置として、車両の運転席の前方以外に表示面が位置するとともに入力装置を含むタッチパネルである第１表示装置（１１）と、車両の運転席の前方から助手席の前方にまで少なくとも表示面が広がっているとともに入力装置を含まない第２表示装置（１３）とでの表示を制御するものであり、表示制御工程では、少なくとも第２表示装置に位置別操作のための情報を表示させるものであり、操作制御工程で行わせる位置別操作は、車両の運転席側と助手席側とで異なる種類の操作であり、表示制御工程では、検出工程で検出したジェスチャに対して割り当て部で割り当てられた助手席側についての操作を操作制御工程で行わせる場合には、この操作が行われていることを乗員にフィードバックするための情報を、第１表示装置と第２表示装置とのいずれにも表示させる一方、検出工程で検出したジェスチャに対して割り当て工程で割り当てられた運転席側についての操作を操作制御工程で行わせる場合には、この操作が行われていることを乗員にフィードバックするための情報を、第１表示装置と第２表示装置とのうちの第２表示装置のみに表示させる。
上記目的を達成するために、本開示の第３の車両用制御方法は、少なくとも１つのプロセッサにより実行される、車両の乗員の体の一部である身体部分の動作によるジェスチャを検出する検出工程と、検出工程で検出したジェスチャを、車両に設けられる機器（１４）の操作に割り当てる割り当て工程と、検出工程で検出したジェスチャに対して割り当て工程で割り当てられた操作を行わせる操作制御工程とを含む車両用制御方法であって、操作制御工程では、車両の車室内における位置別に異なる種類の操作である位置別操作を行わせることが可能であり、検出工程では、身体部分の線状の動作が要求されるジェスチャを検出するものであり、割り当て工程では、検出工程で共通のジェスチャとして検出する身体部分の線状の動作の軌跡の、ジェスチャで要求される動作の軌跡に対するずれの方向性に応じて、異なる位置別操作を割り当てるものであり、操作制御工程が行わせる位置別操作は、車両の運転席側と助手席側とで異なる種類の操作であり、車室内に設けられる表示装置での表示を制御する表示制御工程を含み、表示制御工程では、位置別操作のための情報を表示装置に表示させるものであり、検出工程では、車室内に設けられてジェスチャの入力を受け付ける入力装置（１２）で受け付けた入力結果をもとに、身体部分の線状の動作が要求されるジェスチャを検出するものであり、表示制御工程では、表示装置として、車両の運転席の前方以外に表示面が位置するとともに入力装置を含むタッチパネルである第１表示装置（１１）と、車両の運転席の前方から助手席の前方にまで少なくとも表示面が広がっているとともに入力装置を含まない第２表示装置（１３）とでの表示を制御するものであり、表示制御工程では、少なくとも第２表示装置に位置別操作のための情報を表示させるものであり、運転席の乗員であるドライバが第１表示装置の表示面の方向を向いているか判別する判別工程を含み、表示制御工程では、検出工程で検出したジェスチャに対する割り当て工程での位置別操作の割り当て、及び判別工程での判別結果に応じて、割り当て工程で割り当てられた位置別操作が行われていることを乗員にフィードバックするための情報を、第１表示装置と第２表示装置とのうちのどの表示装置に表示させるか変化させる。

身体部分の線状の動作が要求されるジェスチャは、ジェスチャを検出する位置に対する乗員の位置に応じて、決まった傾向の軌跡のずれが生じる。これは、ジェスチャを検出する位置に対する乗員の位置に応じて、ジェスチャに用いる身体部分を動作させやすい範囲が異なるためである。これに対して、以上の構成によれば、共通のジェスチャとして検出する身体部分の線状の動作の軌跡の、ジェスチャで要求される動作の軌跡に対するずれの方向性に応じて、異なる位置別操作を割り当て、割り当てられた操作を行わせる。よって、共通のジェスチャであっても、ジェスチャを検出する位置に対する乗員の位置に応じて、異なる位置別操作を行わせることが可能になる。従って、ジェスチャを行った乗員の位置に応じた位置別操作を行わせることも可能になる。その結果、共通のジェスチャを用いて複数種類の操作を行わせながらも、必要に応じた種類の操作をより精度良く行わせることが可能になる。

車両用システム１の概略的な構成の一例を示す図である。第１表示装置１１及び第２表示装置１３の配置例を示す図である。ＨＣＵ１０の概略的な構成に一例を示す図である。第１ジェスチャと第２ジェスチャとの区別に関する説明を行うための図である。ジェスチャの軌跡の一例を説明するための図である。ジェスチャの軌跡の一例を説明するための図である。ジェスチャの軌跡の一例を説明するための図である。ジェスチャの軌跡の一例を説明するための図である。位置別操作のための情報の表示例を示す図である。ＦＢ表示の一例を説明するための図である。ＨＣＵ１０での位置別操作関連処理の流れの一例を示すフローチャートである。ＨＣＵ１０でのＦＢ表示関連処理の流れの一例を示すフローチャートである。車両用システム１ａの概略的な構成の一例を示す図である。ＨＣＵ１０ａの概略的な構成に一例を示す図である。ＨＣＵ１０ａでのＦＢ表示関連処理の流れの一例を示すフローチャートである。

図面を参照しながら、開示のための複数の実施形態を説明する。なお、説明の便宜上、複数の実施形態の間において、それまでの説明に用いた図に示した部分と同一の機能を有する部分については、同一の符号を付し、その説明を省略する場合がある。同一の符号を付した部分については、他の実施形態における説明を参照することができる。

（実施形態１）
＜車両用システム１の概略構成＞
以下、本開示の実施形態１について図面を用いて説明する。図１に示す車両用システム１は、自動車（以下、単に車両）で用いることが可能なものである。車両用システム１は、図１に示すように、ＨＣＵ（Human Machine Interface Control Unit）１０、第１表示装置１１、操作入力部１２、第２表示装置１３、及び空調装置１４を含んでいる。ＨＣＵ１０及び空調装置１４は、例えば車内ＬＡＮに接続されているものとする。以降では、車両用システム１を用いる車両を自車と呼ぶ。

第１表示装置１１は、自車の運転席の前方以外に表示面が位置する表示装置である。第１表示装置１１は、図２に示すように、例えば自車のインスツルメントパネルの中央に配置されるＣＩＤ（Center Information Display）とすればよい。第１表示装置１１は、ＨＣＵ１０から出力される情報に基づき、表示面に各種の表示を行う。一例としては、ナビゲーション機能に関する案内画面、空調機器の操作画面、及びオーディオ機器の操作画面等の表示を行う。第１表示装置１１は、操作入力部１２を含むタッチパネルである。

操作入力部１２は、自車の車室内に設けられて自車の乗員からの操作入力を受け付ける。操作入力部１２は、自車の乗員の体の一部である身体部分の動作によるジェスチャの入力を受け付ける。この操作入力部１２が入力装置に相当する。ジェスチャに用いる身体部分は、例えば指であるものとして以降の説明を行う。操作入力部１２は、位置入力装置であって、第１表示装置１１の表示面のうちの指で触れられている位置を検知してその位置情報をＨＣＵ１０に出力する。位置情報は、直交する２軸の座標で表されるものとする。以降では、一例として、自車の左右方向にあたるＸ軸と自車の上下方向にあたるＹ軸との座標で表されるものとする。なお、第１表示装置１１の表示面が自車の上下方向に対して傾いて設けられることもあるため、上述の上下方向は自車の略上下方向であってもよい。左右方向についても同様である。操作入力部１２は、第１表示装置１１の表示面の裏面側に設けられた静電容量式のタッチセンサとすればよい。なお、操作入力部１２は、静電容量式のタッチセンサに限らず、感圧式等の他の方式のタッチセンサであってもよい。

第２表示装置１３は、自車の運転席の前方から助手席の前方にまで少なくとも表示面が広がっている表示装置である。第２表示装置１３は、図２に示すように、左側のＡピラーから右側のＡピラーまで表示面が広がる表示装置とすればよい。第２表示装置１３は、１つのディスプレイによって実現される構成とすればよい。なお、第２表示装置１３は、車幅方向に並んだ複数のディスプレイによって実現される構成であってもよい。この複数のディスプレイのうちの１つは、第１表示装置１１の上下２画面に分かれた上画面としてもよい。この場合、この上画面の表示領域が第２表示装置に相当し、下画面の表示領域が第１表示装置に相当する。第２表示装置１３の表示面は、車両の前方にドライバが視線を向けながら確認しやすい位置に設けられる。第２表示装置１３は、タッチパネル機能を有していないものとする。つまり、第２表示装置１３は、操作入力部１２を含まない。

空調装置１４は、自車の乗員によって設定される空調関連の設定値等を含む空調要求情報をＨＣＵ１０から取得する。そして、その空調要求情報に従い、自車に複数設けられた吹き出し口から吹き出す風に関する調整（以下、空調）を行う。空調装置１４が行う空調としては、空調風の温度調整、空調風の風量の調整等がある。この空調装置１４が車両に設けられる機器に相当する。

空調装置１４の吹き出し口は、少なくとも運転席と助手席とに個別の空調風を送風可能に設けられているものとする。一例として、運転席に空調風を送風する吹き出し口は、運転席前方の左右にそれぞれ設けられているものとすればよい。運転席に空調風を送風する吹き出し口を以下では運転席側吹き出し口と呼ぶ。また、助手席に空調風を送風する吹き出し口は、助手席前方の左右にそれぞれ設けられているものとすればよい。助手席に空調風を送風する吹き出し口を以下では助手席側吹き出し口と呼ぶ。

空調装置１４の操作は、自車の車室内における位置別に異なる種類の操作が可能となっている。本実施形態の例では、空調装置１４の操作として、運転席側の温度調整と助手席側の温度調整とをそれぞれ異なる種類の操作として別個に行うことが可能となっている。つまり、運転席と助手席とで異なる値で温度調整が可能となっている。また、空調装置１４の操作として、運転席側の風量調整と助手席側の風量調整とをそれぞれ異なる種類の操作として別個に行うことが可能となっている。つまり、運転席と助手席とで異なる値で風量調整が可能となっている。以下では、自車の車室内における位置別に異なる種類の操作を位置別操作と呼ぶ。位置別操作は、例えば操作入力部１２に対して自車の左右で異なる種類の操作とする。

ＨＣＵ１０は、プロセッサ、メモリ、Ｉ／Ｏ、これらを接続するバスを備えるマイクロコンピュータを主体として構成され、メモリに記憶された制御プログラムを実行することで乗員と自車のシステムとの情報のやり取りに関する各種の処理を実行する。このＨＣＵ１０が車両用制御装置に相当する。ここで言うところのメモリは、コンピュータによって読み取り可能なプログラム及びデータを非一時的に格納する非遷移的実体的記憶媒体（non- transitory tangible storage medium）である。また、非遷移的実体的記憶媒体は、半導体メモリ又は磁気ディスクなどによって実現される。ＨＣＵ１０の詳細については、以下で述べる。

＜ＨＣＵ１０の概略構成＞
続いて、図３を用いて、ＨＣＵ１０の概略構成について説明を行う。ＨＣＵ１０は、図３に示すように、検出部１０１、割り当て部１０２、操作制御部１０３、及び表示制御部１０４を機能ブロックとして備える。なお、ＨＣＵ１０が実行する機能の一部又は全部を、１つ或いは複数のＩＣ等によりハードウェア的に構成してもよい。また、ＨＣＵ１０が備える機能ブロックの一部又は全部は、プロセッサによるソフトウェアの実行とハードウェア部材の組み合わせによって実現されてもよい。コンピュータによってＨＣＵ１０の各機能ブロックの処理が実行されることが、車両用制御方法が実行されることに相当する。

検出部１０１は、自車の乗員によるジェスチャを検出する。この検出部１０１での処理が検出工程に相当する。検出部１０１は、操作入力部１２で受け付けた入力結果をもとに、自車の乗員によるジェスチャを検出すればよい。この入力結果は、前述した位置情報である。

検出部１０１で検出するジェスチャは、少なくとも指の線状の動作が要求されるジェスチャとする。このようなジェスチャとしては、第１表示装置１１の表示面に触れたまま特定の方向に指を移動させて離すジェスチャであるスワイプがある。他にも、ロングプレスドラッグ等もジェスチャとして受け付けてもよい。ロングプレスドラッグとは、第１表示装置１１の表示面の１点に指を長く置いてから移動させて離すジェスチャである。以降では、検出部１０１がスワイプを検出する場合を例に挙げて説明を行う。検出部１０１で検出するジェスチャは、指の曲線状の動作が要求されるジェスチャであってもよいし、指の直線状の動作が要求されるジェスチャであってもよい。

本実施形態では、検出部１０１は、操作入力部１２に対して要求される指の直線状の動作がそれぞれ直交する関係にある第１ジェスチャと第２ジェスチャとを少なくとも検出可能なものとする。操作入力部１２に対して要求される指の直線状の動作とは、本実施形態では第１表示装置１１の表示面に沿った、指の直線状の動作と言い換えることができる。第１ジェスチャは、前述のＹ軸方向への指の直線状の動作とする。本実施形態での第１ジェスチャは、自車の上下方向へのスワイプと言い換えることができる。第２ジェスチャは、前述のＸ軸方向への指の直線状の動作とする。本実施形態での第２ジェスチャは、自車の左右方向へのスワイプと言い換えることができる。

検出部１０１は、第１ジェスチャ及び第２ジェスチャのいずれかで要求される動作の方向への変化量の大きさに応じて第１ジェスチャ及び第２ジェスチャを区別して検出することが好ましい。例えば第２ジェスチャで要求されるＸ軸方向への指の直線状の動作の変化量が閾値以上の場合に第２ジェスチャと区別して検出する一方、その変化量が閾値未満の場合には第１ジェスチャと区別して検出すればよい。また、第１ジェスチャで要求されるＹ軸方向への指の直線状の動作の変化量が閾値以上の場合に第１ジェスチャと区別して検出する一方、その変化量が閾値未満の場合には第２ジェスチャと区別して検出すればよい。なお、Ｘ軸方向の変化量の閾値とＹ軸方向の変化量の閾値とはそれぞれ異なる値を用いてもよい。

ここで、図４を用いて第１ジェスチャと第２ジェスチャとの区別に関する説明を行う。図４のＳｃが第１表示装置１１の表示面を示す。図４のＧ１が第１ジェスチャの軌跡を示す。図４のＧ２が第２ジェスチャの軌跡を示す。図４では、運転席の乗員が左手の指でジェスチャを行う場合の例を示す。なお、以降では、運転席が自車の右側であって、助手席が自車の左側である場合を例に挙げて説明を行う。運転席が自車の左側であって助手席が自車の右側の車両に適用する場合には、以降の説明の左右を逆にすることで適用すればよい。

第１ジェスチャ及び第２ジェスチャは、指の直線状の動作が要求されるジェスチャである。しかしながら、第１ジェスチャ及び第２ジェスチャは、実際は直線状の動作とならない。これは、乗員の位置次第で第１表示装置１１の表示面に対して指を動作させやすい範囲が絞られるためである。第１表示装置１１の表示面の右側から左手の指で第１ジェスチャ及び第２ジェスチャをそれぞれ行う場合、図４に示すように円弧状の軌跡を描く。この場合、軌跡がＸ軸方向に伸びているかＹ軸方向に伸びているかといった軌跡の伸びる方向からでは、第１ジェスチャと第２ジェスチャとを区別しにくくなるおそれがある。

一方、第１ジェスチャ及び第２ジェスチャが円弧状の軌跡を描く場合であっても、Ｘ軸方向及びＹ軸方向の軌跡の変化量から第１ジェスチャ及び第２ジェスチャを精度良く区別することは可能である。図４に示すように、第２ジェスチャの軌跡Ｇ２のＸ軸方向の変化量ＶＸ２は、第１ジェスチャの軌跡Ｇ１のＸ軸方向の変化量ＶＸ１よりも大きくなる。よって、軌跡のＸ軸方向の変化量が閾値以上か否かで第１ジェスチャと第２ジェスチャとを区別することが可能になる。また、図４に示すように、第１ジェスチャの軌跡Ｇ１のＹ軸方向の変化量ＶＹ１は第２ジェスチャの軌跡Ｇ２のＹ軸方向の変化量ＶＹ２よりも大きくなる。よって、軌跡のＹ軸方向の変化量が閾値以上か否かで第１ジェスチャと第２ジェスチャとを区別することが可能になる。

なお、第１ジェスチャ及び第２ジェスチャとの区別は、軌跡を例えば最小二乗法等で直線に近似した場合のその近似直線の傾きによって行ってよい。例えば、その近似直線の傾きが、第１ジェスチャとして要求される動作の軌跡の傾きと第２ジェスチャとして要求される動作の軌跡の傾きとのいずれに近いかによって、第１ジェスチャと第２ジェスチャとを区別すればよい。

割り当て部１０２は、検出部１０１で検出したジェスチャを、自車に設けられる機器の操作に割り当てる。この割り当て部１０２での処理が割り当て工程に相当する。本実施形態の例では、割り当て部１０２は、検出部１０１で検出したジェスチャを、空調装置１４の操作に割り当てる。本実施形態の例では、第１ジェスチャについては、空調風の温度調整に割り当てる。一方、第２ジェスチャについては、空調風の風量調整に割り当てる。つまり、異なるジェスチャをそれぞれ異なる操作に割り当てる。

また、割り当て部１０２は、検出部１０１で共通のジェスチャとして検出する軌跡の、そのジェスチャで要求される動作の軌跡（以下、基準軌跡）に対するずれの方向性に応じて、異なる位置別操作を割り当てる。例えば第１ジェスチャであれば、軌跡のずれが基準軌跡に対して左方向に膨らむ場合に、操作入力部１２に対して右の位置別操作を割り当てればよい。つまり、運転席側の温度調整を割り当てる。これは、図５に示すように、運手席側から第１表示装置１１の表示面に第１ジェスチャを行う場合に、そのジェスチャの軌跡が基準軌跡（図５のＢａ参照）に対して左方向に膨らむためである。一方、軌跡のずれが基準軌跡に対して右方向に膨らむ場合には、操作入力部１２に対して左の位置別操作を割り当てればよい。つまり、助手席側の温度調整を割り当てる。これは、図６に示すように、助手席側から第１表示装置１１の表示面に第１ジェスチャを行う場合に、そのジェスチャの軌跡が基準軌跡（図６のＢａ参照）に対して右方向に膨らむためである。また、割り当て部１０２は、第１ジェスチャの下方向の動作を検出部１０１で検出した場合には、温度を下げる温度調整を割り当てればよい。一方、割り当て部１０２は、第１ジェスチャの上方向の動作を検出部１０１で検出した場合には、温度を上げる温度調整を割り当てればよい。

例えば第２ジェスチャであれば、軌跡のずれが基準軌跡に対して左下方向に広がっていく場合に、操作入力部１２に対して右の位置別操作を割り当てればよい。つまり、運転席側の風量調整を割り当てる。これは、図７に示すように、運手席側から第１表示装置１１の表示面に第２ジェスチャを行う場合に、そのジェスチャの軌跡が基準軌跡（図７のＢａ参照）に対して左下方向にずれていくためである。一方、軌跡のずれが基準軌跡に対して右下方向に広がっていく場合には、操作入力部１２に対して左の位置別操作を割り当てればよい。つまり、助手席側の風量調整を割り当てる。これは、図８に示すように、助手席側から第１表示装置１１の表示面に第２ジェスチャを行う場合に、そのジェスチャの軌跡が基準軌跡（図８のＢａ参照）に対して右下方向にずれていくためである。また、割り当て部１０２は、第２ジェスチャの左方向の動作を検出部１０１で検出した場合には、風量を下げる風量調整を割り当てればよい。一方、割り当て部１０２は、第２ジェスチャの右方向の動作を検出部１０１で検出した場合には、風量を上げる風量調整を割り当てればよい。

操作制御部１０３は、位置別操作を行わせることが可能なものである。この操作制御部１０３での処理が操作制御工程に相当する。本実施形態の例では、操作制御部１０３は、自車の運転席側と助手席側とで異なる温度調整及び風量調整を空調装置１４に行わせる。運転席側の温度調整及び風量調整は、運転席側吹き出し口から吹き出す空調風の調整によって行わせればよい。助手席側の温度調整及び風量調整は、助手席側吹き出し口から吹き出す空調風の調整によって行わせればよい。操作制御部１０３は、検出部１０１で検出したジェスチャに対して割り当て部１０２で割り当てられた操作を行わせる。

表示制御部１０４は、第１表示装置１１及び第２表示装置１３での表示を制御する。車室内に設けられる表示装置での表示を制御する。表示制御部１０４は、位置別操作のための情報を少なくとも第２表示装置１３に表示させることが好ましい。これは、第２表示装置１３の表示面に表示される情報は、ドライバが運転中であっても確認しやすいためである。例えば、図９に示すような位置別操作によって調整する設定温度を示す情報を、第２表示装置１３に表示させればよい。この場合、第２表示装置１３の表示面のうちの運転席の前方には、運転席側の温度調整の設定温度を示す情報を表示させればよい。一方、第２表示装置１３の表示面のうちの助手席の前方には助手席側の温度調整の設定温度を示す情報を表示させればよい。温度調整の設定温度以外にも、風量調整の設定風量を示す情報を表示する等してもよい。なお、位置別操作のための情報は、第１表示装置１１にも表示される構成としてもよい。

表示制御部１０４は、検出部１０１で検出したジェスチャに対して割り当て部１０２で割り当てられた操作を操作制御部１０３が行わせる場合に、この操作が行われていることを乗員にフィードバックするための情報（以下、ＦＢ情報）を第１表示装置１１及び第２表示装置１３に表示させればよい。ＦＢ情報とは、操作制御部１０３での操作による設定の変化に応じた情報とすればよい。例えば、運転席側の設定温度を上げる温度調整を行わせる場合には、図１０に示すように、位置別操作を区別できる「右席」、「設定温度」といった情報とともに、変化させる設定温度の値を示す「２６．０℃」といった情報を第１表示装置１１に表示させればよい。第２表示装置１３についても同様の表示を運転席側の前方に表示させればよい。第２表示装置１３に表示させる場合には表示する場所で運手席側か助手席側かを区別できるので、「右席」といった表示を省略してもよい。上述したＦＢ情報の表示を、以降ではＦＢ表示と呼ぶ。

また、表示制御部１０４は、運転席側の操作を行わせるか助手席側の操作を行わせるかに応じて、ＦＢ表示を行わせる表示装置を切り替える構成としてもよい。一例として、表示制御部１０４は、検出部１０１で検出したジェスチャに対して割り当て部１０２で割り当てられた助手席側についての操作を操作制御部１０３が行わせる場合には、ＦＢ情報を、第１表示装置１１と第２表示装置１３とのいずれにも表示させればよい。一方、表示制御部１０４は、検出部１０１で検出したジェスチャに対して割り当て部１０２で割り当てられた運転席側についての操作を操作制御部１０３が行わせる場合には、ＦＢ情報を、第１表示装置１１と第２表示装置１３とのうちの第２表示装置１３のみに表示させればよい。

助手席の乗員は前方を注視する必要がない。よって、第１表示装置１１の表示面と第２表示装置１３の表示面とのいずれも見る可能性がある。これに対して、以上の構成によれば、助手席側についての操作を行わせる場合には、ＦＢ情報を第１表示装置１１と第２表示装置１３とのいずれにも表示させることになる。よって、助手席の乗員が第１表示装置１１と第２表示装置１３とのいずれの表示面を見ていてもＦＢ情報を確認できるようになる。一方、運転席の乗員は前方を注視する必要がある。よって、第２表示装置１３の表示面は見るが、第１表示装置１１の表示面を見る可能性は低い。これに対して、以上の構成によれば、運転席側についての操作を行わせる場合には、ＦＢ情報を第１表示装置１１には表示させないことになる。よって、ドライバが見る可能性の低いＦＢ情報を無駄に表示するのを抑えることができるようになる。自動運転中又は停車中であれば、ドライバが前を見なくてもよくなるため、運転席側の操作を行わせる場合であっても、助手席側と同様に第１表示装置１１にもＦＢ情報を表示させてもよい。

＜ＨＣＵ１０での位置別操作関連処理＞
ここで、図１１のフローチャートを用いて、ＨＣＵ１０でのジェスチャに応じた位置別操作に関する処理（以下、位置別操作関連処理）の流れの一例について説明を行う。図１１のフローチャートは、例えば、自車の内燃機関又はモータジェネレータを始動させるためのスイッチ（以下、パワースイッチ）がオンになった場合に開始される構成とすればよい。

ステップＳ１では、検出部１０１でジェスチャを検出した場合（Ｓ１でＹＥＳ）には、ステップＳ２に移る。一方、検出部１０１でジェスチャを検出しなかった場合（Ｓ１でＮＯ）には、ステップＳ９に移る。本実施形態では、第１ジェスチャ及び第２ジェスチャが検出部１０１でジェスチャとして検出されるジェスチャに該当する。

ステップＳ２では、検出部１０１で検出したジェスチャが第１ジェスチャであった場合（Ｓ２でＹＥＳ）には、ステップＳ３に移る。一方、検出部１０１で検出したジェスチャが第２ジェスチャであった場合（Ｓ２でＮＯ）には、ステップＳ６に移る。

ステップＳ３では、第１ジェスチャの軌跡のずれが基準軌跡に対して左方向に膨らんでいた場合（ステップＳ３でＹＥＳ）には、ステップＳ４に移る。一方、第１ジェスチャの軌跡のずれが基準軌跡に対して右方向に膨らんでいた場合（ステップＳ３でＮＯ）には、ステップＳ５に移る。

ステップＳ４では、割り当て部１０２が、左席の温度調整を割り当てる。本実施形態の例では、左席が運転席側にあたる。そして、操作制御部１０３が、左席の温度調整を行って、ステップＳ９に移る。ステップＳ５では、右席の温度調整を割り当てる。本実施形態の例では、右席が助手席側にあたる。そして、操作制御部１０３が、右席の温度調整を行って、ステップＳ９に移る。

ステップＳ６では、第２ジェスチャの軌跡のずれが基準軌跡に対して左下方向にずれていた場合（ステップＳ６でＹＥＳ）には、ステップＳ７に移る。一方、第２ジェスチャの軌跡のずれが基準軌跡に対して右下方向にずれていた場合（ステップＳ６でＮＯ）には、ステップＳ８に移る。

ステップＳ７では、割り当て部１０２が、左席の風量調整を割り当てる。そして、操作制御部１０３が、左席の風量調整を行って、ステップＳ９に移る。ステップＳ８では、右席の風量調整を割り当てる。そして、操作制御部１０３が、右席の風量調整を行って、ステップＳ９に移る。

ステップＳ９では、位置別操作関連処理の終了タイミングであった場合（Ｓ９でＹＥＳ）には、位置別操作関連処理を終了する。一方、位置別操作関連処理の終了タイミングでなかった場合（Ｓ９でＮＯ）には、Ｓ１に戻って処理を繰り返す。位置別操作関連処理の終了タイミングの一例としては、パワースイッチがオフになったこと等が挙げられる。

＜ＨＣＵ１０でのＦＢ表示関連処理＞
続いて、図１２のフローチャートを用いて、ＨＣＵ１０でのＦＢ表示に関する処理（以下、ＦＢ表示関連処理）の流れの一例について説明を行う。図１２のフローチャートは、位置別操作が行われる場合に開始される構成とすればよい。

ステップＳ２１では、左席側の位置別操作を行う場合（Ｓ２１でＹＥＳ）には、ステップＳ２２に移る。一方、右席側の位置別操作を行う場合（Ｓ２１でＮＯ）には、ステップＳ２３に移る。ステップＳ２２では、表示制御部１０４が、ＦＢ情報を、第１表示装置１１と第２表示装置１３とのいずれにも表示させ、ＦＢ表示関連処理を終了する。一方、ステップＳ２３では、表示制御部１０４が、ＦＢ情報を、第１表示装置１１と第２表示装置１３とのうちの第２表示装置１３のみに表示させ、ＦＢ表示関連処理を終了する。

＜実施形態１のまとめ＞
指の直線状の動作が要求されるジェスチャは、操作入力部１２に対する乗員の位置に応じて、前述したように決まった傾向の軌跡のずれが生じる。これは、ジェスチャを検出する位置に対する乗員の位置に応じて、ジェスチャに用いる身体部分を動作させやすい範囲が異なるためである。これに対して、実施形態１の構成によれば、共通のジェスチャとして検出する指の直線状の動作の軌跡の、ジェスチャで要求される動作の軌跡に対するずれの方向性に応じて、異なる位置別操作を割り当て、割り当てられた操作を行わせる。よって、共通のジェスチャであっても、ジェスチャを検出する位置に対する乗員の位置に応じて、異なる位置別操作を行わせることが可能になる。従って、ジェスチャを行った乗員の位置に応じた位置別操作を行わせることも可能になる。その結果、共通のジェスチャを用いて複数種類の操作を行わせながらも、必要に応じた種類の操作をより精度良く行わせることが可能になる。実施形態１の構成では、運転中に確認しやすい第２表示装置１３の表示面でなく、運転中に確認しにくい第１表示装置１１の表示面に対してジェスチャ入力を行うため、上述した軌跡のずれが特に生じやすい。よって、特に位置別操作を精度良く割り当てることが可能になる。

（実施形態２）
実施形態１では、運転席側の位置別操作を行う場合に、ＦＢ情報を、第１表示装置１１と第２表示装置１３とのうちの第２表示装置１３のみに表示させる構成を示したが、必ずしもこれに限らない。例えば、運転席側の位置別操作を行う場合に、ＦＢ情報を、第１表示装置１１と第２表示装置１３とのうちの、ドライバが表示面の方向を向いている表示装置にのみ表示させる構成（以下、実施形態２）としてもよい。以下では、実施形態２の一例について図を用いて説明する。

＜車両用システム１ａの概略構成＞
まず、図１３を用いて、実施形態２の車両用システム１ａの概略構成について説明を行う。実施形態２の車両用システム１ａは、図１３に示すように、ＨＣＵ（Human Machine Interface Control Unit）１０ａ、第１表示装置１１、操作入力部１２、第２表示装置１３、空調装置１４、及びＤＳＭ（Driver Status Monitor）１５を含んでいる。車両用システム１ａは、ＨＣＵ１０の代わりにＨＣＵ１０ａを含む点と、ＤＳＭ１５を含む点とを除けば、実施形態１の車両用システム１と同様である。

ＤＳＭ１５は、近赤外光源及び近赤外カメラと、これらを制御する制御ユニット等とによって構成されている。例えば、ＤＳＭ１５は、近赤外カメラを車両の運転席側に向けた姿勢にて配置される。ＤＳＭ１５が配置される場所としては、例えばインスツルメントパネルの上面，ルームミラー近傍，ステアリングコラムカバー等が挙げられる。ＤＳＭ１５は、近赤外光源によって近赤外光を照射されたドライバの頭部を、近赤外カメラによって撮影する。近赤外カメラによる撮像画像は、制御ユニットによって画像解析される。制御ユニットは、少なくともドライバの視線方向を、ドライバの頭部を撮影した撮像画像（以下、顔画像）から検出する。

ＤＳＭ１５の制御ユニットは、顔画像から、画像認識処理によって顔の輪郭、目、鼻、口等の部位を検出する。制御ユニットは、各部位の相対的な位置関係からドライバの顔向きを検出する。また、制御ユニットは、撮像画像から、画像認識処理によって瞳孔及び角膜反射を検出する。そして、検出した顔向き、及び検出した瞳孔と角膜反射との位置関係から視線方向を検出する。視線方向は、ドライバの目の位置であるアイポイントを起点とする直線として表せばよい。アイポイントは、例えば車両における所定位置を原点とする３次元空間上の座標として特定する構成とすればよい。アイポイントの座標は、予め定義されている近赤外カメラによる撮像画像中の目の位置と３次元空間上の位置との対応関係をもとに特定する構成とすればよい。ＤＳＭ１５は、ドライバの視線方向を逐次検出し、検出した視線方向をＥＣＵ１０に出力する。

＜ＨＣＵ１０ａの概略構成＞
続いて、図１４を用いて、ＨＣＵ１０ａの概略構成について説明を行う。ＨＣＵ１０ａは、図１４に示すように、検出部１０１、割り当て部１０２、操作制御部１０３、表示制御部１０４ａ、及び判別部１０５を機能ブロックとして備える。ＨＣＵ１０ａは、表示制御部１０４の代わりに表示制御部１０４ａを備える点と、判別部１０５を備える点とを除けば、実施形態１のＨＣＵ１０と同様である。このＨＣＵ１０ａも車両用制御装置に相当する。また、コンピュータによってＨＣＵ１０ａの各機能ブロックの処理が実行されることも、車両用制御方法が実行されることに相当する。

判別部１０５は、運転席の乗員であるドライバが第１表示装置１１の表示面を向いているかを少なくとも判別する。判別部１０５は、ＤＳＭ１５から出力されるドライバの視線方向をもとにこれを判別すればよい。なお、判別部１０５は、第２表示装置１３の表示面を向いていることも判別してもよい。

表示制御部１０４ａは、ＦＢ表示の処理の一部が異なる点を除けば、実施形態１の表示制御部１０４と同様である。表示制御部１０４ａは、表示制御部１０４と同様に、検出部１０１で検出したジェスチャに対して割り当て部１０２で割り当てられた助手席側についての操作を操作制御部１０３が行わせる場合には、ＦＢ情報を、第１表示装置１１と第２表示装置１３とのいずれにも表示させる。

一方、表示制御部１０４ａは、検出部１０１で検出したジェスチャに対して割り当て部１０２で割り当てられた運転席側についての操作を操作制御部１０３が行わせる場合であって、且つ、判別部１０５でドライバが第１表示装置１１の表示面の方向を向いていると判別した場合には、ＦＢ情報を、第１表示装置１１と第２表示装置１３とのうちの第１表示装置１１のみに表示させる。また、表示制御部１０４ａは、検出部１０１で検出したジェスチャに対して割り当て部１０２で割り当てられた運転席側についての操作を操作制御部１０３が行わせる場合であって、且つ、判別部１０５でドライバが第１表示装置１１の表示面の方向を向いていると判別しなかった場合には、ＦＢ情報を、第１表示装置１１と第２表示装置１３とのうちの第２表示装置１３のみに表示させる。

ドライバは前方を注視する必要がある。よって、ドライバが第１表示装置１１の表示面の方向を向いていない場合は、第２表示装置１３の表示面が確認しやすい方向を向いていると考えられる。従って、以上の構成によれば、ドライバが見る可能性の低いＦＢ情報を無駄に表示するのを抑えつつ、ドライバが見る可能性の高い表示面にＦＢ情報を表示させることが可能になる。

なお、表示制御部１０４ａは、検出部１０１で検出したジェスチャに対して割り当て部１０２で割り当てられた運転席側についての操作を操作制御部１０３が行わせる場合であって、且つ、判別部１０５でドライバが第２表示装置１３の表示面の方向を向いていると判別した場合に、ＦＢ情報を、第１表示装置１１と第２表示装置１３とのうちの第２表示装置１３のみに表示させる構成としてもよい。

＜ＨＣＵ１０ａでのＦＢ表示関連処理＞
ここで、図１５のフローチャートを用いて、ＨＣＵ１０ａでのＦＢ表示関連処理の流れの一例について説明を行う。図１５のフローチャートも、図１２のフローチャートと同様に、位置別操作が行われる場合に開始される構成とすればよい。

ステップＳ４１では、左席側の位置別操作を行う場合（Ｓ４１でＹＥＳ）には、ステップＳ４２に移る。一方、右席側の位置別操作を行う場合（Ｓ４１でＮＯ）には、ステップＳ４３に移る。ステップＳ４２では、表示制御部１０４ａが、ＦＢ情報を、第１表示装置１１と第２表示装置１３とのいずれにも表示させ、ＦＢ表示関連処理を終了する。

ステップＳ４３では、判別部１０５が、ドライバが第１表示装置１１の表示面を向いていると判別した場合（Ｓ４３でＹＥＳ）には、ステップＳ４４に移る。一方、判別部１０５が、ドライバが第１表示装置１１の表示面を向いていると判別しなかった場合（Ｓ４３でＮＯ）には、ステップＳ４５に移る。

ステップＳ４４では、表示制御部１０４ａが、ＦＢ情報を、第１表示装置１１と第２表示装置１３とのうちの第１表示装置１１のみに表示させ、ＦＢ表示関連処理を終了する。一方、ステップＳ４５では、表示制御部１０４ａが、ＦＢ情報を、第１表示装置１１と第２表示装置１３とのうちの第２表示装置１３のみに表示させ、ＦＢ表示関連処理を終了する。

（実施形態３）
実施形態２では、ドライバが第１表示装置１１と第２表示装置１３とのいずれの表示面を向いているかに応じて、ＦＢ情報を表示させる表示装置を切り替える構成を示したが、必ずしもこれに限らない。例えば、第２表示装置１３が複数のディスプレイから構成される表示装置である場合には、その複数のディスプレイのいずれの表示面を向いているかに応じて、ＦＢ情報を表示させるディスプレイを切り替える構成（以下、実施形態３）としてもよい。

例えば、第２表示装置１３として、メータＭＩＤ（Multi Information Display）とＨＵＤ（Head-Up Display）とを含む場合について説明する。メータＭＩＤは、車室内のうちの運転席の正面に設けられるディスプレイである。一例として、メータＭＩＤは、メータパネルに設けられる構成とすればよい。ＨＵＤは、車室内のうちの例えばインストルメントパネルに設けられる。ＨＵＤは、プロジェクタによって形成される表示像を、投影部材としてのフロントウインドシールドに既定された投影領域に投影する。フロントウインドシールドによって車室内側に反射された画像の光は、運転席に着座するドライバによって知覚される。これにより、ドライバは、フロントウインドシールドの前方にて結像される表示像の虚像を、前景の一部と重ねて視認可能となる。ＨＵＤは、フロントウインドシールドの代わりに、コンバイナに表示像を投影する構成としてもよい。ＨＵＤの表示面は、メータＭＩＤの表示面の上方に位置する。

実施形態３では、判別部１０５が、ドライバが第２表示装置１３に含まれるメータＭＩＤとＨＵＤとのいずれの表示面を向いているかも判別する。この処理は、ドライバが第１表示装置１１の表示面を向いていないと判別した場合に限って行うことが好ましい。以降では、メータＭＩＤの表示面を第１表示面と呼び、ＨＵＤの表示面を第２表示面と呼ぶ。

実施形態３では、表示制御部１０４ａが、検出部１０１で検出したジェスチャに対して割り当て部１０２で割り当てられた運転席側についての操作を操作制御部１０３が行わせる場合であって、且つ、判別部１０５でドライバが第２表示装置１３の複数のディスプレイのうちの第１表示面の方向を向いていると判別した場合には、ＦＢ情報を、メータＭＩＤとＨＵＤとのうちのメータＭＩＤのみに表示させる。また、表示制御部１０４ａは、検出部１０１で検出したジェスチャに対して割り当て部１０２で割り当てられた運転席側についての操作を操作制御部１０３が行わせる場合であって、且つ、判別部１０５でドライバが第２表示装置１３の複数のディスプレイのうちの第２表示面の方向を向いていると判別した場合には、ＦＢ情報を、メータＭＩＤとＨＵＤとのうちのＨＵＤのみに表示させる。

ここでは、第２表示装置１３にメータＭＩＤとＨＵＤとが含まれる場合を例に挙げて説明したが、必ずしもこれに限らない。第２表示装置１３に他のディスプレイが含まれる場合にも、同様に適用することができる。第２表示装置１３に含まれる他のディスプレイとしては、第１表示装置１１の上下２画面に分かれた上画面を含む構成としてもよい。

（実施形態４）
前述の実施形態では、検出部１０１で検出するジェスチャとして、第１ジェスチャと第２ジェスチャとを例に挙げて説明したが、必ずしもこれに限らない。例えば、第１ジェスチャと第２ジェスチャとのうちのいずれか一方のジェスチャのみを用いる構成としてもよい。この場合、検出部１０１で第１ジェスチャと第２ジェスチャとを区別して検出する処理は省けばよい。

（実施形態５）
前述の実施形態では、位置別操作として、空調装置１４の運転席と助手席とで異なる操作を例に挙げて説明したが、必ずしもこれに限らない。位置別操作は、空調装置１４以外の車両に設けられる機器の操作であってもよい。空調装置１４以外の例としては、車両の位置別に音量を変化できる音声出力装置の音量操作等が挙げられる。また、位置別操作は、車両における位置に応じた操作であれば、運転席と助手席とで異なる操作に限らない。例えば、後部座席の左右で異なる操作であってもよい。なお、後部座席での空調については、シートに設けられるシート空調を利用すればよい。

（実施形態６）
前述の実施形態では、位置別操作として、操作入力部１２に対して自車の左右で異なる種類の操作を例に挙げて説明したが、必ずしもこれに限らない。位置別操作は、操作入力部１２に対して自車の前後で異なる種類の操作であってもよい。例えば、自車の前部座席と後部座席とで異なる操作等とすればよい。この場合、第１表示装置１１は、表示面が自車の天井方向を向くように設ける構成とすればよい。この場合、前述した第１ジェスチャは、自車の前後方向への動作とすればよい。また、割り当て部１０２は、共通のジェスチャを行う乗員が操作入力部１２に対して前後の何れに位置するかで異なるジェスチャの軌跡のずれの方向性を利用して、前部側の操作と後部側の操作とをそれぞれ割り当てればよい。

（実施形態７）
前述の実施形態では、操作入力部１２がタッチセンサである場合を例に挙げて説明したが、必ずしもこれに限らない。例えば、操作入力部１２は、２次元画像若しくは３次元画像を形成することでジェスチャを検出するセンサであってもよい。このようなセンサとしては、近赤外線センサ，遠赤外線センサ，カメラ等がある。

（実施形態８）
前述の実施形態では、第２表示装置１３として、左側のＡピラーから右側のＡピラーまで表示面が広がる表示装置を用いる構成を示したが、必ずしもこれに限らない。例えば、第２表示装置１３が、左側のＡピラーから右側のＡピラーまで表示面が広がる表示装置よりも狭い表示面の表示装置であってもよい。例えば、運転席前方に表示面が限られるメータＭＩＤ，ＨＵＤ等であってもよい。

（実施形態９）
前述の実施形態では、ジェスチャ検出に関する表示を第１表示装置１１と第２表示装置１３とのいずれにも表示可能な構成を示したが、必ずしもこれに限らない。ジェスチャ検出に関する表示を第１表示装置１１にのみ表示させる構成としてもよい。また、車両に第２表示装置１３を備えない構成としてもよい。

なお、本開示は、上述した実施形態に限定されるものではなく、請求項に示した範囲で種々の変更が可能であり、異なる実施形態にそれぞれ開示された技術的手段を適宜組み合わせて得られる実施形態についても本開示の技術的範囲に含まれる。また、本開示に記載の制御部及びその手法は、コンピュータプログラムにより具体化された１つ乃至は複数の機能を実行するようにプログラムされたプロセッサを構成する専用コンピュータにより、実現されてもよい。あるいは、本開示に記載の装置及びその手法は、専用ハードウェア論理回路により、実現されてもよい。もしくは、本開示に記載の装置及びその手法は、コンピュータプログラムを実行するプロセッサと１つ以上のハードウェア論理回路との組み合わせにより構成された１つ以上の専用コンピュータにより、実現されてもよい。また、コンピュータプログラムは、コンピュータにより実行されるインストラクションとして、コンピュータ読み取り可能な非遷移有形記録媒体に記憶されていてもよい。

１，１ａ車両用システム、１０，１０ａＨＣＵ（車両用制御装置）、１１第１表示装置（表示装置）、１２操作入力部（入力装置）、１３第２表示装置（表示装置）、１４空調装置（車両に設けられる機器）、１０１検出部、１０２割り当て部、１０３操作制御部、１０４，１０４ａ表示制御部、１０５判別部

Claims

車両の乗員の体の一部である身体部分の動作による、ボタン表示に対する入力と異なる、表示される画面にかかわらないジェスチャを検出する検出部（１０１）と、
前記検出部で検出した前記ジェスチャを、前記車両に設けられる機器（１４）の操作に割り当てる割り当て部（１０２）と、
前記検出部で検出した前記ジェスチャに対して前記割り当て部で割り当てられた操作を行わせる操作制御部（１０３）とを備える車両用制御装置であって、
前記操作制御部は、前記車両の車室内における位置別に異なる種類の操作である位置別操作を行わせることが可能であり、
前記検出部は、前記身体部分の線状の動作が要求される前記ジェスチャを検出するものであり、
前記割り当て部は、前記検出部で共通の前記ジェスチャとして検出する前記身体部分の前記線状の動作の軌跡の、前記ジェスチャで要求される動作の軌跡に対するずれの方向性に応じて、異なる前記位置別操作を割り当てるものであり、
前記車室内に設けられる表示装置での表示を制御する表示制御部（１０４，１０４ａ）を備え、
前記表示制御部は、前記位置別操作のための情報を前記表示装置に表示させるものであり、
前記検出部は、前記車室内に設けられて前記ジェスチャの入力を受け付ける入力装置（１２）で受け付けた入力結果をもとに、前記身体部分の線状の動作が要求される前記ジェスチャを検出するものであり、
前記表示制御部は、前記表示装置として、前記車両の運転席の前方以外に表示面が位置するとともに前記入力装置を含むタッチパネルである第１表示装置（１１）と、前記車両の運転席の前方から助手席の前方にまで少なくとも表示面が広がっているとともに前記入力装置を含まない第２表示装置（１３）とでの表示を制御するものであり、
前記表示制御部は、少なくとも前記第２表示装置に前記位置別操作のための情報を表示させるものであり、
前記操作制御部が行わせる前記位置別操作は、前記車両の運転席側と助手席側とで異なる種類の操作であり、
前記運転席の乗員であるドライバが前記第１表示装置の表示面の方向を向いているか判別する判別部（１０５）を備え、
前記表示制御部（１０４ａ）は、前記検出部で検出した前記ジェスチャに対する前記割り当て部での前記位置別操作の割り当て、及び前記判別部での判別結果に応じて、前記割り当て部で割り当てられた前記位置別操作が行われていることを前記乗員にフィードバックするための情報を、前記第１表示装置と前記第２表示装置とのうちのどの表示装置に表示させるか変化させる車両用制御装置。
請求項１において、
前記表示制御部（１０４ａ）は、
前記検出部で検出した前記ジェスチャに対して前記割り当て部で割り当てられた前記助手席側についての操作を前記操作制御部が行わせる場合には、この操作が行われていることを前記乗員にフィードバックするための情報を、前記第１表示装置と前記第２表示装置とのいずれにも表示させる一方、
前記検出部で検出した前記ジェスチャに対して前記割り当て部で割り当てられた前記運転席側についての操作を前記操作制御部が行わせる場合であって、且つ、前記判別部で前記ドライバが前記第１表示装置の表示面の方向を向いていると判別した場合には、この操作が行われていることを前記乗員にフィードバックするための情報を、前記第１表示装置と前記第２表示装置とのうちの前記第１表示装置のみに表示させ、
前記検出部で検出した前記ジェスチャに対して前記割り当て部で割り当てられた前記運転席側についての操作を前記操作制御部が行わせる場合であって、且つ、前記判別部で前記ドライバが前記第１表示装置の表示面の方向を向いていると判別しなかった場合には、この操作が行われていることを前記乗員にフィードバックするための情報を、前記第１表示装置と前記第２表示装置とのうちの前記第２表示装置のみに表示させる車両用制御装置。
車両の乗員の体の一部である身体部分の動作による、ボタン表示に対する入力と異なる、表示される画面にかかわらないジェスチャを検出する検出部（１０１）と、
前記検出部で検出した前記ジェスチャを、前記車両に設けられる機器（１４）の操作に割り当てる割り当て部（１０２）と、
前記検出部で検出した前記ジェスチャに対して前記割り当て部で割り当てられた操作を行わせる操作制御部（１０３）とを備える車両用制御装置であって、
前記操作制御部は、前記車両の車室内における位置別に異なる種類の操作である位置別操作を行わせることが可能であり、
前記検出部は、前記身体部分の線状の動作が要求される前記ジェスチャを検出するものであり、
前記割り当て部は、前記検出部で共通の前記ジェスチャとして検出する前記身体部分の前記線状の動作の軌跡の、前記ジェスチャで要求される動作の軌跡に対するずれの方向性に応じて、異なる前記位置別操作を割り当てるものであり、
前記車室内に設けられる表示装置での表示を制御する表示制御部（１０４，１０４ａ）を備え、
前記表示制御部は、前記位置別操作のための情報を前記表示装置に表示させるものであり、
前記検出部は、前記車室内に設けられて前記ジェスチャの入力を受け付ける入力装置（１２）で受け付けた入力結果をもとに、前記身体部分の線状の動作が要求される前記ジェスチャを検出するものであり、
前記表示制御部は、前記表示装置として、前記車両の運転席の前方以外に表示面が位置するとともに前記入力装置を含むタッチパネルである第１表示装置（１１）と、前記車両の運転席の前方から助手席の前方にまで少なくとも表示面が広がっているとともに前記入力装置を含まない第２表示装置（１３）とでの表示を制御するものであり、
前記表示制御部は、少なくとも前記第２表示装置に前記位置別操作のための情報を表示させるものであり、
前記操作制御部が行わせる前記位置別操作は、前記車両の運転席側と助手席側とで異なる種類の操作であり、
前記表示制御部（１０４）は、前記検出部で検出した前記ジェスチャに対して前記割り当て部で割り当てられた前記助手席側についての操作を前記操作制御部が行わせる場合には、この操作が行われていることを前記乗員にフィードバックするための情報を、前記第１表示装置と前記第２表示装置とのいずれにも表示させる一方、前記検出部で検出した前記ジェスチャに対して前記割り当て部で割り当てられた前記運転席側についての操作を前記操作制御部が行わせる場合には、この操作が行われていることを前記乗員にフィードバックするための情報を、前記第１表示装置と前記第２表示装置とのうちの前記第２表示装置のみに表示させる車両用制御装置。
車両の乗員の体の一部である身体部分の動作によるジェスチャを検出する検出部（１０１）と、
前記検出部で検出した前記ジェスチャを、前記車両に設けられる機器（１４）の操作に割り当てる割り当て部（１０２）と、
前記検出部で検出した前記ジェスチャに対して前記割り当て部で割り当てられた操作を行わせる操作制御部（１０３）とを備える車両用制御装置であって、
前記操作制御部は、前記車両の車室内における位置別に異なる種類の操作である位置別操作を行わせることが可能であり、
前記検出部は、前記身体部分の線状の動作が要求される前記ジェスチャを検出するものであり、
前記割り当て部は、前記検出部で共通の前記ジェスチャとして検出する前記身体部分の前記線状の動作の軌跡の、前記ジェスチャで要求される動作の軌跡に対するずれの方向性に応じて、異なる前記位置別操作を割り当てるものであり、
前記操作制御部が行わせる前記位置別操作は、前記車両の運転席側と助手席側とで異なる種類の操作であり、
前記車室内に設けられる表示装置での表示を制御する表示制御部（１０４ａ）を備え、
前記表示制御部は、前記位置別操作のための情報を前記表示装置に表示させるものであり、
前記検出部は、前記車室内に設けられて前記ジェスチャの入力を受け付ける入力装置（１２）で受け付けた入力結果をもとに、前記身体部分の線状の動作が要求される前記ジェスチャを検出するものであり、
前記表示制御部は、前記表示装置として、前記車両の運転席の前方以外に表示面が位置するとともに前記入力装置を含むタッチパネルである第１表示装置（１１）と、前記車両の運転席の前方から助手席の前方にまで少なくとも表示面が広がっているとともに前記入力装置を含まない第２表示装置（１３）とでの表示を制御するものであり、
前記表示制御部は、少なくとも前記第２表示装置に前記位置別操作のための情報を表示させるものであり、
前記運転席の乗員であるドライバが前記第１表示装置の表示面の方向を向いているか判別する判別部（１０５）を備え、
前記表示制御部は、前記検出部で検出した前記ジェスチャに対する前記割り当て部での前記位置別操作の割り当て、及び前記判別部での判別結果に応じて、前記割り当て部で割り当てられた前記位置別操作が行われていることを前記乗員にフィードバックするための情報を、前記第１表示装置と前記第２表示装置とのうちのどの表示装置に表示させるか変化させる車両用制御装置。
請求項４において、
前記表示制御部は、
前記検出部で検出した前記ジェスチャに対して前記割り当て部で割り当てられた前記助手席側についての操作を前記操作制御部が行わせる場合には、この操作が行われていることを前記乗員にフィードバックするための情報を、前記第１表示装置と前記第２表示装置とのいずれにも表示させる一方、
前記検出部で検出した前記ジェスチャに対して前記割り当て部で割り当てられた前記運転席側についての操作を前記操作制御部が行わせる場合であって、且つ、前記判別部で前記ドライバが前記第１表示装置の表示面の方向を向いていると判別した場合には、この操作が行われていることを前記乗員にフィードバックするための情報を、前記第１表示装置と前記第２表示装置とのうちの前記第１表示装置のみに表示させ、
前記検出部で検出した前記ジェスチャに対して前記割り当て部で割り当てられた前記運転席側についての操作を前記操作制御部が行わせる場合であって、且つ、前記判別部で前記ドライバが前記第１表示装置の表示面の方向を向いていると判別しなかった場合には、この操作が行われていることを前記乗員にフィードバックするための情報を、前記第１表示装置と前記第２表示装置とのうちの前記第２表示装置のみに表示させる車両用制御装置。
請求項１～５のいずれか１項において、
前記検出部は、前記車室内に設けられて前記ジェスチャの入力を受け付ける入力装置（１２）で受け付けた入力結果をもとに、前記身体部分の直線状の動作が要求される前記ジェスチャを検出するものであり、且つ、前記ジェスチャとして、前記入力装置に対して要求される前記身体部分の直線状の動作がそれぞれ直交する関係にある第１ジェスチャと第２ジェスチャとを少なくとも検出可能なものであり、前記身体部分の直線状の動作の軌跡の、前記第１ジェスチャ及び前記第２ジェスチャのいずれかで要求される動作の方向への変化量の大きさに応じて前記第１ジェスチャ及び前記第２ジェスチャを区別して検出し、
前記割り当て部は、前記検出部で共通の前記ジェスチャとして検出する前記身体部分の前記直線状の動作の軌跡のずれの方向性に応じて、異なる前記位置別操作を割り当てる車両用制御装置。
請求項１～６のいずれか１項において、
前記検出部は、前記車室内に設けられて前記ジェスチャの入力を受け付ける入力装置（１２）で受け付けた入力結果をもとに、前記身体部分の線状の動作が要求される前記ジェスチャを検出するものであり、
前記操作制御部が行わせる前記位置別操作は、前記入力装置に対して前記車両の左右で異なる種類の操作である車両用制御装置。
少なくとも１つのプロセッサにより実行される、
車両の乗員の体の一部である身体部分の動作による、ボタン表示に対する入力と異なる、表示される画面にかかわらないジェスチャを検出する検出工程と、
前記検出工程で検出した前記ジェスチャを、前記車両に設けられる機器（１４）の操作に割り当てる割り当て工程と、
前記検出工程で検出した前記ジェスチャに対して前記割り当て工程で割り当てられた操作を行わせる操作制御工程とを含む車両用制御方法であって、
前記操作制御工程では、前記車両の車室内における位置別に異なる種類の操作である位置別操作を行わせることが可能であり、
前記検出工程では、前記身体部分の線状の動作が要求される前記ジェスチャを検出するものであり、
前記割り当て工程では、前記検出工程で共通の前記ジェスチャとして検出する前記身体部分の前記線状の動作の軌跡の、前記ジェスチャで要求される動作の軌跡に対するずれの方向性に応じて、異なる前記位置別操作を割り当てるものであり、
前記車室内に設けられる表示装置での表示を制御する表示制御工程を含み、
前記表示制御工程では、前記位置別操作のための情報を前記表示装置に表示させるものであり、
前記検出工程では、前記車室内に設けられて前記ジェスチャの入力を受け付ける入力装置（１２）で受け付けた入力結果をもとに、前記身体部分の線状の動作が要求される前記ジェスチャを検出するものであり、
前記表示制御工程では、前記表示装置として、前記車両の運転席の前方以外に表示面が位置するとともに前記入力装置を含むタッチパネルである第１表示装置（１１）と、前記車両の運転席の前方から助手席の前方にまで少なくとも表示面が広がっているとともに前記入力装置を含まない第２表示装置（１３）とでの表示を制御するものであり、
前記表示制御工程では、少なくとも前記第２表示装置に前記位置別操作のための情報を表示させるものであり、
前記操作制御工程で行わせる前記位置別操作は、前記車両の運転席側と助手席側とで異なる種類の操作であり、
前記運転席の乗員であるドライバが前記第１表示装置の表示面の方向を向いているか判別する判別工程を含み、
前記表示制御工程では、前記検出工程で検出した前記ジェスチャに対する前記割り当て工程での前記位置別操作の割り当て、及び前記判別工程での判別結果に応じて、前記割り当て工程で割り当てられた前記位置別操作が行われていることを前記乗員にフィードバックするための情報を、前記第１表示装置と前記第２表示装置とのうちのどの表示装置に表示させるか変化させる車両用制御方法。
少なくとも１つのプロセッサにより実行される、
車両の乗員の体の一部である身体部分の動作による、ボタン表示に対する入力と異なる、表示される画面にかかわらないジェスチャを検出する検出工程と、
前記検出工程で検出した前記ジェスチャを、前記車両に設けられる機器（１４）の操作に割り当てる割り当て工程と、
前記検出工程で検出した前記ジェスチャに対して前記割り当て工程で割り当てられた操作を行わせる操作制御工程とを含む車両用制御方法であって、
前記操作制御工程では、前記車両の車室内における位置別に異なる種類の操作である位置別操作を行わせることが可能であり、
前記検出工程では、前記身体部分の線状の動作が要求される前記ジェスチャを検出するものであり、
前記割り当て工程では、前記検出工程で共通の前記ジェスチャとして検出する前記身体部分の前記線状の動作の軌跡の、前記ジェスチャで要求される動作の軌跡に対するずれの方向性に応じて、異なる前記位置別操作を割り当てるものであり、
前記車室内に設けられる表示装置での表示を制御する表示制御工程を含み、
前記表示制御工程では、前記位置別操作のための情報を前記表示装置に表示させるものであり、
前記検出工程では、前記車室内に設けられて前記ジェスチャの入力を受け付ける入力装置（１２）で受け付けた入力結果をもとに、前記身体部分の線状の動作が要求される前記ジェスチャを検出するものであり、
前記表示制御工程では、前記表示装置として、前記車両の運転席の前方以外に表示面が位置するとともに前記入力装置を含むタッチパネルである第１表示装置（１１）と、前記車両の運転席の前方から助手席の前方にまで少なくとも表示面が広がっているとともに前記入力装置を含まない第２表示装置（１３）とでの表示を制御するものであり、
前記表示制御工程では、少なくとも前記第２表示装置に前記位置別操作のための情報を表示させるものであり、
前記操作制御工程で行わせる前記位置別操作は、前記車両の運転席側と助手席側とで異なる種類の操作であり、
前記表示制御工程では、前記検出工程で検出した前記ジェスチャに対して前記割り当て工程で割り当てられた前記助手席側についての操作を前記操作制御工程で行わせる場合には、この操作が行われていることを前記乗員にフィードバックするための情報を、前記第１表示装置と前記第２表示装置とのいずれにも表示させる一方、前記検出工程で検出した前記ジェスチャに対して前記割り当て工程で割り当てられた前記運転席側についての操作を前記操作制御工程で行わせる場合には、この操作が行われていることを前記乗員にフィードバックするための情報を、前記第１表示装置と前記第２表示装置とのうちの前記第２表示装置のみに表示させる車両用制御方法。
少なくとも１つのプロセッサにより実行される、
車両の乗員の体の一部である身体部分の動作によるジェスチャを検出する検出工程と、
前記検出工程で検出した前記ジェスチャを、前記車両に設けられる機器（１４）の操作に割り当てる割り当て工程と、
前記検出工程で検出した前記ジェスチャに対して前記割り当て工程で割り当てられた操作を行わせる操作制御工程とを含む車両用制御方法であって、
前記操作制御工程では、前記車両の車室内における位置別に異なる種類の操作である位置別操作を行わせることが可能であり、
前記検出工程では、前記身体部分の線状の動作が要求される前記ジェスチャを検出するものであり、
前記割り当て工程では、前記検出工程で共通の前記ジェスチャとして検出する前記身体部分の前記線状の動作の軌跡の、前記ジェスチャで要求される動作の軌跡に対するずれの方向性に応じて、異なる前記位置別操作を割り当てるものであり、
前記操作制御工程が行わせる前記位置別操作は、前記車両の運転席側と助手席側とで異なる種類の操作であり、
前記車室内に設けられる表示装置での表示を制御する表示制御工程を含み、
前記表示制御工程では、前記位置別操作のための情報を前記表示装置に表示させるものであり、
前記検出工程では、前記車室内に設けられて前記ジェスチャの入力を受け付ける入力装置（１２）で受け付けた入力結果をもとに、前記身体部分の線状の動作が要求される前記ジェスチャを検出するものであり、
前記表示制御工程では、前記表示装置として、前記車両の運転席の前方以外に表示面が位置するとともに前記入力装置を含むタッチパネルである第１表示装置（１１）と、前記車両の運転席の前方から助手席の前方にまで少なくとも表示面が広がっているとともに前記入力装置を含まない第２表示装置（１３）とでの表示を制御するものであり、
前記表示制御工程では、少なくとも前記第２表示装置に前記位置別操作のための情報を表示させるものであり、
前記運転席の乗員であるドライバが前記第１表示装置の表示面の方向を向いているか判別する判別工程を含み、
前記表示制御工程では、前記検出工程で検出した前記ジェスチャに対する前記割り当て工程での前記位置別操作の割り当て、及び前記判別工程での判別結果に応じて、前記割り当て工程で割り当てられた前記位置別操作が行われていることを前記乗員にフィードバックするための情報を、前記第１表示装置と前記第２表示装置とのうちのどの表示装置に表示させるか変化させる車両用制御方法。