JP2021157644A - 制御装置、機器、プログラム、及び、制御方法 - Google Patents

Abstract

【課題】ユーザの身体動作及びユーザが物品を所持しているか否かに基づいて複数の機能を有する機器を制御する制御装置を提供する。【解決手段】車両１００において、複数の機能を有する機器を制御する制御装置である車両制御部１１０は、機器のユーザの身体動作に関する特徴を検出する検出部であり、ユーザが物品を所持しているか否かを判定する第１判定部である画像解析部２３４と、複数の機能のうち何れかの機能を機器に実行させる実行部である機能実行部２３８と、を備える。検出部は、ユーザを撮像した画像に基づいて、特徴を検出する。第１判定部は、ユーザを撮像した画像に基づいて、物品を所持しているか否かを判定する。実行部は、検出部の検出結果及び第１判定部の判定結果に基づいて、複数の機能のうちの何れかの機能を機器に実行させる。【選択図】図２

Description

本発明は、制御装置、機器、プログラム、及び、制御方法に関する。

特許文献１には、ドアガラスの上端面に配置された接触センサへの接触操作によって、ドアガラスを昇降させる車両用ドアガラス開閉装置が開示されている。
［先行技術文献］
［特許文献］
［特許文献１］ 特開２０１６−１３２８６４号公報

本発明の第１の態様においては、制御装置が提供される。上記の制御装置は、例えば、複数の機能を有する機器を制御する。上記の制御装置は、例えば、機器のユーザが撮像された画像に基づいて、ユーザの身体動作に関する特徴を検出する検出部を備える。上記の制御装置は、例えば、画像に基づいて、ユーザが物品を所持しているか否かを判定する第１判定部を備える。上記の制御装置は、例えば、検出部の検出結果及び第１判定部の判定結果に基づいて、複数の機能のうちの何れかの機能を、機器に実行させる実行部を備える。

上記の制御装置において、（ａ）（ｉ）検出部が第１身体動作に関する特徴を検出し、且つ、（ｉｉ）第１判定部が、ユーザが物品を所持していると判定した場合、又は、（ｂ）検出部が、第１身体動作とは異なる第２身体動作に関する特徴を検出した場合、実行部は、複数の機能のうちの第１機能を機器に実行させてよい。上記の制御装置において、（ｉ）検出部が第１身体動作に関する特徴を検出し、且つ、（ｉｉ）第１判定部が、ユーザが物品を所持していないと判定した場合、実行部は、複数の機能のうち、第１機能とは異なる第２機能を機器に実行させてよい。上記の制御装置において、実行部が第１機能を機器に実行させた後、予め定められた期間内に、検出部が第１身体動作に関する特徴を検出した場合、実行部は、第１機能を機器に実行させてよい。

上記の制御装置において、第１判定部は、機器の構成部品とは異なる特徴を有する第１物品が、ユーザの身体の特定の部位の近傍に検出されるか否かを判定してよい。第１判定部は、第１物品がユーザの特定の部位の近傍に検出されたと判定された場合に、ユーザが物品を所持していると判定してよい。

上記の制御装置において、第１判定部は、ユーザの身体の特定の部位の形状が、予め定められた特徴を有するか否かを判定してよい。第１判定部は、ユーザの特定の部位の形状が予め定められた特徴を有すると判定された場合に、ユーザが物品を所持していると判定してよい。

本発明の第２の態様においては、制御装置が提供される。上記の制御装置は、例えば、複数の機能を有する機器を制御する。上記の制御装置は、例えば、機器のユーザが撮像された画像に基づいて、ユーザの身体動作に関する特徴を検出する検出部を備える。上記の制御装置は、例えば、画像に基づいて、予め定められた特徴を有する第２物品が、ユーザの身体の特定の部位の近傍に存在するか否かを判定する第２判定部を備える。上記の制御装置は、例えば、検出部の検出結果及び第２判定部の判定結果に基づいて、複数の機能のうちの何れかの機能を、機器に実行させる実行部を備える。

上記の制御装置において、（ａ）（ｉ）検出部が第１身体動作に関する特徴を検出し、且つ、（ｉｉ）第２判定部が、第２物品がユーザの特定の部位の近傍に存在すると判定した場合、又は、（ｂ）検出部が、第１身体動作とは異なる第２身体動作に関する特徴を検出した場合、実行部は、複数の機能のうちの第１機能を機器に実行させてよい。上記の制御装置において、（ｉ）検出部が第１身体動作に関する特徴を検出し、且つ、（ｉｉ）第２判定部が、第２物品がユーザの特定の部位の近傍に存在しないと判定した場合、実行部は、複数の機能のうち、第１機能とは異なる第２機能を機器に実行させてよい。上記の制御装置において、実行部が第１機能を機器に実行させた後、予め定められた期間内に、検出部が第１身体動作に関する特徴を検出した場合、実行部は、第１機能を機器に実行させてよい。

上記の第１又は第２の態様に係る制御装置において、機器は、開閉可能に構成された窓を有する移動体であってよい。上記の制御装置において、第１機能は、窓を開ける機能又は窓を閉める機能であってよい。

本発明の第３の態様においては、機器が提供される。上記の機器は、例えば、上記の第１又は第２の態様に係る制御装置を備える。上記の機器は、例えば、複数の機能のそれぞれを実行する複数の機能部を備える。上記の機器において、例えば、複数の機能部のそれぞれは、制御装置からの指示に基づいて、各機能部に割り当てられた機能を実行する。上記の機器は、機器のユーザを撮像する撮像部を備えてよい。

本発明の第４の態様においては、制御方法が提供される。上記の制御装置は、例えば、複数の機能を有する機器を制御するために用いられる。上記の方法は、例えば、機器のユーザが撮像された画像に基づいて、ユーザの身体動作に関する特徴を検出する検出段階を有する。上記の方法は、例えば、画像に基づいて、ユーザが物品を所持しているか否かを判定する第１判定段階を有する。上記の方法は、例えば、検出段階における検出結果及び第１判定段階における判定結果に基づいて、複数の機能のうちの何れかの機能を、機器に実行させる実行段階を有する。

本発明の第５の態様においては、制御方法が提供される。上記の方法は、例えば、複数の機能を有する機器を制御するために用いられる。上記の方法は、例えば、機器のユーザが撮像された画像に基づいて、ユーザの身体動作に関する特徴を検出する検出段階を有する。上記の方法は、例えば、画像に基づいて、予め定められた特徴を有する第２物品が、ユーザの身体の特定の部位の近傍に存在するか否かを判定する第２判定段階を有する。上記の方法は、例えば、検出段階における検出結果及び第２判定段階における判定結果に基づいて、複数の機能のうちの何れかの機能を、機器に実行させる実行段階を有する。

本発明の第６の態様においては、プログラムが提供される。上記のプログラムは、コンピュータを、上記の第１又は第２の態様に係る制御装置として機能させるためのプログラムであってよい。上記のプログラムは、コンピュータに、上記の第４又は第５の態様に係る制御方法を実行させるためのプログラムであってもよい。上記のプログラムを格納するコンピュータ可読媒体が提供されてもよい。コンピュータ可読媒体は、非一時的なコンピュータ可読媒体であってもよい。コンピュータ可読媒体は、コンピュータ可読記録媒体であってもよい。

なお、上記の発明の概要は、本発明の必要な特徴の全てを列挙したものではない。また、これらの特徴群のサブコンビネーションもまた、発明となりうる。

車両１００のシステム構成の一例を概略的に示す。 車両１００のシステム構成の一例を概略的に示す。 画像解析部２３４の内部構成の一例を概略的に示す。 機能割当ルール４００の一例を概略的に示す。 車両制御部１１０における情報処理の一例を概略的に示す。 機能割当ルール６００の一例を概略的に示す。 コンピュータ３０００のシステム構成の一例を概略的に示す。

以下、発明の実施の形態を通じて本発明を説明するが、以下の実施形態は特許請求の範囲にかかる発明を限定するものではない。また、実施形態の中で説明されている特徴の組み合わせの全てが発明の解決手段に必須であるとは限らない。なお、図面において、同一または類似の部分には同一の参照番号を付して、重複する説明を省く場合がある。

［車両１００の概要］
図１及び図２を用いて、車両１００のシステム構成の一例が説明される。車両１００としては、自転車、自動車、自動二輪車、電車などが例示される。自動二輪車としては、（ｉ）バイク、（ｉｉ）三輪バイク、（ｉｉｉ）セグウェイ（登録商標）、動力ユニット付きキックボード（登録商標）、動力ユニット付きスケートボードのような、動力ユニットを有する立ち乗り二輪車又は三輪車などが例示される。車両１００は、動力源として、内燃機関を利用してもよく、電動機を利用してもよく、内燃機関及び電動機の両方を利用してもよい。

図１に示されるとおり、本実施形態において、車両１００は、車両制御部１１０と、カメラ１２０とを備える。車両１００は、複数のカメラ１２０を備えてもよい。

本実施形態において、車両制御部１１０は、車両１００を制御する。例えば、車両制御部１１０は、車両１００が有する複数の機能の実行を制御する。車両制御部１１０の詳細は後述される。

本実施形態において、カメラ１２０は、車両１００を利用する搭乗者２０を撮像する。一実施形態において、カメラ１２０は、例えば、搭乗者２０の手２２の様子を撮像することができるように構成される。他の実施形態において、カメラ１２０は、例えば、搭乗者２０が駐車チケット３０を手２２に所持している場合に、少なくとも駐車チケット３０の特徴部分を撮像することができるように構成される。カメラ１２０は、搭乗者２０が撮像された画像の画像データを、車両制御部１１０に出力する。上記の画像は、１又は複数の静止画像であってもよく、動画像であってもよい。

図２に示されるとおり、本実施形態において、車両１００は、例えば、ドア２１０をさらに備える。本実施形態において、ドア２１０は、例えば、ドア開閉部２１２と、窓２２０と、窓開閉部２２２とを有する。また、上記の車両制御部１１０は、例えば、画像データ取得部２３２と、画像解析部２３４と、機能割当部２３６と、機能実行部２３８とを有する。

本実施形態においては、ドア２１０及び窓２２０のそれぞれが開閉可能に構成されており、搭乗者２０がドア２１０又は窓２２０を開閉する場合を例として、車両１００及び車両制御部１１０の詳細が説明される。しかしながら、車両１００及び車両制御部１１０は本実施形態に限定されないことに留意されたい。

従来技術のように、窓２２０に配された窓ガラス（図示されていない。）の上端面に配置された接触センサを搭乗者２０が接触操作することで、窓２２０が開閉するように構成されている場合、例えば、搭乗者２０が駐車チケット３０を手２２に所持しているときには、窓２２０の開閉操作が非常に煩雑となる。

本実施形態によれば、車両制御部１１０は、カメラ１２０が撮像した搭乗者２０の画像を解析して、搭乗者２０の身体動作（ジェスチャと称される場合がある。）により、窓２２０を開閉させる。これにより、例えば、搭乗者２０が駐車チケット３０を手２２に所持している場合であっても、搭乗者２０は、窓２２０を容易に開閉することができる。身体動作は、搭乗者２０の身体の任意の部位の動作であってよい。身体動作としては、手２２の動き、手２２の形の変化（つまり、指の動きである）、腕の動き、表情、視線の動き、口の動きなどが例示される。

本実施形態において、ドア開閉部２１２は、ドア２１０の開閉機能を実行する。ドア開閉部２１２は、車両制御部１１０からの指示に基づいて、ドア２１０の開閉機能を実行してよい。例えば、ドア開閉部２１２は、電動機（図示されていない。）を利用して、ドア開閉部２１２を開閉させる。ドア開閉部２１２は、ドア２１０の鍵（図示されていない。）の施錠及び解錠の少なくとも一方を実行してもよい。

本実施形態において、窓開閉部２２２は、窓２２０の開閉機能を実行する。窓開閉部２２２は、車両制御部１１０からの指示に基づいて、窓２２０の開閉機能を実行してよい。例えば、窓開閉部２２２は、窓２２０に配された窓ガラス（図示されていない。）を昇降させることで、窓２２０を開閉させる。窓開閉部２２２は、窓２２０の鍵（図示されていない。）の施錠及び解錠の少なくとも一方を実行してもよい。

本実施形態において、画像データ取得部２３２は、カメラ１２０から、カメラ１２０が撮像した画像の画像データを取得する。画像データ取得部２３２は、上記の画像データを画像解析部２３４に出力する。画像データ取得部２３２は、車両制御部１１０及びカメラ１２０の間のデータ通信を制御する通信インターフェースであってもよい。

本実施形態において、画像解析部２３４は、カメラ１２０が撮像した搭乗者２０の画像を解析する。画像解析部２３４は、解析結果を示す情報を、例えば機能割当部２３６に出力する。画像解析部２３４の詳細は後述される。

一実施形態において、画像解析部２３４は、搭乗者２０の画像を解析して、搭乗者２０の身体動作を検出する。画像解析部２３４は、搭乗者２０の身体動作を特定してもよい。例えば、画像解析部２３４は、特定の種類の身体動作を検出する。画像データ取得部２３２は、検出された身体動作の種類を示す情報を、例えば機能割当部２３６に出力する。上記の検出された身体動作の種類を示す情報は、特定の身体動作が検出されたことを示す情報であってもよい。

他の実施形態において、画像解析部２３４は、搭乗者２０の画像を解析して、搭乗者２０の状況を認識する。画像データ取得部２３２は、認識された搭乗者２０の状況を示す情報を、例えば機能割当部２３６に出力する。

例えば、画像解析部２３４は、搭乗者２０が物品を手２２に所持しているか否かを判定する。画像解析部２３４は、搭乗者２０が、搭乗者２０の手２２のうち、窓２２０の側に位置する手２２に物品を所持しているか否かを判定してよい。

例えば、画像解析部２３４は、駐車チケット３０の有無を判定する。画像解析部２３４は、搭乗者２０の手２２の周辺の空間における駐車チケット３０の有無を判定してもよい。画像解析部２３４は、搭乗者２０の手２２のうち、窓２２０の側に位置する手２２の周辺の空間における、駐車チケット３０の有無を判定してもよい。

本実施形態において、機能割当部２３６は、搭乗者２０の身体動作に、車両１００の機能を割り当てる。機能割当部２３６は、例えば、予め定められたルールに従って、搭乗者２０の身体動作に、車両１００の機能を割り当てる。上記のルールの詳細は後述される。機能割当部２３６は、搭乗者２０の身体動作に対して割り当てられた車両１００の機能を示す情報を、例えば機能実行部２３８に出力する。

一実施形態において、画像解析部２３４から、検出された身体動作の種類を示す情報を取得する。機能割当部２３６は、検出された身体動作に対して割り当てられる車両１００の機能の種類を決定する。機能割当部２３６は、検出された身体動作に対して割り当てられた車両１００の機能の種類を示す情報を、例えば機能実行部２３８に出力する。

他の実施形態において、機能割当部２３６は、画像解析部２３４から、認識された搭乗者２０の状況を示す情報をさらに取得する。機能割当部２３６は、搭乗者２０の状況に応じて、検出された身体動作に対して割り当てられる車両１００の機能の種類を決定する。機能割当部２３６は、検出された身体動作に対して割り当てられた車両１００の機能の種類を示す情報を、例えば機能実行部２３８に出力する。

本実施形態において、機能実行部２３８は、車両１００の機能の実行を制御する。例えば、機能実行部２３８は、ドア開閉部２１２を制御して、ドア開閉部２１２にドア２１０の開閉機能を実行させる。これにより、ドア開閉部２１２は、ドア２１０を開ける動作を実行したり、ドア２１０を閉める動作を実行したりする。同様に、機能実行部２３８は、窓開閉部２２２を制御して、窓開閉部２２２に窓２２０の開閉機能を実行させる。これにより、窓開閉部２２２は、窓２２０を開ける動作を実行したり、窓２２０を閉める動作を実行したりする。

本実施形態において、機能実行部２３８は、機能実行部２３８から、画像解析部２３４が検出した搭乗者２０の身体動作に対して割り当てられた車両１００の機能の種類を示す情報を取得する。機能実行部２３８は、上記の情報により示される種類の機能を、車両１００に実行させる。

上述されたとおり、機能割当部２３６は、画像解析部２３４の解析結果に基づいて、搭乗者２０の身体動作に対して車両１００の動作を割り当てる。これにより、機能実行部２３８は、画像解析部２３４の解析結果に基づいて、車両１００が有する複数の機能のうちの何れかの機能を、車両１００に実行させることができる。

［車両１００の各部の具体的な構成］
車両１００の各部は、ハードウエアにより実現されてもよく、ソフトウエアにより実現されてもよく、ハードウエア及びソフトウエアにより実現されてもよい。車両１００の各部は、その少なくとも一部が、ＥＣＵ（Ｅｌｅｃｔｒｏｎｉｃ Ｃｏｎｔｒｏｌ Ｕｎｉｔ）などの制御ユニットにより実現されてよい。車両１００の各部は、その少なくとも一部が、パーソナルコンピュータ又は携帯端末によって実現されてもよい。例えば、パーソナルコンピュータ又は携帯端末が、車両制御部１１０のユーザインタフェースとして利用され得る。携帯端末としては、携帯電話、スマートフォン、ＰＤＡ、タブレット、ノートブック・コンピュータ又はラップトップ・コンピュータ、ウエアラブル・コンピュータなどが例示される。

車両１００を構成する構成要素の少なくとも一部がソフトウエアにより実現される場合、当該ソフトウエアにより実現される構成要素は、一般的な構成の情報処理装置において、当該構成要素に関する動作を規定したプログラムを起動することにより実現されてよい。上記の情報処理装置は、例えば、（ｉ）各種プロセッサ（プロセッサとしては、ＣＰＵ、ＧＰＵなどが例示される）、ＲＯＭ、ＲＡＭ、通信インタフェースなどを有するデータ処理装置と、（ｉｉ）メモリ、ＨＤＤなどの記憶装置（外部記憶装置を含む。）とを備える。上記の情報処理装置は、（ｉｉｉ）キーボード、タッチパネル、カメラ、マイク、各種センサ、ＧＰＳ受信機などの入力装置を備えてもよく、（ｉｖ）表示装置、スピーカ、振動装置などの出力装置を備えてもよい。

上記の情報処理装置において、上記のデータ処理装置又は記憶装置は、プログラムを格納してよい。上記のプログラムに記述された情報処理は、例えば、当該プログラムがコンピュータに読込まれることにより、当該プログラムに関連するソフトウエアと、車両１００の各種のハードウエア資源とが協働した具体的手段として機能する。そして、上記の具体的手段が、本実施形態におけるコンピュータの使用目的に応じた情報の演算又は加工を実現することにより、当該使用目的に応じた車両１００が構築される。

上記のプログラムは、コンピュータ可読媒体に格納されていてもよい。上記のプログラムは、非一時的なコンピュータ可読記録媒体に格納されていてもよい。上記のプログラムは、ＣＤ−ＲＯＭ、ＤＶＤ−ＲＯＭ、メモリ、ハードディスクなどのコンピュータ読み取り可能な媒体に記憶されていてもよく、ネットワークに接続された記憶装置に記憶されていてもよい。上記のプログラムは、コンピュータ読み取り可能な媒体又はネットワークに接続された記憶装置から、車両１００の少なくとも一部を構成するコンピュータにインストールされてよい。

上記のプログラムが実行されることにより、車両１００に搭載されたコンピュータが、車両１００の各部の少なくとも一部として機能してもよい。上記のプログラムが実行されることにより、車両１００に搭載されたコンピュータが、車両１００の各部の少なくとも一部における情報処理方法を実行してもよい。

車両１００に搭載されたコンピュータを車両１００の各部の少なくとも一部として機能させるためのプログラムは、例えば、車両１００の各部の少なくとも一部の動作を規定したモジュールを備える。上記のプログラム又はモジュールが実行されると、上記のプログラム又はモジュールは、データ処理装置、入力装置、出力装置、記憶装置等に働きかけて、コンピュータを車両１００の各部として機能させたり、コンピュータに車両１００の各部における情報処理方法を実行させたりする。

一実施形態において、上記の情報処理方法は、車両１００を制御するための制御方法であってよい。上記の制御方法は、例えば、車両１００のユーザが撮像された画像に基づいて、ユーザの身体動作に関する特徴を検出する検出段階を有する。上記の制御方法は、例えば、車両１００のユーザが撮像された画像に基づいて、ユーザが物品を所持しているか否かを判定する第１判定段階を有する。上記の制御方法は、例えば、検出段階における検出結果及び第１判定段階における判定結果に基づいて、複数の機能のうちの何れかの機能を、機器に実行させる実行段階を有する。

他の実施形態において、上記の情報処理方法は、車両１００を制御するための制御方法であってよい。上記の制御方法は、例えば、車両１００のユーザが撮像された画像に基づいて、ユーザの身体動作に関する特徴を検出する検出段階を有する。上記の制御方法は、例えば、車両１００のユーザが撮像された画像に基づいて、予め定められた特徴を有する第２物品が、ユーザの身体の特定の部位の近傍に存在するか否かを判定する第２判定段階を有する。上記の制御方法は、例えば、検出段階における検出結果及び第２判定段階における判定結果に基づいて、複数の機能のうちの何れかの機能を、機器に実行させる実行段階を有する。

搭乗者２０は、ユーザの一例であってよい。手２２は、ユーザの身体の特定の部位の一例であってよい。駐車チケット３０は、物品、第１物品又は第２物品の一例であってよい。車両１００は、機器又は移動体の一例であってよい。車両制御部１１０は、制御装置の一例であってよい。カメラ１２０は、撮像部の一例であってよい。

ドア２１０の開閉機能は、第２機能の一例であってよい。ドア開閉部２１２は、機能部の一例であってよい。窓２２０の開閉機能は、第１機能の一例であってよい。窓開閉部２２２は、機能部の一例であってよい。画像解析部２３４は、検出部、第１判定部又は第２判定部の一例であってよい。機能実行部２３８は、実行部の一例であってよい。

本実施形態においては、車両制御部１１０が、車両１００を制御する場合を例として、車両制御部１１０の詳細が説明された。しかしながら、車両１００は、本実施形態に限定されない。車両１００は、任意の種類の移動体を制御してもよい。

移動体としては、車両の他、船舶、飛行体などが例示される。船舶としては、船、ホバークラフト、水上バイク、潜水艦、潜水艇、水中スクータなどが例示される。飛行体としては、飛行機、飛行船又は風船、気球、ヘリコプター、ドローンなどが例示される。

図３は、画像解析部２３４の内部構成の一例を概略的に示す。本実施形態において、画像解析部２３４は、ジェスチャ検出部３２０と、状況認識部３４０とを備える。本実施形態において、ジェスチャ検出部３２０は、ノック動作検出部３２２と、フリック動作検出部３２４とを有する。本実施形態において、状況認識部３４０は、所持判定部３４２と、チケット検出部３４４とを有する。

本実施形態において、ジェスチャ検出部３２０は、搭乗者２０のジェスチャを検出する。例えば、ジェスチャ検出部３２０は、画像データ取得部２３２から、カメラ１２０が撮像した搭乗者２０の画像の画像データを取得する。ジェスチャ検出部３２０は、搭乗者２０が撮像された画像に基づいて、搭乗者２０の身体動作に関する特徴を検出する。ジェスチャ検出部３２０は、単一のカメラ１２０が搭乗者２０を撮像した画像に基づいて、搭乗者２０の身体動作に関する特徴を検出してもよく、複数のカメラ１２０が搭乗者２０を撮像した画像に基づいて、搭乗者２０の身体動作に関する特徴を検出してもよい。

ジェスチャ検出部３２０は、検出された搭乗者２０の身体動作に関する特徴に基づいて、搭乗者２０のジェスチャを特定してよい。例えば、ジェスチャ検出部３２０は、複数のジェスチャのそれぞれについて、当該ジェスチャの識別情報と、身体動作に関する特徴とを対応づけて格納するデータテーブルを参照して、検出された搭乗者２０の身体動作に合致するジェスチャを抽出することで、搭乗者２０のジェスチャを特定する。上記のデータテーブルは、画像解析部２３４に格納されていてもよく、車両１００に配された適切な記憶装置（図示されていない。）に格納されていてもよい。

本実施形態において、ジェスチャ検出部３２０は、検出された搭乗者２０の身体動作に関する特徴を示す情報を、機能割当部２３６に出力する。ジェスチャ検出部３２０は、特定されたジェスチャの種類を示す情報を、機能割当部２３６に出力してもよい。ジェスチャ検出部３２０は、特定の種類のジェスチャが検出されたことを示す情報を、機能割当部２３６に出力してもよい。

本実施形態においては、ジェスチャ検出部３２０が、搭乗者２０のノック動作と、フリック操作とを検出する場合を例として、ジェスチャ検出部３２０の詳細が説明される。しかしながら、ジェスチャ検出部３２０は本実施形態に限定されないことに留意されたい。ジェスチャ検出部３２０は、任意の種類のジェスチャを検出してよい。

ノック動作検出部３２２は、搭乗者２０が撮像された画像に基づいて、搭乗者２０のノック動作を検出する。ノック動作検出部３２２は、ノック動作が検出されたことを示す情報を、機能割当部２３６に出力する。

ノック動作は、搭乗者２０の手２２が窓２２０の近傍の空間に位置する状態で、搭乗者２０が窓２２０をノックするような動作であればよく、その詳細は特に限定されない。ノック動作において、手２２の形状は、軽く握られた形状であってよい。ノック動作中に、搭乗者２０の手２２と、窓２２０とが接触してもよく、搭乗者２０の手２２と、窓２２０とが接触しなくてもよい。ノック動作中に、搭乗者２０が物品を手２２に所持していてもよく、搭乗者２０が物品を手２２に所持していなくてもよい。

例えば、ノック動作検出部３２２は、（ｉ）搭乗者２０の手２２の動きを認識し、（ｉ）手２２の動きの特徴が、ノック動作に特有の特徴を示す場合に、搭乗者２０のノック動作を検出する。ノック動作検出部３２２は、同様の手順により、搭乗者２０の手２２の動き及び形状に基づいて、搭乗者２０のノック動作を検出してもよい。

フリック動作検出部３２４は、搭乗者２０のフリック動作を検出する。フリック動作検出部３２４は、フリック動作が検出されたことを示す情報を、機能割当部２３６に出力する。

フリック動作は、搭乗者２０の手２２が窓２２０の近傍の空間に位置する状態で、搭乗者２０が、手２２又は指で、窓２２０の開方向又は閉方向に、窓２２０を軽く払うような動作であればよく、その詳細は特に限定されない。フリック動作において、手２２の形状は、軽く開かれた形状であってよい。フリック動作中に、搭乗者２０の手２２と、窓２２０とが接触してもよく、搭乗者２０の手２２と、窓２２０とが接触しなくてもよい。フリック動作中に、搭乗者２０が物品を手２２に所持していてもよく、搭乗者２０が物品を手２２に所持していなくてもよい。

フリック動作検出部３２４は、フリック動作と、スワイプ動作とを区別してもよく、両者を区別しなくてもよい。スワイプ動作は、搭乗者２０の手２２が窓２２０の近傍の空間に位置する状態で、搭乗者２０が、手２２又は指を、窓２２０の開方向又は閉方向に長く滑らせるような動作であってよい。

状況認識部３４０は、搭乗者２０の状況を認識する。例えば、状況認識部３４０は、搭乗者２０の状況として、搭乗者２０が物品を手２２に所持しているか否かを判定する。例えば、状況認識部３４０は、搭乗者２０の状況として、搭乗者２０の手２２の周辺の空間に駐車チケット３０が存在するか否かを判定する。

本実施形態において、状況認識部３４０は、認識された搭乗者２０の状況を示す情報を、機能割当部２３６に出力する。状況認識部３４０は、搭乗者２０が物品を手２２に所持しているか否かを示す情報を、機能割当部２３６に出力してよい。状況認識部３４０は、搭乗者２０が手２２に所持している物品に関する情報を、機能割当部２３６に出力してよい。状況認識部３４０は、搭乗者２０が手２２に所持している物品が、特定の物品（例えば、駐車チケット３０である。）であるか否かを示す情報を、機能割当部２３６に出力してよい。状況認識部３４０は、搭乗者２０の手２２の周辺の空間に駐車チケット３０が存在するか否かを示す情報を、機能割当部２３６に出力してよい。

本実施形態において、所持判定部３４２は、搭乗者２０が撮像された画像に基づいて、搭乗者２０が物品を手２２に所持しているか否かを判定する。所持判定部３４２は、搭乗者２０が、搭乗者２０の手２２のうち、窓２２０の側に位置する手２２に物品を所持しているか否かを判定してよい。所持判定部３４２は、単一のカメラ１２０が搭乗者２０を撮像した画像に基づいて、搭乗者２０が物品を手２２に所持しているか否かを判定してもよく、複数のカメラ１２０が搭乗者２０を撮像した画像に基づいて、搭乗者２０が物品を手２２に所持しているか否かを判定してもよい。

一実施形態において、所持判定部３４２は、搭乗者２０が撮像された画像を解析して、車両１００の構成部品とは異なる特徴を有する物品が、搭乗者２０の手２２の近傍に検出されるか否かを判定する。搭乗者２０の手２２の近傍に、車両１００の構成部品以外の何らかの物品が検出された場合、所持判定部３４２は、搭乗者２０が物品を手２２に所持していると判定する。

他の実施形態において、所持判定部３４２は、搭乗者２０の手２２の形状が、予め定められた特徴を有するか否かを判定する。搭乗者２０の手２２の形状が、予め定められた特徴を有すると判定された場合、所持判定部３４２は、搭乗者２０が物品を手２２に所持していると判定する。例えば、所持判定部３４２は、搭乗者２０の手２２の形状を解析して、手２２が握られていると判定された場合、又は、手２２が何かを握っていると判定された場合に、所持判定部３４２は、搭乗者２０が物品を手２２に所持していると判定する。

本実施形態において、チケット検出部３４４は、搭乗者２０が撮像された画像に基づいて、駐車チケット３０が、搭乗者２０の手２２の近傍に存在するか否かを判定する。チケット検出部３４４は、搭乗者２０が撮像された画像に基づいて、搭乗者２０が駐車チケット３０を手２２に所持しているか否かを判定してもよい。チケット検出部３４４は、単一のカメラ１２０が搭乗者２０を撮像した画像に基づいて、駐車チケット３０が搭乗者２０の手２２の近傍に存在するか否かを判定してもよく、複数のカメラ１２０が搭乗者２０を撮像した画像に基づいて、駐車チケット３０が搭乗者２０の手２２の近傍に存在するか否かを判定してもよい。

ジェスチャ検出部３２０は、検出部の一例であってよい。ノック動作検出部３２２は、検出部の一例であってよい。フリック動作検出部３２４は、検出部の一例であってよい。状況認識部３４０は、第１判定部又は第２判定部の一例であってよい。所持判定部３４２は、第１判定部の一例であってよい。チケット検出部３４４は、第２判定部の一例であってよい。ノック動作は、第１身体動作の一例であってよい。フリック動作は、第２身体動作の一例であってよい。車両１００の構成部品とは異なる特徴を有する物品は、第１物品の一例であってよい。駐車チケット３０は、第２物品の一例であってよい。駐車チケット３０の特徴は、予め定められた特徴の一例であってよい。

図４は、機能割当ルール４００の一例を概略的に示す。図４を用いて、機能割当部２３６における機能割当処理、及び、機能実行部２３８における機能実行処理の一例が説明される。本実施形態において、機能割当ルール４００は、１以上のジェスチャ４２０と、各ジェスチャが検出されたときのユーザの状況４３０と、各ジェスチャに対して割り当てられる機能４４０とを対応付けて格納するデータテーブルであってよい。データテーブルは、１以上のレコードを含んでよい。各レコードは、各ジェスチャ及び各状況に対応する機能の種類を示す情報格納する。

上述されたとおり、機能割当部２３６は、ジェスチャ検出部３２０の検出結果に基づいて、機能実行部２３８が実行させる車両１００の機能を決定する。また、機能割当部２３６は、ジェスチャ検出部３２０の検出結果及び状況認識部３４０の判定結果に基づいて、機能実行部２３８が実行させる車両１００の機能を決定してもよい。

例えば、機能割当部２３６は、検出された搭乗者２０のジェスチャに対して割り当てられる車両１００の機能の種類を決定する。また、機能割当部２３６は、搭乗者２０の状況に応じて、検出された身体動作に対して割り当てられる車両１００の機能の種類を決定してもよい。

より具体的には、機能割当部２３６は、機能割当ルール４００を構成する１以上のレコードの中から、（ｉ）ジェスチャ４２０に格納されたジェスチャが、ジェスチャ検出部３２０が検出したジェスチャに合致し、且つ、（ｉｉ）ユーザの状況４３０に格納された搭乗者２０の状況が、状況認識部３４０が認識した搭乗者２０の状況に合致するレコードを抽出する。機能割当部２３６は、抽出されたレコードの機能４４０に格納された機能を、検出された身体動作に対して割り当てられる車両１００の機能として決定する。

これにより、機能実行部２３８は、ジェスチャ検出部３２０の検出結果に基づいて、車両１００が有する複数の機能のうちの何れかの機能を、機器に実行させることができる。また、機能実行部２３８は、ジェスチャ検出部３２０の検出結果、及び、状況認識部３４０の判定結果に基づいて、車両１００が有する複数の機能のうちの何れかの機能を、機器に実行させることができる。

一実施形態において、機能実行部２３８は、ノック動作検出部３２２の検出結果、及び、所持判定部３４２の判定結果に基づいて、車両１００が有する複数の機能のうちの何れかの機能を、機器に実行させることができる。他の実施形態において、機能実行部２３８は、ノック動作検出部３２２の検出結果、及び、チケット検出部３４４の判定結果に基づいて、車両１００が有する複数の機能のうちの何れかの機能を、機器に実行させることができる。

さらに他の実施形態において、機能実行部２３８は、ノック動作検出部３２２の検出結果、所持判定部３４２の判定結果、及び、チケット検出部３４４の判定結果に基づいて、車両１００が有する複数の機能のうちの何れかの機能を、機器に実行させることができる。さらに他の実施形態において、機能実行部２３８は、フリック動作検出部３２４の判定結果に基づいて、車両１００が有する複数の機能のうちの何れかの機能を、機器に実行させることができる。

図４を用いて、機能割当部２３６における機能割当処理が、より具体的に説明される。図４に示されるとおり、本実施形態によれば、（Ａ）ノック動作検出部３２２がノック動作を検出した場合において、（ａ−１）所持判定部３４２が、搭乗者２０が手２２に物品を所持していないと判定した場合、機能割当部２３６は、ノック動作に対して、ドア２１０の開閉機能を割り当てる。その結果、機能実行部２３８は、ドア開閉部２１２を制御して、ドア開閉部２１２にドア２１０の開動作又は閉動作を実行させる。

一方、（Ａ）ノック動作検出部３２２がノック動作を検出した場合において、（ａ−２）所持判定部３４２が、搭乗者２０が手２２に物品を所持していると判定した場合、機能割当部２３６は、ノック動作に対して、窓２２０の開閉機能を割り当てる。その結果、機能実行部２３８は、窓開閉部２２２を制御して、窓開閉部２２２に窓２２０の開動作又は閉動作を実行させる。

同様に、（Ａ）ノック動作検出部３２２がノック動作を検出した場合において、（ｂ）チケット検出部３４４が、駐車チケット３０が搭乗者２０の手２２の近傍に存在すると判定した場合、機能割当部２３６は、ノック動作に対して、窓２２０の開閉機能を割り当てる。その結果、機能実行部２３８は、窓開閉部２２２を制御して、窓開閉部２２２に窓２２０の開動作又は閉動作を実行させる。

所持判定部３４２における情報処理は、チケット検出部３４４における情報処理と比較して複雑になる場合がある。しかしながら、本実施形態によれば、少なくともノック動作に対して窓２２０の開閉機能を割り当てる工程において、所持判定部３４２の判定結果を利用する必要がない。これにより、画像解析処理が簡略化され得る。その結果、画像解析部２３４の負荷が減少したり、画像解析部２３４の解析精度が向上したりする。

また、例えば、搭乗者２０が手２２に鞄を所持している状態でノック動作をした場合には、ドア２１０が開閉される。一方、搭乗者２０が手２２に駐車チケット３０を所持している状態でノック動作をした場合には、窓２２０が開閉される。これにより、車両１００は、搭乗者２０の状況に応じて適切な動作を実行することができる。

また、図４に示されるとおり、本実施形態によれば、（Ｂ）フリック動作検出部３２４がフリック動作を検出した場合、機能割当部２３６は、フリック動作に対して、窓２２０の開閉機能を割り当てる。その結果、機能実行部２３８は、窓開閉部２２２を制御して、窓開閉部２２２に窓２２０の開動作又は閉動作を実行させる。本実施形態において、機能割当部２３６は、フリック動作に対して機能を割り当てるときに、状況認識部３４０の判定結果を利用しなくてもよい。

上述されたとおり、図４に関連して説明された実施形態によれば、ノック動作検出部３２２がノック動作に関する特徴を検出し、且つ、所持判定部３４２が、搭乗者２０が物品を所持していると判定した場合、又は、フリック動作検出部３２４がフリック動作に関する特徴を検出した場合、機能実行部２３８は、窓２２０の開閉機能を車両１００に実行させる。一方、ノック動作検出部３２２がノック動作に関する特徴を検出し、且つ、所持判定部３４２が、搭乗者２０が物品を所持していないと判定した場合、機能実行部２３８は、ドア２１０の開閉機能を車両１００に実行させる。

同様に、ノック動作検出部３２２がノック動作に関する特徴を検出し、且つ、チケット検出部３４４が、駐車チケット３０が搭乗者２０の手２２の近傍に存在すると判定した場合、又は、フリック動作検出部３２４がフリック動作に関する特徴を検出した場合、機能実行部２３８は、窓２２０の開閉機能を車両１００に実行させてよい。ノック動作検出部３２２がノック動作に関する特徴を検出し、且つ、チケット検出部３４４が、駐車チケット３０が搭乗者２０の手２２の近傍に存在しないと判定した場合、機能実行部２３８は、ドア２１０のの開閉機能を車両１００に実行させてよい。なお、この場合において、所持判定部３４２が、搭乗者２０が物品を所持していると判定したとき、機能実行部２３８は、窓２２０の開閉機能を車両１００に実行させてもよい。

図５は、車両制御部１１０における情報処理の一例を概略的に示す。本実施形態によれば、ステップ５１０（ステップが、Ｓと略記される場合がある。）において、画像データ取得部２３２が、カメラ１２０から、搭乗者２０が撮像された画像の画像データを取得する。また、ノック動作検出部３２２が、上記の画像データを解析して、搭乗者２０のノック動作が検出されるか否かを判定する。

搭乗者２０のノック動作が検出されない場合（Ｓ５１０のＮｏの場合）、Ｓ５１０の処理が繰り返される。一方、搭乗者２０のノック動作が検出された場合（Ｓ５１０のＹｅｓの場合）、Ｓ５２０において、所持判定部３４２が、上記の画像データを解析して、搭乗者２０が、窓２２０の側の手２２に車両部品以外の物品を所持しているか否かを判定する。また、Ｓ５３０において、チケット検出部３４４が、上記の画像データを解析して、駐車チケット３０が、搭乗者２０の窓２２０の側の手２２の近傍に存在するか否かを判定する。

所持判定部３４２により、搭乗者２０が、窓２２０の側の手２２に車両部品以外の物品を所持していると判定されなかった場合（Ｓ５２０のＮｏの場合）、Ｓ５２２において、機能割当部２３６が、搭乗者２０のノック動作に対して、ドア２１０の開閉機能を割り当てる。一方、所持判定部３４２により、搭乗者２０が、窓２２０の側の手２２に車両部品以外の物品を所持していると判定された場合（Ｓ５２０のＹｅｓの場合）、Ｓ５２４において、機能割当部２３６が、搭乗者２０のノック動作に対して、窓２２０の開閉機能を割り当てる。

チケット検出部３４４により、駐車チケット３０が、搭乗者２０の窓２２０の側の手２２の近傍に存在すると判定された場合（Ｓ５３０のＹｅｓの場合）、Ｓ５２４において、機能割当部２３６が、搭乗者２０のノック動作に対して、窓２２０の開閉機能を割り当てる。一方、チケット検出部３４４により、駐車チケット３０が、搭乗者２０の窓２２０の側の手２２の近傍に存在すると判定されなかった場合（Ｓ５３０のＮｏの場合）、Ｓ５４０において、所持判定部３４２が、上記の画像データを解析して、搭乗者２０が、窓２２０の側の手２２に車両部品以外の物品を所持しているか否かを判定する。なお、Ｓ５４０において、Ｓ５２０における判定結果が流用されてもよい。

所持判定部３４２により、搭乗者２０が、窓２２０の側の手２２に車両部品以外の物品を所持していると判定されなかった場合（Ｓ５４０のＮｏの場合）、Ｓ５４２において、機能割当部２３６が、搭乗者２０のノック動作に対して、ドア２１０の開閉機能を割り当てる。一方、所持判定部３４２により、搭乗者２０が、窓２２０の側の手２２に車両部品以外の物品を所持していると判定された場合（Ｓ５４０のＹｅｓの場合）、Ｓ５２４において、機能割当部２３６が、搭乗者２０のノック動作に対して、窓２２０の開閉機能を割り当てる。

図６は、機能割当ルール６００の一例を概略的に示す。図６を用いて、機能割当部２３６における機能割当処理、及び、機能実行部２３８における機能実行処理の一例が説明される。本実施形態において、機能割当ルール６００は、１以上のジェスチャ６２０と、各ジェスチャが検出されたときのユーザの状況６３０と、各ジェスチャに対して割り当てられる機能６４０とを対応付けて格納するデータテーブルであってよい。データテーブルは、１以上のレコードを含んでよい。各レコードは、各ジェスチャ及び各状況に対応する機能の種類を示す情報格納する。

機能割当ルール６００は、機能割当ルール４００と同様、機能割当部２３６における機能割当処理における判断基準として利用され得る。機能割当ルール６００は、ユーザが物品を手に所持していない場合において、前回のノック動作から所定期間が経過しているか否かに応じて、ノック動作に対して割り当てられる機能が異なる点で、機能割当ルール４００と相違する。また、機能割当ルール６００は、ユーザが物品を手に所持している場合において、当該所持物が特定の物品であるか否かに応じて、ノック動作に対して割り当てられる機能が異なる点で、機能割当ルール４００と相違する。上記の相違点を除いて、機能割当ルール６００は、機能割当ルール４００と同様の構成を有してよい。

図６に示されるとおり、本実施形態によれば、（Ａ）ノック動作検出部３２２がノック動作を検出した場合において、（ａ−１）所持判定部３４２が、搭乗者２０が手２２に物品を所持していないと判定した場合、例えば、所持判定部３４２が、前回、搭乗者２０のノック動作が検出された後、予め定められた期間が経過したか否かを判定する。所持判定部３４２は、前回、搭乗者２０のノック動作に対して窓２２０の開閉機能が割り当てられた後、予め定められた期間が経過したか否かを判定してもよい。

上記の予め定められた期間が経過したと判定された場合、機能割当部２３６は、ノック動作に対して、ドア２１０の開閉機能を割り当てる。一方、上記の予め定められた期間が経過していないと判定された場合、機能割当部２３６は、ノック動作に対して、窓２２０の開閉機能を割り当てる。この場合、搭乗者２０が駐車チケット３０を手２２に所持していない場合であっても、搭乗者２０は、ノック動作により窓２２０を開閉させることができる。これにより、例えば、搭乗者２０は、前回のノック動作において開けられた窓２２０を、今回のノック動作により閉じることができる。

また、本実施形態によれば、（Ａ）ノック動作検出部３２２がノック動作を検出した場合において、（ａ−２）所持判定部３４２が、搭乗者２０が手２２に物品を所持していると判定した場合、例えば、所持判定部３４２が、搭乗者２０の所持品が駐車チケット３０であるか否かを判定する。搭乗者２０の所持品が駐車チケット３０であると判定されなかった場合、機能割当部２３６は、ノック動作に対して、ドア２１０の開閉機能を割り当てる。一方、搭乗者２０の所持品が駐車チケット３０であると判定された場合、機能割当部２３６は、ノック動作に対して、窓２２０の開閉機能を割り当てる。

これにより、例えば、搭乗者２０が手２２に鞄を所持している状態でノック動作をした場合には、ドア２１０が開閉される。一方、搭乗者２０が手２２に駐車チケット３０を所持している状態でノック動作をした場合には、窓２２０が開閉される。その結果、車両１００は、搭乗者２０の状況に応じて適切な動作を実行することができる。

同様に、（Ａ）ノック動作検出部３２２がノック動作を検出した場合において、（ｂ）チケット検出部３４４が、駐車チケット３０が搭乗者２０の手２２の近傍に存在すると判定した場合、機能割当部２３６は、ノック動作に対して、窓２２０の開閉機能を割り当てる。また、（Ｂ）フリック動作検出部３２４がフリック動作を検出した場合、機能割当部２３６は、フリック動作に対して、窓２２０の開閉機能を割り当てる。

本実施形態においては、搭乗者２０のノック動作に対する基本機能としてドア２１０の開閉機能が割り当てられており、搭乗者２０の状況が特定の条件を満たす場合に、搭乗者２０のノック動作に対して窓２２０の開閉機能が割り当てられる場合を例として、車両制御部１１０の詳細が説明された。具体的には、搭乗者２０の状況として、搭乗者２０が手２２に物品を所持しているという条件が成立する場合、又は、搭乗者２０の手２２の近傍に駐車チケット３０が検出されるという条件が成立する場合に、搭乗者２０のノック動作に対して窓２２０の開閉機能が割り当てられた。しかしながら、車両制御部１１０は本実施形態に限定されない。

他の実施形態において、搭乗者２０の状況として、搭乗者２０の表情、視線などが特定の条件を満たす場合に、搭乗者２０のノック動作に対して窓２２０の開閉機能が割り当てられる。例えば、搭乗者２０が笑顔の状態でノック動作を実行した場合、当該ノック動作に対して窓２２０の開閉機能が割り当てられる。例えば、搭乗者２０がカメラ１２０に視線を合わせた状態でノック動作を実行した場合、当該ノック動作に対して窓２２０の開閉機能が割り当てられる。

本実施形態においては、搭乗者２０のノック動作又はフリック動作により窓２２０が全開又は全閉する場合を例として、車両制御部１１０の詳細が説明された。しかしながら、車両制御部１１０は本実施形態に限定されない。

他の実施形態において、車両制御部１１０は、搭乗者２０のノック動作におけるノックの回数により、窓２２０の開度又は開閉速度を調整してよい。また、車両制御部１１０は、搭乗者２０のフリック動作における手２２又は指の移動速度により、窓２２０の開度又は開閉速度を調整してよい。車両制御部１１０は、スワイプ動作における手２２又は指の移動距離により、窓２２０の開度又は開閉速度を調整してもよい。また、スワイプ動作時は動作開始してから止まった手２２又は指の高さを検出して、その高さまで窓を開ける、もしくは窓を閉めるといった制御を実行してもよい。

本実施形態においては、機能割当部２３６が、搭乗者２０のノック動作に対する車両１００の機能を割り当て、機能実行部２３８が、機能割当部２３６により割り当てられた機能を車両１００に実行させる場合を例として、車両制御部１１０の詳細が説明された。しかしながら、車両制御部１１０は本実施形態に限定されない。

他の実施形態において、機能実行部２３８が機能割当部２３６の機能の少なくとも一部を有してよい。この場合、例えば、機能実行部２３８が、画像解析部２３４の解析結果に基づいて、搭乗者２０のノック動作に対応する車両１００の機能を決定し、当該機能を車両１００に実行させる。

図７は、本発明の複数の態様が全体的又は部分的に具現化されてよいコンピュータ３０００の一例を示す。車両１００の一部は、コンピュータ３０００により実現されてよい。例えば、車両制御部１１０又はその一部が、コンピュータ３０００により実現される。

コンピュータ３０００にインストールされたプログラムは、コンピュータ３０００に、本発明の実施形態に係る装置に関連付けられるオペレーション又は当該装置の１又は複数の「部」として機能させ、又は当該オペレーション又は当該１又は複数の「部」を実行させることができ、及び／又はコンピュータ３０００に、本発明の実施形態に係るプロセス又は当該プロセスの段階を実行させることができる。そのようなプログラムは、コンピュータ３０００に、本明細書に記載のフローチャート及びブロック図のブロックのうちのいくつか又はすべてに関連付けられた特定のオペレーションを実行させるべく、ＣＰＵ３０１２によって実行されてよい。

本実施形態によるコンピュータ３０００は、ＣＰＵ３０１２、ＲＡＭ３０１４、グラフィックコントローラ３０１６、及びディスプレイデバイス３０１８を含み、それらはホストコントローラ３０１０によって相互に接続されている。コンピュータ３０００はまた、通信インターフェース３０２２、ハードディスクドライブ３０２４、ＤＶＤ−ＲＯＭドライブ３０２６、及びＩＣカードドライブのような入出力ユニットを含み、それらは入出力コントローラ３０２０を介してホストコントローラ３０１０に接続されている。コンピュータはまた、ＲＯＭ３０３０及びキーボード３０４２のようなレガシの入出力ユニットを含み、それらは入出力チップ３０４０を介して入出力コントローラ３０２０に接続されている。

ＣＰＵ３０１２は、ＲＯＭ３０３０及びＲＡＭ３０１４内に格納されたプログラムに従い動作し、それにより各ユニットを制御する。グラフィックコントローラ３０１６は、ＲＡＭ３０１４内に提供されるフレームバッファ等又はそれ自体の中に、ＣＰＵ３０１２によって生成されるイメージデータを取得し、イメージデータがディスプレイデバイス３０１８上に表示されるようにする。

通信インターフェース３０２２は、ネットワークを介して他の電子デバイスと通信する。ハードディスクドライブ３０２４は、コンピュータ３０００内のＣＰＵ３０１２によって使用されるプログラム及びデータを格納する。ＤＶＤ−ＲＯＭドライブ３０２６は、プログラム又はデータをＤＶＤ−ＲＯＭ３００１から読み取り、ハードディスクドライブ３０２４にＲＡＭ３０１４を介してプログラム又はデータを提供する。ＩＣカードドライブは、プログラム及びデータをＩＣカードから読み取り、及び／又はプログラム及びデータをＩＣカードに書き込む。

ＲＯＭ３０３０はその中に、アクティブ化時にコンピュータ３０００によって実行されるブートプログラム等、及び／又はコンピュータ３０００のハードウエアに依存するプログラムを格納する。入出力チップ３０４０はまた、様々な入出力ユニットをパラレルポート、シリアルポート、キーボードポート、マウスポート等を介して、入出力コントローラ３０２０に接続してよい。

プログラムが、ＤＶＤ−ＲＯＭ３００１又はＩＣカードのようなコンピュータ可読記憶媒体によって提供される。プログラムは、コンピュータ可読記憶媒体から読み取られ、コンピュータ可読記憶媒体の例でもあるハードディスクドライブ３０２４、ＲＡＭ３０１４、又はＲＯＭ３０３０にインストールされ、ＣＰＵ３０１２によって実行される。これらのプログラム内に記述される情報処理は、コンピュータ３０００に読み取られ、プログラムと、上記様々なタイプのハードウエアリソースとの間の連携をもたらす。装置又は方法が、コンピュータ３０００の使用に従い情報のオペレーション又は処理を実現することによって構成されてよい。

例えば、通信がコンピュータ３０００及び外部デバイス間で実行される場合、ＣＰＵ３０１２は、ＲＡＭ３０１４にロードされた通信プログラムを実行し、通信プログラムに記述された処理に基づいて、通信インターフェース３０２２に対し、通信処理を命令してよい。通信インターフェース３０２２は、ＣＰＵ３０１２の制御の下、ＲＡＭ３０１４、ハードディスクドライブ３０２４、ＤＶＤ−ＲＯＭ３００１、又はＩＣカードのような記録媒体内に提供される送信バッファ領域に格納された送信データを読み取り、読み取られた送信データをネットワークに送信し、又はネットワークから受信した受信データを記録媒体上に提供される受信バッファ領域等に書き込む。

また、ＣＰＵ３０１２は、ハードディスクドライブ３０２４、ＤＶＤ−ＲＯＭドライブ３０２６（ＤＶＤ−ＲＯＭ３００１）、ＩＣカード等のような外部記録媒体に格納されたファイル又はデータベースの全部又は必要な部分がＲＡＭ３０１４に読み取られるようにし、ＲＡＭ３０１４上のデータに対し様々なタイプの処理を実行してよい。ＣＰＵ３０１２は次に、処理されたデータを外部記録媒体にライトバックしてよい。

様々なタイプのプログラム、データ、テーブル、及びデータベースのような様々なタイプの情報が記録媒体に格納され、情報処理を受けてよい。ＣＰＵ３０１２は、ＲＡＭ３０１４から読み取られたデータに対し、本開示の随所に記載され、プログラムの命令シーケンスによって指定される様々なタイプのオペレーション、情報処理、条件判断、条件分岐、無条件分岐、情報の検索／置換等を含む、様々なタイプの処理を実行してよく、結果をＲＡＭ３０１４に対しライトバックする。また、ＣＰＵ３０１２は、記録媒体内のファイル、データベース等における情報を検索してよい。例えば、各々が第２の属性の属性値に関連付けられた第１の属性の属性値を有する複数のエントリが記録媒体内に格納される場合、ＣＰＵ３０１２は、当該複数のエントリの中から、第１の属性の属性値が指定されている条件に一致するエントリを検索し、当該エントリ内に格納された第２の属性の属性値を読み取り、それにより予め定められた条件を満たす第１の属性に関連付けられた第２の属性の属性値を取得してよい。

上で説明したプログラム又はソフトウエアモジュールは、コンピュータ３０００上又はコンピュータ３０００近傍のコンピュータ可読記憶媒体に格納されてよい。また、専用通信ネットワーク又はインターネットに接続されたサーバシステム内に提供されるハードディスク又はＲＡＭのような記録媒体が、コンピュータ可読記憶媒体として使用可能であり、それにより、上記のプログラムを、ネットワークを介してコンピュータ３０００に提供する。

上記実施形態におけるフローチャート及びブロック図におけるブロックは、オペレーションが実行されるプロセスの段階又はオペレーションを実行する役割を持つ装置の「部」を表わしてよい。特定の段階及び「部」が、専用回路、コンピュータ可読記憶媒体上に格納されるコンピュータ可読命令と共に供給されるプログラマブル回路、及び／又はコンピュータ可読記憶媒体上に格納されるコンピュータ可読命令と共に供給されるプロセッサによって実装されてよい。専用回路は、デジタル及び／又はアナログハードウェア回路を含んでよく、集積回路（ＩＣ）及び／又はディスクリート回路を含んでよい。プログラマブル回路は、例えば、フィールドプログラマブルゲートアレイ（ＦＰＧＡ）、及びプログラマブルロジックアレイ（ＰＬＡ）等のような、論理積、論理和、排他的論理和、否定論理積、否定論理和、及び他の論理演算、フリップフロップ、レジスタ、並びにメモリエレメントを含む、再構成可能なハードウェア回路を含んでよい。

コンピュータ可読記憶媒体は、適切なデバイスによって実行される命令を格納可能な任意の有形なデバイスを含んでよく、その結果、そこに格納される命令を有するコンピュータ可読記憶媒体は、フローチャート又はブロック図で指定されたオペレーションを実行するための手段を作成すべく実行され得る命令を含む、製品を備えることになる。コンピュータ可読記憶媒体の例としては、電子記憶媒体、磁気記憶媒体、光記憶媒体、電磁記憶媒体、半導体記憶媒体等が含まれてよい。コンピュータ可読記憶媒体のより具体的な例としては、フロッピー（登録商標）ディスク、ディスケット、ハードディスク、ランダムアクセスメモリ（ＲＡＭ）、リードオンリメモリ（ＲＯＭ）、消去可能プログラマブルリードオンリメモリ（ＥＰＲＯＭ又はフラッシュメモリ）、電気的消去可能プログラマブルリードオンリメモリ（ＥＥＰＲＯＭ）、静的ランダムアクセスメモリ（ＳＲＡＭ）、コンパクトディスクリードオンリメモリ（ＣＤ−ＲＯＭ）、デジタル多用途ディスク（ＤＶＤ）、ブルーレイ（登録商標）ディスク、メモリスティック、集積回路カード等が含まれてよい。

コンピュータ可読命令は、アセンブラ命令、命令セットアーキテクチャ（ＩＳＡ）命令、マシン命令、マシン依存命令、マイクロコード、ファームウェア命令、状態設定データ、又はＳｍａｌｌｔａｌｋ、ＪＡＶＡ（登録商標）、Ｃ＋＋等のようなオブジェクト指向プログラミング言語、及び「Ｃ」プログラミング言語又は同様のプログラミング言語のような従来の手続型プログラミング言語を含む、１又は複数のプログラミング言語の任意の組み合わせで記述されたソースコード又はオブジェクトコードのいずれかを含んでよい。

コンピュータ可読命令は、汎用コンピュータ、特殊目的のコンピュータ、若しくは他のプログラム可能なデータ処理装置のプロセッサ、又はプログラマブル回路が、フローチャート又はブロック図で指定されたオペレーションを実行するための手段を生成するために当該コンピュータ可読命令を実行すべく、ローカルに又はローカルエリアネットワーク（ＬＡＮ）、インターネット等のようなワイドエリアネットワーク（ＷＡＮ）を介して、汎用コンピュータ、特殊目的のコンピュータ、若しくは他のプログラム可能なデータ処理装置のプロセッサ、又はプログラマブル回路に提供されてよい。プロセッサの例としては、コンピュータプロセッサ、処理ユニット、マイクロプロセッサ、デジタル信号プロセッサ、コントローラ、マイクロコントローラ等を含む。

以上、本発明を実施の形態を用いて説明したが、本発明の技術的範囲は上記実施の形態に記載の範囲には限定されない。上記実施の形態に、多様な変更または改良を加えることが可能であることが当業者に明らかである。また、技術的に矛盾しない範囲において、特定の実施形態について説明した事項を、他の実施形態に適用することができる。また、各構成要素は、名称が同一で、参照符号が異なる他の構成要素と同様の特徴を有してもよい。その様な変更または改良を加えた形態も本発明の技術的範囲に含まれ得ることが、特許請求の範囲の記載から明らかである。

特許請求の範囲、明細書、および図面中において示した装置、システム、プログラム、および方法における動作、手順、ステップ、および段階等の各処理の実行順序は、特段「より前に」、「先立って」等と明示しておらず、また、前の処理の出力を後の処理で用いるのでない限り、任意の順序で実現しうることに留意すべきである。特許請求の範囲、明細書、および図面中の動作フローに関して、便宜上「まず、」、「次に、」等を用いて説明したとしても、この順で実施することが必須であることを意味するものではない。

２０ 搭乗者、２２ 手、３０ 駐車チケット、１００ 車両、１１０ 車両制御部、１２０ カメラ、２１０ ドア、２１２ ドア開閉部、２２０ 窓、２２２ 窓開閉部、２３２ 画像データ取得部、２３４ 画像解析部、２３６ 機能割当部、２３８ 機能実行部、３２０ ジェスチャ検出部、３２２ ノック動作検出部、３２４ フリック動作検出部、３４０ 状況認識部、３４２ 所持判定部、３４４ チケット検出部、４００ 機能割当ルール、４２０ ジェスチャ、４３０ 状況、４４０ 機能、６００ 機能割当ルール、６２０ ジェスチャ、６３０ 状況、６４０ 機能、３０００ コンピュータ、３００１ ＤＶＤ−ＲＯＭ、３０１０ ホストコントローラ、３０１２ ＣＰＵ、３０１４ ＲＡＭ、３０１６ グラフィックコントローラ、３０１８ ディスプレイデバイス、３０２０ 入出力コントローラ、３０２２ 通信インターフェース、３０２４ ハードディスクドライブ、３０２６ ＤＶＤ−ＲＯＭドライブ、３０３０ ＲＯＭ、３０４０ 入出力チップ、３０４２ キーボード

Claims (16)

1. 複数の機能を有する機器を制御する制御装置であって、
   前記機器のユーザが撮像された画像に基づいて、前記ユーザの身体動作に関する特徴を検出する検出部と、
   前記画像に基づいて、前記ユーザが物品を所持しているか否かを判定する第１判定部と、
   前記検出部の検出結果及び前記第１判定部の判定結果に基づいて、前記複数の機能のうちの何れかの機能を、前記機器に実行させる実行部と、
   を備える、制御装置。
2. 前記実行部は、
   （ａ）（ｉ）前記検出部が第１身体動作に関する特徴を検出し、且つ、（ｉｉ）前記第１判定部が、前記ユーザが前記物品を所持していると判定した場合、又は、（ｂ）前記検出部が、前記第１身体動作とは異なる第２身体動作に関する特徴を検出した場合、
   前記複数の機能のうちの第１機能を前記機器に実行させる、
   請求項１に記載の制御装置。
3. 前記実行部は、
   （ｉ）前記検出部が前記第１身体動作に関する特徴を検出し、且つ、（ｉｉ）前記第１判定部が、前記ユーザが前記物品を所持していないと判定した場合、
   前記複数の機能のうち、前記第１機能とは異なる第２機能を前記機器に実行させる、
   請求項２に記載の制御装置。
4. 前記実行部は、
   前記実行部が前記第１機能を前記機器に実行させた後、予め定められた期間内に、記検出部が第１身体動作に関する特徴を検出した場合、
   前記第１機能を前記機器に実行させる、
   請求項２又は請求項３に記載の制御装置。
5. 前記第１判定部は、
   前記機器の構成部品とは異なる特徴を有する第１物品が、前記ユーザの身体の特定の部位の近傍に検出されるか否かを判定し、
   前記第１物品が前記ユーザの前記特定の部位の近傍に検出されたと判定された場合に、前記ユーザが物品を所持していると判定する、
   請求項１から請求項４までの何れか一項に記載の制御装置。
6. 前記第１判定部は、
   前記ユーザの身体の特定の部位の形状が、予め定められた特徴を有するか否かを判定し、
   前記ユーザの前記特定の部位の形状が前記予め定められた特徴を有すると判定された場合に、前記ユーザが物品を所持していると判定する、
   請求項１から請求項４までの何れか一項に記載の制御装置。
7. 複数の機能を有する機器を制御する制御装置であって、
   前記機器のユーザが撮像された画像に基づいて、前記ユーザの身体動作に関する特徴を検出する検出部と、
   前記画像に基づいて、予め定められた特徴を有する第２物品が、前記ユーザの身体の特定の部位の近傍に存在するか否かを判定する第２判定部と、
   前記検出部の検出結果及び前記第２判定部の判定結果に基づいて、前記複数の機能のうちの何れかの機能を、前記機器に実行させる実行部と、
   を備える、制御装置。
8. 前記実行部は、
   （ａ）（ｉ）前記検出部が第１身体動作に関する特徴を検出し、且つ、（ｉｉ）前記第２判定部が、前記第２物品が前記ユーザの前記特定の部位の近傍に存在すると判定した場合、又は、（ｂ）前記検出部が、前記第１身体動作とは異なる第２身体動作に関する特徴を検出した場合、
   前記複数の機能のうちの第１機能を前記機器に実行させる、
   請求項７に記載の制御装置。
9. 前記実行部は、
   （ｉ）前記検出部が前記第１身体動作に関する特徴を検出し、且つ、（ｉｉ）前記第２判定部が、前記第２物品が前記ユーザの前記特定の部位の近傍に存在しないと判定した場合、
   前記複数の機能のうち、前記第１機能とは異なる第２機能を前記機器に実行させる、
   請求項８に記載の制御装置。
10. 前記実行部は、
    前記実行部が前記第１機能を前記機器に実行させた後、予め定められた期間内に、前記検出部が第１身体動作に関する特徴を検出した場合、
    前記第１機能を前記機器に実行させる、
    請求項８又は請求項９に記載の制御装置。
11. 前記機器は、開閉可能に構成された窓を有する移動体であり、
    前記第１機能は、前記窓を開ける機能又は前記窓を閉める機能である、
    請求項２又は請求項８に記載の制御装置。
12. 請求項１から請求項１１までの何れか一項に記載の制御装置と、
    複数の機能のそれぞれを実行する複数の機能部と、
    を備え、
    前記複数の機能部のそれぞれは、前記制御装置からの指示に基づいて、各機能部に割り当てられた機能を実行する、
    機器。
13. 前記機器のユーザを撮像する撮像部をさらに備える、
    請求項１２に記載の機器。
14. コンピュータを、請求項１から請求項１１までの何れか一項に記載の制御装置として機能させるためのプログラム。
15. 複数の機能を有する機器を制御する制御方法であって、
    前記機器のユーザが撮像された画像に基づいて、前記ユーザの身体動作に関する特徴を検出する検出段階と、
    前記画像に基づいて、前記ユーザが物品を所持しているか否かを判定する第１判定段階と、
    前記検出段階における検出結果及び前記第１判定段階における判定結果に基づいて、前記複数の機能のうちの何れかの機能を、前記機器に実行させる実行段階と、
    を有する、制御方法。
16. 複数の機能を有する機器を制御する制御方法であって、
    前記機器のユーザが撮像された画像に基づいて、前記ユーザの身体動作に関する特徴を検出する検出段階と、
    前記画像に基づいて、予め定められた特徴を有する第２物品が、前記ユーザの身体の特定の部位の近傍に存在するか否かを判定する第２判定段階と、
    前記検出段階における検出結果及び前記第２判定段階における判定結果に基づいて、前記複数の機能のうちの何れかの機能を、前記機器に実行させる実行段階と、
    を有する、制御方法。

Images