WO2021059642A1

WO2021059642A1 - 情報処理装置、制御方法、プログラム

Info

Publication number: WO2021059642A1
Application number: PCT/JP2020/025472
Authority: WO
Inventors: 英佑藤縄; 哲男池田; 真秀林; 晴彦矢田
Original assignee: ソニー株式会社
Priority date: 2019-09-25
Filing date: 2020-06-29
Publication date: 2021-04-01

Abstract

臭覚提示に関し、ＡＲ空間に対するユーザの没入感を高める。　本技術に係る情報処理装置は、実空間に対応する所定の位置に仮想的な匂い源を設定する設定部と、匂い源とユーザの鼻の位置との位置関係に基づいて、匂いの出力制御を行う制御部とを備えている。ユーザの鼻の位置と匂い源との位置関係に基づき匂いの出力制御を行うことで、匂い源から匂っているということを表現することが可能とされる。

Description

情報処理装置、制御方法、プログラム

　本技術は、仮想的な匂い源からの匂いをユーザに知覚させる際における匂いの出力制御を行う情報処理装置とその制御方法、及びプログラムの技術分野に関する。

　人工的に構築される仮想空間をユーザに知覚させるＶＲ（Virtual　Reality：仮想現実）技術が実用化されている。そして、近年では、ＶＲ技術を進展させたＡＲ（Augmented　Reality：拡張現実）技術の普及が進んでいる。ＡＲ技術は、実空間を部分的に改変することにより構築される拡張現実空間（ＡＲ空間）をユーザに提示する。例えば、ＡＲ技術では、仮想的に生成されるオブジェクト（仮想物体）が、実空間に向けられる撮像装置からの画像に重畳されて、画像に映る実空間にあたかも仮想物体が存在しているかのようなユーザ体験が提供される。或いは、ＡＲ技術としては、プロジェクタ装置により仮想物体の画像を実空間上に投影して、実空間に仮想物体が存在しているかのようなユーザ体験を提供するものもある。

　ＡＲ技術としては、視覚的なユーザ体験のほか、臭覚的なユーザ体験を提供することも考えられている。

　関連する先行技術として、下記特許文献１には、映像を見る複数のユーザの鼻の位置を検出し、それぞれのユーザに合わせてノズルを変形させて芳香出射を行うことで各ユーザに臭覚提示を行う技術が開示されている。

特開２００９－９０１５９号公報

　上記特許文献１に記載の技術は、ディスプレイ内の仮想物体を見る複数のユーザに匂いを知覚させる技術であって、各ユーザの鼻の位置を検出しているものの、仮想物体の位置は検出していない。
　このため、特許文献１の技術をＡＲ空間に適用しようとした場合には、対象とする匂いが、仮想物体（仮想的な匂い源）から匂っているということを表現することが困難となる。換言すれば、匂い源から匂いが伝達されてくるという実世界における現象を正確に表現することが困難とされ、ユーザのＡＲ空間への没入感を高めることが困難となる。

　本技術は上記事情に鑑み為されたものであり、臭覚提示に関し、ＡＲ空間に対するユーザの没入感を高めることを目的とする。

　本技術に係る情報処理装置は、実空間に対応する所定の位置に仮想的な匂い源を設定する設定部と、前記匂い源とユーザの鼻の位置との位置関係に基づいて、匂いの出力制御を行う制御部と、を備えるものである。
　上記のようにユーザの鼻の位置と匂い源との位置関係に基づき匂いの出力制御を行うことで、匂い源から匂っているということを表現することが可能とされる。

　上記した本技術に係る情報処理装置においては、前記制御部は、前記匂い源と前記鼻の位置との距離に応じて、前記匂いの強度を制御する構成とすることが考えられる。
　これにより、鼻の位置が匂い源の近くに位置している場合には匂いの強度を大きくする等、匂い源との距離に応じた適切な強度による匂いをユーザに知覚させることが可能となる。

　上記した本技術に係る情報処理装置においては、前記制御部は、前記鼻の位置と前記匂い源とを通過する直線上に前記匂いの提示位置を設定する構成とすることが考えられる。
　これにより、匂い源が存在する方向から鼻の位置に匂いを伝達することが可能とされる。

　上記した本技術に係る情報処理装置においては、前記制御部は、前記鼻の位置と前記匂い源の位置とに基づいて前記匂いの提示位置を設定し、前記提示位置に前記匂いを出力する制御を行う構成とすることが考えられる。
　これにより、匂い源から匂っているということを表現する上で適切とされる位置に匂いの提示を行うことが可能とされる。

　上記した本技術に係る情報処理装置においては、前記制御部は、前記提示位置に出力する匂いの強度を、前記提示位置と前記鼻の位置と前記匂い源との位置関係に応じて制御する構成とすることが考えられる。
　これにより、提示位置が匂い源とは異なる位置に設定される場合であっても、提示位置、鼻の位置、匂い源の三者の位置関係に基づいて適切な強度による匂いをユーザに知覚させることが可能とされる。

　上記した本技術に係る情報処理装置においては、前記制御部は、匂い提示装置が前記ユーザに匂いを提示することが可能な範囲である提示可能範囲内に前記匂い源が存在するか否かを判定した結果に基づいて、前記匂い提示装置による前記匂いの提示位置を設定する構成とすることが考えられる。
　これにより、匂い源が提示可能範囲内にある場合とない場合とで、それぞれ適切な匂いの提示位置を設定することが可能とされる。すなわち、提示可能範囲が狭いこと等に起因して匂い源が提示可能範囲外に位置されてしまう場合であっても、適切な匂いの出力制御を行うことが可能とされる。

　上記した本技術に係る情報処理装置においては、前記制御部は、前記提示可能範囲内に前記匂い源が存在しないと判定した場合は、前記鼻の位置と前記匂い源とを通過する直線が前記提示可能範囲と重複するか否かを判定した結果に基づいて、前記提示位置の設定を行う構成とすることが考えられる。
　これにより、匂い源が提示可能範囲内になく匂いの提示位置を匂い源の位置に設定できない場合であっても、鼻の位置と匂い源とを通過する直線が提示可能範囲と重複していれば、該直線上に提示位置を設定することが可能とされる。

　上記した本技術に係る情報処理装置においては、前記制御部は、前記直線が前記提示可能範囲と重複すると判定した場合は、前記提示可能範囲内における前記直線上となる位置に前記提示位置を設定する構成とすることが考えられる。
　これにより、匂い源が匂いの提示可能範囲外に位置する場合であっても、匂い源が存在する方向から鼻位置に匂いが伝達されるようにすることが可能とされる。

　上記した本技術に係る情報処理装置においては、前記制御部は、前記直線が前記提示可能範囲と重複しないと判定した場合は、前記提示可能範囲内における前記直線との距離を最小とする位置に前記提示位置を設定する構成とすることが考えられる。
　これにより、匂い源が匂いの提示可能範囲外に存在し且つ鼻の位置と匂い源とを通過する直線が提示可能範囲と重複しない場合には、提示可能範囲内において該直線にできるだけ近い位置に提示位置が設定される。

　上記した本技術に係る情報処理装置においては、前記制御部は、前記直線上における前記提示位置を条件に応じて変更する構成とすることが考えられる。
　これにより、所定の条件下においては直線上における鼻の位置に近い位置に提示位置を設定して匂い源からの匂いが知覚されるタイミングを早めたり、別の条件下では直線上における鼻の位置から遠い位置に提示位置を設定して匂い源からの匂いが知覚されるタイミングを遅めたりするといったことが可能とされる。

　上記した本技術に係る情報処理装置においては、前記制御部は、前記匂い源に対する前記ユーザの鼻の向きに応じて匂いの強度を制御する構成とすることが考えられる。
　実世界において、匂い源の方向は、ユーザが鼻の向きを変えながら匂いを嗅ぐことで特定可能とされるが、このとき、匂い源の方向は、匂いの強度が高い方向として知覚される。このため、上記のように匂い源に対する鼻の向きに応じて匂いの強度を制御することで、匂い源の方向をユーザに知覚させることが可能となる。

　上記した本技術に係る情報処理装置においては、前記制御部は、前記鼻位置が前記匂い源に対して定められた匂いの効果範囲内にあるか否かを判定した結果に基づいて匂いの出力制御を行う構成とすることが考えられる。
　これにより、鼻の位置が匂い源による匂いの効果範囲内に存在しない場合には匂いの出力が行われないようにすることが可能とされる。

　上記した本技術に係る情報処理装置においては、前記制御部は、前記匂い源からの匂いの提示期間内において、匂いの出力が間欠的に行われるように制御する構成とすることが考えられる。
　これにより、匂いの提示期間中に匂い提示装置の匂い出力動作を連続的に行う必要がなくなる。

　上記した本技術に係る情報処理装置においては、前記制御部は、前記ユーザによる前記匂い源に対する所定のジェスチャが検出されたことに応じて前記匂い源を複製する構成とすることが考えられる。
　これにより、例えば匂い源をタッチするジェスチャに応じて、タッチした指の位置に追従することの指示情報を対応付けた匂い源を複製したり、匂い源を手で扇ぐジェスチャに応じて、扇いだ方向に移動することの指示情報を対応付けた匂い源を複製するといったことが可能とされる。

　上記した本技術に係る情報処理装置においては、前記制御部は、前記ジェスチャの検出に応じて複製した匂い源の位置を、前記匂い源をタッチした前記ユーザの部位に追従させる構成とすることが考えられる。
　これにより、例えばユーザが匂い源をタッチした場合には、該匂い源をタッチしたユーザの部位に匂い源が複製され、該部位の動きに追従して該複製した匂い源も移動される。すなわち、匂い源をタッチした部位に該匂い源の匂いが移ることが再現される。

　上記した本技術に係る情報処理装置においては、前記制御部は、前記ユーザが前記匂い源を手で扇ぐジェスチャが検出されたことに応じて前記匂い源を複製し、該複製した匂い源を前記手で扇いだ方向に移動させる構成とすることが考えられる。
　これにより、匂い源を扇いだ際に扇いだ方向に匂いが移動することを再現可能となる。

　上記した本技術に係る情報処理装置においては、前記制御部は、前記ユーザによる所定のジェスチャが検出されたことに応じて、前記複製した匂い源についての匂いの提示を停止する構成とすることが考えられる。
　これにより、ユーザの意思に応じて、複製した匂い源についての匂いの提示を停止することが可能とされる。

　上記した本技術に係る情報処理装置においては、前記制御部は、前記匂い源として設定された実空間上の物体に重畳投影される画像の変化に応じて、提示装置に出力させる匂いの種類又は匂いの強度を変化させる構成とすることが考えられる。
　これにより、仮想的な匂い源としての物体の種類や状態の変化が視覚的に示されることに連動して、匂いの種類や強度を変化させることが可能とされる。

　また、本技術に係る制御方法は、実空間に対応する所定の位置に仮想的な匂い源を設定し、前記匂い源とユーザの鼻の位置との位置関係に基づいて、匂いの出力制御を行う制御方法である。
　このような制御方法によっても、上記した本技術に係る情報処理装置と同様の作用が得られる。

　また、本技術に係るプログラムは、コンピュータ装置が読み取り可能なプログラムであって、実空間に対応する所定の位置に仮想的な匂い源を設定し、前記匂い源とユーザの鼻の位置との位置関係に基づいて、匂いの出力制御を行う処理を、前記コンピュータ装置に実行させるプログラムである。
　このようなプログラムにより、上記した本技術に係る情報処理装置を実現することが可能となる。

実施形態としての情報処理装置を含んで構成されるＡＲシステムの構成例を示した図である。実施形態における手の管理情報の例を示した図である。実施形態における鼻の管理情報の例を示した図である。実施形態における物体の管理情報の例を示した図である。実施形態としてのＡＲシステムの具体的な形態の例を示した図である。実施形態としての匂い提示手法の第一例におけるＡＲシステムの模式図である。第一例における商品サンプルに対する投影画像の例を示した図である。第一例における距離に応じた匂いの強度変化の例を示した図である。タッチした指に匂いオブジェクトが複製されることの説明図である。指と鼻位置との距離に応じて匂いが提示されることの説明図である。指に香りが付着したことを表す投影画像の例を示した図である。匂いオブジェクトが複製された指を他人の顔に近づけた際の様子を示した図である。指の匂いを消す方法についての説明図である。迅速に香りを試したい場合に対応した匂いの提示手法の例を説明するための図である。実施形態としての匂い提示手法の第二例におけるＡＲシステムの模式図である。第二例における画像による演出の例を示した図である。第二例においてステーキの焼き方やソースの選択をする際の演出例の説明図である。第二例における焼き加減を選択するためのボタンの提示例を示した図である。第三例における画像投影と匂い提示の例を示した図である。第三例における調整操作子の例を示した図である。第二例や第三例における距離に応じた匂いの強度変化の例を示した図である。匂い発生物体を手で扇ぐジェスチャに応じた匂い提示の例を示した図である。匂い発生物体定義情報を模式的に表した図である。第一例の場合に対応した匂い発生物体定義情報の例を示した図である。第二例及び第三例の場合に対応した匂い発生物体定義情報の例を示した図である。匂いオブジェクト管理情報の例を示である。匂いオブジェクトの操作定義情報を例示した図である。オブジェクト生成部の処理を示したフローチャートである。匂いオブジェクト制御部の処理を示したフローチャートである。匂いオブジェクト更新部の処理を示したフローチャートである。匂い提示制御部の処理を示したフローチャートである。かき氷の味を変える匂い提示手法についての説明図である。匂い提示を利用した宝探しゲームに適用する場合のＡＲシステムの概要説明図である。図３３に示すシステムの動作例を説明するための図である。同じく、図３３に示すシステムの動作例を説明するための図である。第一変形例で用いる匂いオブジェクト管理情報の例を示した図である。第一変形例における匂い制御処理部が実行すべき処理手順の例を示したフローチャートである。匂い提示装置による匂いの提示可能範囲を模式的に表した図である。匂いオブジェクトが匂いの提示可能範囲内にある場合を例示した図である。鼻位置から匂いオブジェクトを通過する直線上に匂いの提示位置を設定する例を示した図である。鼻位置から匂いオブジェクトを通過する直線が匂いの提示可能範囲と重複しない場合を例示した図である。第二変形例における匂いの強度の計算手法を説明するための図である。鼻の向きに応じた匂いの強度の制御例を説明するための図である。同じく、鼻の向きに応じた匂いの強度の制御例を説明するための図である。第二変形例における情報処理装置が実行すべき処理手順の例を示したフローチャートである。複数のユーザに対し共通の匂いオブジェクトからの匂いを提示する場合における匂いの提示位置の決定手法についての説明図である。何れの匂い発生物体からの匂いが提示されているかを明示するための画像投影の例を示した図である。同じく、何れの匂い発生物体からの匂いが提示されているかを明示するための画像投影の例を示した図である。

　以下、添付図面を参照し、本技術に係る実施形態を次の順序で説明する。

＜１．実施形態としてのＡＲシステムの構成＞
＜２．実施形態としての匂い提示手法＞
（2-1．第一例）
（2-2．第二例）
（2-3．第三例）
＜３．定義情報及び管理情報について＞
＜４．処理手順＞
＜５．匂い提示の変形例＞
＜６．第一変形例＞
＜７．第二変形例＞
＜８．その他変形例＞
＜９．プログラム及び記憶媒体＞
＜１０．実施形態のまとめ＞
＜１１．本技術＞

＜１．実施形態としてのＡＲシステムの概要＞

　図１は、本技術に係る実施形態としての情報処理装置（匂い制御処理部１）を含んで構成されるＡＲ（Augmented　Reality：拡張現実）システム５０の構成例を示している。
　図示のようにＡＲシステム５０は、匂い制御処理部１、入力部２、認識処理部３、画像生成部４、画像出力部５、及び匂い提示装置６を備えている。
　入力部２は、イメージセンサ、デプスセンサ、タッチセンサなどを有し、実空間におけるユーザや物体の位置、及び姿勢や動きなどの状態を認識するための検出情報を得る。
　二次元の画像を取得することが可能なイメージセンサとしては、可視光に感度を有するセンサ、赤外光に感度を有するセンサなどを用いることができる。三次元情報を取得することが可能なデプスセンサとしては、ステレオカメラを用いたものやＴｏＦ（Time of Flight）方式やストラクチャードライト（構造化光）方式による測距用のセンサなどを用いることができる。なお、物体の位置や状態を取得するセンサとしては超音波センサなどを用いることもできる。
　なお、タッチセンサは、後述する画像出力部５が液晶パネルや有機ＥＬパネル等に情報表示を行うディスプレイ装置とされる場合において、該ディスプレイ装置の画面上にタッチパネルとして設けられる。

　認識処理部３は、入力部２で得られた検出情報を入力し、ユーザや物体の位置、及び姿勢や動きなどの状態を認識する演算処理装置として構成される。
　二次元画像を用いた認識処理としては、マーカ画像や、事前に認識対象の画像で学習した機械学習データベースを用いて、画像中の二次元の位置を特定するものが一般的である。三次元情報を用いた認識処理としては、認識対象の形状で学習した機械学習データベースを用いて、対象の三次元位置を特定するものが一般的である。

　本例において、認識処理部３は、ユーザの手や顔といった特定部位の認識機能を有する。特に、本例における認識処理部３は、ユーザの鼻の位置の認識機能を有している。
　ここで、鼻の認識は、入力部２の検出情報に含まれるノイズ等の影響により不能となる場合もある。そのような場合、ユーザの顔が認識されていれば、認識された顔の位置（例えば顔の中心位置）を鼻の位置とする。また、顔が認識できない場合には、鼻の位置は、認識されている他の部位から推定される位置とする。

　本明細書において、ユーザの鼻の位置としては、厳密に鼻そのものの位置を表すことに限らず、顔の位置等、鼻の位置としてみなすことのできる位置も包含する概念である。なお以下、「鼻の位置」は「鼻位置」と表記することもある。

　また、本例における認識処理部３は、ユーザによるジェスチャや操作入力についての認識を行う。
　本例において、ユーザによるジェスチャとしては、例えば実空間上における特定の物体をタッチするジェスチャや、手で扇ぐジェスチャ等を認識可能とされている。
　操作入力としては、後述する画像出力部５により表示させたボタン等の操作子の画像に触れることによる操作入力の有無を認識する。例えば、該操作子の画像を表示した位置にユーザの指が位置したか否かにより操作入力の有無を認識する。

　ここで、認識処理部３は、物体やユーザの手、鼻を認識した場合には、それぞれのオブジェクトを管理するための管理情報を生成する。
　図２から図４はそれらの管理情報の例を示しており、図２は手の管理情報、図３は鼻の管理情報、図４は物体の管理情報の例をそれぞれ示す。
　先ず前提として、ユーザの手、鼻や物体が認識された場合、認識処理部３は、それぞれ手ＩＤ、鼻ＩＤ、物体ＩＤを割り振る。それぞれのＩＤは認識された時点で割り振られ、対象を見失うまでは同じＩＤが割り振られる。

　図２に示す手の管理情報においては、手ＩＤに対し、位置と状態の情報が対応付けられている。手の位置の情報としては、認識した手における各指のうち特定の指（例えば人差し指等）の指先の位置が割り当てられる。なお、一つの手に対して複数の指先が認識される場合は、手の管理情報の子情報として同一フォーマットで指の管理情報を用意し、それぞれのＩＤを０，１，２、・・・としてまとめて管理する。
　状態の情報は、上述したジェスチャを含む、手の状態を識別するための情報である。本例では、該状態の情報は、後述する図２７の定義情報で定義された状態のうちから識別され、対応する番号情報が格納される。
　ここで、手の状態の認識は、例えば二次元画像や三次元画像から得られる手の姿勢情報を予め種類ごとに学習したモデルを用いて行うことができる。手の状態は各手について一つだけ割り振られる。

　図３に示す鼻の管理情報においては、鼻ＩＤに対し位置の情報が対応付けられる。
　なお、共通のユーザに属する手と鼻については、共通の手ＩＤ、鼻ＩＤを用いることもできる。

　図４に示す物体の管理情報においては、物体ＩＤに対し位置の情報、形状の情報、及び認識結果の情報が対応付けられる。
　形状の情報は、二次元での認識の場合は輪郭情報、三次元での認識の場合はメッシュ情報が用いられる。
　認識結果の情報は、物体認識処理の結果を表す情報であり、認識された物体の種別を表す情報を格納する。この認識結果の情報は、使用する認識方式によって異なる。例えば、一般画像認識を用いてピザと認識されたら”pizza”というテキストデータを格納する。或いは、限られたデータベースの中からクラスタリングする場合、それぞれのクラスタに整数ラベルを付け（例えば、0:pizza, 1:spaghetti, 2: dish, 3: folk, 4: knifeなど）、認識結果によって対応する整数を格納する。

　説明を図１に戻す。
　画像生成部４は、認識処理部３により認識された物体の種類や位置、状態の情報に基づき、ユーザに提示すべき仮想物体等のグラフィックスを含む画像を生成する。また、画像生成部４は、前述した操作用のボタン等のＧＵＩ（Graphical User Interface）を含む画像を生成することもできる。

　画像出力部５は、画像生成部４が生成した画像に基づき、ユーザに対してＡＲ空間を視覚的に知覚させるための画像情報を出力する。画像出力部５としては、例えば、実空間に対し画像を投影するプロジェクタ装置やディスプレイ装置などとして構成される。ここで、ディスプレイ装置としては、ヘッドマウントディスプレイ（シースルータイプ）としての形態も採り得る。

　匂い制御処理部１は、後述する実施形態としての匂い提示手法を実現するための処理を実行するものであり、例えばＣＰＵ（Central Processing Unit）、ＲＯＭ(Read Only Memory)、ＲＡＭ(Random Access Memory)等を有したマイクロコンピュータ等を備えている。
　匂い制御処理部１は、認識処理部３により認識された情報を基に処理を行い、処理結果に基づき匂い提示装置６による匂いの出力動作を制御する。
　本例では、匂い制御処理部１は画像生成部４と接続されており、一部の処理結果を画像生成部４と共有することが可能とされている。

　匂い制御処理部１は、図中に匂いオブジェクト生成部１１、匂いオブジェクト制御部１２、匂いオブジェクト更新部１３、匂い提示制御部１４として示す各種の機能を有している。
　匂いオブジェクト生成部１１は、認識処理部３により認識された情報と、後述する匂い発生物体定義情報とに基づき、匂いオブジェクトＯｓを生成する。
　ここで、匂いオブジェクトＯｓとは、仮想的な匂い源をオブジェクトとして扱うものであり、計算機上の仮想的な存在とされる。匂いオブジェクトＯｓは、対象とする匂い源の特性（例えば、匂いの種類や強度等）等を管理するための匂いオブジェクト管理情報（図２６参照）によって管理されるオブジェクトとされる。
　本例のＡＲシステム５０では、実空間上に配置された特定の実物体を仮想的な匂い源として扱う、すなわち、仮想的に匂いを発生する物体として扱うように定められている。匂いオブジェクト生成部１１は、認識処理部３による物体認識の結果、上述した匂い発生物体定義情報に定義されている認識条件を満たす物体がある場合は、該物体が匂い発生物体としての匂いオブジェクトＯｓとして管理されるように、該物体のＩＤ（物体ＩＤ）や位置の情報、及び匂い発生物体定義情報に格納される匂いの特性情報（匂いの種類や強度等）を記述した匂いオブジェクト管理情報を生成する。
　なお、匂い発生物体定義情報や匂いオブジェクト管理情報の詳細については後に改めて説明する。

　匂いオブジェクト制御部１２は、認識処理部３により認識されたユーザの手の情報を用いて、手の状態や手と匂いオブジェクトＯｓとの位置関係に応じて匂いオブジェクトＯｓの振る舞いを制御する。

　匂いオブジェクト更新部１３は、匂いオブジェクト管理情報の更新を行う。例えば、匂いオブジェクトＯｓの位置を更新したり、後述する持続時間（匂いの持続時間）が終了した匂いオブジェクトＯｓや、認識処理部３で認識されなくなった匂い発生物体についての匂いオブジェクトＯｓを破棄する処理等を行う。

　匂い提示制御部１４は、認識処理部３により認識されたユーザの鼻位置の情報と匂いオブジェクトＯｓの位置の情報とに基づき、匂い提示装置６が出力する匂いの強度や匂いの出力先となる座標（すなわち匂いの提示位置となる座標）を計算し、匂い提示装置６に出力する。

　なお、匂い制御処理部１が有する匂いオブジェクト生成部１１、匂いオブジェクト制御部１２、匂いオブジェクト更新部１３、及び匂い提示制御部１４についての具体的な処理内容については後に改めて説明する。

　匂い提示装置６は、設定された匂いの強度及び座標の情報に基づいて匂いを出力する。
　本例の匂い提示装置６は、匂いを指定された座標に対して出力する匂い出力部と、匂いの源となる物質である匂い源物質を貯留したカートリッジとをそれぞれ一つ以上持つ。
　ここで、匂い源物質は、使用する匂いの種類分だけカードリッジを用意するのが一般的である。匂いを提示する手法としては、例えば、匂い源物質を風圧や超音波に乗せて送出する手法を採ることができる。なお、匂いを近距離に提示する手法としては、匂い源物質を含む液体を霧状に噴射する手法も利用可能である。

　なお、図示による説明は省略するが、匂い提示装置６は、ＡＲシステム５０内に複数設けることもできる。例えば、匂いの提示対象となるユーザが複数人であることを想定したシステムにおいては、ユーザごとに匂い提示装置６を設けた構成とすることもできる。或いは、複数の匂い提示装置６のうち、匂いの提示対象とするユーザの位置に応じた匂い提示装置６を適宜選択しながら匂い提示を行う構成を採ることもできる。

　図５は、ＡＲシステム５０の具体的な形態の例を示している。
　図５Ａは、物体が配置されるテーブル等のステージの上方にペンダントライトやデスクスタンドライトのような上から画像を投影するプロジェクタ装置を備えたＡＲシステム５０の形態を例示したものである。この場合、ステージの上方にはプロジェクタ装置と入力部２の各種センサとが固定される。上方からプロジェクションするため、実物体へ情報を重畳することが可能である。また、この場合、匂い提示装置６が同様に物体の上方に配置されており、物体の付近で匂い提示が可能である。図ではテーブルの上となっているが、必ずしもテーブルの上でなくて良い。

　図５Ｂは、画像や匂いの提示を物体が存在するステージ面の下方から行うものである。画像の提示としては、裏側からプロジェクションするものや、ステージ面上に画面を有するディスプレイ装置を使うものなどがある。匂いの提示としては、匂い源物質を含む気体を出力する匂い提示装置６をステージ面の下方に設置し、ステージ面に開けた噴出口から匂いを提示する手法を挙げることができる。

　図５Ｃは、図５Ａのような上方から画像の投影及び匂いの出力を行う方式で且つ、画像の投影方向や匂いの出力方向をパン・チルト雲台などで可変としたものである。

　図５Ｄは、スマートフォン端末やタブレット端末等の携帯型端末に匂い提示装置６を接続した形態である。この場合は、携帯型端末が有するカメラによる撮像画像に仮想物体を表す画像を重畳させてＡＲ画像（ＡＲ空間を知覚させるための画像）を生成し、このＡＲ画像を携帯型端末が有するディスプレイ装置に表示する。

　なお、図５Ａや図５Ｂのようにテーブル等のステージを用いる形態の場合、該ステージ上に入力部２のタッチパネル（タッチセンサ）を設けた構成とすることもできる。

＜２．実施形態としての匂い提示手法＞
（2-1．第一例）

　以下、実施形態としての匂い提示手法の例について説明する。
　第一例は、香水の販促に好適な手法である。
　香水の売り場において、商品を購入したいと考えるユーザは、通常、商品のラベルを読んで種類を確認し、瓶を空けて自らの腕などに付けて香りを確かめるという手順を踏む。
　これに対し、第一例では、プロジェクションによって商品の香りのイメージを分かりやすく表示し、またユーザのタッチ等の手軽なインタラクションによってより簡単に香りを確かめることが可能となるようにする。

　図６に、第一例の場合におけるＡＲシステム５０の模式図を示す。香水瓶を模した商品のサンプルが配置されたステージの上部の天井にプロジェクタ装置（画像出力部５）、センサ（入力部２）、及び匂い提示装置６が配置されている。この場合、プロジェクタ装置及びセンサは、首振り機構を介して天井から支持され、画像投影方向やセンシング方向が可変とされている。匂い提示装置６は、例えば匂いの出力ノズルの向きが可変とされて匂いの出力方向が可変とされている。

　ステージ上の商品サンプルは、それぞれ香水瓶の形状をしているが、本例ではこれらサンプルは実際に匂いを発生するものではない。本例では、これらの商品サンプルを仮想的な匂い発生物体として扱う。
　第一例において、それぞれの商品サンプルは匂いの種類が異なる匂い発生物体として扱われるようにする。それぞれの商品サンプルの違いをＡＲシステム５０側（画像認識部４）で識別可能となるように、本例では、各商品サンプルとしてそれぞれ形状及び模様が異なるものを用いている。

　このとき、それぞれの商品サンプルには、例えば図７に例示するようにどのような匂いがするかを視覚的に表すための画像を投影する。具体的に、図７の例では、各香水の匂いのイメージカラーと匂いの名称を表す画像を投影している。
　このような画像投影を行うことで、それぞれの商品がどのような匂いがするかをユーザに把握させることができると共に、それらの商品に対して何らかのインタラクションが可能であることを認識させることができる。

　各商品サンプルがそれぞれ匂い発生物体として認識されることで、前述した匂いオブジェクトＯｓが商品サンプルごとに生成される。
　本例では、このように匂いオブジェクトＯｓが生成されたのみでは、ユーザに対する匂いの提示は行われない。本例では、匂い発生物体ごとに「効果範囲」が定められており、匂いオブジェクトＯｓとユーザの鼻位置との距離がこの効果範囲内である場合に、ユーザに対する匂いの提示が行われる。
　また、効果範囲内においては、匂いオブジェクトＯｓとユーザの鼻位置との距離に応じて、提示する匂いの強度を変化させる。

　図８は、このような距離に応じた匂いの強度変化の例を示した図である。
　図８Ｃに示すように鼻位置が匂いオブジェクトＯｓの効果範囲外にある状態では、匂い提示は行われず、図８Ｂ、図８ＡのようにオブジェクトＯｓに対して鼻位置が徐々に近づくことに応じて、提示する匂いの強度を徐々に強くする。

　また、第一例において、図９に示すようにユーザが手で直接商品サンプルをタッチすると、タッチした指に匂いオブジェクトＯｓが複製される。そのため、その指を自らの鼻位置に近づけると、その指と鼻位置との距離に応じて匂いが提示される（図１０参照）。具体的にこの場合も、距離が近くなるほど提示される匂いが強くなるようにする。
　このとき、指に香りが付着した、ということをユーザに知らせるため、図１１に例示するように、匂いオブジェクトＯｓが対応付けられた指に対して所定の画像を投影しても良い。

　また、図１２のように、匂いオブジェクトＯｓが複製された指を他人の顔に近づけた際も、その人に対して同様に匂いが提示される。また、匂いオブジェクトＯｓが複製された指を他人の顔に向けた場合に、該他人に匂いを提示してもよい。このように、自分だけでなく、周りの人に香りを直感的に共有することが可能である。

　ここで、指の匂いを消したいときは、図１３のように、複製元となった匂い発生物体とは別の物体（例えばテーブルなど）をタッチするか、手で扇ぐジェスチャを行う。これにより、手に複製された匂いオブジェクトＯｓが破棄され、無効化される。すなわち、それ以降は、指を鼻位置に近づけても匂いが提示されなくなる。

　また、迅速に香りを試したい場合には、図１４のように、商品サンプルをダブルタップする。これにより、ユーザの鼻位置の近傍位置に匂いオブジェクトＯｓが複製され、ユーザは迅速に香りを嗅ぐことができる。
　このとき、ダブルタップで生成された匂いオブジェクトＯｓは、その持続時間が比較的短時間（例えば、１秒等）に設定される。すなわち、ダブルタップで生成された匂いオブジェクトＯｓは比較的短時間で破棄される。
　上述した手に付いた匂いを嗅ぐ場合には、ユーザは手を動かすことで自らの意思で匂いを嗅ぐか嗅がないかの選択ができるが、図１４の提示例では鼻位置近傍に直接的に匂い提示が行われるため、ユーザはそのような選択ができない。このため、上記のように持続時間を短くすることが有効である。

（2-2．第二例）

　第二例は、レストラン等の飲食店でのメニュー選びに係る匂い提示手法の例である。本例では、メニュー選びにおいて、料理の状態を示す情報に基づいて提示する匂いを決定する。具体的には、料理を示す情報に基づいて、提示する匂いの強度や種類を変更してユーザに提示する。
　図１５は、第二例におけるＡＲシステム５０の模式図である。
　物体が配置されるテーブルの上方にプロジェクタ装置（画像出力部５）とセンサ（入力部２）が固定されており、テーブル上に画像を投影可能とされている。匂い提示装置６は、テーブルの上で食事が置かれる位置（座席の前方）の上方に、座席の数だけ設置されており、食事の位置に匂いを提示可能とされている。

　画像による演出としては、図１６に例示するように、皿の上に置かれた食品に画像を重畳投影し、食品の見た目を変えることが可能とされる。
　第二例では、このように食品に重畳投影される画像に合わせて、匂いを提示することで、注文するメニューのイメージを把握し易くしてメニュー選びの支援を行う。

　図１６では、リゾットのメニュー選択をする際の演出例の説明図である。
　この演出例では、客の前に置かれた皿の上に盛られた調理前の生米に対して画像を重畳投影して、リゾットの見た目を表現する。具体的に、図１６の例では、皿に盛られた生米に対しトマトの色や米のツヤの画像を投影して、トマトリゾットの見た目を表現したり、或いはバジルの色や米のツヤの画像を重畳投影してバジルリゾットの見た目を表現する例を示している。このとき、重畳する画像の切り替えは、時間経過に応じて行ったり、ユーザによる選択操作（ジェスチャでもよい）に応じて行うことができる。
　そして、トマトリゾット用の画像を投影する間には、匂い提示装置６によってトマトの匂いを提示し、バジルリゾット用の画像を投影する間にはバジルの匂いを提示する。
　このように演出することによって、ただ面白いだけでなく、客は単純にメニュー表から選ぶよりもリアリティをもってこれから提供される料理を確認することができるというメリットが有る。

　図１７は、ステーキの焼き方やソースの選択をする際の演出例の説明図である。
　先ず、客の前に調理前の生肉が置いた皿が置かれると、それに対して、焼いた肉のテクスチャを投影すると共に、焼いた肉の匂いを提示する。
　このとき、客の前には、例えば図１８に示すような形態により、レア、ミディアムレア、ウェルダン等の焼き加減を選択するためのボタンをプロジェクタ装置により投影し、ユーザが任意のボタンをタッチ操作すると、焼き加減に対応する画像、匂いに変化する。
　画像は、基本的に焼き加減が強いほど色が濃くなり、また匂い発生物体の匂いの強さのパラメータもそれに比例して大きくなる。

　焼き加減を決めたら、次にソース選択に移り、今度はソースの種類に対応するボタンを用意し、選択操作されたボタンに応じたソースの画像と匂いを提示する。

　上記のような演出例により、詳しくないと分かりにくいような調理方法の選択をインタラクティブかつリアリティを持って行うことができ、客にとって楽しく、また納得しながら行うことができるようになる。

　ここで、第二例においては、演出する料理（メニュー）の種類の分だけ匂い発生物体を定義する。具体的に、第二例では、少なくともリゾットとステーキという二種類の匂い発生物体を定義する。このとき、各匂い発生物体の認識は、皿の上に置かれた食材についてのマッチング結果のみでなく、皿の形状のマッチング結果も含めて行う。これにより、例えばメニュー表の写真に反応してしまうことの防止を図ることができる。

（2-3．第三例）

　第三例は、ユーザが実際に食べる料理に対して画像投影と匂いの提示を行うものである。
　図１９では、ミートソースパスタにパルメザンチーズの画像投影と匂い提示を行う例を示している。
　先ず、ユーザの前にミートソースパスタを置く。このミートソースパスタに対しパルメザンチーズのテクスチャを投影することで、ミートソースパスタにパルスメザンチーズがかけられた状態を視覚的に表現することができる。
　このとき、ユーザの前には、例えば図２０に示すような形態によりチーズの量の調整操作子（例えば、スライダーなど）としての画像を投影しておく。
　この調整操作子が操作されたことに応じ、投影されるチーズの量と、チーズの匂いの強さを変化させる。

　このようにすることで、実際はチーズが無い環境であってもチーズをかけた際の味を堪能できると共に、チーズの量を自由に調整して、味の変化を楽しむことが可能となる。

　ここで、第二例及び第三例においては、認識された料理の位置に匂いオブジェクトＯｓが生成され、匂いオブジェクトＯｓとユーザの鼻位置との距離に応じて匂いの強さが変化する。図２１は、このことを模式的に表している。

　また、第二例及び第三例において、ユーザは、他のユーザに対して匂いを届けたいと考えることもある。そのような場合は、図２２のように、匂い発生物体を手で扇ぐジェスチャを行う。これにより、扇いだ方向に所定の速度で移動する匂いオブジェクトＯｓが複製され、他のユーザに対し匂いを提示することができる。このとき、扇いだ方向側に存在するユーザに対する匂い提示は、該ユーザ側に配置された匂い提示装置６によって行われる。

　ここで、内部処理としては、匂い発生物体を手で扇ぐジェスチャが検出された場合に、該匂い発生物体の匂いオブジェクトＯｓが複製され、複製された匂いオブジェクトＯｓに扇いだ方向に対する速度が設定される。また、このとき持続時間を例えば５秒等とする。前述した匂いオブジェクト更新部１３でこの速度に応じて複製された匂いオブジェクトＯｓの位置が移動していき、扇いだ方向側に居るユーザに近づくにつれて、該ユーザに提示する匂いの強度が高められていく。その後、持続時間が経過すると、この匂いオブジェクトＯｓは破棄される。例えば、２人でなく、４人で囲んで座っている場合も、扇ぐ方向を変えることで、どのユーザに匂いを届けるかを選択できる。

＜３．匂い源の管理情報について＞

　図２３は、匂い発生物体定義情報を模式的に表している。
　各アプリケーションにおいて、それぞれ識別したい匂い発生物体ごとに、この定義情報を用意し用いることになる。
　図示のように匂い発生物体定義情報は、認識条件、匂いの種類、強さ、遷移可能性、効果範囲の各情報を対応付けた情報とされる。

　各項目の説明を以下に示す。
　認識条件は、前述した匂いオブジェクト生成部１１が、認識処理部３で認識された物体の中から該当する匂い発生物体としての物体を抽出するための条件である。例えば、前述した第一例の場合には、シトラスの商品サンプルであれば、該シトラスの商品サンプルの形状や模様を表す情報が認識条件の情報として格納される。

　匂いの種類は、仮想的な匂い発生物体から発生させる匂いの種類を表す情報である。それぞれの物体に対して必ずしも匂いの種類は単一でなくてもよく、複数あってもよい。

　強さは、それぞれの匂いの強度を表す情報である。例えば、同じ匂いの種類を用いるとしても、半分くらいの強度で匂いを知覚させたい場合は、この強さの値を半分にする。各匂いについて定義するので、匂いの種類と同じ数だけ要素を持つ。

　遷移可能性は、該当する匂い発生物体について生成する匂いオブジェクトＯｓが、タッチ操作によって遷移するかどうかを規定するフラグ情報である。この遷移可能性としてのフラグが立っていない場合は、基本的に匂いオブジェクトＯｓの位置は匂い発生物体の位置に留まることになり、該フラグが立っている場合は、上述した第一例のようにタッチ操作によって匂いオブジェクトＯｓをタッチした手の位置に複製したり、第二例及び第三例のように匂い発生物体を扇ぐジェスチャに応じて匂いオブジェクトＯｓを複製して動かすことが可能となる。

　効果範囲は、該当する匂い発生物体について生成される匂いオブジェクトＯｓについて、ユーザに対する匂い提示を行う範囲を定めたものである。前述のように、ユーザの鼻位置がこの効果範囲内にあることを条件として、ユーザに対する匂いの提示が行われる。

　図２４は、第一例の場合に対応した匂い発生物体定義情報の例を、図２５は、第二例及び第三例の場合に対応した匂い発生物体定義情報の例をそれぞれ示している。
　図２４では、シトラス系、グリーン系、フローラル系の三つの商品を扱うため、認識条件としては、各商品の模様や形状を表すための商品ごとの画像及び形状の情報が格納される。
　なお、図中において、強さや効果範囲の値についてはあくまで一例を示したものに過ぎず、これらの数値に限定されるものではない。図示の例では、香水の売場がパブリックな場であることを考慮して、効果範囲は１００ｍｍと比較的短めに設定してある。

　図２５では、少なくともリゾット、生肉、焼いた肉、及びミートソースパスタの識別を可能とするために、認識条件としては、生米の画像と該生米が置かれる皿の形状を表す情報、生肉の画像と該生肉が置かれる皿の形状を表す情報、焼いた肉（生肉に焼き加減を表す画像を投影した状態）の画像と該肉が置かれる皿の形状を表す情報、ミートソースパスタの画像と該パスタが盛られる皿の形状を表す情報がそれぞれ格納される。
　生米に対する匂いの種類の情報としては、バジル、トマトなどの情報が格納されている。前述のように、これらバジルやトマトの匂いの切り替えは、ユーザ操作などに応じて行われる。また、生米に対する強さの情報としては、バジル、トマト等の匂いの種類ごとに対応する値が格納されている。

　生肉に対する匂いの種類の情報としては、焼いた肉の情報が格納されている。
　ここで、前述の例のように焼き加減に応じて匂いの強度を変化させる場合には、生肉に対する強さの情報として焼き加減ごとの強さの値を格納しておく。

　焼いた肉に対する匂いの種類の情報としては、わさび醤油やグレービーソース等の各ソースの匂いを表す情報が格納されている。また、焼いた肉に対する強さの情報としては、これらの匂いの種類ごとに対応する値が格納されている。

　ミートソースパスタに対する匂いの種類の情報としては、チーズの匂いを表す情報が格納されている。

　なお、本例では、料理に関する効果範囲の値としては図示のように５００ｍｍと第一例の場合よりも広くしている。

　図２６は、匂いオブジェクトＯｓを管理するための匂いオブジェクト管理情報の例を示している。
　匂いオブジェクトＯｓは、同時に複数個存在し得る。匂いオブジェクト管理情報は、例えば、可変配列などで管理される。
　図示のように匂いオブジェクト管理情報は、匂いの種類、物体ＩＤ、手ＩＤ、位置、速度、強さ、遷移可能性、効果範囲、及び持続時間の各情報が対応付けられる情報とされる。

　ここで、匂いオブジェクトＯｓは、匂い発生物体から生成されるため、匂いの種類、遷移可能性、効果範囲、及び強さについては、対応する匂い発生物体定義情報からそのまま引き継がれる。

　物体ＩＤは、当該匂いオブジェクト管理情報が匂い発生物体を対象として生成される場合において、対象とする匂い発生物体の物体ＩＤが格納される。
　ここで、第一例の場合のように匂い発生物体に対するタッチ操作に伴いタッチした指に匂いオブジェクトＯｓを複製する場合に生成するオブジェクト管理情報では、物体ＩＤは格納されない。この場合に生成されるオブジェクト管理情報には、手ＩＤの情報として、タッチした指に対応する手ＩＤが格納される。

　位置の情報は、当該匂いオブジェクト管理情報が匂い発生物体を対象として生成される場合には、対象とする匂い発生物体の位置の情報が格納される。当該匂いオブジェクト管理情報が匂い発生物体に対するタッチ操作に伴い生成される場合、位置の情報としてはタッチした指に対応する手の位置の情報が格納される。また、当該匂いオブジェクト管理情報が扇ぐジェスチャに伴い生成される場合、位置の情報は匂いオブジェクトＯｓの移動速度に応じて逐次更新される。

　速度の情報は、当該匂いオブジェクト管理情報が扇ぐジェスチャに伴い生成される場合において、匂いオブジェクトＯｓの移動速度を表す情報として格納される。この速度については固定値を用いてもよいし、扇ぐ速度等に応じて可変とすることもできる。

　図２７は、匂いオブジェクトの操作定義情報を例示している。
　この操作定義情報は、認識処理部３が認識する手の状態ごとに、匂いオブジェクト制御部１２が行うべき匂いオブジェクトＯｓへの操作内容を定義した情報である。
　前述のように手の状態は、認識処理部３が生成する手の管理情報（図２参照）で管理され、認識された状態は番号情報で表される。番号０は「ホバー状態」、番号１は「タッチ」、番号２は「ダブルタップ」、番号３は「扇ぐ」である。番号０の「ホバー状態」は、手がどこにも触れず浮いており且つ他の番号（１～３）の何れの状態にも該当しない状態である。番号１の「タッチ」は、手が匂い発生物体に１度触れる状態、番号２の「ダブルタップ」は手が匂い発生物体に対し所定時間内に２度触れる状態を意味する。番号３の「扇ぐ」は、手で匂い発生物体を扇ぐ状態を意味する。

　操作定義情報では、これらの各状態に対して匂いオブジェクト制御部１２が行うべき匂いオブジェクトＯｓへの操作内容を表す情報が格納されている。「ホバー」に対する操作内容は、「何もしない」である。「タップ」に対する操作内容は、匂いオブジェクトＯｓを複製し、タッチした手の手ＩＤを格納し、遷移可能性を「無し」にするという内容である。但し、既に同じ手ＩＤをもつ匂いオブジェクトＯｓが存在する場合や、タッチした匂い発生物体についての匂いオブジェクトＯｓが遷移可能性「無し」の場合には、匂いオブジェクトＯｓの複製は行わない。
　「ダブルタップ」に対する操作内容は、匂いオブジェクトＯｓを複製し、位置の情報としてダブルタップした手と同じＩＤによる鼻の位置を格納すると共に、持続時間の情報として所定の時間を表す情報を格納するという内容である。
　「扇ぐ」の操作内容は、匂いオブジェクトＯｓを複製し、速度の情報を格納すると共に、遷移可能性を「無し」にするという内容である。このとき、持続時間については例えばアプリケーションごとに予め定められた所定の時間の情報を格納する。また、このとき、他に同じ手ＩＤが格納された匂いオブジェクトＯｓが存在している場合には、該匂いオブジェクトＯｓを破棄する。これにより、同じ手によって扇ぐ動作が複数回行われた場合において、扇いだ方向に移動する匂いオブジェクトＯｓとしては、既存の匂いオブジェクトＯｓが破棄される一方で、新たな匂いオブジェクトＯｓが生成されることになる。なお、他に同じ手ＩＤが格納された匂いオブジェクトＯｓが存在している場合には、「扇ぐ」ジェスチャが検出されても、匂いオブジェクトを複製しないという手法を採ることもできる。

＜４．処理手順＞

　図２８から図３１のフローチャートを参照して、実施形態としての匂い提示手法を実現するために実行すべき具体的な処理手順の例を説明する。
　なお、図２８から図３１に示す処理は、匂い制御処理部１のＣＰＵが前述したＲＯＭ等の所定の記憶装置に記憶されたプログラムに基づき実行するものである。

　図２８は、匂い制御処理部１（ＣＰＵ）が前述した匂いオブジェクト生成部１１として実行する処理を示したフローチャートである。
　先ず、匂い制御処理部１はステップＳ１０１で、認識された物体から匂い発生物体を抽出する。すなわち、認識処理部３が認識物体ごとに生成する物体の管理情報（図４参照）と、図２３から図２５で説明した匂い発生物体定義情報とに基づき、認識処理部３が認識した物体から、匂い発生物体定義情報で定義される認識条件に合致する物体を匂い発生物体として抽出する。

　ステップＳ１０１で匂い発生物体を抽出したことに応じ、匂い制御処理部１はループ処理ＬＰ１により、全ての匂い発生物体についてステップＳ１０２以降の処理を繰り返す。
　ステップＳ１０２で匂い制御処理部１は、匂い発生物体に対応する匂いオブジェクトＯｓが存在するか否かを判定する。すなわち、処理対象としている匂い発生物体の物体ＩＤと同一の物体ＩＤが匂いオブジェクト管理情報に格納された匂いオブジェクトＯｓが存在するか否かを判定する。

　ステップＳ１０２において、匂い発生物体に対応する匂いオブジェクトＯｓが存在しないと判定した場合、匂い制御処理部１はステップＳ１０３に進んで匂いオブジェクトＯｓを生成する。すなわち、処理対象としている匂い発生物体の定義情報に格納された匂いの種類、遷移可能性、効果範囲、及び強さの情報を引き継ぐと共に、物体ＩＤとして処理対象としている匂い発生物体の物体ＩＤを格納した匂いオブジェクト管理情報を生成する。このとき、新たに生成する匂いオブジェクト管理情報における持続時間の情報としては、例えばアプリケーションごとに予め定められた所定の時間を表す情報を格納する。
　一方、ステップＳ１０２において匂い発生物体に対応する匂いオブジェクトＯｓが存在すると判定した場合、匂い制御処理部１はステップＳ１０４に進んで匂いオブジェクトＯｓを取得する。すなわち、物理ＩＤが一致する既存の匂いオブジェクト管理情報がある場合には、該匂いオブジェクト管理情報を取得する。

　ステップＳ１０３又はＳ１０４の処理を実行したことに応じ、匂い制御処理部１はステップＳ１０５に処理を進める。ステップＳ１０５で匂い制御処理部１は、匂いオブジェクトＯｓのパラメータを更新する処理として、ステップＳ１０３又はＳ１０４で得た匂いオブジェクト管理情報における位置の情報を、処理対象としている匂い発生物体の位置の情報に更新する処理を行う。

　図２９は、匂い制御処理部１が前述した匂いオブジェクト制御部１２として実行する処理を示したフローチャートである。
　ステップＳ２０１で匂い制御処理部１は、ユーザの手を抽出する。すなわち、認識処理部３が生成する手の管理情報（図２参照）を取得する。

　ステップＳ２０１の処理を実行したことに応じ、匂い制御処理部１はループ処理ＬＰ２により、抽出した全ての手についてループ処理ＬＰ３を実行する。
　ループ処理ＬＰ３では、ステップＳ２０２以降の処理を全ての匂いオブジェクトＯｓについて繰り返し実行する。

　ステップＳ２０２で匂い制御処理部１は、手のＩＤと匂いオブジェクトＯｓの手ＩＤが一致しているか否かを判定する。すなわち、処理対象としている手に対応付けられた手ＩＤと、処理対象としている匂いオブジェクトＯｓについての匂いオブジェクト管理情報における手ＩＤとが一致しているか否かを判定する。

　手のＩＤと匂いオブジェクトＯｓの手ＩＤが一致していると判定した場合、匂い制御処理部１はステップＳ２０３に進み、匂いオブジェクトＯｓの位置を手の位置に更新する。すなわち、処理対象としている匂いオブジェクトＯｓについての匂いオブジェクト管理情報における位置の情報を、処理対象としている手の位置の情報に更新する。これにより、手ＩＤの情報が格納された匂いオブジェクトＯｓ、すなわち匂い発生物体をタッチしたことで複製された匂いオブジェクトＯｓの位置が、タッチした手の位置に更新される。

　一方、ステップＳ２０２で手のＩＤと匂いオブジェクトＯｓの手ＩＤが一致していないと判定した場合、匂い制御処理部１はステップＳ２０４に進んで手と匂いオブジェクトＯｓの距離が近いか否かを判定する。具体的には、手と匂いオブジェクトＯｓの距離が、匂いオブジェクトＯｓの効果範囲内か否かを判定する。

　手と匂いオブジェクトＯｓの距離が匂いオブジェクトＯｓの効果範囲内であり、手と匂いオブジェクトＯｓの距離が近いとの判定結果を得た場合、匂い制御処理部１はステップＳ２０５に進んで匂いオブジェクトＯｓを操作する処理を行う。すなわち、処理対象としている手の管理情報に格納される状態の情報と、図２７に示した操作定義情報とに基づき、匂いオブジェクトＯｓを操作する処理を行う。例えば、ホバーの場合は何らの操作も行わない。或いは、ダブルタップの場合は、匂いオブジェクトＯｓを複製し、位置の情報としてダブルタップした手と同じＩＤによる鼻の位置を格納すると共に持続時間の情報として所定の時間を表す情報を格納するといったように、手の管理情報から特定される手の状態に対し定義された内容の操作を行う。
　なお、第一例の図１３で例示したように手で扇ぐジェスチャに応じて匂いオブジェクトＯｓを破棄する場合には、操作定義情報に該当する情報を格納しておくことで実現する。

　一方、ステップＳ２０４において手と匂いオブジェクトＯｓの距離が近くないとの判定結果を得た場合、匂い制御処理部１はループ処理ＬＰ３による１回分のループ処理を終える。なお、匂い制御処理部１は、ステップＳ２０３又はＳ２０５の処理を実行した場合にもループ処理ＬＰ３による１回分のループ処理を終える。

　図３０は、匂い制御処理部１が前述した匂いオブジェクト更新部１３として実行する処理を示したフローチャートである。
　ステップＳ３０１で匂い制御処理部１は、前フレームからの匂いオブジェクトＯｓを取得する。ここで言うフレームとは、匂い制御処理部１が図２８から図３１の各処理を繰り返し実行する上での各処理の実行周期を意味するものである。ステップＳ３０１の処理は、現在のフレームの直前フレームにおいて存在している匂いオブジェクトＯｓ（匂いオブジェクト管理情報）を取得する処理となる。

　ステップＳ３０１の処理を実行したことに応じ、匂い制御処理部１はループ処理ＬＰ４により全ての匂いオブジェクトＯｓについてステップＳ３０２以降の処理を繰り返し実行する。
　ステップＳ３０２で匂い制御処理部１は、「現在時刻－生成時刻≦持続時間」であるか否かを判定する。ここで、生成時刻とは、処理対象としている匂いオブジェクトＯｓを生成した時刻であり、匂い制御処理部１が管理している情報である。ステップＳ３０２の処理は、生成時刻から現在時刻までの経過時間が、処理対象としている匂いオブジェクトＯｓの持続時間以内であるか否かを判定する処理となる。

　ステップＳ３０２において、「現在時刻－生成時刻≦持続時間」である（持続時間以内である）と判定した場合、匂い制御処理部１はステップＳ３０３に進んで匂いオブジェクトＯｓの位置を速度に応じて更新する。ここで、ステップＳ３０３の処理では、匂いオブジェクト管理情報に速度の情報が格納されていない場合には、位置の更新は行わない。

　一方、ステップＳ３０２において「現在時刻－生成時刻≦持続時間」である（持続時間をオーバーしている）と判定した場合、匂い制御処理部１はステップＳ３０３に進んで匂いオブジェクトＯｓを破棄する。

　図３１は、匂い制御処理部１が前述した匂い提示制御部１４として実行する処理を示したフローチャートである。
　ステップＳ４０１で匂い制御処理部１は、ユーザの鼻位置を抽出する。すなわち、認識処理部３が生成する鼻の管理情報（図３参照）で管理されている全ての鼻位置を取得する。

　ステップＳ４０１の処理を実行したことに応じ、匂い制御処理部１はループ処理ＬＰ５により、抽出した全ての鼻位置についてループ処理ＬＰ６を実行する。
　ループ処理ＬＰ６では、ステップＳ４０２以降の処理を全ての匂いオブジェクトＯｓについて繰り返し実行する。

　ステップＳ４０２で匂い制御処理部１は、鼻位置と匂いオブジェクトＯｓの距離が効果範囲内か否かを判定する。すなわち、処理対象としている鼻位置と、処理対象としている匂いオブジェクトＯｓの位置との離間距離が、該匂いオブジェクトＯｓの管理情報に格納された効果範囲の情報が示す値以内であるか否かを判定する。
　鼻位置と匂いオブジェクトＯｓの距離が効果範囲内でなければ、匂い制御処理部１はループ処理ＬＰ６による１回分のループ処理を終える。すなわち、匂いオブジェクトＯｓの効果範囲内でない鼻位置については、該匂いオブジェクトＯｓに係る匂いの提示は行われない。

　一方、ステップＳ４０２で鼻位置と匂いオブジェクトＯｓの距離が効果範囲内であると判定した場合、匂い制御処理部１はステップＳ４０３に進んで鼻位置と匂いオブジェクトＯｓの位置関係に応じて匂いを提示するための処理を行い、ループ処理ＬＰ６による１回分のループ処理を終える。
　ここで、ステップＳ４０３の処理では、鼻位置と匂いオブジェクトＯｓの位置に応じて出力する匂いの強度を決定する。具体的には、鼻位置と匂いオブジェクトＯｓとの距離が近いほど、匂いの強度が高まるようにする。ここで、強度を決定する上では、匂いオブジェクト管理情報に格納された強度の値を基礎とする。
　また、本例では、匂いの提示位置（匂いの出力先となる位置）は、匂いオブジェクトＯｓの位置とする。さらに、匂い提示装置６を複数用いる場合には、設定した匂いの提示位置に対して最も近い位置の匂い提示装置６を制御対象の匂い提示装置６として選択する。
　ステップＳ４０３の処理では、決定した匂いの提示位置に、決定した強度による匂いが出力されるように、制御対象とする匂い提示装置６に指示を行う。

　また、ステップＳ４０３の処理では、匂い提示装置６に対し、匂いオブジェクトＯｓに応じた種類の匂いを出力させる指示を行う。例えば、先に説明した第一例や第三例としての提示手法の場合には、匂いオブジェクト管理情報には匂いの種類が一つのみ対応づけられることになるため（図２４、図２５を参照）、ステップＳ４０３の処理では、対象としている匂いオブジェクトＯｓの管理情報に格納されている匂いの種類の情報を指示すればよい。
　これに対し、第二例としての提示手法の場合には、匂いオブジェクト管理情報における匂いの種類の情報として例えばバジル／トマトやわさび醤油／グレービーソース等、複数の情報が格納されることになる。前述のように、これら匂いの種類の切り替えは、ユーザによる選択操作等の所定の切り替え条件に応じて切り替えられるべきものであり、ステップＳ４０３の処理では、匂いの出力対象とされる匂いオブジェクトＯｓの管理情報に格納された複数の匂いの種類の情報のうち、このような切り替え条件に応じて選択した匂いの種類の情報を制御対象とする匂い提示装置６に指示する。これにより、第二例で説明したようなトマトリゾットの匂いからバジルリゾットの匂いへの切り替えや、ステーキのソースの匂いの切り替えを実現することができる。

＜５．匂い提示の変形例＞

　ここで、前述した第三例に似た例として、かき氷の味を変える匂い提示手法を挙げることができる。図３２は、その説明図である。
　具体的には、かき氷を食するユーザに対し、提示する匂いの種類を例えばイチゴ、メロン、マンゴー、・・・のように順次切り替えていく。このとき、例えばかき氷の形状の認識結果を用いてユーザの食べ進み具合を判断し、例えば１／４等の所定量を食べる終えるごとに自動的に提示する匂いの種類を切り替えることも可能である。

　また、スマートフォンのＡＲと匂い提示を組み合わせた以下のような宝探しゲームを実現することも可能である。
　図３３にシステムの概要説明図を示す。
　この場合のＡＲシステム５０はスマートフォンを用いた形態とされ、該スマートフォンに小型の匂い提示装置６が装着されている。この匂い提示装置６は、スマートフォンの画面に対向する側に匂いを出力することが可能とされている。
　また、スマートフォンのアプリでは、カメラ画像がプレビューされており、マーカのついた仮想宝箱としての物体を写すと、該物体に対しＡＲ画像が重畳される。中身は見た目だけではわからないが、近づいていくと匂い提示装置６から匂いが提示されて、中身が何であるかの推定が可能となり、仮想宝箱を開けるか開けないかの判断材料とすることができる。

　図３４、図３５を参照し、具体的な動作例を説明する。
　図３４に示すような「Ａ」のマーカのついた物体に火薬の匂いを、図３５に示すような「Ｂ」のマーカのついた物体に金属の匂い（コインの匂い）を割り当てる。効果範囲は広めに１０００ｍｍなどとする。「Ａ」の物体に近づくと火薬の匂いが、「Ｂ」の物体に近づくと金属の匂いがして、注意深く匂いを嗅ぎ分けたユーザは「Ｂ」の方に宝があると判断できる。
　このようにスマートフォン等の個人端末に匂い提示装置６を適用する利点として、例えばこのゲームをパブリックな街中でプレイする場合に空間側に匂い提示装置６を配置すると、該ゲームをプレイ中でない第三者にまで匂いが提示されてしまうが、上記構成ではそのような第三者への匂いの誤提示の防止を図ることができるという利点がある。
　なお、上記ではスマートフォンを用いる例を挙げたが、タブレット端末やＡＲグラス、シースルー型のヘッドマウントディスプレイなども匂い提示装置６を装着することで適用可能である。

＜６．第一変形例＞

　上記では、匂いの提示期間（匂いを提示する条件が成立している期間）に匂いの出力を連続的に行う例を挙げたが、匂い提示期間において、匂いの出力を間欠的に行うようにすることもできる。

　図３６は、第一変形例で用いる匂いオブジェクト管理情報の例を示した図である。
　図２６に示した匂いオブジェクト管理情報との差異点は、無効時間と出力時刻の項目が追加された点である。
　無効時間は、間欠的な匂いの出力を実現する上で匂い出力のインターバル時間を定めたものであり、一旦匂いの出力を行った後は、この無効時間にわたって匂いオブジェクトＯｓが一時的に無効化され、匂い出力のインターバル期間が形成される。
　出力時刻は、当該匂いオブジェクト管理情報で管理される匂いオブジェクトＯｓについて匂い出力を行った時刻の情報を格納するものである。この出力時刻の情報は、匂い提示制御部１４が匂いの出力制御を行った際に、該当する匂いオブジェクト管理情報に格納する。

　図３７は、第一変形例における匂い制御処理部１（ＣＰＵ）が実行すべき処理手順の例を示したフローチャートである。具体的には、第一変形例における匂い制御処理部１の匂いオブジェクト更新部１３が実行する処理を示している。
　図３０に示した匂いオブジェクト更新部１３の処理との差異点は、ステップＳ３０３の処理を実行したことに応じ、ステップＳ３１０以降の処理を実行する点である。
　具体的に、この場合の匂い制御処理部１はステップＳ３１０で、匂いオブジェクトＯｓが無効になっているか否かを判定する。すなわち、処理対象としている匂いオブジェクトＯｓについて匂いの出力処理（ステップＳ４０３参照）が実行されたことに伴い、匂いオブジェクトＯｓが一時的に無効化された状態となっている否かを判定する。
　無効になっていないと判定した場合、匂い制御処理部１はループ処理ＬＰ４による１回分のループ処理を終える。

　一方、無効になっていると判定した場合、匂い制御処理部１はステップＳ３１１に進み、「現在時刻－出力時刻≧無効時間」であるか否かを判定する。これは、直前の出力時刻からの経過時間がインターバル期間としての無効時間以上となったか否かを判定していることに相当する。
　「現在時刻－出力時刻≧無効時間」であれば、匂い制御処理部１はステップＳ３１２に進み、処理対象としている匂いオブジェクトＯｓを有効化する処理を行い、ループ処理ＬＰ４による１回分のループ処理を終える。
　「現在時刻－出力時刻≧無効時間」でなければ、匂い制御処理部１はステップＳ３１２の処理をパスして、ループ処理ＬＰ４による１回分のループ処理を終える。

　上記のような処理により、匂いの提示期間内における間欠的な匂いの出力が実現される。

＜７．第二変形例＞

　これまでの説明では、匂い提示装置６による匂いの提示可能範囲（以下「提示可能範囲Ａｓ」と表記する）内に匂いオブジェクトＯｓがあることを前提として、匂いの提示位置を匂いオブジェクトＯｓの位置とする例を挙げたが、システムの構成等によっては、匂いオブジェクトＯｓが提示可能範囲Ａｓ内に存在することが保証されない場合もある。
　第二変形例は、そのような場合の対処法を提案するものである。

　図３８から図４４を参照し、第二変形例としての匂い提示手法について説明する。
　図３８は、匂い提示装置６による提示可能範囲Ａｓを模式的に表した図である。
　この図では、提示可能範囲Ａｓは、匂い提示装置６による匂いの出力点を頂点とした四角錐状の範囲であるものとして例示している。匂い提示装置６は、このような提示可能範囲Ａｓ内の任意の位置を匂いの提示位置として、該提示位置に対する匂いの出力を行うことが可能とされている。このとき、匂いの提示位置については、提示可能範囲Ａｓとしての三次元空間上の任意の座標位置に設定可能とされている。
　なお、以下、匂いの提示位置については「提示位置ｓ」と表記する。

　図３９は、匂いオブジェクトＯｓが匂い提示装置６による提示可能範囲Ａｓ内にある場合を例示した図である。
　図示のように匂い制御処理部１は、匂いオブジェクトＯｓが提示可能範囲Ａｓ内にある場合には、匂いオブジェクトＯｓの位置（例えば匂いオブジェクトＯｓの中心位置等）に提示位置ｓを設定する。
　なお、以下、匂いオブジェクトＯｓの位置については「位置ｏ」と表記する。

　図４０、図４１は、匂いオブジェクトＯｓが提示可能範囲Ａｓ内に存在しない場合の説明図である。
　提示可能範囲Ａｓ内に匂いオブジェクトＯｓが存在しない場合には、ユーザの鼻位置ｎと匂いオブジェクトＯｓとを通過する（位置ｏを通過する）直線Ｌｓが、提示可能範囲Ａｓと重複するか否かを判定した結果に基づいて提示位置ｓの設定を行う。
　図４０では、直線Ｌｓが提示可能範囲Ａｓと重複する場合を例示している。この場合には、提示可能範囲Ａｓ内における直線Ｌｓ上となる位置に提示位置ｓを設定する。
　これにより、匂いオブジェクトＯｓが提示可能範囲Ａｓ外に位置する場合であっても、匂いオブジェクトＯｓが存在する方向から鼻位置ｎに匂いが伝達されるようにすることが可能とされる。

　図４１は、直線Ｌｓが提示可能範囲Ａｓと重複しない場合を例示している。この場合には、提示可能範囲Ａｓ内における直線Ｌｓとの距離を最小とする位置に提示位置ｓを設定する。
　これにより、匂いオブジェクトＯｓが提示可能範囲Ａｓ外に存在し且つ直線Ｌｓが提示可能範囲Ａｓと重複しない場合には、提示可能範囲Ａｓ内において直線Ｌｓにできるだけ近い位置に提示位置ｓが設定される。従って、匂い源が存在する方向になるべく近い方向から鼻位置ｎに匂いが伝達されるようにすることができる。

　ここで、ユーザに知覚させる匂いの強度は、提示位置ｓと鼻位置ｎと匂いオブジェクトＯｓとの位置関係に応じて制御することが望ましい。
　図４２を参照し、具体的な匂いの強度の計算手法について説明する。
　匂いオブジェクトＯｓの位置ｏと鼻位置ｎとの位置関係をベクトルｏｎ＾→（「＾→」は「→」を直前文字列の上部に位置させることを意味する）、提示位置ｓと鼻位置ｎとの位置関係をベクトルｓｎ＾→として扱う。また、匂いオブジェクトＯｓの匂いの強度を「Ｐｓ」とし、匂いの減衰率をＡ（ｘ＾→）とする。
　このとき、提示位置ｓに出力する匂いの強度Ｐｏは、下記［式１］により求める。

　ただし、Ｐｏ≧０である。
　これは、例えば提示位置ｓが匂いオブジェクトＯｓの位置ｏより鼻位置ｎの近くにあるときは、基本的にＡ（ｓｎ＾→）＞Ａ（ｏｎ＾→）となり、強度Ｐｏを強度Ｐｓより小さくして出力することで、実際の匂いオブジェクトＯｓの位置よりも鼻位置ｎに近い位置で匂い提示したことによりユーザの感じる匂いの強さが強くなってしまうことの防止を図ることができる。つまりその結果、匂いオブジェクトＯｓの位置から匂いが発生しているときの匂いの強さをユーザに正しく知覚させることができる。
　なお、匂いオブジェクトＯｓの位置ｏが提示位置ｓと一致する場合には、Ｐｏ＝Ｐｓとする。

　ここで、先の図４１では、直線Ｌｓ上に提示位置ｓを設定できない場合について説明したが、直線Ｌｓ上に提示位置ｓを設定できない場合には、匂いオブジェクトＯｓに対するユーザの鼻の向きに応じて匂いの強度を制御することも可能である。
　実世界において、匂い源の方向は、ユーザが鼻の向きを変えながら匂いを嗅ぐことで特定可能とされるが、このとき、匂い源の方向は、匂いの強度が高い方向として知覚される。このため、上記のように匂い源に対する鼻の向きに応じて匂いの強度を制御することで、匂い源の方向をユーザに知覚させることが可能となる。

　図４３及び図４４を参照し、鼻の向きに応じた匂いの強度の制御例を説明する。
　基本的には、匂いオブジェクトＯｓが存在する方向に対する鼻の向きのずれが少ないほど、出力する匂いの強度Ｐｏを高めるようにする。
　図４３に示すようにユーザの鼻の向きを単位ベクトルｅ＾→で表す。このとき、下記［式２］のように強度Ｐｏを補正した強度Ｐｏ’を求める。

　ただし、Ｐｏ’≧０である。

　図４３は、［式２］における係数ａ、係数ｂをａ＝０．５、ｂ＝１とした場合に計算される強度Ｐｏ’の例を示している。図４３Ａは匂いオブジェクトＯｓが存在する方向と鼻の向きとのずれが９０度の場合、図４３Ｂは匂いオブジェクトＯｓが存在する方向と鼻の向きとが一致している場合をそれぞれ示している。

　ここで、鼻の向きは、厳密に鼻と認識した部位の向きを検出することに限らず、顔の向きの検出を行った結果を流用する等、鼻の向きとしてみなすことのできる情報を用いればよい。

　図４５は、第二変形例における匂い制御処理部１（ＣＰＵ）が実行すべき処理手順の例を示したフローチャートである。具体的には、第二変形例における匂い制御処理部１の匂い提示制御部１４が実行する処理を示している。
　なお、この図４５では、先の第一変形例のように匂いの出力を間欠的に実行することを前提とした場合の処理を示している。

　この場合の匂い制御処理部１は、ステップＳ４０１でユーザの鼻位置を抽出する処理を行った上で、ループ処理ＬＰ７により、ステップＳ４１０以降の処理を全ての有効な匂いオブジェクトＯｓについて実行する。
　ここで、有効な匂いオブジェクトＯｓとは、第一変形例において説明した間欠的な匂い出力を行う場合における一時的に無効化されている状態の匂いオブジェクトＯｓ以外の匂いオブジェクトＯｓを意味する。

　ステップＳ４１０で匂い制御処理部１は、１つ以上の鼻が匂いオブジェクトＯｓの効果範囲内に存在するか否かを判定する。１つ以上の鼻が匂いオブジェクトＯｓの効果範囲内に存在していなければ、匂い制御処理部１はループ処理ＬＰ７による１回分のループ処理を終える。つまりこの場合、処理対象とされた匂いオブジェクトＯｓに係る匂いの出力処理（Ｓ４１７）は実行されない。

　１つ以上の鼻が匂いオブジェクトＯｓの効果範囲内に存在していれば、匂い制御処理部１はステップＳ４１１に進み、使用する匂い提示装置６とその装置で提示する対象ユーザを決定する。具体的には、匂いオブジェクトＯｓの効果範囲内に存在するそれぞれのユーザについて、最も近く、且つ匂いオブジェクトＯｓの持つ匂いを提示可能な匂い提示装置６を選択する。この処理によって、例えば匂い提示装置６が１，２の二つ、該当するユーザがＡ，Ｂ，Ｃの三人いた場合に、１でユーザＡ，Ｂに匂い提示、２でユーザＣに匂い提示、などのように決定することができる。

　ステップＳ４１１の処理を実行したことに応じ、匂い制御処理部１はループ処理ＬＰ８により、ステップＳ４１２以降の処理を全ての使用する匂い提示装置６について実行する。
　先ず、ステップＳ４１２で匂い制御処理部１は、匂いオブジェクトＯｓに出力時刻を記録する。すなわち、処理対象としている匂いオブジェクトＯｓについて生成されている、先の図３６に示したような匂いオブジェクト管理情報における出力時刻として、現在時刻を格納する。

　ステップＳ４１２に続くステップＳ４１３で匂い制御処理部１は、最適な匂い提示位置を決定するための処理を実行する。
　ここで、このステップＳ４１３では、先の図３９から図４１で説明した手法により提示位置ｓを決定する。具体的な手順としては、先ず、処理対象としている匂いオブジェクトＯｓの位置ｏが、処理対象としている匂い提示装置６による提示可能範囲Ａｓ内にあるか否かを判定する。位置ｏが提示可能範囲Ａｓ内であると判定した場合は、提示位置ｓを位置ｏに設定する（図３９参照）。
　位置ｏが提示可能範囲Ａｓ内でないと判定した場合は、鼻位置ｎから匂いオブジェクトＯｓを通過する（位置ｏを通過する）直線Ｌｓが、提示可能範囲Ａｓと重複するか否かを判定した結果に基づいて提示位置ｓの設定を行う。具体的に、直線Ｌｓが提示可能範囲Ａｓと重複すると判定した場合は、提示可能範囲Ａｓ内における直線Ｌｓ上となる位置に提示位置ｓを設定する。一方、直線Ｌｓが提示可能範囲Ａｓと重複しないと判定した場合は、提示可能範囲Ａｓ内における直線Ｌｓとの距離を最小とする位置に提示位置ｓを設定する。
　ここで、直線Ｌｓ上に提示位置ｓを設定する場合、基本的には、匂いオブジェクトＯｓに近い位置を選択する。

　ステップＳ４１３の処理を実行したことに応じ、匂い制御処理部１はステップＳ４１４で提示位置ｓとユーザの鼻位置ｎとの位置関係に応じて匂いの強度Ｐｏを計算する。具体的に本例では、先の［式１］により強度Ｐｏを計算する。
　なお、ステップＳ４１３で提示位置ｓを匂いオブジェクトＯｓの位置ｏに設定した場合は、Ｐｏ＝Ｐｓである。

　ステップＳ４１４に続くステップＳ４１５で匂い制御処理部１は、向きに応じて強度Ｐｏを変化させるか否かを判定する。具体的に、本例では、図４１のように直線Ｌｓ上に提示位置ｏを設定できなかった場合であるか否かを判定する。
　向きに応じて強度Ｐｏを変化させる場合、匂い制御処理部１はステップＳ４１６に進み、匂いオブジェクトＯｓに対するユーザの鼻の向き（ｅ＾→）に応じて匂いの強度Ｐｏを再計算する。具体的には、先の［式２］により強度Ｐｏ’を計算する。

　ステップＳ４１５で向きに応じて強度Ｐｏを変化させないと判定した場合、又はステップＳ４１６の再計算処理を実行した場合、匂い制御処理部１はステップＳ４１７に進み、計算した強度で匂いを出力するための処理を実行する。すなわち、処理対象としている匂い提示装置６に対し、決定した提示位置ｓに計算した強度Ｐｏ又は強度Ｐｏ’による匂いが出力されるようにするための指示を行う。
　このステップＳ４１７の処理を実行したことに応じ、匂い制御処理部１はループ処理ＬＰ８による１回分のループ処理を終える。

　ここで、図４６に例示するように、共通の匂い提示装置６によって、複数のユーザに対し、共通の匂いオブジェクトＯｓからの匂いを提示する場合が考えられる。
　このような場合には、ユーザごとの鼻位置ｎから匂いオブジェクトＯｓの位置ｏまでの距離の差に基づく位置に提示位置ｓを設定する。具体的に、図４６では、ユーザの数が２である場合の提示位置ｓの設定例を示している。この場合には、一方のユーザの鼻位置ｎ１と位置ｏとを結ぶ直線Ｌ１と、他方のユーザの鼻位置ｎ２と位置ｏとを結ぶ直線Ｌ２と、鼻位置ｎ１と鼻位置ｎ２とを結ぶ直線Ｌ３による三辺を有する三角形が形成される。直線Ｌ１の長さ（鼻位置ｎ１から位置ｏまでの距離）をｐ、直線Ｌ２の長さ（鼻位置ｎ２から位置ｏまでの距離）をｑとしたとき、提示位置ｓは、直線Ｌ３上にとり得る点のうち、鼻位置ｎ１からの距離と鼻位置ｎ２からの距離の比率がｐ：ｑとなる点Ｐｃから位置ｏを通過する直線Ｌｓ’上に設定する。このようにすることで、複数のユーザに対して、匂いの方向性を正しく表現することができる。

＜８．その他変形例＞

　ここで、上記では、直線Ｌｓ上に提示位置ｓを設定する際には、匂いオブジェクトＯｓに近い位置を選択することについて言及したが、直線Ｌｓ上の何れの位置を提示位置ｓとするかは、条件に応じて変更することもできる。
　例えば、レストランでのメニュー選びでは、匂いオブジェクトＯｓからの匂いが知覚されるタイミングが遅いと、ユーザが違和感や苛立ちを覚えることになりかねず、そのようなケースでは匂いオブジェクトＯｓからの匂いを早く知覚させることが望ましいと考えられる。一方で、匂いオブジェクトＯｓの種類や匂いオブジェクトＯｓが置かれる環境等によっては、匂いオブジェクトＯｓからの匂いが早く知覚されることが不自然であったり不都合であったりすることも想定され得る。
　そこで、上記のように直線Ｌｓ上の何れの位置を提示位置ｓとするかを、所定の条件に応じて変更する。例えば、所定の条件下では直線上Ｌｓにおける匂いオブジェクトＯｓからの距離が所定値以内となる位置に提示位置ｓを設定し、別の条件下では、直線上Ｌｓにおける匂いオブジェクトＯｓからの距離が所定値よりも大きくなる位置に提示位置ｓを設定する。これにより、条件に応じて匂いオブジェクトＯｓからの匂いが知覚されるタイミングの調整を行うことが可能となり、条件に応じた適切な匂い提示を実現することができる。

　また、匂いの提示と共にユーザに知覚させる視覚的効果については、これまでに挙げた具体例に限定されない。
　例えば、図４７や図４８に例示するように、匂い提示を行っている匂い発生物体にのみ特定の画像を表示することで、何れの匂い発生物体からの匂いが提示されているかをユーザが容易に把握できるようにすることもできる。これら図４７、図４８では、先に説明した第一例の場合への適用例を示している。図４７では匂い提示を行っている匂い発生物体（図の例ではグリーンの香水瓶）にのみ雲形状の特定画像を表示し、図４８では匂い提示を行っている匂い発生物体にのみ物体中心から外側に向けて徐々に色が薄くなるグラデーション画像を表示する例を示している。

　ここで、これまでの説明では、実空間に存在する実物体を仮想的な匂い発生物体（仮想的な匂い源）として扱う例を挙げたが、実物体ではなく仮想物体を仮想的な匂い発生物体として扱うこともできる。すなわち、仮想的な匂い源を設定する位置は、実物体が存在する実空間における位置に限らず、例えば実空間を模した仮想空間において存在する仮想物体の位置とすることもできる。この意味で、本技術において仮想的な匂い源の設定位置は、実空間に対応する所定の位置とすればよい。
　仮想物体を仮想的な匂い発生物体として扱う場合、仮想物体の位置はシステムが内部的に把握しているため、ステップＳ１０１（図２８）のような認識された物体から匂い発生物体を抽出する処理を行う必要はなくなる。この場合の匂い発生物体に対する匂いオブジェクト管理情報での「位置」の情報としては、内部的に把握されている該当する仮想物体の位置の情報を格納すればよい。

＜９．プログラム及び記憶媒体＞

　以上、実施形態としての情報処理装置（匂い制御処理部１）を説明してきたが、実施形態のプログラムは、匂い制御処理部１としての処理をＣＰＵ等のコンピュータ装置に実行させるプログラムである。

　実施形態のプログラムは、コンピュータ装置が読み取り可能なプログラムであって、仮想的な匂い源を設定し、匂い源とユーザの鼻位置との位置関係に基づいて匂いの出力制御を行う処理を、コンピュータ装置に実行させるプログラムである。
　すなわち、このプログラムは、例えばコンピュータ装置に図２８から図３１等により説明した処理を実行させるプログラムに相当する。

　このようなプログラムは、コンピュータ装置が読み取り可能な記憶媒体、例えばＲＯＭやＳＳＤ（Solid State Drive）、ＨＤＤ（Hard Disk Drive）等に予め記憶しておくことができる。或いはまた、半導体メモリ、メモリーカード、光ディスク、光磁気ディスク、磁気ディスク等のリムーバブル記憶媒体に、一時的又は永続的に格納（記憶）しておくことができる。またこのようなリムーバブル記憶媒体は、いわゆるパッケージソフトウェアとして提供することができる。
　また、このようなプログラムは、リムーバブル記憶媒体からパーソナルコンピュータ等にインストールする他、ダウンロードサイトから、ＬＡＮ（Local Area Network）、インターネット等のネットワークを介してスマートフォン等の所要の情報処理装置にダウンロードすることもできる。

＜１０．実施形態のまとめ＞

　上記のように実施形態としての情報処理装置（匂い制御処理部１）は、実空間に対応する所定の位置に仮想的な匂い源（匂いオブジェクトＯｓ）を設定する設定部（匂いオブジェクト生成部１１）と、匂い源とユーザの鼻の位置との位置関係に基づいて、匂いの出力制御を行う制御部（匂い提示制御部１４等）と、を備えるものである。なお、前述のように、実空間に対応する所定の位置は、実空間における所定の位置でもよいし、実空間に対応する仮想空間における所定の位置でもよい。
　上記のようにユーザの鼻の位置と匂い源との位置関係に基づき匂いの出力制御を行うことで、匂い源から匂っているということを表現することが可能とされる。
　従って、ＡＲ空間に対するユーザの没入感を高めることができる。

　また、実施形態としての情報処理装置においては、制御部は、匂い源と鼻の位置との距離に応じて、匂いの強度を制御している（図３１のステップＳ４０３、図４５のステップＳ４１４からＳ４１７を参照）。
　これにより、鼻の位置が匂い源の近くに位置している場合には匂いの強度を大きくする等、匂い源との距離に応じた適切な強度による匂いをユーザに知覚させることが可能となる。
　従って、匂い源との距離感を適切に表現することができ、ユーザのＡＲ空間への没入感を高めることができる。

　さらに、実施形態としての情報処理装置においては、制御部は、鼻の位置と匂い源とを通過する直線（同Ｌｓ）上に匂いの提示位置を設定している（図４０参照）。このとき、設定される匂い源の位置は、匂いの提示可能範囲内に設定されてもよいし、提示可能範囲外とされてもよい。
　これにより、匂い源が存在する方向（つまり仮想的な匂い源として設定した物体）から鼻の位置に匂いを伝達することが可能とされる。
　従って、匂い源から匂っているということを適切に表現することができ、ＡＲ空間に対するユーザの没入感を高めることができる。

　さらにまた、実施形態としての情報処理装置においては、制御部は、鼻位置と匂い源の位置とに基づいて提示位置（同ｓ）を設定し、提示位置に匂いを出力する制御を行っている（図３１のステップＳ４０３、図４５のステップＳ４１３からＳ４１７を参照）。
　これにより、匂い源から匂っているということを表現する上で適切とされる位置に匂いの提示を行うことが可能とされる。
　従って、ＡＲ空間に対するユーザの没入感を高めることができる。

　また、実施形態としての情報処理装置においては、制御部は、提示位置に出力する匂いの強度を、提示位置と鼻の位置と匂い源との位置関係に応じて制御している（図４２参照）。
　これにより、提示位置が匂い源とは異なる位置に設定される場合であっても、提示位置、鼻の位置、匂い源の三者の位置関係に基づいて適切な強度による匂いをユーザに知覚させることが可能とされる。
　従って、匂い源からの匂いの表現の正確性向上を図ることができる。

　さらに、実施形態としての情報処理装置においては、制御部は、匂い提示装置がユーザに匂いを提示することが可能な範囲である提示可能範囲（同Ａｓ）内に匂い源が存在するか否かを判定した結果に基づいて、匂い提示装置による匂いの提示位置を設定している（図４５のステップＳ４１４を参照）。
　これにより、匂い源が提示可能範囲内にある場合とない場合とで、それぞれ適切な匂いの提示位置を設定することが可能とされる。すなわち、提示可能範囲が狭いこと等に起因して匂い源が提示可能範囲外に位置されてしまう場合であっても、適切な匂いの出力制御を行うことが可能とされる。
　従って、提示可能範囲の広い匂い提示装置の使用を前提とする必要がなくなり、使用可能な匂い提示装置の制約の緩和を図ることができる。

　さらにまた、実施形態としての情報処理装置においては、制御部は、提示可能範囲内に匂い源が存在しないと判定した場合は、鼻の位置と匂い源とを通過する直線が提示可能範囲と重複するか否かを判定した結果に基づいて、提示位置の設定を行っている（図４５のステップＳ４１４を参照）。
　これにより、匂い源が提示可能範囲内になく匂いの提示位置を匂い源の位置に設定できない場合であっても、鼻の位置と匂い源とを通過する直線が提示可能範囲と重複していれば、該直線上に提示位置を設定することが可能とされる。
　従って、匂い源が匂いの提示可能範囲外に位置する場合であっても、匂い源が存在する方向から鼻の位置に匂いが伝達されるようにすることができ、匂いの表現の正確性向上を図ることができる。

　また、実施形態としての情報処理装置においては、制御部は、直線が提示可能範囲と重複すると判定した場合は、提示可能範囲内における直線上となる位置に提示位置を設定している。
　これにより、匂い源が匂いの提示可能範囲外に位置する場合であっても、匂い源が存在する方向から鼻位置に匂いが伝達されるようにすることが可能とされる。
　従って、匂いの表現の正確性向上を図ることができる。

　さらに、実施形態としての情報処理装置においては、制御部は、直線が提示可能範囲と重複しないと判定した場合は、提示可能範囲内における直線との距離を最小とする位置に提示位置を設定している。
　これにより、匂い源が匂いの提示可能範囲外に存在し且つ鼻の位置と匂い源とを通過する直線が提示可能範囲と重複しない場合には、提示可能範囲内において該直線にできるだけ近い位置に提示位置が設定される。
　従って、匂い源が存在する方向になるべく近い方向から鼻の位置に匂いが伝達されるようにすることができ、匂いの表現の正確性向上を図ることができる。

　さらにまた、実施形態としての情報処理装置においては、制御部は、直線上における提示位置を条件に応じて変更している。
　これにより、所定の条件下においては直線上における鼻の位置に近い位置に提示位置を設定して匂い源からの匂いが知覚されるタイミングを早めたり、別の条件下では直線上における鼻の位置から遠い位置に提示位置を設定して匂い源からの匂いが知覚されるタイミングを遅めたりするといったことが可能とされる。
　従って、条件に応じて匂い源からの匂いが知覚されるタイミングの調整を行うことが可能となり、条件に応じた適切な匂い提示を実現することができる。

　また、実施形態としての情報処理装置においては、制御部は、匂い源に対するユーザの鼻の向きに応じて匂いの強度を制御している（図４５のステップＳ４１６を参照）。
　実世界において、匂い源の方向は、ユーザが鼻の向きを変えながら匂いを嗅ぐことで特定可能とされるが、このとき、匂い源の方向は、匂いの強度が高い方向として知覚される。このため、上記のように匂い源に対する鼻の向きに応じて匂いの強度を制御することで、匂い源の方向をユーザに知覚させることが可能となる。
　ここで、提示位置を鼻の位置と匂い源とを通過する直線上に設定した場合にはユーザに匂い源の方向を適切に知覚させることができるが、提示位置を該直線上に設定できない場合もある。上記のように鼻の向きに応じて匂いの強度を制御する手法は、このように提示位置を直線上に設定できない場合に適用して好適な手法である。

　さらに、実施形態としての情報処理装置においては、制御部は、鼻の位置が匂い源に対して定められた匂いの効果範囲内にあるか否かを判定した結果に基づいて匂いの出力制御を行っている（図３１、図４５の処理を参照）。
　これにより、鼻の位置が匂い源による匂いの効果範囲内に存在しない場合には匂いの出力が行われないようにすることが可能とされる。
　従って、鼻の位置が匂い源に対して遠くに位置しているにも拘わらず匂いの出力動作が無闇に行われてしまうことの防止が図られ、匂い提示装置の消費電力削減や匂い出力に用いられる匂い源物質の浪費防止を図ることができる。

　さらにまた、実施形態としての情報処理装置においては、制御部は、匂い源からの匂いの提示期間内において、匂いの出力が間欠的に行われるように制御している（第一変形例を参照）。
　これにより、匂いの提示期間中に匂い提示装置の匂い出力動作を連続的に行う必要がなくなる。
　従って、匂い提示装置の消費電力削減や匂い出力に用いられる匂い源物質の浪費防止を図ることができる。

　また、実施形態としての情報処理装置においては、制御部は、匂い源に対して、ユーザの所定のジェスチャが検出されたことに応じて匂い源を複製している（図２９のステップＳ２０５を参照）。
　これにより、例えば匂い源をタッチするジェスチャに応じて、タッチした指の位置に追従することの指示情報を対応付けた匂い源を複製したり、匂い源を手で扇ぐジェスチャに応じて、扇いだ方向に移動することの指示情報を対応付けた匂い源を複製するといったことが可能とされる。
　従って、匂い源に対するユーザのジェスチャに応じた適切な匂いの制御を行うことができる。

　さらに、実施形態としての情報処理装置においては、制御部は、ジェスチャの検出に応じて複製した匂い源の位置を、匂い源をタッチしたユーザの部位に追従させている（図２９のステップＳ２０５を参照）。
　これにより、例えばユーザが匂い源をタッチした場合には、該匂い源をタッチしたユーザの部位に匂い源が複製され、該部位の動きに追従して該複製した匂い源も移動される。すなわち、匂い源をタッチした部位に該匂い源の匂いが移ることが再現される。
　従って、匂い源に対するユーザのジェスチャに応じた適切な匂いの制御を行うことができる。

　さらにまた、実施形態としての情報処理装置においては、制御部は、ユーザが匂い源を手で扇ぐジェスチャが検出されたことに応じて匂い源を複製し、該複製した匂い源を手で扇いだ方向に移動させている（図２９のステップＳ２０５を参照）。
　これにより、匂い源を扇いだ際に扇いだ方向に匂いが移動することを再現可能となる。
　従って、匂い源に対するユーザのジェスチャに応じた適切な匂いの制御を行うことができる。

　また、実施形態としての情報処理装置においては、制御部は、ユーザによる所定のジェスチャが検出されたことに応じて、複製した匂い源についての匂いの提示を停止している（図２９のステップＳ２０５を参照）。
　これにより、ユーザの意思に応じて、複製した匂い源についての匂いの提示を停止することが可能とされる。
　従って、ユーザの意思に応じた適切な匂いの制御を行うことができる。

　さらに、実施形態としての情報処理装置においては、制御部は、匂い源として設定された実空間上の物体に重畳投影される画像の変化に応じて、提示装置に出力させる匂いの種類又は匂いの強度を変化させている（図１６から図２０等を参照）。
　これにより、仮想的な匂い源としての物体の種類や状態の変化が視覚的に示されることに連動して、匂いの種類や強度を変化させることが可能とされる。
　従って、臭覚的効果を視覚的効果に連動させることにより、ユーザのＡＲ空間への没入感を高めることができる。

　また、実施形態としての制御方法は、実空間に対応する所定の位置に仮想的な匂い源を設定し、匂い源とユーザの鼻の位置との位置関係に基づいて匂いの出力制御を行う制御方法である。
　このような実施形態としての制御方法によっても、上記した実施形態としての情報処理装置と同様の作用及び効果を得ることができる。

　また、実施形態のプログラムは、コンピュータ装置が読み取り可能なプログラムであって、実空間に対応する所定の位置に仮想的な匂い源を設定し、匂い源とユーザの鼻の位置との位置関係に基づいて匂いの出力制御を行う処理を、コンピュータ装置に実行させるプログラムである。
　このようなプログラムにより、上記した実施形態としての情報処理装置を実現することができる。

　なお、本明細書に記載された効果はあくまでも例示であって限定されるものではなく、また他の効果があってもよい。

＜１１．本技術＞

　なお本技術は以下のような構成も採ることができる。
（１）
実空間に対応する所定の位置に仮想的な匂い源を設定する設定部と、
　前記匂い源とユーザの鼻の位置との位置関係に基づいて、匂いの出力制御を行う制御部と、を備える
　情報処理装置。
（２）
　前記制御部は、
　前記匂い源と前記鼻の位置との距離に応じて、前記匂いの強度を制御する
　前記（１）に記載の情報処理装置。
（３）
　前記制御部は、
　前記鼻の位置と前記匂い源とを通過する直線上に前記匂いの提示位置を設定する
　前記（１）又は（２）に記載の情報処理装置。
（４）
　前記制御部は、
　前記鼻の位置と前記匂い源の位置とに基づいて前記匂いの提示位置を設定し、前記提示位置に前記匂いを出力する制御を行う
　前記（１）から（３）の何れかに記載の情報処理装置。
（５）
　前記制御部は、
　前記提示位置に出力する匂いの強度を、前記提示位置と前記鼻の位置と前記匂い源との位置関係に応じて制御する
　前記（３）又は（４）に記載の情報処理装置。
（６）
　前記制御部は、
　匂い提示装置が前記ユーザに匂いを提示することが可能な範囲である提示可能範囲内に前記匂い源が存在するか否かを判定した結果に基づいて、前記匂い提示装置による前記匂いの提示位置を設定する
　前記（１）から（５）の何れかに記載の情報処理装置。
（７）
　前記制御部は、
　前記提示可能範囲内に前記匂い源が存在しないと判定した場合は、前記鼻の位置と前記匂い源とを通過する直線が前記提示可能範囲と重複するか否かを判定した結果に基づいて、前記提示位置の設定を行う
　前記（６）に記載の情報処理装置。
（８）
　前記制御部は、
　前記直線が前記提示可能範囲と重複すると判定した場合は、前記提示可能範囲内における前記直線上となる位置に前記提示位置を設定する
　前記（７）に記載の情報処理装置。
（９）
　前記制御部は、
　前記直線が前記提示可能範囲と重複しないと判定した場合は、前記提示可能範囲内における前記直線との距離を最小とする位置に前記提示位置を設定する
　前記（７）又は（８）に記載の情報処理装置。
（１０）
　前記制御部は、
　前記直線上における前記提示位置を条件に応じて変更する
　前記（３）又は（７）に記載の情報処理装置。
（１１）
　前記制御部は、
　前記匂い源に対する前記ユーザの鼻の向きに応じて匂いの強度を制御する
　前記（１）から（１０）の何れかに記載の情報処理装置。
（１２）
　前記制御部は、
　前記鼻の位置が前記匂い源に対して定められた匂いの効果範囲内にあるか否かを判定した結果に基づいて匂いの出力制御を行う
　前記（１）から（１１）の何れかに記載の情報処理装置。
（１３）
　前記制御部は、
　前記匂い源からの匂いの提示期間内において、匂いの出力が間欠的に行われるように制御する
　前記（１）から（１１）の何れかに記載の情報処理装置。
（１４）
　前記制御部は、
　前記匂い源に対して、前記ユーザの所定のジェスチャが検出されたことに応じて前記匂い源を複製する
　前記（１）から（１３）の何れかに記載の情報処理装置。
（１５）
　前記制御部は、
　前記ジェスチャの検出に応じて複製した匂い源の位置を、前記匂い源をタッチした前記ユーザの部位に追従させる
　前記（１４）に記載の情報処理装置。
（１６）
　前記制御部は、
　前記ユーザが前記匂い源を手で扇ぐジェスチャが検出されたことに応じて前記匂い源を複製し、該複製した匂い源を前記手で扇いだ方向に移動させる
　前記（１４）又は（１５）に記載の情報処理装置。
（１７）
　前記制御部は、
　前記ユーザによる所定のジェスチャが検出されたことに応じて、前記複製した匂い源についての匂いの提示を停止する
　前記（１４）から（１６）の何れかに記載の情報処理装置。
（１８）
　前記制御部は、
　前記匂い源として設定された実空間上の物体に重畳投影される画像の変化に応じて、提示装置に出力させる匂いの種類又は匂いの強度を変化させる
　前記（１）から（１７）の何れかに記載の情報処理装置。

　１　匂い制御処理部
　２　入力部
　３　認識処理部
　４　画像生成部
　５　画像出力部
　６　匂い提示装置
　１１　匂いオブジェクト生成部
　１２　匂いオブジェクト制御部
　１３　匂いオブジェクト更新部
　１４　匂い提示制御部
　５０　ＡＲシステム
　Ｏｓ　匂いオブジェクト
　Ａｓ　提示可能範囲
　ｎ　鼻位置
　ｏ　匂いオブジェクトの位置
　ｓ　提示位置

Claims

　実空間に対応する所定の位置に仮想的な匂い源を設定する設定部と、
　前記匂い源とユーザの鼻の位置との位置関係に基づいて、匂いの出力制御を行う制御部と、を備える
　情報処理装置。
　前記制御部は、
　前記匂い源と前記鼻の位置との距離に応じて、前記匂いの強度を制御する
　請求項１に記載の情報処理装置。
　前記制御部は、
　前記鼻の位置と前記匂い源とを通過する直線上に前記匂いの提示位置を設定する
　請求項１に記載の情報処理装置。
　前記制御部は、
　前記鼻の位置と前記匂い源の位置とに基づいて前記匂いの提示位置を設定し、前記提示位置に前記匂いを出力する制御を行う
　請求項１に記載の情報処理装置。
　前記制御部は、
　前記提示位置に出力する匂いの強度を、前記提示位置と前記鼻の位置と前記匂い源との位置関係に応じて制御する
　請求項３に記載の情報処理装置。
　前記制御部は、
　匂い提示装置が前記ユーザに匂いを提示することが可能な範囲である提示可能範囲内に前記匂い源が存在するか否かを判定した結果に基づいて、前記匂い提示装置による前記匂いの提示位置を設定する
　請求項１に記載の情報処理装置。
　前記制御部は、
　前記提示可能範囲内に前記匂い源が存在しないと判定した場合は、前記鼻の位置と前記匂い源とを通過する直線が前記提示可能範囲と重複するか否かを判定した結果に基づいて、前記提示位置の設定を行う
　請求項６に記載の情報処理装置。
　前記制御部は、
　前記直線が前記提示可能範囲と重複すると判定した場合は、前記提示可能範囲内における前記直線上となる位置に前記提示位置を設定する
　請求項７に記載の情報処理装置。
　前記制御部は、
　前記直線が前記提示可能範囲と重複しないと判定した場合は、前記提示可能範囲内における前記直線との距離を最小とする位置に前記提示位置を設定する
　請求項７に記載の情報処理装置。
　前記制御部は、
　前記直線上における前記提示位置を条件に応じて変更する
　請求項３に記載の情報処理装置。
　前記制御部は、
　前記匂い源に対する前記ユーザの鼻の向きに応じて匂いの強度を制御する
　請求項１に記載の情報処理装置。
　前記制御部は、
　前記鼻の位置が前記匂い源に対して定められた匂いの効果範囲内にあるか否かを判定した結果に基づいて匂いの出力制御を行う
　請求項１に記載の情報処理装置。
　前記制御部は、
　前記匂い源からの匂いの提示期間内において、匂いの出力が間欠的に行われるように制御する
　請求項１に記載の情報処理装置。
　前記制御部は、
　前記匂い源に対して、前記ユーザの所定のジェスチャが検出されたことに応じて前記匂い源を複製する
　請求項１に記載の情報処理装置。
　前記制御部は、
　前記ジェスチャの検出に応じて複製した匂い源の位置を、前記匂い源をタッチした前記ユーザの部位に追従させる
　請求項１４に記載の情報処理装置。
　前記制御部は、
　前記ユーザが前記匂い源を手で扇ぐジェスチャが検出されたことに応じて前記匂い源を複製し、該複製した匂い源を前記手で扇いだ方向に移動させる
　請求項１４に記載の情報処理装置。
　前記制御部は、
　前記ユーザによる所定のジェスチャが検出されたことに応じて、前記複製した匂い源についての匂いの提示を停止する
　請求項１４に記載の情報処理装置。
　前記制御部は、
　前記匂い源として設定された実空間上の物体に重畳投影される画像の変化に応じて、提示装置に出力させる匂いの種類又は匂いの強度を変化させる
　請求項１に記載の情報処理装置。
　実空間に対応する所定の位置に仮想的な匂い源を設定し、前記匂い源とユーザの鼻の位置との位置関係に基づいて、匂いの出力制御を行う
　制御方法。
　コンピュータ装置が読み取り可能なプログラムであって、
　実空間に対応する所定の位置に仮想的な匂い源を設定し、前記匂い源とユーザの鼻の位置との位置関係に基づいて、匂いの出力制御を行う処理を、前記コンピュータ装置に実行させる
　プログラム。