JP2021067998A - 制御装置、プログラム、及びシステム - Google Patents

Abstract

【課題】ＧＵＩに対する入力操作に対し、より違和感の少ない振動呈示を実現する制御装置、プログラム及びシステムを提供する。【解決手段】システム１において、入力装置１０の操作部１１０を介して受け付けた入力に対応して表示態様が変化する視覚要素に対する入力を受け付けたと判定された場合、振動呈示装置４０の振動呈示部４１０に入力と対応した振動を呈示させる制御部２１０を制御装置２０に備える。制御部２１０は、振動の呈示態様が視覚要素の表示態様の変化に同調して変化するように振動に係る特性を制御する。【選択図】図１

Description

本発明は、制御装置、プログラム、及びシステムに関する。

近年、ユーザによる操作に対し、フィードバックを出力する種々の装置が開発されている。例えば、特許文献１には、利用者がタッチパネルを押下した場合に当該タッチパネルを振動させることで、利用者の触覚に対するフィードバックを行う技術が開示されている。

特開２０１０−２８７２３１号公報

ところで、ＧＵＩ（Ｇｒａｐｈｉｃａｌ Ｕｓｅｒ Ｉｎｔｅｒｆａｃｅ）に対する入力操作に対し、上記のような振動を用いたフィードバックを行う場合、視覚表現との乖離が少ない振動を呈示することで、ユーザが知覚する感覚間の統一性を高めることが期待される。

そこで、本発明は、上記問題に鑑みてなされたものであり、本発明の目的とするところは、ＧＵＩに対する入力操作に対し、より違和感の少ない振動呈示を実現することが可能な仕組みを提供することにある。

上記課題を解決するために、本発明のある観点によれば、操作部を介して受け付けた入力に対応して表示態様が変化する視覚要素に対する前記入力を受け付けたと判定された場合、振動呈示部に前記入力と対応した振動を呈示させる制御部、を備え、前記制御部は、前記振動の呈示態様が前記視覚要素の表示態様の変化に同調して変化するように前記振動に係る特性を制御する、制御装置が提供される。

また、上記課題を解決するために、本発明の別の観点によれば、コンピュータに、操作部を介して受け付けた入力に対応して表示態様が変化する視覚要素に対する前記入力を受け付けたと判定された場合、振動呈示部に前記入力と対応した振動を呈示させる制御機能、を実現させ、前記制御機能に、前記振動の呈示態様が前記視覚要素の表示態様の変化に同調して変化するように前記振動に係る特性を制御させる、プログラムが提供される。

また、上記課題を解決するために、本発明の別の観点によれば、操作部を介して受け付けた入力に対応して表示態様が変化する視覚要素を表示する表示装置と、振動を呈示する振動呈示装置と、前記視覚要素に対する前記入力を受け付けたと判定された場合、振動呈示装置に前記入力と対応した振動を呈示させる制御装置と、を備え、前記制御装置は、前記振動の呈示態様が前記視覚要素の表示態様の変化に同調して変化するように前記振動に係る特性を制御する、システムが提供される。

以上説明したように本発明によれば、ＧＵＩに対する入力操作に対し、より違和感の少ない振動呈示を実現することが可能な仕組みが提供される。

本発明の一実施形態に係るシステム１の機能構成例を示す図である。 同実施形態に係る視覚要素の表示制御の一例を示す図である。 図２に示す視覚要素の表示態様の変化と同調した振動呈示の一例について説明するための図である。 本発明の一実施形態に係る視覚要素の表示制御の一例を示す図である。 同実施形態に係る図４に示す視覚要素の表示態様の変化と同調した振動呈示の一例について説明するための図である。 本発明の一実施形態に係るシステム１の動作の流れを示すフローチャートである。

以下に添付図面を参照しながら、本発明の好適な実施の形態について詳細に説明する。なお、本明細書および図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。

＜構成例＞
図１は、本発明の一実施形態に係るシステム１の機能構成例を示す図である。図１に示すように、本実施形態に係るシステム１は、入力装置１０、制御装置２０、表示装置３０、および振動呈示装置４０を備えてもよい。
（入力装置１０）
本実施形態に係るシステム１に対する入力を受け付ける装置である。入力装置１０は、本実施形態に係る入力装置１０は、例えば、タッチパッド、ゲームコントローラ、視線検出デバイス、ジェスチャ検出デバイスなどであってもよい。本実施形態に係る入力装置１０は、例えば、図１に示すように、操作部１１０および検出部１２０を備える。

本実施形態に係る操作部１１０は、ユーザが入力を実行する対象物であってよい。例えば、入力装置１０がタッチパッドである場合、操作部１１０は、ユーザがなぞり操作等を行うための接触面であり得る。また、例えば、入力装置１０がゲームコントローラである場合、操作部１１０は、ジョイスティックや各種のボタンなどであり得る。なお、ユーザによる入力が視線操作やジェスチャ操作を用いたものである場合等、物理的な被操作デバイスを必要としない場合には、入力装置１０は必ずしも操作部１１０を備えなくてもよい。

本実施形態に係る検出部１２０は、入力の検出および受付を行う。また、検出部１２０は、受け付けた入力に関する情報を制御装置２０に出力する。本実施形態に係る検出部１２０は、想定される入力を検出可能な構成を有する。例えば、入力装置１０がタッチパッドである場合、検出部１２０は、操作部１１０に対する入力操作に伴い変化する圧力の変化を電気信号に変換する感圧センサや、入力操作に伴い変化する静電容量の変化を電気信号に変換する静電容量センサを有してもよい。

また、例えば、入力装置１０が視線検出デバイスである場合、検出部１２０は、ユーザの視線を検出するための撮像センサを備えてもよい。また、例えば、入力装置１０がジェスチャ検出デバイスである場合、検出部１２０は、ユーザによるジェスチャを検出するための加速度センサやジャイロセンサ等を備えてもよい。

（制御装置２０）
本実施形態に係る制御装置２０は、入力装置１０が受け付けた入力に基づいて振動呈示装置４０による振動の呈示を制御する。また、制御装置２０は、入力装置１０が受け付けた入力に基づいて表示装置３０による画像の表示を制御してもよい。また、制御装置２０は、入力の受付によって決定される機能を実行する各種の装置（図示しない）を制御してもよい。本実施形態に係る制御装置２０は、図１に示すように、制御部２１０および記憶部２２０を備える。

制御部２１０の機能は、例えば、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）やマイクロプロセッサ等の電子回路によって構成される。本実施形態に係る制御部２１０が有する機能の詳細については別途詳細に説明する。

本実施形態に係る記憶部２２０は、制御装置２０、表示装置３０、振動呈示装置４０等の動作に係る各種の情報を記憶する。記憶部２２０は、例えば、表示装置３０に表示させる画像や、当該画像の表示態様を決定するためのプログラム、振動呈示装置４０に呈示させる振動の呈示態様を決定するためのプログラム等を記憶する。

（表示装置３０）
本実施形態に係る表示装置３０は、制御装置２０等による制御に従って各種の画像を表示する装置である。本実施形態に係る表示装置３０は、例えば、図１に示すように、表示部３１０を備える。

本実施形態に係る表示部３１０は、制御装置２０等による制御に従って各種の画像を表示する機能を有する。この際、表示部３１０は、入力に基づいて決定された表示態様に従って各種の画像を表示する。このために、表示部３１０は、各種のディスプレイ等を備える。

（振動呈示装置４０）
本実施形態に係る振動呈示装置４０は、制御装置２０による制御に従って振動を呈示する機能を有する。本実施形態に係る振動呈示装置４０は、図１に示すように、例えば、振動呈示部４１０を備える。

本実施形態に係る振動呈示部４１０は、制御装置２０が決定した呈示態様を有する振動の呈示を行う。このために、本実施形態に係る振動呈示部４１０は、振動を発生させることが可能な偏心モータ（ＥＲＭ：Ｅｃｃｅｎｔｒｉｃ Ｒｏｔａｔｉｎｇ Ｍａｓｓ）、リニア・バイブレータ（ＬＲＡ：Ｌｉｎｅａｒ Ｒｅｓｏｎａｎｔ Ａｃｔｕａｔｏｒ）、ピエゾ（圧電）素子等の各種のアクチュエータを備える。

以上、本実施形態に係るシステム１の機能構成例について述べた。なお、図１を用いて説明した上記の構成はあくまで一例であり、本実施形態に係るシステム１の構成は係る例に限定されない。例えば、入力装置１０および振動呈示装置４０は、単一の装置として実装されてもよい。本実施形態に係るシステム１の構成は、仕様や運用に応じて柔軟に変形可能である。

＜制御の詳細＞
続いて、本実施形態に係る制御装置２０による制御の詳細について述べる。以下では、本実施形態に係る制御装置２０が、システム１への入力に対するフィードバックとして振動の呈示を制御する場合を想定する。この際、表示装置３０が表示する画像（各種の視覚表現）と、振動呈示装置４０が呈示する振動との乖離が大きいと、ユーザが違和感を覚える可能性がある。

本発明に係る技術思想は上記の点に着目して発想されたものであり、表示される視覚表現と呈示される振動の統一感を高めることで、ユーザが感じ得る違和感を効果的に低減することを可能とする。

このために、本発明の一実施形態に係る制御装置２０の制御部２１０は、操作部１１０を介して受け付けた入力に対応して表示態様が変化する視覚要素に対する入力を受け付けたと判定された場合、振動呈示部４１０に当該入力と対応した振動を呈示させる機能を有する。また、本発明の一実施形態に係る制御部２１０は、振動の呈示態様が視覚要素の表示態様の変化に同調して変化するように振動に係る特性を制御する、ことを特徴の一つする。

以下、上記の特徴を有する制御部２１０の機能について詳細に説明する。なお、以下においては、ユーザが、表示部３１０に表示される少なくとも一つの視覚要素に対し、表示部３１０とは別途に備えられる操作部１１０を用いて遠隔的に入力を行う場合を想定する。操作部１１０は、例えば、ディスプレイである表示部３１０とは分離して設けられるタッチパッドであってもよい。

また、以下においては、制御部２１０が表示部３１０による、少なくとも一つの視覚要素を含む画像の表示を制御する場合について述べる。一方、本実施形態に係る表示部３１０の制御は、制御部２１０とは別途に備えられる他の構成により実現されてもよい。

図２は、本実施形態に係る視覚要素の表示制御の一例を示す図である。図２には、操作部１１０を介して受け付けた入力に対応して変化する視覚要素の表示態様が最上段から最下段にかけて時系列に示されている。ここで、上記の視覚要素とは、ＧＵＩを構成する各種の視覚的なパーツを指す。本実施形態に係る視覚要素には、例えば、操作対象オブジェクトや指示オブジェクトが含まれる。

本実施形態に係る操作対象オブジェクトとは、操作部１１０を介して入力を受け付ける対象となる視覚要素である。操作対象オブジェクトの一例としては、アイコンやボタン、規定の文字列などが挙げられる。

また、本実施形態に係る指示オブジェクトとは、操作部１１０を介して受け付けた入力に基づいて決定される、表示部３１０に表示される画像（表示領域）上の指示位置を示す視覚要素である。指示オブジェクトの一例としては、カーソルやポインタが挙げられる。

本実施形態に係る視覚要素は、操作部１１０を介して受け付けた入力に対応して表示態様が変化することを特徴の一つとする。例えば、制御部２１０は、視覚要素の表示態様として、視覚要素の大きさ、形状、または色表現（明度、彩度、透明度、色相、テクスチャ等を含む）のうち少なくともいずれか制御してもよい。

例えば、図２では、操作対象オブジェクトの一例として、５つのアイコンＩ１〜アイコンＩ５と、指示オブジェクトの一例として、カーソルＣとが示されている。なお、アイコンＩ１〜アイコンＩ５は等間隔で配置されているものとする。この場合、制御部２１０は本実施形態に係る制御部２１０は、操作部１１０を介して受け付けられた入力に対応して変化するカーソルＣとアイコンＩ１〜アイコンＩ５との間の相対的な距離に応じて、カーソルＣやアイコンＩ１〜アイコンＩ５の大きさを変化させてもよい。制御部２１０は、例えば、カーソルＣから最も距離が近いアイコンを最も大きく表示させ、カーソルＣから２番目に距離が近いアイコンを２番目に大きく表示させてもよい。

図２の最上段に示すタイミングＴ１では、カーソルＣの表示位置（カーソルＣの中心や重心）は、アイコンＩ１の表示位置（アイコンＩ１の中心や重心）と一致している。この際、制御部２１０は、カーソルＣとアイコンＩ１との間の距離がゼロであることから、アイコンＩ１を規定される最大の大きさで表示させ、次いでカーソルＣとの間の距離が近いアイコンＩ２を当該距離に応じた大きさで拡大して表示させてもよい。

また、制御部２１０は、アイコンＩ１およびアイコンＩ２の表示態様に加え、カーソルＣの表示態様を制御してもよい。制御部２１０は、カーソルＣとアイコンＩ１との間の距離がゼロであることから、カーソルＣがアイコンＩ１の外周に沿う大きさ（規定される最大の大きさ）となるように制御してもよい。また、制御部２１０は、この状態をアイコンＩ１が選択されている状態として扱い、後続する決定操作に対応する入力に従って、アイコンＩ１に対応する機能の実行を制御してもよい。

続くタイミングＴ２では、例えば、ユーザが操作部１１０に対して右方向のなぞり操作を行ったことにより、カーソルＣの表示位置がタイミングＴ１と比較して右方向に移動した状況が示されている。この際、制御部２１０は、カーソルＣとアイコンＩ１との間の距離が遠のいたことから、カーソルＣの大きさがタイミングＴ１と比較して縮小するように制御してもよい。また、制御部２１０は、カーソルＣとアイコンＩ１との間の距離が遠のいたことから、アイコンＩ１をタイミングＴ１と比較して縮小させ、カーソルＣとアイコンＩ２との間の距離が近づいたことから、アイコンＩ２をタイミングＴ１と比較して拡大させてもよい。

続くタイミングＴ３では、カーソルＣがさらに右方向に移動し、アイコンＩ１とアイコンＩ２との丁度中間に位置する状況が示されている。この際、制御部２１０は、カーソルＣとアイコンＩ１との間の距離、およびカーソルＣとアイコンＩ２との間の距離が同一となることから、アイコンＩ１とアイコンＩ２とが上記距離に応じた同一の大きさとなるように制御してよい。また、この際、制御部２１０は、カーソルＣと、カーソルＣと最も距離が近いアイコン（アイコンＩ１およびアイコンＩ２）との間の距離が最大となることから、カーソルＣを規定される最小の大きさで表示させてもよい。

続くタイミングＴ４では、カーソルＣがさらに右方向に移動した状況が示されている。この際、制御部２１０は、カーソルＣとアイコンＩ２との間の距離が近づいたことから、カーソルＣの大きさがタイミングＴ３と比較して拡大するように制御してもよい。また、制御部２１０は、カーソルＣとアイコンＩ１との間の距離が遠のいたことから、アイコンＩ１をタイミングＴ３と比較して縮小させ、カーソルＣとアイコンＩ２との間の距離が近づいたことから、アイコンＩ２をタイミングＴ３と比較して拡大させてもよい。

続くタイミングＴ５では、カーソルＣがさらに右方向に移動し、アイコンＩ２の表示位置と一致した状況が示されている。この際、制御部２１０は、カーソルＣとアイコンＩ２との間の距離がゼロであることから、アイコンＩ２を規定される最大の大きさで表示させ、またカーソルＣがアイコンＩ２の外周に沿う大きさとなるように制御してよい。また、制御部２１０は、カーソルＣと２番目に距離が近いアイコンＩ１およびアイコンＩ３を当該距離に応じた大きさで表示させてもよい。

以上、本実施形態に係る視覚要素の表示態様の変化について一例を述べた。上記のような指示オブジェクトに対する制御によれば、指示オブジェクトに視覚的な変化を与えることで、ユーザが指示オブジェクトを見失う可能性を効果的に低減することができる。また、上記のような操作対象オブジェクトに対する制御によれば、例え指示オブジェクトが表示されない場合であっても、ユーザが表示部３１０に表示される画面上の指示位置や、入力操作の方向をより直感的に把握することが可能となる。

なお、図２を用いた上記の説明では、視覚要素の表示態様の一例として、視覚要素の大きさを制御する場合について述べた。この他、制御部２１０は、視覚要素の一例として、視覚要素の形状を制御してもよい。例えば、制御部２１０は、指示オブジェクトと操作対象オブジェクトとの間の距離が近いほど、指示オブジェクトや操作対象オブジェクトが円形から四角形に近づくように制御してもよい。

また、例えば、制御部２１０は、視覚要素の一例として、視覚要素の色表現を制御してもよい。例えば、制御部２１０は、指示オブジェクトと操作対象オブジェクトとの距離が近いほど、指示オブジェクトや操作対象オブジェクトが規定の彩度、明度、透明度、色相、テクスチャ等に近づくように制御してもよい。

また、図２を用いた上記の説明では、制御部２１０が、複数の操作対象オブジェクトのうち、指示オブジェクトから最も距離が近い操作対象オブジェクトと、指示オブジェクトから２番目に距離が近い操作対象オブジェクトの表示態様を変化させる場合について述べた。一方、表示態様を変化させる操作対象オブジェクトの数は上記の例に限定されない。制御部２１０は、すべての操作対象オブジェクトの表示態様を、それぞれカーソルＣとの距離に応じて変化させてもよい。

以上、本実施形態に係る視覚要素の表示態様の制御について述べた。続いて、本実施形態に係る表示態様の変化と同調した振動の呈示制御について詳細に説明する。本実施形態に係る制御部２１０は、指示オブジェクトや操作対象オブジェクトの表示態様の変化に同調して変化するように、振動呈示部４１０に呈示させる振動の特性を制御する。

上記の振動の特性には、例えば、振動の大きさや、振動の鋭さが挙げられる。例えば、視覚要素の表示態様の変化が、「大きさ」の変化を想起させる場合、本実施形態に係る制御部２１０は、視覚要素の表示態様の変化に同調して変化するように、振動の大きさを上記振動に係る特性として制御してもよい。

「大きさ」の変化を想起させる視覚要素の表示態様には、例えば、図２に示したような視覚要素の大きさ（表示面積）が挙げられる。また、例えば、視覚要素の透明度や明度の変化についても、ユーザが知覚する視覚的な刺激の大きさ（強度）に影響することが想定される。このため、入力に対応して視覚要素の大きさや透明度、明度等が変化する場合には、制御部２１０は、振動の大きさが上記のような表示態様の変化に同調して変化するように制御してもよい。この場合、本実施形態に係る制御部２１０は、例えば、振動に係る周波数の振幅を、振動の大きさとして変化させてもよい。一例として、制御部２１０は、視覚要素が大きいほど振動呈示部４１０に大きな振動を呈示させ、視覚要素が小さいほど振動呈示部４１０に小さな振動を呈示させてもよい。

一方、視覚要素の表示態様の変化が、「鋭さ」の変化を想起させる場合、本実施形態に係る制御部２１０は、視覚要素の表示態様の変化に同調して変化するように、振動の鋭さを振動に係る特性として制御してもよい。

「鋭さ」の変化を想起させる視覚要素の表示態様には、例えば、視覚要素の形状が挙げられる。具体例としては、視覚要素の形状が円形と多角形との間を変化する場合や、視覚要素の形状が次第に細く変化する場合、ユーザが当該形状の変化に「鋭さ」を想起することが想定される。また、例えば、視覚要素の彩度や色相についても、ユーザが感じる「鋭さ」に大きく影響することが想定される。このため、視覚要素が有する上記のような表示態様が変化する場合、制御部２１０は、振動の鋭さが当該表示態様の変化に同調して変化するように制御してもよい。

この場合、例えば、本実施形態に係る制御部２１０は、振動に係る周波数の高低を、振動の鋭さとして変化させてもよい。一例として、視覚要素の形状が円形と四角形との間を変化する場合において、制御部２１０は、視覚要素が円形に近いほど振動呈示部４１０に低い周波数の振動を呈示させ、視覚要素が四角形に近いほど振動呈示部４１０に高い周波数の振動を呈示させてもよい。

また、例えば、制御部２１０は、制御目標として振動呈示部４１０に入力する振動波形の形状の種別を、振動の鋭さとして変化させてもよい。一例として、視覚要素の形状が円形と四角形との間を変化する場合において、制御部２１０は、視覚要素が円形に近い場合、振動呈示部４１０に入力する振動波形を正弦波とし、視覚要素が四角形に近い場合、振動呈示部４１０に入力する振動波形を非正弦波（例えば、鋸歯や三角波）としてもよい。

以上説明したように、本実施形態に係る制御部２１０は、変化する視覚要素の表示態様に応じた振動の特性を制御することで、視覚要素の表示態様と振動の呈示態様とを同調させる。この際、本実施形態に係る制御部２１０は、例えば、視覚要素の表示態様が規定の態様となった場合に、当該規定の態様と同調した呈示態様を有する振動を振動呈示部４１０に呈示させてもよい。

図３は、図２に示す視覚要素の表示態様の変化と同調した振動呈示の一例について説明するための図である。図３には、図２に示すタイミングＴ１〜Ｔ５における振動呈示の有無と、呈示される振動の大きさや鋭さを表すグラフが示されている。

本実施形態に係る制御部２１０は、例えば、表示部３１０に表示される画像上での操作対象オブジェクトとの相対位置に応じて変化する指示オブジェクトの表示態様に同調して振動に係る特性を変化させてもよい。例えば、図２に示す一例の場合、制御部２１０は、最も距離が近いアイコンとの相対位置に応じて変化するカーソルＣの表示態様に同調して振動に係る特性を変化させる。

また、この際、本実施形態に係る制御部２１０は、表示部３１０に表示される画像上において、少なくとも、操作対象オブジェクトの一つと指示オブジェクトとの距離が第１の閾値を超えた場合、および当該距離が第２の閾値を下回った場合に、指示オブジェクトの表示態様に同調した振動を振動呈示部に呈示させてもよい。

例えば、図２に示すタイミングＴ２においては、アイコンＩ１とカーソルＣとの距離が上記第１の閾値以下であり、タイミングＴ３において上記距離が第１の閾値を超える場合、制御部２１０は、図３に示すように、タイミングＴ３において振動が呈示されるように振動呈示部４１０を制御する。また、この際、カーソルＣは、規定される最小の大きさで表示されていることから、制御部２１０は、振動呈示部４１０に比較的小さな振動を呈示させる。

また、図２に示すタイミングＴ４においては、アイコンＩ１とカーソルＣとの距離が上記第２の閾値以上であり、タイミングＴ５において上記距離が第２の閾値を下回る場合、制御部２１０は、図３に示すように、タイミングＴ５において振動が呈示されるように振動呈示部４１０を制御する。また、この際、カーソルＣは、規定される最大の大きさで表示されていることから、制御部２１０は、振動呈示部４１０に比較的大きさの振動を呈示させる。

上記のような制御によれば、カーソルＣの大きさが最大となったタイミングで大きな振動を、カーソルＣの大きさが最小となったタイミングで小さな振動を呈示することで、視覚要素の表示態様と同調した振動呈示を実現し、ユーザが感じ得る違和感を効果的に低減することができる。

なお、上記では、カーソルＣの大きさが最大あるいは最小の場合に振動を呈示させる場合を例に述べた。一方、振動を呈示させるタイミングと回数は上記の例に限定されない。制御部２１０は、例えば、図２に示すタイミングＴ２やタイミングＴ４において、中程度の大きさの振動を振動呈示部４１０に呈示させてもよい。

また、カーソルＣの表示態様の変化が、例えば、形状変化のように、「鋭さ」を想起させる変化である場合、制御部２１０は、カーソルＣの表示態様の変化に同調した鋭さを有する振動を上記のようなタイミングで振動呈示部４１０に呈示させてよい。

一方、本実施形態に係る制御部２１０は、例えば、視覚要素の表示態様の連続した変化に同調して、連続的に呈示態様が変化する振動を振動呈示部４１０に呈示させてもよい。

図４は、本実施形態に係る視覚要素の表示制御の一例を示す図である。図４には、操作部１１０を介して受け付けた入力に対応して変化する視覚要素の表示態様が最上段から最下段にかけて時系列に示されている。タイミングＴ６では、カーソルＣの表示位置がアイコンＩ１の表示位置と一致しており、制御部２１０が、アイコンＩ１を規定される最大の大きさで表示させる。同様に、制御部２１０は、タイミングＴ７においてアイコンＩ２を、タイミングＴ８においてアイコンＩ３を、タイミングＴ９においてアイコンＩ４を、タイミングＴ１０においてアイコンＩ５を、それぞれ規定される最大の大きさで表示させる。

なお、作図を省略しているが、各タイミングの間においてカーソルＣおよび各アイコンは、図２に示したように、カーソルＣと各アイコンとの相対的な距離に応じて大きさが変化するものとする。

この場合、例えば、本実施形態に係る制御部２１０は、表示部３１０に表示される画像上での指示オブジェクトの相対位置に応じて変化する操作対象オブジェクトの表示態様に同調して振動に係る特性を変化させてもよい。例えば、制御部２１０は、カーソルＣの相対位置に応じて変化するアイコンの大きさに同調して振動の大きさを変化させてもよい。

また、この際、本実施形態に係る制御部２１０は、少なくとも一つの操作対象オブジェクトのうち最も表示態様の変化量が大きい操作対象オブジェクトの表示態様に同調した振動を連続的に振動呈示部４１０に呈示させてもよい。

図５は、図４に示す視覚要素の表示態様の変化と同調した振動呈示の一例について説明するための図である。図５には、図４に示すタイミングＴ１からタイミングＴ１０にかけての振動の大きさや振動の鋭さの時系列変化を表すグラフが示されている。

図５に示すように、本実施形態に係る制御部２１０は、タイミングＴ６、タイミングＴ７、タイミングＴ８、タイミングＴ９、およびタイミングＴ１０で振動の大きさが最大となり、各タイミングの間において振動の大きさが最小となる振動を連続的に振動呈示部４１０に呈示させてもよい。

上記のような制御によれば、入力の受付に伴い大きさが変化するアイコンのうち、最も大きく表示されるアイコンに同調した大きさの振動を呈示することができ、視覚要素の演出と呈示する振動との統一感を効果的に高めることが可能となる。

なお、各アイコンの表示態様の変化が、例えば、形状変化のように、「鋭さ」を想起させる変化である場合、制御部２１０は、各アイコンの表示態様の変化に同調した鋭さを有する振動を上記のように連続的に振動呈示部４１０に呈示させてよい。

＜動作の流れ＞
次に、本実施形態に係るシステム１の動作の流れについて詳細に述べる。図６は、本実施形態に係るシステム１の動作の流れを示すフローチャートである。

まず、検出部１２０が操作部１１０を介した入力を検出し、当該入力の受付を行う（Ｓ１０２）。

次に、制御部２１０は、ステップＳ１０２において受け付けられた入力に対応した視覚要素の表示態様の変化に同調した振動の呈示態様を決定する（Ｓ１０４）。なお、この際、制御部２１０は、入力に対応した視覚要素の表示対応を決定し、当該表示態様に基づいて表示部３１０による視覚要素の表示を制御してもよい。

次に、制御部２１０は、ステップＳ１０４において決定した呈示態様に基づいて振動呈示部４１０による振動の呈示を制御する（Ｓ１０６）。

＜補足＞
以上、添付図面を参照しながら本発明の好適な実施形態について詳細に説明したが、本発明はかかる例に限定されない。本発明の属する技術の分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本発明の技術的範囲に属するものと了解される。

例えば、上記の実施形態では、視覚要素がユーザによる意識的な入力に応じて変化する場合を主な例として説明した。一方、視覚要素はユーザにより無意識的な入力や、環境変化に伴う入力、対象とする装置の状態変化に伴う入力に応じて変化してもよい。例えば、視覚要素は、入力装置１０等とユーザとの間の距離を入力として変化してもよい。また、例えば、視覚要素は、環境音の大きさや気温の変化等を入力として変化してもよい。また、例えば、視覚要素は、システム１が搭載される車両の速度等を入力として変化してもよい。このような場合であっても、上述した制御手法によれば、視覚要素の変化と同調した振動の呈示を実現することが可能である。

また、本明細書において説明した各装置による一連の処理は、ソフトウェア、ハードウェア、及びソフトウェアとハードウェアとの組合せのいずれを用いて実現されてもよい。ソフトウェアを構成するプログラムは、例えば、各装置の内部又は外部に設けられる記録媒体（非一時的な媒体：ｎｏｎ−ｔｒａｎｓｉｔｏｒｙ ｍｅｄｉａ）に予め格納される。そして、各プログラムは、例えば、コンピュータによる実行時にＲＡＭに読み込まれ、ＣＰＵなどのプロセッサにより実行される。上記記録媒体は、例えば、磁気ディスク、光ディスク、光磁気ディスク、フラッシュメモリ等である。また、上記のコンピュータプログラムは、記録媒体を用いずに、例えばネットワークを介して配信されてもよい。

１：システム、１０：入力装置、１１０：操作部、１２０：検出部、２０：制御装置、２１０：制御部、２２０：記憶部、３０：表示装置、３１０：表示部、４０：振動呈示装置、４１０：振動呈示部

Claims (14)

1. 操作部を介して受け付けた入力に対応して表示態様が変化する視覚要素に対する前記入力を受け付けたと判定された場合、振動呈示部に前記入力と対応した振動を呈示させる制御部、
   を備え、
   前記制御部は、前記振動の呈示態様が前記視覚要素の表示態様の変化に同調して変化するように前記振動に係る特性を制御する、
   制御装置。
2. 前記制御部は、前記視覚要素の表示態様の変化に同調して変化するように、前記振動の大きさを前記振動に係る特性として制御する、
   請求項１に記載の制御装置。
3. 前記制御部は、前記振動に係る周波数の振幅を、前記振動の大きさとして変化させる、
   請求項２に記載の制御装置。
4. 前記制御部は、前記視覚要素の表示態様の変化に同調して変化するように、前記振動の鋭さを前記振動に係る特性として制御する、
   請求項２に記載の制御装置。
5. 前記制御部は、前記振動に係る周波数の高低を、前記振動の鋭さとして変化させる、
   請求項４に記載の制御装置。
6. 前記制御部は、制御目標として前記振動呈示部に入力する振動波形の形状の種別を、前記振動の鋭さとして変化させる、
   請求項４に記載の制御装置。
7. 前記視覚要素の表示態様は、前記視覚要素の大きさ、形状、または色表現のうち少なくともいずれかを含む、
   請求項１〜請求項６のうちいずれか一項に記載の制御装置。
8. 前記視覚要素は、表示部に表示される要素であり、前記操作部を介して入力を受け付ける対象である少なくとも一つの操作対象オブジェクト、または前記操作部を介して受け付けた入力に基づいて決定される指示位置を示す指示オブジェクトのうち少なくともいずれかを含む、
   請求項１〜請求項７のうちいずれか一項に記載の制御装置。
9. 前記制御部は、前記表示部に表示される画像上での前記操作対象オブジェクトとの相対位置に応じて変化する前記指示オブジェクトの表示態様に同調して前記振動に係る特性を変化させる、
   請求項８に記載の制御装置。
10. 前記制御部は、前記表示部に表示される画像上において、少なくとも、前記操作対象オブジェクトの一つと前記指示オブジェクトとの距離が第１の閾値を超えた場合、および当該距離が第２の閾値を下回った場合に、前記指示オブジェクトの表示態様に同調した前記振動を前記振動呈示部に呈示させる、
    請求項９に記載の制御装置。
11. 前記制御部は、前記表示部に表示される画像上での前記指示オブジェクトとの相対位置に応じて変化する前記操作対象オブジェクトの表示態様に同調して前記振動に係る特性を変化させる、
    請求項８に記載の制御装置。
12. 前記制御部は、少なくとも一つの前記操作対象オブジェクトのうち最も表示態様の変化量が大きい前記操作対象オブジェクトの表示態様に同調した前記振動を連続的に前記振動呈示部に呈示させる、
    請求項１１に記載の制御装置。
13. コンピュータに、
    操作部を介して受け付けた入力に対応して表示態様が変化する視覚要素に対する前記入力を受け付けたと判定された場合、振動呈示部に前記入力と対応した振動を呈示させる制御機能、
    を実現させ、
    前記制御機能に、前記振動の呈示態様が前記視覚要素の表示態様の変化に同調して変化するように前記振動に係る特性を制御させる、
    プログラム。
14. 操作部を介して受け付けた入力に対応して表示態様が変化する視覚要素を表示する表示装置と、
    振動を呈示する振動呈示装置と、
    前記視覚要素に対する前記入力を受け付けたと判定された場合、振動呈示装置に前記入力と対応した振動を呈示させる制御装置と、
    を備え、
    前記制御装置は、前記振動の呈示態様が前記視覚要素の表示態様の変化に同調して変化するように前記振動に係る特性を制御する、
    システム。

Images