JP2013196465A - オブジェクト選択時に触覚応答が付与されるユーザインタフェース装置、触覚応答付与方法及びプログラム - Google Patents

Abstract

【課題】指の操作感覚に適合しており、誤操作を抑制可能な触覚応答を指に付与するユーザインタフェース装置を提供する。
【解決手段】本ユーザインタフェース装置は、指に対して触覚応答を付与する触覚応答機構部と、指の接触位置が、接触した当初オブジェクトの表示位置範囲に重畳しているか否かを判定する第１接触位置判定手段と、指の接触位置が、オブジェクトの表示位置範囲外からこの表示位置範囲内に入ったか否かを判定する第２接触位置判定手段と、第１接触位置判定手段が真の判定を行った際、触覚応答の付与停止を維持し、第２接触位置判定手段が真の判定を行った際、指に対して触覚応答を付与させる触覚応答制御手段と、第１接触位置判定手段又は第２接触位置判定手段が真の判定を行った際、オブジェクトを選択する操作が行われたと判定し、対応する動作を発動させる操作判定制御手段とを有する。
【選択図】図５

Description

本発明は、画像を表示するディスプレイと、指による操作を可能とするタッチパネルとを備えたユーザインタフェース装置に関する。

従来、タッチパネルを搭載したユーザインタフェース装置が広く普及している。特に、近年、スマートフォン、タブレット型コンピュータ、電子書籍、ＰＤＡ(Personal Digital Assistant)のようなユーザインタフェース装置、いわゆる携帯型情報機器では、指の接触による操作を受け入れるユーザインタフェースとしてタッチパネルが積極的に採用されている。

タッチパネルを採用すると、機器の多機能化に対応した様々な入力操作が可能となる。しかしながらその一方で、物理キーと比較すると、誤った入力操作が生じやすい傾向にある。具体的には、ユーザが意図せずにタッチパネルに触れた場合でも入力操作が発生したり、ユーザが入力操作を行った積もりでも所望の機能が発動せずやり直しの操作が必要となったりする。

この誤操作の問題に対処する方策として、操作を行った指に対して振動等による触覚応答を付与する技術が存在する。ユーザは、自ら行う操作に対する応答（フィードバック）を得ることを目安として操作を行うことができ、また、この応答を指で得て、操作の完了を確認することができる。

例えば、特許文献１には、同時に生じる複数の接触を検出可能なマルチタッチパネルを振動させ、タッチ確認のフィードバックを行うタッチパネル装置が開示されている。この装置では、１本目の指がタッチした際、第１の振動が指に付与され、１本目の指がタッチ継続中に２本目の指がタッチした際、第１の振動よりも振動レベルの大きい第２の振動を付与する。

また、特許文献２には、タッチパネルの検出面上に割り当てられた複数のボタン領域の１つに触れた際に、このボタン領域に設定された報知形態で報知を行う入力装置が開示されている。ここで、この報知形態は、振動、音、色及び明るさのいずれか１つ又はこれらの組合せとされている。

特開２０１０−５５２８２号公報 特開２０１０−９３２１号公報

しかしながら、上述したような従来技術を用いても、尚、タッチパネルに対する指での操作性を高めて誤操作を抑制する課題が十分に解決されていない。

特に、携帯型情報機器では、その携帯性から機器サイズ、更にはディスプレイの画面サイズが限定される。その結果、この画面に、操作対象である多数のオブジェクト（アイコン、リンク等）が密集して表示される場合も希ではない。このような状況では、密集したオブジェクトの１つに指で接触して選択し分ける必要が生じる。

例えば、ウェブブラウザが起動しており、リンクの多数配列した画面が表示される場合、指を１つのリンクの表示位置範囲内に接触させてリンクを選択し、このリンクの機能を発動させる（このリンク先の文書又は画像等を閲覧する）。しかしながら、リンクが密集しているため、指が実際にいずれのリンクを選択しているかが非常に分かり難い。従って、意図しないリンクを選択し発動させてしまう誤操作が生じがちとなる。

ここで、単に上述したような触覚応答（振動）を指に付与しても、このような誤操作の解決にはならない。例えば、当初、指が所望のリンクではないリンクに接触し、この段階で、指に触覚応答が付与されるのであれば、所望のリンクの選択に成功したか否かが全く不明確となる。また、リンクの選択時だけでなく、リンクの発動時にも触覚応答を付与する場合、指がリンクに接触してそのままリンクを発動させる際、２回の触覚応答が発生してしまい、指の操作感覚に適合しない。その結果、操作が確実に行われたか否かの判断がつき難くなる。

そこで、本発明は、指の操作感覚に適合しており、誤操作を抑制可能な触覚応答を指に付与するユーザインタフェース装置、触覚応答付与方法及びプログラムを提供することを目的とする。

本発明によれば、操作対象であるオブジェクトを含む画像を表示するディスプレイと、このディスプレイの画面上に配置され、指の接触位置を時間経過に応じて逐次出力するタッチパネルとを備えたユーザインタフェース装置であって、
タッチパネルに接触した当該指に対して触覚応答を付与する触覚応答機構部と、
当該指の接触位置が、接触した当初、当該オブジェクトの表示位置範囲に重畳しているか否かを判定する第１接触位置判定手段と、
当該指の接触位置が、当該オブジェクトの表示位置範囲外からこの表示位置範囲内に入ったか否かを判定する第２接触位置判定手段と、
第１接触位置判定手段が真の判定を行った際、触覚応答の付与停止を維持すべく触覚応答機構部を制御する触覚応答制御手段と、
第１接触位置判定手段又は第２接触位置判定手段が真の判定を行った際、当該オブジェクトを選択する操作が行われたと判定し、対応する動作を発動させる操作判定制御手段と
を有しており、
触覚応答制御手段は、第２接触位置判定手段が真の判定を行った際、当該指に対してタッチパネルを介して触覚応答を付与すべく触覚応答機構部を制御する
ことを特徴とするユーザインタフェース装置が提供される。

この本発明によるユーザインタフェース装置の一実施形態によれば、タッチパネルに接触した当該指によって与えられる押圧力を検出する押圧力検出部と、
押圧力が所定閾値以上であるか否かを判定する押圧力判定手段と
を更に有しており、
操作判定制御手段は、第２接触位置判定手段が真の判定を行い且つ押圧力判定手段が真の判定を行った際、当該オブジェクトの機能を発動させる操作が行われたと判定し、対応する動作を発動させ、
触覚応答制御手段は、第２接触位置判定手段が真の判定を行い且つ押圧力判定手段が真の判定を行った際、当該指に対してタッチパネルを介して触覚応答を付与すべく触覚応答機構部を制御する
ことも好ましい。

また、本発明によるユーザインタフェース装置の他の実施形態によれば、当該指の接触位置が、所定時間以上継続して変化しなかったか否かを判定する接触時間判定手段と、
接触時間判定手段が真の判定を行った際、当該オブジェクトを含む画像全体を移動させることなく固定した状態で当該指の接触位置をモニタする「タッチフォーカス」モードを動作させるモード動作手段と
を更に有しており、
触覚応答制御手段は、「タッチフォーカス」モードの動作下で、第２接触位置判定手段が真の判定を行った際、当該指に対してタッチパネルを介して触覚応答を付与すべく触覚応答機構部を制御する
ことも好ましい。

さらに、本発明によるユーザインタフェース装置の他の実施形態によれば、ディスプレイに表示された画像は、操作対象であるオブジェクトとしての複数のリンクを含むブラウザの表示画像であることも好ましい。

また、本発明によるユーザインタフェース装置によれば、
触覚応答制御手段は、ユーザの操作から見て、
当該指を当該オブジェクトの表示位置範囲内に接触させた際、触覚応答を当該指に付与せず、
次いで、当該指を接触させたまま移動させて、当該指の接触位置を当該オブジェクトの表示位置範囲外に離脱させ、その後、当該指の接触位置が当該オブジェクト又は別のオブジェクトの表示位置範囲内に入った際、触覚応答を付与すべく触覚応答機構部を制御する
ことも好ましい。

本発明によれば、さらに、操作対象であるオブジェクトを含む画像を表示するディスプレイと、このディスプレイの画面上に配置され、指の接触位置を時間経過に応じて逐次出力するタッチパネルとを備えたユーザインタフェース装置に搭載されたプログラムであって、
タッチパネルに接触した当該指に対して触覚応答を付与する触覚応答機構部と、
当該指の接触位置が、接触した当初、当該オブジェクトの表示位置範囲に重畳しているか否かを判定する第１接触位置判定手段と、
当該指の接触位置が、当該オブジェクトの表示位置範囲外からこの表示位置範囲内に入ったか否かを判定する第２接触位置判定手段と、
第１接触位置判定手段が真の判定を行った際、触覚応答の付与停止を維持すべく触覚応答機構部を制御し、第２接触位置判定手段が真の判定を行った際、当該指に対してタッチパネルを介して触覚応答を付与すべく触覚応答機構部を制御する触覚応答制御手段と、
第１接触位置判定手段又は第２接触位置判定手段が真の判定を行った際、当該オブジェクトを選択する操作が行われたと判定し、対応する動作を発動させる操作判定制御手段と
してコンピュータを機能させるユーザインタフェース装置用のプログラムが提供される。

本発明によれば、さらにまた、操作対象であるオブジェクトを含む画像を表示するディスプレイと、このディスプレイの画面上に配置され、指の接触位置を時間経過に応じて逐次出力するタッチパネルとを備えたユーザインタフェース装置における触覚応答付与方法であって、
ユーザインタフェース装置が、タッチパネルに接触した当該指に対して触覚応答を付与する触覚応答機構部を備えており、
触覚応答付与方法が、
当該指の接触位置が、接触した当初、当該オブジェクトの表示位置範囲に重畳しているか否かを判定する第１のステップと、
第１のステップで真の判定がなされた際、触覚応答の付与停止を維持する第２のステップと、
第１のステップで真の判定がなされた際、当該オブジェクトを選択する操作が行われたと判定し、対応する動作を発動させる第３のステップと、
第１のステップで偽の判定がなされた後、当該指の接触位置が、当該オブジェクトの表示位置範囲外からこの表示位置範囲内に入ったか否かを判定する第４のステップと、
第４のステップで真の判定がなされた際、当該指に対してタッチパネルを介して触覚応答を付与する第５のステップと、
第４のステップで真の判定がなされた際、当該オブジェクトを選択する操作が行われたと判定し、対応する動作を発動させる第６のステップと
を有する触覚応答付与方法が提供される。

本発明のユーザインタフェース装置、触覚応答付与方法及びプログラムによれば、指の操作感覚に適合しており、誤操作を抑制可能な触覚応答を指に付与することができる。

「タッチフォーカス」モードを説明するための、携帯型情報機器の前面図、及び指による操作の概略図である。 「クリック」操作を説明するための、携帯型情報機器の前面図、及び指による操作の概略図である。 本発明による触覚応答に係る一実施形態を説明するための、携帯型情報機器の前面図、及び指による操作の概略図である。 「ドラッグ」モードを説明するための、携帯型情報機器の前面図、及び指による操作の概略図である。 本発明による携帯型情報機器の一実施形態を示す機能構成図である。 本発明による触覚応答付与方法の一実施形態を示すフローチャートである。 本発明によるユーザインタフェース装置の他の実施形態を示す概略図である。

以下、本発明の実施形態について、図面を用いて詳細に説明する。

本発明が対象とするユーザインタフェース装置では、ユーザの指がタッチパネルに接触することによって情報が入力される。そのため、当該装置の多くは、手で携帯して操作可能である、スマートフォンやタブレット型コンピュータのような携帯型情報機器である。従って、以下、本発明の一実施形態として、携帯型情報機器を説明する。

本発明による携帯型情報機器では、操作対象であるオブジェクト（アイコン、リンク等）が表示された画面（タッチパネル）に指を接触させ、その接触位置を移動させて、操作を行う。この際、実行可能な操作には、オブジェクトを選択する操作、及びオブジェクトの機能を発動させる操作、が挙げられる。

以下、このような操作を実行可能とする入力モードを動作させる携帯型情報機器を用いて、本発明の説明を行う。尚、当然に、本発明は、以下に説明する入力モード（「タッチフォーカス」モード）に限定されるものではない。例えば、指を接触させながらスライドさせても画像全体が移動せず、位置の固定されたオブジェクトに指が接触可能な状態ならば、本発明が適用可能である。

本発明による携帯型情報機器の一実施形態では、指のタッチパネルへの接触及びその後の接触したままの移動動作（接触及び移動動作）を受け付けた際、単純にそのままドラッグ操作として認定せずに、種々の操作が可能な入力モードを設定する。具体的には、タッチパネル上での指の接触位置が所定時間以上継続して変化しなかったか否かによって、「タッチフォーカス」モード及び「ドラッグ」モードのいずれかを動作させる。それぞれの入力モードは、以下の通りである。
（ａ）「タッチフォーカス」モード：表示された画像全体を移動させることなく固定した状態で指の接触位置をモニタするモード。
（ｂ）「ドラッグ」モード：表示された画像全体を移動させるモード。
本発明の特徴は、このように指が位置を変化させずに接触していた時間を判定し、この判定結果に基づいてそれぞれの入力モードを決定し動作させることにある。

ここで、「画像全体」とは、ディスプレイの画面に表示された全画像のうち、（スクロールを含む）移動の対象となる部分である。当然に、表示された全画像でもあり得る。例えば、一画面に収まり切らない情報は、画面外に隠れている（とされる）部分を有している。この部分を表示させる際には、この情報の表示された部分は、移動対象となる。

図１は、「タッチフォーカス」モードを説明するための、携帯型情報機器の前面図、及び指による操作の概略図である。

図１（Ａ）は、携帯型情報機器１の前面図である。この前面図によれば、ディスプレイ１０１の画面に、複数のアイコン（オブジェクト）１０４を含む画像が表示されている。アイコン１０４は、ユーザにとって操作対象であり、後述する所定の操作によって選択され、さらにその機能を発動させられる。また、ディスプレイ１０１の画面上に、指の接触位置を時間経過に応じて逐次出力するタッチパネル１００が配置されている。

以下、図１（Ａ）を用いて「タッチフォーカス」モードを説明する。図１（Ａ）によれば、ユーザの指が、タッチパネル１００に接触し、所定時間以上接触位置を維持した後、接触を保ちながらタッチパネル１００上をなぞるように移動（スライド）している。しかしながら、従来のドラッグ操作とは異なり、アイコン１０４を含む画像全体は、指の移動にもかかわらず移動せず、固定された状態となっている。

従って、ユーザは、指を接触させたまま移動させ、位置が固定されたアイコン１０４に順次触れていくことができる。また、後述する接触位置判定部１２２（図５）が、指の移動中も、指の接触位置とアイコン１０４の表示位置範囲とが重畳したか否かを判定している。このように画像全体を移動させることなく固定した状態で指の接触位置をモニタするモードが、「タッチフォーカス」モードである。

「タッチフォーカス」モードは、例えば、表示された画像内に所望のアイコン１０４が存在する際に、その表示位置範囲の近傍に指を接触させ、その後、指の接触位置を移動させながらこの表示位置範囲に確実に重畳させたい場合に動作する。また、アイコン１０４の表示位置範囲内に指を接触させ、このアイコン１０４を直ちに選択したい場合にも動作する。さらに、指でタッチパネル１００の表面（表示された画像）をなぞりつつ、表示された画像内に所望のアイコン１０４が存在するか否かを確かめながら、所望のアイコン１０４の表示位置範囲まで指を確実に進めたい場合にも動作する。

図１（Ｂ）は、上述した「タッチフォーカス」モードが動作する条件を説明するための、指による操作の概略図である。この概略図によれば、最初に、指がタッチパネル１００に接触する。この時刻をｔ_０とする（ｔ＝ｔ_０）。次いで、指は、接触位置を変化させずに接触したままの状態から、同じく接触したまま上側（図１（Ｂ）では左側）に移動（スライド）を開始する。この移動を開始する時刻をｔ_Ｓ２とする（ｔ＝ｔ_Ｓ２）。この場合、指の接触位置は、時間（ｔ_Ｓ２−ｔ_０）だけ継続して変化しなかったことになる。

この時間（ｔ_Ｓ２−ｔ_０）が所定時間ｔ_ＴＨ以上の場合、即ち、
（１） （ｔ_Ｓ２−ｔ_０）≧ｔ_ＴＨ
の条件が満たされる場合に、後述するモード動作部１２４（図５）が、「タッチフォーカス」モードを動作させる。その後、アイコン１０４を含む画像全体は、指の移動にもかかわらず、移動することなく固定される。尚、上述したｔ_Ｓ２−ｔ_０≧ｔ_ＴＨの条件が満たされれば、指の接触位置がその後も継続して移動しない場合でも、「タッチフォーカス」モードは動作する。また、一実施例として、ｔ_ＴＨ値は、２００ｍｓｅｃに設定可能である。

同じく図１（Ｂ）に示すように、ユーザは、表示された画像をなぞりながら、指を移動させている。その後、所望のアイコン１０４を探し出し、その表示位置範囲内に指を進めている。このように、「タッチフォーカス」モードの動作下、指の接触位置をアイコン１０４の表示位置範囲に重畳させる操作を、以後、「フォーカス」操作と称する。

尚、アイコン１０４の表示位置範囲内に指を接触させ、所定時間ｔ_ＴＨ後も継続して指の接触位置をこの表示位置範囲と重畳させておく操作も、「フォーカス」操作に含まれる。「フォーカス」操作は、ユーザがアイコン１０４を選択する操作であり、その後のアイコン１０４の機能を発動させる操作を確実に行うための準備動作としての役割を果たす。

また、「タッチフォーカス」モード（「フォーカス」操作）は、指をタッチパネル１００から離すことによって解除されることも好ましい。

以上述べたように、本実施形態では、指の接触位置が所定時間ｔ_ＴＨ以上継続して変化しなかったか否かを判定して入力モードの決定を行う。その結果、指の接触及び移動動作によっても、ドラッグ操作ではなく、「タッチフォーカス」モードを容易に動作させることができる。また、この「タッチフォーカス」モードでは、画像全体を移動させず、タッチパネル１００上をなぞるように指を動かすことができるので、所望のアイコン１０４を選択する「フォーカス」操作を確実に実行させることができる。

ここで、指の接触位置が移動して、アイコン１０４の表示位置範囲外から表示位置範囲内に入った際、後述する触覚応答機構部１０２（図５）が、指に触覚応答（振動）を付与する。これにより、ユーザは、「フォーカス」操作が受け入れられたことを確認でき、安定した確実な操作感を得ることができる。

この際、触覚応答として、物理的な押下ボタンの存在を感じさせる振動を与えることも可能である。このような振動の例として、以下のものが挙げられる。最初に、アイコン１０４があたかも高さ（画面に垂直な方向の厚み）を有するかのように、アイコン１０４の表示位置範囲の各点に高さ情報を付与する。その後、指がアイコン１０４の表示位置範囲に差し掛かり当該範囲内に入って以降、この高さ情報から算出された勾配の大きさに応じた強度の振動を指に付与する。これにより、指は、飛び出た押下ボタンをなぞったような感触を受ける。

図２は、「クリック」操作を説明するための、携帯型情報機器の前面図、及び指による操作の概略図である。

図２（Ａ）は、携帯型情報機器１の前面図である。この前面図によれば、「タッチフォーカス」モードの動作下で、指が、接触したまま、タッチパネル１００上をなぞるように移動している。その後、指は所望のアイコン１０４の位置まで進み、その結果、指の接触位置がアイコン１０４の表示位置範囲と重畳する。この状態から、ユーザが指をより強く押し込むと、アイコン１０４の機能が発動する。このアイコン１０４の機能を発動させるために指でアイコン１０４（タッチパネル１００）を押圧する操作を、以後、「クリック」操作と称する。

図２（Ｂ）は、「クリック」操作と判定される条件を説明するための、指による操作の概略図である。この概略図によれば、「タッチフォーカス」モードの動作下で、指が、タッチパネル１００上をなぞるように移動し、指の接触位置が、所望のアイコン１０４の表示位置範囲と重畳する。即ち「フォーカス」操作が行われる。

この際、上述したように、後述する触覚応答機構部１０２（図５）が、指に、触覚応答（振動）ｖ_１を付与する。

次いで、この状態から、ユーザが指をより強く押し込み、指による押圧力ｐ_Ｃが所定の押圧力閾値ｐ_ＴＨ以上となる場合、即ち、押圧力ｐ_Ｃが、
（２） ｐ_Ｃ≧ｐ_ＴＨ
の条件式を満たす場合、「クリック」操作が行われたと判定され、アイコン１０４の機能が発動する。このように、押圧力ｐ_Ｃが押圧力閾値ｐ_ＴＨ以上であることが、「クリック」操作と判定される条件となる。なお、押圧力ｐ_Ｃの測定は、後述する押圧力検出部１０３（図５）で行われる。

ここで、後述する触覚応答機構部１０２（図５）が、指に、触覚応答（振動）ｖ_２を付与する。即ち、ユーザは、接触させた指をアイコン１０４の表示位置範囲内に入れた際、振動ｖ_１を受けて「フォーカス」操作が受け入れられたことを確認し、この触覚に基づき確信をもって押し込み操作を行った際に、振動ｖ_２を受ける。尚、振動ｖ_１と振動ｖ_２とは、例えば、周波数、振幅、又は振動時間の点で互いに異なる振動である。その結果、ユーザは、「フォーカス」操作に引き続き「クリック」操作も受け入れられたことを確認でき、安定した確実な操作感を得ることができる。

図３は、本発明による触覚応答に係る一実施形態を説明するための、携帯型情報機器の前面図、及び指による操作の概略図である。

図３（Ａ）は、携帯型情報機器１の前面図である。この前面図によれば、指が最初にアイコン１０４（タッチパネル１００）に接触し、「タッチフォーカス」モードの動作下で、このアイコン１０４を選択する「フォーカス」操作が実行される。

ここで、図３（Ｂ）に示すように、「フォーカス」操作と判定されたにもかかわらず、この指には触覚応答が付与されない。次いで、指が接触したまま移動し、指の接触位置が、隣のアイコン１０４の表示位置範囲に重畳した際、再度、「フォーカス」操作との判定がなされる。この際、この指に触覚応答（振動）ｖ_１が付与される。

触覚応答は、これ以降、指が移動して指の接触位置がアイコン１０４の表示位置範囲に重畳する毎に、即ち、指の接触位置がアイコン１０４の表示位置範囲外から表示域範囲内に入る毎に、付与される。

尚、指が最初にアイコン１０４の表示位置範囲外に接触した場合、当然に、触覚応答は付与されない。この場合でも、その後、指が接触したまま移動し、指の接触位置が最初に遭遇したアイコン１０４の表示位置範囲内に入った際、触覚応答（振動）ｖ_１が付与される。

以上に述べたような触覚応答は、特に、図３（Ａ）に示したように文字等入力用のキー配列をイメージして、複数のアイコン１０４が密集して配置されている場合、ユーザの操作感覚に適合する。実際、文字等入力用のキーイメージである複数のアイコン１０４に対しては、指が直接上から接触し（「フォーカス」操作）、そのまま押し込む（「クリック」操作）場合も多い。この際、最初の「フォーカス」操作においても、その直後の「クリック」操作においても触覚応答（振動ｖ_１及びｖ_２）を付与すると、ユーザの操作から見て１回のキー押下（に相当する）動作で、２度振動してしまう。

これに対して、本発明によれば、当初からの「フォーカス」操作では触覚応答（振動）ｖ_１が付与されず、次いでの「クリック」操作においてのみ触覚応答（振動）ｖ_２が付与される。その結果、ユーザの操作から見て、自ら行った１回のキー押下という操作感覚に適合した触覚応答が得られる。

さらに、「タッチフォーカス」モード下では、所望のアイコン１０４を選択する際、取り敢えず指をタッチパネル１００に接触させ、指でなぞるようにして所望のアイコン１０４を探す場合も多い。ここで、指の最初の接触位置は、あくまで取り敢えずの位置であり、「フォーカス」操作、即ちアイコン１０４の選択は意図されていない。従って、指が最初に接触した際の「フォーカス」操作時には触覚応答が付与されないことが、ユーザの操作感覚に非常に適合する。

以上、説明したように、本発明によれば、指の操作感覚に適合しており、誤操作を抑制可能な触覚応答を指に付与することができる。

図４は、「ドラッグ」モードを説明するための、携帯型情報機器の前面図、及び指による操作の概略図である。

図４（Ａ）は、携帯型情報機器１の前面図である。この前面図を用いて「ドラッグ」モードを説明する。図４（Ａ）によれば、ユーザの指が、タッチパネル１００に接触した直後、接触を保ちながら上側に移動（スライド）している。この指の移動に伴って、アイコン１０４を含む画像全体が、指の移動分だけ上側に移動し、幾つかのアイコン１０４が新たに、下側から画面に現れている。このような指によって画像全体を移動させる操作、いわゆるドラッグ操作を可能にするモードが、「ドラッグ」モードである。

「ドラッグ」モードは、例えば、表示された画像内に所望のアイコンが視認されず、所望のアイコンを表示させるべく画像全体を移動させたい場合や、画面にその一部しか表示されていない文書等の情報の続きを閲覧したい場合等に設定される。

図４（Ｂ）は、上述した「ドラッグ」モードが動作する条件を説明するための、指による操作の概略図である。この概略図によれば、最初に、指がタッチパネル１００に接触する。この時刻をｔ_０とする（ｔ＝ｔ_０）。次いで、指は、接触位置を変化させずに接触したままの状態から、同じく接触したまま上側（図４（Ｂ）では左側）に移動（スライド）を開始する。この移動を開始する時刻をｔ_Ｓ１とする（ｔ＝ｔ_Ｓ１）。この場合、指の接触位置は、時間（ｔ_Ｓ１−ｔ_０）だけ継続して変化しなかったことになる。この時間（ｔ_Ｓ１−ｔ_０）が所定時間ｔ_ＴＨ未満の場合、即ち、
（３） （ｔ_Ｓ１−ｔ_０）＜ｔ_ＴＨ
の条件が満たされる場合に、後述するモード動作部１２４（図５）が、「ドラッグ」モードを動作させる。その後、指の移動に伴って、アイコン１０４を含む画像全体が移動する。

図５は、本発明による携帯型情報機器の一実施形態を示す機能構成図である。

図５によれば、携帯型情報機器１は、タッチパネル１００と、ディスプレイ１０１と、触覚応答機構部１０２と、押圧力検出部１０３と、プロセッサ・メモリとを有する。ここで、プロセッサ・メモリは、プログラムを実行することによってその機能を実現させる。

ディスプレイ１０１は、操作対象であるアイコン（オブジェクト）１０４を含む画像を表示する。また、タッチパネル１００は、ディスプレイ１００の画面上に配置されており、ユーザの指の接触位置を時間経過に応じて逐次出力する。このタッチパネル１００として、投影型静電容量方式タッチパネル、表面型静電容量方式タッチパネル、抵抗膜方式タッチパネル、超音波表面弾性波方式タッチパネル、又は赤外線走査方式タッチパネル等を採用することができる。

触覚応答機構部１０２は、タッチパネル１００に接触した指に対して、タッチパネル１００を振動させることにより、触覚応答を付与する。例えば、タッチパネル１００に対して「フォーカス」操作が行われた際に、振動ｖ_１（図２（Ｂ））を指に付与する。また、「クリック」操作が行われた際に、振動ｖ_２（図２（Ｂ））を指に付与する。触覚応答機構部１０２は、例えば、ＰＺＴ（チタン酸ジルコン酸鉛）等の圧電材料を用いて形成された圧電アクチュエータとすることができる。

押圧力検出部１０３は、指によってタッチパネル１００に与えられる押圧力ｐ_Ｃを検出する。押圧力検出部１０３は、例えば、タッチパネル１００の四隅下に設置されており、指を押し付けられ僅かに撓んだタッチパネル１００が自身に及ぼす押圧の合計を、押圧力ｐ_Ｃとして検出する。この押圧力検出部１０３で検出された押圧力ｐ_Ｃが、所定の押圧力閾値ｐ_ＴＨ以上となる場合（ｐ_Ｃ≧ｐ_ＴＨ）、「クリック」操作が行われたと判定される。押圧力検出部１０３は、例えば、ＰＺＴ等の圧電材料を用いて形成された圧電センサとすることができる。また、圧電アクチュエータで構成された触覚応答機構部１０２を設ける代わりに又は設けると共に、押圧力検出部１０３を触覚応答機構部として利用することも可能である。

プロセッサ・メモリは、タッチパネル１００から出力される指の接触位置信号と、押圧力検出部１０３から出力される押圧力信号とを入力し、これらの信号に基づいて入力モードを動作させ、さらに入力操作を判定して対応する動作を実行させる。次いで、このプロセッサ・メモリの機能構成を説明する。

同じく図５によれば、プロセッサ・メモリは、接触時間判定部１２１と、接触位置判定部１２２と、押圧力判定部１２３と、モード動作部１２４と、操作判定制御部１２５と、触覚応答制御部１２６と、表示制御部１１１と、アプリケーション処理部１１２とを有している。

接触時間判定部１２１は、タッチパネル１００から出力される指の接触位置信号を入力し、指の接触位置が、所定時間ｔ_ＴＨ以上継続して変化しなかったか否かを判定し、この判定結果をモード動作部１２４に出力する。

接触位置判定部１２２は、第１接触位置判定部１２２ａ及び第２接触位置判定部１２２ｂを含む。第１接触位置判定部１２２ａは、タッチパネル１００から出力される指の接触位置信号を入力し、指の接触位置が、接触した当初（及びその後）、アイコン１０４の表示位置範囲に重畳しているか否かを判定する。一方、第２接触位置判定部１２２ｂは、タッチパネル１００から出力される指の接触位置信号を入力し、指の接触位置が、アイコン１０４の表示位置範囲外から表示位置範囲内に入ったか否かを判定する。接触位置判定部１２２は、これらの判定結果を操作判定制御部１２５に出力する。

押圧力判定部１２３は、押圧力検出部１０３から出力される押圧力信号を入力し、指による押圧力が所定の押圧力閾値ｐ_ＴＨ以上であるか否かを判定し、この判定結果を操作判定制御部１２５に出力する。

モード動作部１２４は、接触時間判定部１２１からの判定結果に基づき、入力モードとして「タッチフォーカス」モード及び「ドラッグ」モードのいずれかを決定して動作させる。操作判定制御部１２５は、「タッチフォーカス」モードの動作時に、接触位置判定部１２２からの判定結果に基づいて「フォーカス」操作であるか否かの判定を行い、対応した動作を実行させる。さらに、同じく「タッチフォーカス」モードの動作時に、押圧力判定部１２３からの判定結果に基づいて「クリック」操作であるか否かの判定を行い、対応した動作を実行させる。

触覚応答制御部１２６は、操作判定制御部１２５から出力された操作の判定結果、及び接触位置判定部１２２での判定結果、に基づき、対応する触覚応答を指に対して付与するべく触覚応答機構部１０２を制御する。

具体的には、触覚応答制御部１２６は、第１接触位置判定部１２２ａが真の判定、即ち、指が接触した当初にアイコン１０４の表示位置範囲に重畳しているとの判定、を行った際、触覚応答の付与停止を維持すべく触覚応答機構部１０２を制御する。また、第２接触位置判定部１２２ｂが真の判定、即ち、指の接触位置がアイコン１０４の表示位置範囲外から表示位置範囲内に入ったとの判定、を行った際、指に対してタッチパネル１００を介して触覚応答を付与すべく触覚応答機構部１０２を制御する。

表示制御部１１１は、アプリケーション処理部１１２からのアプリケーション処理情報を入力して、アプリケーションの実行に応じた画像をディスプレイ１０１に表示させる。また、表示制御部１１１は、モード動作部１２４が出力する、「タッチフォーカス」モード又は「ドラッグ」モードを動作させる指示情報を入力し、指示された入力モードに応じた画像をディスプレイ１０１に表示させる。さらに、表示制御部１１１は、操作判定制御部１２５が出力する、入力操作を実行させる指示情報を入力し、指示された入力操作に応じた画像をディスプレイ１０１に表示させる。

図６は、本発明による触覚応答付与方法の一実施形態を示すフローチャートである。

（Ｓ６０１）最初に、指の接触の有無が測定される。
（Ｓ６０２）次いで、指がタッチパネル１００に接触しているか否かが判定される。ここで、真の判定がなされた際、次にステップＳ６０３に移行する。一方、偽の判定がなされた際、ステップＳ６０１に戻り、指の接触の有無がモニタされる。

（Ｓ６０３）接触時間判定部１２１が、所定時間ｔ_ＴＨ以上継続して指の接触位置が変化しなかったか否かを判定する。ここで、指の接触位置は、タッチパネル１００の表面（接触面）に設定されたｘｙ座標系を用いて、１つの座標（ｘ，ｙ）として表される。尚、指の接触を所定の面積を持った接触面として検出する場合もあるが、この場合は、接触面の中心となる位置の座標（中心座標）を接触位置とすることができる。

この指の接触位置は、指をタッチパネル１００に接触させた際に通常発生する指の震えによって、若干変動してしまうことがある。このような場合でも、接触位置の座標の変動分を、補正により除去することができる。また、他の態様として、押圧時の指の震えによる接触位置の座標の変動範囲を予め予測しておき、この変動範囲内の座標変化を、指の接触位置の変化とはみなさない、とすることもできる。いずれにしても、上述した、指の接触位置が継続して変化しなかったか否かの判定から、この指の震えによる変動の影響を除外することができる。即ち、ユーザの意図に沿った操作を、安定して確実に判定することが可能となる。

（Ｓ６０４）接触時間判定部１２１が真の判定、即ち所定時間ｔ_ＴＨ以上継続して指の接触位置が変化しなかったとの判定、を行った際には、モード動作部１２４が、「タッチフォーカス」モードを動作させる。具体的には、アイコン１０４を含む画像全体を移動させることなく固定した状態とし、指の接触位置（タッチパネル１００から出力される指の接触位置信号）をモニタ（監視）する。

（Ｓ６２１）一方、接触時間判定部１２１が偽の判定、即ち所定時間ｔ_ＴＨ経過前に指の接触位置が変化したとの判定、を行った際には、モード動作部１２４が、「ドラッグ」モードを動作させる。具体的には、指によるドラッグ操作によって指定された方向に、アイコン１０４を含む画像全体を移動させ得る状態とする。

以上のステップをユーザの操作から見ると、モード動作部１２４は、指をタッチパネルに接触させた直後にその指を移動させた場合、「ドラッグ」モードを動作させ、指をタッチパネルに接触させ且つ少なくとも所定時間ｔ_ＴＨだけその接触位置を維持した場合、「タッチフォーカス」モードを動作させる。

（Ｓ６１１）次いで、「タッチフォーカス」モードが動作した際、第１接触位置判定部１２２ａは、指の接触位置がアイコン１０４の表示位置範囲に重畳しているか否かを判定する。ここで、真の判定がなされた際、指に触覚応答を付与することなく、ステップＳ６１５に移行し、「フォーカス」操作が行われたと判定する。

（Ｓ６１２）ステップＳ６１１で偽の判定がなされた際、接触位置判定部１２２（第１接触位置判定部１２２ａ）は、指がタッチパネル１００に接触しているか否かを判定する。ここで、偽の判定がなされた際、指がタッチパネル１００から離脱して指による操作が停止したとして、本触覚応答付与方法を終了する。

（Ｓ６１３）ステップＳ６１２で真の判定がなされた際、第２接触位置判定部１２２ｂは、指の接触位置がアイコン１０４の表示位置範囲外から表示位置範囲内に入ったか否かを判定する。ここで、偽の判定がなされた際、ステップＳ６１２に戻り、指の接触の有無、及び指の接触位置の移動がモニタされる。

（Ｓ６１４）触覚応答制御部１２６は、ステップＳ６１３で真の判定がなされた際、指に対してタッチパネル１００を介して触覚応答（振動）ｖ_１を付与すべく触覚応答機構部１０２を制御する。
（Ｓ６１５）操作判定制御部１２５は、ステップＳ６１３で真の判定がなされた際、アイコン１０４を選択する「フォーカス」操作が行われたと判定し、対応する動作を発動させる。この動作として、操作判定制御部１２５が、表示制御部１１１を介して、ディスプレイ１０１に、選択されたアイコン１０４の強調表示を行わせることも可能である。

（Ｓ６１６）次いで、押圧力検出部１０３が、タッチパネル１００に接触した指によって与えられる押圧力ｐ_Ｃを測定する。
（Ｓ６１７）押圧力判定部１２３が、押圧力検出部１０３の検出した押圧力ｐ_Ｃが所定の押圧力閾値ｐ_ＴＨ以上であるか否かを判定する。ここで偽の判定がなされた際、ステップＳ６１１に戻り、「タッチフォーカス」モードでの手順を繰り返す。

（Ｓ６１８）触覚応答制御部１２６は、第２接触位置判定部１２２ｂが真の判定を行うと共に（ステップ６１３）、ステップＳ６１７で押圧力判定部１２３が真の判定、即ち押圧力ｐ_Ｃが押圧力閾値ｐ_ＴＨ以上であるとの判定、を行った場合、指に対してタッチパネル１００を介して触覚応答（振動）ｖ_２を付与すべく触覚応答機構部１０２を制御する。

（Ｓ６１９）操作判定制御部１２５は、第２接触位置判定部１２２ｂが真の判定を行うと共に（ステップＳ６１３）、ステップＳ６１７で押圧力判定部１２３が真の判定、即ち押圧力ｐ_Ｃが押圧力閾値ｐ_ＴＨ以上であるとの判定、を行った場合、「クリック」操作が行われたと判定し、対応する動作を実行させる。具体的には、アイコン１０４の機能、例えばアプリケーションの起動、を発動させる。

以上説明したように、本発明によれば、指が最初に接触した際の「フォーカス」操作時には、触覚応答（振動）ｖ_１が付与されず、次いで実行される「クリック」操作において触覚応答（振動）ｖ_２が付与される。その結果、ユーザの操作から見て、自ら行った、アイコン１０４発動の為の１回の押し込みという操作感覚に適合した触覚応答が得られる。さらに、指の接触位置の移動による「フォーカス」操作時には、触覚応答（振動）ｖ_１が付与される。このように、指の操作感覚に適合しており、誤操作を抑制可能な触覚応答を指に付与することができる。

また、本実施形態では、指の接触位置が所定時間ｔ_ＴＨ以上継続して変化しなかったか否かを判定し、その判定結果に基づいて、「タッチフォーカス」モード及び「ドラッグ」モードのいずれかを動作させる。従って、「タッチフォーカス」モード動作下での「フォーカス」操作、及び「クリック」操作、並びに「ドラッグ」モード動作下でのドラッグ操作が、互いに確実に区別され、且つそれぞれ容易に実行される。即ち、指の接触及び移動動作によっても、種々の操作を確実に区別して実行することが可能となる。

図７は、本発明によるユーザインタフェース装置の他の実施形態を示す概略図である。

図７には、本発明のユーザインタフェース装置としての携帯型情報機器１又はノート型パーソナルコンピュータ２におけるディスプレイ１０１又は２０１の画面が示されている。携帯型情報機器１又はノート型パーソナルコンピュータ２では、ウェブページを閲覧するためのウェブブラウザが起動しており、ディスプレイ１０１又は２０１に表示された画像には、複数のリンク（オブジェクト）２０４が含まれている。

ユーザがウェブページの表示されていない部分を閲覧したい場合、指をタッチパネル２００に接触させた直後にこの指を移動させれば、「ドラッグ」モードが動作してドラッグ操作が実行される。この際、指が接触して所定時間ｔ_ＴＨが経過する前に指を移動させることが、「ドラッグ」モードを動作させるためのポイントとなる。

一方、ウェブページの表示された部分に所望のリンク２０４が存在するか否かを確認する場合、取り敢えず指をタッチパネル２００に接触させ、少なくとも所定時間ｔ_ＴＨだけその接触位置を維持する。これにより、「タッチフォーカス」モードが動作する。次いで、指を接触させたまま移動させ、指の接触位置を、発見した所望のリンク２０４の表示位置範囲に重畳させる「フォーカス」操作を行う。その後、所定の押圧力閾値ｐ_ＴＨ以上の押圧力で指をタッチパネル２００に押し込む「クリック」操作を行うことによって、リンク２０４の機能が発動し、所望のリンク先の文書又は画像等を閲覧することができる。

同じく図７によれば、指が最初に複数のリンク２０４のうちの１つに接触した場合、「フォーカス」操作と判定されるにもかかわらず、この指に触覚応答を付与しない。次いで、指が接触したまま移動し、指の接触位置が、隣のリンク２０４の表示位置範囲に重畳した際、再度、「フォーカス」操作との判定がなされる。この際、この指に触覚応答（振動）ｖ_１が付与される。触覚応答は、これ以降、指が移動して指の接触位置がリンク２０４の表示位置範囲に重畳する毎に付与される。

尚、指が最初にリンク２０４の表示位置範囲外に接触した際、当然に触覚応答は付与されない。この場合でも、その後、指が接触したまま移動し、指の接触位置が最初に遭遇したリンク２０４の表示位置範囲に重畳した際、触覚応答（振動）ｖ_１が付与される。言い換えれば、指の接触位置がリンク２０４の表示位置範囲外から表示位置範囲内に入った場合にのみ、この指に触覚応答が付与されるのである。

以上に述べたような触覚応答は、特に、図７（Ａ）に示したように、複数のリンク２０４が密集して配置されている場合、ユーザの操作感覚に適合する。実際、複数のリンク２０４に対しては、指が直接上から接触し（「フォーカス」操作）、そのまま押し込む（「クリック」操作）場合が多い。この際、最初の「フォーカス」操作においても、その直後の「クリック」操作においても触覚応答（振動ｖ_１及びｖ_２）を付与すると、ユーザの操作から見て１回の押し込み動作で、２度振動してしまう。

これに対して、本実施形態では、最初の「フォーカス」操作では触覚応答（振動）ｖ_１が付与されず、次いでの「クリック」操作においてのみ触覚応答（振動）ｖ_２が付与される。その結果、ユーザの操作から見て、自ら行った１回のキー押下という操作感覚に適合した触覚応答が得られる。

さらに、「タッチフォーカス」モード下では、所望のリンク２０４を選択する際、取り敢えず指をタッチパネル１００又は２００に接触させ、指でなぞるようにして所望のリンク２０４を探す場合も多い。ここで、指の最初の接触位置は、あくまで取り敢えずの位置であり、「フォーカス」操作、即ちリンク２０４の選択は意図されていない。従って、指が最初に接触した際の「フォーカス」操作時には触覚応答が付与されないことが、ユーザの操作感覚に適合する。

以上、詳細に説明したように、本発明のユーザインタフェース装置、触覚応答付与方法及びプログラムによれば、指の操作感覚に適合しており、誤操作を抑制可能な触覚応答を指に付与することができる。

また、本発明のユーザインタフェース装置、触覚応答付与方法及びプログラムによれば、指によるタッチパネルへの入力の際、表示された画像を指でなぞりながら所望のオブジェクトを確認しながら的確に選択することができる。

前述した本発明の種々の実施形態について、本発明の技術思想及び見地の範囲の種々の変更、修正及び省略は、当業者によれば容易に行うことができる。前述の説明はあくまで例であって、何ら制約しようとするものではない。本発明は、特許請求の範囲及びその均等物として限定するものにのみ制約される。

１ 携帯型情報機器（ユーザインタフェース装置）
１００、２００ タッチパネル
１０１、２０１ ディスプレイ
１０２ 触覚応答機構部
１０３ 押圧力検出部
１０４ アイコン（オブジェクト）
１１１ 表示制御部
１１２ アプリケーション処理部
１２１ 接触時間判定部
１２２ 接触位置判定部
１２２ａ 第１接触位置判定部
１２２ｂ 第２接触位置判定部
１２３ 押圧力判定部
１２４ モード動作部
１２５ 操作判定制御部
１２６ 触覚応答制御部
２ ノート型パーソナルコンピュータ（ユーザインタフェース装置）
２０４ リンク（オブジェクト）

Claims (7)

1. 操作対象であるオブジェクトを含む画像を表示するディスプレイと、該ディスプレイの画面上に配置され、指の接触位置を時間経過に応じて逐次出力するタッチパネルとを備えたユーザインタフェース装置であって、
   前記タッチパネルに接触した当該指に対して触覚応答を付与する触覚応答機構部と、
   当該指の接触位置が、接触した当初、当該オブジェクトの表示位置範囲に重畳しているか否かを判定する第１接触位置判定手段と、
   当該指の接触位置が、当該オブジェクトの表示位置範囲外から該表示位置範囲内に入ったか否かを判定する第２接触位置判定手段と、
   前記第１接触位置判定手段が真の判定を行った際、触覚応答の付与停止を維持すべく前記触覚応答機構部を制御する触覚応答制御手段と、
   前記第１接触位置判定手段又は前記第２接触位置判定手段が真の判定を行った際、当該オブジェクトを選択する操作が行われたと判定し、対応する動作を発動させる操作判定制御手段と
   を有しており、
   前記触覚応答制御手段は、前記第２接触位置判定手段が真の判定を行った際、当該指に対して前記タッチパネルを介して触覚応答を付与すべく前記触覚応答機構部を制御する
   ことを特徴とするユーザインタフェース装置。
2. 前記タッチパネルに接触した当該指によって与えられる押圧力を検出する押圧力検出部と、
   前記押圧力が所定閾値以上であるか否かを判定する押圧力判定手段と
   を更に有しており、
   前記操作判定制御手段は、前記第２接触位置判定手段が真の判定を行い且つ前記押圧力判定手段が真の判定を行った際、当該オブジェクトの機能を発動させる操作が行われたと判定し、対応する動作を発動させ、
   前記触覚応答制御手段は、前記第２接触位置判定手段が真の判定を行い且つ前記押圧力判定手段が真の判定を行った際、当該指に対して前記タッチパネルを介して触覚応答を付与すべく前記触覚応答機構部を制御する
   ことを特徴とする請求項１に記載のユーザインタフェース装置。
3. 当該指の接触位置が、所定時間以上継続して変化しなかったか否かを判定する接触時間判定手段と、
   前記接触時間判定手段が真の判定を行った際、当該オブジェクトを含む画像全体を移動させることなく固定した状態で当該指の接触位置をモニタする「タッチフォーカス」モードを動作させるモード動作手段と
   を更に有しており、
   前記触覚応答制御手段は、前記「タッチフォーカス」モードの動作下で、前記第２接触位置判定手段が真の判定を行った際、当該指に対して前記タッチパネルを介して触覚応答を付与すべく前記触覚応答機構部を制御する
   ことを特徴とする請求項１又は２に記載のユーザインタフェース装置。
4. 前記ディスプレイに表示された画像は、操作対象であるオブジェクトとしての複数のリンクを含むブラウザの表示画像であることを特徴とする請求項１から３のいずれか１項に記載のユーザインタフェース装置。
5. 前記触覚応答制御手段は、ユーザの操作から見て、
   当該指を当該オブジェクトの表示位置範囲内に接触させた際、触覚応答を当該指に付与せず、
   次いで、当該指を接触させたまま移動させて、当該指の接触位置を当該オブジェクトの表示位置範囲外に離脱させ、その後、当該指の接触位置が当該オブジェクト又は別のオブジェクトの表示位置範囲内に入った際、触覚応答を付与すべく前記触覚応答機構部を制御する
   ことを特徴とする請求項１から４のいずれか１項に記載のユーザインタフェース装置。
6. 操作対象であるオブジェクトを含む画像を表示するディスプレイと、該ディスプレイの画面上に配置され、指の接触位置を時間経過に応じて逐次出力するタッチパネルとを備えたユーザインタフェース装置に搭載されたプログラムであって、
   前記タッチパネルに接触した当該指に対して触覚応答を付与する触覚応答機構部と、
   当該指の接触位置が、接触した当初、当該オブジェクトの表示位置範囲に重畳しているか否かを判定する第１接触位置判定手段と、
   当該指の接触位置が、当該オブジェクトの表示位置範囲外から該表示位置範囲内に入ったか否かを判定する第２接触位置判定手段と、
   前記第１接触位置判定手段が真の判定を行った際、触覚応答の付与停止を維持すべく前記触覚応答機構部を制御し、前記第２接触位置判定手段が真の判定を行った際、当該指に対して前記タッチパネルを介して触覚応答を付与すべく前記触覚応答機構部を制御する触覚応答制御手段と、
   前記第１接触位置判定手段又は前記第２接触位置判定手段が真の判定を行った際、当該オブジェクトを選択する操作が行われたと判定し、対応する動作を発動させる操作判定制御手段と
   してコンピュータを機能させることを特徴とするユーザインタフェース装置用のプログラム。
7. 操作対象であるオブジェクトを含む画像を表示するディスプレイと、該ディスプレイの画面上に配置され、指の接触位置を時間経過に応じて逐次出力するタッチパネルとを備えたユーザインタフェース装置における触覚応答付与方法であって、
   前記ユーザインタフェース装置が、前記タッチパネルに接触した当該指に対して触覚応答を付与する触覚応答機構部を備えており、
   前記触覚応答付与方法が、
   当該指の接触位置が、接触した当初、当該オブジェクトの表示位置範囲に重畳しているか否かを判定する第１のステップと、
   第１のステップで真の判定がなされた際、触覚応答の付与停止を維持する第２のステップと、
   第１のステップで真の判定がなされた際、当該オブジェクトを選択する操作が行われたと判定し、対応する動作を発動させる第３のステップと、
   第１のステップで偽の判定がなされた後、当該指の接触位置が、当該オブジェクトの表示位置範囲外から該表示位置範囲内に入ったか否かを判定する第４のステップと、
   第４のステップで真の判定がなされた際、当該指に対して前記タッチパネルを介して触覚応答を付与する第５のステップと、
   第４のステップで真の判定がなされた際、当該オブジェクトを選択する操作が行われたと判定し、対応する動作を発動させる第６のステップと
   を有することを特徴とする触覚応答付与方法。

Images