JPWO2013111557A1 - 電子機器 - Google Patents

電子機器 Download PDF

Info

Publication number
JPWO2013111557A1
JPWO2013111557A1 JP2013555189A JP2013555189A JPWO2013111557A1 JP WO2013111557 A1 JPWO2013111557 A1 JP WO2013111557A1 JP 2013555189 A JP2013555189 A JP 2013555189A JP 2013555189 A JP2013555189 A JP 2013555189A JP WO2013111557 A1 JPWO2013111557 A1 JP WO2013111557A1
Authority
JP
Japan
Prior art keywords
vibration
panel
touch panel
user
timing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2013555189A
Other languages
English (en)
Inventor
真寛 稲田
真寛 稲田
祐介 足立
祐介 足立
古賀　昭
昭 古賀
亮 奥村
亮 奥村
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Intellectual Property Management Co Ltd
Original Assignee
Panasonic Intellectual Property Management Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Panasonic Intellectual Property Management Co Ltd filed Critical Panasonic Intellectual Property Management Co Ltd
Priority to JP2013555189A priority Critical patent/JPWO2013111557A1/ja
Publication of JPWO2013111557A1 publication Critical patent/JPWO2013111557A1/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016—Input arrangements with force or tactile feedback as computer generated output to the user
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/214—Input arrangements for video game devices characterised by their sensors, purposes or types for locating contacts on a surface, e.g. floor mats or touch pads
    • A63F13/2145—Input arrangements for video game devices characterised by their sensors, purposes or types for locating contacts on a surface, e.g. floor mats or touch pads the surface being also a display device, e.g. touch screens
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/25—Output arrangements for video game devices
    • A63F13/28—Output arrangements for video game devices responding to control signals received from the game device for affecting ambient conditions, e.g. for vibrating players' seats, activating scent dispensers or affecting temperature or light
    • A63F13/285—Generating tactile feedback signals via the game input device, e.g. force feedback
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/40—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment
    • A63F13/42—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle
    • A63F13/426—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle involving on-screen location information, e.g. screen coordinates of an area at which the player is aiming with a light gun
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/40—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment
    • A63F13/44—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment involving timing of operations, e.g. performing an action within a time slot
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/50—Controlling the output signals based on the game progress
    • A63F13/52—Controlling the output signals based on the game progress involving aspects of the displayed game scene
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/50—Controlling the output signals based on the game progress
    • A63F13/54—Controlling the output signals based on the game progress involving acoustic signals, e.g. for simulating revolutions per minute [RPM] dependent engine sounds in a driving game or reverberation against a virtual wall

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

電子機器１００は、ユーザがタッチするタッチパネル１３０と、タッチパネル１３０を振動させるパネル振動部１４０と、パネル振動部１４０を制御する触覚制御部３３と、ユーザがタッチパネル１３０に対してタッチ操作すべき基準タイミングを示す基準情報を提示する表示部１６０と、ユーザによるタッチパネル１３０へのタッチ操作の入力タイミングと、基準タイミングとの間のズレ量を検出するマイクロコンピュータ２０とを備える。触覚制御部３３は、検出したズレ量に基づいてタッチパネル１３０の振動を変化させ、ユーザに振動による触覚を与える。

Description

本開示は、ユーザによるタッチ操作に応じて振動を発生させる電子機器に関する。
表示画面上にタッチパネルが配置された電子機器において、ユーザへの操作性向上のために、タッチパネルを振動させることにより、ユーザに触覚を与える技術が知られている。
例えば、特許文献１には、筐体に振動素子が取り付けられた携帯機器が開示されている。
また、特許文献２が開示するゲーム機器にタッチパネルを応用した例では、映像や音のタイミングに合わせてタッチパネルを操作することにより、操作タイミングの良否を映像や音で表現する。
また、特許文献３では、モータの回転軸に取り付けられた偏心錘を回転することで振動を発生する振動モータをゲーム機器用のコントローラに搭載し、ゲーム機器本体からフィードバックされた情報に基づいてコントローラ本体を振動させることで、臨場感を高めている。
特開２００８−１８１３６５号公報 特開２００６−３４０７４４号公報 特開２００２−２６３３６５号公報
本開示は、映像および／または音のタイミングに合わせてタッチパネルを操作する際に、ユーザが触れたタッチパネルから、操作タイミングに応じて様々な触覚を提示することにより、直感的な新しい操作感を得ることができる電子機器を提供する。
本開示のある実施形態に係る電子機器は、ユーザがタッチするタッチパネルと、タッチパネルを振動させる振動部と、振動部を制御する振動制御部と、ユーザがタッチパネルに対してタッチ操作すべき基準タイミングを示す基準情報を提示する提示部と、ユーザによるタッチパネルへのタッチ操作の入力タイミングと基準タイミングとの間のズレ量を検出する検出部とを備え、振動制御部は、検出したズレ量に基づいてタッチパネルの振動を変化させ、ユーザに振動による触覚を与える。
本開示のある実施形態に係る電子機器によれば、ユーザの操作タイミングに対する電子機器の反応を、タッチパネルに触れた指等から直接感じ取ることができるので、直感的な新しい操作感を得ることできる。
（ａ）および（ｂ）は実施形態に係る電子機器の全体構成を示す斜視図である。 実施形態に係る電子機器の分解斜視図である。 実施形態に係る電子機器の断面図である。 実施形態に係る電子機器のブロック図である。 実施形態に係るパネル振動部の斜視図である。 （ａ）は実施形態に係るパネル振動部の振動パターンの一例を示す概略図であり、（ｂ）は実施形態に係るパネル振動部の振動パターンの一例を示す概略図である。 （ａ）は振動モータの駆動波形と振動波形の一例を示す概略図であり、（ｂ）はパネル振動部の駆動波形と振動波形の一例を示す概略図である。 実施形態に係る電子機器の触覚提示の処理を示すフローチャートである。 実施形態に係る基準タイミングと入力タイミングのズレ量を説明する模式図である。 実施形態に係るタッチ操作例を示す模式図である。 実施形態に係るタッチ操作例を示す模式図である。 実施形態に係るタッチ操作例を示す模式図である。 実施形態に係るタッチ操作例を示す模式図である。 振動モータの外観を示す斜視図である。
以下、適宜図面を参照しながら、実施形態を詳細に説明する。但し、必要以上に詳細な説明は省略する場合がある。例えば、既によく知られた事項の詳細説明や実質的に同一の構成に対する重複説明を省略する場合がある。これは、以下の説明が不必要に冗長になるのを避け、当業者の理解を容易にするためである。
なお、発明者らは、当業者が本開示を十分に理解するために添付図面および以下の説明を提供するのであって、これらによって請求の範囲に記載の主題を限定することを意図するものではない。
特許文献２が開示するゲーム機器では、ユーザは映像および音で表現されるタイミングに合わせてタッチパネルを操作するが、その操作タイミングに対するゲーム機器からの情報の提示も映像および音で行われるため、実際の操作感は乏しい。また、特許文献３が開示するゲーム機器用コントローラは、ゲームが表示されるテレビ受像機から離れた位置に居るユーザが両手で保持して操作するコントローラである。そのため、仮にテレビ受像機の表示面にタッチパネルが設けられていた場合でも、ゲーム機器用コントローラの振動は、タッチパネルに対するタッチ操作には何も関与しない。
実施形態に係る電子機器によれば、ユーザの操作タイミングに対する電子機器の反応を、タッチパネルに触れた指等から直接感じ取ることができるので、直感的な新しい操作感を得ることできる。以下、実施形態に係る電子機器を詳細に説明する。
＜電子機器の全体構成＞
図１から図４を用いて実施形態に係る電子機器の全体構成を説明する。図１は、実施形態に係る電子機器の全体構成を示す斜視図である。図２は、実施形態に係る電子機器の分解斜視図である。図３は、実施形態に係る電子機器の断面図である。図４は、実施形態に係る電子機器のブロック図である。
図１から図３に示すように、電子機器１００は、表示部１６０と、それを覆うように配置されたタッチパネル１３０と、タッチパネル１３０を振動させるパネル振動部１４０と、音声を出力するスピーカー部１５０とを備える。タッチパネル１３０は、ユーザがタッチするパネル部材の一例である。タッチパネル１３０は、表示部１６０の画像を表示する表示面側に設けられている。表示部１６０は、ユーザがタッチパネル１３０に対してタッチ操作すべき基準タイミングを示す基準情報を提示する提示部の一例である。
ユーザは、表示部１６０に表示された内容を指やペンなどにより、タッチパネル１３０をタッチすることで、電子機器１００を操作する。
上部筐体１１０および下部筐体１２０は、ねじ等で一体に連結されることにより電子機器１００の筐体１０５を構成する。上部筐体１１０には、表示窓１１５が形成され、表示窓１１５を通してタッチパネル１３０を操作することができる。下部筐体１２０には、スピーカー部１５０から出力された音声を妨げないようにメッシュ部１２５が形成されている。
タッチパネル１３０には、パネル振動部１４０が取り付けられており、パネル振動部１４０を駆動することにより、タッチパネル１３０を振動させることができる。これにより、ユーザがタッチパネル１３０を操作した場合に、ユーザに振動による触覚を与えることができる。
また、このタッチパネル１３０の振動が上部筐体１１０に直接伝わらないように、上部筐体１１０とタッチパネル１３０表面の間には、クッション材１３５が設けられている。
タッチパネル１３０の上部筐体１１０と対向する面とは反対側の面には、表示部１６０が配置され、前述と同様に、タッチパネル１３０の振動が表示部１６０に直接伝わらないように、クッション材１６５が設けられている。クッション材１３５、１６５は、例えば、シリコンゴムやウレタンゴム等の緩衝部材である。
また、表示部１６０に表示された画像は、タッチパネル１３０を介して表示窓１１５側から目視することができる。
表示部１６０は、下部筐体１２０に固定されたフレーム１７０に取り付けられ、電子機器１００内部に固定される。
下部筐体１２０には、スピーカー部１５０が取り付けられている。スピーカー部１５０から出力された音声は、メッシュ部１２５を通して、筐体１０５の外部へ伝わる。
また、下部筐体１２０には、回路基板１８０が取り付けられ、タッチパネル１３０、表示部１６０、パネル振動部１４０、スピーカー部１５０が、電気的に接続されている。タッチパネル１３０、表示部１６０、パネル振動部１４０、スピーカー部１５０は、回路基板１８０に設けられたマイクロコンピュータ２０によって制御される。マイクロコンピュータ２０は、電子機器１００全体の動作を制御する。マイクロコンピュータ２０は、各種情報の検出および判断などの動作や、各構成要素の動作の制御を行なう。
なお、タッチパネル１３０は、静電式、抵抗膜式、光学式などのタッチパネルである。タッチパネル１３０は、ユーザのタッチ位置を検知する。タッチパネル１３０は、タッチパネル制御部３１により制御される。マイクロコンピュータ２０は、タッチパネル制御部３１を介してユーザのタッチ位置の情報を得ることができる。
表示部１６０は、液晶方式、有機ＥＬ方式、電子ペーパー方式、プラズマ方式などの表示装置である。表示部１６０は、表示情報制御部３２により制御される。マイクロコンピュータ２０は、表示情報制御部３２を介して表示部１６０に任意の表示をユーザに提示できる。
なお、本実施の形態においては、タッチパネル１３０と表示部１６０とを分離した構成としたが、タッチパネル１３０と表示部１６０とは一体に形成されていてもよい。例えば、タッチパネル機能を液晶パネルの内部に一体化するインセル型タッチパネルや、タッチパネル機能を液晶パネルの表面に一体化するオンセル型タッチパネル等の方式であってもよく、それらの方式を用いることにより、より薄型・軽量化を図ることができる。
図４に示すように、本実施の形態の電子機器１００は、マイクロコンピュータ２０と、各種プログラムを格納するＲＯＭ３８と、各種データを記憶するＲＡＭ３９と、表示部１６０と、表示部１６０を制御する表示情報制御部３２と、タッチパネル１３０と、タッチパネル１３０を制御するタッチパネル制御部３１と、タッチパネル１３０の操作時に触覚提示を行うためにパネル振動部１４０を制御する触覚制御部３３と、音声信号を再生するために、スピーカー部１５０を制御する音声出力部３４と、外部との通信を行う外部通信部３６と、その他各種入出力を行う各種Ｉ／Ｏ部３７とを備える。外部通信部３６は、例えばＷｉ−Ｆｉ（登録商標）などの無線ＬＡＮを用い、複数の電子機器間の相互接続性を認証された状態で接続される。電子機器間の接続については、アクセスポイントなど外部通信機器を経由して接続する方法、あるいは外部の通信機器を経由せずに直接接続する方法であるＰ２Ｐ（ワイヤレス・アドホック・ネットワーク）接続などでもよい。
＜パネル振動部の構成＞
次に、図５を用いてパネル振動部１４０の構成を説明する。図５は、本実施の形態のパネル振動部１４０の斜視図である。
図５に示すように、パネル振動部１４０は、圧電素子２１と、シム板２２と、ベース２３とを備える。シム板２２の両側に圧電素子２１が接着されている。圧電素子２１は、例えば、チタン酸ジルコン酸鉛等の圧電セラミックやニオブ酸リチウム等の圧電単結晶である。シム板２２の両端はベース２３に取り付けられており、いわゆる両持ち構成になっている。ベース２３は、タッチパネル１３０に取り付けられる。圧電素子２１は、触覚制御部（振動制御部）３３からの駆動電圧により伸縮する。シム板２２の両側に貼り付けられた圧電素子２１の片方が伸びて、片方が縮むように制御することで、シム板２２がたわみ、これを連続的に繰り返すことで振動を発生することができる。
シム板２２は、例えばリン青銅等のバネ部材である。シム板２２の振動は、ベース２３を介して、タッチパネル１３０を振動させる。タッチパネル１３０を操作しているユーザは、タッチパネル１３０をタッチ操作することでタッチパネル１３０の振動を感知することができる。
ベース２３は、例えば、アルミや真鍮等の金属や、ＰＥＴやＰＰ等のプラスチックである。
タッチパネル１３０を操作した際に触覚提示を行う場合の振動の周波数、振幅、振動期間は触覚制御部３３によって制御され、それらのうちの少なくとも１つを変化させることにより様々な触覚をユーザに提示することができる。例えば、後述するユーザによるタッチパネル１３０へのタッチ操作の入力タイミングと基準タイミングとの間のズレ量に応じて、振動の周波数、振幅、振動期間のうちの少なくとも１つを変化させる。振動の周波数としては、人が触覚を感じやすい１００〜４００Ｈｚ程度の周波数が望ましい。
なお、本実施の形態では、圧電素子２１をシム板２２に貼り付けているが、圧電素子２１を直接タッチパネル１３０に貼り付けてもよい。また、スパッタリング等の方法によりタッチパネル１３０に薄膜の透明圧電部材を形成してパネル振動部１４０として用いてもよい。また、タッチパネル１３０の上にカバー部材等がある場合は、圧電素子２１をカバー部材に貼り付けてもよい。なお、タッチパネル１３０上にカバー部材がある場合は、タッチパネル１３０とカバー部材の両方を含めて、タッチ位置を検出するパネル部材とよぶ。
また、本実施の形態では、シム板２２の両端がベース２３に支持される両持ち構成としているが、シム板２２の片側だけをベース２３で支持する片持ち構成としてもよい。
また、本実施の形態では、便宜的に、パネル振動部１４０をタッチパネル１３０の一辺にのみ設けているが、両辺や各辺など複数の振動部を設けてもよい。
＜パネル振動部の入力信号の説明＞
図６は、パネル振動部１４０の振動パターンの一例を示す概略図である。
マイクロコンピュータ２０の命令により、触覚制御部３３は、パネル振動部１４０へ電圧を印加し、図６（ａ）の振幅でタッチパネル１３０を振動させることで、ユーザに振動Ａを与える。振動Ａを与えるための電圧は正弦波で、例えば、１５０Ｈｚ、７０Ｖｒｍｓ、２周期である。このときのタッチパネル１３０上の振幅は、約５μｍである。また触覚制御部３３が、パネル振動部１４０へ電圧を印加し、図６（ｂ）の振幅でタッチパネル１３０を振動させることで、ユーザに振動Ｂを与える。振動Ｂを与えるための電圧は正弦波で、例えば、３００Ｈｚ、１００Ｖｒｍｓ、４周期である。このときのタッチパネル１３０上の振幅は、約１５μｍである。なお、タッチパネル１３０上の振幅が約５〜５０μｍとなるように周波数および電圧を設定すると、人間の指に心地良い触覚（振動）を提示することができる。
なお、周波数、電圧、周期に関しては一例であり、矩形波、のこぎり波など、別の波形や、間欠的な波形や、連続的に周波数や振幅が変化する波形などでもよい。また、タッチパネル１３０上の振幅の大きさは一例であり、タッチパネル１３０の大きさ、支持方法、パネル振動部１４０の数などの条件が異なると、振幅の大きさも変化する。
＜パネル振動部１４０の振動と振動モータの振動との比較＞
図７は、図１４に示す振動モータ２００による振動波形と、本実施の形態のパネル振動部１４０の振動波形を比較したものである。図１４に示す振動モータ２００では、モータ２１０の回転軸２２０に取り付けられた偏心錘２３０を回転することで振動を発生する。図７（ａ）は、振動モータ２００の駆動電圧と振動波形の一例を示した概略図である。図７（ｂ）は、パネル振動部１４０の駆動電圧と振動波形の一例を示した概略図である。
図７（ａ）に示すように、振動モータ２００に電圧Ｖ１を印加し、モータ２１０を回転させることで偏心錘２３０が回転軸２２０を中心に回転して振動が発生する。時間Ｔが経過したところで、回転を停止させるために、反転した電圧を印加しブレーキをかけるような駆動をする。偏心錘２３０が回転および停止する際には、偏心錘２３０の慣性の影響があるため、駆動電圧に対して発生する振動波形は、図７（ａ）に示すように、駆動開始時には、モータ２１０が回転するまでに、時間ｔ１の遅れが発生し、駆動停止時には、モータ２１０が完全に停止するまでに時間ｔ２の遅れが発生する。
一方、図７（ｂ）に示すように、本実施の形態のパネル振動部１４０は、圧電素子２１の伸縮を用いて振動を発生させるため、振動モータ２００のような慣性の影響受けずに、駆動開始時および停止時に時間の遅れがほとんどない振動波形を発生させることができる。
振動モータ２００を用いた振動では、偏心錘２３０の回転を振動に変換するため、モータ２１０の特性による回転数の限界があり、１００Ｈｚ程度までの振動の発生が限界である。しかしながら、前述したように、人が触覚を感じやすい周波数は１００〜４００Ｈｚ程度であるため、振動モータ２００では、この周波数帯の振動を提示するのは困難である。さらに、偏心錘２３０の慣性の影響のため、駆動開始時には時間ｔ１の遅れが発生し、駆動停止時には時間ｔ２の遅れにより振動余韻が発生する。また、この振動余韻は、ユーザが機器本体を把持している場合では、筐体を通してユーザに伝わってしまうため、タッチ操作後に違和感がある。また、例えば、ダブルクリックのような素早い連続のタッチ操作を行うと、この振動余韻が残っている状態で、次の振動を提示するため、操作に応じた触覚を十分に提示できない。
したがって、本実施の形態では、タッチパネル１３０の振動部として、圧電素子２１を駆動源とするパネル振動部１４０を用いることで、このような振動モータ２００における課題を解決している。
なお、図７の振動波形図は、説明上の模式図であり、実際の振動応答はこの限りではない。例えば、圧電素子２１の駆動では、駆動電圧と振動波形における遅延がない例で説明しているが、駆動回路の時定数や、振動部の構成の影響などで、若干の遅延が発生することがある。
また、タッチパネル１３０の共振周波数の影響で、駆動停止後の振動余韻が若干残ることもある。
＜触覚提示処理の説明＞
実施形態に係る電子機器１００は、映像や音などで表現される基準タイミングにあわせて、ユーザがタッチパネル１３０をタッチ操作する際に、タッチパネル１３０を振動させることにより、ユーザのタッチ操作による入力タイミングの良否をタッチパネル１３０からの触覚で提示する。
表示部１６０は、ユーザがタッチパネル１３０に対してタッチ操作すべき基準タイミングを示す基準情報を表示する。マイクロコンピュータ２０は、ユーザによるタッチパネル１３０へのタッチ操作の入力タイミングと基準タイミングとの間のズレ量を検出し、検出したズレ量に基づいてタッチパネル１３０の振動を変化させることで、ズレ量に応じて異なる触覚をユーザに提示する。例えば、ズレ量が大きい時と小さい時とでタッチパネル１３０の振動を異ならせることでユーザは異なる触覚を覚え、それによりタッチタイミングの良否を認識することができる。
以下、一例として、基準タイミングとユーザのタッチ操作による入力タイミングとを比較して評価するゲームプログラムの触覚提示を行う処理について、図８、図９を用いて説明する。
図８は、本実施の形態における触覚提示の処理を示すフローチャートである。フローチャートにおけるステップはＳと略する。
図９は、本実施の形態の基準タイミングと入力タイミングとのズレ量を説明する模式図である。
図８に示すように、マイクロコンピュータ２０により、ＲＯＭ３８に格納されたゲームプログラムを開始する。このゲームプログラムには基準情報が含まれている。Ｓ１１で、ゲームプログラムにより基準タイミングが設定される。続くＳ１２で、この基準タイミングをユーザへ提示するために、映像や音などによるガイド情報が提示される。例えば、基準情報には画像情報および音情報のうちの少なくとも一方が含まれ、画像であれば表示部１６０によって提示され、音であればスピーカー部１５０によって提示される。画像は動画であってもよいし静止画であってもよい。そして、処理はＳ１３に進む。
次に、Ｓ１３では、Ｓ１２において提示したガイド情報により、タッチ操作が有効となるタッチ領域が設定される。基準情報は、タッチ領域を表示部１６０に表示する位置を示す位置情報をさらに含み、その位置情報に対応した位置にタッチ領域が表示される。タッチ領域の詳細については、後述するゲームプログラムの操作例の中で説明する。そして、処理はＳ１４に進む。
Ｓ１４では、タッチパネル制御部３１からの情報に基づいて、タッチパネル１３０へのユーザのタッチ入力の有無が、マイクロコンピュータ２０により判断される。タッチされていない場合には、タッチ入力が行われるまで待機する。Ｓ１４でタッチ入力「有り」と判断されると、処理はＳ１５に進む。なお、Ｓ１４においてタッチ入力を所定時間以上検出しない場合は、Ｓ２６の処理に移ってもよい。
Ｓ１５では、ユーザがタッチパネル１３０にタッチした位置と、位置情報に対応する位置との間のズレ量を検出する。この例では、タッチパネル制御部３１からの情報に基づいて、タッチされた位置が、Ｓ１３で設定されたタッチ領域内であるかどうかマイクロコンピュータ２０によって判断される。マイクロコンピュータ２０により、タッチ位置がタッチ領域内であると判断された場合、処理はＳ１６に進む。
Ｓ１６では、基準タイミングとタッチパネル１３０をタッチ操作した入力タイミングとのズレ量をマイクロコンピュータ２０によって検出する。具体的には、図９に示すように、基準タイミングと入力タイミングの差分であるズレ量ｄを検出する。このズレ量ｄを、例えば、ＲＡＭ３９に一時保存し、処理はＳ１７に進む。
Ｓ１７では、マイクロコンピュータ２０によって、ズレ量ｄが、図９に示すように、基準タイミングに対して設けられた規定範囲±αに入っているかどうか判断される。規定範囲±αは、例えば、ゲームプログラムにおいて、タッチ操作が「成功」と判断する基準の範囲である。マイクロコンピュータ２０により、ズレ量ｄが±α以下であると判断された場合、処理はＳ１８に進む。
Ｓ１８では、マイクロコンピュータ２０によって、ズレ量ｄが、図９に示すように、基準タイミングに対して設けられた規定範囲±β（β＜α）に入っているかどうか判断される。マイクロコンピュータ２０により、ズレ量ｄが±β以下であると判断された場合、すなわち図９（ａ）に示す入力タイミングであった場合、ユーザのタッチ操作は「成功１」と判断され、処理はＳ１９に進む。
Ｓ１９では、触覚制御部３３がパネル振動部１４０を制御することで、ユーザに振動Ａを与える。ユーザはタッチパネル１３０をタッチしている指から振動Ａを感じることで、指がタッチパネル１３０に触れたことを認識し、タッチ操作が「成功１」であると確認できる。振動Ａが提示された後、処理はＳ２３に進む。
一方、Ｓ１８で、マイクロコンピュータ２０により、ズレ量ｄが±βより大きいと判断された場合、すなわち図９（ｂ）に示す入力タイミングであった場合、ユーザのタッチ操作は「成功２」と判断される。ここで、規定範囲±βは、規定範囲±αより狭い範囲であるため、「成功２」は、「成功１」と比べると、基準タイミングとの一致度合いが低い結果となる。例えば、ゲームプログラムとして、「成功２」は「成功１」に対して、低い評価（スコア）となる。そして、処理はＳ２０に進む。
Ｓ２０では、触覚制御部３３がパネル振動部１４０を制御することで、ユーザに振動Ａとは異なる振動Ｂを与える。ユーザはタッチパネル１３０をタッチしている指から振動Ｂを感じることで、指がタッチパネル１３０に触れたことを認識し、タッチ操作が「成功２」であると確認できる。振動Ｂが提示された後、処理はＳ２３に進む。
また、Ｓ１７において、マイクロコンピュータ２０により、ズレ量ｄが規定範囲±αより大きいと判断された場合、すなわち図９（ｃ）に示す入力タイミングであった場合、ゲームプログラムとしての「成功」と判断する基準範囲外であるため、ユーザのタッチ操作は「失敗１」と判断され、処理はＳ２１に進む。
Ｓ２１では、触覚制御部３３がパネル振動部１４０を制御することで、ユーザに「成功」の場合の振動Ａ、Ｂとは異なる振動Ｘを与える。ユーザはタッチパネル１３０をタッチしている指から振動Ｘを感じることで、タッチ操作が「失敗１」であると触覚から認識できる。振動Ｘは、パネル振動部１４０を駆動しないという振動パターンでもよい。振動Ｘが提示された後、処理はＳ２３に進む。
また、ステップのＳ１５において、タッチパネル制御部３１からの情報に基づいて、タッチされた位置がＳ１３で設定されたタッチ領域以外であると、マイクロコンピュータ２０によって判断された場合、ゲームプログラムとして指定した範囲外での操作になるため、「失敗２」と判断され、処理はＳ２２に進む。
Ｓ２２では、触覚制御部３３がパネル振動部１４０を制御することで、ユーザに「成功」の場合の振動Ａ、Ｂとは異なる振動Ｙを与える。ユーザはタッチパネル１３０をタッチしている指から振動Ｙを感じることで、タッチ操作が「失敗２」であると触覚から認識できる。なお、振動Ｙは、振動Ｘと同じ振動パターンでもよいし異なっていてもよく、また、パネル振動部１４０を駆動しないという振動パターンでもよい。振動Ｙが提示された後、処理はＳ２３に進む。
Ｓ２３では、タッチパネル制御部３１からの情報に基づいて、タッチパネル１３０上でのユーザのタッチ入力が終了したかどうかマイクロコンピュータ２０により判断される。タッチ入力が終了されていない場合、処理はＳ２４に進む。
Ｓ２４では、Ｓ１４でタッチ入力を検出してから、所定時間が経過しているか、マイクロコンピュータ２０により判断される。所定時間が経過していなければ、処理はＳ２３に戻り、再びタッチ入力が終了されたかが判断され、所定時間が経過している場合、処理はＳ２５に進む。また、Ｓ２３で、タッチ入力が終了したと判断されると、処理はＳ２５に進む。
Ｓ２５では、触覚制御部３３がパネル振動部１４０の振動を停止するように制御し、処理はＳ２６に進む。
Ｓ２６では、Ｓ１１で、ゲームプログラムにより設定された基準タイミングを提示する期間が終了したかどうかを、マイクロコンピュータ２０によって判断される。基準タイミングの提示期間が終了すれば、触覚提示のフローは終了し、基準タイミングの提示期間が終了していない場合には、処理はＳ１２に戻り、再び基準タイミングと入力タイミングの比較による触覚提示が行われる。
＜操作例＞
次に、図１０から図１３を用いて、実施形態に係る電子機器１００を用いたゲームプログラムの操作例を説明する。
図１０は、表示部１６０に表示されるタイミングマーカー３１０にあわせてタッチ操作を行うゲームプログラム例を示したものである。
図１０に示すように、表示部１６０には、網掛けで図示しているマーカー表示エリア３００と、マーカー表示エリア３００内を右端部から左端部に向かって移動するタイミングマーカー３１０と、入力判定枠３２０ａ、３２０ｂが表示される。タイミングマーカー３１０は、例えば、音楽にあわせて一定の速度で移動するように表示される。
図１０のゲームプログラムの操作例は、移動するタイミングマーカー３１０が、マーカー表示エリア３００の左端部にある入力判定枠３２０ａ、３２０ｂに到達したとき（重なったとき）がタッチ入力すべきタイミングとなるゲームプログラムである。
この場合、基準タイミングを、移動するタイミングマーカー３１０が入力判定枠３２０ａ、３２０ｂに重なるタイミングとして、ユーザに提示していることになる。
図１０の上段に示すように、入力判定枠３２０ａのほぼ中心にタイミングマーカー３１０が重なったタイミングでタッチできれば、成功判定となる。一方、図１０の下段に示すように入力判定枠３２０ｂの中心からタイミングマーカー３１０がずれたタイミングでタッチした場合は失敗判定となる。触覚制御部３３によって、それぞれの操作判定に応じた異なる触覚を提示する。
また、タッチ領域を入力判定枠３２０ａ、３２０ｂとすることで、タイミングマーカー３１０と入力判定枠３２０ａ、３２０ｂが一致した感覚をユーザに直感的に伝えることができる。
次に、図１１は、表示部１６０に表示される移動マーカー４１０自体をタッチ操作するゲームプログラム例を示したものである。
図１１に示すように、表示部１６０には、マーカー表示エリア４００と、マーカー表示エリア４００内を移動する移動マーカー４１０が表示される。図１１に示すように、例えば、移動マーカー４１０は、複数の風船で表示されており、マーカー表示エリア４００の下端部から上端部に向かって移動する。
図１１のゲームプログラムは、移動マーカー４１０が、マーカー表示エリア４００に表示されている間に、移動マーカー４１０自体をタッチすることが入力すべきタイミングとなるゲームプログラムである。
この場合、基準タイミングは、移動マーカー４１０がマーカー表示エリア４００内に表示されている時間（移動速度）によって、ユーザに提示していることになる。
図１１に示すように、移動マーカー４１０自体をタッチできれば成功判定となり、触覚制御部３３によって、それぞれの操作判定に応じた触覚を提示する。
また、タッチ領域を移動マーカー４１０自体とすることで、マーカー表示エリア４００内を移動する移動マーカー４１０をタッチできた感覚をユーザに直感的に伝えることができる。
次に、図１２は、表示部１６０に表示されるマーカー表示が変化したタイミングでタッチ操作するゲームプログラム例を示したものである。
図１２に示すように、表示部１６０には、複数のマーカー表示部５００が表示され、マーカー表示部５００は、オブジェクト５１０を表示したり、非表示にしたりする。図１２のゲームプログラムは、例えば、もぐらたたきゲームであり、マーカー表示部５００はもぐらの巣穴であり、オブジェクト５１０はもぐらに相当する。
図１２のゲームプログラムの操作例は、マーカー表示部５００に、オブジェクトが表示されたタイミングが入力すべきタイミングとなるゲームプログラムである。
この場合、基準タイミングは、オブジェクト５１０がマーカー表示部５００に表示されている時間によって、ユーザに提示していることになる。
図１２に示すように、オブジェクト５１０が表示されているタイミングで、マーカー表示部５００（またはオブジェクト５１０）をタッチできれば成功判定となり、触覚制御部３３によって、それぞれの操作判定に応じた触覚を提示する。
また、タッチ領域をマーカー表示部５００とすることで、オブジェクト５１０が表示されたタイミングでタッチできた感覚をユーザに直感的に伝えることができる。
次に、図１３は、スピーカー部１５０から発音される音のタイミングにあわせてタッチ操作するゲームプログラム例を示したものである。
図１３に示すように、表示部１６０には、ピアノの鍵盤６００が表示されており、発音される音に合わせて、例えば、鍵盤６００の表示色が変化して鍵盤６１０になる。
図１３のゲームプログラムは、鍵盤６００の色が変化したタイミングが入力すべきタイミングとなるゲームプログラムであり、前述した図１２の場合と映像情報としては同様だが、図１３のゲームプログラムは、音の情報により、タッチすべき位置とタイミングが示されているところが、図１２の場合と異なる。
この場合、基準タイミングは音のデータ自体であり、音としてユーザにタイミングを提示していることになる。
図１３に示すように、音の情報をもとに、色が変化した鍵盤６１０をタッチできれば成功判定となり、触覚制御部３３によって、それぞれの操作判定に応じた触覚を提示する。
また、タッチ領域を色が変化した鍵盤６１０とすることで、音のタイミング情報に対して、正しいタッチ操作ができた感覚をユーザに直感的に伝えることができる。
以上、説明したように、本実施の形態の電子機器１００は、タッチパネル１３０を振動させるパネル振動部１４０に圧電素子を用いることで、ユーザのタッチパネル１３０へのタッチ操作に対して、振動の遅延や余韻が少なく、応答性の良い触覚を提示することができる。
これにより、映像や音のタイミングに合わせてタッチパネル１３０を操作するタイミングの良否を判定するようなゲームプログラムにおいて、ユーザが触れたタッチパネル１３０から、操作タイミングに応じて様々な触覚を提示することができるので、直感的な新しい操作感を得ることができる。
なお、本実施の形態では、基準タイミングと入力タイミングのズレ量ｄの規定範囲を±α（または±β）と規定したが、これに限定されることなく、＋側や−側のみの時間のズレの判定を行なってもよい。
また、本実施の形態では、成功時の振動パターンを２種類にした場合で説明しているが、これに限定されることなく、成功時の振動パターンは、１種類でもいいし、３種類以上でもよい。
また、本実施の形態では、成功時または失敗時の振動パターンを触覚制御部３３が制御すると説明を行ったが、これに限定されない。成功時または失敗時の振動の強さを変えるという触覚の提示方法でもよい。
また、本実施の形態では、振動パターンは、パネル振動部１４０を駆動しない場合も含んでいる。そのため、成功時を振動させないで、失敗時に振動させるという触覚の提示方法でもよい。
また、本実施の形態では、タッチパネル１３０へのタッチ操作を指で行う場合で説明を行ったが、これに限定されることなく、タッチパネル１３０からの振動を触覚として感じ取れれば、ペンなどを介して操作してもよい。
また、本実施の形態では、図１０から図１３を用いて、電子機器１００の応用例として、４つのゲームプログラムの操作例を説明したが、これらは一例であり、本実施の形態における電子機器１００の応用例はこれらに限定されない。
また、電子機器１００の各構成要素を制御する制御部がそれぞれ設けられているが、実施の形態はこれに限られない。タッチパネル制御部３１、表示情報制御部３２、触覚制御部３３等の各種制御部は、マイクロコンピュータ２０が兼ねる構成であってもよい。
＜その他の実施の形態＞
以上のように、本出願において開示する技術の例示として、実施の形態を説明した。しかしながら、本開示における技術はこれらに限定されず、適宜、変更、置き換え、付加、省略などを行った実施の形態も可能である。また、上記実施の形態で説明した各構成要素を組み合わせて、新たな実施の形態とすることも可能である。
以下、他の実施の形態を例示する。
実施の形態では、電子機器の一例としてタブレット型の情報端末機器を用いて説明したが、電子機器はこれには限らない。例えば、携帯電話、ＰＤＡ、ゲーム機、カーナビゲーション、ＡＴＭなど、タッチパネルを備える電子機器であってもよい。
また、上記実施の形態では、振動を発生することで触覚を提示したが、本開示の技術はこれに限られない。振動以外にも、例えば、静電気による摩擦の変化や、電流による皮膚の刺激、液体による画面形状の変化など、他の方法で触覚を提示してもよい。また、これらの触覚の提示方法を適宜組み合わせてもよい。
なお、上述した電子機器の動作は、ハードウエアによって実現されてもよいしソフトウエアによって実現されてもよい。そのような制御動作を実行させるプログラムは、例えばマイクロコンピュータ２０の内蔵メモリーやＲＯＭ３８に記憶される。また、そのようなコンピュータプログラムは、それが記録された記録媒体（光ディスク、半導体メモリー等）から電子機器へインストールしてもよいし、インターネット等の電気通信回線を介してダウンロードしてもよい。
＜まとめ＞
実施の形態に係る電子機器１００は、ユーザがタッチするタッチパネル１３０と、タッチパネル１３０を振動させるパネル振動部１４０と、パネル振動部１４０を制御する触覚制御部３３と、ユーザがタッチパネル１３０に対してタッチ操作すべき基準タイミングを示す基準情報を提示する表示部１６０と、ユーザによるタッチパネル１３０へのタッチ操作の入力タイミングと、基準タイミングとの間のズレ量を検出するマイクロコンピュータ２０とを備える。触覚制御部３３は、検出したズレ量に基づいてタッチパネル１３０の振動を変化させ、ユーザに振動による触覚を与える。
触覚制御部３３は、例えば、ズレ量が大きい時と小さい時とでタッチパネル１３０の振動を異ならせてもよい。
触覚制御部３３は、例えば、ズレ量が第１の範囲（±α）内である時とない時とでタッチパネル１３０の振動を異ならせてもよい。
触覚制御部３３は、例えば、ズレ量が第１の範囲（±α）より狭い第２の範囲（±β）内である時とない時とでタッチパネル１３０の振動を異ならせてもよい。
触覚制御部３３は、例えば、検出したズレ量に基づいてタッチパネル１３０の振動の振幅、周波数および振動期間のうちの少なくとも１つを変化させてもよい。
基準情報は、例えば、画像情報および音情報のうちの少なくとも一方を含んでもよい。
基準情報は、例えば、表示部１６０に表示される位置情報をさらに含んでいてもよく、マイクロコンピュータ２０は、ユーザがタッチパネル１３０にタッチした位置と、位置情報に対応する位置との間のズレ量をさらに検出し、触覚制御部３３は、タッチした位置と位置情報に対応する位置との間のズレ量に基づいて、タッチパネル１３０の振動を変化させ、ユーザに振動による触覚を与えてもよい。
パネル振動部１４０は、例えば圧電素子を備えていてもよい。
タッチパネル１３０は、例えば、表示部１６０の画像を表示する表示面側に設けられていてもよい。
実施の形態に係る電子機器１００に振動動作を実行させるコンピュータプログラムは、ユーザがタッチパネル１３０に対してタッチ操作すべき基準タイミングを示す基準情報を提示するステップと、ユーザによるタッチパネル１３０へのタッチ操作の入力タイミングと、基準タイミングとの間のズレ量を検出するステップと、検出したズレ量に基づいてタッチパネル１３０の振動を変化させ、ユーザに振動による触覚を与えるステップとを電子機器１００のコンピュータに実行させる。
以上のように、本開示における技術の例示として、実施の形態を説明した。そのために、添付図面および詳細な説明を提供した。したがって、添付図面および詳細な説明に記載された構成要素の中には、課題解決のために必須な構成要素だけでなく、上記技術を例示するために、課題解決のためには必須でない構成要素も含まれ得る。そのため、それらの必須ではない構成要素が添付図面や詳細な説明に記載されていることをもって、直ちに、それらの必須ではない構成要素が必須であるとの認定をするべきではない。
また、上述の実施の形態は、本開示における技術を例示するためのものであるから、請求の範囲またはその均等の範囲において種々の変更、置き換え、付加、省略などを行うことができる。
本開示は、ユーザのタッチ操作に応じて振動を発生させる電子機器に好適である。
２０ マイクロコンピュータ
２１ 圧電素子
２２ シム板
３１ タッチパネル制御部
３２ 表示情報制御部
３３ 触覚制御部
３４ 音声出力部
１００ 電子機器
１０５ 筐体
１１０ 上部筐体
１２０ 下部筐体
１３０ タッチパネル
１４０ パネル振動部
１５０ スピーカー部
１６０ 表示装置
本開示は、ユーザによるタッチ操作に応じて振動を発生させる電子機器に関する。
表示画面上にタッチパネルが配置された電子機器において、ユーザへの操作性向上のために、タッチパネルを振動させることにより、ユーザに触覚を与える技術が知られている。
例えば、特許文献１には、筐体に振動素子が取り付けられた携帯機器が開示されている。
また、特許文献２が開示するゲーム機器にタッチパネルを応用した例では、映像や音のタイミングに合わせてタッチパネルを操作することにより、操作タイミングの良否を映像や音で表現する。
また、特許文献３では、モータの回転軸に取り付けられた偏心錘を回転することで振動を発生する振動モータをゲーム機器用のコントローラに搭載し、ゲーム機器本体からフィードバックされた情報に基づいてコントローラ本体を振動させることで、臨場感を高めている。
特開２００８−１８１３６５号公報 特開２００６−３４０７４４号公報 特開２００２−２６３３６５号公報
本開示は、映像および／または音のタイミングに合わせてタッチパネルを操作する際に、ユーザが触れたタッチパネルから、操作タイミングに応じて様々な触覚を提示することにより、直感的な新しい操作感を得ることができる電子機器を提供する。
本開示のある実施形態に係る電子機器は、ユーザがタッチするタッチパネルと、タッチパネルを振動させる振動部と、振動部を制御する振動制御部と、ユーザがタッチパネルに対してタッチ操作すべき基準タイミングを示す基準情報を提示する提示部と、ユーザによるタッチパネルへのタッチ操作の入力タイミングと基準タイミングとの間のズレ量を検出する検出部とを備え、振動制御部は、検出したズレ量に基づいてタッチパネルの振動を変化させ、ユーザに振動による触覚を与える。
本開示のある実施形態に係る電子機器によれば、ユーザの操作タイミングに対する電子機器の反応を、タッチパネルに触れた指等から直接感じ取ることができるので、直感的な新しい操作感を得ることできる。
（ａ）および（ｂ）は実施形態に係る電子機器の全体構成を示す斜視図である。 実施形態に係る電子機器の分解斜視図である。 実施形態に係る電子機器の断面図である。 実施形態に係る電子機器のブロック図である。 実施形態に係るパネル振動部の斜視図である。 （ａ）は実施形態に係るパネル振動部の振動パターンの一例を示す概略図であり、（ｂ）は実施形態に係るパネル振動部の振動パターンの一例を示す概略図である。 （ａ）は振動モータの駆動波形と振動波形の一例を示す概略図であり、（ｂ）はパネル振動部の駆動波形と振動波形の一例を示す概略図である。 実施形態に係る電子機器の触覚提示の処理を示すフローチャートである。 実施形態に係る基準タイミングと入力タイミングのズレ量を説明する模式図である。 実施形態に係るタッチ操作例を示す模式図である。 実施形態に係るタッチ操作例を示す模式図である。 実施形態に係るタッチ操作例を示す模式図である。 実施形態に係るタッチ操作例を示す模式図である。 振動モータの外観を示す斜視図である。
以下、適宜図面を参照しながら、実施形態を詳細に説明する。但し、必要以上に詳細な説明は省略する場合がある。例えば、既によく知られた事項の詳細説明や実質的に同一の構成に対する重複説明を省略する場合がある。これは、以下の説明が不必要に冗長になるのを避け、当業者の理解を容易にするためである。
なお、発明者らは、当業者が本開示を十分に理解するために添付図面および以下の説明を提供するのであって、これらによって請求の範囲に記載の主題を限定することを意図するものではない。
特許文献２が開示するゲーム機器では、ユーザは映像および音で表現されるタイミングに合わせてタッチパネルを操作するが、その操作タイミングに対するゲーム機器からの情報の提示も映像および音で行われるため、実際の操作感は乏しい。また、特許文献３が開示するゲーム機器用コントローラは、ゲームが表示されるテレビ受像機から離れた位置に居るユーザが両手で保持して操作するコントローラである。そのため、仮にテレビ受像機の表示面にタッチパネルが設けられていた場合でも、ゲーム機器用コントローラの振動は、タッチパネルに対するタッチ操作には何も関与しない。
実施形態に係る電子機器によれば、ユーザの操作タイミングに対する電子機器の反応を、タッチパネルに触れた指等から直接感じ取ることができるので、直感的な新しい操作感を得ることできる。以下、実施形態に係る電子機器を詳細に説明する。
＜電子機器の全体構成＞
図１から図４を用いて実施形態に係る電子機器の全体構成を説明する。図１は、実施形態に係る電子機器の全体構成を示す斜視図である。図２は、実施形態に係る電子機器の分解斜視図である。図３は、実施形態に係る電子機器の断面図である。図４は、実施形態に係る電子機器のブロック図である。
図１から図３に示すように、電子機器１００は、表示部１６０と、それを覆うように配置されたタッチパネル１３０と、タッチパネル１３０を振動させるパネル振動部１４０と、音声を出力するスピーカー部１５０とを備える。タッチパネル１３０は、ユーザがタッチするパネル部材の一例である。タッチパネル１３０は、表示部１６０の画像を表示する表示面側に設けられている。表示部１６０は、ユーザがタッチパネル１３０に対してタッチ操作すべき基準タイミングを示す基準情報を提示する提示部の一例である。
ユーザは、表示部１６０に表示された内容を指やペンなどにより、タッチパネル１３０をタッチすることで、電子機器１００を操作する。
上部筐体１１０および下部筐体１２０は、ねじ等で一体に連結されることにより電子機器１００の筐体１０５を構成する。上部筐体１１０には、表示窓１１５が形成され、表示窓１１５を通してタッチパネル１３０を操作することができる。下部筐体１２０には、スピーカー部１５０から出力された音声を妨げないようにメッシュ部１２５が形成されている。
タッチパネル１３０には、パネル振動部１４０が取り付けられており、パネル振動部１４０を駆動することにより、タッチパネル１３０を振動させることができる。これにより、ユーザがタッチパネル１３０を操作した場合に、ユーザに振動による触覚を与えることができる。
また、このタッチパネル１３０の振動が上部筐体１１０に直接伝わらないように、上部筐体１１０とタッチパネル１３０表面の間には、クッション材１３５が設けられている。
タッチパネル１３０の上部筐体１１０と対向する面とは反対側の面には、表示部１６０が配置され、前述と同様に、タッチパネル１３０の振動が表示部１６０に直接伝わらないように、クッション材１６５が設けられている。クッション材１３５、１６５は、例えば、シリコンゴムやウレタンゴム等の緩衝部材である。
また、表示部１６０に表示された画像は、タッチパネル１３０を介して表示窓１１５側から目視することができる。
表示部１６０は、下部筐体１２０に固定されたフレーム１７０に取り付けられ、電子機器１００内部に固定される。
下部筐体１２０には、スピーカー部１５０が取り付けられている。スピーカー部１５０から出力された音声は、メッシュ部１２５を通して、筐体１０５の外部へ伝わる。
また、下部筐体１２０には、回路基板１８０が取り付けられ、タッチパネル１３０、表示部１６０、パネル振動部１４０、スピーカー部１５０が、電気的に接続されている。タッチパネル１３０、表示部１６０、パネル振動部１４０、スピーカー部１５０は、回路基板１８０に設けられたマイクロコンピュータ２０によって制御される。マイクロコンピュータ２０は、電子機器１００全体の動作を制御する。マイクロコンピュータ２０は、各種情報の検出および判断などの動作や、各構成要素の動作の制御を行なう。
なお、タッチパネル１３０は、静電式、抵抗膜式、光学式などのタッチパネルである。タッチパネル１３０は、ユーザのタッチ位置を検知する。タッチパネル１３０は、タッチパネル制御部３１により制御される。マイクロコンピュータ２０は、タッチパネル制御部３１を介してユーザのタッチ位置の情報を得ることができる。
表示部１６０は、液晶方式、有機ＥＬ方式、電子ペーパー方式、プラズマ方式などの表示装置である。表示部１６０は、表示情報制御部３２により制御される。マイクロコンピュータ２０は、表示情報制御部３２を介して表示部１６０に任意の表示をユーザに提示できる。
なお、本実施の形態においては、タッチパネル１３０と表示部１６０とを分離した構成としたが、タッチパネル１３０と表示部１６０とは一体に形成されていてもよい。例えば、タッチパネル機能を液晶パネルの内部に一体化するインセル型タッチパネルや、タッチパネル機能を液晶パネルの表面に一体化するオンセル型タッチパネル等の方式であってもよく、それらの方式を用いることにより、より薄型・軽量化を図ることができる。
図４に示すように、本実施の形態の電子機器１００は、マイクロコンピュータ２０と、各種プログラムを格納するＲＯＭ３８と、各種データを記憶するＲＡＭ３９と、表示部１６０と、表示部１６０を制御する表示情報制御部３２と、タッチパネル１３０と、タッチパネル１３０を制御するタッチパネル制御部３１と、タッチパネル１３０の操作時に触覚提示を行うためにパネル振動部１４０を制御する触覚制御部３３と、音声信号を再生するために、スピーカー部１５０を制御する音声出力部３４と、外部との通信を行う外部通信部３６と、その他各種入出力を行う各種Ｉ／Ｏ部３７とを備える。外部通信部３６は、例えばＷｉ−Ｆｉ（登録商標）などの無線ＬＡＮを用い、複数の電子機器間の相互接続性を認証された状態で接続される。電子機器間の接続については、アクセスポイントなど外部通信機器を経由して接続する方法、あるいは外部の通信機器を経由せずに直接接続する方法であるＰ２Ｐ（ワイヤレス・アドホック・ネットワーク）接続などでもよい。
＜パネル振動部の構成＞
次に、図５を用いてパネル振動部１４０の構成を説明する。図５は、本実施の形態のパネル振動部１４０の斜視図である。
図５に示すように、パネル振動部１４０は、圧電素子２１と、シム板２２と、ベース２３とを備える。シム板２２の両側に圧電素子２１が接着されている。圧電素子２１は、例えば、チタン酸ジルコン酸鉛等の圧電セラミックやニオブ酸リチウム等の圧電単結晶である。シム板２２の両端はベース２３に取り付けられており、いわゆる両持ち構成になっている。ベース２３は、タッチパネル１３０に取り付けられる。圧電素子２１は、触覚制御部（振動制御部）３３からの駆動電圧により伸縮する。シム板２２の両側に貼り付けられた圧電素子２１の片方が伸びて、片方が縮むように制御することで、シム板２２がたわみ、これを連続的に繰り返すことで振動を発生することができる。
シム板２２は、例えばリン青銅等のバネ部材である。シム板２２の振動は、ベース２３を介して、タッチパネル１３０を振動させる。タッチパネル１３０を操作しているユーザは、タッチパネル１３０をタッチ操作することでタッチパネル１３０の振動を感知することができる。
ベース２３は、例えば、アルミや真鍮等の金属や、ＰＥＴやＰＰ等のプラスチックである。
タッチパネル１３０を操作した際に触覚提示を行う場合の振動の周波数、振幅、振動期間は触覚制御部３３によって制御され、それらのうちの少なくとも１つを変化させることにより様々な触覚をユーザに提示することができる。例えば、後述するユーザによるタッチパネル１３０へのタッチ操作の入力タイミングと基準タイミングとの間のズレ量に応じて、振動の周波数、振幅、振動期間のうちの少なくとも１つを変化させる。振動の周波数としては、人が触覚を感じやすい１００〜４００Ｈｚ程度の周波数が望ましい。
なお、本実施の形態では、圧電素子２１をシム板２２に貼り付けているが、圧電素子２１を直接タッチパネル１３０に貼り付けてもよい。また、スパッタリング等の方法によりタッチパネル１３０に薄膜の透明圧電部材を形成してパネル振動部１４０として用いてもよい。また、タッチパネル１３０の上にカバー部材等がある場合は、圧電素子２１をカバー部材に貼り付けてもよい。なお、タッチパネル１３０上にカバー部材がある場合は、タッチパネル１３０とカバー部材の両方を含めて、タッチ位置を検出するパネル部材とよぶ。
また、本実施の形態では、シム板２２の両端がベース２３に支持される両持ち構成としているが、シム板２２の片側だけをベース２３で支持する片持ち構成としてもよい。
また、本実施の形態では、便宜的に、パネル振動部１４０をタッチパネル１３０の一辺にのみ設けているが、両辺や各辺など複数の振動部を設けてもよい。
＜パネル振動部の入力信号の説明＞
図６は、パネル振動部１４０の振動パターンの一例を示す概略図である。
マイクロコンピュータ２０の命令により、触覚制御部３３は、パネル振動部１４０へ電圧を印加し、図６（ａ）の振幅でタッチパネル１３０を振動させることで、ユーザに振動Ａを与える。振動Ａを与えるための電圧は正弦波で、例えば、１５０Ｈｚ、７０Ｖｒｍｓ、２周期である。このときのタッチパネル１３０上の振幅は、約５μｍである。また触覚制御部３３が、パネル振動部１４０へ電圧を印加し、図６（ｂ）の振幅でタッチパネル１３０を振動させることで、ユーザに振動Ｂを与える。振動Ｂを与えるための電圧は正弦波で、例えば、３００Ｈｚ、１００Ｖｒｍｓ、４周期である。このときのタッチパネル１３０上の振幅は、約１５μｍである。なお、タッチパネル１３０上の振幅が約５〜５０μｍとなるように周波数および電圧を設定すると、人間の指に心地良い触覚（振動）を提示することができる。
なお、周波数、電圧、周期に関しては一例であり、矩形波、のこぎり波など、別の波形や、間欠的な波形や、連続的に周波数や振幅が変化する波形などでもよい。また、タッチパネル１３０上の振幅の大きさは一例であり、タッチパネル１３０の大きさ、支持方法、パネル振動部１４０の数などの条件が異なると、振幅の大きさも変化する。
＜パネル振動部１４０の振動と振動モータの振動との比較＞
図７は、図１４に示す振動モータ２００による振動波形と、本実施の形態のパネル振動部１４０の振動波形を比較したものである。図１４に示す振動モータ２００では、モータ２１０の回転軸２２０に取り付けられた偏心錘２３０を回転することで振動を発生する。図７（ａ）は、振動モータ２００の駆動電圧と振動波形の一例を示した概略図である。図７（ｂ）は、パネル振動部１４０の駆動電圧と振動波形の一例を示した概略図である。
図７（ａ）に示すように、振動モータ２００に電圧Ｖ１を印加し、モータ２１０を回転させることで偏心錘２３０が回転軸２２０を中心に回転して振動が発生する。時間Ｔが経過したところで、回転を停止させるために、反転した電圧を印加しブレーキをかけるような駆動をする。偏心錘２３０が回転および停止する際には、偏心錘２３０の慣性の影響があるため、駆動電圧に対して発生する振動波形は、図７（ａ）に示すように、駆動開始時には、モータ２１０が回転するまでに、時間ｔ１の遅れが発生し、駆動停止時には、モータ２１０が完全に停止するまでに時間ｔ２の遅れが発生する。
一方、図７（ｂ）に示すように、本実施の形態のパネル振動部１４０は、圧電素子２１の伸縮を用いて振動を発生させるため、振動モータ２００のような慣性の影響受けずに、駆動開始時および停止時に時間の遅れがほとんどない振動波形を発生させることができる。
振動モータ２００を用いた振動では、偏心錘２３０の回転を振動に変換するため、モータ２１０の特性による回転数の限界があり、１００Ｈｚ程度までの振動の発生が限界である。しかしながら、前述したように、人が触覚を感じやすい周波数は１００〜４００Ｈｚ程度であるため、振動モータ２００では、この周波数帯の振動を提示するのは困難である。さらに、偏心錘２３０の慣性の影響のため、駆動開始時には時間ｔ１の遅れが発生し、駆動停止時には時間ｔ２の遅れにより振動余韻が発生する。また、この振動余韻は、ユーザが機器本体を把持している場合では、筐体を通してユーザに伝わってしまうため、タッチ操作後に違和感がある。また、例えば、ダブルクリックのような素早い連続のタッチ操作を行うと、この振動余韻が残っている状態で、次の振動を提示するため、操作に応じた触覚を十分に提示できない。
したがって、本実施の形態では、タッチパネル１３０の振動部として、圧電素子２１を駆動源とするパネル振動部１４０を用いることで、このような振動モータ２００における課題を解決している。
なお、図７の振動波形図は、説明上の模式図であり、実際の振動応答はこの限りではない。例えば、圧電素子２１の駆動では、駆動電圧と振動波形における遅延がない例で説明しているが、駆動回路の時定数や、振動部の構成の影響などで、若干の遅延が発生することがある。
また、タッチパネル１３０の共振周波数の影響で、駆動停止後の振動余韻が若干残ることもある。
＜触覚提示処理の説明＞
実施形態に係る電子機器１００は、映像や音などで表現される基準タイミングにあわせて、ユーザがタッチパネル１３０をタッチ操作する際に、タッチパネル１３０を振動させることにより、ユーザのタッチ操作による入力タイミングの良否をタッチパネル１３０からの触覚で提示する。
表示部１６０は、ユーザがタッチパネル１３０に対してタッチ操作すべき基準タイミングを示す基準情報を表示する。マイクロコンピュータ２０は、ユーザによるタッチパネル１３０へのタッチ操作の入力タイミングと基準タイミングとの間のズレ量を検出し、検出したズレ量に基づいてタッチパネル１３０の振動を変化させることで、ズレ量に応じて異なる触覚をユーザに提示する。例えば、ズレ量が大きい時と小さい時とでタッチパネル１３０の振動を異ならせることでユーザは異なる触覚を覚え、それによりタッチタイミングの良否を認識することができる。
以下、一例として、基準タイミングとユーザのタッチ操作による入力タイミングとを比較して評価するゲームプログラムの触覚提示を行う処理について、図８、図９を用いて説明する。
図８は、本実施の形態における触覚提示の処理を示すフローチャートである。フローチャートにおけるステップはＳと略する。
図９は、本実施の形態の基準タイミングと入力タイミングとのズレ量を説明する模式図である。
図８に示すように、マイクロコンピュータ２０により、ＲＯＭ３８に格納されたゲームプログラムを開始する。このゲームプログラムには基準情報が含まれている。Ｓ１１で、ゲームプログラムにより基準タイミングが設定される。続くＳ１２で、この基準タイミングをユーザへ提示するために、映像や音などによるガイド情報が提示される。例えば、基準情報には画像情報および音情報のうちの少なくとも一方が含まれ、画像であれば表示部１６０によって提示され、音であればスピーカー部１５０によって提示される。画像は動画であってもよいし静止画であってもよい。そして、処理はＳ１３に進む。
次に、Ｓ１３では、Ｓ１２において提示したガイド情報により、タッチ操作が有効となるタッチ領域が設定される。基準情報は、タッチ領域を表示部１６０に表示する位置を示す位置情報をさらに含み、その位置情報に対応した位置にタッチ領域が表示される。タッチ領域の詳細については、後述するゲームプログラムの操作例の中で説明する。そして、処理はＳ１４に進む。
Ｓ１４では、タッチパネル制御部３１からの情報に基づいて、タッチパネル１３０へのユーザのタッチ入力の有無が、マイクロコンピュータ２０により判断される。タッチされていない場合には、タッチ入力が行われるまで待機する。Ｓ１４でタッチ入力「有り」と判断されると、処理はＳ１５に進む。なお、Ｓ１４においてタッチ入力を所定時間以上検出しない場合は、Ｓ２６の処理に移ってもよい。
Ｓ１５では、ユーザがタッチパネル１３０にタッチした位置と、位置情報に対応する位置との間のズレ量を検出する。この例では、タッチパネル制御部３１からの情報に基づいて、タッチされた位置が、Ｓ１３で設定されたタッチ領域内であるかどうかマイクロコンピュータ２０によって判断される。マイクロコンピュータ２０により、タッチ位置がタッチ領域内であると判断された場合、処理はＳ１６に進む。
Ｓ１６では、基準タイミングとタッチパネル１３０をタッチ操作した入力タイミングとのズレ量をマイクロコンピュータ２０によって検出する。具体的には、図９に示すように、基準タイミングと入力タイミングの差分であるズレ量ｄを検出する。このズレ量ｄを、例えば、ＲＡＭ３９に一時保存し、処理はＳ１７に進む。
Ｓ１７では、マイクロコンピュータ２０によって、ズレ量ｄが、図９に示すように、基準タイミングに対して設けられた規定範囲±αに入っているかどうか判断される。規定範囲±αは、例えば、ゲームプログラムにおいて、タッチ操作が「成功」と判断する基準の範囲である。マイクロコンピュータ２０により、ズレ量ｄが±α以下であると判断された場合、処理はＳ１８に進む。
Ｓ１８では、マイクロコンピュータ２０によって、ズレ量ｄが、図９に示すように、基準タイミングに対して設けられた規定範囲±β（β＜α）に入っているかどうか判断される。マイクロコンピュータ２０により、ズレ量ｄが±β以下であると判断された場合、すなわち図９（ａ）に示す入力タイミングであった場合、ユーザのタッチ操作は「成功１」と判断され、処理はＳ１９に進む。
Ｓ１９では、触覚制御部３３がパネル振動部１４０を制御することで、ユーザに振動Ａを与える。ユーザはタッチパネル１３０をタッチしている指から振動Ａを感じることで、指がタッチパネル１３０に触れたことを認識し、タッチ操作が「成功１」であると確認できる。振動Ａが提示された後、処理はＳ２３に進む。
一方、Ｓ１８で、マイクロコンピュータ２０により、ズレ量ｄが±βより大きいと判断された場合、すなわち図９（ｂ）に示す入力タイミングであった場合、ユーザのタッチ操作は「成功２」と判断される。ここで、規定範囲±βは、規定範囲±αより狭い範囲であるため、「成功２」は、「成功１」と比べると、基準タイミングとの一致度合いが低い結果となる。例えば、ゲームプログラムとして、「成功２」は「成功１」に対して、低い評価（スコア）となる。そして、処理はＳ２０に進む。
Ｓ２０では、触覚制御部３３がパネル振動部１４０を制御することで、ユーザに振動Ａとは異なる振動Ｂを与える。ユーザはタッチパネル１３０をタッチしている指から振動Ｂを感じることで、指がタッチパネル１３０に触れたことを認識し、タッチ操作が「成功２」であると確認できる。振動Ｂが提示された後、処理はＳ２３に進む。
また、Ｓ１７において、マイクロコンピュータ２０により、ズレ量ｄが規定範囲±αより大きいと判断された場合、すなわち図９（ｃ）に示す入力タイミングであった場合、ゲームプログラムとしての「成功」と判断する基準範囲外であるため、ユーザのタッチ操作は「失敗１」と判断され、処理はＳ２１に進む。
Ｓ２１では、触覚制御部３３がパネル振動部１４０を制御することで、ユーザに「成功」の場合の振動Ａ、Ｂとは異なる振動Ｘを与える。ユーザはタッチパネル１３０をタッチしている指から振動Ｘを感じることで、タッチ操作が「失敗１」であると触覚から認識できる。振動Ｘは、パネル振動部１４０を駆動しないという振動パターンでもよい。振動Ｘが提示された後、処理はＳ２３に進む。
また、ステップのＳ１５において、タッチパネル制御部３１からの情報に基づいて、タッチされた位置がＳ１３で設定されたタッチ領域以外であると、マイクロコンピュータ２０によって判断された場合、ゲームプログラムとして指定した範囲外での操作になるため、「失敗２」と判断され、処理はＳ２２に進む。
Ｓ２２では、触覚制御部３３がパネル振動部１４０を制御することで、ユーザに「成功」の場合の振動Ａ、Ｂとは異なる振動Ｙを与える。ユーザはタッチパネル１３０をタッチしている指から振動Ｙを感じることで、タッチ操作が「失敗２」であると触覚から認識できる。なお、振動Ｙは、振動Ｘと同じ振動パターンでもよいし異なっていてもよく、また、パネル振動部１４０を駆動しないという振動パターンでもよい。振動Ｙが提示された後、処理はＳ２３に進む。
Ｓ２３では、タッチパネル制御部３１からの情報に基づいて、タッチパネル１３０上でのユーザのタッチ入力が終了したかどうかマイクロコンピュータ２０により判断される。タッチ入力が終了されていない場合、処理はＳ２４に進む。
Ｓ２４では、Ｓ１４でタッチ入力を検出してから、所定時間が経過しているか、マイクロコンピュータ２０により判断される。所定時間が経過していなければ、処理はＳ２３に戻り、再びタッチ入力が終了されたかが判断され、所定時間が経過している場合、処理はＳ２５に進む。また、Ｓ２３で、タッチ入力が終了したと判断されると、処理はＳ２５に進む。
Ｓ２５では、触覚制御部３３がパネル振動部１４０の振動を停止するように制御し、処理はＳ２６に進む。
Ｓ２６では、Ｓ１１で、ゲームプログラムにより設定された基準タイミングを提示する期間が終了したかどうかを、マイクロコンピュータ２０によって判断される。基準タイミングの提示期間が終了すれば、触覚提示のフローは終了し、基準タイミングの提示期間が終了していない場合には、処理はＳ１２に戻り、再び基準タイミングと入力タイミングの比較による触覚提示が行われる。
＜操作例＞
次に、図１０から図１３を用いて、実施形態に係る電子機器１００を用いたゲームプログラムの操作例を説明する。
図１０は、表示部１６０に表示されるタイミングマーカー３１０にあわせてタッチ操作を行うゲームプログラム例を示したものである。
図１０に示すように、表示部１６０には、網掛けで図示しているマーカー表示エリア３００と、マーカー表示エリア３００内を右端部から左端部に向かって移動するタイミングマーカー３１０と、入力判定枠３２０ａ、３２０ｂが表示される。タイミングマーカー３１０は、例えば、音楽にあわせて一定の速度で移動するように表示される。
図１０のゲームプログラムの操作例は、移動するタイミングマーカー３１０が、マーカー表示エリア３００の左端部にある入力判定枠３２０ａ、３２０ｂに到達したとき（重なったとき）がタッチ入力すべきタイミングとなるゲームプログラムである。
この場合、基準タイミングを、移動するタイミングマーカー３１０が入力判定枠３２０ａ、３２０ｂに重なるタイミングとして、ユーザに提示していることになる。
図１０の上段に示すように、入力判定枠３２０ａのほぼ中心にタイミングマーカー３１０が重なったタイミングでタッチできれば、成功判定となる。一方、図１０の下段に示すように入力判定枠３２０ｂの中心からタイミングマーカー３１０がずれたタイミングでタッチした場合は失敗判定となる。触覚制御部３３によって、それぞれの操作判定に応じた異なる触覚を提示する。
また、タッチ領域を入力判定枠３２０ａ、３２０ｂとすることで、タイミングマーカー３１０と入力判定枠３２０ａ、３２０ｂが一致した感覚をユーザに直感的に伝えることができる。
次に、図１１は、表示部１６０に表示される移動マーカー４１０自体をタッチ操作するゲームプログラム例を示したものである。
図１１に示すように、表示部１６０には、マーカー表示エリア４００と、マーカー表示エリア４００内を移動する移動マーカー４１０が表示される。図１１に示すように、例えば、移動マーカー４１０は、複数の風船で表示されており、マーカー表示エリア４００の下端部から上端部に向かって移動する。
図１１のゲームプログラムは、移動マーカー４１０が、マーカー表示エリア４００に表示されている間に、移動マーカー４１０自体をタッチすることが入力すべきタイミングとなるゲームプログラムである。
この場合、基準タイミングは、移動マーカー４１０がマーカー表示エリア４００内に表示されている時間（移動速度）によって、ユーザに提示していることになる。
図１１に示すように、移動マーカー４１０自体をタッチできれば成功判定となり、触覚制御部３３によって、それぞれの操作判定に応じた触覚を提示する。
また、タッチ領域を移動マーカー４１０自体とすることで、マーカー表示エリア４００内を移動する移動マーカー４１０をタッチできた感覚をユーザに直感的に伝えることができる。
次に、図１２は、表示部１６０に表示されるマーカー表示が変化したタイミングでタッチ操作するゲームプログラム例を示したものである。
図１２に示すように、表示部１６０には、複数のマーカー表示部５００が表示され、マーカー表示部５００は、オブジェクト５１０を表示したり、非表示にしたりする。図１２のゲームプログラムは、例えば、もぐらたたきゲームであり、マーカー表示部５００はもぐらの巣穴であり、オブジェクト５１０はもぐらに相当する。
図１２のゲームプログラムの操作例は、マーカー表示部５００に、オブジェクトが表示されたタイミングが入力すべきタイミングとなるゲームプログラムである。
この場合、基準タイミングは、オブジェクト５１０がマーカー表示部５００に表示されている時間によって、ユーザに提示していることになる。
図１２に示すように、オブジェクト５１０が表示されているタイミングで、マーカー表示部５００（またはオブジェクト５１０）をタッチできれば成功判定となり、触覚制御部３３によって、それぞれの操作判定に応じた触覚を提示する。
また、タッチ領域をマーカー表示部５００とすることで、オブジェクト５１０が表示されたタイミングでタッチできた感覚をユーザに直感的に伝えることができる。
次に、図１３は、スピーカー部１５０から発音される音のタイミングにあわせてタッチ操作するゲームプログラム例を示したものである。
図１３に示すように、表示部１６０には、ピアノの鍵盤６００が表示されており、発音される音に合わせて、例えば、鍵盤６００の表示色が変化して鍵盤６１０になる。
図１３のゲームプログラムは、鍵盤６００の色が変化したタイミングが入力すべきタイミングとなるゲームプログラムであり、前述した図１２の場合と映像情報としては同様だが、図１３のゲームプログラムは、音の情報により、タッチすべき位置とタイミングが示されているところが、図１２の場合と異なる。
この場合、基準タイミングは音のデータ自体であり、音としてユーザにタイミングを提示していることになる。
図１３に示すように、音の情報をもとに、色が変化した鍵盤６１０をタッチできれば成功判定となり、触覚制御部３３によって、それぞれの操作判定に応じた触覚を提示する。
また、タッチ領域を色が変化した鍵盤６１０とすることで、音のタイミング情報に対して、正しいタッチ操作ができた感覚をユーザに直感的に伝えることができる。
以上、説明したように、本実施の形態の電子機器１００は、タッチパネル１３０を振動させるパネル振動部１４０に圧電素子を用いることで、ユーザのタッチパネル１３０へのタッチ操作に対して、振動の遅延や余韻が少なく、応答性の良い触覚を提示することができる。
これにより、映像や音のタイミングに合わせてタッチパネル１３０を操作するタイミングの良否を判定するようなゲームプログラムにおいて、ユーザが触れたタッチパネル１３０から、操作タイミングに応じて様々な触覚を提示することができるので、直感的な新しい操作感を得ることができる。
なお、本実施の形態では、基準タイミングと入力タイミングのズレ量ｄの規定範囲を±α（または±β）と規定したが、これに限定されることなく、＋側や−側のみの時間のズレの判定を行なってもよい。
また、本実施の形態では、成功時の振動パターンを２種類にした場合で説明しているが、これに限定されることなく、成功時の振動パターンは、１種類でもいいし、３種類以上でもよい。
また、本実施の形態では、成功時または失敗時の振動パターンを触覚制御部３３が制御すると説明を行ったが、これに限定されない。成功時または失敗時の振動の強さを変えるという触覚の提示方法でもよい。
また、本実施の形態では、振動パターンは、パネル振動部１４０を駆動しない場合も含んでいる。そのため、成功時を振動させないで、失敗時に振動させるという触覚の提示方法でもよい。
また、本実施の形態では、タッチパネル１３０へのタッチ操作を指で行う場合で説明を行ったが、これに限定されることなく、タッチパネル１３０からの振動を触覚として感じ取れれば、ペンなどを介して操作してもよい。
また、本実施の形態では、図１０から図１３を用いて、電子機器１００の応用例として、４つのゲームプログラムの操作例を説明したが、これらは一例であり、本実施の形態における電子機器１００の応用例はこれらに限定されない。
また、電子機器１００の各構成要素を制御する制御部がそれぞれ設けられているが、実施の形態はこれに限られない。タッチパネル制御部３１、表示情報制御部３２、触覚制御部３３等の各種制御部は、マイクロコンピュータ２０が兼ねる構成であってもよい。
＜その他の実施の形態＞
以上のように、本出願において開示する技術の例示として、実施の形態を説明した。しかしながら、本開示における技術はこれらに限定されず、適宜、変更、置き換え、付加、省略などを行った実施の形態も可能である。また、上記実施の形態で説明した各構成要素を組み合わせて、新たな実施の形態とすることも可能である。
以下、他の実施の形態を例示する。
実施の形態では、電子機器の一例としてタブレット型の情報端末機器を用いて説明したが、電子機器はこれには限らない。例えば、携帯電話、ＰＤＡ、ゲーム機、カーナビゲーション、ＡＴＭなど、タッチパネルを備える電子機器であってもよい。
また、上記実施の形態では、振動を発生することで触覚を提示したが、本開示の技術はこれに限られない。振動以外にも、例えば、静電気による摩擦の変化や、電流による皮膚の刺激、液体による画面形状の変化など、他の方法で触覚を提示してもよい。また、これらの触覚の提示方法を適宜組み合わせてもよい。
なお、上述した電子機器の動作は、ハードウエアによって実現されてもよいしソフトウエアによって実現されてもよい。そのような制御動作を実行させるプログラムは、例えばマイクロコンピュータ２０の内蔵メモリーやＲＯＭ３８に記憶される。また、そのようなコンピュータプログラムは、それが記録された記録媒体（光ディスク、半導体メモリー等）から電子機器へインストールしてもよいし、インターネット等の電気通信回線を介してダウンロードしてもよい。
＜まとめ＞
実施の形態に係る電子機器１００は、ユーザがタッチするタッチパネル１３０と、タッチパネル１３０を振動させるパネル振動部１４０と、パネル振動部１４０を制御する触覚制御部３３と、ユーザがタッチパネル１３０に対してタッチ操作すべき基準タイミングを示す基準情報を提示する表示部１６０と、ユーザによるタッチパネル１３０へのタッチ操作の入力タイミングと、基準タイミングとの間のズレ量を検出するマイクロコンピュータ２０とを備える。触覚制御部３３は、検出したズレ量に基づいてタッチパネル１３０の振動を変化させ、ユーザに振動による触覚を与える。
触覚制御部３３は、例えば、ズレ量が大きい時と小さい時とでタッチパネル１３０の振動を異ならせてもよい。
触覚制御部３３は、例えば、ズレ量が第１の範囲（±α）内である時とない時とでタッチパネル１３０の振動を異ならせてもよい。
触覚制御部３３は、例えば、ズレ量が第１の範囲（±α）より狭い第２の範囲（±β）内である時とない時とでタッチパネル１３０の振動を異ならせてもよい。
触覚制御部３３は、例えば、検出したズレ量に基づいてタッチパネル１３０の振動の振幅、周波数および振動期間のうちの少なくとも１つを変化させてもよい。
基準情報は、例えば、画像情報および音情報のうちの少なくとも一方を含んでもよい。
基準情報は、例えば、表示部１６０に表示される位置情報をさらに含んでいてもよく、マイクロコンピュータ２０は、ユーザがタッチパネル１３０にタッチした位置と、位置情報に対応する位置との間のズレ量をさらに検出し、触覚制御部３３は、タッチした位置と位置情報に対応する位置との間のズレ量に基づいて、タッチパネル１３０の振動を変化させ、ユーザに振動による触覚を与えてもよい。
パネル振動部１４０は、例えば圧電素子を備えていてもよい。
タッチパネル１３０は、例えば、表示部１６０の画像を表示する表示面側に設けられていてもよい。
実施の形態に係る電子機器１００に振動動作を実行させるコンピュータプログラムは、ユーザがタッチパネル１３０に対してタッチ操作すべき基準タイミングを示す基準情報を提示するステップと、ユーザによるタッチパネル１３０へのタッチ操作の入力タイミングと、基準タイミングとの間のズレ量を検出するステップと、検出したズレ量に基づいてタッチパネル１３０の振動を変化させ、ユーザに振動による触覚を与えるステップとを電子機器１００のコンピュータに実行させる。
以上のように、本開示における技術の例示として、実施の形態を説明した。そのために、添付図面および詳細な説明を提供した。したがって、添付図面および詳細な説明に記載された構成要素の中には、課題解決のために必須な構成要素だけでなく、上記技術を例示するために、課題解決のためには必須でない構成要素も含まれ得る。そのため、それらの必須ではない構成要素が添付図面や詳細な説明に記載されていることをもって、直ちに、それらの必須ではない構成要素が必須であるとの認定をするべきではない。
また、上述の実施の形態は、本開示における技術を例示するためのものであるから、請求の範囲またはその均等の範囲において種々の変更、置き換え、付加、省略などを行うことができる。
本開示は、ユーザのタッチ操作に応じて振動を発生させる電子機器に好適である。
２０ マイクロコンピュータ
２１ 圧電素子
２２ シム板
３１ タッチパネル制御部
３２ 表示情報制御部
３３ 触覚制御部
３４ 音声出力部
１００ 電子機器
１０５ 筐体
１１０ 上部筐体
１２０ 下部筐体
１３０ タッチパネル
１４０ パネル振動部
１５０ スピーカー部
１６０ 表示装置

Claims (10)

  1. ユーザがタッチするパネルと、
    前記パネルを振動させる振動部と、
    前記振動部を制御する振動制御部と、
    前記ユーザが前記パネルに対してタッチ操作すべき基準タイミングを示す基準情報を提示する提示部と、
    前記ユーザによる前記パネルへのタッチ操作の入力タイミングと、前記基準タイミングとの間のズレ量を検出する検出部と、
    を備え、
    前記振動制御部は、前記検出したズレ量に基づいて前記パネルの振動を変化させ、前記ユーザに前記振動による触覚を与える、電子機器。
  2. 前記振動制御部は、前記ズレ量が大きい時と小さい時とで前記パネルの振動を異ならせる、請求項１に記載の電子機器。
  3. 前記振動制御部は、前記ズレ量が第１の範囲内である時とない時とで前記パネルの振動を異ならせる、請求項１または２に記載の電子機器。
  4. 前記振動制御部は、前記ズレ量が前記第１の範囲より狭い第２の範囲内である時とない時とで前記パネルの振動を異ならせる、請求項３に記載の電子機器。
  5. 前記振動制御部は、前記検出したズレ量に基づいて前記パネルの振動の振幅、周波数および振動期間のうちの少なくとも１つを変化させる、請求項１から４のいずれかに記載の電子機器。
  6. 前記基準情報は、画像情報および音情報のうちの少なくとも一方を含む、請求項１から５のいずれかに記載の電子機器。
  7. 前記基準情報は、前記提示部に表示される位置情報をさらに含み、
    前記検出部は、前記ユーザが前記パネルにタッチした位置と、前記位置情報に対応する位置との間のズレ量をさらに検出し、
    前記振動制御部は、前記タッチした位置と前記位置情報に対応する位置との間のズレ量に基づいて、前記パネルの振動を変化させ、前記ユーザに前記振動による触覚を与える、請求項１から６のいずれかに記載の電子機器。
  8. 前記振動部は圧電素子を備える、請求項１から７のいずれかに記載の電子機器。
  9. 前記パネルは、前記提示部の画像を表示する表示面側に設けられている、請求項１から８のいずれかに記載の電子機器。
  10. 電子機器に振動動作を実行させるコンピュータプログラムであって、
    前記コンピュータプログラムは、
    ユーザがパネルに対してタッチ操作すべき基準タイミングを示す基準情報を提示するステップと、
    前記ユーザによる前記パネルへのタッチ操作の入力タイミングと、前記基準タイミングとの間のズレ量を検出するステップと、
    前記検出したズレ量に基づいて前記パネルの振動を変化させ、前記ユーザに前記振動による触覚を与えるステップと、
    を前記電子機器のコンピュータに実行させるコンピュータプログラム。
JP2013555189A 2012-01-24 2013-01-21 電子機器 Pending JPWO2013111557A1 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2013555189A JPWO2013111557A1 (ja) 2012-01-24 2013-01-21 電子機器

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2012011887 2012-01-24
JP2012011887 2012-01-24
JP2013555189A JPWO2013111557A1 (ja) 2012-01-24 2013-01-21 電子機器

Publications (1)

Publication Number Publication Date
JPWO2013111557A1 true JPWO2013111557A1 (ja) 2015-05-11

Family

ID=48873289

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2013555189A Pending JPWO2013111557A1 (ja) 2012-01-24 2013-01-21 電子機器

Country Status (4)

Country Link
US (1) US20140300567A1 (ja)
JP (1) JPWO2013111557A1 (ja)
CN (1) CN103889522A (ja)
WO (1) WO2013111557A1 (ja)

Families Citing this family (35)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
USD712363S1 (en) 2013-03-14 2014-09-02 Lutron Electronics Co., Inc. Load control device
USD711837S1 (en) * 2013-03-14 2014-08-26 Lutron Electronics Co., Inc. Load control device
USD718723S1 (en) * 2013-03-14 2014-12-02 Lutron Electronics Co., Inc. Load control device
USD719108S1 (en) 2013-03-14 2014-12-09 Lutron Electronics Co., Inc. Load control device
JP6061824B2 (ja) * 2013-09-11 2017-01-18 株式会社バンダイナムコエンターテインメント 遊戯装置
JP6283987B2 (ja) * 2013-09-18 2018-02-28 カシオ計算機株式会社 操作練習装置、操作練習方法およびプログラム
FR3015382B1 (fr) * 2013-12-19 2017-01-13 Dav Dispositif de controle pour vehicule automobile et procede de commande
WO2015098565A1 (ja) * 2013-12-24 2015-07-02 ソニー株式会社 表示装置
JP6519074B2 (ja) * 2014-09-08 2019-05-29 任天堂株式会社 電子機器
CN105718069B (zh) * 2014-12-02 2020-01-31 联想(北京)有限公司 信息处理方法及电子设备
JP6519075B2 (ja) * 2015-02-10 2019-05-29 任天堂株式会社 情報処理装置、情報処理プログラム、情報処理システム、および、情報処理方法
CN104731511B (zh) * 2015-03-31 2018-03-27 联想(北京)有限公司 一种信息处理的方法及电子设备
CN104882090B (zh) * 2015-05-26 2017-07-07 浙江大学 一种盲人触觉图像实现的装置及方法
USD842818S1 (en) 2015-06-23 2019-03-12 Gecko Alliance Group Inc. Top-side control panel for bathing unit
US20170017315A1 (en) 2015-07-14 2017-01-19 Gecko Alliance Group Inc. Topside control panel for bathing unit system
JP6450297B2 (ja) * 2015-10-07 2019-01-09 株式会社カプコン ゲームプログラムおよびゲーム装置
JP2017018564A (ja) * 2015-10-09 2017-01-26 株式会社カプコン ゲームプログラムおよびゲーム装置
JP6450299B2 (ja) * 2015-10-09 2019-01-09 株式会社カプコン ゲームプログラムおよびゲーム装置
JP6685695B2 (ja) * 2015-10-30 2020-04-22 キヤノン株式会社 端末及び撮像装置
KR101920013B1 (ko) * 2015-12-04 2018-11-19 주식회사 모다이노칩 터치 스크린 장치
JP6772580B2 (ja) * 2016-06-24 2020-10-21 セイコーエプソン株式会社 電子機器、制御プログラム
US11085832B2 (en) 2016-08-25 2021-08-10 Johnson Controls Technology Company Mitigation of fluid ingress via convection venting on electronic devices
US10612811B2 (en) 2016-08-25 2020-04-07 Johnson Controls Technology Company Housing for electronic devices including air outlet with fluid ingress mitigation
USD844570S1 (en) 2017-01-12 2019-04-02 Johnson Controls Technology Company Building automation device
USD828816S1 (en) 2017-01-12 2018-09-18 Johnson Controls Technology Company Building automation device
JP1588911S (ja) * 2017-01-13 2017-10-23
USD833402S1 (en) * 2017-01-30 2018-11-13 Brightswitch, Inc. Home automation control device
USD882528S1 (en) * 2017-06-05 2020-04-28 Commscope Technologies Llc Display for a rack-mounted controller unit
JP6609649B2 (ja) * 2018-01-22 2019-11-20 株式会社丸和製作所 触覚付与装置およびプログラム
EP3846005B1 (en) * 2018-08-29 2024-10-16 Alps Alpine Co., Ltd. Input device, control method, and program
JP1672172S (ja) * 2019-11-18 2020-11-09
USD989009S1 (en) * 2020-02-25 2023-06-13 View, Inc. Control aid housing
USD953844S1 (en) 2020-02-25 2022-06-07 View, Inc. Flush-mount faceplate
US12086334B2 (en) 2021-11-01 2024-09-10 Gecko Alliance Group Inc. Topside control panel and topside control panel system for a bathing unit system and method of operating same
WO2024204530A1 (ja) * 2023-03-29 2024-10-03 株式会社栗本鐵工所 情報処理システム、情報処理装置、情報処理方法及びコンピュータプログラム

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006068210A (ja) * 2004-09-01 2006-03-16 Nintendo Co Ltd ゲーム装置およびゲームプログラム
JP2006340744A (ja) * 2005-06-07 2006-12-21 Nintendo Co Ltd ゲームプログラムおよびゲーム装置
JP2008200295A (ja) * 2007-02-20 2008-09-04 Namco Bandai Games Inc ゲーム装置、プログラム及び情報記憶媒体
JP2008264297A (ja) * 2007-04-23 2008-11-06 Namco Bandai Games Inc ゲームシステム、プログラム及び情報記憶媒体
JP2009165564A (ja) * 2008-01-11 2009-07-30 Sega Corp ゲーム進行制御方法、ゲーム進行制御プログラムを記憶した情報記憶媒体、及びゲーム装置
JP2009276829A (ja) * 2008-05-12 2009-11-26 Nintendo Co Ltd 情報処理プログラムおよび情報処理装置
JP2011172729A (ja) * 2010-02-24 2011-09-08 Konami Digital Entertainment Co Ltd ゲーム装置、ゲーム制御方法、及び、プログラム
WO2011115104A1 (ja) * 2010-03-15 2011-09-22 株式会社コナミデジタルエンタテインメント ゲームシステム、ゲームシステムの制御方法及びゲームシステム装置用プログラム

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH114966A (ja) * 1996-10-01 1999-01-12 Sony Computer Entateimento:Kk ゲーム機用操作装置及びゲーム装置
JP3949912B2 (ja) * 2000-08-08 2007-07-25 株式会社エヌ・ティ・ティ・ドコモ 携帯型電子機器、電子機器、振動発生器、振動による報知方法および報知制御方法
JP2008181365A (ja) * 2007-01-25 2008-08-07 Mitsubishi Electric Corp 携帯機器

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006068210A (ja) * 2004-09-01 2006-03-16 Nintendo Co Ltd ゲーム装置およびゲームプログラム
JP2006340744A (ja) * 2005-06-07 2006-12-21 Nintendo Co Ltd ゲームプログラムおよびゲーム装置
JP2008200295A (ja) * 2007-02-20 2008-09-04 Namco Bandai Games Inc ゲーム装置、プログラム及び情報記憶媒体
JP2008264297A (ja) * 2007-04-23 2008-11-06 Namco Bandai Games Inc ゲームシステム、プログラム及び情報記憶媒体
JP2009165564A (ja) * 2008-01-11 2009-07-30 Sega Corp ゲーム進行制御方法、ゲーム進行制御プログラムを記憶した情報記憶媒体、及びゲーム装置
JP2009276829A (ja) * 2008-05-12 2009-11-26 Nintendo Co Ltd 情報処理プログラムおよび情報処理装置
JP2011172729A (ja) * 2010-02-24 2011-09-08 Konami Digital Entertainment Co Ltd ゲーム装置、ゲーム制御方法、及び、プログラム
WO2011115104A1 (ja) * 2010-03-15 2011-09-22 株式会社コナミデジタルエンタテインメント ゲームシステム、ゲームシステムの制御方法及びゲームシステム装置用プログラム

Also Published As

Publication number Publication date
WO2013111557A1 (ja) 2013-08-01
CN103889522A (zh) 2014-06-25
US20140300567A1 (en) 2014-10-09

Similar Documents

Publication Publication Date Title
WO2013111557A1 (ja) 電子機器
JP5660580B2 (ja) 電子機器
JP5942152B2 (ja) 電子機器
JP5507760B2 (ja) 電子機器
JP6037252B2 (ja) 電子機器
EP2772832B1 (en) Haptic device, electronic device and method for producing a haptic effect
JP5421500B2 (ja) 電子機器
JP5390029B2 (ja) 電子機器
CN103513767A (zh) 触觉反馈控制系统
JP6467643B2 (ja) 電子機器
JP6731866B2 (ja) 制御装置、入力システムおよび制御方法
US20150086046A1 (en) Feedback providing module, feedback providing appratus, and feedback providing method
JP6528086B2 (ja) 電子機器
JP2013008118A (ja) 電子機器
KR20120115159A (ko) 택타일 피드백 방법 및 장치
JP5994991B2 (ja) 電子機器
US20200142492A1 (en) Haptic effects using a high bandwidth thin actuation system
WO2016092644A1 (ja) 電子機器及び駆動制御方法

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20150210

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20160126

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20160524