JP5809079B2 - 電子機器及び電子機器の制御方法 - Google Patents

Description

この発明は、電子機器及び電子機器の制御方法に関する。

現在、タッチパネルやタッチパッドなどが広く用いられている。そのタッチパネルやタッチパッドなどを操作した際に、タッチパネルやタッチパネルを湾曲振動させることにより、操作者の指先などに操作感をフィードバックするものが提案されている（例えば、特許文献１参照）。

特開２００６−２１５７７６号公報

ところで、特許文献１記載の電子機器は、タッチパネル全体に一定の触感を呈示するものであって、例えば、タッチパネルに表示される画像の特徴に応じて、位置によって触感を変化させることができないという問題がある。そのため、従来、タッチパネルにおいて画像の触感を表現するためには、画像に文書としてコメントを付加したり、吹き出しや矢印をつけて説明を付加する必要があった。しかし、文字で表現された触感に対する感覚は人によって異なるため、文字による説明では表現者と受信者とのギャップを埋めることができなかった。

したがって、かかる点に鑑みてなされた本発明の目的は、表示する画像の特徴に応じて対応する触感を呈示可能な電子機器を提供することにある。

上述した諸課題を解決すべく、第１の発明による電子機器は、
画像を表示する表示部と、
接触を検出するタッチセンサと、
前記タッチセンサのタッチ面に対して触感を呈示する触感呈示部と、
前記画像を複数の領域に分割し、前記タッチセンサにおける複数の領域のいずれかの領域に対応する位置への接触を検出すると、当該領域に対応付けられた触感を呈示するように前記触感呈示部を制御する制御部と、
を備える電子機器であって、
前記制御部は、前記画像の輝度若しくは色に基づくスペクトル分布及び前記画像の周波数スペクトルの少なくともいずれか一方に基づき、前記複数の領域に対応付ける触感を設定するものである。

また、第２の発明による電子機器は、
前記制御部が、前記タッチセンサにおける複数の領域のいずれかの領域に対応する位置への接触を検出し、当該接触の押圧に基づくデータが所定の閾値を満たした場合、当該領域に対応付けられた触感を呈示するように前記触感呈示部を制御するものである。

また、第３の発明による電子機器は、
前記制御部が、前記画像の輝度若しくは色に基づくスペクトル分布及び前記画像の周波数スペクトルの少なくともいずれか一方に基づき、前記画像を複数の領域に分割するものである。

また、第４の発明による電子機器は、
画像を表示する表示部と、
接触を検出するタッチセンサと、
前記タッチセンサのタッチ面に対して触感を呈示する触感呈示部と、
前記画像を複数の領域に分割し、前記タッチセンサにおける複数の領域のいずれかの領域に対応する位置への接触を検出すると、当該領域に対応付けられた触感を呈示するように前記触感呈示部を制御する制御部と、
を備える電子機器であって、
前記制御部は、前記タッチセンサにおける複数の領域のいずれかの領域に対応する位置への接触を検出し、当該接触の押圧に基づくデータが所定の閾値を満たした場合、当該領域に対応付けられた触感を呈示するように前記触感呈示部を制御し、
前記制御部は、前記画像の輝度若しくは色に基づくスペクトル分布及び前記画像の周波数スペクトルの少なくともいずれか一方に基づき、前記所定の閾値を設定するものである。

また、第５の発明による電子機器は、
前記画像のデータを所定の画像フォーマットで記憶する記憶部を備え、
前記制御部は、前記画像フォーマットの付加領域に前記複数の領域の情報及び前記複数の領域に対応付けられた触感の情報を含めて前記記憶部に記憶させるものである。

また、第６の発明による電子機器は、
通信部を備え、
前記制御部は、前記画像フォーマットによって、前記画像のデータと共に、前記複数の領域の情報及び前記複数の領域に対応付けられた触感の情報を前記通信部により送信するものである。

上述したように本発明の解決手段を装置として説明してきたが、本発明はこれらに実質的に相当する方法、プログラム、プログラムを記録した記憶媒体としても実現し得るものであり、本発明の範囲にはこれらも包含されるものと理解されたい。

例えば、本発明を方法として実現させた第７の発明による電子機器の制御方法は、
画像を表示する表示部と、
接触を検出するタッチセンサと、
前記タッチセンサのタッチ面に対して触感を呈示する触感呈示部と、を備える電子機器の制御方法であって、
前記画像を複数の領域に分割するステップと、
前記画像の輝度若しくは色に基づくスペクトル分布及び前記画像の周波数スペクトルの少なくともいずれか一方に基づき、前記複数の領域に対応付ける触感を設定するステップと、
前記タッチセンサにおける複数の領域のいずれかの領域に対応する位置への接触を検出すると、当該領域に対応付けられた触感を呈示するように前記触感呈示部を制御するステップと、を有するものである。
また、本発明を方法として実現させた第８の発明による電子機器の制御方法は、
画像を表示する表示部と、
接触を検出するタッチセンサと、
前記タッチセンサのタッチ面に対して触感を呈示する触感呈示部と、を備える電子機器の制御方法であって、
前記画像を複数の領域に分割するステップと、
前記タッチセンサにおける複数の領域のいずれかの領域に対応する位置への接触を検出し、当該接触の押圧に基づくデータが所定の閾値を満たした場合、当該領域に対応付けられた触感を呈示するように前記触感呈示部を制御するステップと、
前記画像の輝度若しくは色に基づくスペクトル分布及び前記画像の周波数スペクトルの少なくともいずれか一方に基づき、前記所定の閾値を設定するステップと、
を有するものである。

本発明に係る電子機器及び電子機器の制御方法によれば、表示する画像の特徴に応じて対応する触感を呈示することが可能となる。

図１は、本発明の一実施形態に係る電子機器の機能ブロック図である。 図２は、図１に示す電子機器の正面図である。 図３は、触感パターンテーブルの一例を示す図である。 図４は、ヒストグラムを用いた画像の領域分割の一例を示す図である。 図５は、図１に示す電子機器の動作フローチャートである。 図６は、分割された領域の一例を示す図である。 図７は、分割された領域への触感選択ウィンドウの一例を示す図である。 図８は、分割された領域への触感設定画面の一例を示す図である。

以降、諸図面を参照しながら、本発明の実施態様を詳細に説明する。以下の実施形態においては、本発明の電子機器の一例として、携帯電話やＰＤＡなどのような電子機器であってタッチパネルを備えているものを想定して説明する。しかしながら、本発明の電子機器は、これらの端末に限定されるものではなく、例えば、ゲーム機、デジタルカメラ、ポータブルオーディオプレーヤ、ノートＰＣ、ミニノートＰＣ、デスクトップＰＣ、デジタルサイネージ（電子看板）装置などの種々の電子機器とすることができる。

図１は、本発明の一実施形態に係る電子機器１０の内部構成を概略的に示す機能ブロック図である。図１に示すように、電子機器１０は、タッチパネル１０１と、触感呈示部１０４と、押圧検出部１０５と、撮像部１０６と、通信部１０７と、記憶部１０８と、制御部１０９とを備えている。

本実施形態では、タッチパネル１０１は、表示部１０２と、タッチセンサ１０３とを備えている。このタッチパネル１０１は、ユーザの接触を検出するタッチセンサ１０３を、表示部１０２の前面に重畳させて配置することにより構成する。図２は、電子機器１０の正面図であり、電子機器１０の正面にはタッチパネル１０１（表示部１０２及びタッチセンサ１０３）及び撮像部１０６が設けられている。なお、本実施形態は、表示部１０２の前面に指示部材を介してタッチセンサ１０３を形成する場合も含むものとする。

タッチパネル１０１の表示部１０２は、例えば液晶ディスプレイ（ＬＣＤ）または有機ＥＬディスプレイなどで構成される。表示部１０２は、撮像部１０６により取得した画像、通信部１０７を介して取得した画像、及び記憶部１０８に記憶されている画像などを表示する。なお、画像とは、静止画だけでなく動画をも含むものである。表示部１０２の前面には、ユーザの指などによるタッチ面への接触を検出するタッチセンサ１０３が配設される。このタッチセンサ１０３は、例えば抵抗膜方式、静電容量方式、光学式等の公知の方式のもので構成される。タッチセンサ１０３は、ユーザの指などの接触を検知すると、接触位置の情報を制御部１０９に供給する。なお、タッチセンサ１０３が接触を検出する上で、ユーザの指等がタッチセンサ１０３に物理的に接触することは必須ではない。例えば、タッチセンサ１０３が光学式である場合には、タッチセンサ１０３は、赤外線が指等により遮られた位置を検出するため、物理的な接触がない場合でも接触を検出することができる。

触感呈示部１０４は、タッチセンサ１０３のタッチ面に振動を伝えるもので、例えば、圧電素子または超音波振動子などを用いて構成する。この触感呈示部１０４が振動することにより、タッチセンサ１０３に接触しているユーザの指などに対して触感を呈示することができる。また、触感呈示部１０４は、振動モータ（偏心モータ）により電子機器１０を振動させることにより、タッチセンサ１０３のタッチ面を間接的に振動させるように構成することもできる。

押圧検出部１０５は、タッチセンサ１０３のタッチ面に対する押圧を検出するもので、例えば圧電素子、歪みゲージセンサなどを用いて構成する。押圧検出部１０５は、検出した押圧に基づくデータを制御部１０９に供給する。押圧に基づくデータとは、例えば押圧荷重、電圧、電力、抵抗などである。なお、例えば、触感呈示部１０４及び押圧検出部１０５を共に圧電素子を用いて構成する場合は、触感呈示部１０４及び押圧検出部１０５を共通の圧電素子により一体化して構成することができる。圧電素子は、圧力が加えられると電力を発生し、電力が加えられると変形するという性質を有するためである。このように、圧電素子により一体化して構成する場合、表示部１０２の四隅に形成した弾性部材を介してタッチセンサ１０３を保持し、タッチセンサ１０３の底面の辺側に圧電素子を貼り付けるような構成とすればよい。

撮像部１０６は、実環境を撮像して画像を取得するもので、例えば、撮像レンズ、撮像素子などから構成される。撮像部１０６によって取得された画像は制御部１０９に供給される。また、撮像部１０６によって、撮像が確定されていない状態（プレビュー状態）において取得された画像も、制御部１０９に供給される。

通信部１０７は、外部装置（図示せず）との間で通信を行うものであり、例えば、任意の無線通信又は有線通信に対応したインタフェース機器等によって構成される。例えば、通信部１０７は、外部装置との間で、画像データの送受信や、電子メールの送受信などを行う。

記憶部１０８は、例えばＪＰＥＧフォーマットの画像データや、触感呈示部１０４が呈示する触感パターンなどを記憶するとともに、ワークメモリなどとしても機能する。ここで、触感パターンとは、振動の仕方（周波数、位相、振動間隔、振動回数など）や振動の強さ（振幅など）等により規定されるものである。図３は触感パターンのテーブルの一例を示す図である。図３（ａ）は予め設定されている触感パターンのテーブルを示すものであって、「ふさふさ」「かさかさ」「もさもさ」といった触感に対応する振動のパターンが規定されている。図３（ｂ）は、ユーザがオリジナルで設定する触感パターンのテーブルを示すものであって、ユーザは自ら「オリジナルＡ」「オリジナルＢ」といった触感に対応する振動パターンを規定することができる。

制御部１０９は、電子機器１０の各機能部をはじめとして電子機器１０の全体を制御および管理するものであり、ＣＰＵ等の好適なプロセッサによって構成される。特に、制御部１０９は、画像を複数の領域に分割し、各領域に触感を対応付ける。また、制御部１０９は、複数の領域の内のいずれかの領域への接触を検出すると、当該領域に対応付けられた触感を呈示するように触感呈示部１０４を制御する。なお、接触検出による触感呈示に関し、制御部１０９は、接触の押圧が所定の閾値を満たした場合に、領域への接触が行われたものとして、当該領域に対応付けられた触感を呈示するように触感呈示部１０４を制御することもできる。

制御部１０９は、画像の輝度若しくは色のスペクトラム分布及び画像の周波数スペクトルに基づき、前記画像を複数の領域に分割することができる。画像の輝度若しくは色のスペクトラム分布をグラフ化したものが画像のヒストグラムである。画像のヒストグラムとは、画像の色情報（ＲＧＢ）それぞれのヒストグラムや、画像をグレースケールに変換したあとのヒストグラムや、輝度のヒストグラムなど、画像に関するあらゆる値のヒストグラムを含むものである。図４は、画像の色情報のヒストグラムの一例を示す図である。図４（ａ）に示す画像の色情報のヒストグラムは、図４（ｂ）のように表される。図４（ｂ）のヒストグラムのピークを基準に、色情報に基づいて画像を３つに分割すると、図４（ｃ）〜（ｅ）の画像を取得できる。一般に、画像の黒い部分ほどＲＧＢの値が低く、画像の白い部分ほどＲＧＢの値が高いことが知られている。そのため、図４（ｃ）のように、動物の目や鼻といった画像の黒い部分は、ヒストグラムのＲＧＢが低い領域から抽出することができる。また、図４（ｄ）及び図４（ｅ）のように、動物の体毛のような画像の白い部分は、ヒストグラムの高い領域から抽出することができる。

画像の周波数スペクトルとは、画像の周波数成分を示すものであって、画像の色情報（ＲＧＢ）の周波数スペクトルや、画像をグレースケールに変換したあとの周波数スペクトルや、輝度の周波数スペクトルなど、画像に関するあらゆる値の周波数スペクトルを含むものである。画像の周波数スペクトルは、画像の水平方向及び垂直方向に対してＦＦＴ（Fast Fourier Translation）を行うことによって取得することができる。例えば、図４（ａ）の画像のうち、図４（ｃ）で抽出した動物の目の部分と鼻の部分との周波数スペクトルを求めるとする。この場合、大部分が黒い画素となる目の部分は低い周波数領域の値が高くなり、色の変化がある鼻の部分では、目の部分に比べ、高い周波数領域の値が高くなる。このため、図４（ｃ）で抽出した動物の目の部分と鼻の部分とは、周波数スペクトルの違いにより分割することができる。また、例えば、図４（ａ）の画像のうち、図４（ｄ）及び図４（ｅ）で抽出した動物の体毛部分の周波数スペクトルを求めるとする。この場合、図４（ｄ）及び図４（ｅ）で抽出した領域は共に細かい体毛が大部分を占める部分となるため、図４（ｄ）及び図４（ｅ）で抽出した領域の周波数スペクトルは比較的高い相関を持つことになる。このため、ヒストグラムに基づき、図４（ｄ）及び図４（ｅ）と複数の領域として抽出された動物の体毛部分は、周波数スペクトルにより１つの領域として統合することができる。

なお、制御部１０９は、フォーカスの具合（たとえばボケの状態）によって画像を複数の領域を分割することができる。また、制御部１０９は、エッジ抽出などの画像処理や、予め記憶部１０８に記憶してある画像の特徴データ（形状、模様、色彩など）によるパターンマッチングなどを用いて、画像を複数の領域を分割することもできる。また、制御部１０９は、画像が動画像の一部である場合には、前後の画像から求まる動きベクトルを用いて画像を複数の領域にすることができる。また、制御部１０９は、撮像部１０６が複数台ある場合など、画像の３次元情報を取得することができる場合には、当該３次元情報を基に画像を複数の領域に分割することができる。

また、制御部１０９は、領域分割後、各領域に触感を対応付ける。制御部１０９は、画像のヒストグラム及び画像の周波数スペクトルに基づき、領域に対応付ける触感を設定することができる。例えば、制御部１０９は、黒の要素が強い領域に「すべすべ」という触感を設定し、白の要素が強い領域に「ふさふさ」という触感を設定することができる。また、制御部１０９は、周波数が高い領域に細かい触感を設定し、周波数が低い領域に周期の長い触感を設定することができる。また、制御部１０９は、記憶部１０８が色情報及び周波数情報と物体の材質（金属、弾性体など）との対応テーブルを記憶している場合には、当該テーブルを用いて触感を設定することができる。また、制御部１０９は、記憶部１０８が色情報及び周波数情報によって特定される物体の概念的な情報（「豆腐は柔らかい」など）を記憶している場合には、当該情報を用いて触感を設定することができる。

また、制御部１０９は、接触の判定に押圧に基づくデータの閾値を用いる場合、画像のヒストグラム及び画像の周波数スペクトルに基づき、当該閾値を設定することができる。例えば、制御部１０９は、フォーカスが甘く周波数の低い領域は押圧に基づくデータの閾値を高く設定し、フォーカスがあっており周波数が高い領域は押圧に基づくデータの閾値を低く設定することができる。また、制御部１０９は、記憶部１０８が色情報及び周波数情報と物体の材質との対応テーブルを記憶している場合には、当該テーブルを用いて押圧に基づくデータの閾値を設定することができる。また、制御部１０９は、記憶部１０８が色情報及び周波数情報によって特定される物体の概念的な情報を記憶している場合には、当該情報を用いて押圧に基づくデータの閾値を設定することができる。

なお、制御部１０９は、画像データの画像フォーマットの付加領域に、画像を分割した領域の情報と、領域に対応付けた触感との情報とを含めて、記憶部１０８に記憶させることができる。また、制御部１０９は、画像フォーマットの付加領域に、領域に設定した押圧に基づくデータの閾値を含めて記憶部１０８に記憶させることができる。例えば、画像データと共に、分割した領域、設定した触感及び閾値の情報を記憶するには、ＪＰＥＧの画像フォーマットを利用することができる。ＪＰＥＧフォーマットは、画像データのみならず、撮影日、撮影条件、場所等の付加が出来る付加領域として、Ｅｘｉｆ領域を有している。そのため、このＥｘｉｆ領域を利用して、分割した領域、設定した触感及び閾値の情報を画像データに埋め込むことが可能となる。なお、付加領域を有する画像フォーマットであれば、ＪＰＥＧフォーマット以外の画像フォーマットを利用することも可能である。

また、制御部１０９は、所定の画像フォーマットによって、画像のデータと共に、分割した領域の情報及び各領域に対応付けられた触感の情報を通信部１０７により送信することができる。また、制御部１０９は、所定の画像フォーマットによって、画像のデータと共に、領域に設定した押圧の閾値を通信部１０７により送信することができる。例えば、ＪＰＥＧフォーマットを用いて、画像データ自体と、分割した領域、設定した触感及び閾値の情報を１つの画像ファイル（以下、「触感付き画像ファイル」と称する）にまとめた場合、制御部１０９は、通常の画像ファイルと同様に、当該触感付き画像ファイルを通信部１０７から送信することができる。外部装置（図示せず）が触感付き画像ファイルを受信し、分割した領域、設定した触感及び閾値の情報を自装置で再現できる場合には、外部装置は画像ファイルの情報に従って画像に領域設定を行い、接触を検出した場合には領域に対応する触感を呈示することができる。また、外部装置が触感付き画像ファイルに対する対応を自装置で再現できない場合であっても、ＪＰＥＧの画像データ自体を再生することは可能であるため、ＪＰＥＧフォーマットを用いた触感付き画像ファイルが未対応装置に悪影響を与えることはない。

図５は、電子機器１０の動作フローチャートである。まず、制御部１０９は、例えば撮像部１０６を通して画像を取得する（ステップＳ１０１）。なお、制御部１０９は、通信部１０７を介して取得した画像、又は、記憶部１０８に記憶されている画像を取得することもできる。次に、制御部１０９は、取得した画像を複数の領域に分割する（ステップＳ１０２）。制御部１０９は、画像のヒストグラム及び画像の周波数スペクトルに基づき、画像を複数の領域に分割することができる。画像を領域に分割した後、制御部１０９は、領域毎に触感を割り当てる（ステップＳ１０３）。制御部１０９は、画像のヒストグラム及び画像の周波数スペクトルに基づき、領域に触感を割り当てることができる。その後、制御部１０９は、領域への接触を検出すると（ステップＳ１０４）、領域に割り当てられた触感を呈示するように触感呈示部１０４を制御する（ステップＳ１０５）。なお制御部１０９は、接触の押圧に基づくデータが所定の閾値を満たした場合、当該領域に対応付けられた触感を呈示するように触感呈示部１０４を制御することができる。なお、制御部１０９は、画像のヒストグラムに代えて画像のコントラストに基づき、領域の分割、触感の割り当て、所定の閾値の設定を行っても良い。

図６は、画像の領域分割の一例を示す図である。図６（ａ）に示す画像に対して、制御部１０９は、図６（ｂ）に示すような領域分割を行うことができる。例えば、制御部１０９は、画像のヒストグラム及び周波数スペクトルに基づき、画像を、目に対応する領域Ｒ１と、体毛に対応する領域Ｒ２と、鼻に対応する領域Ｒ３とに分割することができる。次いで制御部１０９は、目に対応する領域Ｒ１に「つるつる」する触感を割り当て、体毛に対応する領域Ｒ２に「ふさふさ」する触感を割り当て、鼻に対応する領域Ｒ３に「ぷにぷに」という触感を割り当てる。これにより、例えばユーザが目に対応する領域Ｒ１に接触を行った場合、電子機器１０は、ユーザに対して「つるつる」という触感を呈示することができる。なお、図６（ｂ）に示す各領域の範囲を示す線分は、ユーザに対して非表示にすることができることに留意されたい。

図７は、領域が重複した場合の触感選択ウィンドウ表示の一例を示す図である。図７（ａ）のように、制御部１０９は、画像のヒストグラム及び周波数スペクトルに基づき、画像を、目に対応する領域Ｒ１と、体毛に対応する領域Ｒ２と、鼻に対応する領域Ｒ３と、顔中央に対応する領域Ｒ４とに分割している。ここで、鼻に対応する領域Ｒ３と、顔中央に対応する領域Ｒ４とは、重なって設定されているため、制御部１０９は、図７（ｂ）に示すように、触感選択ウィンドウを表示させることによって、ユーザに手動で触感を選択させることができる。なお、領域が重なっている場合には、制御部１０９は、それぞれの領域の触感を合成して呈示したり、一定周期毎にそれぞれの触感を切替えて呈示しても良い。また、制御部１０９は、重なった領域の触感を合成すると、互いに打ち消しあって有意な触感を呈示できないと判断した場合に、触感選択ウィンドウを表示させることができる。

このように、本実施形態によれば、制御部１０９は、画像を複数の領域に分割し、タッチセンサ１０３における複数の領域のいずれかの領域に対応する位置への接触を検出すると、当該領域に対応付けられた触感を呈示するように触感呈示部１０４を制御する。これにより、表示する画像の特徴に応じて対応する触感を呈示することが可能となる。即ち、画像に文字の説明を付加することなく、意図した触感を画像と関連付けて表現することが可能となる。

また、本実施形態によれば、制御部１０９は、タッチセンサ１０３における複数の領域のいずれかの領域に対する位置への接触を検出し、当該接触の押圧に基づくデータが所定の閾値を満たした場合、当該領域に対応付けられた触感を呈示するように触感呈示部１０４を制御することができる。これにより、ユーザから明確な接触があったときにのみ触感を呈示することができるため、ユーザが誤ってタッチパネルに触れてしまった場合など、ユーザの意図しない接触による誤操作を防ぐことができる。

また、本実施形態によれば、制御部１０９は、画像の輝度若しくは色に基づくスペクトル分布及び画像の周波数スペクトルの少なくともいずれか一方に基づき、画像を複数の領域に分割することができる。これにより、画像の特徴に基づき領域を分割することが可能になる。

また、本実施形態によれば、制御部１０９は、画像の輝度若しくは色に基づくスペクトル分布及び画像の周波数スペクトルの少なくともいずれか一方に基づき、複数の領域に対応付ける触感を設定することができる。これにより、各領域に対して、堅い部分、柔らかい部分など、画像の特徴に応じた触感を設定することが可能になる。

また、本実施形態によれば、制御部１０９は、画像の輝度若しくは色に基づくスペクトル分布及び画像の周波数スペクトルの少なくともいずれか一方に基づき、接触の押圧に基づくデータに関する所定の閾値を設定することができる。これにより、各領域に対して、触感を呈示しにくい部分、触感を呈示しやすい部分など、画像の特徴に応じた閾値を設定することが可能になる。

また、本実施形態によれば、制御部１０９は、複数の領域毎に接触の押圧に関する所定の閾値を設定する。これにより、各領域に対して、接触しにくい部分、接触しやすい部分など、領域毎に閾値を設定することが可能になる。

また、本実施形態によれば、制御部１０９は、画像フォーマットの付加領域に複数の領域の情報及び複数の領域に対応付けられた触感の情報を含めて記憶部１０８に記憶させることができる。これにより、画像のデータと、複数の領域の情報及び複数の領域に対応付けられた触感の情報などを１つのファイルにまとめることができる。また、ユーザは記憶部１０８から過去に触感を設定したデータを適宜読み出して再生することが可能になる。

また、本実施形態によれば、制御部１０９は、所定の画像フォーマットによって、画像のデータと共に、複数の領域の情報及び複数の領域に対応付けられた触感の情報を通信部により送信することができる。これにより、例えば他のユーザに対して触感付き画像ファイルを送信することができる。例えば、触感付き画像ファイルをメールにて送信する場合、撮影者の気持ちを受信者に伝えることができる。例えば、赤ちゃんの写真を撮影してほっぺたの柔らかい感覚を伝えたい場合や、ペットの写真を撮影して毛のふさふさ感を伝えたい場合など、多様な利用シーンにおいて、送信者と受信者との間で気持ちの共有を図ることが可能となる。また、例えば、Ｗｅｂ上の画像として、触感付き画像ファイルをサーバにアップロードすることができる。この場合、タッチパネル端末でＷｅｂサイトを閲覧しているユーザが触感付き画像ファイルを触ると、接触領域に応じた触感がユーザに伝わることになる。この技術によって、例えばニュース配信の臨場感を向上させることができる。また、製品紹介やレビューなどのページにおいてより詳細に情報を伝えることが可能になる。また、ＳＮＳ（Social Networking Service）やブログにおいて、より表現力を高めることができる。さらに、現在、駅などで設置されている看板の電子化が進んでいる。このため、触感付き画像ファイルを電子看板に配信することにより、より注目度の高い宣伝広告を実現することが可能となる。

本発明を諸図面や実施例に基づき説明してきたが、当業者であれば本開示に基づき種々の変形や修正を行うことが容易であることに注意されたい。従って、これらの変形や修正は本発明の範囲に含まれることに留意されたい。例えば、各部材、各手段、各ステップなどに含まれる機能などは論理的に矛盾しないように再配置可能であり、複数の手段やステップなどを１つに組み合わせたり、或いは分割したりすることが可能である。

例えば、本発明にかかる電子機器において、画像の領域分割までは電子機器で自動的に行い、各領域への触感設定についてはユーザが手動で行うことも可能である。図８は、手動による触感割当画面の一例を示す図である。ユーザは、所望の領域に所望の触感を設定することができる。この場合、電子機器１０は、ユーザが「ふわふわ」「かさかさ」等の設定キーに対して接触を行った場合、設定キーに対応する触感をユーザに呈示することができる。これにより、ユーザは「ふわふわ」「かさかさ」といった触感を実際に確認しながら、各領域に対して触感を割り当てることが可能となる。

なお、上記実施形態における表示部及びタッチセンサは、これら両機能を共通の基板に持たせる等により、一体化した装置によって構成されるようにしてもよい。このように表示部とタッチセンサとの両機能を一体化した装置の構成の一例としては、液晶パネルが有するマトリクス状配列の画素電極群に、フォトダイオード等の複数の光電変換素子を規則的に混在させたものを挙げることができる。この装置は、液晶パネル構造によって画像を表示する一方で、パネル表面の所望位置を接触するペンの先端で液晶表示用のバックライトの光を反射し、この反射光を周辺の光電変換素子が受光することによって、接触位置を検出することができる。

また、上記実施形態における制御部は、押圧検出部により検出される接触の押圧が、所定の閾値を満たした際に、接触領域に対応付けられた触感を呈示するように触感呈示部を制御する。この場合において、押圧検出部により検出される押圧が所定の閾値を満たした際とは、押圧検出部により検出される押圧に基づくデータが所定値に達した際であってもよいし、押圧検出部により検出される押圧に基づくデータが所定値を超えた際でもよいし、押圧検出部により所定値が検出された際でもよい。

また、上述の説明において、例えば、所定値「以上」または所定値「以下」のような表現の技術的思想が意味する内容は必ずしも厳密な意味ではなく、携帯端末の仕様に応じて、基準となる値を含む場合または含まない場合の意味を包含するものとする。例えば、所定値「以上」とは、増大する値が所定値に達した場合のみならず、所定値を超えた場合も含意し得るものとする。また、例えば所定値「以下」とは、減少する値が所定値に達した場合のみならず、所定値を下回った場合、つまり所定値未満になった場合も含意し得るものとする。

１０ 電子機器
１０１ タッチパネル
１０２ 表示部
１０３ タッチセンサ
１０４ 触感呈示部
１０５ 押圧検出部
１０６ 撮像部
１０７ 通信部
１０８ 記憶部
１０９ 制御部

Claims (8)

1. 画像を表示する表示部と、
   接触を検出するタッチセンサと、
   前記タッチセンサのタッチ面に対して触感を呈示する触感呈示部と、
   前記画像を複数の領域に分割し、前記タッチセンサにおける複数の領域のいずれかの領域に対応する位置への接触を検出すると、当該領域に対応付けられた触感を呈示するように前記触感呈示部を制御する制御部と、
   を備える電子機器であって、
   前記制御部は、前記画像の輝度若しくは色に基づくスペクトル分布及び前記画像の周波数スペクトルの少なくともいずれか一方に基づき、前記複数の領域に対応付ける触感を設定する、電子機器。
2. 前記制御部は、前記タッチセンサにおける複数の領域のいずれかの領域に対応する位置への接触を検出し、当該接触の押圧に基づくデータが所定の閾値を満たした場合、当該領域に対応付けられた触感を呈示するように前記触感呈示部を制御する、請求項１に記載の電子機器。
3. 前記制御部は、前記画像の輝度若しくは色に基づくスペクトル分布及び前記画像の周波数スペクトルの少なくともいずれか一方に基づき、前記画像を複数の領域に分割する、請求項１又は２に記載の電子機器。
4. 画像を表示する表示部と、
   接触を検出するタッチセンサと、
   前記タッチセンサのタッチ面に対して触感を呈示する触感呈示部と、
   前記画像を複数の領域に分割し、前記タッチセンサにおける複数の領域のいずれかの領域に対応する位置への接触を検出すると、当該領域に対応付けられた触感を呈示するように前記触感呈示部を制御する制御部と、
   を備える電子機器であって、
   前記制御部は、前記タッチセンサにおける複数の領域のいずれかの領域に対応する位置への接触を検出し、当該接触の押圧に基づくデータが所定の閾値を満たした場合、当該領域に対応付けられた触感を呈示するように前記触感呈示部を制御し、
   前記制御部は、前記画像の輝度若しくは色に基づくスペクトル分布及び前記画像の周波数スペクトルの少なくともいずれか一方に基づき、前記所定の閾値を設定する、電子機器。
5. 前記画像のデータを所定の画像フォーマットで記憶する記憶部を備え、
   前記制御部は、前記画像フォーマットの付加領域に前記複数の領域の情報及び前記複数の領域に対応付けられた触感の情報を含めて前記記憶部に記憶させる、請求項１乃至４のいずれか一項に記載の電子機器。
6. 通信部を備え、
   前記制御部は、前記画像フォーマットによって、前記画像のデータと共に、前記複数の領域の情報及び前記複数の領域に対応付けられた触感の情報を前記通信部により送信する、請求項５に記載の電子機器。
7. 画像を表示する表示部と、
   接触を検出するタッチセンサと、
   前記タッチセンサのタッチ面に対して触感を呈示する触感呈示部と、を備える電子機器の制御方法であって、
   前記画像を複数の領域に分割するステップと、
   前記画像の輝度若しくは色に基づくスペクトル分布及び前記画像の周波数スペクトルの少なくともいずれか一方に基づき、前記複数の領域に対応付ける触感を設定するステップと、
   前記タッチセンサにおける複数の領域のいずれかの領域に対応する位置への接触を検出すると、当該領域に対応付けられた触感を呈示するように前記触感呈示部を制御するステップと、
   を有する電子機器の制御方法。
8. 画像を表示する表示部と、
   接触を検出するタッチセンサと、
   前記タッチセンサのタッチ面に対して触感を呈示する触感呈示部と、を備える電子機器の制御方法であって、
   前記画像を複数の領域に分割するステップと、
   前記タッチセンサにおける複数の領域のいずれかの領域に対応する位置への接触を検出し、当該接触の押圧に基づくデータが所定の閾値を満たした場合、当該領域に対応付けられた触感を呈示するように前記触感呈示部を制御するステップと、
   前記画像の輝度若しくは色に基づくスペクトル分布及び前記画像の周波数スペクトルの少なくともいずれか一方に基づき、前記所定の閾値を設定するステップと、
   を有する電子機器の制御方法。