JP2012190261A

JP2012190261A - 近接操作支援装置

Info

Publication number: JP2012190261A
Application number: JP2011053199A
Authority: JP
Inventors: Terushi Kimata; 輝志木全; Akiyuki Ishida; 顕之石田
Original assignee: Panasonic Corp
Current assignee: Panasonic Corp
Priority date: 2011-03-10
Filing date: 2011-03-10
Publication date: 2012-10-04

Abstract

【課題】近接検知部に指示体を近づけて操作を行うユーザーに操作の実感をストレスなく与えることができる近接操作支援装置を提供すること。
【解決手段】表示部と、当該表示部の表示面への指示体の近接を検知する近接検知部と、を有するインタフェースを用いた近接操作支援装置は、近接検知部からの検知信号に基づいて、指示体の近接位置を判定する近接位置判定部と、表示部にコンテンツが表示されているとき、表示部に指示体が近接されると、表示部に表示するセル群の形態を決定するセル群処理部と、コンテンツを表示部に表示するよう処理し、かつ、セル群処理部が決定したセル群をコンテンツに重ねて表示するよう処理する表示処理部とを備える。セル群は、互いに隙間を設けて面状に配置された複数のセルから構成される。また、表示部上の指示体が近接している箇所の近傍に表示される近接箇所表示セルは、セル群に含まれる他のセルと表示形態が異なる。
【選択図】図３

Description

本発明は、センサー付きパネルに指示体を近づけて操作可能な近接操作支援装置に関する。

非特許文献１には、ユーザーがリモコンを使うことなく、手のジェスチャーを用いてテレビを操作するユーザーインタフェース技術について開示されている。当該技術では、光の移動速度を利用したＴＯＦ（Time of Flight）方式の距離画像センサーによって空間的な体の形状が取得され、手の位置を検出（ハンドトラッキング）することで、手の動きを認識している。さらに、手の動きをジェスチャー操作として認識し、数種類のジェスチャーのパターンでテレビの基本操作（電源ＯＮ／ＯＦＦ，選局，音量調整）を行う。当該技術では、ユーザーが容易に機器の状態を理解したり、操作状況をリアルタイムに把握できるＧＵＩがデザインされている。例えば、横に手を振るとメニューが表示される。また、音量調整用ＧＵＩとして、手回し操作に対応した円弧状のインジケータとリングを組み合わせたグラフィックスが利用されている。

また、特許文献１には、タッチパネルへの指の接近により、指が接近された領域に対応した位置にメニューを表示するカーナビゲーション装置が開示されている。また、特許文献２には、静電容量型のタッチパネルを備え、操作者の指がタッチパネルに接近するとメニューボタンが表示部に表示される画像表示装置が開示されている。また、特許文献３には、ユーザーが指やペンでセンサー内蔵液晶パネル上をタッチした位置にペン画像を表示し、ユーザーによる入力を助けるグリッド画像を同時に表示する入力装置が開示されている。

特開２００２−３５８１６２号公報国際公開第１０／０８９９８０号パンフレット特開２０１０−１１３４８１号公報

松原孝志著他４名，「快適操作を提供するユーザーインタフェース技術（User Interface Technology for Comfortable Operation）」，VOL.91 No.09 726-727，日立評論，２００９年９月，ｐ．４８−５３

上記説明した先行技術によれば、ユーザーの指がタッチパネルに近接されるとメニューボタン等の所定の画像が表示される。また、ユーザーは、タッチパネルに近接したままの状態で指を動かす等といった所定の操作を行うことによって所望の機能を実行できる。但し、タッチパネルに近接したままの状態で指をスライドさせても、ユーザーは当該操作の感触を得ることができない。このため、当該操作に応じて視聴覚的な応答や示唆等を示すことが望ましい。

また、上記説明した先行技術では、ユーザーがタッチパネルに指を近づけても、タッチパネル上のどの点が機器によってポインティング位置として認識されているかは画面に表示されない。また、ポインティング位置を示すポインターを画面に表示しても、指を近づけた状態は不安定であることや、機器側のセンサー等に起因する誤差等の影響によって、ユーザーが所望する位置とポインターの位置を一致させることは困難であった。このため、仮にポインターを画面に表示してもユーザーにストレスを与えてしまう。

本発明の目的は、近接検知部に指示体を近づけて操作を行うユーザーに操作の実感をストレスなく与えることができる近接操作支援装置を提供することである。

本発明は、表示部と、当該表示部の表示面への指示体の近接を検知する近接検知部と、を有するインタフェースを用いた近接操作支援装置であって、前記近接検知部からの検知信号に基づいて、指示体の近接位置を判定する近接位置判定部と、前記表示部にコンテンツが表示されているとき、前記表示部に前記指示体が近接されると、前記表示部に表示するセル群の形態を決定するセル群処理部と、前記コンテンツを前記表示部に表示するよう処理し、かつ、前記セル群処理部が決定したセル群を前記コンテンツに重ねて表示するよう処理する表示処理部と、を備え、前記セル群は、互いに隙間を設けて面状に配置された複数のセルから構成され、前記表示部上の前記指示体が近接している箇所の近傍に表示される近接箇所表示セルは、前記セル群に含まれる他のセルと表示形態が異なることを特徴とする近接操作支援装置を提供する。

上記近接操作支援装置は、前記表示部に表示されているコンテンツの種別を判別するコンテンツ種別判定部を備え、前記セル群処理部は、前記コンテンツ種別判定部が判定したコンテンツ種別に応じた全体形状の前記近接箇所表示セルを含むセル群の形態を決定する。

上記近接操作支援装置では、前記表示部は矩形状であって、前記近接箇所表示セルは、前記表示部の一辺の方向に配列された複数のセルから構成されている。

上記近接操作支援装置では、前記近接箇所表示セルは、十字を描く領域の複数のセルから構成されている。

上記近接操作支援装置では、前記セル群を構成する前記複数のセルは行列状に配列されている。

上記近接操作支援装置では、前記セルは円形である。

本発明に係る近接操作支援装置によれば、近接検知部に指示体を近づけて操作を行うユーザーに操作の実感をストレスなく与えることができる。

一実施形態の近接操作支援装置の構成を示すブロック図ディスプレイ１１１に表示された地図の一例を示す図ディスプレイ１１１に地図が表示されているときタッチパネル１１３に指が近接されたときのセル群の一例を示す図ディスプレイ１１１に地図が表示されているときタッチパネル１１３に近接した指を動かしたときのセル群の一例を示す図ディスプレイ１１１に写真が表示されているときタッチパネル１１３に指が近接されたときのセル群の一例を示す図ディスプレイ１１１に写真が表示されているときタッチパネル１１３に近接した指を動かしたときのセル群の一例を示す図ディスプレイ１１１に写真が表示されているときタッチパネル１１３に指が近接されたときのセル群の他の例を示す図ディスプレイ１１１に写真が表示されているときタッチパネル１１３に近接した指を動かしたときのセル群の他の例を示す図ディスプレイ１１１に地図が表示されているときタッチパネル１１３に指が近接されたときのセル群の他の例を示す図セル群の他の表示形態を示す図セル群の他の表示形態を示す図

以下、本発明の実施形態について、図面を参照して説明する。

図１は、一実施形態の近接操作支援装置の構成を示すブロック図である。図１に示す近接操作支援装置１００は、映像を表示する例えば４〜１０インチの矩形状のディスプレイ１１１と、ディスプレイ１１１の表示面に貼り合わされた光透過性を有する静電容量方式のタッチパネル１１３とを備えた電子機器に設けられる。タッチパネル１１３は、指や導体等の指示体の接触に応じて当該接触位置での接触を示す信号を出力する他、指示体の近接を検知して、その位置での近接を示す信号を出力する。なお、タッチパネル１１３は赤外線方式であっても良い。但し、このときは、指示体の接触を検知する圧電センサーがディスプレイ１１１の表示面に設けられる。

図１に示すように、近接操作支援装置１００は、近接位置判定部１０１と、コンテンツ種別判定部１０３と、セル群処理部１０５と、表示処理部１０７と、音声出力処理部１０９とを備える。

近接位置判定部１０１は、タッチパネル１１３から送られた指示体の近接を示す信号に基づいて、当該指示体が近接したタッチパネル上の位置を判定する。近接位置判定部１０１は、判定した位置を２次元直交座標系での座標で示した近接位置座標情報を出力する。コンテンツ種別判定部１０３は、ディスプレイ１１１に表示されるデータのプロパティに基づいて、当該データのコンテンツ種別（地図、写真、メール等）を判定する。

セル群処理部１０５は、地図や写真、メール等のデータがディスプレイ１１１に表示されているとき、タッチパネル１１３に指示体が近接されると、コンテンツ種別判定部１０３が判定したコンテンツ種別に応じて、ディスプレイ１１１に表示するセル群の形態を決定する。なお、セル群は、互いに隙間を設けて行列状に配置された複数のセルから構成され、ディスプレイ１１１に表示中のコンテンツに重ねて表示される。セル群の詳細については後述する。

表示処理部１０７は、表示データに基づくコンテンツをディスプレイ１１１に表示するよう処理し、かつ、セル群処理部１０５が決定したセル群を当該コンテンツに重ねて表示するよう処理する。音声出力処理部１０９は、タッチパネル１１３から送られた指示体の近接を示す信号に応じて、タッチパネル１１３への指示体の近接を近接操作支援装置１００が認識したことを示す音声をスピーカ１１５が出力するよう処理する。

以下、コンテンツに重ねて表示されるセル群の実施例について、図面を参照して詳細に説明する。

（第１の実施例）
図２は、ディスプレイ１１１に表示された地図の一例を示す図である。図２に示す地図がディスプレイ１１１に表示されているとき、タッチパネル１１３に指示体（以下「指」を例に説明する。）が近接されると、図３に示すセル群が地図に重ねてディスプレイ１１１に表示される。なお、図３に示された人差し指は、タッチパネル１１３への指の近接を示すマークであって、ディスプレイ１１１には表示されない。

図３に示すように、セル群は、行列状に配列された複数の円形のセル１５１から構成される。また、セル群は、ディスプレイ１１１の表示面全体にわたって表示される。さらに、タッチパネル１１３上の指が近接している箇所の近傍に表示される複数のセルは、他のセルと比較して輝度又は透過率が異なる。以下、他のセルと輝度又は透過率が異なる複数のセルを「近接箇所表示セル」という。

ディスプレイ１１１の表示が図３のとき、ユーザーが指をタッチパネル１１３に近づけた状態のままいずれかの方向に動かすとディスプレイ１１１に表示される地図の領域が変わる。なお、図３に示した近接箇所表示セルの全体形状は、ユーザーが指をタッチパネル１１３上のどの方向に動かしてもディスプレイ１１１のコンテンツの表示が変化する場合の形態である。したがって、図３の表示のときにユーザーが指を左上に動かせば、図４に示すように、太平洋寄りの領域の地図がディスプレイ１１１に表示される。また、指の動きと共にディスプレイ１１１上の近接箇所表示セルの位置も変わる。

（第２の実施例）
図５は、ディスプレイ１１１に写真が表示されているときタッチパネル１１３に指が近接されたときのセル群の一例を示す図である。図５に示すように、第２の実施例の近接箇所表示セルは、ディスプレイ１１１の高さ全体に亘り表示される。すなわち、図５に示した近接箇所表示セルの全体形状は、ユーザーが指をタッチパネル１１３上で左右方向（図５に示したＸ軸に沿った方向）に動かしたときのみディスプレイ１１１に表示されるコンテンツが変化する場合の形態である。したがって、図５の表示のときにユーザーが指を左に動かせば、図６に示すように、別の写真がディスプレイ１１１に表示される。また、指の動きと共にディスプレイ１１１上の近接箇所表示セルの位置も変わる。

（第３の実施例）
図７は、ディスプレイ１１１に写真が表示されているときタッチパネル１１３に指が近接されたときのセル群の一例を示す図である。図７に示すように、第３の実施例の近接箇所表示セルは、ディスプレイ１１１の幅全体に亘り表示される。すなわち、図７に示した近接箇所表示セルの全体形状は、ユーザーが指をタッチパネル１１３上で上下方向（図７に示したＹ軸に沿った方向）に動かしたときのみディスプレイ１１１に表示されるコンテンツが変化する場合の形態である。したがって、図７の表示のときにユーザーが指を上に動かせば、図８に示すように、別の写真がディスプレイ１１１に表示される。また、指の動きと共にディスプレイ１１１上の近接箇所表示セルの位置も変わる。

（第４の実施例）
図９は、ディスプレイ１１１に地図が表示されているときタッチパネル１１３に指が近接されたときのセル群の一例を示す図である。図９に示すように、第４の実施例の近接箇所表示セルは、複数のセルによって十字を描く。すなわち、図９に示した近接箇所表示セルの全体形状は、ユーザーが指をタッチパネル１１３上で左右方向（図９に示したＸ軸に沿った方向）又は上下方向（図９に示したＹ軸に沿った方向）に動かしたときのみディスプレイ１１１に表示されるコンテンツが変化する場合の形態である。したがって、図９の表示のときにユーザーが指を左右又は上下に動かせば、異なる領域の地図がディスプレイ１１１に表示される。また、指の動きと共にディスプレイ１１１上の近接箇所表示セルの位置も変わる。

上記説明した第１〜第４の実施例のセル群を構成する各セルは円形であるが、その形状は円形に限られず、図１０に示すようにひし形や、三角、星型等でも良い。また、第１〜第４の実施例のセル群を構成するセルは行列状に配列されているが、図１１に示すように、隣り合うセルが直交軸上で角度をつけたハニカム状の配列であっても良い。

上記説明したセル群の表示は、指がタッチパネル１１３に触れるとディスプレイ１１１から消える。すなわち、セル群処理部１０５は、近接位置判定部１０１がタッチパネル１１３から指示体の接触を示す信号を受け取ると、セル群をディスプレイ１１１に表示しないと決定する。

以上説明したように、本実施形態によれば、指をタッチパネル１１３に近づけるとディスプレイ１１１にセル群が表示されるため、ユーザーは、近接操作支援装置１００がタッチパネル１１３への指の近接を認識したことを視覚で知ることができる。また、ユーザーは、タッチパネル１１３に指を近づけた際にスピーカ１１５から出力される音声によって、近接操作支援装置１００がタッチパネル１１３への指の近接を認識したことを聴覚で知ることができる。

さらに、ディスプレイ１１１に表示されるセル群の形態によって、ユーザーは、タッチパネル１１３の指を近づけた位置をおおまかに把握することができる。また、近接箇所表示セルの全体形状は、ユーザーが指をタッチパネル１１３に近づけた状態のまま動かしてコンテンツが変化可能な方向を示す。したがって、ユーザーは、近接箇所表示セルの全体形状から、指を動かしてコンテンツが変化可能な方向を知ることができる。

本発明に係る近接操作支援装置は、センサー付きパネルに指示体を近づけて操作可能な電子機器のコントローラ等として有用である。

１００近接操作支援装置
１０１近接位置判定部
１０３コンテンツ種別判定部
１０５セル群処理部
１０７表示処理部
１０９音声出力処理部
１１１ディスプレイ
１１３タッチパネル
１１５スピーカ

Claims

表示部と、当該表示部の表示面への指示体の近接を検知する近接検知部と、を有するインタフェースを用いた近接操作支援装置であって、
前記近接検知部からの検知信号に基づいて、指示体の近接位置を判定する近接位置判定部と、
前記表示部にコンテンツが表示されているとき、前記表示部に前記指示体が近接されると、前記表示部に表示するセル群の形態を決定するセル群処理部と、
前記コンテンツを前記表示部に表示するよう処理し、かつ、前記セル群処理部が決定したセル群を前記コンテンツに重ねて表示するよう処理する表示処理部と、を備え、
前記セル群は、互いに隙間を設けて面状に配置された複数のセルから構成され、
前記表示部上の前記指示体が近接している箇所の近傍に表示される近接箇所表示セルは、前記セル群に含まれる他のセルと表示形態が異なることを特徴とする近接操作支援装置。
請求項１に記載の近接操作支援装置であって、
前記表示部に表示されているコンテンツの種別を判別するコンテンツ種別判定部を備え、
前記セル群処理部は、前記コンテンツ種別判定部が判定したコンテンツ種別に応じた全体形状の前記近接箇所表示セルを含むセル群の形態を決定することを特徴とする近接操作支援装置。
請求項２に記載の近接操作支援装置であって、
前記表示部は矩形状であって、
前記近接箇所表示セルは、前記表示部の一辺の方向に配列された複数のセルから構成されていることを特徴とする近接操作支援装置。
請求項２に記載の近接操作支援装置であって、
前記近接箇所表示セルは、十字を描く領域の複数のセルから構成されていることを特徴とする近接操作支援装置。
請求項１〜４のいずれか一項に記載の近接操作支援装置であって、
前記セル群を構成する前記複数のセルは行列状に配列されていることを特徴とする近接操作支援装置。
請求項１〜５のいずれか一項に記載の近接操作支援装置であって、
前記セルは円形であることを特徴とする近接操作支援装置。