JP4263855B2 - 触覚呈示制御装置および触覚呈示制御方法 - Google Patents
触覚呈示制御装置および触覚呈示制御方法 Download PDFInfo
- Publication number
- JP4263855B2 JP4263855B2 JP2001114015A JP2001114015A JP4263855B2 JP 4263855 B2 JP4263855 B2 JP 4263855B2 JP 2001114015 A JP2001114015 A JP 2001114015A JP 2001114015 A JP2001114015 A JP 2001114015A JP 4263855 B2 JP4263855 B2 JP 4263855B2
- Authority
- JP
- Japan
- Prior art keywords
- switch group
- hierarchical
- switch
- data
- hierarchy
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Description
【０００１】
【発明の属する技術分野】
本発明は、触覚呈示制御装置および触覚呈示制御方法に関する。
【０００２】
【従来の技術】
従来、コンピュータのＧＵＩ（グラフィカル・ユーザ・インタフェース）環境で、アイコンや動作項目の選択あるいはインターネットなど、視覚障害者に画面上の情報を伝えるための研究開発が行われている。
【０００３】
たとえば、第１の例として、音声によるＧＵＩ画面読み上げソフト（９５ＲＥＡＤＥＲ、「視覚障害者用Ｗｉｎｄｏｗｓ 画面読み上げソフトウェアの開発とその評価」，渡辺，岡田，ヒューマンインタフェース ６８−７）が実用化され、１９９９年には９８ＲＥＡＤＥＲにバージョンアップし、音声・点字出力による画面読み上げを可能にしている。
【０００４】
また、第２の例には、ＧＵＩ環境を触覚・聴覚のマルチモーダルで伝えることを目的とした研究がある（「触覚ピンディスプレイ付きポインティングディバイスの提案」；山中ほか ＨＩシンポジウム論文集１２１２）。これは、コンピュータのアイコンを画面そのものの配置やサイズで触覚呈示する方式（画面呈示方式）である。
【０００５】
この例では、タッチパネル付きＬＣＤの画面を触れることにより、その位置に表示された対話部品の情報が音声で出力される。さらにタッチパネル上に触覚ディスプレイを搭載し、触覚受容器で対話部品を触れることができる。たとえば、触覚ディスプレイとして、８×８本のピンを２次元に配列し、ピン１本を画面の１ドットに対応させ、現在のポインティング座標を中心に８×８ドットの範囲の情報が呈示される。この構成において、触覚ディスプレイは絶対座標系としてタッチパネル上で動かすことができ、広い範囲の画面情報の触知が可能となるよう構成されている。
【０００６】
さらに、第３の例には、コンピュータのアイコンや階層を論理的な形式に変換して触覚呈示する方式（論理呈示方式）による研究がある。この例では、従来のピンディスプレイを用い、ピンの上下方向の位置と組み合わせることにより、選択オブジェクトの機能や階層構造を表示する方式「視覚障害者用グラフィカルユーザインタフェース」（特開平１０−６９２１８号公報）が提案されている。
【０００７】
一方、ディジタル放送では、データ情報にアクセスする方式として、メニュー画面から希望する項目を選択するＧＵＩ的な形式が考えられている。この形式では、通常、リモコンによって上下左右に選択カーソルを移動し、目的の項目へ選択カーソルが移動後、決定のキーを押下するなどの方法で、項目選択を可能としている。
【０００８】
このようなカーソルによる選択を可能にするためのメニュー画面を視覚障害者に伝える方法を第４の例として挙げると、この例では、使用者のリモコンなどの操作やキーワードで画面上のタグ項目を入力して、選択された項目の内容を音声や点字で出力して伝える方式などのインタフェースが提案されている（「視覚障害者向け統合型放送受信端末の開発；坂井ほか，ＨＩシンポジウム ’９９−１４１１」）。
【０００９】
【発明が解決しようとする課題】
しかしながら、現在、視覚障害者がＧＵＩ環境でコンピュータを操作できる有効な手段や、ＩＳＤＢ（統合ディジタル放送）のメニュー画面を視覚障害者に伝える技術は確立されておらず、どのように画面情報を伝達し、アクセスの入出力をするかは大きな課題となっている。
【００１０】
ここで、コンピュータのアイコンやＧＵＩ環境であるディジタル放送のメニュー画面のスイッチからデータをアクセスする際に問題となるのは、画面上の選択オブジェクトの配置や数をどのように伝えるか、それらの選択をどのように行うか、さらに、階層構造や現在の階層の位置をどう伝えるかである。
【００１１】
前記、従来技術の第１の例に示した「９８ＲＥＡＤＥＲ」など、音声や点字によるＧＵＩ画面伝達は有効な手段であるが、音声自体が時系列な情報呈示の手段であるため、画面上のアイコンや項目などの選択オブジェクトを検索するのに時間を要するという問題がある。また、音声による情報呈示では、画面全体の選択オブジェクトの配置や数などの把握が困難なことや、階層の概念の理解や記憶が困難であることから、下位階層に入った場合、階層の位置やツリー構成の全体像を把握することが難しいという問題がある。
【００１２】
また、従来技術で示した第２の例である画面呈示方式では、多くの選択オブジェクトを呈示することが必要であり、全体を触覚で探索することが容易ではないことや、選択オブジェクトの配置位置に規則性がないことなどから、オブジェクトの位置や内容の記憶が難しく、迅速に選択することを可能とする点において課題を残している。
【００１３】
これに対し、前記従来技術の第３の例である論理呈示方式による発明の装置では、点字サイズのピンで階層を表すことができるので小型化が可能であり、探索もしやすい。しかしながら、この反面、触覚の分解能などに限界があり、センシングが難しいことや、提案された方式では、階層表示の規則が複雑でユーザにとって難しいことなどから、必ずしも有効な手段であるとは言えなかった。
【００１４】
また、以上はコンピュータを対象としているが、ＩＳＤＢなど放送メディアでは、誰もが選択操作できる入力機能が必須である。しかしながら、データ放送などにおいて通常のリモコンでは選択オブジェクトを直接選択できず、また、階層構造を把握することができない。さらに従来技術の第４の例で示したリモコン操作に対応した音声や点字出力は前記第１の例と同様な問題を有している。
【００１５】
このようにＩＳＤＢのメニュー画面やコンピュータのアイコンなどのＧＵＩ環境で、選択オブジェクトの位置関係や階層などの情報の構成をわかりやすく伝達する有効な入出力制御装置はなかった。
【００１６】
従って、本発明は上記問題に鑑みなされたもので、情報の構成を２次元的に容易に理解させることを可能とする触覚呈示制御装置および触覚呈示制御方法を提供することを目的とする。
【００１７】
【課題を解決するための手段】
係る目的を達成するために、本発明は、階層構造または表構造のデータから選択オブジェクトを触覚で識別可能に呈示するスイッチを有し、前記スイッチは、前記データが階層構造である場合、階層構造における階層の位置情報を呈示する階層制御スイッチ群と、階層毎のオブジェクトを呈示する階層オブジェクトスイッチ群とを同一呈示面上における各々所定の領域に、前記階層制御スイッチ群を移動させずに前記階層オブジェクトスイッチ群が移動できるように呈示され、前記データが表構造である場合、表構造における行および列のタイトルを呈示する行列制御スイッチ群と、表構造におけるオブジェクトを呈示する表オブジェクトスイッチ群とを同一呈示面上に、前記行列制御スイッチ群を移動させずに前記表オブジェクトスイッチ群が移動できるように呈示され、前記階層制御スイッチ群又は前記行列制御スイッチ群のスイッチは、前記階層オブジェクトスイッチ群又は前記表オブジェクトスイッチ群のスイッチと触覚で識別可能に形成されることを特徴としている。
【００１８】
これにより、本発明は、情報を２次元的に容易に理解させることが可能となる。また、階層を持つ情報や表形式の情報の構成を、容易に理解させることが可能となる。
【００２１】
また、本発明は、さらに、データが階層構造である場合、階層制御スイッチ群と階層オブジェクトスイッチ群とが、触覚により区別されるよう構成され、データが表構造である場合、行列制御スイッチ群と表オブジェクトスイッチ群とが、触覚により区別されるよう構成されることを特徴としている。
【００２２】
これにより、本発明は、触覚による各スイッチ群の識別を容易とすることが可能となる。
【００２３】
また、本発明によれば、さらに、階層オブジェクトスイッチ群または表オブジェクトスイッチ群における所定の位置を示す基準となるボタンの位置は、触覚により他と区別されるよう構成されることを特徴としている。
【００２４】
これにより、本発明は、触覚による各スイッチの位置の判別を容易とすることが可能となる。
【００２５】
また、本発明は、現在の呈示状態において、押下時にスイッチから発生する固有のコードと、スイッチを用いて触覚で識別可能に呈示している選択オブジェクトと、を対応させて記憶する呈示選択オブジェクト記憶手段と、呈示選択オブジェクト記憶手段に記憶されている選択オブジェクトのリンク先の階層を記憶するリンク先記憶手段と、を有し、固有のコードと、呈示選択オブジェクト記憶手段において固有のコードに対応させて記憶されている選択オブジェクトと、リンク先記憶手段に記憶されている選択オブジェクトのリンク先の階層と、に基づいて次に触覚で識別可能に呈示する階層を呈示することを特徴としている。
【００２６】
これにより、本発明は、少ないスイッチ数で、多くの項目や階層構造、表構成を、２次元的に容易に理解させるよう呈示することが可能となる。
【００２７】
また、本発明は、階層構造または表構造のデータから選択オブジェクトの属性情報を抽出する属性情報抽出工程と、該属性情報抽出工程において抽出された前記属性情報に基づいて前記選択オブジェクトにリンク情報を付加するリンク情報付加工程と、前記選択オブジェクトと該選択オブジェクトを触覚で識別可能に呈示しているスイッチの位置との対応を記憶する対応記憶工程とを有し、前記スイッチは、前記データが階層構造である場合には、階層構造における階層の位置情報を呈示する階層制御スイッチ群と、階層毎のオブジェクトを呈示する階層オブジェクトスイッチ群とを同一呈示面上における各々所定の領域に、前記階層制御スイッチ群を移動させずに前記階層オブジェクトスイッチ群が移動できるように呈示され、前記データが表構造である場合、表構造における行および列のタイトルを呈示する行列制御スイッチ群と、表構造におけるオブジェクトを呈示する表オブジェクトスイッチ群とを同一呈示面上に、前記行列制御スイッチ群を移動させずに前記表オブジェクトスイッチ群が移動できるように呈示され、前記階層制御スイッチ群又は前記行列制御スイッチ群のスイッチは、前記階層オブジェクトスイッチ群又は前記表オブジェクトスイッチ群のスイッチと触覚で識別可能に形成され、前記スイッチの位置に対応して発生するコードを用いて、前記対応記憶工程において記憶された対応から選択オブジェクトを特定し、前記リンク情報付加工程において該選択オブジェクトに付加したリンク情報を特定することを特徴としている。
【００２８】
これにより、本発明は、少ないスイッチ数で、多くの項目や階層構造、表構成を、２次元的に容易に理解させる方法による情報の呈示が可能となる。
【００２９】
【発明の実施の形態】
〔本発明の特徴〕
本発明は、触覚呈示制御装置および触覚呈示制御方法に関するものである。
【００３０】
ただし、以下の実施形態では、本発明を、統合ディジタル放送（ＩＳＤＢ）で用いられるメニュー画面の選択ボタンや表などの視覚的なオブジェクト（以下、選択オブジェクトという）から情報にアクセスする方法に対して適用した場合を例に挙げて説明する。これにより、本発明では、ＩＳＤＢで用いられる選択オブジェクトから情報にアクセスする際に、リモコンのような選択スイッチ（もしくはボタン。以下、スイッチに含む）により項目選択ができ、かつスイッチの配列を利用して選択オブジェクト数や階層などの状態を触覚により認識させることが可能となる。
【００３１】
即ち、以下で説明する各実施形態は、統合ディジタル放送（ＩＳＤＢ）の選択オブジェクトを触覚で探索することにより、視覚障害が情報にアクセスできる触覚呈示制御装置に関するもので、選択オブジェクトを選択するスイッチを有し、スイッチは可動機構を有し、スイッチの配列は行と列とのアレイで構成され、凸表示されるスイッチの配列形状や数量によって選択オブジェクトの項目数や階層などの情報を触覚に伝えるとともに、それぞれの選択オブジェクトを表すスイッチが入力機能を兼ねることにより、統合ディジタル放送のメニュー画面などの視覚的選択オブジェクトから番組などの情報に容易かつ迅速にアクセスできるようにしたものである。
【００３２】
より具体的には、ＩＳＤＢのメニュー画面のボタンや階層構造の表示のために、選択オブジェクトや階層を画面上の位置情報の論理的表示方式に変換し、ユーザが論理的表示方式に対応して凸表示されたスイッチを触れることにより、階層や階層中の選択オブジェクトの位置や数量を把握できるようにするとともに、表示された選択オブジェクトのスイッチを押下することで、音声や点字で内容が把握でき、迅速に情報へアクセスさせることを可能とする。また、表形式の情報の表示には行と列とのによる各行列要素（以下、セルという）をスイッチの配列に対応させ、セルを行と列とを確認しながら選択させ、この対応するスイッチを押下させることにより、セルの内容を伝達するようにも構成する。
【００３３】
これらの構成により、視覚に障害を持つ人や盲ろう者がグラフィカルユーザインタフェース（ＧＵＩ）環境にアクセスできるインタフェースを提供することが可能となる。
【００３４】
これを実現するにあたり、本発明は、情報にアクセスし、情報を呈示するグラフィカルユーザインタフェース（ＧＵＩ）において、可動動作するスイッチを有し、スイッチの配置や数、高低差により、階層や視覚的選択オブジェクトの位置や数を表す構成を有する。
【００３５】
また、上記の視覚的な選択オブジェクトに対応するスイッチの配列には、階層を表す範囲、階層中の選択オブジェクトを表す範囲、行や列を表す範囲を有し、情報を構成する画面中の選択オブジェクトの位置や数、あるいは階層を把握す構成を有する。
【００３６】
さらに、階層および行や列を表す範囲のスイッチと選択オブジェクトを表す範囲のスイッチとは、形状や表面の荒さを変化させることにより、区別ができる構成を有する。
【００３７】
また、選択オブジェクトを表す複数のスイッチでは、基準となるスイッチを異なる表面性や形状とし、かつ当該スイッチが凸表示しない場合でも、スイッチ周辺の段差や穴などにより触覚で、これを検知できる構成を有する。
【００３８】
また、本発明は、触覚呈示される選択オブジェクトのリンク先などのツリー構成をメモリする機能を有し、選択オブジェクトの表示状態を記憶するメモリを有し、各スイッチには押下時に固有のデータ発生を有し、新たにスイッチが押下された場合には、前記選択オブジェクトの表示状態と前記スイッチ押下時の固有のデータとから、前記ツリー構成から呈示すべき選択オブジェクトを指定するコマンドを生成する機能を有することで、少ないスイッチで多くの選択オブジェクトや階層を表現する構成を有する。
【００３９】
また、本発明は、ＧＵＩ環境の選択オブジェクトを触覚に呈示する方法に関するものであり、選択オブジェクトの属性データを抽出する工程と、抽出された属性データよりあらたな階層や表を構成する変換工程と、選択オブジェクトをスイッチ配列に対応して表示するためのデータ生成工程と、押下スイッチのコードを生成する工程と、押下スイッチから前記階層や表を呈示する選択オブジェクトを指定するコードを生成する工程と、を併せ持つ構成を有する。
【００４０】
以下、このような構成を有する本発明を好適に実施した形態について、図面を用いて詳細に説明する。
【００４１】
〔第１の実施形態〕
まず、本発明の第１の実施形態について、図面を用いて詳細に説明する。
【００４２】
（第１の実施形態の構成）
図１、および図２は、本発明において、ＩＳＤＢのメニュー画面などの視覚的な選択オブジェクトに対して、可動スイッチ機構を有し、選択のためのスイッチ入力とともにスイッチの配置から選択オブジェクトを呈示する触覚呈示制御装置の概念を表す図であり、図１は、本発明を実現する基本的な触覚呈示制御装置（方式１）の概念図を示し、図２は、可動スイッチを電話あるいは電卓のテンキーと同様な配置とするよう構成した触覚呈示制御装置（方式２）の概念図を示す。
【００４３】
また、図３、および図４は、電子番組表（以下、ＥＰＧという）などの表形式の情報を触覚呈示制御装置により表示する方法を説明するための図であり、図３は、これを方式１の触覚呈示制御装置に適用した場合を説明するための図であり、図４は、これを方式２の触覚呈示制御装置に適用した場合を説明するための図である。
【００４４】
さらに、図５の（ａ）は、ＩＳＤＢでサービスされるメニュー画面の項目と階層構造とを模式的に表した説明図であり、図５の（ｂ）は、メニュー画面の各選択オブジェクトのリンク先情報から、階層構造を表した説明図である。
【００４５】
さらにまた、図６、および図７は、本発明の触覚呈示制御装置の方式１および方式２により、ＧＵＩ環境の選択オブジェクトや階層構造を表す方法を説明するための図であり、図６は、方式１の触覚呈示制御装置を適用した場合を説明するための図であり、図７は、方式２の触覚呈示制御装置を適用した場合を説明するための図である。
【００４６】
以下、図１から７を用いて、本発明の第１の実施形態を詳細に説明する。
【００４７】
・触覚呈示制御装置の構成
図１および図２において、１ａ〜１ｅは、上下動が可能なスイッチ群であり、圧電素子や電磁ソレノイド、ステッピングモータ、あるいは形状記憶合金などのアクチュエータにより駆動される。本実施形態では、この上下動可能なスイッチ群１ａ〜１ｅを用いることで、選択オブジェクトや階層構造、あるいは表形式の構成を凸により表現する。また、各スイッチは情報アクセスや制御のための入力スイッチとしても機能する。さらにまた、表示する対象のないスイッチ（対応する選択オブジェクト等が存在しないスイッチ）は、押下できないように下方位置に駆動された状態となる。すなわち、これらのスイッチは、入力とともに遷移先の階層や表における行と列とのタイトル、および選択オブジェクトを表す。たとえばスイッチ群１ａを、機能を選択するためのスイッチ群とし、スイッチ群１ｂおよびスイッチ群１ｇをそれぞれ行と列とのタイトルを表す（階層構造を持つ情報に対してはスイッチ群１ｇが階層を表す）ためのスイッチ群とし、スイッチ群１ｄを選択オブジェクトを表すためのスイッチ群とし、スイッチ群１ｆを制御スイッチ群とする。本実施形態では、このように、それぞれのスイッチ群に対して機能を分けて設定できるよう構成する。
【００４８】
・触覚を用いた情報呈示方式の説明
このような構成を有する触覚呈示制御装置を用いて表形式の情報を呈示し、アクセスさせる方法の例を説明する。
【００４９】
・・方式１に適用した場合
図３の（ａ）は、本方式を説明するために用いる表形式の情報の例であり、Ｘ１〜Ｘｎ、Ｙ１〜Ｙｍはそれぞれ列、行のタイトルを表す選択オブジェクト（以下、単にタイトルという）、また、Ａ１１〜Ａｍｎは、行と列とで指定される選択オブジェクト（以下、表形式ではセルという）であり、それぞれのセルが情報を有するよう構成されている。
【００５０】
また、図３の（ｂ）は、図３の（ａ）に示す表形式のデータを呈示する触覚呈示制御装置として方式１によるものを用いた場合の例である。図３の（ｂ）において、スイッチ群１ｂのＶ１〜Ｖ９は図３の（ａ）におけるタイトル行Ｘ１〜Ｘｎを呈示し、スイッチ群１ｄは図３の（ａ）におけるタイトル列Ｙ１〜Ｙｍを呈示し、スイッチ群１ｄは図３の（ａ）におけるセル内容Ａ１１〜Ａｍｎを呈示する。
【００５１】
また、図３の（ｃ）は、表形式の各セルと方式１による触覚呈示制御装置のスイッチ配列との位置関係を表す。
【００５２】
本説明において、方式１の触覚呈示制御装置では、たとえばスイッチＶ３を押下するとタイトル行Ｘ３の選択オブジェクトの内容が音声あるいは点字で出力され、また、スイッチＮ２を押下するとタイトル列Ｙ２の選択オブジェクトの内容が音声あるいは点字で出力される。同様にスイッチＳＷ２３を押下すると、Ｘ３行Ｙ２列に対応するセルＡ３２の内容が音声あるいは点字により出力される。
【００５３】
ここで、図３の（ｂ）に示す触覚呈示制御装置の例では、図３の（ａ）の表形式のセルに対してすべてを表示することができない。したがって、本例では、表形式において、タイトル行ｎ，タイトル列ｍがｎ＞９，ｍ＞４の場合、図３の（ｃ）に示すように、表形式のセルにおける一部を選択可能な領域として触覚呈示制御装置に呈示するよう構成する。さらに、この構成において、すべてのセルを呈示するために、本実施形態では、スイッチ群１ｆのＵＰ，ＤＮ，ＬＦ，ＲＦの押下回数により、選択可能領域（呈示領域）を移動するよう構成する。これは、たとえば、現在、触覚呈示制御装置にＳＷ１１〜ＳＷ４９までのセルの領域が呈示されている状態において、スイッチ群１ｆのＤＮが２回押下された場合に、触覚呈示制御装置が呈示するセルの領域をＳＷ３１〜ＳＷ６９へ変更するというものである。
【００５４】
・・方式２に適用した場合
同様に、表形式の情報を呈示するにあたり、方式２による触覚呈示制御装置を用いた場合の例を示す。本実施形態で例示した方式２による触覚呈示制御装置では、行の選択領域が方式１によるものと比較して小さいほかは、方式１と同様に移動スイッチＵＰ，ＤＮ，ＬＦ，ＲＦを用いて表示するセルの領域を移動、および選択することができる。この場合、それぞれのスイッチの押下により１行あるいは１列ごとに移動するよう構成することも可能であるが、ｎ行あるいはｍ列ごとに移動して表示するよう構成したほうが探索の効率がよい。ただし、この点は、方式１にも適用することができる。
【００５５】
図４は、方式２の触覚呈示制御装置により表形式の情報を呈示する方法である。Ｖ７〜Ｖ９は列のタイトルと対応し、Ｎ１〜Ｎ４は行のタイトルと対応し、ＳＷ１〜ＳＷ１２はセルと対応する。
【００５６】
方式１と比較すると、一度に表示できるセル数が少ないが、限られた範囲で手指を動かすことなく情報を得られる利点がある。また、情報呈示の原理は方式１と同じであり、表示するセルの領域を移動させる構成も方式１で説明したものと同様なものを適用することが可能である。
【００５７】
・階層構造の呈示／選択方式の説明
次に、本実施形態による触覚呈示制御装置を用いた階層構造の呈示と選択との原理を、ディジタルデータ放送で提供されるメニュー画面を例に説明する。
【００５８】
図５の（ａ）は、適用したディジタルデータ放送で提供されるメニュー画面の例を示す図であり、図５の（ｂ）は、適用したディジタルデータ放送における各項目の階層構造の例を示す図である。この構成において、たとえば第１階層のメインメニュー画面からＶ２（天気）が選択されると、Ｖ２にリンクされた第２階層のメニューＶ２１〜Ｖ２４が触覚呈示制御装置に表示される。さらに第２階層でＶ２４（ローカル天気）が選択されると第３階層のメニューＶ２４１〜Ｖ２４７（地域など）が触覚呈示制御装置に表示される。また、本例では、この第３階層で選択された項目に対応する情報を音声あるいは点字により提供する。
【００５９】
・・方式１に適用した場合
図６は、触覚呈示制御装置の方式１を用いた場合の、メニュー項目および階層構造の呈示や選択の方法を説明するための模式図である。Ｎ１〜Ｎ４は、各項目が対応する階層の深さ、ＳＷ１１〜ＳＷ４９は、それぞれの階層における選択オブジェクトあるいは各階層における選択された選択オブジェクトを表す。
【００６０】
図６の（１）は、本説明において適用したメニューにおける初期状態であり、図５のメニュー画面の例より選択オブジェクトＶ１〜Ｖ５に対応して、第１階層Ｎ１の行にＳＷ１１〜ＳＷ１５のスイッチが凸で表示され、第１階層に選択オブジェクトが５個あることを触覚により検知させる。また、これら凸表示されたスイッチは、たとえばダブルクリック（ダブルプッシュ）やシングルクリック（シングルプッシュ）＋ＣＲ（決定）キー押下で選択される。
【００６１】
また、図６の（２）は、図６の（１）に示す第１階層においてＶ２（ＳＷ１２）が選択されることにより遷移した場合の呈示内容を示す図である。図６の（２）を参照すると、この場合では、触覚呈示制御装置に第１階層を示すＮ１と選択された選択オブジェクトＶ２を示すＳＷ１２と第２階層を示すＮ２と第２階層に存在する選択オブジェクトＶ２１〜Ｖ２４を示すＳ２１〜Ｓ２４とが凸で表示される。
【００６２】
さらに、第２階層でＳＷ２４スイッチが押下された場合には、図６の（３）に示すように、第１階層、第２階層、および第１階層における選択された選択オブジェクトの表示は変わらず、第２階層における選択オブジェクトの表示が選択されたスイッチＳＷ２４のみとなり、さらに、遷移先の第３階層を表すＮ３と第３階層に存在する７個の選択オブジェクトＶ２４１〜Ｖ２４７に対応するＳＷ３１〜ＳＷ３７とが凸で表示される。
【００６３】
従って、ユーザは、図６の（４）に示すようにスイッチＳＷ３１を押下すると、第３階層が最下層であるため、最終的にこのスイッチＳＷ３１に対応する選択オブジェクトＶ２４１の内容を音声や点字により得られるとともに、第４階層には選択オブジェクトがないことが触覚によりわかる。
【００６４】
この状態で、たとえばＥＳＣキーを押下すれば、１階層上位で、図６の（３）の状態に戻ることができる。また、階層表示のスイッチであるＮ１を押下すれば、図６の（１）の状態に戻り、ＳＷ１１〜ＳＷ１５が選択できる。
【００６５】
このように、スイッチの凸表示を触覚で感ずることにより、スイッチに対応する項目のタイトルや内容が音声や点字で得られ、視覚障害者は２次的な情報から迅速に情報をアクセスすることができる。
【００６６】
・・方式２に適用した場合
次に、図５に示すメニュー項目および階層構造の呈示や選択の方法を方式２による触覚呈示制御装置を用いて行う場合を図７を用いて説明する。
【００６７】
方式２では、表示される選択オブジェクトに対応するスイッチの配置を、電話あるいはキーボードの番号に合致して、順次番号順に表示する。これにより視覚障害者や盲ろう者は普段の生活で自然とパターン化されている電話などのキー配置により、スイッチに触れることで即座にかつ直感的に階層中の項目数や項目の位置（対応する番号）を把握することができる。
【００６８】
この場合、『５』の位置のスイッチには突起や異なる表面性などにより認知しやすい構造とし、項目数が『４』以下で『５』が突起しないときでも、スイッチ周辺の穴部を盛り上げるなど検知できる構造とすることが好ましい。また、各階層の選択オブジェクトはＳＷ１〜ＳＷ９の９個のスイッチで表され、１０個以上の場合にはＳＷ０を凸とすることにより呈示する。このように構成することで、総計で１９個の表示が可能である。ただし、図７のように、スイッチＳＷ１１，ＳＷ１２も存在する場合、スイッチＳＷ１１が１０個以上であることを示し、スイッチＳＷ０が２０個以上であることを示し、スイッチＳＷ１２が３０個以上をであることを示し、さらに、各スイッチＳＷ０，ＳＷ１１，ＳＷ１２の組み合わせにより、たとえばスイッチＳＷ１１とＳＷ１２との双方を凸表示とすることにより、４０個（１０個＋３０個）以上であることを示すように構成することも可能である。
【００６９】
また、方式１と同様に、図５のメニュー画面において、初期状態では第１階層に位置するため、選択オブジェクトとしてはＶ１〜Ｖ５が存在する。従って、触覚呈示制御装置には、図７の（１）に示すように、第１階層を表すＮ１とスイッチＳＷ１〜ＳＷ５とが凸表示される。
【００７０】
さらに、第１階層においてスイッチＳＷ２（選択オブジェクトＶ２）が選択された場合、図７の（２）のように、第１階層を示すＮ１に加え、第２階層を示すＮ２が凸表示され、また、第２階層に存在する４個の選択オブジェクトＶ２１〜Ｖ２４に対応してスイッチＳＷ１〜ＳＷ４が凸で表示される。
【００７１】
この状態でスイッチＳＷ４（Ｖ２４）が選択されたときは、図７の（３）のように、階層を表示するＮ１，Ｎ２に加え、第３階層であるＮ３が凸表示され、項目内容として７つの選択オブジェクトがＣＨ／項目スイッチ群１ｄに凸表示される。
【００７２】
さらにここで、スイッチＳＷ１（Ｖ２４１）が選択された時点で、ユーザは第３階層の天気の内容を得ることができ、その後、図７の（４）に示すように、第４階層以降には選択オブジェクトがないことを知ることができる。また、この時点でＥＳＣキーが押下された場合には、第３階層の選択オブジェクトを示す図７の（３）が表示され、また、Ｎ１が押下された場合には、第１層の選択オブジェクトを示す図７の（１）が表示される。
【００７３】
このように、ユーザは階層スイッチ群１ｇにより現時点の階層や階層構造を知ることができ、ＣＨ／項目スイッチ群１ｄにおいて階層に存在する選択オブジェクトの項目数や項目順を２次元的に知ることができ、ＧＵＩ的なメニュー画面から、容易かつ迅速に情報へアクセスすることができる。
【００７４】
（第１の実施形態の具体例）
次に、本実施形態の触覚呈示制御装置を用いてＧＵＩ環境の選択オブジェクトや階層構造、表形式の情報を呈示し、選択オブジェクトやセルの情報取得や選択ができる基本的な方式の構成例について、図８を参照して説明する。
【００７５】
図８において、１は本実施形態による触覚呈示制御装置であり、２はＧＵＩ画面の選択オブジェクトデータ（以下、ＧＵＩ画面選択オブジェクトデータという）であり、ＧＵＩ環境における選択オブジェクトの階層位置やリンク先、ジャンル、テキストデータ、画面上の表示位置やサイズなどの属性情報を有する。３はＧＵＩ画面選択オブジェクトデータ２の選択オブジェクトの情報（以下、選択オブジェクト情報という）から階層やリンク先など所望の属性情報を抽出する選択オブジェクト属性データ抽出部であり、４は選択オブジェクトの属性情報に基づいて、図３あるいは図５に示すような、表や階層構造（階層ツリー構造ともいう）をあらたに構成し、メモリする階層・表呈示変換バッファ部であり、５は階層・表呈示変換バッファ部４で表や階層ツリー構造の関係が付加された選択オブジェクトと触覚呈示制御装置１で表示されるスイッチの位置との対応を行うためのデータ変換テーブルを有する触覚呈示コード変換バッファ部であり、表形式や階層位置および階層に存在する選択オブジェクトから遷移先の状態において触覚呈示制御装置１に表示するデータを抽出してバッファし、出力する。６は触覚呈示コード変換バッファ部５で得られた出力データに対応して触覚呈示制御装置１を駆動する触覚呈示データ選択出力部である。また、７は制御Ｉ／Ｏ部で、触覚呈示制御装置１で選択押下されたスイッチの入力インタフェース部である。８は触覚呈示制御装置１で押下されたスイッチのコードを対応する選択オブジェクトの属性情報を指定するコマンドに変換し、階層・表呈示変換バッファ部４および触覚呈示コード変換バッファ部５において遷移先の状態で表示すべきデータが得られるよう動作するためのコマンド変換選択制御部である。
【００７６】
すなわち、触覚呈示制御装置１におけるスイッチは種々の状態で入力コードを共有している（各スイッチが発生するコードが固有のものである）ため、すべての機能で直接選択オブジェクトを指定することができない。従って、コマンド変換選択制御部８において入力されたコードを適切なコマンド（以下、コマンドコードという）に変換する。
【００７７】
・具体例の動作の説明
以下、上述した本実施形態の具体例の動作について、方式２による触覚呈示制御装置を適用して説明する。
【００７８】
本具体例では、図５に示した階層構造を持つメニューを適用する。従って、図７の（１）に示したように、初期状態では、第１階層の選択オブジェクト情報として、触覚呈示制御装置１のスイッチＳＷ１〜ＳＷ５およびＮ１が凸として表示される。
【００７９】
ここで、凸表示されたスイッチのいずれかが押下されると、制御Ｉ／Ｏ部７では、押下されたスイッチに固有のコードが検出される。ＧＵＩ画面選択オブジェクトデータ２では、検出されたコードを基に対応する選択オブジェクトが指定される。また、画面表示モニタ９では、この指定された選択オブジェクトがハイライトや赤／黄色文字などの強調表現により表示される。
【００８０】
一方、押下されたスイッチ（以下、押下スイッチという）のコードは、制御Ｉ／Ｏ部７からコマンド変換選択制御部８にも送られる。ここでは、スイッチが押下される前に表示されている選択オブジェクトの属性情報を参照し、前記に示したように、この階層構造の情報やリンク情報等を触覚呈示制御装置１に呈示すべきコマンドコードに変換し、階層・表呈示変換バッファ部４に伝達する。
【００８１】
これに対して、階層・表呈示変換バッファ部４では、コマンドコードより触覚呈示制御装置１に表示する表示データを特定し、これを触覚呈示コード変換バッファ部５へ出力する。また、触覚呈示コード変換バッファ部５では、入力された表示データに基づいて触覚呈示に対応するデータが生成され、触覚呈示データ選択出力部６へ出力される。
【００８２】
このように入力されたデータを基に、触覚呈示データ選択出力部６は、触覚呈示制御装置１におけるスイッチを駆動し、ユーザへ要求された情報（遷移先の階層における構造情報）の表示を行う。
【００８３】
〔第２の実施形態〕
次に、本発明の第２の実施形態として、本発明による触覚呈示制御装置をデータ放送に適用した場合について、図９〜図１１および図１２〜１４を用いて詳細に説明する。
【００８４】
（第２の実施形態の構成）
図９は、本実施形態において、ＩＳＤＢからＴＶチャンネルを選択する方法やデータ放送のメニュー画面選択オブジェクトを表示、選択する方法、あるいはＥＰＧなどの表形式の情報を表示して、データにアクセスさせる構成の一例を示す構成ブロック図である。
【００８５】
図９において、１７はデータ放送を受信するＩＳＤＢ受信部であり、１８は受信したデータからディジタル放送のフォーマットであるＢＭＬ（Broadcasting Mark Up Language）などを抽出して出力するデータ出力部であり、このデータ出力部１８の一方の出力は、画面表示変換部１９に入力される。この画面表示変換部１９は、入力されたデータをデコードして画面表示モニタ９に表示する。また、データ出力部１８の他方の出力は、選択オブジェクト属性データ抽出部３に入力され、入力されたデータよりメニュー画面を構成するそれぞれの選択オブジェクトの階層位置やリンク先などの属性情報が抽出される。
【００８６】
また、階層・表呈示変換バッファ部４は、選択オブジェクト属性データ抽出部３で抽出された選択オブジェクトの属性情報をもとに、新たに階層ツリー構成や表形式を作成し、これを保持する。
【００８７】
コマンド変換選択制御部８は、触覚呈示制御装置１’で押下されたスイッチのコードを制御Ｉ／Ｏ部７を介して受信し、このコードから呈示すべき選択オブジェクトを指定するコマンドコードを特定する。ただし、触覚呈示制御装置１’のスイッチは、前述のように、種々の状態で入力コードを共有しているので、すべての機能で直接選択オブジェクトを指定することができない。従って、コマンド変換は、ＩＳＤＢが有するＴＶ、データ放送、ＥＰＧや、データ放送の機能、あるいは、表や階層の表示に応じて、スイッチの押下前に表示されている階層や表の選択オブジェクトの属性情報が参照され、あらかじめ登録された変換表に基づき実行される。
【００８８】
このように変換されたコマンドコードは、階層・表呈示変換バッファ部４に入力され、表や階層ツリー構造の関係より、遷移先の状態において表示される選択オブジェクトが特定される。また、このように特定された選択オブジェクトは、触覚呈示コード変換バッファ部５に入力され、データ変換テーブルが参照されて、各選択オブジェクトを触覚呈示制御装置１’に表示するためのデータが抽出される。ただし、階層・表呈示変換バッファ部４で指定された選択オブジェクトのテキスト情報は、テキストデータ出力１０においてバッファされ、点字出力装置１１および音声合成装置１２で出力される。
【００８９】
また、触覚呈示データ選択出力部６は、触覚呈示コード変換バッファ部５より入力されたデータに基づいて触覚呈示制御装置１’におけるスイッチを駆動し、ユーザへ要求された情報（遷移先の階層における構造情報）表示を行う。
【００９０】
ただし、この構成において、第１の実施形態による触覚呈示制御装置１と同様の構成には、同一の符号を附す。
【００９１】
（第２の実施形態の具体例）
以下、本実施形態による触覚呈示制御装置１’を実際に使用した場合における動作の一例について、方式２による触覚呈示制御装置１’を用いて説明する。
【００９２】
図９において、１ａはＩＳＤＢが提供するＴＶやデータ放送、電子番組表（ＥＰＧ）等の機能を選択するための機能選択スイッチ群であり、１ｂは表形式の構成において列表示のオブジェクトを表示する、もしくは選択させるためのスイッチ群であるとともに、上記ＴＶやデータ放送の機能において、それぞれＴＶの登録されたチャンネル（ＣＨ）やデータ放送のメニュー画面の選択オブジェクトを選択させるためのＣＨ登録／見出しメニュー項目スイッチ群である。１ｄは機能選択スイッチ群１ａにより選択された機能における表示内容（選択オブジェクト）や選択肢をユーザに提供するＣＨ／項目スイッチ群であり、たとえば、ＴＶ機能が選択された場合では選択対象のＴＶチャンネルを表示し、データ放送機能が選択された場合では見出しメニュー項目に関する各階層の項目を表示し、さらにＥＰＧなどの表形式による機能が選択された場合では表形式のデータにおけるセルを表す。また、１ｅは各種選択や選択した項目の実行、もしくは選択した項目のキャンセル等を入力するための選択制御スイッチ群であり、１ｆはＣＨ／項目スイッチ群１ｄで示された表の行や列の表示領域を移動する指示を入力させるための移動制御スイッチ群であり、１ｇは階層を表示し、選択させる階層制御スイッチ群であり、１ｃは１ｂに包含され、たとえばＥＰＧなどの表形式による機能が指定された場合に、表形式のデータ構造におけるタイトル列を表示する列表示スイッチ群である。
【００９３】
・具体例の動作の説明
また、方式１による触覚呈示制御装置を適用した場合の動作は、方式２を適用した場合にほぼ包含されるので、以下の説明では、方式２を適用した場合の動作に含める。
【００９４】
・・ＴＶ機能が選択された場合
まず、本具体例の説明において、ＴＶ機能が選択された場合の動作について、以下に図面を用いて説明する。ただし、ＴＶ機能とは、ＴＶのチャンネルを選択するための機能である。
【００９５】
図１２を参照すると、本動作では、まず、ユーザより触覚呈示制御装置１’の機能選択スイッチ群１ａにおいて、ＴＶ機能を指定するスイッチ“ＴＶ”が押下・選択される（ステップＳ１のＴＶ）。
【００９６】
このように、図９の触覚呈示制御装置１’において、機能選択スイッチ群１ａから“ＴＶ（ＴＶ機能を選択するスイッチ）”が選択された場合、本発明による触覚呈示制御装置１’は、ＴＶ機能を実行する（ステップＳ２）。この実行にあたり、制御Ｉ／Ｏ部７が、触覚呈示制御装置１’から入力されたＴＶ機能の実行のコマンドから触覚呈示制御装置１’をＴＶチャンネルのリモートコントローラとして機能させるためのコマンドコードを特定し、これを触覚呈示コード変換バッファ部５へ出力する。これに対し、触覚呈示コード変換バッファ部５は、コマンドコードよりユーザに呈示するチャンネルをあらかじめ格納しているテーブルより特定し、これを触覚呈示データ選択出力部６へ出力する。また、触覚呈示データ選択出力部６は、触覚呈示コード変換バッファ部５より入力されたデータに基づいて、触覚呈示制御装置１’におけるスイッチを駆動し、ユーザへＴＶのチャンネル番号を呈示する。ただし、たとえばチャンネルが１ｃｈから１２ｃｈまで存在し、この中で、５ｃｈ等、番組が放送されていないチャンネルが存在する場合、この番組が放送されていないチャンネルをユーザに呈示しないよう凸表示されない構成とすることも可能である。これは、触覚呈示コード変換バッファ部５におけるコード変換テーブルにおいて、番組が存在しないチャンネルを凸表示しないように構成することで解決される。
【００９７】
このような動作を経ることで、ＴＶのチャンネルは、図１１の（１）に示すように、触覚呈示制御装置１’のＣＨ／項目スイッチ群ＳＷ１〜ＳＷ１２に割り当てられ、触覚アレイ初期設定として表示される（ステップＳ５）。ただし、この段階にでは、方式１による触覚呈示制御装置１’も同様な配置で凸表示される。
【００９８】
また、このように、触覚呈示制御装置１’にＴＶ機能における初期状態が呈示されると、ユーザにより、この呈示されたチャンネル中におけるいずれかのチャンネル、もしくはＥＳＣキーが押下される（ステップＳ６）。ここで、ユーザよりチャンネルのスイッチのいずれかが押下された場合（ステップＳ６のＣＨ）、制御Ｉ／Ｏ部７は、この入力を検出し、次いで入力されたチャンネルに対応するコードをＣＨ選択部１６へ出力する（ステップＳ７）。これに対して、ＥＳＣキーが押下された場合（ステップＳ６のＥＳＣ）、ステップＳ１に帰還し、ユーザより機能が選択されるのを待機する。
【００９９】
また、入力されたチャンネルに対して、本実施形態の動作としては、以下に示す２つの方法が考えられる。ひとつは、図１２のフローチャートにおけるａのように、所望のチャンネルのスイッチが押下されることにより（ステップＳ６のＣＨ）、スイッチに割り当てられたコードが制御Ｉ／Ｏ部７で検知され（ステップＳ７）、ＣＨ選択部１６を介し、直接ＩＳＤＢ受信部１７のチャンネルが制御される（ステップＳ１２）よう構成する方法である。また、他のひとつは、図１２のフローチャートにおけるｂのように、制御Ｉ／Ｏ部７で検知されたコードがコマンド変換選択制御部８に入力され、コマンド変換選択制御部８でチャンネル選択のためのコマンドコード（以下、チャンネル選択コマンドコードという）に変換される（ステップＳ７）よう構成する方法である。
【０１００】
後者の方法では、チャンネル選択コマンドコードが、階層・表呈示変換バッファ部４に入力され、ここでチャンネルを示す選択オブジェクトが指定される。また、指定された選択オブジェクトの内容は、テキストデータ出力部１０でテキストデータとして抽出され、点字出力装置１１、および／もしくは音声合成装置１２により点字および／もしくは音声で出力される（ステップＳ８）。ただし、上記のテキストデータとしては、選択されたチャンネルを示す番号や、対応するＴＶ会社名や、現在放送されている番組の番組名および番組内容（サブタイトル、出演者、放送時間等の内容）等が挙げられる。
【０１０１】
このように出力されたテキストデータを確認した後、ユーザが決定キー（ＣＲ）を押下すると（ステップＳ９のＣＲ）、これが制御Ｉ／Ｏ部７で検知され（ステップＳ１０）、ＣＨ選択部１６においてＩＳＤＢ受信部１７の受信チャンネルが制御され（ステップＳ１１）、ステップＳ６に帰還する。これに対して、ユーザよりＥＳＣキーが押下されると（ステップＳ９のＥＳＣ）、選択された内容を破棄し（ステップＳ１３）、ステップＳ６に帰還する。
【０１０２】
・・データ放送機能が選択された場合
次に、本具体例の説明において、データ放送機能が選択された場合の動作について、以下に図面を用いて説明する。ただし、データ放送機能とは、ディジタルデータ放送により提供される機能のことである。また、本具体例では、図５に示す階層構造を適用する。
【０１０３】
図１２および図１３を参照すると、図９に示す触覚呈示制御装置１’において機能選択スイッチ群１ａからデータ放送（ＤＴ）が選択されると（ステップＳ１のＤＴ）、図５に例示した階層構造では、図１１の（２）のように、第１階層で表されるメニュー画面が、触覚アレイ初期設定として、触覚呈示制御装置１’において表示される（図１３のステップＳ２１）。
【０１０４】
つぎに、ユーザよりＥＳＣキーもしくはＵＰキーが入力された場合（ステップＳ２２のＹｅｓ）、階層・表呈示変換バッファ部４では、現在よりも上位の階層が存在するか否かを判定し（ステップＳ２８）、この判定において、さらに上位の階層が存在しない場合（ステップＳ２８のＮｏ）、ステップＳ１に帰還し、機能が選択されるのを待機する。これに対して、現在よりも上位の階層が存在する場合（ステップＳ２８のＹｅｓ）、ステップＳ２９に移行する。
【０１０５】
また、ステップＳ２２においてＥＳＣキーおよびＵＰキーが押下されず（ステップＳ２２のＮｏ）、階層移動キーもしくはＣＲキーもしくはＤＮキーが押下された場合（ステップＳ２３のＹｅｓ）、ステップＳ２９に移行する。ただし、ここでいう階層移動キーとは、図９の触覚呈示制御装置１’における階層制御スイッチ群１ｇに含まれるスイッチである。
【０１０６】
また、ステップＳ２２においてＥＳＣキーおよびＵＰキーが押下されず（ステップＳ２２のＮｏ）、かつ、ステップＳ２３において階層移動キーおよびＣＲキーおよびＤＮキーが押下されず（ステップＳ２３のＮｏ）、ＣＨ／項目スイッチ群１ｄにおいて選択オブジェクトに対応するスイッチのいずれかが押下された場合（ステップＳ２４のＹｅｓ）、割り当てられたスイッチのコードが制御Ｉ／Ｏ部７にて検出され、コマンド変換選択制御部８にて、押下された選択オブジェクトを選択するコマンドコードに変換され、階層・表呈示変換バッファ部４にて、コマンドコードに該当する選択オブジェクトが選択される（ステップＳ２５）。
【０１０７】
その後、ステップＳ２５にて指定された選択オブジェクトのテキストデータは、テキストデータ出力部１０に送出され、点字出力装置１１および音声合成装置１２に内容が出力される（ステップＳ２６）。このとき、触覚呈示コード変換バッファ部５では、データ変換を行わない。すなわち、ステップＳ２４からステップＳ２６の流れでは、階層が移動されるのでなく、階層を移動するにあたり、ユーザに確認のためのコメントが通知される。
【０１０８】
また、画面表示制御部１５では、選択された選択オブジェクトをハイライトするなど画面表示が制御される（ステップＳ２７）。
【０１０９】
一方、ステップＳ２４からステップＳ２７によりスイッチを押下し内容を確認した後、ステップＳ２２に帰還し、たとえば、引続き決定キー（ＣＲキー）が押下された場合（ステップＳ２３のＹｅｓ）、には、コマンド変換選択制御部８にて、選択決定のコマンドコードが生成され、階層・表呈示変換バッファ部４にて、選択された選択オブジェクトが存在する下位階層の表示データが指定され（ステップＳ３０）、触覚呈示コード変換バッファ部５にて触覚呈示制御装置１’に表示するデータが更新され、新たな階層の状態が出力される（ステップＳ３３）。同時に画面選択制御部１５により画面表示も下位階層に更新される（ステップＳ３４）。
【０１１０】
このとき、更新される前と現時の階層および選択オブジェクトの情報は、コマンド変換選択制御部８にメモリされ、次にスイッチが押下されたときのコマンド変換の遷移情報として保存される（ステップＳ３１）。また、前述の、ＣＲキーのほか、移動制御スイッチ群１ｆのＵＰ，ＤＮキー、あるいは選択制御スイッチ群で前の状態に戻るＥＳＣキーなど、階層移動を伴うスイッチが押下された場合にも同様な動作が行われる。
【０１１１】
このように、視覚障害者は、触覚呈示制御装置１’のスイッチを触れることによって、現在画面上に表示されてるＩＳＤＢメニュー画面の選択オブジェクト項目の数や階層の位置を短時間で確認することができ、選択オブジェクトを表すスイッチを押下することで、項目の内容を知ることができ、さらに確認した内容を選択したいときには、制御キー（ＣＲ）を押下することで下位階層の選択オブジェクト項目を上記同様知ることができる。
【０１１２】
従って、短時間に階層概念を理解しながら、情報にアクセスすることが可能である。
・ＥＰＧ機能が選択された場合
次に、本具体例の説明において、ＥＰＧ機能が選択された場合の動作について、以下に図面を用いて説明する。ただし、ＥＰＧ機能とは、表形式で作成された電子番組表により提供される機能である。ただし、本実施形態では、この具体例に適用する表形式のデータを用いた機能をＥＰＧに限定する必要がなく、たとえばデータ放送等により提供された表形式のデータによる機能を含ませることは可能である。以下の説明では、説明の簡略化のため、表形式のデータをすべてＥＰＧとして説明する。
【０１１３】
また、以下の説明において、ＩＳＤＢなど、表形式のデータはそれぞれのセルが行と列との位置情報を有していると仮定する。
【０１１４】
図９において、データ出力部１８、および選択オブジェクト属性データ抽出部３で各セルの情報（以下、セル情報という）が抽出される。このとき、前述の図３で示したように、それぞれのセルは位置情報に対応して行列の配列にメモリされる。
【０１１５】
このような構成において、触覚呈示制御装置１’の機能選択スイッチ群１ａにより、ＥＰＧが選択された場合（図１２のステップＳ１のＥＰＧ）には、図１１の（３）に示すように、列を示すＮ１〜Ｎ４、行を示すＶ７〜Ｖ９、および各セルを表すＳＷ１〜ＳＷ１２が触覚呈示制御装置１’に凸により呈示される（図１４のステップＳ４１）。
【０１１６】
この状態において、まず、ＥＳＣキーが押下されたとき（ステップＳ４２のＹｅｓ）、ステップＳ４９へ移行する。また、ＥＳＣキーが押下されず（ステップＳ４２のＮｏ）、行列を移動させる指示が入力された場合（ステップＳ４３のＹｅｓ）、ステップＳ４７へ移行する。
【０１１７】
さらに、ＥＳＣキーが押下されず（ステップＳ４２のＮｏ）、行例を移動させる指示が入力されず（ステップＳ４３のＮｏ）、各項目を示す（各セルに対応する）ＣＨ／項目スイッチ群１ｇのいずれかのスイッチが押下された場合（ステップＳ４４のＹｅｓ）、前記した階層表示の場合と同様に、押下されたスイッチのコマンドが制御Ｉ／Ｏ部７に送出され、コマンド変換選択制御部８で選択すべきセルの行列位置を指定するコマンドコードに変換され、その後、コマンドコードを基に、階層・表呈示変換バッファ部４より該当するセルの内容のテキストデータを読み込み、点字出力装置１１および／もしくは音声合成装置１２により点字および／もしくは音声で出力する（ステップＳ４５）。
【０１１８】
また、触覚呈示制御装置１’の移動制御スイッチ群１ｆによる動作は、基本的な原理を図３で示した動作と同じとする。即ち、初期状態でＳＷ１に対応するセルの行列位置情報（Ａ１１）がメモリされる。次に、制御スイッチ１ｆで行／列移動のスイッチが押下された場合（ステップＳ４３）、スイッチＳＷ１を基準として、移動した行と列とのセルが新たに割り当てられる。また、変更前のスイッチＳＷ１に対応する表のセルと変換後のセルとの位置を表す情報がコマンド変換選択制御部８に記憶される（ステップＳ４７）。したがって、触覚呈示制御装置１’には、これらの情報と移動制御スイッチの情報とから、図３の（３）に示した位置関係の式をもとに移動後の情報を持ったセルに対応してスイッチが表示される（ステップＳ４８）。
【０１１９】
また、ステップＳ４２において、ＥＳＣキーが入力された場合（ステップＳ４２のＹｅｓ）、コマンド変換選択制御部８で、スイッチ押下前のスイッチＳＷ１に対応するセルの位置（移動指示まえの状態の位置）に変換し（ステップＳ４９）、選択前のデータを呈示する（ステップＳ５０）。さらに、画面選択制御部１５を介し、画面モニタには触覚呈示制御装置に表示された部分をハイライトなどで強調して表示する（ステップＳ４６）。
【０１２０】
このように、たとえば表形式が番組表の場合には、時間が縦軸、放送局が横軸で表され、Ｎ１〜Ｎ４を押下することにより、時間情報を、Ｖ７〜Ｖ９を押下することで、放送局の譲歩が得られ、かつ行と列との交差するスイッチを押下することで、所望の時間および放送局の番組情報を得ることができる。
【０１２１】
また、本方式２によれば、ユーザは手の位置を大きく動かすことなく適切な面積に配置されたこれらのスイッチにより、効率的に表の内容の探索が可能であり、行列の内容を確かめながら、２次元的な探索に近い方法で情報を得ることができる。
【０１２２】
以上、ＩＳＤＢの機能別に本発明の実施例を説明したが、Ｖ１〜Ｖ９は、適宜設定可能なスイッチであり、チャンネルやメインとなるメニュー画面の選択オブジェクトを登録することができる。
【０１２３】
また、これらのスイッチの表面性を変化することにより、触覚のテクスチャ判別による効率的なチャンネルや選択オブジェクトの選択をすることも可能である。
【０１２４】
〔他の実施形態〕
以上の各実施形態では、本発明の触覚呈示制御装置によるデータへのアクセスの方式を説明した。上記各実施形態では、ＩＳＤＢのメニュー画面への適用を示したが、コンピュータにおける階層表示やアイコン、表形式の表示には適用することも可能である。また、触覚呈示には、実呈示型の方式を示したが、オブジェクトの選択機能を有するバーチャルリアリティなどの仮想的な触覚呈示装置や２次元触覚ディスプレイにも本発明による情報アクセスや呈示方式を適用することができる。
【０１２５】
このように、本発明では、選択オブジェクトを選択するスイッチを有し、スイッチは可能機構を有し、選択入力機構とともに触覚へ階層などの情報呈示機能を兼ねることを特徴としている。また、スイッチの配列は行と列とで構成され、行と列と、あるいはスイッチの配列によって選択オブジェクトの項目数や階層を表すことを特徴としている。
【０１２６】
これにより、本発明は、ＩＳＤＢのメニュー画面など視覚的な選択オブジェクトをリモコンのようなスイッチで容易に入力選択させることが可能となり、選択オブジェクトの種類や数、内容、および階層構造を容易に理解させる呈示方法を提供し、番組などの情報に迅速にアクセスできるインタフェース方法を提供することが可能となる。
【０１２７】
【発明の効果】
以上、説明したように、本発明の触覚呈示制御装置および触覚呈示制御方法によれば、ＩＳＤＢのメニュー画面などのＧＵＩ環境において、選択オブジェクトの種類や数、階層構造やＥＰＧのような表形式の情報が、上下可動機構を有するスイッチの表示される配列により、２次元的にやさしく理解できる。さらに、呈示部は入力スイッチと機能とを共有しているので、選択オブジェクトを触覚で確認しながら、スイッチを押下すれば、それぞれの選択オブジェクトの内容は音声と点字とで確認することができる。
【０１２８】
従って、ユーザは所望の情報選択を、リモコンのように容易に選択でき、番組などの情報に迅速にアクセスできるインタフェースが期待できる。
【０１２９】
即ち、請求項１記載の発明によれば、階層構造または表構造のデータから選択オブジェクトを触覚で識別可能に呈示するスイッチを有し、前記スイッチは、前記データが階層構造である場合、階層構造における階層の位置情報を呈示する階層制御スイッチ群と、階層毎のオブジェクトを呈示する階層オブジェクトスイッチ群とを同一呈示面上における各々所定の領域に、前記階層制御スイッチ群を移動させずに前記階層オブジェクトスイッチ群が移動できるように呈示され、前記データが表構造である場合、表構造における行および列のタイトルを呈示する行列制御スイッチ群と、表構造におけるオブジェクトを呈示する表オブジェクトスイッチ群とを同一呈示面上に、前記行列制御スイッチ群を移動させずに前記表オブジェクトスイッチ群が移動できるように呈示され、前記階層制御スイッチ群又は前記行列制御スイッチ群のスイッチは、前記階層オブジェクトスイッチ群又は前記表オブジェクトスイッチ群のスイッチと触覚で識別可能に形成されることを特徴としているため、情報を２次元的に容易に理解させることが可能となる。また、階層を持つ情報や表形式の情報の構成を、容易に理解させることが可能となる。
【０１３１】
また、請求項２記載の発明によれば、さらに、データが階層構造である場合、階層制御スイッチ群と階層オブジェクトスイッチ群とが、触覚により区別されるよう構成され、データが表構造である場合、行列制御スイッチ群と表オブジェクトスイッチ群とが、触覚により区別されるよう構成されることを特徴としているため、触覚による各スイッチ群の識別を容易とすることが可能となる。
【０１３２】
また、請求項３記載の発明によれば、さらに、階層オブジェクトスイッチ群または表オブジェクトスイッチ群における所定の位置を示す基準となるボタンの位置は、触覚により他と区別されるよう構成されることを特徴としているため、触覚による各スイッチの位置の判別を容易とすることが可能となる。
【０１３３】
また、請求項４記載の発明によれば、現在の呈示状態において、押下時にスイッチから発生する固有のコードと、スイッチを用いて触覚で識別可能に呈示している選択オブジェクトと、を対応させて記憶する呈示選択オブジェクト記憶手段と、呈示選択オブジェクト記憶手段に記憶されている選択オブジェクトのリンク先の階層を記憶するリンク先記憶手段と、を有し、固有のコードと、呈示選択オブジェクト記憶手段において固有のコードに対応させて記憶されている選択オブジェクトと、リンク先記憶手段に記憶されている選択オブジェクトのリンク先の階層とに基づいて次に触覚で識別可能に呈示する階層を呈示することを特徴としているため、少ないスイッチ数で、多くの項目や階層構造、表構成を、２次元的に容易に理解させるよう呈示することが可能となる。
【０１３４】
また、請求項５記載の発明によれば、階層構造または表構造のデータから選択オブジェクトの属性情報を抽出する属性情報抽出工程と、該属性情報抽出工程において抽出された前記属性情報に基づいて前記選択オブジェクトにリンク情報を付加するリンク情報付加工程と、前記選択オブジェクトと該選択オブジェクトを触覚で識別可能に呈示しているスイッチの位置との対応を記憶する対応記憶工程とを有し、前記スイッチは、前記データが階層構造である場合には、階層構造における階層の位置情報を呈示する階層制御スイッチ群と、階層毎のオブジェクトを呈示する階層オブジェクトスイッチ群とを同一呈示面上における各々所定の領域に、前記階層制御スイッチ群を移動させずに前記階層オブジェクトスイッチ群が移動できるように呈示され、前記データが表構造である場合には、表構造における行および列のタイトルを呈示する行列制御スイッチ群と、表構造におけるオブジェクトを呈示する表オブジェクトスイッチ群とを同一呈示面上に、前記行列制御スイッチ群を移動させずに前記表オブジェクトスイッチ群が移動できるように呈示され、前記階層制御スイッチ群又は前記行列制御スイッチ群のスイッチは、前記階層オブジェクトスイッチ群又は前記表オブジェクトスイッチ群のスイッチと触覚で識別可能に形成され、前記スイッチの位置に対応して発生するコードを用いて、前記対応記憶工程において記憶された対応から選択オブジェクトを特定し、前記リンク情報付加工程において該選択オブジェクトに付加したリンク情報を特定することを特徴としているため、少ないスイッチ数で、多くの項目や階層構造、表構成を、２次元的に容易に理解させる方法による情報の呈示が可能となる。
【図面の簡単な説明】
【図１】本発明を実現する基本的な触覚呈示制御装置（方式１）の概念図である。
【図２】可動スイッチを電話あるいは電卓のテンキー配置で選択制御する触覚呈示制御装置（方式２）の概念図である。
【図３】電子番組表（ＥＰＧ）などの表形式の情報を触覚呈示制御装置の方式１により表示する方法を表す説明図である。
【図４】電子番組表（ＥＰＧ）などの表形式の情報を触覚呈示制御装置の方式２により表示する方法を表す説明図である。
【図５】（ａ）および（ｂ）はＩＳＤＢでサービスされるメニュー画面の項目と階層構造を模式的に表した説明図である。
【図６】本発明の触覚呈示制御装置の方式１により、ＧＵＩ環境の選択オブジェクトや階層構造を表す方法の説明図である。
【図７】本発明の触覚呈示制御装置の方式２により、ＧＵＩ環境の選択オブジェクトや階層構造を表す方法の説明図である。
【図８】本発明の第１の実施形態による触覚呈示制御装置１でＧＵＩ環境の選択オブジェクトや階層構造、表形式を表示する構成ブロック図である。
【図９】本発明の第２の実施形態による触覚呈示制御装置１’でＩＳＤＢのＴＶチャンネル選択やデータ放送のメニュー画面、ＥＰＧなどの表形式のデータにアクセスする方法の具体例を示す構成ブロック図である。
【図１０】本発明の第２の実施形態による触覚呈示制御装置１’の方式１でＴＶやＥＰＧ、データ放送の初期状態のメニュー画面表示例を示す図である。
【図１１】本発明の第２の実施形態による触覚呈示制御装置１’の方式２でＴＶやＥＰＧ、データ放送の初期状態のメニュー画面表示例を示す図である。
【図１２】本発明の第２の実施形態による触覚呈示制御装置１’によりＩＳＤＢの機能選択とＴＶチャンネル選択を説明するためのフローチャートである。
【図１３】本発明の第２の実施形態による触覚呈示制御装置１’によりＩＳＤＢのデータ放送のメニュー画面の選択オブジェクトへのアクセスと呈示方法とを説明するためのフローチャートである。
【図１４】本発明の第２の実施形態による触覚呈示制御装置１’によりＩＳＤＢのＥＰＧなどの表形式のセルデータへのアクセスと呈示方法とを説明するためのフローチャートである。
【符号の説明】
１、１’ 触覚呈示制御装置
１ａ 機能選択スイッチ群
１ｂ ＣＨ登録／見出しメニュー項目スイッチ群
１ｃ、１ｄ ＣＨ／項目スイッチ群
１ｅ 選択制御スイッチ群
１ｆ 移動制御スイッチ群
１ｇ 階層制御スイッチ群
２ ＧＵＩ画面選択オブジェクトデータ
３ 選択オブジェクト属性データ抽出部
４ 階層表示変換バッファ部
５ 触覚呈示コード変換バッファ部
６ 触覚呈示データ選択出力部
７ 制御Ｉ／Ｏ部
８ コマンド変換選択制御部
９ 画面表示モニタ
１０ テキストデータ出力
１１ 点字出力装置
１２ 音声合成装置
１５ 画面選択制御部
１６ ＣＨ選択部
１７ ＩＳＤＢ受信部
１８ データ出力部
１９ 画面表示変換部
【発明の属する技術分野】
本発明は、触覚呈示制御装置および触覚呈示制御方法に関する。
【０００２】
【従来の技術】
従来、コンピュータのＧＵＩ（グラフィカル・ユーザ・インタフェース）環境で、アイコンや動作項目の選択あるいはインターネットなど、視覚障害者に画面上の情報を伝えるための研究開発が行われている。
【０００３】
たとえば、第１の例として、音声によるＧＵＩ画面読み上げソフト（９５ＲＥＡＤＥＲ、「視覚障害者用Ｗｉｎｄｏｗｓ 画面読み上げソフトウェアの開発とその評価」，渡辺，岡田，ヒューマンインタフェース ６８−７）が実用化され、１９９９年には９８ＲＥＡＤＥＲにバージョンアップし、音声・点字出力による画面読み上げを可能にしている。
【０００４】
また、第２の例には、ＧＵＩ環境を触覚・聴覚のマルチモーダルで伝えることを目的とした研究がある（「触覚ピンディスプレイ付きポインティングディバイスの提案」；山中ほか ＨＩシンポジウム論文集１２１２）。これは、コンピュータのアイコンを画面そのものの配置やサイズで触覚呈示する方式（画面呈示方式）である。
【０００５】
この例では、タッチパネル付きＬＣＤの画面を触れることにより、その位置に表示された対話部品の情報が音声で出力される。さらにタッチパネル上に触覚ディスプレイを搭載し、触覚受容器で対話部品を触れることができる。たとえば、触覚ディスプレイとして、８×８本のピンを２次元に配列し、ピン１本を画面の１ドットに対応させ、現在のポインティング座標を中心に８×８ドットの範囲の情報が呈示される。この構成において、触覚ディスプレイは絶対座標系としてタッチパネル上で動かすことができ、広い範囲の画面情報の触知が可能となるよう構成されている。
【０００６】
さらに、第３の例には、コンピュータのアイコンや階層を論理的な形式に変換して触覚呈示する方式（論理呈示方式）による研究がある。この例では、従来のピンディスプレイを用い、ピンの上下方向の位置と組み合わせることにより、選択オブジェクトの機能や階層構造を表示する方式「視覚障害者用グラフィカルユーザインタフェース」（特開平１０−６９２１８号公報）が提案されている。
【０００７】
一方、ディジタル放送では、データ情報にアクセスする方式として、メニュー画面から希望する項目を選択するＧＵＩ的な形式が考えられている。この形式では、通常、リモコンによって上下左右に選択カーソルを移動し、目的の項目へ選択カーソルが移動後、決定のキーを押下するなどの方法で、項目選択を可能としている。
【０００８】
このようなカーソルによる選択を可能にするためのメニュー画面を視覚障害者に伝える方法を第４の例として挙げると、この例では、使用者のリモコンなどの操作やキーワードで画面上のタグ項目を入力して、選択された項目の内容を音声や点字で出力して伝える方式などのインタフェースが提案されている（「視覚障害者向け統合型放送受信端末の開発；坂井ほか，ＨＩシンポジウム ’９９−１４１１」）。
【０００９】
【発明が解決しようとする課題】
しかしながら、現在、視覚障害者がＧＵＩ環境でコンピュータを操作できる有効な手段や、ＩＳＤＢ（統合ディジタル放送）のメニュー画面を視覚障害者に伝える技術は確立されておらず、どのように画面情報を伝達し、アクセスの入出力をするかは大きな課題となっている。
【００１０】
ここで、コンピュータのアイコンやＧＵＩ環境であるディジタル放送のメニュー画面のスイッチからデータをアクセスする際に問題となるのは、画面上の選択オブジェクトの配置や数をどのように伝えるか、それらの選択をどのように行うか、さらに、階層構造や現在の階層の位置をどう伝えるかである。
【００１１】
前記、従来技術の第１の例に示した「９８ＲＥＡＤＥＲ」など、音声や点字によるＧＵＩ画面伝達は有効な手段であるが、音声自体が時系列な情報呈示の手段であるため、画面上のアイコンや項目などの選択オブジェクトを検索するのに時間を要するという問題がある。また、音声による情報呈示では、画面全体の選択オブジェクトの配置や数などの把握が困難なことや、階層の概念の理解や記憶が困難であることから、下位階層に入った場合、階層の位置やツリー構成の全体像を把握することが難しいという問題がある。
【００１２】
また、従来技術で示した第２の例である画面呈示方式では、多くの選択オブジェクトを呈示することが必要であり、全体を触覚で探索することが容易ではないことや、選択オブジェクトの配置位置に規則性がないことなどから、オブジェクトの位置や内容の記憶が難しく、迅速に選択することを可能とする点において課題を残している。
【００１３】
これに対し、前記従来技術の第３の例である論理呈示方式による発明の装置では、点字サイズのピンで階層を表すことができるので小型化が可能であり、探索もしやすい。しかしながら、この反面、触覚の分解能などに限界があり、センシングが難しいことや、提案された方式では、階層表示の規則が複雑でユーザにとって難しいことなどから、必ずしも有効な手段であるとは言えなかった。
【００１４】
また、以上はコンピュータを対象としているが、ＩＳＤＢなど放送メディアでは、誰もが選択操作できる入力機能が必須である。しかしながら、データ放送などにおいて通常のリモコンでは選択オブジェクトを直接選択できず、また、階層構造を把握することができない。さらに従来技術の第４の例で示したリモコン操作に対応した音声や点字出力は前記第１の例と同様な問題を有している。
【００１５】
このようにＩＳＤＢのメニュー画面やコンピュータのアイコンなどのＧＵＩ環境で、選択オブジェクトの位置関係や階層などの情報の構成をわかりやすく伝達する有効な入出力制御装置はなかった。
【００１６】
従って、本発明は上記問題に鑑みなされたもので、情報の構成を２次元的に容易に理解させることを可能とする触覚呈示制御装置および触覚呈示制御方法を提供することを目的とする。
【００１７】
【課題を解決するための手段】
係る目的を達成するために、本発明は、階層構造または表構造のデータから選択オブジェクトを触覚で識別可能に呈示するスイッチを有し、前記スイッチは、前記データが階層構造である場合、階層構造における階層の位置情報を呈示する階層制御スイッチ群と、階層毎のオブジェクトを呈示する階層オブジェクトスイッチ群とを同一呈示面上における各々所定の領域に、前記階層制御スイッチ群を移動させずに前記階層オブジェクトスイッチ群が移動できるように呈示され、前記データが表構造である場合、表構造における行および列のタイトルを呈示する行列制御スイッチ群と、表構造におけるオブジェクトを呈示する表オブジェクトスイッチ群とを同一呈示面上に、前記行列制御スイッチ群を移動させずに前記表オブジェクトスイッチ群が移動できるように呈示され、前記階層制御スイッチ群又は前記行列制御スイッチ群のスイッチは、前記階層オブジェクトスイッチ群又は前記表オブジェクトスイッチ群のスイッチと触覚で識別可能に形成されることを特徴としている。
【００１８】
これにより、本発明は、情報を２次元的に容易に理解させることが可能となる。また、階層を持つ情報や表形式の情報の構成を、容易に理解させることが可能となる。
【００２１】
また、本発明は、さらに、データが階層構造である場合、階層制御スイッチ群と階層オブジェクトスイッチ群とが、触覚により区別されるよう構成され、データが表構造である場合、行列制御スイッチ群と表オブジェクトスイッチ群とが、触覚により区別されるよう構成されることを特徴としている。
【００２２】
これにより、本発明は、触覚による各スイッチ群の識別を容易とすることが可能となる。
【００２３】
また、本発明によれば、さらに、階層オブジェクトスイッチ群または表オブジェクトスイッチ群における所定の位置を示す基準となるボタンの位置は、触覚により他と区別されるよう構成されることを特徴としている。
【００２４】
これにより、本発明は、触覚による各スイッチの位置の判別を容易とすることが可能となる。
【００２５】
また、本発明は、現在の呈示状態において、押下時にスイッチから発生する固有のコードと、スイッチを用いて触覚で識別可能に呈示している選択オブジェクトと、を対応させて記憶する呈示選択オブジェクト記憶手段と、呈示選択オブジェクト記憶手段に記憶されている選択オブジェクトのリンク先の階層を記憶するリンク先記憶手段と、を有し、固有のコードと、呈示選択オブジェクト記憶手段において固有のコードに対応させて記憶されている選択オブジェクトと、リンク先記憶手段に記憶されている選択オブジェクトのリンク先の階層と、に基づいて次に触覚で識別可能に呈示する階層を呈示することを特徴としている。
【００２６】
これにより、本発明は、少ないスイッチ数で、多くの項目や階層構造、表構成を、２次元的に容易に理解させるよう呈示することが可能となる。
【００２７】
また、本発明は、階層構造または表構造のデータから選択オブジェクトの属性情報を抽出する属性情報抽出工程と、該属性情報抽出工程において抽出された前記属性情報に基づいて前記選択オブジェクトにリンク情報を付加するリンク情報付加工程と、前記選択オブジェクトと該選択オブジェクトを触覚で識別可能に呈示しているスイッチの位置との対応を記憶する対応記憶工程とを有し、前記スイッチは、前記データが階層構造である場合には、階層構造における階層の位置情報を呈示する階層制御スイッチ群と、階層毎のオブジェクトを呈示する階層オブジェクトスイッチ群とを同一呈示面上における各々所定の領域に、前記階層制御スイッチ群を移動させずに前記階層オブジェクトスイッチ群が移動できるように呈示され、前記データが表構造である場合、表構造における行および列のタイトルを呈示する行列制御スイッチ群と、表構造におけるオブジェクトを呈示する表オブジェクトスイッチ群とを同一呈示面上に、前記行列制御スイッチ群を移動させずに前記表オブジェクトスイッチ群が移動できるように呈示され、前記階層制御スイッチ群又は前記行列制御スイッチ群のスイッチは、前記階層オブジェクトスイッチ群又は前記表オブジェクトスイッチ群のスイッチと触覚で識別可能に形成され、前記スイッチの位置に対応して発生するコードを用いて、前記対応記憶工程において記憶された対応から選択オブジェクトを特定し、前記リンク情報付加工程において該選択オブジェクトに付加したリンク情報を特定することを特徴としている。
【００２８】
これにより、本発明は、少ないスイッチ数で、多くの項目や階層構造、表構成を、２次元的に容易に理解させる方法による情報の呈示が可能となる。
【００２９】
【発明の実施の形態】
〔本発明の特徴〕
本発明は、触覚呈示制御装置および触覚呈示制御方法に関するものである。
【００３０】
ただし、以下の実施形態では、本発明を、統合ディジタル放送（ＩＳＤＢ）で用いられるメニュー画面の選択ボタンや表などの視覚的なオブジェクト（以下、選択オブジェクトという）から情報にアクセスする方法に対して適用した場合を例に挙げて説明する。これにより、本発明では、ＩＳＤＢで用いられる選択オブジェクトから情報にアクセスする際に、リモコンのような選択スイッチ（もしくはボタン。以下、スイッチに含む）により項目選択ができ、かつスイッチの配列を利用して選択オブジェクト数や階層などの状態を触覚により認識させることが可能となる。
【００３１】
即ち、以下で説明する各実施形態は、統合ディジタル放送（ＩＳＤＢ）の選択オブジェクトを触覚で探索することにより、視覚障害が情報にアクセスできる触覚呈示制御装置に関するもので、選択オブジェクトを選択するスイッチを有し、スイッチは可動機構を有し、スイッチの配列は行と列とのアレイで構成され、凸表示されるスイッチの配列形状や数量によって選択オブジェクトの項目数や階層などの情報を触覚に伝えるとともに、それぞれの選択オブジェクトを表すスイッチが入力機能を兼ねることにより、統合ディジタル放送のメニュー画面などの視覚的選択オブジェクトから番組などの情報に容易かつ迅速にアクセスできるようにしたものである。
【００３２】
より具体的には、ＩＳＤＢのメニュー画面のボタンや階層構造の表示のために、選択オブジェクトや階層を画面上の位置情報の論理的表示方式に変換し、ユーザが論理的表示方式に対応して凸表示されたスイッチを触れることにより、階層や階層中の選択オブジェクトの位置や数量を把握できるようにするとともに、表示された選択オブジェクトのスイッチを押下することで、音声や点字で内容が把握でき、迅速に情報へアクセスさせることを可能とする。また、表形式の情報の表示には行と列とのによる各行列要素（以下、セルという）をスイッチの配列に対応させ、セルを行と列とを確認しながら選択させ、この対応するスイッチを押下させることにより、セルの内容を伝達するようにも構成する。
【００３３】
これらの構成により、視覚に障害を持つ人や盲ろう者がグラフィカルユーザインタフェース（ＧＵＩ）環境にアクセスできるインタフェースを提供することが可能となる。
【００３４】
これを実現するにあたり、本発明は、情報にアクセスし、情報を呈示するグラフィカルユーザインタフェース（ＧＵＩ）において、可動動作するスイッチを有し、スイッチの配置や数、高低差により、階層や視覚的選択オブジェクトの位置や数を表す構成を有する。
【００３５】
また、上記の視覚的な選択オブジェクトに対応するスイッチの配列には、階層を表す範囲、階層中の選択オブジェクトを表す範囲、行や列を表す範囲を有し、情報を構成する画面中の選択オブジェクトの位置や数、あるいは階層を把握す構成を有する。
【００３６】
さらに、階層および行や列を表す範囲のスイッチと選択オブジェクトを表す範囲のスイッチとは、形状や表面の荒さを変化させることにより、区別ができる構成を有する。
【００３７】
また、選択オブジェクトを表す複数のスイッチでは、基準となるスイッチを異なる表面性や形状とし、かつ当該スイッチが凸表示しない場合でも、スイッチ周辺の段差や穴などにより触覚で、これを検知できる構成を有する。
【００３８】
また、本発明は、触覚呈示される選択オブジェクトのリンク先などのツリー構成をメモリする機能を有し、選択オブジェクトの表示状態を記憶するメモリを有し、各スイッチには押下時に固有のデータ発生を有し、新たにスイッチが押下された場合には、前記選択オブジェクトの表示状態と前記スイッチ押下時の固有のデータとから、前記ツリー構成から呈示すべき選択オブジェクトを指定するコマンドを生成する機能を有することで、少ないスイッチで多くの選択オブジェクトや階層を表現する構成を有する。
【００３９】
また、本発明は、ＧＵＩ環境の選択オブジェクトを触覚に呈示する方法に関するものであり、選択オブジェクトの属性データを抽出する工程と、抽出された属性データよりあらたな階層や表を構成する変換工程と、選択オブジェクトをスイッチ配列に対応して表示するためのデータ生成工程と、押下スイッチのコードを生成する工程と、押下スイッチから前記階層や表を呈示する選択オブジェクトを指定するコードを生成する工程と、を併せ持つ構成を有する。
【００４０】
以下、このような構成を有する本発明を好適に実施した形態について、図面を用いて詳細に説明する。
【００４１】
〔第１の実施形態〕
まず、本発明の第１の実施形態について、図面を用いて詳細に説明する。
【００４２】
（第１の実施形態の構成）
図１、および図２は、本発明において、ＩＳＤＢのメニュー画面などの視覚的な選択オブジェクトに対して、可動スイッチ機構を有し、選択のためのスイッチ入力とともにスイッチの配置から選択オブジェクトを呈示する触覚呈示制御装置の概念を表す図であり、図１は、本発明を実現する基本的な触覚呈示制御装置（方式１）の概念図を示し、図２は、可動スイッチを電話あるいは電卓のテンキーと同様な配置とするよう構成した触覚呈示制御装置（方式２）の概念図を示す。
【００４３】
また、図３、および図４は、電子番組表（以下、ＥＰＧという）などの表形式の情報を触覚呈示制御装置により表示する方法を説明するための図であり、図３は、これを方式１の触覚呈示制御装置に適用した場合を説明するための図であり、図４は、これを方式２の触覚呈示制御装置に適用した場合を説明するための図である。
【００４４】
さらに、図５の（ａ）は、ＩＳＤＢでサービスされるメニュー画面の項目と階層構造とを模式的に表した説明図であり、図５の（ｂ）は、メニュー画面の各選択オブジェクトのリンク先情報から、階層構造を表した説明図である。
【００４５】
さらにまた、図６、および図７は、本発明の触覚呈示制御装置の方式１および方式２により、ＧＵＩ環境の選択オブジェクトや階層構造を表す方法を説明するための図であり、図６は、方式１の触覚呈示制御装置を適用した場合を説明するための図であり、図７は、方式２の触覚呈示制御装置を適用した場合を説明するための図である。
【００４６】
以下、図１から７を用いて、本発明の第１の実施形態を詳細に説明する。
【００４７】
・触覚呈示制御装置の構成
図１および図２において、１ａ〜１ｅは、上下動が可能なスイッチ群であり、圧電素子や電磁ソレノイド、ステッピングモータ、あるいは形状記憶合金などのアクチュエータにより駆動される。本実施形態では、この上下動可能なスイッチ群１ａ〜１ｅを用いることで、選択オブジェクトや階層構造、あるいは表形式の構成を凸により表現する。また、各スイッチは情報アクセスや制御のための入力スイッチとしても機能する。さらにまた、表示する対象のないスイッチ（対応する選択オブジェクト等が存在しないスイッチ）は、押下できないように下方位置に駆動された状態となる。すなわち、これらのスイッチは、入力とともに遷移先の階層や表における行と列とのタイトル、および選択オブジェクトを表す。たとえばスイッチ群１ａを、機能を選択するためのスイッチ群とし、スイッチ群１ｂおよびスイッチ群１ｇをそれぞれ行と列とのタイトルを表す（階層構造を持つ情報に対してはスイッチ群１ｇが階層を表す）ためのスイッチ群とし、スイッチ群１ｄを選択オブジェクトを表すためのスイッチ群とし、スイッチ群１ｆを制御スイッチ群とする。本実施形態では、このように、それぞれのスイッチ群に対して機能を分けて設定できるよう構成する。
【００４８】
・触覚を用いた情報呈示方式の説明
このような構成を有する触覚呈示制御装置を用いて表形式の情報を呈示し、アクセスさせる方法の例を説明する。
【００４９】
・・方式１に適用した場合
図３の（ａ）は、本方式を説明するために用いる表形式の情報の例であり、Ｘ１〜Ｘｎ、Ｙ１〜Ｙｍはそれぞれ列、行のタイトルを表す選択オブジェクト（以下、単にタイトルという）、また、Ａ１１〜Ａｍｎは、行と列とで指定される選択オブジェクト（以下、表形式ではセルという）であり、それぞれのセルが情報を有するよう構成されている。
【００５０】
また、図３の（ｂ）は、図３の（ａ）に示す表形式のデータを呈示する触覚呈示制御装置として方式１によるものを用いた場合の例である。図３の（ｂ）において、スイッチ群１ｂのＶ１〜Ｖ９は図３の（ａ）におけるタイトル行Ｘ１〜Ｘｎを呈示し、スイッチ群１ｄは図３の（ａ）におけるタイトル列Ｙ１〜Ｙｍを呈示し、スイッチ群１ｄは図３の（ａ）におけるセル内容Ａ１１〜Ａｍｎを呈示する。
【００５１】
また、図３の（ｃ）は、表形式の各セルと方式１による触覚呈示制御装置のスイッチ配列との位置関係を表す。
【００５２】
本説明において、方式１の触覚呈示制御装置では、たとえばスイッチＶ３を押下するとタイトル行Ｘ３の選択オブジェクトの内容が音声あるいは点字で出力され、また、スイッチＮ２を押下するとタイトル列Ｙ２の選択オブジェクトの内容が音声あるいは点字で出力される。同様にスイッチＳＷ２３を押下すると、Ｘ３行Ｙ２列に対応するセルＡ３２の内容が音声あるいは点字により出力される。
【００５３】
ここで、図３の（ｂ）に示す触覚呈示制御装置の例では、図３の（ａ）の表形式のセルに対してすべてを表示することができない。したがって、本例では、表形式において、タイトル行ｎ，タイトル列ｍがｎ＞９，ｍ＞４の場合、図３の（ｃ）に示すように、表形式のセルにおける一部を選択可能な領域として触覚呈示制御装置に呈示するよう構成する。さらに、この構成において、すべてのセルを呈示するために、本実施形態では、スイッチ群１ｆのＵＰ，ＤＮ，ＬＦ，ＲＦの押下回数により、選択可能領域（呈示領域）を移動するよう構成する。これは、たとえば、現在、触覚呈示制御装置にＳＷ１１〜ＳＷ４９までのセルの領域が呈示されている状態において、スイッチ群１ｆのＤＮが２回押下された場合に、触覚呈示制御装置が呈示するセルの領域をＳＷ３１〜ＳＷ６９へ変更するというものである。
【００５４】
・・方式２に適用した場合
同様に、表形式の情報を呈示するにあたり、方式２による触覚呈示制御装置を用いた場合の例を示す。本実施形態で例示した方式２による触覚呈示制御装置では、行の選択領域が方式１によるものと比較して小さいほかは、方式１と同様に移動スイッチＵＰ，ＤＮ，ＬＦ，ＲＦを用いて表示するセルの領域を移動、および選択することができる。この場合、それぞれのスイッチの押下により１行あるいは１列ごとに移動するよう構成することも可能であるが、ｎ行あるいはｍ列ごとに移動して表示するよう構成したほうが探索の効率がよい。ただし、この点は、方式１にも適用することができる。
【００５５】
図４は、方式２の触覚呈示制御装置により表形式の情報を呈示する方法である。Ｖ７〜Ｖ９は列のタイトルと対応し、Ｎ１〜Ｎ４は行のタイトルと対応し、ＳＷ１〜ＳＷ１２はセルと対応する。
【００５６】
方式１と比較すると、一度に表示できるセル数が少ないが、限られた範囲で手指を動かすことなく情報を得られる利点がある。また、情報呈示の原理は方式１と同じであり、表示するセルの領域を移動させる構成も方式１で説明したものと同様なものを適用することが可能である。
【００５７】
・階層構造の呈示／選択方式の説明
次に、本実施形態による触覚呈示制御装置を用いた階層構造の呈示と選択との原理を、ディジタルデータ放送で提供されるメニュー画面を例に説明する。
【００５８】
図５の（ａ）は、適用したディジタルデータ放送で提供されるメニュー画面の例を示す図であり、図５の（ｂ）は、適用したディジタルデータ放送における各項目の階層構造の例を示す図である。この構成において、たとえば第１階層のメインメニュー画面からＶ２（天気）が選択されると、Ｖ２にリンクされた第２階層のメニューＶ２１〜Ｖ２４が触覚呈示制御装置に表示される。さらに第２階層でＶ２４（ローカル天気）が選択されると第３階層のメニューＶ２４１〜Ｖ２４７（地域など）が触覚呈示制御装置に表示される。また、本例では、この第３階層で選択された項目に対応する情報を音声あるいは点字により提供する。
【００５９】
・・方式１に適用した場合
図６は、触覚呈示制御装置の方式１を用いた場合の、メニュー項目および階層構造の呈示や選択の方法を説明するための模式図である。Ｎ１〜Ｎ４は、各項目が対応する階層の深さ、ＳＷ１１〜ＳＷ４９は、それぞれの階層における選択オブジェクトあるいは各階層における選択された選択オブジェクトを表す。
【００６０】
図６の（１）は、本説明において適用したメニューにおける初期状態であり、図５のメニュー画面の例より選択オブジェクトＶ１〜Ｖ５に対応して、第１階層Ｎ１の行にＳＷ１１〜ＳＷ１５のスイッチが凸で表示され、第１階層に選択オブジェクトが５個あることを触覚により検知させる。また、これら凸表示されたスイッチは、たとえばダブルクリック（ダブルプッシュ）やシングルクリック（シングルプッシュ）＋ＣＲ（決定）キー押下で選択される。
【００６１】
また、図６の（２）は、図６の（１）に示す第１階層においてＶ２（ＳＷ１２）が選択されることにより遷移した場合の呈示内容を示す図である。図６の（２）を参照すると、この場合では、触覚呈示制御装置に第１階層を示すＮ１と選択された選択オブジェクトＶ２を示すＳＷ１２と第２階層を示すＮ２と第２階層に存在する選択オブジェクトＶ２１〜Ｖ２４を示すＳ２１〜Ｓ２４とが凸で表示される。
【００６２】
さらに、第２階層でＳＷ２４スイッチが押下された場合には、図６の（３）に示すように、第１階層、第２階層、および第１階層における選択された選択オブジェクトの表示は変わらず、第２階層における選択オブジェクトの表示が選択されたスイッチＳＷ２４のみとなり、さらに、遷移先の第３階層を表すＮ３と第３階層に存在する７個の選択オブジェクトＶ２４１〜Ｖ２４７に対応するＳＷ３１〜ＳＷ３７とが凸で表示される。
【００６３】
従って、ユーザは、図６の（４）に示すようにスイッチＳＷ３１を押下すると、第３階層が最下層であるため、最終的にこのスイッチＳＷ３１に対応する選択オブジェクトＶ２４１の内容を音声や点字により得られるとともに、第４階層には選択オブジェクトがないことが触覚によりわかる。
【００６４】
この状態で、たとえばＥＳＣキーを押下すれば、１階層上位で、図６の（３）の状態に戻ることができる。また、階層表示のスイッチであるＮ１を押下すれば、図６の（１）の状態に戻り、ＳＷ１１〜ＳＷ１５が選択できる。
【００６５】
このように、スイッチの凸表示を触覚で感ずることにより、スイッチに対応する項目のタイトルや内容が音声や点字で得られ、視覚障害者は２次的な情報から迅速に情報をアクセスすることができる。
【００６６】
・・方式２に適用した場合
次に、図５に示すメニュー項目および階層構造の呈示や選択の方法を方式２による触覚呈示制御装置を用いて行う場合を図７を用いて説明する。
【００６７】
方式２では、表示される選択オブジェクトに対応するスイッチの配置を、電話あるいはキーボードの番号に合致して、順次番号順に表示する。これにより視覚障害者や盲ろう者は普段の生活で自然とパターン化されている電話などのキー配置により、スイッチに触れることで即座にかつ直感的に階層中の項目数や項目の位置（対応する番号）を把握することができる。
【００６８】
この場合、『５』の位置のスイッチには突起や異なる表面性などにより認知しやすい構造とし、項目数が『４』以下で『５』が突起しないときでも、スイッチ周辺の穴部を盛り上げるなど検知できる構造とすることが好ましい。また、各階層の選択オブジェクトはＳＷ１〜ＳＷ９の９個のスイッチで表され、１０個以上の場合にはＳＷ０を凸とすることにより呈示する。このように構成することで、総計で１９個の表示が可能である。ただし、図７のように、スイッチＳＷ１１，ＳＷ１２も存在する場合、スイッチＳＷ１１が１０個以上であることを示し、スイッチＳＷ０が２０個以上であることを示し、スイッチＳＷ１２が３０個以上をであることを示し、さらに、各スイッチＳＷ０，ＳＷ１１，ＳＷ１２の組み合わせにより、たとえばスイッチＳＷ１１とＳＷ１２との双方を凸表示とすることにより、４０個（１０個＋３０個）以上であることを示すように構成することも可能である。
【００６９】
また、方式１と同様に、図５のメニュー画面において、初期状態では第１階層に位置するため、選択オブジェクトとしてはＶ１〜Ｖ５が存在する。従って、触覚呈示制御装置には、図７の（１）に示すように、第１階層を表すＮ１とスイッチＳＷ１〜ＳＷ５とが凸表示される。
【００７０】
さらに、第１階層においてスイッチＳＷ２（選択オブジェクトＶ２）が選択された場合、図７の（２）のように、第１階層を示すＮ１に加え、第２階層を示すＮ２が凸表示され、また、第２階層に存在する４個の選択オブジェクトＶ２１〜Ｖ２４に対応してスイッチＳＷ１〜ＳＷ４が凸で表示される。
【００７１】
この状態でスイッチＳＷ４（Ｖ２４）が選択されたときは、図７の（３）のように、階層を表示するＮ１，Ｎ２に加え、第３階層であるＮ３が凸表示され、項目内容として７つの選択オブジェクトがＣＨ／項目スイッチ群１ｄに凸表示される。
【００７２】
さらにここで、スイッチＳＷ１（Ｖ２４１）が選択された時点で、ユーザは第３階層の天気の内容を得ることができ、その後、図７の（４）に示すように、第４階層以降には選択オブジェクトがないことを知ることができる。また、この時点でＥＳＣキーが押下された場合には、第３階層の選択オブジェクトを示す図７の（３）が表示され、また、Ｎ１が押下された場合には、第１層の選択オブジェクトを示す図７の（１）が表示される。
【００７３】
このように、ユーザは階層スイッチ群１ｇにより現時点の階層や階層構造を知ることができ、ＣＨ／項目スイッチ群１ｄにおいて階層に存在する選択オブジェクトの項目数や項目順を２次元的に知ることができ、ＧＵＩ的なメニュー画面から、容易かつ迅速に情報へアクセスすることができる。
【００７４】
（第１の実施形態の具体例）
次に、本実施形態の触覚呈示制御装置を用いてＧＵＩ環境の選択オブジェクトや階層構造、表形式の情報を呈示し、選択オブジェクトやセルの情報取得や選択ができる基本的な方式の構成例について、図８を参照して説明する。
【００７５】
図８において、１は本実施形態による触覚呈示制御装置であり、２はＧＵＩ画面の選択オブジェクトデータ（以下、ＧＵＩ画面選択オブジェクトデータという）であり、ＧＵＩ環境における選択オブジェクトの階層位置やリンク先、ジャンル、テキストデータ、画面上の表示位置やサイズなどの属性情報を有する。３はＧＵＩ画面選択オブジェクトデータ２の選択オブジェクトの情報（以下、選択オブジェクト情報という）から階層やリンク先など所望の属性情報を抽出する選択オブジェクト属性データ抽出部であり、４は選択オブジェクトの属性情報に基づいて、図３あるいは図５に示すような、表や階層構造（階層ツリー構造ともいう）をあらたに構成し、メモリする階層・表呈示変換バッファ部であり、５は階層・表呈示変換バッファ部４で表や階層ツリー構造の関係が付加された選択オブジェクトと触覚呈示制御装置１で表示されるスイッチの位置との対応を行うためのデータ変換テーブルを有する触覚呈示コード変換バッファ部であり、表形式や階層位置および階層に存在する選択オブジェクトから遷移先の状態において触覚呈示制御装置１に表示するデータを抽出してバッファし、出力する。６は触覚呈示コード変換バッファ部５で得られた出力データに対応して触覚呈示制御装置１を駆動する触覚呈示データ選択出力部である。また、７は制御Ｉ／Ｏ部で、触覚呈示制御装置１で選択押下されたスイッチの入力インタフェース部である。８は触覚呈示制御装置１で押下されたスイッチのコードを対応する選択オブジェクトの属性情報を指定するコマンドに変換し、階層・表呈示変換バッファ部４および触覚呈示コード変換バッファ部５において遷移先の状態で表示すべきデータが得られるよう動作するためのコマンド変換選択制御部である。
【００７６】
すなわち、触覚呈示制御装置１におけるスイッチは種々の状態で入力コードを共有している（各スイッチが発生するコードが固有のものである）ため、すべての機能で直接選択オブジェクトを指定することができない。従って、コマンド変換選択制御部８において入力されたコードを適切なコマンド（以下、コマンドコードという）に変換する。
【００７７】
・具体例の動作の説明
以下、上述した本実施形態の具体例の動作について、方式２による触覚呈示制御装置を適用して説明する。
【００７８】
本具体例では、図５に示した階層構造を持つメニューを適用する。従って、図７の（１）に示したように、初期状態では、第１階層の選択オブジェクト情報として、触覚呈示制御装置１のスイッチＳＷ１〜ＳＷ５およびＮ１が凸として表示される。
【００７９】
ここで、凸表示されたスイッチのいずれかが押下されると、制御Ｉ／Ｏ部７では、押下されたスイッチに固有のコードが検出される。ＧＵＩ画面選択オブジェクトデータ２では、検出されたコードを基に対応する選択オブジェクトが指定される。また、画面表示モニタ９では、この指定された選択オブジェクトがハイライトや赤／黄色文字などの強調表現により表示される。
【００８０】
一方、押下されたスイッチ（以下、押下スイッチという）のコードは、制御Ｉ／Ｏ部７からコマンド変換選択制御部８にも送られる。ここでは、スイッチが押下される前に表示されている選択オブジェクトの属性情報を参照し、前記に示したように、この階層構造の情報やリンク情報等を触覚呈示制御装置１に呈示すべきコマンドコードに変換し、階層・表呈示変換バッファ部４に伝達する。
【００８１】
これに対して、階層・表呈示変換バッファ部４では、コマンドコードより触覚呈示制御装置１に表示する表示データを特定し、これを触覚呈示コード変換バッファ部５へ出力する。また、触覚呈示コード変換バッファ部５では、入力された表示データに基づいて触覚呈示に対応するデータが生成され、触覚呈示データ選択出力部６へ出力される。
【００８２】
このように入力されたデータを基に、触覚呈示データ選択出力部６は、触覚呈示制御装置１におけるスイッチを駆動し、ユーザへ要求された情報（遷移先の階層における構造情報）の表示を行う。
【００８３】
〔第２の実施形態〕
次に、本発明の第２の実施形態として、本発明による触覚呈示制御装置をデータ放送に適用した場合について、図９〜図１１および図１２〜１４を用いて詳細に説明する。
【００８４】
（第２の実施形態の構成）
図９は、本実施形態において、ＩＳＤＢからＴＶチャンネルを選択する方法やデータ放送のメニュー画面選択オブジェクトを表示、選択する方法、あるいはＥＰＧなどの表形式の情報を表示して、データにアクセスさせる構成の一例を示す構成ブロック図である。
【００８５】
図９において、１７はデータ放送を受信するＩＳＤＢ受信部であり、１８は受信したデータからディジタル放送のフォーマットであるＢＭＬ（Broadcasting Mark Up Language）などを抽出して出力するデータ出力部であり、このデータ出力部１８の一方の出力は、画面表示変換部１９に入力される。この画面表示変換部１９は、入力されたデータをデコードして画面表示モニタ９に表示する。また、データ出力部１８の他方の出力は、選択オブジェクト属性データ抽出部３に入力され、入力されたデータよりメニュー画面を構成するそれぞれの選択オブジェクトの階層位置やリンク先などの属性情報が抽出される。
【００８６】
また、階層・表呈示変換バッファ部４は、選択オブジェクト属性データ抽出部３で抽出された選択オブジェクトの属性情報をもとに、新たに階層ツリー構成や表形式を作成し、これを保持する。
【００８７】
コマンド変換選択制御部８は、触覚呈示制御装置１’で押下されたスイッチのコードを制御Ｉ／Ｏ部７を介して受信し、このコードから呈示すべき選択オブジェクトを指定するコマンドコードを特定する。ただし、触覚呈示制御装置１’のスイッチは、前述のように、種々の状態で入力コードを共有しているので、すべての機能で直接選択オブジェクトを指定することができない。従って、コマンド変換は、ＩＳＤＢが有するＴＶ、データ放送、ＥＰＧや、データ放送の機能、あるいは、表や階層の表示に応じて、スイッチの押下前に表示されている階層や表の選択オブジェクトの属性情報が参照され、あらかじめ登録された変換表に基づき実行される。
【００８８】
このように変換されたコマンドコードは、階層・表呈示変換バッファ部４に入力され、表や階層ツリー構造の関係より、遷移先の状態において表示される選択オブジェクトが特定される。また、このように特定された選択オブジェクトは、触覚呈示コード変換バッファ部５に入力され、データ変換テーブルが参照されて、各選択オブジェクトを触覚呈示制御装置１’に表示するためのデータが抽出される。ただし、階層・表呈示変換バッファ部４で指定された選択オブジェクトのテキスト情報は、テキストデータ出力１０においてバッファされ、点字出力装置１１および音声合成装置１２で出力される。
【００８９】
また、触覚呈示データ選択出力部６は、触覚呈示コード変換バッファ部５より入力されたデータに基づいて触覚呈示制御装置１’におけるスイッチを駆動し、ユーザへ要求された情報（遷移先の階層における構造情報）表示を行う。
【００９０】
ただし、この構成において、第１の実施形態による触覚呈示制御装置１と同様の構成には、同一の符号を附す。
【００９１】
（第２の実施形態の具体例）
以下、本実施形態による触覚呈示制御装置１’を実際に使用した場合における動作の一例について、方式２による触覚呈示制御装置１’を用いて説明する。
【００９２】
図９において、１ａはＩＳＤＢが提供するＴＶやデータ放送、電子番組表（ＥＰＧ）等の機能を選択するための機能選択スイッチ群であり、１ｂは表形式の構成において列表示のオブジェクトを表示する、もしくは選択させるためのスイッチ群であるとともに、上記ＴＶやデータ放送の機能において、それぞれＴＶの登録されたチャンネル（ＣＨ）やデータ放送のメニュー画面の選択オブジェクトを選択させるためのＣＨ登録／見出しメニュー項目スイッチ群である。１ｄは機能選択スイッチ群１ａにより選択された機能における表示内容（選択オブジェクト）や選択肢をユーザに提供するＣＨ／項目スイッチ群であり、たとえば、ＴＶ機能が選択された場合では選択対象のＴＶチャンネルを表示し、データ放送機能が選択された場合では見出しメニュー項目に関する各階層の項目を表示し、さらにＥＰＧなどの表形式による機能が選択された場合では表形式のデータにおけるセルを表す。また、１ｅは各種選択や選択した項目の実行、もしくは選択した項目のキャンセル等を入力するための選択制御スイッチ群であり、１ｆはＣＨ／項目スイッチ群１ｄで示された表の行や列の表示領域を移動する指示を入力させるための移動制御スイッチ群であり、１ｇは階層を表示し、選択させる階層制御スイッチ群であり、１ｃは１ｂに包含され、たとえばＥＰＧなどの表形式による機能が指定された場合に、表形式のデータ構造におけるタイトル列を表示する列表示スイッチ群である。
【００９３】
・具体例の動作の説明
また、方式１による触覚呈示制御装置を適用した場合の動作は、方式２を適用した場合にほぼ包含されるので、以下の説明では、方式２を適用した場合の動作に含める。
【００９４】
・・ＴＶ機能が選択された場合
まず、本具体例の説明において、ＴＶ機能が選択された場合の動作について、以下に図面を用いて説明する。ただし、ＴＶ機能とは、ＴＶのチャンネルを選択するための機能である。
【００９５】
図１２を参照すると、本動作では、まず、ユーザより触覚呈示制御装置１’の機能選択スイッチ群１ａにおいて、ＴＶ機能を指定するスイッチ“ＴＶ”が押下・選択される（ステップＳ１のＴＶ）。
【００９６】
このように、図９の触覚呈示制御装置１’において、機能選択スイッチ群１ａから“ＴＶ（ＴＶ機能を選択するスイッチ）”が選択された場合、本発明による触覚呈示制御装置１’は、ＴＶ機能を実行する（ステップＳ２）。この実行にあたり、制御Ｉ／Ｏ部７が、触覚呈示制御装置１’から入力されたＴＶ機能の実行のコマンドから触覚呈示制御装置１’をＴＶチャンネルのリモートコントローラとして機能させるためのコマンドコードを特定し、これを触覚呈示コード変換バッファ部５へ出力する。これに対し、触覚呈示コード変換バッファ部５は、コマンドコードよりユーザに呈示するチャンネルをあらかじめ格納しているテーブルより特定し、これを触覚呈示データ選択出力部６へ出力する。また、触覚呈示データ選択出力部６は、触覚呈示コード変換バッファ部５より入力されたデータに基づいて、触覚呈示制御装置１’におけるスイッチを駆動し、ユーザへＴＶのチャンネル番号を呈示する。ただし、たとえばチャンネルが１ｃｈから１２ｃｈまで存在し、この中で、５ｃｈ等、番組が放送されていないチャンネルが存在する場合、この番組が放送されていないチャンネルをユーザに呈示しないよう凸表示されない構成とすることも可能である。これは、触覚呈示コード変換バッファ部５におけるコード変換テーブルにおいて、番組が存在しないチャンネルを凸表示しないように構成することで解決される。
【００９７】
このような動作を経ることで、ＴＶのチャンネルは、図１１の（１）に示すように、触覚呈示制御装置１’のＣＨ／項目スイッチ群ＳＷ１〜ＳＷ１２に割り当てられ、触覚アレイ初期設定として表示される（ステップＳ５）。ただし、この段階にでは、方式１による触覚呈示制御装置１’も同様な配置で凸表示される。
【００９８】
また、このように、触覚呈示制御装置１’にＴＶ機能における初期状態が呈示されると、ユーザにより、この呈示されたチャンネル中におけるいずれかのチャンネル、もしくはＥＳＣキーが押下される（ステップＳ６）。ここで、ユーザよりチャンネルのスイッチのいずれかが押下された場合（ステップＳ６のＣＨ）、制御Ｉ／Ｏ部７は、この入力を検出し、次いで入力されたチャンネルに対応するコードをＣＨ選択部１６へ出力する（ステップＳ７）。これに対して、ＥＳＣキーが押下された場合（ステップＳ６のＥＳＣ）、ステップＳ１に帰還し、ユーザより機能が選択されるのを待機する。
【００９９】
また、入力されたチャンネルに対して、本実施形態の動作としては、以下に示す２つの方法が考えられる。ひとつは、図１２のフローチャートにおけるａのように、所望のチャンネルのスイッチが押下されることにより（ステップＳ６のＣＨ）、スイッチに割り当てられたコードが制御Ｉ／Ｏ部７で検知され（ステップＳ７）、ＣＨ選択部１６を介し、直接ＩＳＤＢ受信部１７のチャンネルが制御される（ステップＳ１２）よう構成する方法である。また、他のひとつは、図１２のフローチャートにおけるｂのように、制御Ｉ／Ｏ部７で検知されたコードがコマンド変換選択制御部８に入力され、コマンド変換選択制御部８でチャンネル選択のためのコマンドコード（以下、チャンネル選択コマンドコードという）に変換される（ステップＳ７）よう構成する方法である。
【０１００】
後者の方法では、チャンネル選択コマンドコードが、階層・表呈示変換バッファ部４に入力され、ここでチャンネルを示す選択オブジェクトが指定される。また、指定された選択オブジェクトの内容は、テキストデータ出力部１０でテキストデータとして抽出され、点字出力装置１１、および／もしくは音声合成装置１２により点字および／もしくは音声で出力される（ステップＳ８）。ただし、上記のテキストデータとしては、選択されたチャンネルを示す番号や、対応するＴＶ会社名や、現在放送されている番組の番組名および番組内容（サブタイトル、出演者、放送時間等の内容）等が挙げられる。
【０１０１】
このように出力されたテキストデータを確認した後、ユーザが決定キー（ＣＲ）を押下すると（ステップＳ９のＣＲ）、これが制御Ｉ／Ｏ部７で検知され（ステップＳ１０）、ＣＨ選択部１６においてＩＳＤＢ受信部１７の受信チャンネルが制御され（ステップＳ１１）、ステップＳ６に帰還する。これに対して、ユーザよりＥＳＣキーが押下されると（ステップＳ９のＥＳＣ）、選択された内容を破棄し（ステップＳ１３）、ステップＳ６に帰還する。
【０１０２】
・・データ放送機能が選択された場合
次に、本具体例の説明において、データ放送機能が選択された場合の動作について、以下に図面を用いて説明する。ただし、データ放送機能とは、ディジタルデータ放送により提供される機能のことである。また、本具体例では、図５に示す階層構造を適用する。
【０１０３】
図１２および図１３を参照すると、図９に示す触覚呈示制御装置１’において機能選択スイッチ群１ａからデータ放送（ＤＴ）が選択されると（ステップＳ１のＤＴ）、図５に例示した階層構造では、図１１の（２）のように、第１階層で表されるメニュー画面が、触覚アレイ初期設定として、触覚呈示制御装置１’において表示される（図１３のステップＳ２１）。
【０１０４】
つぎに、ユーザよりＥＳＣキーもしくはＵＰキーが入力された場合（ステップＳ２２のＹｅｓ）、階層・表呈示変換バッファ部４では、現在よりも上位の階層が存在するか否かを判定し（ステップＳ２８）、この判定において、さらに上位の階層が存在しない場合（ステップＳ２８のＮｏ）、ステップＳ１に帰還し、機能が選択されるのを待機する。これに対して、現在よりも上位の階層が存在する場合（ステップＳ２８のＹｅｓ）、ステップＳ２９に移行する。
【０１０５】
また、ステップＳ２２においてＥＳＣキーおよびＵＰキーが押下されず（ステップＳ２２のＮｏ）、階層移動キーもしくはＣＲキーもしくはＤＮキーが押下された場合（ステップＳ２３のＹｅｓ）、ステップＳ２９に移行する。ただし、ここでいう階層移動キーとは、図９の触覚呈示制御装置１’における階層制御スイッチ群１ｇに含まれるスイッチである。
【０１０６】
また、ステップＳ２２においてＥＳＣキーおよびＵＰキーが押下されず（ステップＳ２２のＮｏ）、かつ、ステップＳ２３において階層移動キーおよびＣＲキーおよびＤＮキーが押下されず（ステップＳ２３のＮｏ）、ＣＨ／項目スイッチ群１ｄにおいて選択オブジェクトに対応するスイッチのいずれかが押下された場合（ステップＳ２４のＹｅｓ）、割り当てられたスイッチのコードが制御Ｉ／Ｏ部７にて検出され、コマンド変換選択制御部８にて、押下された選択オブジェクトを選択するコマンドコードに変換され、階層・表呈示変換バッファ部４にて、コマンドコードに該当する選択オブジェクトが選択される（ステップＳ２５）。
【０１０７】
その後、ステップＳ２５にて指定された選択オブジェクトのテキストデータは、テキストデータ出力部１０に送出され、点字出力装置１１および音声合成装置１２に内容が出力される（ステップＳ２６）。このとき、触覚呈示コード変換バッファ部５では、データ変換を行わない。すなわち、ステップＳ２４からステップＳ２６の流れでは、階層が移動されるのでなく、階層を移動するにあたり、ユーザに確認のためのコメントが通知される。
【０１０８】
また、画面表示制御部１５では、選択された選択オブジェクトをハイライトするなど画面表示が制御される（ステップＳ２７）。
【０１０９】
一方、ステップＳ２４からステップＳ２７によりスイッチを押下し内容を確認した後、ステップＳ２２に帰還し、たとえば、引続き決定キー（ＣＲキー）が押下された場合（ステップＳ２３のＹｅｓ）、には、コマンド変換選択制御部８にて、選択決定のコマンドコードが生成され、階層・表呈示変換バッファ部４にて、選択された選択オブジェクトが存在する下位階層の表示データが指定され（ステップＳ３０）、触覚呈示コード変換バッファ部５にて触覚呈示制御装置１’に表示するデータが更新され、新たな階層の状態が出力される（ステップＳ３３）。同時に画面選択制御部１５により画面表示も下位階層に更新される（ステップＳ３４）。
【０１１０】
このとき、更新される前と現時の階層および選択オブジェクトの情報は、コマンド変換選択制御部８にメモリされ、次にスイッチが押下されたときのコマンド変換の遷移情報として保存される（ステップＳ３１）。また、前述の、ＣＲキーのほか、移動制御スイッチ群１ｆのＵＰ，ＤＮキー、あるいは選択制御スイッチ群で前の状態に戻るＥＳＣキーなど、階層移動を伴うスイッチが押下された場合にも同様な動作が行われる。
【０１１１】
このように、視覚障害者は、触覚呈示制御装置１’のスイッチを触れることによって、現在画面上に表示されてるＩＳＤＢメニュー画面の選択オブジェクト項目の数や階層の位置を短時間で確認することができ、選択オブジェクトを表すスイッチを押下することで、項目の内容を知ることができ、さらに確認した内容を選択したいときには、制御キー（ＣＲ）を押下することで下位階層の選択オブジェクト項目を上記同様知ることができる。
【０１１２】
従って、短時間に階層概念を理解しながら、情報にアクセスすることが可能である。
・ＥＰＧ機能が選択された場合
次に、本具体例の説明において、ＥＰＧ機能が選択された場合の動作について、以下に図面を用いて説明する。ただし、ＥＰＧ機能とは、表形式で作成された電子番組表により提供される機能である。ただし、本実施形態では、この具体例に適用する表形式のデータを用いた機能をＥＰＧに限定する必要がなく、たとえばデータ放送等により提供された表形式のデータによる機能を含ませることは可能である。以下の説明では、説明の簡略化のため、表形式のデータをすべてＥＰＧとして説明する。
【０１１３】
また、以下の説明において、ＩＳＤＢなど、表形式のデータはそれぞれのセルが行と列との位置情報を有していると仮定する。
【０１１４】
図９において、データ出力部１８、および選択オブジェクト属性データ抽出部３で各セルの情報（以下、セル情報という）が抽出される。このとき、前述の図３で示したように、それぞれのセルは位置情報に対応して行列の配列にメモリされる。
【０１１５】
このような構成において、触覚呈示制御装置１’の機能選択スイッチ群１ａにより、ＥＰＧが選択された場合（図１２のステップＳ１のＥＰＧ）には、図１１の（３）に示すように、列を示すＮ１〜Ｎ４、行を示すＶ７〜Ｖ９、および各セルを表すＳＷ１〜ＳＷ１２が触覚呈示制御装置１’に凸により呈示される（図１４のステップＳ４１）。
【０１１６】
この状態において、まず、ＥＳＣキーが押下されたとき（ステップＳ４２のＹｅｓ）、ステップＳ４９へ移行する。また、ＥＳＣキーが押下されず（ステップＳ４２のＮｏ）、行列を移動させる指示が入力された場合（ステップＳ４３のＹｅｓ）、ステップＳ４７へ移行する。
【０１１７】
さらに、ＥＳＣキーが押下されず（ステップＳ４２のＮｏ）、行例を移動させる指示が入力されず（ステップＳ４３のＮｏ）、各項目を示す（各セルに対応する）ＣＨ／項目スイッチ群１ｇのいずれかのスイッチが押下された場合（ステップＳ４４のＹｅｓ）、前記した階層表示の場合と同様に、押下されたスイッチのコマンドが制御Ｉ／Ｏ部７に送出され、コマンド変換選択制御部８で選択すべきセルの行列位置を指定するコマンドコードに変換され、その後、コマンドコードを基に、階層・表呈示変換バッファ部４より該当するセルの内容のテキストデータを読み込み、点字出力装置１１および／もしくは音声合成装置１２により点字および／もしくは音声で出力する（ステップＳ４５）。
【０１１８】
また、触覚呈示制御装置１’の移動制御スイッチ群１ｆによる動作は、基本的な原理を図３で示した動作と同じとする。即ち、初期状態でＳＷ１に対応するセルの行列位置情報（Ａ１１）がメモリされる。次に、制御スイッチ１ｆで行／列移動のスイッチが押下された場合（ステップＳ４３）、スイッチＳＷ１を基準として、移動した行と列とのセルが新たに割り当てられる。また、変更前のスイッチＳＷ１に対応する表のセルと変換後のセルとの位置を表す情報がコマンド変換選択制御部８に記憶される（ステップＳ４７）。したがって、触覚呈示制御装置１’には、これらの情報と移動制御スイッチの情報とから、図３の（３）に示した位置関係の式をもとに移動後の情報を持ったセルに対応してスイッチが表示される（ステップＳ４８）。
【０１１９】
また、ステップＳ４２において、ＥＳＣキーが入力された場合（ステップＳ４２のＹｅｓ）、コマンド変換選択制御部８で、スイッチ押下前のスイッチＳＷ１に対応するセルの位置（移動指示まえの状態の位置）に変換し（ステップＳ４９）、選択前のデータを呈示する（ステップＳ５０）。さらに、画面選択制御部１５を介し、画面モニタには触覚呈示制御装置に表示された部分をハイライトなどで強調して表示する（ステップＳ４６）。
【０１２０】
このように、たとえば表形式が番組表の場合には、時間が縦軸、放送局が横軸で表され、Ｎ１〜Ｎ４を押下することにより、時間情報を、Ｖ７〜Ｖ９を押下することで、放送局の譲歩が得られ、かつ行と列との交差するスイッチを押下することで、所望の時間および放送局の番組情報を得ることができる。
【０１２１】
また、本方式２によれば、ユーザは手の位置を大きく動かすことなく適切な面積に配置されたこれらのスイッチにより、効率的に表の内容の探索が可能であり、行列の内容を確かめながら、２次元的な探索に近い方法で情報を得ることができる。
【０１２２】
以上、ＩＳＤＢの機能別に本発明の実施例を説明したが、Ｖ１〜Ｖ９は、適宜設定可能なスイッチであり、チャンネルやメインとなるメニュー画面の選択オブジェクトを登録することができる。
【０１２３】
また、これらのスイッチの表面性を変化することにより、触覚のテクスチャ判別による効率的なチャンネルや選択オブジェクトの選択をすることも可能である。
【０１２４】
〔他の実施形態〕
以上の各実施形態では、本発明の触覚呈示制御装置によるデータへのアクセスの方式を説明した。上記各実施形態では、ＩＳＤＢのメニュー画面への適用を示したが、コンピュータにおける階層表示やアイコン、表形式の表示には適用することも可能である。また、触覚呈示には、実呈示型の方式を示したが、オブジェクトの選択機能を有するバーチャルリアリティなどの仮想的な触覚呈示装置や２次元触覚ディスプレイにも本発明による情報アクセスや呈示方式を適用することができる。
【０１２５】
このように、本発明では、選択オブジェクトを選択するスイッチを有し、スイッチは可能機構を有し、選択入力機構とともに触覚へ階層などの情報呈示機能を兼ねることを特徴としている。また、スイッチの配列は行と列とで構成され、行と列と、あるいはスイッチの配列によって選択オブジェクトの項目数や階層を表すことを特徴としている。
【０１２６】
これにより、本発明は、ＩＳＤＢのメニュー画面など視覚的な選択オブジェクトをリモコンのようなスイッチで容易に入力選択させることが可能となり、選択オブジェクトの種類や数、内容、および階層構造を容易に理解させる呈示方法を提供し、番組などの情報に迅速にアクセスできるインタフェース方法を提供することが可能となる。
【０１２７】
【発明の効果】
以上、説明したように、本発明の触覚呈示制御装置および触覚呈示制御方法によれば、ＩＳＤＢのメニュー画面などのＧＵＩ環境において、選択オブジェクトの種類や数、階層構造やＥＰＧのような表形式の情報が、上下可動機構を有するスイッチの表示される配列により、２次元的にやさしく理解できる。さらに、呈示部は入力スイッチと機能とを共有しているので、選択オブジェクトを触覚で確認しながら、スイッチを押下すれば、それぞれの選択オブジェクトの内容は音声と点字とで確認することができる。
【０１２８】
従って、ユーザは所望の情報選択を、リモコンのように容易に選択でき、番組などの情報に迅速にアクセスできるインタフェースが期待できる。
【０１２９】
即ち、請求項１記載の発明によれば、階層構造または表構造のデータから選択オブジェクトを触覚で識別可能に呈示するスイッチを有し、前記スイッチは、前記データが階層構造である場合、階層構造における階層の位置情報を呈示する階層制御スイッチ群と、階層毎のオブジェクトを呈示する階層オブジェクトスイッチ群とを同一呈示面上における各々所定の領域に、前記階層制御スイッチ群を移動させずに前記階層オブジェクトスイッチ群が移動できるように呈示され、前記データが表構造である場合、表構造における行および列のタイトルを呈示する行列制御スイッチ群と、表構造におけるオブジェクトを呈示する表オブジェクトスイッチ群とを同一呈示面上に、前記行列制御スイッチ群を移動させずに前記表オブジェクトスイッチ群が移動できるように呈示され、前記階層制御スイッチ群又は前記行列制御スイッチ群のスイッチは、前記階層オブジェクトスイッチ群又は前記表オブジェクトスイッチ群のスイッチと触覚で識別可能に形成されることを特徴としているため、情報を２次元的に容易に理解させることが可能となる。また、階層を持つ情報や表形式の情報の構成を、容易に理解させることが可能となる。
【０１３１】
また、請求項２記載の発明によれば、さらに、データが階層構造である場合、階層制御スイッチ群と階層オブジェクトスイッチ群とが、触覚により区別されるよう構成され、データが表構造である場合、行列制御スイッチ群と表オブジェクトスイッチ群とが、触覚により区別されるよう構成されることを特徴としているため、触覚による各スイッチ群の識別を容易とすることが可能となる。
【０１３２】
また、請求項３記載の発明によれば、さらに、階層オブジェクトスイッチ群または表オブジェクトスイッチ群における所定の位置を示す基準となるボタンの位置は、触覚により他と区別されるよう構成されることを特徴としているため、触覚による各スイッチの位置の判別を容易とすることが可能となる。
【０１３３】
また、請求項４記載の発明によれば、現在の呈示状態において、押下時にスイッチから発生する固有のコードと、スイッチを用いて触覚で識別可能に呈示している選択オブジェクトと、を対応させて記憶する呈示選択オブジェクト記憶手段と、呈示選択オブジェクト記憶手段に記憶されている選択オブジェクトのリンク先の階層を記憶するリンク先記憶手段と、を有し、固有のコードと、呈示選択オブジェクト記憶手段において固有のコードに対応させて記憶されている選択オブジェクトと、リンク先記憶手段に記憶されている選択オブジェクトのリンク先の階層とに基づいて次に触覚で識別可能に呈示する階層を呈示することを特徴としているため、少ないスイッチ数で、多くの項目や階層構造、表構成を、２次元的に容易に理解させるよう呈示することが可能となる。
【０１３４】
また、請求項５記載の発明によれば、階層構造または表構造のデータから選択オブジェクトの属性情報を抽出する属性情報抽出工程と、該属性情報抽出工程において抽出された前記属性情報に基づいて前記選択オブジェクトにリンク情報を付加するリンク情報付加工程と、前記選択オブジェクトと該選択オブジェクトを触覚で識別可能に呈示しているスイッチの位置との対応を記憶する対応記憶工程とを有し、前記スイッチは、前記データが階層構造である場合には、階層構造における階層の位置情報を呈示する階層制御スイッチ群と、階層毎のオブジェクトを呈示する階層オブジェクトスイッチ群とを同一呈示面上における各々所定の領域に、前記階層制御スイッチ群を移動させずに前記階層オブジェクトスイッチ群が移動できるように呈示され、前記データが表構造である場合には、表構造における行および列のタイトルを呈示する行列制御スイッチ群と、表構造におけるオブジェクトを呈示する表オブジェクトスイッチ群とを同一呈示面上に、前記行列制御スイッチ群を移動させずに前記表オブジェクトスイッチ群が移動できるように呈示され、前記階層制御スイッチ群又は前記行列制御スイッチ群のスイッチは、前記階層オブジェクトスイッチ群又は前記表オブジェクトスイッチ群のスイッチと触覚で識別可能に形成され、前記スイッチの位置に対応して発生するコードを用いて、前記対応記憶工程において記憶された対応から選択オブジェクトを特定し、前記リンク情報付加工程において該選択オブジェクトに付加したリンク情報を特定することを特徴としているため、少ないスイッチ数で、多くの項目や階層構造、表構成を、２次元的に容易に理解させる方法による情報の呈示が可能となる。
【図面の簡単な説明】
【図１】本発明を実現する基本的な触覚呈示制御装置（方式１）の概念図である。
【図２】可動スイッチを電話あるいは電卓のテンキー配置で選択制御する触覚呈示制御装置（方式２）の概念図である。
【図３】電子番組表（ＥＰＧ）などの表形式の情報を触覚呈示制御装置の方式１により表示する方法を表す説明図である。
【図４】電子番組表（ＥＰＧ）などの表形式の情報を触覚呈示制御装置の方式２により表示する方法を表す説明図である。
【図５】（ａ）および（ｂ）はＩＳＤＢでサービスされるメニュー画面の項目と階層構造を模式的に表した説明図である。
【図６】本発明の触覚呈示制御装置の方式１により、ＧＵＩ環境の選択オブジェクトや階層構造を表す方法の説明図である。
【図７】本発明の触覚呈示制御装置の方式２により、ＧＵＩ環境の選択オブジェクトや階層構造を表す方法の説明図である。
【図８】本発明の第１の実施形態による触覚呈示制御装置１でＧＵＩ環境の選択オブジェクトや階層構造、表形式を表示する構成ブロック図である。
【図９】本発明の第２の実施形態による触覚呈示制御装置１’でＩＳＤＢのＴＶチャンネル選択やデータ放送のメニュー画面、ＥＰＧなどの表形式のデータにアクセスする方法の具体例を示す構成ブロック図である。
【図１０】本発明の第２の実施形態による触覚呈示制御装置１’の方式１でＴＶやＥＰＧ、データ放送の初期状態のメニュー画面表示例を示す図である。
【図１１】本発明の第２の実施形態による触覚呈示制御装置１’の方式２でＴＶやＥＰＧ、データ放送の初期状態のメニュー画面表示例を示す図である。
【図１２】本発明の第２の実施形態による触覚呈示制御装置１’によりＩＳＤＢの機能選択とＴＶチャンネル選択を説明するためのフローチャートである。
【図１３】本発明の第２の実施形態による触覚呈示制御装置１’によりＩＳＤＢのデータ放送のメニュー画面の選択オブジェクトへのアクセスと呈示方法とを説明するためのフローチャートである。
【図１４】本発明の第２の実施形態による触覚呈示制御装置１’によりＩＳＤＢのＥＰＧなどの表形式のセルデータへのアクセスと呈示方法とを説明するためのフローチャートである。
【符号の説明】
１、１’ 触覚呈示制御装置
１ａ 機能選択スイッチ群
１ｂ ＣＨ登録／見出しメニュー項目スイッチ群
１ｃ、１ｄ ＣＨ／項目スイッチ群
１ｅ 選択制御スイッチ群
１ｆ 移動制御スイッチ群
１ｇ 階層制御スイッチ群
２ ＧＵＩ画面選択オブジェクトデータ
３ 選択オブジェクト属性データ抽出部
４ 階層表示変換バッファ部
５ 触覚呈示コード変換バッファ部
６ 触覚呈示データ選択出力部
７ 制御Ｉ／Ｏ部
８ コマンド変換選択制御部
９ 画面表示モニタ
１０ テキストデータ出力
１１ 点字出力装置
１２ 音声合成装置
１５ 画面選択制御部
１６ ＣＨ選択部
１７ ＩＳＤＢ受信部
１８ データ出力部
１９ 画面表示変換部
Claims (5)
- 階層構造または表構造のデータから選択オブジェクトを触覚で識別可能に呈示するスイッチを有し、
前記スイッチは、
前記データが階層構造である場合、階層構造における階層の位置情報を呈示する階層制御スイッチ群と、階層毎のオブジェクトを呈示する階層オブジェクトスイッチ群とを同一呈示面上における各々所定の領域に、前記階層制御スイッチ群を移動させずに前記階層オブジェクトスイッチ群が移動できるように呈示され、
前記データが表構造である場合、表構造における行および列のタイトルを呈示する行列制御スイッチ群と、表構造におけるオブジェクトを呈示する表オブジェクトスイッチ群とを同一呈示面上に、前記行列制御スイッチ群を移動させずに前記表オブジェクトスイッチ群が移動できるように呈示され、
前記階層制御スイッチ群又は前記行列制御スイッチ群のスイッチは、前記階層オブジェクトスイッチ群又は前記表オブジェクトスイッチ群のスイッチと触覚で識別可能に形成されることを特徴とする触覚呈示制御装置。 - 前記データが階層構造である場合、前記階層制御スイッチ群と前記階層オブジェクトスイッチ群とが、触覚により区別されるよう構成され、前記データが表構造である場合、前記行列制御スイッチ群と前記表オブジェクトスイッチ群とが、触覚により区別されるよう構成されることを特徴とする請求項１記載の触覚呈示制御装置。
- 前記階層オブジェクトスイッチ群または前記表オブジェクトスイッチ群における所定の位置を示す基準となるボタンの位置は、触覚により他と区別されるよう構成されることを特徴とする請求項１または２記載の触覚呈示制御装置。
- 現在の呈示状態において、押下時にスイッチから発生する固有のコードと、該スイッチを用いて触覚で識別可能に呈示している選択オブジェクトと、を対応させて記憶する呈示選択オブジェクト記憶手段と、該呈示選択オブジェクト記憶手段に記憶されている選択オブジェクトのリンク先の階層を記憶するリンク先記憶手段と、を有し、前記固有のコードと、前記呈示選択オブジェクト記憶手段において該固有のコードに対応させて記憶されている選択オブジェクトと、前記リンク先記憶手段に記憶されている該選択オブジェクトのリンク先の階層と、に基づいて次に触覚で識別可能に呈示する階層を呈示することを特徴とする請求項１乃至３の何れか１項に記載の触覚呈示制御装置。
- 階層構造または表構造のデータから選択オブジェクトの属性情報を抽出する属性情報抽出工程と、
該属性情報抽出工程において抽出された前記属性情報に基づいて前記選択オブジェクトにリンク情報を付加するリンク情報付加工程と、
前記選択オブジェクトと該選択オブジェクトを触覚で識別可能に呈示しているスイッチの位置との対応を記憶する対応記憶工程とを有し、
前記スイッチは、
前記データが階層構造である場合には、階層構造における階層の位置情報を呈示する階層制御スイッチ群と、階層毎のオブジェクトを呈示する階層オブジェクトスイッチ群とを同一呈示面上における各々所定の領域に、前記階層制御スイッチ群を移動させずに前記階層オブジェクトスイッチ群が移動できるように呈示され、
前記データが表構造である場合には、表構造における行および列のタイトルを呈示する行列制御スイッチ群と、表構造におけるオブジェクトを呈示する表オブジェクトスイッチ群とを同一呈示面上に、前記行列制御スイッチ群を移動させずに前記表オブジェクトスイッチ群が移動できるように呈示され、
前記階層制御スイッチ群又は前記行列制御スイッチ群のスイッチは、前記階層オブジェクトスイッチ群又は前記表オブジェクトスイッチ群のスイッチと触覚で識別可能に形成され、
前記スイッチの位置に対応して発生するコードを用いて、前記対応記憶工程において記憶された対応から選択オブジェクトを特定し、前記リンク情報付加工程において該選択オブジェクトに付加したリンク情報を特定することを特徴とする触覚呈示制御方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2001114015A JP4263855B2 (ja) | 2001-04-12 | 2001-04-12 | 触覚呈示制御装置および触覚呈示制御方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2001114015A JP4263855B2 (ja) | 2001-04-12 | 2001-04-12 | 触覚呈示制御装置および触覚呈示制御方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2002312095A JP2002312095A (ja) | 2002-10-25 |
| JP4263855B2 true JP4263855B2 (ja) | 2009-05-13 |
Family
ID=18965159
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2001114015A Expired - Fee Related JP4263855B2 (ja) | 2001-04-12 | 2001-04-12 | 触覚呈示制御装置および触覚呈示制御方法 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP4263855B2 (ja) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US9579411B2 (en) | 2006-07-13 | 2017-02-28 | Kci Usa, Inc. | Hydrogel wound dressings exhibiting reduced fiber losses in use |
Families Citing this family (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP4594647B2 (ja) * | 2004-05-19 | 2010-12-08 | 日本放送協会 | 触覚呈示装置および触覚呈示制御装置 |
| JP2005331640A (ja) * | 2004-05-19 | 2005-12-02 | Nippon Hoso Kyokai <Nhk> | 出力呈示装置および出力呈示プログラム |
| JP4507994B2 (ja) * | 2005-06-14 | 2010-07-21 | 船井電機株式会社 | Ａｖネットワークシステム、及び同システムに含まれるディスプレイ機器側サブシステム |
| JP4503520B2 (ja) * | 2005-10-06 | 2010-07-14 | 株式会社エヌ・ティ・ティ・データ | 文書データ読み上げ装置及びそのコンピュータプログラム |
| US7890863B2 (en) | 2006-10-04 | 2011-02-15 | Immersion Corporation | Haptic effects with proximity sensing |
| JP5947523B2 (ja) * | 2011-11-10 | 2016-07-06 | 日本放送協会 | 表形式データ出力制御装置及び表形式データ出力制御プログラム |
| JP6167542B2 (ja) * | 2012-02-07 | 2017-07-26 | ヤマハ株式会社 | 電子装置及びプログラム |
| US9836124B2 (en) * | 2014-12-31 | 2017-12-05 | Harman International Industries, Incorporated | Techniques for dynamically changing tactile surfaces of a haptic controller to convey interactive system information |
-
2001
- 2001-04-12 JP JP2001114015A patent/JP4263855B2/ja not_active Expired - Fee Related
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US9579411B2 (en) | 2006-07-13 | 2017-02-28 | Kci Usa, Inc. | Hydrogel wound dressings exhibiting reduced fiber losses in use |
| US10758423B2 (en) | 2006-07-13 | 2020-09-01 | Kci Usa, Inc. | Hydrogel wound dressings exhibiting reduced fiber losses in use |
Also Published As
| Publication number | Publication date |
|---|---|
| JP2002312095A (ja) | 2002-10-25 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US7856603B2 (en) | Graphical user interface | |
| US7890862B2 (en) | Haptic key controlled data input | |
| US9030416B2 (en) | Data entry system and method of entering data | |
| US6073036A (en) | Mobile station with touch input having automatic symbol magnification function | |
| US9122318B2 (en) | Methods of and systems for reducing keyboard data entry errors | |
| EP1183590B1 (en) | Communication system and method | |
| US20020190946A1 (en) | Pointing method | |
| US20080297475A1 (en) | Input Device Having Multifunctional Keys | |
| US20020158779A1 (en) | Chinese language pinyin input method and device by numeric key pad | |
| US20100134416A1 (en) | System and method of tactile access and navigation for the visually impaired within a computer system | |
| CN101589425A (zh) | 将数据输入计算系统的系统和方法 | |
| JPH05134797A (ja) | ダイナミツク予測キーボード及びそのキーボードを操作する方法 | |
| KR100910759B1 (ko) | 전자기기에서의 사용자 인터페이스 제공 방법 및 그 장치 | |
| US20090195510A1 (en) | Ergonomic user interface for hand held devices | |
| KR20070091531A (ko) | 이동 핸드셋에서의 네비게이션 방법 및 그 이동 핸드셋 | |
| JP4263855B2 (ja) | 触覚呈示制御装置および触覚呈示制御方法 | |
| US20100234074A1 (en) | Keypad emulation | |
| US9250710B2 (en) | User interface for a hand held device | |
| US6377243B1 (en) | Data input device and the method thereof | |
| KR20150132896A (ko) | 터치패드로 구성된 리모컨과 그 작동 방법 | |
| KR101741662B1 (ko) | 디스플레이장치 및 그 제어방법 | |
| KR100762944B1 (ko) | 화면자판 편집기와 편집방법 | |
| JP4497717B2 (ja) | データ入力システム及びその方法、入力装置 | |
| KR100421362B1 (ko) | 셋톱박스의 문자 입력 장치 및 방법 | |
| KR100488042B1 (ko) | 리모콘 숫자키를 이용한 한글 입력방법 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20060324 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20080514 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20080617 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20080806 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20081024 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20081217 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20090120 |
|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20090213 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120220 Year of fee payment: 3 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130220 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140220 Year of fee payment: 5 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| LAPS | Cancellation because of no payment of annual fees |