JP3818061B2 - 視覚障害者用情報処理装置ならびに触覚入出力装置 - Google Patents

Description

技術分野
この発明は、レイアウト情報や階層構造を含んだ情報のレイアウトや階層構造を容易に認識しながらその情報を閲覧・修正したり、装置の動作状態を容易に認識しながら所定の機能を実行できる、視覚障害者用情報処理装置ならびにその装置に利用する触覚入出力装置に関する。
背景技術
視覚障害者のためにワードプロセッサにより作成した文書等をキートップなどの触覚ピンの配列で表現するとともに、そのキートップに接触することにより対応した文字を音声によって表示することで、レイアウトまで含めてテキストを確認できる技術として、特開平１０−２３２６００に示すものがある。（以下従来例Ａと称する。）また、グラフィカルユーザーインターフェースを備えるシステムを視覚障害者が使用するための技術として、特開平１０−６９２１８に示すものがある。（以下従来Ｂと称する。）
ところが、上記した従来例には、下記に述べるような問題があった。
１．従来例Ａでは、文章に含まれる文字数が多くなると、多数の表示ドット１ａが必要となり、触覚入出力装置が高価で大型になるという問題あった。
２．表示ドット１ａの操作は、対応した文字を音声で確認する操作しか行えないので、操作の態様に応じて閲覧する情報の種類を切換えるような使い方ができないという問題があった。
３．情報処理装置の機能は、画面に表示されるメニュー画面などで選択実行する。しかし、視覚障害者はその画面が見えないので、従来例Ｂでは、画面に出力されるウインドウや操作部品を複数の触覚ピン３を含む複数の触覚セル１を用いて表現している。しかし触覚セル１の配置は固定的であり、触覚セル１に対応している機能の親子関係などを表現できない。したがって階層的に構築されたプログラム機能の中から、利用者の所望の機能を選択して実行することはできないという問題があった。
４．従来の技術は、文字単位のレイアウト確認には有効であるが、文章全体のレイアウト構造をわかりやすく表示できないという問題がある。仮に表示ドット１ａを小型で安価に製作できてすべての文字を表示したとしても、図１１や図１２に示す「時候の挨拶」「宛先」「本文」のように、文章を構成する適当なまとまりの構造とそれらのレイアウトを直感的に認識することができないし、必要に応じて下位の構造を展開して閲覧することもできない。したがって、文章を分かり易く閲覧することができないという問題があった。
５．視覚障害者が、自分の意志で必要な情報を選択して閲覧できるためには、図書館のように複数の文書が階層的に分類されている中から、所望の文章を適切に選択できる方法が提案されなければならない。また、文章の所望の部分を簡単に指定して、その詳細を閲覧する方法が提案されなけらばならない。しかしながら、従来例Ａでは、１ないしは２の表示ドット１ａに１つの文字を対応付けて複数行の文字列のレイアウトを確認できる技術が開示されているのみであり、従来例Ｂは、プログラムのウインドウの構造を表現するための技術が開示されているのみであり、上記の課題は達成されていない。
６．表示状況に応じてキートップの設定状態を変えると効果的な場合がある。例えばそのキートップを操作すると他のキートップに表示が展開可能であることを示したり、他のキートップに展開表示されているか否かを示すために、キートップの設定状態を変えると効果的である。しかしながら、従来例ではこれができない。
７．従来例Ａでは、表を表示ドット１ａ表現する際に、文字と罫線を区別するために空白行を用いているが、この方式では多くの表示ドット１ａが必要になるという問題があった。
８．従来例では、表示ドット１ａや触覚ピン３の表示形態を確認しようと触るだけでテキストやウインドウ名称などの音声が発生するのでわずらわしいという問題があった。
９．従来例Ａでは、文章の内容を修正するには、ワードプロセッサソフトで文章を編集し直す必要があり操作が煩雑である。触覚ディスプレイで閲覧している文章の修正箇所を指定して修正情報を簡単に入力する方法が求められているが従来例ではそれができない。
１０．多数の触覚ピンで白黒写真をレリーフ状に表現するアイデアが従来から提案されているが、従来例Ａのように比較的少ない表示ドット１ａでは、写真の微細部分を表現するのは困難であるという問題があった。
１１．従来例Ｂには、ウインドウ内の部品の階層構造を触覚セル１内の触覚ピン３により表示する技術が開示されているが、階層構造を有する情報を入力して触覚ディスプレイで表示するための情報処理方法が示されておらず達成方法が不明であるという問題があった。
１２．従来例には、突出高さを独立して制御可能な表示ドット１ａや触覚ピン３の具体的な構成が示されていないが、突出量を個別に駆動制御するためには、多数のアクチエータと複雑な機構が必要になり、コスト高で装置が大きくなるという問題があって、装置の普及の妨げになっている。
本発明は上記に掲げた従来の問題を解決できる、視覚障害者用情報処理装置及び触覚入出力装置を提供することを目的としている。
発明の開示
上記の技術課題を達成するために、本発明の請求項１に記載の視覚障害者用情報処理装置は、各別に設定された所定の領域における指先での触覚動作に基づく識別状態を２以上の状態に設定可能であるとともにその所定の領域への操作を検出可能に構成された行方向と列方向の２次元マトリックス状に配置された複数の触覚操作手段と、前記所定の領域における操作に基づき所定の操作方法に対応した操作信号を抽出して出力する操作信号抽出手段と、２次元平面に展開可能なデータ構造を有する情報を複数のブロック単位情報で分割して記憶するとともに該ブロック単位情報と前記複数の触覚操作手段との対応関係を示す触覚操作手段対応関連情報を記憶する情報記憶手段と、前記情報記憶手段に所定の情報を設定する情報設定手段と、前記情報記憶手段の触覚操作手段対応関連情報を入力して前記触覚操作手段設定手段に触覚操作手段設定情報を供給する触覚操作手段設定情報供給手段と、触覚操作手段設定情報に基づき前記複数の触覚操作手段をそれぞれ所定の状態に設定する触覚操作手段設定手段と、音声関連情報を入力して音声を発生する音声発生手段と、前記操作信号を入力するとともに操作された触覚操作手段に対応したブロック単位情報を前記情報記憶手段から読み出して音声関連情報を抽出して前記音声発生手段に供給する音声関連情報供給手段と、前記操作信号を入力するとともに操作された触覚操作手段にもとづき前記情報記憶手段の内容を変更する情報変更手段とからなることを特徴としている。
このような構成にしたことにより、２次元平面に展開可能な構造を有する情報を視覚障害者が閲覧する際に、情報をブロック単位情報に分割して記憶するとともに、触覚入出力装置の触覚操作手段にそれらのブロック単位情報を対応付け、操作に係る触覚操作手段に関連付けられたブロック単位情報を音声で表示することができるので、限られた数の触覚操作手段しか備えられない触覚入出力装置でその触覚操作手段の数よりはるかに多くの文字を含んだ情報でも、効果的に閲覧できるという優れた効果がある。
また、本発明の請求項２に記載の発明は、請求項１に記載の視覚障害者用情報処理装置において、１つ以上の前記ブロック単位情報は、表示に関する情報である表示情報と、その表示情報に関する属性情報である属性情報とを含むとともに、前記操作信号抽出手段は、表示情報を閲覧するための操作に基づく表示閲覧信号と、属性情報を閲覧するための操作に基づく属性閲覧信号とを少なくとも抽出するとともに、前記音声関連情報供給手段は、前記表示閲覧信号を入力するとその触覚操作手段に関連つけられたブロック単位情報の表示情報に関連した音声を発生し、属性閲覧信号を入力するとその触覚操作手段に関連つけられたブロック単位情報の属性情報に関連した音声を発生することを特徴としている。
このような構成にしたことにより、操作された触覚操作手段に関連付けられているブロック単位情報の属性情報と表示情報を操作に対応して選択的に閲覧できるので、関心のある部分の属性情報を選択的に閲覧できる。したがって、いちいち全内容を閲覧しなくてもその情報の概要を効率よく閲覧できるという効果がある。特にその触覚操作手段が属するブロック単位情報に含まれる情報量として、ブロック単位情報に含まれる文字数や下位の階層に含まれるブロック単位情報の数を事前に把握するなどの応用が可能で、情報を効率的に閲覧できるという効果がある。
また、本発明の請求項３に記載の発明は、請求項１に記載の視覚障害者用情報処理装置において、前記２次元平面に展開可能なデータ構造を有する情報は複数の単位機能で構成される所定の装置の機能に関連する情報を含み、１つ以上の前記ブロック単位情報は、該単位機能の実行に関する単位機能情報と、単位機能の属性情報である属性情報とを含み、前記操作信号抽出手段は、単位機能を実行するための操作に基づく単位機能実行操作信号と属性情報を閲覧するための操作に基づく属性閲覧信号とを少なくとも抽出し、前記音声関連情報供給手段は属性閲覧信号を入力するとその触覚操作手段に関連つけられたブロック単位情報の属性情報に関連した音声を発生し、単位機能を実行する単位機能実行手段を備え、該単位機能実行手段は単位機能実行操作信号を入力するとその触覚操作手段に関連つけられたブロック単位情報に含まれる単位機能情報に基づいて単位機能を実行することを特徴としている。
このような構成にしたことにより、所定の装置の階層的に分類された複数の単位機能の概要を閲覧しながら、所望の単位機能を適切に選択して実行させることができるという効果がある。
また、本発明の請求項４に記載の発明は、請求項１から請求項３の何れかに記載の視覚障害者用情報処理装置において、前記ブロック単位情報は、１つのブロック単位情報が１つ以上の下位のブロック単位情報に関連付けられるように階層的に構成可能であるとともに、前記操作信号抽出手段は、操作された触覚操作手段に対応するブロック単位情報の下位の階層の情報を展開する操作に基づく下位階層展開信号を抽出可能であるとともに、前記情報変更手段は、前記下位階層展開信号を入力すると、操作された触覚操作手段に対応するブロック単位情報の下位の階層のブロック単位情報が新しく触覚操作手段に対応されるように、少なくとも前記触覚操作手段対応関連情報を変更することを特徴としている。
このような構成にしたことにより、所定の階層に属するブロック単位情報を選択して触覚操作手段に関連付けて表示できる。そのため、何階層にも及ぶ複雑な構造を有する情報も、認識しやすい表示形態の複数の画面で階層的に表示でき、複雑な情報も見通しよくわかりやすく閲覧できるという効果がある。
また、本発明の請求項５に記載の発明は、請求項４に記載の視覚障害者用情報処理装置において、前記触覚操作手段対応関連情報は、対応する階層に含まれる複数のブロック単位情報が表示ないしは印刷される際のレイアウトに対応して設定されていることを特徴としている。
このような構成にしたことにより、触覚操作手段の位置が、その触覚操作手段に関連しているブロック単位情報の内容が記載ないしは印刷される場所を示すので、その情報に含まれるレイアウトを触覚操作手段の配置で直感的に把握できるという効果がある。
また、本発明の請求項６に記載の発明は、請求項４に記載の視覚障害者用情報処理装置において、前記触覚操作手段対応関連情報は、触覚操作手段の配列の一方向の並びにはデータの階層構造の深さ方向が対応付けられ、それに直行する方向の並びには同一の階層に含まれるブロック単位情報の列挙方向が対応付けられていることを特徴としている。
このような構成にしたことにより、図書館の図書分類のうに、閲覧すべき文書データが階層的に分類されている場合に、それらの階層構造を２次元的に表現できるので、所望の文章を簡単に分かりやすく選択できるという効果がある。
また、本発明の請求項７に記載の発明は、請求項６に記載の視覚障害者用情報処理装置において、前記情報変更手段は、前記下位階層展開信号を入力すると、操作された触覚操作手段に対応するブロック単位情報の下位の階層の情報を、操作された触覚操作手段以外の触覚操作手段に対応付けるように、前記触覚操作手段対応関連情報を変更するように構成されていることを特徴としている。
このような構成にしたことにより、上位の階層の表示が維持されるので、新しく展開された階層の表示と、その上位の階層の表示の関係が理解しやすいという効果がある。
また、本発明の請求項８に記載の発明は、請求項４から請求項７の何れかに記載の視覚障害者用情報処理装置において、前記触覚操作手段が設定される識別状態は、少なくとも３以上の状態に設定可能であるとともに、少なくとも１つの識別状態は、所定の触覚操作手段が対応するブロック単位情報が下位の階層のブロック単位情報に関連して展開可能である旨またはすでに他の触覚操作手段によって展開表示されている旨を示すために使用されることを特徴としている。
このような構成にしたことにより、下位階層に対応付けられている触覚操作手段とそうでない触覚操作手段とを明確に識別できるという効果がある。
また、本発明の請求項９に記載の発明は、請求項８に記載の視覚障害者用情報処理装置において、前記触覚操作手段は、その触覚操作手段が対応するブロック単位情報が下位の階層のブロック単位情報に関連して展開可能である場合に、展開されていない状態と、すでに他の触覚操作手段によって展開表示されている旨を別の識別状態に設定可能であることを特徴としている。
このような構成にしたことにより、下位階層に展開されていることを前提としてその触覚操作手段を使用する場合に、すでに展開されているかそうでないかを、その触覚操作手段の設定状態によって示すことができるという効果がある。
また、本発明の請求項１０に記載の発明は、請求項１から請求項９の何れかに記載の視覚障害者用情報処理装置において、前記触覚操作手段は複数の群に分類されるとともに、前記音声関連情報供給手段は、属性情報に関連した音声を発生する際に、操作された触覚操作手段が属するグループとそれ以外のグループとを識別するために各ブロック単位情報に割り当てられた領域識別音を出力することを特徴としている。
このような構成にしたことにより、各ブロック単位情報が属する群が占めるレイアウト上の領域を、属性情報を聞くだけで正確に把握できるという効果がある。
また、本発明の請求項１１に記載の発明は、請求項１から請求項１０の何れかに記載の視覚障害者用情報処理装置において、前記触覚操作手段設定手段は、設定動作状況を音声で認識可能なように構成されていることを特徴としている。
このような構成にしたことにより、触覚操作手段の設定動作中を聴覚で確認できるので、表示が正しくない状態の際に表示を誤認したり誤操作しないように、警告が行えるという効果がある。
また、本発明の請求項１２に記載の発明は、請求項１から請求項１１の何れかに記載の視覚障害者用情報処理装置において、前記触覚操作手段は、所定の基準平面からの操作部の突出高さの状態で、複数の識別状態を構成することを特徴としている。
このような構成にしたことにより、触覚により直感的にその設定状態を識別できるし、設定状態を区別させるために高さ方向への変化で実現できるので、平面方向に見て少ないスペースで多数の設定状態を表現できるとという効果がある。
また、本発明の請求項１３に記載の発明は、請求項１から請求項１１の何れかに記載の視覚障害者用情報処理装置において、前記触覚操作手段は、各別に設定された所定の領域に設定された操作部への押下操作に基づき出力される音声の形態で、複数の識別状態を構成することを特徴としている。
このような構成にしたことにより、触覚操作手段を複数の設定状態に設定するために機械的な可動部材を必要とせず、単なるプッシュスイッチで構成でき、用途によっては安価な装置を製造できるという効果がある。
また、本発明の請求項１４に記載の発明は、請求項１から請求項１１の何れかに記載の視覚障害者用情報処理装置において、各別に設定された所定の領域に触れる指先に振動を伝達可能な振動手段を備え、前記触覚操作手段は、該振動手段の振動態様により複数の識別状態を構成することを特徴としている。
このような構成にしたことにより、識別状態を振動の態様で表現できるため、多数の触覚操作手段を備える装置を安価に製造できる可能性があるという効果がある。
また、本発明の請求項１５に記載の発明は、請求項１４に記載の視覚障害者用情報処理装置において、前記触覚操作手段は、各別に設定された所定の領域に指先が接近したことを検出する指先検出手段を含み、前記振動手段は、該記指先検出手段が指先の接近を検出することに基づき前記振動動作を行うことを特徴としている。
このような構成にしたことにより、触覚操作手段毎に振動手段を配設させた場合には振動させる必要がある振動手段を少なくできるので消費電力が少なく振動に伴う騒音が少ないという効果がある。また、複数の触覚操作手段を共通に振動させる振動手段を設け、触覚している触覚操作手段に設定されている識別状態に対応した振動態様で駆動させる構成を採用することで、少ない振動手段で構成することが可能になるという効果がある。
また、本発明の請求項１６に記載の発明は、請求項１から請求項１１の何れかに記載の視覚障害者用情報処理装置において、前記触覚操作手段は、各別に設定された所定の領域に配設された触覚で認知可能な突起などの触覚部と、該触覚部の近傍に指先が接近したことを検出する指先検出手段とを含み、該記指先検出手段が指先の近接を検出することに基づき出力される音声の形態で、複数の識別状態を構成することを特徴としている。
このような構成にしたことにより、触覚操作手段の触覚動作に基づく発音により設定されている識別状態を識別でき、機械的な可動部材を必要とせず、安価な装置を製造できるという効果がある。
また、本発明の請求項１７に記載の発明は、請求項１から請求項１６の何れかに記載の視覚障害者用情報処理装置において、前記触覚操作手段は、各別に設定された所定の領域内の指先の押下操作を検出するように構成されていることを特徴としている。
このように構成したことにより、触覚操作手段の設定状態を確認するための触覚操作だけで対応付けられた情報に関する音声が再生されてしまうという不都合がないので、レイアウトの確認に集中できる上に、触覚して確認できた触覚操作手段から指を離さなくてもそのまま押すだけで操作を入力できるので使いやすいという効果がある。
また、本発明の請求項１８に記載の発明は、請求項１から請求項１７の何れかに記載の視覚障害者用情報処理装置において、操作された触覚操作手段の位置に応じて、複数の触覚操作手段の設定動作の順序を変更することを特徴としている。
このような構成にしたことにより、操作された触覚操作手段の設定変更を後回しにして、触覚操作手段の設定動作に影響を与える不安定な状態をやりすごすことができるという効果がある。
また、本発明の請求項１９に記載の発明は、請求項１から請求項１８の何れかに記載の視覚障害者用情報処理装置において、前記触覚操作手段は、各別に設定された所定の領域内の指先の存在を検出する指先検出手段を含み、該領域外に設定された領域での補助入力操作を検出する補助操作手段が設けられ、前記操作信号抽出手段は、指先検出手段の検出結果と補助操作手段からの補助入力操作に基づき、所定の操作方法に対応した操作信号を抽出して出力するように構成されていることを特徴としている。
このような構成にしたことにより、複数の操作態様を検出するための検出装置が触覚操作手段毎に必要なくなり、装置を簡潔に構成できるという効果がある。
また、本発明の請求項２０に記載の発明は、請求項１から請求項１９の何れかに記載の視覚障害者用情報処理装置において、更新情報を入力する更新情報入力手段を備えるとともに、前記情報変更手段は、操作された触覚操作手段にもとづきその触覚操作手段に関連した前記情報記憶手段の記憶内容を該更新情報入力手段から入力した情報に基づき変更することを特徴としている。
このような構成にしたことにより、修正したい部分を簡単に指示しながら、その内容を修正できるという効果がある。
また、本発明の請求項２１に記載の発明は、請求項２０に記載の視覚障害者用情報処理装置において、前記更新情報入力手段は、マイクから入力した音声信号からテキスト情報を抽出する音声入力手段を備えていることを特徴としている。
このような構成にしたことにより、修正する情報を音声で入力できるので、触覚入出力装置から手を離さずに情報が入力できて使いやすいという効果がある。
また、本発明の請求項２２に記載の発明は、請求項１から請求項２１の何れかに記載の視覚障害者用情報処理装置において、装置の使用時間情報を積算する使用時間積算手段を備え、積算時間情報に基づき装置の保守作業を指示する動作を起動することを特徴としている。
このような構成にしたことにより、装置の外観を視覚で確認できない視覚障害者でも、装置の清掃など、適切なタイミングで保守作業が行えるという効果がある。
また、本発明の請求項２３に記載の発明は、請求項１から請求項２２の何れかに記載の視覚障害者用情報処理装置において、前記情報設定手段または前記情報変更手段は、２次元平面に展開可能なデータ構造を有する情報を入力する情報入力手段と、入力した情報に含まれる構造記述子に基づき情報を複数のグループに分割するグループ分割手段と、前記複数のグループ間に親子関係がある場合にその階層構造を抽出する階層構造抽出手段と、前記グループに含まれる情報が表示または印刷の際に領域を占める場合にその領域に関する情報を求めるグループ領域抽出手段と、グループ領域抽出手段と前記階層構造抽出手段の抽出結果に基づいて、前記複数のグループといずれかの階層の表示状態で使われる少なくとも１以上の触覚操作手段との対応関係を設定するマッピング手段とを備え、前記グループに含まれる情報ならびに前記マッピング手段で設定された情報に基づき前記ブロック単位情報ならびに対応関連情報を設定することを特徴としている。
このような構成にしたことにより、閲覧したい情報があらかじめ記憶手段にブロック単位情報として記憶されていなくても、必要に応じ、２次元平面に展開可能な構造に着目してグループに分割され、階層構造やグループの領域情報を考慮しながらマッピング手段が触覚操作手段に関連付け、ブロック単位情報が設定されるので、すでに外部に存在する２次元平面に展開可能なデータ構造を有する情報を効率よく閲覧できるという効果がある。
また、本発明の請求項２４に記載の触覚入出力装置は、１つの駆動モーターで複数の昇降式キートップを選択的に駆動するために駆動力の伝達経路の途中に機械的なクラッチ機構を含めるような構成を含む触覚入出力装置において、フレームと、モーター取り付けフレームと、前記モーター取り付けフレームに固定された複数の駆動モーターと、駆動モーター制御手段と、前記駆動モーターの出力軸に取り付けられた駆動力出力部と、操作入力部を有した昇降式キートップ、前記駆動力出力部と連結して駆動力を入力し前記昇降式キートップを昇降させる昇降式キートップ昇降手段、昇降式キートップを触覚する指先の押下操作を検出する操作検出手段で構成され、前記駆動モーター１つに対してそれぞれ複数フレームに配置されたキーユニットと、前記フレームと前記モーター取り付けフレームとを回転を伴わない平行方向に相対的に駆動して、前記駆動モーターに対応してフレームに配置された複数のキーユニットの中の任意のキーユニットの昇降式キートップ昇降手段に、該駆動モーターの駆動力出力部を連結させる位置決め駆動手段と、から構成されていることを特徴としている。
このように構成したことにより、位置決め駆動手段が、フレームとモーター取り付けフレームとを相対的に移動駆動して、複数の駆動モーターそれぞれに対応した複数のキーユニットの任意のキーユニットのキートップ昇降手段に駆動モーターの駆動力出力部を連結させるので、キーユトップの数より少ない数の駆動モーターで装置に備わる任意の位置のキートップを昇降制御できるという効果がある上、従来の装置のように駆動力を伝達するのにラックのような中間部材を必要とせず、部品数が少なく、機械的にも簡易な構成で信頼性が高いという効果がある。
また、位置決め駆動手段は、モーター取り付けフレームをフレームに対して相対的に移動させる機構のみで実現できるので、従来のように列毎に配置させたクラッチ機構を必要とせず、部品数が少なく、機械的にも簡易な構成で信頼性が高いという効果がある。
また、フレームとモーター取り付けフレームは、回転を伴わない平行方向に相対的に駆動されるので、複数の駆動モーターをモーター取り付けフレームへ適切な位置に固定しておけば、複数の駆動モーターにおける連結動作が、同時にかつ正確に行うことができるという効果がある。
また、本発明の請求項２５に記載の発明は、請求項２４に記載の触覚入出力装置において、前記キーユニットは、対応した駆動モーターの駆動力出力部を中心とした四角形の頂点に配置されていることを特徴としている。
このような構成にしたことにより、駆動力出力部が位置決め駆動手段の作用によりキートップ昇降手段に回転駆動力を直接伝達できるため、従来のように回転駆動力をラックなどで列方向に伝達する手段が不用であり、部品数が少なく、機械的にも簡易な構成で信頼性が高いという効果がある。
また、４つのキーユニットに１つの駆動モーターを必要とするだけであるとともにそれらがキーユニットの配置ピッチの倍のピッチで配置できるので、多少直径の大きい駆動モーターを使用しても、キーユニットの配置ピッチを狭くすることができ、特に縦横のピッチを等しくして正方形の頂点にキーユニットが配置される場合は、正方形の中心に駆動モーターを配置すると、一般に駆動モーターは円形なので、前後左右の隙間のバランスがよく駆動モーターを効率的に配置できるという効果がある。
また、本発明の請求項２６に記載の発明は、請求項２４または請求項２５に記載の触覚入出力装置において、前記駆動モーターはパルスモーターであり、前記駆動力出力部は該駆動モーターの回転出力軸に固着された駆動歯車であり、前記昇降式キートップ昇降手段は該駆動歯車に噛合して回転駆動される被駆動歯車で構成され、前記キーユニットは、前記被駆動歯車と前記被駆動歯車が正常に噛合する第１の取り付け状態と、前記被駆動歯車と前記被駆動歯車の歯先の当接を吸収するためにフレームに対して変位した第２の取り付け状態との２つの状態を取り得るとともに、該第２の取り付け位置から弾性体の付勢力により該第１の取り付け位置へ復元させるように構成されていることを特徴としている。
このような構成にしたことにより、駆動力が歯車により同期伝達できるとともに、歯車の噛合が解除されているときに何らかの原因で被駆動歯車が盲動して被駆動歯車歯先どうしが当たる状況になっても、第２の取り付け位置に退避でき、かつ歯先どうしが当たらない状態になれば、弾性体により第１の取り付け位置に復帰されるので、歯先が破壊されないし、歯車の同期伝達が維持されるという効果がある。
また、本発明の請求項２７に記載の発明は、請求項２６に記載の触覚入出力装置において、前記昇降式キートップは、その上部が前記フレームに形成されたガイド孔により上下方向に摺動可能にガイドされその下部は前記昇降式キートップ昇降手段に連結されるとともに、前記被駆動歯車の水平方向への退避動作に伴い該ガイド孔にガイドされた部分を中心に揺動するように構成されていることを特徴としている。
このような構成にしたことにより、請求項２６の構成を実現する上で、被駆動歯車がフレームに対して退避のために移動しても、昇降式キートップの上部を中心に僅かに揺動するだけで吸収でき、構成が簡潔にできるという効果がある。
また、本発明の請求項２８に記載の発明は、請求項２５から請求項２７の何れかに記載の触覚入出力装置において、前記昇降式キートップは上部に押下操作を入力する部分が形成され、前記昇降式キートップと前記昇降式キートップ昇降手段は、ねじ結合またはカム接触により連結されて前記昇降式キートップ昇降手段の回転に伴い前記昇降式キートップが前記昇降式キートップ昇降手段に対して上下方向に昇降するように構成され、昇降式キートップ昇降手段の一部は、前記操作検出手段に接触して下側から支持され、前記昇降式キートップに入力された押下操作が昇降式キートップ昇降手段を介して操作検出手段により検出されるように構成されていることを特徴としている。
このような構成にしたことにより、操作検出手段は、昇降式キートップの昇降高さの基準を提供するとともに、昇降式キートップに入力された押下操作を検出する機能を提供できるという効果がある。
また、本発明の請求項２９に記載の発明は、請求項２８に記載の触覚入出力装置において、前記昇降式キートップ昇降手段は前記フレームに対して上方への移動を規制されているとともに、前記昇降式キートップと前記昇降式キートップ昇降手段は、前記昇降式キートップが降下して昇降式キートップ昇降手段に対する基準高さに達するのに伴い前記昇降式キートップ昇降手段の下面で前記操作検出手段と接触する部分で前記操作検出手段を押下する原点押下手段が突出するように構成され、該原点押下手段が前記操作検出手段を押下したことを検出することで前記昇降式キートップの昇降式キートップ昇降手段に対する基準高さを検出するように構成されていることを特徴としている。
このような構成にしたことにより、操作検出手段が昇降式キートップ昇降手段の作動に必要な基準位置を検出する手段を兼ねて、部品点数が減少し、装置の小型化が可能になるという効果がある。
また、本発明の請求項３０に記載の発明は、請求項１から請求項２３の何れかに記載の視覚障害者用情報処理装置において、少なくとも前記情報記憶手段に含まれる対応情報を含んだ情報であって、利用者の操作の履歴が反映された装置の状態を再現可能な状態情報を不揮発性の記憶手段に記憶する状態情報記憶手段と、記憶された状態情報を読み込んで装置の状態を再現する状態情報読込手段とを備えることを特徴としている。
このような構成にしたことにより、情報を閲覧するために利用者が行った操作に基づいて変化した装置の状態を容易に再現できるという効果がある。
発明を実施するための最良の形態
本発明をより詳細に説述するために、添付の図面に従ってこれを説明する。
図１は本発明のクレーム構成図であり、図２は本発明の視覚障害者用情報処理装置の構成を示すブロック構成図である。
図２において、触覚入出力装置１００は、視覚障害者が触覚で情報のレイアウトを閲覧したり入力操作を行うための触覚入出力装置であり、信号ケーブル１ａを介してパソコン２００に接続されている。パソコン２００は、内蔵する制御プログラムに基づき動作し、ワードプロセッサなどで作成された文章や表のデータを、交換可能な記録媒体であるフロッピーディスク（以下ＦＤと称す。）から入力するとともに、後述する動作内容にしたがって所定の処理を行うように構成されている。情報は、インターネットのサーバーからモデム２０６を利用して入力してもよい。
また、音声合成回路２０８は音声を合成して、ヘッドフォン型のスピーカー３００に出力する。このスピーカー３００は、音場表現に優れた４チャンネルスピーカーであり、左前スピーカー３００ａと左後スピーカー３００ｂが使用者の左耳に、右前スピーカー３００ｃと右後スピーカー３００ｄが使用者の右耳になるように配置されている。また、スピーカー３００にはマイク４００が取り付けられていて、信号線により音声入力回路２０９に接続されている。
次に、触覚入出力装置の第１の実施例を説明する前に、本出願人により平成１０年９月２２日に日本国特許庁へ出願された、特願平１０−２６８８０５（本出願の優先権主張に係る出願の一つである）に記載の触覚入出力装置（以下従来例と称する）の特徴と問題を簡単に説明する。
上記明細書の記載から明らかなように、従来例の特徴は、１個のパルスモーターにより列方向に直線的に駆動されるラックに沿って複数のキートップを配置し、任意のキートップのクラッチギアがラックに噛み合い可能にすることで、１つのパルスモーターで複数のキートップの高さ方向の駆動を可能にするとともに、複数のクラッチギアのラックへの噛み合いを、クラッチ板とソレノイドからなる切換機構で行っていることにある。
また、行方向にパルスモーター及びラックをそれぞれ複数配置し、同一の列に含まれるキートップに同時に切換機構が作用するようにクラッチ板を配置・構成することで、Ｎ行ｘＭ列の昇降式キートップを、Ｎ個のパルスモーターとＭ個のソレノイドの共同動作により、それぞれ独立的に駆動制御可能にしていることにある。
しかし残念ながら、従来例では１行毎に駆動力を伝達するためのラックが必要となる上、パルスモーターの駆動力を切換えるための機構が列数分必要になり、部品点数が多くなり、コスト高であるという問題があった。
また、従来例では、ラックの幅、クラッチギアの直径、切り換えのための間隔の合計寸法が、キーユニットの配置間隔を決定していたので、キーユニットを狭いピッチで配置するには、クラッチギアの直径を小さくし、ラックの幅を狭くする必要があった。しかしながら、クラッチギアの直径を小さくすると、駆動モータに必要なトルクが増大してモーターが大きくなるし、ラックの幅を狭くすると、列方向に長いラックの直線度が維持しにくいという問題がある。
また、クラッチ動作を確実に行うためには、ラックとクラッチギアの噛み合い位置は正確でなければならないが、従来例では、複数のラックや複数のクラッチギア、クラッチ板を、正確に位置決めして案内する必要があり、高い部品精度と組み付け精度が必要でありコスト高になるという問題がある。
従来例の特徴は、キートップの数が多いほど駆動モータを節約できる。しかし、キートップが比較的少ない場合はその利点よりも上述の欠点の方が顕著であった。
そこで発明人は、従来例に見られる問題点、すなわち、
１．部品点数が多くなりコスト高になるという問題点。
２．独立して案内駆動される部材が多いのでそれらの案内のための機構が複雑になり機械的なトラブルが発生する可能性が高く信頼性が低いという問題点。
３．昇降式キートップの配置ピッチを狭くしにくいという問題点。
４．高精度の部品と高い組み付け精度が必要であるという問題点。
を解決するために努力を重ね、下記に説明する触覚入出力装置を発明するに至った。
次に、図面に従って、触覚入出力装置の第１の実施例を説明する
図３６は、触覚入出力装置の上面図である。図３７は、図３６のＡ−Ａ断面図である。図３８は、４つのキーグループを図３７のＡ−Ａ断面の上方から見た図である。図３９は、４つのキーグループを図３７のＢ−Ｂ断面の下方から見た図である。図４０は、電子基板の４つのキーグループに対応する部分を図３７のＣ−Ｃ断面の上方から見た図である。図４１は、４つのキーグループの昇降ギヤ及びピニオンギアの位置関係を、図３７のＤ−Ｄ断面の下方から見た図である。図４２は、位置決め駆動手段の機構を示す図である。図４３は、昇降ピンの複数の昇降高さについて図３６のＡ−Ａ断面により示した図である。図４４から図４８は、モーター取り付けフレームがそれぞれ、基準位置、左上位置、左下位置、右上位置、右下位置の際の４つのキーグループの昇降ギヤ及びピニオンギアの位置関係ならびに位置決め駆動手段の機構の位置関係を図３７のＤ−Ｄ断面の下方から見た図である。図４９は、操作パネル及び昇降ピンの第２の例に付いて昇降ピンの複数の昇降高さについて図３６のＡ−Ａ断面により示した図である。
実施例では、図３６に示すように６４個の複数のキートップを８行ｘ８列のマトリックス状に１５ｍｍピッチで配置している。そして、これらの複数のキートップはマトリックスの最小正方形を構成する４つのキートップで構成される複数のキーグループにグループ化されている。実施例では、行方向に４グループ、列方向に４グループ、合計１６のキーグループの配列で構成されている。
フレーム２は、装置の基礎となる略平板状の部材であり、樹脂やアルミニウム、真鍮などの非磁性体で製作されていて、表面には図３７に示すように、キートップの位置に対応して上面から下面に貫通するガイド孔３がそれぞれ形成されている。このガイド孔３は、フレームの上面から板厚中間部にかけて図３８に示すように、平行幅ｗ１、長さｔ１、半径ｒ１＝ｗ１／２、深さＤ１からなる長孔Ａが形成されていて、板厚中間部からフレーム下面にかけては図３９に示すように、平行幅ｗ２、長さｔ２、半径ｒ２＝ｗ２／２、深さＤ２からなる長孔Ｂが形成されていて、長孔Ａと長孔Ｂによりフレームの上面と下面に貫通するガイド孔３が形成され、後述する昇降ギア５と昇降ピン７が挿通される。
ここで、ガイド孔の長孔Ａと長孔Ｂの長手方向は、そのガイド孔が属するキーグループにおける正方形中心（図３８及び図３９におけるＸ点）を中心として放射状に設定されている。フレームの下面には、図３９に示すように、各キーグループに属する４つの長孔Ｂにそれぞれ交差する位置でＸ点を中心とする円周状の深さ１ｍｍの溝４が形成されている。
昇降ギヤはボス部を有した平歯車であり、ガイド孔の長孔Ｂに昇降ギヤのボス部が挿通される。実施例の平歯車は、モジュール０．５ｍｍ、歯数２４である。昇降ギヤの中心にはネジ穴６が形成されていて、図３７に示すように上方から鉄などの磁性材料で製作された昇降ピンのネジ部がねじ込まれている。昇降ピンのネジ部長さは、昇降ギヤのボス上面から下面までの距離より１ｍｍ長く、昇降ピンをいっぱいねじ込むと、昇降ピンのネジ部先端７ａが昇降ギヤの下面から１ｍｍ突出する。昇降ピンの頭部７ｂは、対辺幅がｔ１の六角形状をなし、図３８に示すようにガイド孔の長孔Ａの平行幅ｔ１に嵌合して回転を規制されている。この昇降ギヤは、請求項２４に記載の「昇降式キートップ昇降手段」に相当する。また、キートップと昇降ピンは同じく「昇降式キートップ」に相当する。
前記円周状の溝４の内部と昇降ギヤの歯部上面との隙間には、円環状のスプリング８が配置され、キーグループに属する４つの昇降ギヤのボス部に掛けられ、それぞれのボスを長孔Ｂの一方の側（点Ｘの方向）へ所定の力で付勢している。
フレームの下面には、電子基板１１がスタッド９によりフレームに対向して平行に取り付けられている。図４０に示すように、電子基板の上面には、複数のプッシュスイッチがその押下入力部の中心が昇降ギヤの中心と一致するような位置で、所定のプリント配線パターンにはんだ付けされている。図３７に示すように、スタッドの高さはプッシュスイッチの非動作時の押下入力部の上面が昇降ギヤの下面に接するように設定されている。実施例では、プッシュスイッチの押下動作寸法は、０．５ｍｍであるとする。
昇降ギヤはフレーム下面で上方への移動を規制されているので、昇降ピンが昇降ギヤにねじ込まれて昇降ギヤの下面から突出するとその突出にともないプッシュスイッチが押下され、０．５ｍｍ突出した位置でプッシュスイッチが作動する。以下この状態を、昇降ギヤの原点位置と称し、この際の昇降ピンの高さを、昇降ピンの基準位置と称する。
電子基板１１には、所定のプリント配線パターンが形成され、パルスモーター駆動用の電子部品が配置され、パソコン２００から制御されてパルスモーターが駆動される。この電子部品は外部の制御装置とともに機能して請求項２４記載の「駆動モーター制御手段」を構成する。
電子基板１１の下面には、絶縁シート１３を挟んで、電子基板に平行に対向して、モーター取り付けフレーム１４が配置されている。モーター取り付けフレーム１４には、穴１４ａが形成されている。この穴を貫通してモーター取り付けフレーム支持軸１０がフレームに取り付けられ、その先端部のＥ型止め輪１５とモーター取り付けフレーム下面との間に、円錐圧縮ばね１６が取り付けられ、モーター取り付けフレーム１４を下側から支持してわずかな力で絶縁シートの方へ押圧するような所定の強さに設定されている。
またモーター取り付けフレーム支持軸１０の下端面には、上面が開放した箱状の下カバー２０がねじで固定され、フレーム２とともに箱状の装置形状をなしている。
モーター取り付けフレーム１４の下面には、パルスモーター１８が、４行ｘ４列のマトリックス状に３０ｍｍ間隔で、合計１６個配置されている。それぞれのパルスモーターの回転出力軸１８ａは、モーター取り付けフレーム１４及び電子基板１１の逃がし穴を通過して電子基板１１の上部へ突出し、ピニオンギア１９が固着されている。実施例では、モジュール０．５ｍｍ、歯数１２のギヤが使用されている。このピニオンギアの歯数は、パルスモーターを所定の励磁パターンで励磁した際に同じ歯車位相で停止するように、例えば２４パルス／回転のパルスモーターを使用して、ピニオンギアの歯数を１２歯とすると、パルスモーターの各コイルを順方向に励磁した基準励磁位置（ローターの停止位相は全周で６個所存在する）では、いつも同じ歯車位相となる。
パルスモーター１８は、請求項２４に記載の「駆動モーター」に相当し、ピニオンギア１９は、請求項２４に記載の「駆動力出力部」に相当する。
図４１に示すように、パルスモーター１８は、モーター取り付けフレーム１４が基準位置に位置するときに、４つの昇降ギヤを頂点にした正方形の中心とピニオンギア１９の中心が一致するように取り付けられ、昇降ギヤとピニオンギアの間に所定の隙間が確保されるようになっている。そして、モーター取り付けフレーム１４を前後左右へ移動すると、図４５から図４８に示すように、ピニオンギアと４つの昇降ギヤのひとつの昇降ギヤとが噛合する。
次に、フレーム２とモーター取り付けフレーム１４を相対的に移動駆動する位置決め駆動機構に付いて説明する。
図４２に示すように、モーター取り付けフレーム１４には、前後駆動用パルスモーター２１と左右駆動用パルスモーター２２が取り付けられている。前後駆動用パルスモーター２１の回転出力軸にはタイミングプーリ２３が固定されていて、その上端部には回転軸とＤＹだけ偏心した位置に前後駆動軸２４が形成され、フレームの下面に形成された横長の前後駆動溝２ｂに係合している。
左右駆動用パルスモーター２２の回転出力軸には、左右駆動プーリ２５が固定されていて、その上端部には回転軸とＤＸだけ偏心した位置に左右駆動軸２６が形成され、フレームの下面に形成された縦長の左右駆動溝２ｃに係合している。
第２のタイミングプーリ３０は、モーター取り付けフレーム１４に立設されたプーリ軸２８に回転自在に取り付けられ、タイミングベルト２９がタイミングプーリ２３と第２のタイミングプーリ３０との間に張設される。
第２のタイミングプーリ３０の上端部には、回転軸とＤＸだけ偏心した位置に第２の前後駆動軸３１が形成され、フレームの下面に形成された横長の第２の前後駆動溝２ｄに係合する。
また、タイミングベルト２９は、タイミングプーリ２３及び第２のタイミングプーリ３０の回転に伴い前後駆動軸２４及び第２の前後駆動軸３１により生じる前後方向の移動が同期して生じるように位相が調整されて張設されている。タイミングプーリ２３と左右駆動プーリ２５は、図示しない原点検出センサーに基づき原点位置へ位置付けされると、前後駆動軸２４と左右駆動軸２６が図４４に示すような回転位置になるように取り付けられている。
以上のように、前後駆動溝２ｂならびに第２の前後駆動溝２ｄはともにガイド方向が平行な横長の溝なのでモーター取り付けフレーム１４を左右方向へ回転を伴わずに平行にガイドするとともに前後方向の位置を規制する。また、左右駆動溝２ｃは縦長の溝なのでモーター取り付けフレーム１４の前後方向の移動を許容しながら左右方向の位置を規制している。
従って、前後駆動用パルスモーター２１と左右駆動用パルスモーター２２を適当に駆動すると、モーター取り付けフレーム１４をフレーム２に対して回転移動を伴わない平行移動させることができる。
ここで、ＤＸ及びＤＹを、ピニオンギア１９と昇降ギア５を噛み合わせるのに必要な寸法に設定すれば、複数のパルスモーター１８のピニオンギア１９は、キーグループに属する４つのキーユニットの昇降ギア５に選択的に噛合させることができる。
このように、モーター取り付けフレーム１４はフレーム２に対して回転移動を伴わずに前後左右に平行に移動駆動されるので、それぞれのパルスモーター１８のピニオンギア１９と昇降ギア５の噛合動作が、同時にかつ正確に行えるという作用があり、従来のように複数の案内機構を必要とせず、部品数が少なく、安価であるという優れた効果がある。
また、噛合の際にピニオンギア１９と昇降ギア５の歯先が干渉しても、昇降ギア５のボス部が円環状のスプリング８に抗して長孔Ｂに沿って退避するので、歯車の歯先が破壊されることはない。また、ピニオンギア１９の回転に伴い歯先の干渉が解除され、歯が噛合可能になるとスプリング８の作用で元の位置に復帰するので、噛合が不能になることもない。
次に、操作パネル３２に付いて説明する。操作パネル３２は、樹脂やアルミニウム、真鍮などの非磁性材料で製作され、フレーム２の上面に着脱可能に装着される平面状のパネル部材であり、表面にはキーユニットの配置位置に対応した位置に複数の貫通穴３２ａが形成れ、キートップ１がそれぞれ挿通されている。
キートップ１の内部には磁石３３が埋め込まれている。昇降ピン７は鉄なので、誤って使用者が装置をひっくり返しても、キートップ１は昇降ピン７に吸着されて落下・散乱しないという作用がある。
操作パネル３２の上面には、紙などの汚れ防止シートが貼付されていて、汚れたら交換できる。従って、いつもさらさらの触感が確保されるので、使用感が向上する。
次に、上記のように構成された触覚入出力装置の初期化動作に付いて説明する。
まず、前後駆動用パルスモーター２１と左右駆動用パルスモーター２２を原点位置へ駆動すると、モーター取り付けフレーム１４はフレーム２に対して図４４に示す基準位置に位置決めされる。次に、前後駆動用パルスモーター２１と左右駆動用パルスモーター２２を回転駆動させ図４５に示す状態にする。すると複数のパルスモーター１８のピニオンギア１９が、それぞれ対応するキーグループの図中左上の昇降ギア５と噛み合う。
次に、パルスモーター１８を駆動して昇降ギア５を回転させ、昇降ピン７が下降してプッシュスイッチ１２を作動させて基準位置を検出したら、所定の角度逆方向に駆動して図４３に示す平面位置にする。
この動作を、図４５〜図４８に示す噛み合い位置において同様に実施し、すべてのキーユニットを平面位置にする。部品の寸法誤差や使用者の感覚の違いにより、キートップ１が操作パネル２の上面と同じ高さに感じない場合は、後述する制御プログラムにより所定の補正値を設定して記録し、その値に応じて補正駆動すればよい。
次に、キーユニットのキートップ１を突出させる動作に付いて説明する。
まず初期化動作と同様に、図４５に示す位置にモータ取り付けフレーム１４を位置決めする。そして、パルスモーター１８と噛合しているキーユニットで、突出させるキートップ１をそれぞれ所定の高さに突出させる。この動作を、図４６〜図４８に示す位置について実施する。
このように、パルスモータ１８の回転駆動力を切換える動作を４回行うだけで、すべてのキーユニットを任意の位置に設定できる。
この際、何回に一回は、昇降ピンを基準位置へ移動し、噛み合いに伴う歯の位置ずれを解消させて位置ずれが累積しないようにするのが望ましい。
すべてのキートップ１が所定の高さに設定されると、使用者は、キートップ１の突出状態を触覚認知しながらキートップ１の上面を押下すると、昇降ギア５を介してプッシュスイッチ１２が操作されてキー操作が入力できる。
次に、本発明の操作パネル及び昇降ピンの第２の例に付いて図４９を参照しながら説明する。フレーム２には、平行幅ｗ１、長さｔ１、半径ｒ１＝ｗ１／２、からなる長孔３５がフレームの板厚の全体にかけて貫通形成されている。昇降ピン３４の下部には、昇降ギア５のねじ穴に結合するねじ部を有し、上部には、鍔部３４ａと縦リブ３４ｂが形成されたキートップ部３４ｃを有している。
操作パネル３２の貫通穴３２ａは、キートップ部３４ｃと若干の隙間を持って挿入されるように縦リブ３４ｂが嵌まる凹部を有し、昇降ピン３４の回転を規制している。キートップ部３４ｃは貫通穴３２ａにより上下方向に摺動ガイドされるとともに、昇降ギア５の退避動作にともなう昇降ピン３４の揺動を許容するようになっている。
また、昇降ギア５の回転に伴い昇降ピン３４が上昇すると、昇降ピン３４の鍔部３４ａが操作パネル３２の下面に当接し、昇降ピン３４の上昇を規制する。さらに昇降ギア５が回転駆動されると、昇降ギア５が下方向に移動し、昇降ギア５の下面がプッシュスイッチ１２の押下入力部の上面を押し、スイッチがＯＮになり、昇降ピン３４の高さ基準を検出できる。
なお、昇降機構を採用せず、操作平面から突出したキートップへの押下操作を検出するスイッチのみで構成し、所定のキートップが押下されたのに基づき、そのキートップに対応付けられた識別状態に応じた音声を出力することで、複数の識別状態を構成してもよい。その場合操作の入力は、補助入力スイッチを利用するなどの配慮が必要である。これは、請求項１３に記載された発明に相当する。
次に図面にしたがって、請求項１６、請求項１９にそれぞれ対応した、触覚入出力装置の第２の実施例を説明する。
図５０は触覚入出力装置の第２の実施例の構成を示す図であり、図５１はワンチップマイコンに内蔵されたプログラムのフローチャートである。
図５０に示した触覚入出力装置は、タッチパネル１５０とワンチップマイコン１５３を備え、タッチパネルの表面に触れる指先の押圧位置を検出してワンチップマイコン１５３へ出力されるようになっている。タッチパネル１５０は広く周知であるので詳細な説明は省略する。
タッチパネル１５０の表面には、所定の間隔で複数の凸状の突起１５１が形成され、指先で触ることでタッチパネル１５０の表面における位置を識別できるようになっている。凸状の突起１５１は、請求項１６に記載の「触覚部」に相当する。
タッチパネル１５０の突起１５１を指先で触れると、指先の位置が検出されるので、利用者がどの突起１５１を触っているか検出できる。この構成と機能は、請求項１６ならびに請求項１９に記載の「指先検出手段」に相当する。
また、タッチパネル１５０の近傍には、操作信号を入力する際に同時に操作されるシフトスイッチ１５７及び第２のシフトスイッチ１５８が備わっている。シフトスイッチ１５７ならびに第２のシフトスイッチ１５８は、請求項１９に記載の「補助操作手段」に相当する。
また、ワンチップマイコン１５３に内蔵されたＲＯＭ１５４には、図５１に示すフローチャートに基づき動作する制御プログラムが記憶されている。
まず、Ｓ３００で、触覚操作手段設定情報供給手段から供給された触覚操作手段の設定情報が、パソコンのＩ／Ｏポートからワンチップマイコンに入力され、ＲＡＭ１５５に記憶される。次にＳ３０１において、指先検出手段からの信号を入力して指先が接近した触覚操作手段の位置を判別し、続くＳ３０２においてその触覚操作手段の設定情報に応じてブザー１５６から所定の音声を出力させる。
次に、シフトスイッチ１５７を押しながら特定の突起１５１を触るか、特定の突起１５１を触りながらシフトスイッチ１５７を押すと、Ｓ３０３においてクリック動作を示す操作が検出され、クリック動作を示す操作信号がパソコン２００へ出力される。
一方、特定の突起１５１を触りながら第２のシフトスイッチ１５８を押すと、Ｓ３０３でダブルクリック動作を示す操作が検出され、ダブルクリック動作を示す操作信号がパソコン２００に出力される。次に処理はＳ３００へ戻る。
上記のように構成された触覚入出力装置は、パルスモーターや駆動機構が不要であるので、装置が安価に製作できるという利点がある。
次に図面にしたがって、請求項１４、請求項１５にそれぞれ対応した、触覚入出力装置の第３の実施例を説明する。
図５２は、第３の実施例の構成を示す図であり、図５３は触覚操作手段を構成する振動ピン１６１の構成を示す断面図である。また図５４はワンチップマイコンに内蔵されたプログラムのフローチャートである。
この触覚入出力装置も、第２の実施例と同様に、タッチパネル１５０とワンチップマイコン１５３を備えていて、タッチパネル１５０は操作平面１５９の上面に取り付けられている。
また、操作信号を入力するためのシフトスイッチ１５７と第２のシフトスイッチ１５８が、タッチパネル１５０の近傍に配設されている。
タッチパネル１５０と操作平面１５９を貫く貫通穴１６０が、８ｘ８のマトリックス状に所定の間隔で複数形成されていて、振動ピン１６１がそれぞれ挿通されている。振動ピン１６１は磁性体にメッキが施された棒状の部材であり、上部は指先に振動を伝える部分が形成され、胴部は貫通穴１６０により上下方向に案内され、胴部の中央部に固定された板バネ１６２により基板１６３に対して所定の高さの位置に支持され、胴部の下部は後述するコイル体１６４により駆動されるように磁化されている。
基板１６３は、操作平面１５９の下部に平行に取り付けられていて、振動ピン１６１に対応した位置にはコイル体１６４が取り付けられている。コイル体１６４はボビン１６５と巻線１６６から構成され、ボビン１６５の内部には振動ピン１６１の着磁された胴部下部が挿通され、図示しない駆動回路により巻線へ交流電流を通電することで振動ピン１６１を振動駆動できる構成となっている。
なお、実施例では振動ピン１６１毎にコイル体１６４を配設しているが、振動ピン１６１を操作平面１５９の下部で複数連結してバイブレータなどで全体を振動させる構成にしてもよい。
その場合は、下記に示す指先検出手段で指先が触覚している振動ピン１６１が振動させるべき振動ピンであった場合はバイブレータを振動させ、振動させる必要のない振動ピン１６１であった場合はバイブレータを振動させない。このような構成においても、触覚する指先が１つの振動ピン１６１のみを触覚している限り、その指先で触覚する振動ピン１６１に設定された識別状態を振動により正しく認識できる。
この原理をさらに応用すれば、タッチパネル１５０の表面に所定の間隔で複数の凸状の突起１５１を形成するとともに、タッチパネル１５０全体をバイブレータで振動させる構成であってもよい。すなわち、指先検出手段で指先が触覚している突起１５１が振動で識別されるべき突起であった場合はバイブレータを振動させ、識別させる必要のない突起であった場合はバイブレータを振動させない。凸状の突起を触覚している時にタッチパネル１５０全体がバイブレータにより振動されれば、その指先に触れる凸状の突起を介して、指先はその振動状態を認知できるからである。
上記に例をあげた、指先に振動を伝達可能な構成はいずれも、請求項１４に記載の「振動手段」に相当する。また、振動ピン１６１を触れている指先の位置はタッチパネル１５０により検出されるので、利用者がどの振動ピン１６１を触っているか検出できる。この構成と機能は、請求項１５に記載の「指先検出手段」に相当する。
また、ワンチップマイコン１５３に内蔵されたＲＯＭ１５４には図５４に示したフローチャートに基づき動作する制御プログラムが記憶されている。
まず、Ｓ７００では、触覚操作手段設定情報供給手段から供給された触覚操作手段の設定情報が、パソコンのＩ／Ｏポート２０７からワンチップマイコン１５３に入力されて、ワンチップマイコン１５３の内蔵のＲＡＭ１５５に記憶される。次にＳ７０１において、指先検出手段からの信号を検出して指先が接近した振動ピン１６１（ないしは突起１５１）を判別し、続くＳ７０２においてその振動ピン（ないしは突起）の設定情報に応じて駆動回路によってコイル体（ないしはバイブレータ）を駆動して振動させる。
利用者は、特定の振動ピン１６１（ないしは突起）を触りながらシフトスイッチ１５７ないしは第２のシフトスイッチ１５８を押すと、Ｓ７０３においてクリック動作ないしはダブルクリック動作を示す操作が検出され、クリック動作ないしはダブルクリック動作を示す操作信号がパソコン２００へ出力され、その後に、Ｓ７００へ戻るようになっている。
上記のように、触覚入出力装置に備わるすべての振動ピン１６１を設定状況に応じて駆動するのではなく、指先が位置している振動ピン１６１のみを駆動するようにしたので、触覚されていない振動ピン１６１を駆動するための電力を節約でき、電源回路などが小型にできるという効果がある。また、振動ピン１６１の振動に伴う騒音を必要最小限にできるという効果がある。
なお、タッチパネル上の複数の指先の位置を独立して検出できるタッチパネルを使用するとともに、検出された複数の指先の位置する振動ピン１６１をそれぞれ駆動ようにすると使いやすいのは言うまでもない。
次に、パソコン２００について図面に基づき説明する。パソコン２００は、いわゆるパーソナルコンピュータであり、今や広く周知な装置であるので詳細な説明は省略するが、本実施例で使用するパソコン２００には、ＣＰＵ２０１、メモリ２０２、ＦＤＤ２０３、ＨＤＤ２０４、ＣＤ−ＲＯＭドライブ２０５（以下ＣＤＤと称す）、モデム２０６、Ｉ／Ｏポート２０７、音声合成回路２０８、音声入力回路２０９、ビデオカード２１０、を備えていて、制御バス２１２を介して電気的に接続されている。また、装置の使用が不慣れな視覚障害者に使い方などを指導する指導者（晴眼者である）が装置の動作状況を画面で確認できて適切に指導が行えるように、装置の使用方法などを表示するために、ＣＲＴ２１１を使用する場合もある。
ＣＰＵ２０１の動作は、ＨＤＤ２０４に記憶されている制御プログラムによって定義されていて、ＣＰＵ２０１はＨＤＤ２０４のプログラムをメモリ２０２に適当にロードして、これを実行するようになっていて、ＨＤＤ２０４に記憶されたデータや、ＣＤＤに挿入されたＣＤ−ＲＯＭの中に記載されているデータや、モデム２０６を介して接続されるインターネットのデータ提供サーバ（図示しない）から提供されるデータを読み込み、メモリ２０２や場合によってはＨＤＤ２０４に記録して処理を行うようになっている。
また、音声合成回路２０８は、ＣＰＵ２０１により所定の情報を設定すると、音声信号をデジタル合成するとともに、接続されたスピーカー３００から所定の音を発生させる。また、音声入力回路２０９は、マイク４００から入力した音声信号を入力するとともに音声解析を行い、音声に含まれている情報を文字情報として出力する。これらのパソコン２００の構成要素は、ともに現在では周知な技術であるとともに、本発明の本質には関係が無いのでその詳細な説明は省略する。
ここで、音声合成回路２０８は、いわゆる４チャンネルステレオの回路構成になっていて、ＣＰＵ２０１から設定された音に関する情報の中には、左前スピーカー，左後スピーカ、右前スピーカー、右後スピーカーそれぞれに対する音の設定値が含まれていて、これらの設定値を変化させることで、音の発生している場所が変化しているように聞くことができる。
なお、視覚障害者にとって、聴覚は大変大切な残存能力であるので、この音声合成回路２０８には、あらかじめ設定された音圧以上の音がスピーカーから発生しないように、回路に多重の安全回路、例えば、電流制限回路などが組み込まれていて、ＣＰＵ２０１の誤動作やプログラムのバグ、データの不良、電子部品の劣化その他により、異常に高い音圧がスピーカーから発生して使用者の聴覚に障害を与える事故が起きないようになっている。
次に、図面に基づき本実施例の説明で使用するデータファイルに付いて説明する。これらのデータは、パソコン２００のＯＳが提供するファイルシステムの機能によって所定のファイル名が付けられてＦＤやＨＤＤ２０４、ＣＤ−ＲＯＭに読み出し可能に記録されているほか、電話回線に接続したモデム２０６を経由して、ネットワークに存在するデータサーバ（図示せず）からダウンロードしたものであってもよいし、パソコンの動作に伴って生成される各種動作状態を表すデータであってもよい。
一般的に、２次元的に展開可能な構造を持つデータのフォーマットは、画像データや表データ、レイアウト情報を含んだワープロデータ、インターネットホームページのＨＴＭＬフォーマットのデータ、階層構造をあらわすデータなど、さまざまなフォーマットのデータが存在するが、その内容に付いて逐一説明するのは本発明の本質を説明する趣旨から外れるので、本実施例では本発明の趣旨を説明するのに必要かつ十分な範囲で簡潔なフォーマット形式を規定し、そのフォーマットに従った具体的なデータを提示してそれに基づき以下の説明を行うこととする。
なお、当然ながら、本発明の範囲はこの実施例で示したフォーマットに係る２次元的に展開可能な構造を持つ情報への適用に限定されることはなく、前記のように広く利用されているデータのフォーマット毎に適宜アルゴリズムを適用すれば、本発明を適用してその効果と目的を達成できることは言うまでもない。そこで、本実施例の説明の前半では、使用者であり視覚障害者でもある特許一筋君が、すでに所持している多数の文書データの中から恩師のガンバ発明先生へあてた手紙を選択してその内容を閲覧して確認した後に、日付を入力し忘れたことに気づき、新しく日付を入力するという動作を想定して説明する。
また、本実施例の説明の後半では、特許一筋君が、触覚入出力装置を利用してインターネットにアクセスし、ガンバ先生のホームページを閲覧するという動作を想定して説明する。
図３から図７、及び図６３は、本発明の実施例で表示される情報の例を示すデータ構成図であり、特に図３は閲覧する文章の階層的な管理構造を記録したデータ（以下文書管理データと称する。）を示す図であり、また図４は、管理データに記載されている「手紙」という名前のデータ（以下文書データと称する。物理的なファイル名は、”ｃ：￥ｔｅｇａｍｉ．ｄａｔ”である。）の編集作業終了後のデータを示す図である。また、図５は「手紙」の中に記載がある「スナップ」という名前のデータ（同様に”ｃ：￥ｐｉｃｔｕｒｅ．ｄａｔ”）であり、図６はそのイメージデータの元になった画像データ（同様に”ｃ：￥ｐｉｃｔｕｒｅ．ｂｍｐ”）を示す図である。また、図７は同様に「手紙」の中に記載がある「実験結果の表」という名前のデータ（同様に”ｃ：￥ｒｅｓｕｌｔ．ｄａｔ”）を示す図である。また図６３は、図５５に示すパソコンの機能に関する情報に対応したデータであり、下記に示すプログラムでは、文書管理データとして扱われうる。
図からわかるように、管理データや文書データは、「＜（大なり記号）」と「＞（小なり記号）」でフォーマット記述子を囲んだ構造の「タグ」と呼ばれる情報と、それ以外の文字情報とから構成されている。参考に、本実施例で説明するデータに含まれるタグの定義を図８及び図９に示す。ここで、タグは、所定のフォーマット記述子である「開始記述子」と、開始記述子のフォーマット記述子の先頭に「／」文字を追加した「終了記述子」の対で構成される「ペアタグ」と、単に開始記述子だけの「シングルタグ」の２種類がある。
例えば図３に示した「特許君蔵書」の文書管理データで見ると、構造表示部分指定タグ（＜ＴＥＸＴＦＯＲＭ＞〜＜／ＴＥＸＴＦＯＲＭ＞）により、２行目から３６行目に記載されている情報がこの文書管理データの構造表示部分であることが示されている。また、２行目のルートタダ（＜ＲＯＯＴ”特許君蔵書”＞）により、この文書管理データが「特許君蔵書」をルートとする階層構造であることが示されている。また、３行目から２０行目に記載されているディレクトリタグ（＜ＤＩＲｎａｍｅ，ｐａｒｅｎｔ＞）により、「ｎａｍｅ」で示される名前の階層は「ｐａｒｅｎｔ」で示される名前の階層の下位の階層であることが示されている。
例えば「ｐａｒｅｎｔ」が「特許君蔵書」であるタグ（合計３つある）により、この管理構造の最上位の概念である「特許君蔵書」のすぐ直下の階層は、１．研究関係、２．ボランティア、３．レシピ、の３つの名前のディレクトリにより構成されていることが示されている。同様に、他のディレクトリタグについても、その親ディレクトリの名前が「ｐａｒｅｎｔ」により指示されている。
こうして構造表示部分のディレクトリタグの情報により、「特許君蔵書」をルートとするディレクトリの階層構造が表現され、具体的には図１０に示されるものになる。
文章データに関しても同様にして、例えば図４に示した「手紙」の文書データで見ると、構造表示部分指定タグにより、２行目から４４行目に記載されている情報がこの文書データの構造表示部分であることが示されている。また同様に２行目に記載されているページタグ（＜ＰＡＧＥ”手紙”，”３６”，”６４”＞）により、この文章データが「横３６文字ｘ縦６４文字で作成されている「手紙」という名前の文章であることが示されている。また、３行目から２０行目に記載されているフィールドタグにより、各フィールドの情報が手紙の上で占める領域（フィールド領域と称す。）を文字単位で表記した文字領域が示されている。また、各フィールドタグの「ｐａｒｅｎｔ」のパラメータにより、フィールドは相対的な上下関係を結びながら階層的に指示されている。例えば「ｐａｒｅｎｔ」が「手紙」であるタグ（合計７つある）では、この文章の最上位の概念である「手紙」のすぐ直下の階層に含まれるフィールドが示されていて、１．日付、２．受取人、３．差出人、４．時候の挨拶、５．本文、６．結文、７．追伸、の７つの名前のフィールドにより構成されていることが示されている。同様に、他のフィールドタグについても、その親フィールドの名前が「ｐａｒｅｎｔ」に設定されるとともに、親フィールドの文字領域における原点位置を基準としてそのフィールドの文字領域の左上の位置が指示されている。
このようにして、構造表示部分のフィールドタグの情報により、この手紙のレイアウトとフィールドの階層構造が表現され、具体的に本実施例の「手紙」のフィールドは図１１及び図１２に示されるものになる。
また、キートップ数タグ（＜ＩＮＤＥＸＦＯＲＭ Ａ，Ｂ＞〜＜／ＩＮＤＥＸＦＯＲＭ＞）により、タグの間のインデックスタグ（＜ＩＮＤＥＸ ｎａｍｅ，ｘ，ｙ，ｘ１，ｙ１，ｘ２，ｙ２＞）は、Ａ列ｘＢ行の触覚入出力装置用の情報であることが指定されるとともに、そのインデックスタグにより、「ｎａｍｅ」で示された名前のフィールドないしはディレクトリに対応する代表のキートップ位置（ｘ，ｙによる。）以下インデックスポイントと称す。）と、矩形の領域（ｘ１，ｘ２，ｙ１，ｙ２による）（以下インデックス領域と称す）が指示される。本実施例では、８列ｘ８行の触覚入出力装置用と１６列ｘ１６行の触覚入出力装置用の値が指示されている。
なおフィールドに対するインデックスタグのＸ，Ｙ，ｘ１，ｘ２，ｙ１，ｙ２の値は、インデックスタグの「ｐａｒｅｎｔ」に示された名前のフィールドの文字領域を所定の触覚入出力装置のキートップの範囲に展開した状態における対応するキートップの位置が指定されている。またディレクトリに対するインデックスタグのＸ，Ｙ，ｘ１，ｘ２，ｙ１，ｙ２の値は、Ｘ＝ｘ１＝ｘ２及びＹ＝ｙ１＝ｙ１であり、Ｘはルートからの階層の深さ、Ｙは同一階層内の列挙方向の順位が示されている。
このように指示された構造表示部分のインデックスタグの情報は、後述する制御プログラムの動作により参照され、ディレクトリ構造やレイアウトをキートップ１の配置で表現するための基本情報になる。キートップによりどのように表現されるかに付いては、後ほど詳しく説明する。
次に各データにおいては、内容表示部分指定タグ（＜ＣＯＮＴＥＮＴ＞〜＜／ＣＯＮＴＥＮＴ＞）により内容表示部分が指定されていて、構造表示部分で指示されたフィールドの「ｎａｍｅ」で指示した名前に対応してその内容が指示されている。例えば「手紙」の「受取人住所」という名前のフィールドに対応する内容は、テキストタグ（＜ＴＥＸＴ”受取人住所”＞〜＜／ＴＥＸＴ＞）により指示されていて、具体的には後述する制御プログラムにより音声合成されて出力されることになる「東京都発明村２１番地」というテキストデータが指示されている。
また例えば「手紙」の１４行目の「実験結果の表」というフィールドに対する内容は、リンクタグ（＜ＬＩＮＫ”実験結果の表”，”ｃ：￥ｒｅｓｕｌｔ．ｄａｔ”＞）で指示されていて、具体的には後述する制御プログラムにより新しく閲覧することになる「ｃ：￥ｒｅｓｕｌｔ．ｄａｔ」という文書データのファイル名が指示されている。また例えば「手紙」の２０行目の「スナップ」というフィールドに対する内容は、イメージデータタグ（＜ＩＭＡＧＥ”スナップ”，”ｃ：￥ｐｉｃｔｕｒｅ．ｄａｔ”，”ｃ：￥ｐｉｃｔｕｒｅ．ｇｉｆ”＞）で指示されていて、具体的には後述する制御プログラムにより新しく閲覧することになる「ｃ：￥ｐｉｃｔｕｒｅ．ｄａｔ」という文書データのファイル名と、画像表示装置で参考のために出力される「ｃ：￥ｐｉｃｔｕｒｅ．ｂｍｐ」という画像データのファイル名が指示されている。
また例えば「手紙」の１９行目の「美声？」というフィールドに対する内容は、サウンドデータタグ（＜ＳＯＵＮＤ”美声？”，”ｃ：￥ｓｏｕｎｄ．ｗａｖ”＞）で指示されていて、具体的には後述する制御プログラムにより音声情報として演奏されることになる「ｃ：￥ｓｏｕｎｄ．ｗａｖ」というサウンドファイル（．ｗａｖ形式のデータは、標準的なサウンドフォーマットのデータである。）が指示されている。また例えば「パソコン機能」の８行目の「電話番号」というディレクトリに対する内容は、３３行目においてコマンドタグ（＜ＣＭＤ”電話番号”，”ＳｅｔＴｅｌＮｏ．ｂａｔ”＞）で支持されていて、具体的には指定されているファイルに記載されているデータに従って所定の単位機能（ここでは、電話番号をマイクから入力して設定する。）が実行される。
以上説明したフィールドやディレクトリという単位で分割された情報は、請求項１記載の「ブロック単位情報」に相当するものである。
次に、図１３を参考に、メモリ２０２に設定された記憶領域について説明する。「ＫＥＹ−Ｘ」「ＫＥＹ−Ｙ」は、使用する触覚入出力装置のキートップ１の列数と行数を記録する記憶領域である。「Ｍｏｄｅ」は、現在の動作モードを記憶する記憶領域である。「ＫｅｙＮａｍｅ（Ｘ、Ｙ）」は、Ｘ列Ｙ行のキートップ１に対応付けられたフィールドの名前を記憶する記憶領域であり、「ＫｅｙＭｏｄｅ（Ｘ、Ｙ）」は、Ｘ列Ｙ行のキートップ１の突出高さの設定情報を記憶する記憶領域である。これらＫｅｙＮａｍｅ（Ｘ，Ｙ）とＫｅｙＭｏｄｅ（Ｘ，Ｙ）に記憶される情報は、請求項１記載の「前記ブロック単位情報と前記複数の触覚操作手段との対応関係を示す触覚操作手段対応関連情報」に相当するものである。
また、「ＣｌｉｃｋＭｏｄｅ」はキートップの操作状態を記憶する記憶領域、「Ｐｕｓｈ−Ｘ」「Ｐｕｓｈ−Ｙ」は、押されたキートップの列と行をそれぞれ記憶する記憶領域である。また「Ｃｏｍｍａｎｄ」は音声により入力されたコマンドデータを記憶する記憶領域である。また、「ＴｏｐＴｙｐｅ」は、触覚入出力装置で表示しているデータが後述する文書管理データであるか、文書データであるか、を記憶する記憶領域であり、「ＲｏｏｔＮａｍｅ」は文書管理データである場合の、管理データのルートの名前を記憶する記憶領域である。また「ＴｏｐＮａｍｅ」は現在表示されているデータの名前を記憶する記憶領域である。また「Ｆａｍｉｌｙ」は管理文書データを表示する際に、現在表示されているデータと上位方向に親子関係にあるディレクトリの名前を記憶する記憶領域である。「ＮｅｗＮａｍｅ」「ＮｅｗＸ」「ＮｅｗＹ」「ＮｅｗＸ１」「ＮｅｗＹ１」「ＮｅｗＸ２」「ＮｅｗＹ２」はともに、サブルーチン「ＮｅｗＩｎｄｅｘ」で使用されるデータを記憶する記憶領域であり、詳細は後述する。
次に、図１４と図１６に記載したフローチャートにより本発明の実施例のメインルーチンについての説明を行う。まず、ステップＳ１（以下単純にＳ１などと称す。）で、パソコン２００に電源が投入されると、所定の初期化が行われた後に、制御プログラムがメモリ２０２にロードされ、制御プログラムの動作が開始し、まずディップスイッチ１０６の設定状態が読み込まれ、使用する触覚入出力装置の仕様を判別して、キートップ１の個数を縦と横でそれぞれ「ＫＥＹ−Ｘ」「ＫＥＹ−Ｙ」に記憶する。実施例では、縦８行ｘ横８列の触覚入出力装置が使用されているので、ＫＥＹ−Ｘ＝８、ＫＥＹ−Ｙ＝８と設定される。
続くＳ２では、ＨＤＤ２０４に記録されている記憶領域（図示しない）「ＣａｌｌＴｉｍｅｓ」の値が一定値以上かチェックされ、−定以上の場合はサブルーチン「Ｃｌｅａｎｉｎｇ」がコールされる。
続くＳ３では、キートップ１が強く押し込まれていると前述した初期動作が正しく行われないため、使用者に「初期化を行いますので、キートップから手を放してください。」という旨の音声を出力した後、前述したキートップの初期化動作を行って、全てのキートップ１の突出高さを０ｍｍに駆動・設定する。また、Ｍｏｄｅが閲覧モードを示す値として、０に初期化される。
続くＳ４では、「表示するデータのファイル名をマイクに向かって入力してください。」という内容の音声を音声合成回路２０８を介して出力する。
続くＳ５では音声入力回路２０９からファイル名を入力する。
続くＳ６ではそのファイル名のファイルが読み書き可能にオープンされるとともに、ルートタグ（＜ＲＯＯＴ ｎａｍｅ＞）の入力を試み、入力できたらＳ７へ進む。ルートタグが入力できなかった場合はＳ８に進む。
Ｓ７では、ＴｏｐＴｙｐｅに０を設定するとともにＲｏｏｔＮａｍｅにルートタグの「ｎａｍｅ」が記録され、さらに「ｎａｍｅ」の値がＴｏｐＮａｍｅに設定された後に、Ｓ１０ヘジャンプする。
Ｓ８では、ページタグの入力を試み、入力できたらＳ９に進む。ページタグが入力できなかったら処理はＳ４へ戻る。
Ｓ９では、ＴｏｐＴｙｐｅに１を設定し、「ｎａｍｅ」の値をＴｏｐＮａｍｅに設定した後に、Ｓ１０へ進む。
次くＳ１０では、後述するサブルーチン「ＤｉｓｐＩｎｄｅｘ」が実行され、各キートップとフィールドないしはディレクトリとの対応付けが実施されるとともに、触覚入出力装置１００のキートップ１が所定の状態に駆動設定される。
ここで、Ｓ４からＳ１０の「ＤｉｓｐＩｎｄｅｘ」内の所定の動作により実現される機能は、請求項１記載の、「情報記憶手段に所定の情報を設定する情報設定手段」に相当するものである。
次に、図１５に示すフローチャートにより、サブルーチン「ＤｉｓｐＩｎｄｅｘ」の動作を説明する。
まず、Ｓ１００では、ＨＤＤ２０４の記憶領域「ＣａｌｌＴｉｍｅｓ」に記憶されている積算値がインクリメントされる。また、ＫｅｙＮａｍｅ（）の全ての要素が空文字に、ＫｅｙＭｏｄｅ（）の全ての要素が０に初期化される。
続くＳ１０１では、ＴｏｐＴｙｐｅが評価され、０の場合は文書管理データであるのでＳ１０２へ進み、１の場合は文書データであるのでＳ１０３へジャンプする。
Ｓ１０２では、ディレクトリデータが調査されてＴｏｐＮａｍｅの親ディレクトリ、そのまた親ディレクトリとルーツをたどり、最終的にＲｏｏｔＮａｍｅまでのいわゆる直系の祖先にあたるディレクトリデータが検索され、Ｆａｍｉｌｙに記憶された後、Ｓ１０３へ進む。実施例の「特許君蔵書」の例では、例えばＲｏｏｔＮａｍｅ＝”特許君蔵書”、ＴｏｐＮａｍｅ＝”手紙”の場合は、Ｆａｍｉｌｙ＝”特許君蔵書＞研究関係＞通信記録＞手紙”という親子関係が抽出される。
続くＳ１０３では、「ＫＥＹ−Ｘ」と「ＫＥＹ−Ｙ」の値が読み込まれて、ＫＥＹ−Ｘ＝８かつＫＥＹ−Ｙ＝８の場合は、表示するデータの、＜ＩＮＤＥＸＦＯＲＭ”８”，”８”＞と＜／ＩＮＤＥＸＦＯＲＭ＞の間のインデックスデータから最初のインデックスデータが読み込まれる。ＫＥＹ−Ｘ＝１６かつＫＥＹ−Ｙ＝１６の場合は、表示するデータの、＜ＩＮＤＥＸＦＯＲＭ”１６”，”１６”＞と＜／ＩＮＤＥＸＦＯＲＭ＞の間のインデックスデータから最初のインデックスデータが読み込まれる。キートップの数に対応するインデックスデータがない場合は、＜ＩＮＤＥＸＦＯＲＭ”８”，”８”＞と＜／ＩＮＤＥＸＦＯＲＭ＞の間のインデックスデータがデフォルトで採択される。
次にＳ１０４で再びＴｏｐＴｙｐｅが評価され、０の場合は文書管理データであるのでＳ１０９へジャンプし、１の場合は文書データであるのでＳ１０５へ進む。
Ｓ１０５では、読み込まれたインデックスデータの「ｎａｍｅ」で示される名前のフィールドデータが読み込まれ、Ｓ１１６へ進む。該当するフィールドデータが読み込めれなかった場合はＳ１１６へジャンプする。
Ｓ１０６では、Ｓ１０５で読み込まれたフィールドデータの「ｐａｒｅｎｔ」に示されている名前が評価されＴｏｐＮａｍｅに等しければＳ１０７へ進み、ＴｏｐＮａｍｅに等しくない場合は、Ｓ１１６ヘジャンプする。
Ｓ１０７では、インデックスデータのインデックス領域（ｘ１，ｙ１，ｘ２，ｙ２で示される）に指定されているキートップ１それぞれについて、ＫｅｙＮａｍｅにはインデックスデータの「ｎａｍｅ」に設定されている名前が設定され、ＫｅｙＭｏｄｅには「領域」であることを示す値である１が設定される。
引き続きＳ１０８では、インデックスポイント（Ｘ，Ｙで示される）に指定されているキートップ１について、ＫｅｙＮａｍｅ（Ｘ，Ｙ）にインデックスデータの「ｎａｍｅ」に設定されている名前が設定され、ＫｅｙＭｏｄｅ（Ｘ，Ｙ）には２が設定されたのち、Ｓ１１６ヘジャンプする。
Ｓ１０９ではまず、読み込まれたインデックスデータの「ｎａｍｅ」で示される名前がＦａｍｉｌｙに含まれている名前（すなわちＴｏｐＮａｍｅの本人か直系の祖先である）か評価され、含まれている場合にはＳ１１０へ進み、含まれていない場合はＳ１１２へジャンプする。
Ｓ１１０では、そのインデックスデータのインデックスポイント（Ｘ，Ｙで示される）に指定されているキートップについて、ＫｅｙＮａｍｅ（Ｘ，Ｙ）にインデックスデータの「ｎａｍｅ」で示される名前が設定され、続くＳ１１１では、ＫｅｙＭｏｄｅ（Ｘ，Ｙ）に３が設定されて、Ｓ１１６ヘジャンプする。
Ｓ１１２では、読み込まれたインデックスデータの「ｎａｍｅ」で示される名前のディレクトリデータが読み込まれる。
続くＳ１１３で、そのディレクトリデータの「ｐａｒｅｎｔ」の名前（すなわちそのディレクトリの親ディレクトリ）がＦａｍｉｌｙに含まれているか評価され、含まれている場合はＳ１１４へ進み、含まれていない場合はＳ１１６へジャンプする。
Ｓ１１４では、読み込まれたインデックスデータのインデックスポイント（Ｘ，Ｙで示される）に指定されているキートップについて、ＫｅｙＮａｍｅ（Ｘ，Ｙ）にインデックスデータの「ｎａｍｅ」で示される名前が設定され、続いてＳ１１５で、ＫｅｙＭｏｄｅ（Ｘ，Ｙ）に２が設定されて、Ｓ１１６へジャンプする。
次にＳ１１６では、全てのインデックスデータが処理されたか判断して、まだ処理されていなければ引き続き次のインデックスデータが読み込まれ、Ｓ１０４へ戻る。全て処理されていたらＳ１１７へブレークする。
次にＳ１１７では、ＴｏｐＴｙｐｅが１の場合はＳ１１８へ進み、０の場合はＳ１２２へジャンプする。
Ｓ１１８では再び、「ＫＥＹ−Ｘ」と「ＫＥＹ−Ｙ」の値が読み込まれて、ＫＥＹ−Ｘ＝８かつＫＥＹ−Ｙ＝８の場合は、表示する文書データの、＜ＩＮＤＥＸＦＯＲＭ”８”，”８”＞と＜／ＩＮＤＥＸＦＯＲＭ＞の間のインデックスデータから最初のインデックスデータが読み込まれる。ＫＥＹ−Ｘ＝１６かつＫＥＹ−Ｙ＝１６の場合は、表示する文書データの、＜ＩＮＤＥＸＦＯＲＭ”１６”，”１６”＞と＜／ＩＮＤＥＸＦＯＲＭ＞の間のインデックスデータから最初のインデックスデータが読み込まれる。
続くＳ１１９では、読み込まれたインデックスデータの「ｎａｍｅ」で示される名前のフィールドデータが読み込まれてその「ｐａｒｅｎｔ」に設定してある名前を抽出する。
次にＳ１２０でその名前がＫｅｙＮａｍｅに設定してある全てのキートップについて、ＫｅｙＭｏｄｅ＝３と設定される。
続くＳ１２１では、全てのインデックスデータが処理されたか判断してまだ処理されていなければ引き続き次のインデックスデータが読み込まれ、Ｓ１１９へ戻る。全て処理されていたらＳ１２６へ進む。
一方、Ｓ１２２では再び、「ＫＥＹ−Ｘ」と「ＫＥＹ−Ｙ」の値が読み込まれて、ＫＥＹ−Ｘ＝８かつＫＥＹ−Ｙ＝８の場合は、表示する文書データの、＜ＩＮＤＥＸＦＯＲＭ”８”，”８”＞と＜／ＩＮＤＥＸＦＯＲＭ＞の間のインデックスデータから最初のインデックスデータが読み込まれる。ＫＥＹ−Ｘ＝１６かつＫＥＹ−Ｙ＝１６の場合は、表示する文書データの、＜ＩＮＤＥＸＦＯＲＭ”１６”，”１６”＞と＜／ＩＮＤＥＸＦＯＲＭ＞の間のインデックスデータから最初のインデックスデータが読み込まれる。
続くＳ１２３では、読み込まれたインデックスデータの「ｎａｍｅ」で示される名前のディレクトリデータが読み込まれてその「ｐａｒｅｎｔ」に設定してある名前を抽出する。
次にＳ１２４でその名前がＫｅｙＮａｍｅに設定してあり、かつ、ＫｅｙＭｏｄｅが３以外の全てのキートップについて、ＫｅｙＭｏｄｅが４に設定される。
続くＳ１２５では、全てのインデックスデータが処理されたか判断してまだ処理されていなければ引き続き次のインデックスデータが読み込まれ、Ｓ１２３へ戻る。全て処理されていたらＳ１２６へ進む。
以上Ｓ１００からＳ１２５のステップにより、全てのキートップに対応してＫｅｙＮａｍｅ、ＫｅｙＭｏｄｅの値が設定される。
次にＳ１２６で、キートップの駆動設定に先立ち、利用者がキー操作を行わないようにキートップの突出状態を変更中である旨を音声で通知する。
次にＳ１２７では、使用してる触覚入出力装置のキートップ１の配列状態が、ＣＲＴ２１１に表示される。そして、ＫｅｙＭｏｄｅに設定された値に基づき、１が設定されているキートップは表示を緑色に点灯表示させ、２及び４が設定されている場合は、そのキートップ１を０．８ｍｍの高さに突出させるとともに、そのキートップの表示を赤色に点灯表示させ、３が設定されている場合は、そのキートップ１を２．０ｍｍの高さになるように突出させるとともに、そのキートップの表示を赤色に点滅表示させる。
引き続きＳ１２８では、ＫｅｙＮａｍｅに設定されているフィールドないしはディレクトリに関連する情報がＣＲＴ２１１に表示される。ここで、ＣＲＴ２１１に表示される形態は、例えば文書全体を表示してキートップに関連付けられている領域の文字を色分けして表示したり、ディレクトリデータの階層構造を表示してキートップに関連付けられているディレクトリをあらわすアイコンを色分けして表示したりすればよい。このように、キートップの設定状態や閲覧している文書の内容などがＣＲＴ２１１で表示されるので、視覚障害者を指導する晴眼者が現在の使用状況を的確に把握でき、正しい指導が行えるという効果がある。
次にＳ１２９で、キートップ１の駆動設定が完了した旨を音声で通知する。ここで、Ｓ１２６でブザー音の発生を開始し、Ｓ１２９でそのブザー音を停止するようにしても良く、視覚障害者がキートップの駆動設定中であることが確認できればよい。こうしてサブルーチン「ＤｉｓｐＩｎｄｅｘ」の処理は終了して元に戻る。
以上Ｓ１２６からＳ１２９の一連の動作により実現される機能は、請求項１記載の、「前記情報記憶手段の触覚操作手段対応関連情報を入力して前記触覚操作手段設定手段に触覚操作手段設定情報を供給する触覚操作手段設定情報供給手段」及び「触覚操作手段設定情報に基づき前記複数の触覚操作手段をそれぞれ所定の状態に設定する触覚操作手段設定手段」に相当するものである。
次に、サブルーチン「ＤｉｓｐＩｎｄｅｘ」から処理が戻るとＳ１１へ進み、触覚入出力装置のキートップ１への操作信号を入力して、いずれのキートップ１も操作されていない「操作なし」と、いずれかのキートップ１が明示的に操作された「シングルクリック」と、一定時間の間に２回連続して操作された「ダブルクリック」との操作状態を検出し、「ＣｌｉｃｋＭｏｄｅ」にそれぞれ「Ｎ」「Ｓ」及び「Ｄ」のいずれかの値を設定するとともに、いずれかのキートップ１が押されていた場合はその列と行の値を「Ｐｕｓｈ−Ｘ」「Ｐｕｓｈ−Ｙ」にそれぞれ記憶した後にＳ１２へ移る。
この操作入力の方法は、使用する触覚入出力装置のタイプによって具体的な実装方法は異なるので、実際に採用する触覚入出力装置の方式に対応したプログラムにすることは言うまでもない。
Ｓ１１の動作により実現される機能は、請求項１記載の、「前記所定の領域における操作に基づき所定の操作方法に対応した操作信号を抽出して出力する操作信号抽出手段」に相当する。
次に、Ｓ１２では、ＣｌｉｃｋＭｏｄｅが評価され、Ｎの場合はＳ１３へ進み、ＳかＤの場合は図１６のＳ１９へ進む。
Ｓ１３では、音声入力回路２０９から利用者が発声したコマンドを入力し、有効なコマンドが発声されていた場合はその内容が文字情報に変換されて「Ｃｏｍｍａｎｄ」に設定される。
続いてＳ１４では「Ｃｏｍｍａｎｄ」の内容が評価されて、「えつらん」の場合はＳ１５へ進む。「へんしゅう」の場合はＳ１６へ進む。「くりーにんぐ」の場合はＳ１７へ進む。「キートップ１ちょうせい」の場合はＳ１８へ進む。
Ｓ１５では、「Ｍｏｄｅ」に閲覧モードであることを示す０が設定された後Ｓ１１へ戻る。
Ｓ１６では、「Ｍｏｄｅ」に編集モードであることを示す１が設定された後Ｓ１１へ戻る。
Ｓ１７では、サブルーチン「Ｃｌｅａｎｉｎｇ」が実行された後Ｓ１１へ戻る。
Ｓ１８では、サブルーチン「Ｃａｌｉｂｒａｔｉｏｎ」が実行された後Ｓ１１へ戻る。
次に、図１６のＳ１９では、Ｘ＝Ｐｕｓｈ−Ｘ、Ｙ＝Ｐｕｓｈ−Ｙとした場合の、ＫｅｙＮａｍｅ（Ｘ，Ｙ）に設定されている名前と同じ名前のフィールドデータないしはディレクトリデータと、同じ名前の内容情報（テキストデータ、サウンドデータ、イメージデータのいずれか）がそれぞれ読み込まれる。
続くＳ２０では、「Ｍｏｄｅ」「ＫｅｙＭｏｄｅ（Ｘ，Ｙ）」「ＣｌｉｃｋＭｏｄｅ」に基づき図１７に示される動作対応表にしたがって動作内容が選択される。
図１７に示されるように、動作内容は、「属性表示」「内容表示」「階層表示」「画面展開」「新規作成」「内容編集」の６種類の動作が定義されており、現在の動作モード（閲覧モードか編集モードか）や操作したキートップの設定状態（平面状態か、低い突出状態か、高い突出状態か）及び、操作の形態（シングルクリックかダブルクリックか）に応じて所定の動作が選択されて図に示されたステップに処理が分岐するようになっている。次に、各動作内容に付いてそれぞれの動作の説明を進める。
Ｓ２０において選択された動作が「属性表示」の場合は、Ｓ２１へ分岐する。
Ｓ２１では、Ｓ１９で読み込まれたフィールドデータの名前に関する情報と、内容表示部分に関する情報が、図１８に示す発声パターンで音声合成回路２０８から音声で出力されるように設定された後、Ｓ３１へ進む。ここで、音声は音声発声回路により非同期で発声され、前の音声の発声がまだ終了していない場合はその発声は中断され、新しい音声の発声が開始されるようになっている。
この発声パターン中、「領域識別音」は、そのキートップの属するフィールドの領域と、その隣接する別の領域とを区別するために割り当てられる固有の音であり、例えば地図の４色塗り分け問題のように、少なくとも４種類の領域識別音を用意しておき、図示しない４色塗り分けアルゴリズムにより触覚入出力装置でのフィールドの領域を分類すればよい。この「領域識別音」は、短くて識別しやすい音が望ましい。また、発声パターン中、「名前」は、そのキートップのＫｅｙＮａｍｅの値、すなわち属するフィールドの名前を読み上げる音声である。また、発声パターン中「データ量」は、内容表示部分の情報がテキストデータの場合はその文字数を、イメージデータの場合はイメージの大きさを、サウンドデータの場合は再生時間をそれぞれ読み上げる音声である。リンクデータの場合は何も発声しない。ここで、このキートップのＫｅｙＭｏｄｅが３または４の場合、「ｐａｒｅｎｔ」にこのフィールドの名前が指定されているいわゆる「子」のフィールドが存在するので、その場合は「子」のフィールドの数を計数した後にその数を読み上げる音声になる。
図からもわかるように、キートップのＫｅｙＭｏｄｅが「未定義」でないかぎり、シングルクリック動作により属性表示が行われるので、内容表示部分の情報を閲覧する前に、簡単な操作によりそのキートップに関連付けられている情報の属性情報を音声で確認できるようになっている。特に、領域識別音が最初に簡潔に発声されるので、平面状態に設定されているキートップを操作することで、その領域が触覚入出力装置のキートップの配列の中で占める領域を簡単に識別できるという効果がある。さらに、そのキートップに対応付けられているフィールドの名前が簡潔に表示されるので、具体的な内容を閲覧する前にその概要が把握できるという効果がある。また、そのキートップが属するフィールドに含まれている文字数などが簡潔に表示されるので、内容を閲覧するために必要な時間などが事前に把握でき、また「親」になっているフィールドの場合、含まれる「子」のフィールドの数を簡潔に表示されるので、このキートップの下位の階層にどれほどの情報が分類されて含まれているかを事前に把握でき、効率的に情報を閲覧できるという優れた効果がある。
属性情報はこの例に限定されず、例えばグラフィカルユーザーインターフェースの入出力部品の種類を、簡潔な音で表現するなどしてもよい。
またＳ２０において選択された動作が「内容表示」の場合は、Ｓ２２へ分岐する。
Ｓ２２では、Ｓ１９で読み込まれた内容表示部分の情報が評価され、テキストデータの場合はＳ２３へ進む。サウンドデータの場合はＳ２４へ進む。イメージデータの場合はＳ２５へ進む。リンクデータの場合はＳ２６へ進む。コマンドデータの場合はＳ３３へ進む。
Ｓ２３では、内容表示部分の情報の内容を読み上げる音声が出力された後Ｓ１１へ戻る。
Ｓ２４では、内容表示部分で指定されたサウンドデータが読み込まれて音声として再生された後Ｓ１１へ戻る。
Ｓ２５では、内容表示部分で指定されたイメージデータファイルが新しく閲覧するデータとしてＴｏｐＮａｍｅに指定された後Ｓ１０へ戻る。
Ｓ２６では、指定されたリンクファイルが新しく閲覧するデータとしてＴｏｐＮａｍｅに指定された後Ｓ１０へ戻る。
Ｓ３３では、指定されたコマンド指定ファイルが読み込まれて、別途定める装置の機能を実行された後、Ｓ１１へ戻る。
またＳ２０において選択された動作が「画面展開」の場合、Ｓ２７へ分岐する。
Ｓ２７では、Ｓ１９で読み込まれたフィールドデータないしはディレクトリデータの名前が新しく閲覧するデータとしてＴｏｐＮａｍｅに設定された後、Ｓ１０へ戻る。
またＳ２０において選択された動作が「新規作成」の場合、Ｓ２８へ分岐する。
Ｓ２８では、新規作成サブルーチン「ＮｅｗＩｎｄｅｘ」が実行された後、Ｓ１０へ戻る。
またＳ２０において選択された動作が「内容編集」の場合、Ｓ２９へ分岐する。
Ｓ２９では、使用者がマイク４００を介して入力した編集文章を音声入力回路２０９を介して入力し、対応する内容表示部分の情報のテキストデータが入力された文字データに置き換えられた後、Ｓ１０へ戻る。
またＳ２０において選択された動作が「階層表示」の場合はＳ３０へ分岐する。
Ｓ３０では、「子」のフィールドの名前を順に読み上げる音声が出力された後、Ｓ１１へ戻る。
次に、Ｓ３１では、触覚入出力装置のキートップ１の動作状態が再び入力される。そしてＳ３２において、Ｓ１９で入力した時と同じ状態であるか判定し、同じキートップが引き続き操作されていた場合は、ＣｌｉｃｋＭｏｄｅ＝Ｃとした後Ｓ２０へ戻り、同じキートップが操作されていない場合は、Ｓ１１へ戻る。
なお、Ｓ２１、Ｓ２２及び続くＳ２３とＳ２４、Ｓ３０、Ｓ３１の一連のステップで実現される機能は、請求項１記載の「前記操作信号を入力するとともに操作された触覚操作手段に対応したブロック単位情報を前記情報記憶手段から読み出して音声関連情報を抽出して前記音声発生手段に供給する音声関連情報供給手段」に相当する機能を含むものである。また、Ｓ２５、Ｓ２６、Ｓ２７、Ｓ２８、Ｓ２９のいずれかのステップの実行後にＳ１０に戻って「ＤｉｓｐＩｎｄｅｘ」が実行することにより達成される機能は、請求項１記載の「前記操作信号を入力するとともに操作された触覚操作手段にもとづき前記情報記憶手段の内容を変更する情報変更手段」に相当する機能を含むものである。
なお、上記のように、操作に基づき音声が発生する場合は、前記音声回路の４チャンネルステレオの作用により、その操作がなされた触覚操作手段の位置に対応して所定の音源位置から音声が聞こえるように動作するので、触覚操作により閲覧する情報の位置を把握できるだけでなく、聴覚でもその位置を把握できるという優れた効果がある。
なお、文書データに含まれる「ページタグ」や「フィールドタグ」は、文書管理データに含まれる「ルートタグ」や「ディレクトリタグ」に相当する情報を含むスーパーセットのタグであるので、文書データの「ページタグ」を「ルートタグ」として、また、「フィールドタグ」を「ディレクトリタグ」として扱えば、文書管理データにおける処理（ＴｏｐＴｙｐｅ＝０として行われる処理）と同様に、文書データに含まれるフィールドの階層構造の深さ方向を触覚入出力装置のキートップの列方向の並びに対応付け、同一の階層に含まれるフィールドの列挙方向を行方向の並びに対応付けて表示させることができるので、図示しない手順により、ＴｏｐＴｙｐｅの値を１から０に変更すれば、同一の文書を閲覧する場合でも、レイアウトを確認するのに適した表示と、階層構造を確認するのに適した表示と、異なる表示方式で切換えて閲覧できるという効果がある。
次に、新規作成サブルーチン「ＮｅｗＩｎｄｅｘ」の動作を、図２０に基づき説明する。
まずＳ２０１では、押されたキートップの列と行をそれぞれ、ＮｅｗＸとＮｅｗＹに記憶する。そして音声出力回路から「新しく作成する領域の名前をマイクから入力してください。」という内容の音声が出力される。次にＳ２０２において、利用者が発声した名前が音声入力回路２０９から入力されて、ＮｅｗＮａｍｅに記憶される。
次にＳ２０３では音声出力回路から「新しく作成する領域の左上のポイントにあたるキートップをクリックしてください。」という内容の音声が出力される。次にＳ２０４ではプッシュスイッチ２１の状態が入力され、クリックされたキートップの列と行がそれぞれ、ＮｅｗＸ１とＮｅｗＹ１に記憶される。
次にＳ２０５では音声出力回路から「次は右下のポイントにあたるキートップをクリックしてください。」という内容の音声が出力される。次にＳ２０６ではプッシュスイッチ２１の状態が入力されて、クリックされたキートップの列と行がそれぞれ、ＮｅｗＸ２とＮｅｗＹ２に記憶される。
次にＳ２０６では音声出力回路から「作成するデータの種類をマイクから入力してください。」という内容の音声が出力される。次にＳ２０７では利用者が発声したデータの種類が音声入力回路２０９から入力されて、ＮｅｗＴｙｐｅに記憶される。
次にＳ２０８ではＮｅｗＴｙｐｅの内容が判別され、「ぶんしょう」の場合はＳ２０９へ進み、「さうんど」の場合はＳ２１１へ進み、「いめーじ」の場合はＳ２１３へ進む。
次にＳ２０９では、Ｓ２０４とＳ２０６で指定されたキートップ領域に対応する文章の文字数Ｎを演算した後、音声出力回路から［ピッという合図の後に、Ｎ文字程度の文章をマイクから入力してください。ピッ」という内容の音声が出力される。次にＳ２１０では利用者が発声した文章が音声入力回路２０９から入力されて、ＮｅｗＤａｔａに記憶された後、Ｓ２１５へ進む。
一方Ｓ２１１では、音声出力回路から「追加するサウンドデータの格納されたファイル名をマイクから入力してください。」という内容の音声が出力される。次にＳ２１２では利用者が発声したサウンドデータのファイル名が音声入力回路２０９から入力されて、ＮｅｗＤａｔａに記憶された後、Ｓ２１５へ進む。
またＳ２１３では、音声出力回路から「追加するイメージデータの格納されたファイル名をマイクから入力してください。」という内容の音声が出力される。次にＳ２１４では利用者が発声したイメージデータのファイル名が音声入力回路２０９から入力されて、ＮｅｗＤａｔａに記憶された後、Ｓ２１５へ進む。
次に、Ｓ２１５では、文書データの構造表示部分の、現在の「Ｋｅｙ−Ｘ」「Ｋｅｙ−Ｙ」に対応したインデックスフォームのタグの間に、新しいインデックタダが追加される。その際インデックスタグのパラメータは次のように設定される。
ｎａｍｅ＝ＮｅｗＮａｍｅ
Ｘ＝ＮｅｗＸ、Ｙ＝ＮｅｗＹ
Ｘ１＝ＮｅｗＸ１、Ｙ１＝ＮｅｗＹ１
Ｘ２＝ＮｅｗＸ２、Ｙ２＝ＮｅｗＹ
次に、Ｓ２１６では、文書データの内容表示部分に、ＮｅｗＴｙｐｅに対応したタグが追加される。すなわちＮｅｗＴｙｐｅが「ぶんしょう」の場合は名前がＮｅｗＮａｍｅなるテキストデータが追加され、ペアタグに挟まれた部分にＮｅｗＤａｔａが設定される。またＮｅｗＴｙｐｅが「さうんど」の場合は名前がＮｅｗＮａｍｅなるサウンドデータが追加され、ファイル名の部分にＮｅｗＤａｔａが設定される。同様にＮｅｗＴｙｐｅが「いめーじ」の場合は名前がＮｅｗＮａｍｅなるイメージデータが追加され、ファイル名の部分にＮｅｗＤａｔａが設定される。以上で、ＮｅｗＩｎｄｅｘの動作が終了する。
次に、触覚入出力装置の第１の実施例に適用するのが望ましい、キートップの掃除準備用サブルーチン「Ｃｌｅａｎｉｎｇ」の動作に付いて、図１９に基づき説明する。
Ｓ４００では、触覚入出力装置の全てのキートップを最高の高さに設定する。
続いてＳ４０１では「装置の掃除を行います。操作カバーを外して、操作カバーを掃除してください。キートップも掃除してください。掃除が終了したら操作カバーを取り付けた後に、「おわり」と発生してください。」という内容の音声が出力されて、Ｓ４０２へ進む。
Ｓ４０２では音声入力をチェックして「おわり」と入力されたらＳ４０３へ進む。
Ｓ４０３では、全てのキートップを平面状態に設定して、サブルーチンの動作を終了する。
次に、触覚入出力装置の第１の実施例に適用するのが望ましい、キートップの高さ調節サブルーチン「Ｃａｌｉｂｒａｔｉｏｎ」の動作に付いて、図２１に基づき説明する。
Ｓ５０１では、「高さ調整したいキートップをクリックしてください。調節メニューを終了したい場合は「おわり」と話してください。」という内容の音声が出力される。
次にＳ５０２でプッシュスイッチ２１の動作状態を入力する。
次にＳ５０３でクリック操作が行われたキートップを検出し、検出されたらＳ５０４へ進み、検出されなかったらＳ５０２へ戻る。
Ｓ５０４では、「キートップの高さ調整を行います。「うえ」「した」「おわり」「やめ」で指示してください。」と音声出力する。
続くＳ５０５では、マイク４００から入力された音声が音声入力回路２０９で処理されてテキストデータで出力されるのでそれを入力して、Ｓ５０６へ進む。Ｓ５０５で入力が一定時間ない場合は、再びＳ５０４へ戻る。
次にＳ５０６でその入力データが評価され、「うえ」の場合はＳ５０７へ、「した」の場合はＳ５０８へ、「おわり」の場合はＳ５０９へ、「やめ」の場合は、このサブルーチンの動作を終了する。
Ｓ５０７ではそのキートップを若干突出方向に修正駆動して修正履歴を記憶した後Ｓ５０６へ戻る。Ｓ５０８ではそのキートップを若干引っ込む方向に修正駆動して修正履歴を記憶した後にＳ５０６へ戻る。Ｓ５０９では修正履歴に記憶されている修正値をＨＤＤ２０４などの非揮発性の記憶媒体に記憶した後、修正履歴をクリアしてＳ５０５へ戻る。
こうしてＳ５０４からＳ５０９の動作により、所定のキートップの修正値がＨＤＤ２０４などの非揮発性の記憶媒体に記録され、次から実行される処理ではこの値が反映されるので使用者が「同一平面の状態だ」と認識できる平面位置にそれぞれのキートップを位置決めできるので、部品の製造上の誤差を吸収でき、装置を安価に製造できるようになるとともに、使用者の触覚感覚のばらつきを吸収できるという効果がある。
なお、本実施例では２次元平面に展開可能なデータ構造を有する情報はあらかじめブロック単位情報に分割されて記憶手段に格納されていたが、視覚障害者が閲覧したい情報は必ずしも装置の記憶領域に記憶されていることわけではなく、以下に示すように情報設定手段が、閲覧する情報を所定の大きさのブロック単位に分割抽出して記憶手段に記憶するようにして、既存の文書データを閲覧できるようにするのが現実的である。
図２２は、この情報設定手段の動作を示すサブルーチン「ＢｌｏｃｋＤａｔａ」のフローチャートであり、適宜後述する「メインルーチン」を修正してその中からこの動作をサブルーチンとして呼び出せばよい。
まずＳ６０１では、ワープロソフトなどで作成された文書を外部記憶媒体などの情報入力手段を介して入力する。または、モデムを使ってインターネットにアクセスし、サーバーからＨＴＭＬやＸＭＬで記述されたホームページを読み込む。Ｓ６０１で実施される機能は、請求項２３に記載の「情報入力手段」に相当する。
これらの情報は、実施例の「手紙」のように画面上に実際に表示される文書の場合や、実施例の「特許君蔵書」のように、情報の階層構造を扱う情報の場合、実施例の「パソコン機能」のように、装置の単位機能を階層的に構成した情報などがある。またプログラムの対応次第では、これらを複合した情報であってもよい。
これらの情報は、改ページコードで分割されるページ構造、改行コードなどで分割される段落構造、アウトラインデータで指定される段落間のアウトライン構造（階層構造とも呼ばれる）、レイアウト枠などで構成されるレイアウト構造、挿入個所を指定して文書中に挿入されているオブジェクトデータ（イメージデータや表、サウンドデータなと）などで構成されるデータ構造、リストコードを使って列挙表示されるリスト構造、テーブルコードで指定されるテーブル構造などが、それぞれ電子的に識別可能なように構造記述子で記述されているので、これに着目して情報を複数のグループに分割する。この機能は、請求項２３に記載の「グループ分割手段」に相当する。
また、構造記述子の解析やグループ分割の過程で、グループ間の親子関係などの階層構造に関する情報が得られる場合はこれを記録する。この機能は、請求項２３に記載の「階層構造抽出手段」に相当する機能である。
ここで、グループ分割に構造記述子を用いることは、文書の作成の段階で作者が同じグループに属する情報としてこれらの構造記述子を利用していることに由来しているからであり、記載内容、情報の種類、表示形式、表示される領域、グループの階層関係などの概念で同一のグループに属しているからである。むろん上記に列挙した以外の構造記述子に基づきグループに分割してもよいし、すでに他の規則により情報が構造的に格納してある場合はその結果を利用すれば良い。
次にＳ６０２では、表示する際の「領域」という概念がある情報に関しては、そのグループが文書中で占める領域に関する情報を求める。これは実施例のフィールドにおける「文字領域」に相当する概念の情報である。
具体的には、そのグループの情報が占める領域が構造記述子の中に指定されている場合はその情報に基づき求められる。または、実際に人が認識できる形で表示させた場合に文書中で占める領域を演算した結果に基づき求められる。
この際、文字の場合はフォントのサイズや書体を考慮すれば同じ文字数でもレイアウト上では少ない領域を占める場合もあるし、そのグループに文字と写真が混在している場合はそれらを考慮して表示される際の領域を求める必要がある。また、ホームページのように表示する画面の縦横比に応じて動的に表示領域が変化するように定義されている構造記述子の場合は、実際に使用する触覚ディスプレイの列数と行数の縦横比を採用して画面で表示された際の領域を求めるようにしても良い。Ｓ６０２で実行される機能は、請求項２３に記載の「グループ領域抽出手段」の機能に相当する。
次にＳ６０３では、使用する触覚入出力装置に備わるキートップ１の列数Ｘと行数Ｙとで分割される２次元マトリックスに並ぶ各キートップ１と各グループとの対応関係を求める。実施例でのインデックスデータにおける「インデックスポイント」を決定することがこれに相当する。この際、前記ディップスイッチ１０６の設定情報から、使用する触覚入出力装置のキートップの列数や行数などの仕様を考慮して決定されるので、仕様によって分割処理は異なる結果になる場合があることは言うまでもない。
具体的には、グループ化された情報に対して利用者がキートップ１を介して選択的にアクセスできるために、１つのグループは少なくとも１つ以上のキートップに割付られるとともに、同じキートップには１つ以下のグループだけ割付けられるように、適宜次の処理を行う。
１．隣接する複数のグループの内容を１つのグループにまとめ、それを１つのキートップに割付ける。その結果、利用者がキートップの操作によりアクセスできる情報ブロックは統合ざれた内容の情報になる。（グループの統合）
２．階層的な構造を有する情報の場合、複数のキートップに割り付ける必要のあるグループ群の共通の上位階層のブロックを、１つのキートップに割付け直す。（上位階層のブロックの割付）
３．キートップに既に割付けられているグループを、隣接する未割付のキートップに割付け直して、新たに未割付になったキートップに未割付のグループを割付ける。（割付位置の移動）
ただし、移動する場合は、実際に表示される位置とかけ離れた位置に対応するキートップまで割付位置が移動されることは望ましくないので、その場合は、「グループの統合」か「上位階層のブロックの割付」を実施して割付に必要なキートップの数を減らし、実際に表示される位置に即した位置に表示できるようにして、むやみな移動は行わないほうが良い場合もある。
一方、割付できるキートップが余っていて個別にキートップに割付けられる場合でも、同時に表示すべき階層が構造記述子で明確に指定されている場合や、他のキートップに割付けられているグループの文章内の階層とのバランスを考慮する場合は、あえて下位のグループを割り付けないようにする場合もある。
実施例の「手紙」の「本文」のような場合はこれに相当し、「本文」という概念のフィールド（ここで言う「グループ」の実装の形といえる）は、手紙の構造として一般に認識しやすい他の「宛先」「時候の挨拶」「結文」などのフィールドと同じ表示で認識したほうが理解しやすいので、未割付のキートップが周囲に空いていても、あえて「本文」というフィールドを１つのキートップに割付けしたほうが望ましい。これは、ＨＴＭＬやＸＭＬのような構造記述言語を使って、情報の階層構造を記述したインターネットのホームページなどを表示する際には、特に考慮されるべきことである。
また、未割付のキートップの数が多い場合は、Ｓ６０２で求めたグループの占有領域に対応して複数のキートップに同一のグループを割り付けるとともに、隣接するグループとの識別が可能なように識別データを演算しておけば、使用者がキートップを触覚操作する際に発生する領域識別音で、そのグループがキートップの２次元マトリックス上でどの領域に渡って存在している情報であるかを把握できる。実施例における「インデックス領域」の概念がこれに相当する。
また、グループが階層構造を有する場合、所定の階層に含まれるグループのみではなく、下位グループの展開後のキートップへの割付も実施する。すなわち、展開操作によって新しく割付可能になったキートップを対象に下位の複数のグループを割り付けていく。その際使用されるキートップの領域は、全画面を使用する場合はすべてのキートップを対象とするが、実施例の「特許君蔵書」や「パソコン機能」のように上位の階層の情報をキートップに表示させたまま、別のキートップ領域で、下位の情報を展開するような場合は、そのキートップ以外のキートップ領域を使って割付ければよい。
その際、「特許君蔵書」のように、階層の深さ方向をＸ（ないしはＹ）方向に採用し、下位のグループはそれに直交するＹ（ないしはＸ）方向に並ぶキートップに割付けていけば、実施例の８ｘ８の触覚ディスプレイでも、それぞれ８のブロックを含む８階層に及ぶ情報を展開表示でき、かつ展開表示されている情報の親子親戚関係の表示が維持されるので、現在選択しようとするブロックの階層構造上の位置を把握しやすい。
これらの処理を再帰的に行って、全てのグループがいずれかの展開画面において１つ以上のキートップに割り付けられるようになるまで処理を繰り返す。
Ｓ６０３で実行される機能は、請求項２３に記載の「マッピング手段」の機能に相当する。
次にＳ６０４では、キートップに割り付けられた「グループ」に含まれる情報を、実施例で示した「フィールドタグ」や「テキストタグ」などの所定のフォーマットにより、ブロック単位情報として記録する。マッピング処理の過程で決定されたグループとキートップとの対応情報は、実施例で示した「インデックスタグ」などの所定のフォーマットで所定の記憶領域に記憶する。
以上のように構成された装置の実際の動作に付いて、以下説明する。
まず、視覚障害者である「特許一筋君」は、ヘッドフォンを装着して、パソコン２００の電源を入れて使用を開始する。すると前述のように動作が進み、特にＳ２では「特許君」が使用している触覚入出力装置の仕様が自動的に読み込まれる。特許君は自宅で使用する装置として比較的安価な８列ｘ８行の普及型の触覚入出力装置を購入してパソコン２００に接続して使用しているので、Ｓ２ではＫＥＹ−Ｘ＝８、ＫＥＹ−Ｙ＝８と設定されることになり、以後インデックスデータは、特許君の使用する触覚入出力装置に適した表示がなされるようになる。
次にＳ３で「初期化を行いますので、キートップから手を放してください。」と出力されて特許君はキートップから手を離すので、キートップに不用意に指の力が加わらないのでパルスモーター１８の駆動がスムースに行われ、結果、全てのキートップ１がいったん平面状態になる。
次にＳ４のメッセージにしたがって「特許君蔵書」とマイク４００に向かって話すと、Ｓ６で図３に示した文書管理ファイルが開かれて、Ｓ７において、ＲｏｏｔＮａｍｅとＴｏｐＮａｍｅに「特許君蔵書」がセットされる。
次に、Ｓ１０で「ＤｉｓｐＩｎｄｅｘ」が実行され、前記の動作にしたがってキートップ１とディレクトリとの対応付けが実施された後に、触覚入出力装置のキートップ１が最終的に図２３に示す状態に駆動設定されるとともに、閲覧している文書の内容などがＣＲＴ２１１で表示される。図中「◎」印は高い突出状態に設定されてＣＲＴ２１１で赤く点滅して表示されているキートップ、「○」印は低い突出状態に設定されてＣＲＴ２１１で赤く点灯して表示されているキートップ、「・」印は平面状態に設定されているキートップのうちＫｅｙＭｏｄｅが「領域」を示す１でありＣＲＴ２１１で緑色で点灯して表示されているキートップ、無印は、平面状態に設定されたキートップのうちＫｅｙＭｏｄｅが「未定義」を示す０でありＣＲＴ２１１で非点灯の表示がされるキートップであることを示す。以下キートップの設定状態を示す図においては同様の表記方法とする。
このように、本発明によれば、そばにいる晴眼者の人が視覚障害者の触覚するキートップの設定状況を触覚しなくてもＣＲＴ２１１で確認できるので、操作にまごついている使用者に対して、正確で適切な助言が行えるという利点がある。
また、キートップが駆動されている間にはヘッドフォンから駆動中を示す効果音が聞こえるとともに駆動が完了すると効果音が終了する。
このように、本発明によれば、キートップの設定中の状態を音声で確認できるので、設定中のキートップを誤認して誤操作してしまうことがないという効果がある。
駆動が完了すると、効果音が終了するので、手で操作パネルの表面を触って、突出しているキートップを触覚する。すると、わずかに凸状の突起があるキートップの大部分は平面状態になっているが、一番左側の列の上から３つのキートップが低い高さで突出していることが識別できる。この触覚操作により、特許君の蔵書を管理している蔵書ファイルの一番上位の階層には、３つのフォルダが存在していることが把握できる。
次に、特許君は一番上のキートップを押した。すると、Ｓ１１の処理により、１列１行のキートップがシングルクリックされたことが検出され、Ｓ２０において「属性表示」動作が選択されて、次のような内容の音声が左上のあたりから聞こえるようにヘッドフォンから出力される。
「ぴっ、研究開発、４項目」
これにより、このキートップは「研究開発」という名前のディレクトリであり、下位に４つのディレクトリが存在していることが簡潔な表現で把握できたので、引き続き特許君はキートップを押しつづけた。すると処理はＳ３１に至りＣｌｉｃｋＭｏｄｅ＝Ｃに設定されて次にはＳ２０からの階層表示に進んで、今度はヘッドフォンから下位のディレクトリの名前が順次読み上げる音声が聞こえる。
「予算、設計図、通信記録、特許」
この音声により、特許君は閲覧したい手紙が格納されている「通信記録」のディレクトリがこのキートップに関連するディレクトリの下位に含まれていることがわかったので、引き続き同じキートップ１をダブルクリックした。
すると、Ｓ１１においてダブルクリックが検出され、Ｓ１７で「画面展開」が選択され、Ｓ２７において新しくＴｏｐＮａｍｅに「研究開発」とセットされ、再び「ＤｉｓｐＩｎｄｅｘ」が実行され、今度は触覚入出力装置が図２４に示す突出状態になる。
同様にして、第２列のキートップを操作し、３項目目のディレクトリである「通信記録」に割り付けられている３行目のキートップをダブルクリックすると、図２５に示す状態になる。
図２５のように、触覚入出力装置の列には、その階層に含まれるディレクトリに対応したキートップが突出し、中でも高い突出高さに設定されているキートップに関してはその一つ右側の列にその下位のディレクトリが展開されているとともに、左側の列には、その階層の上位のディレクトリが展開されている。
このように、本発明によれば、使用者はキートップの設定状態を触覚することにより、現在展開されている階層の深さや、展開されている項目が属する階層における他の項目との位置関係や、他の項目の名前などを、容易に認識できるという効果がある。
この実施例のような蔵書管理以外にも、図書館の書籍の分類管理データや辞書、パソコンメニュー構造、プログラムの動作状態など、階層的な構造を有する情報の構造を適切に把握しながら閲覧するのに本発明が有効であることは言うまでもない。
次に３列１行めのキートップをクリックすると、「ぴっ、手紙」とヘッドフォンから聞こえたので、目的の文書であることを判断して、引き続きダブルクリックする。すると「手紙」の文書ファイルが新たに読み込まれて、目的のガンバ先生への手紙が図２６に示すように、触覚入出力装置のキートップ１に表示される。
図中「○」ないしは「◎」のキートップの部分は触覚するだけでそのキートップにフィールドが対応つけられていることが認識でき、特に「◎」のキートップには、下位の階層が割り付けられていることが容易に認識でき、それらのフィールドのレイアウト関係が容易に認識できる。
このように、本発明によれば、キートップの状態を、異なる３種類の識別状態に設定できるので、所定のキートップを他のキートップと区別して表示可能であり、文書管理データのディレクトリ表示において現在展開されているディレクトリをハイライト表示したり、文書データにおいて下位のフィールドが関連付けられている項目のキートップをハイライト表示したりすることが可能になり、音声による表示によらずに触覚で識別できるような表現が行えて、データのレイアウトや構造を理解しやすいという効果がある。
特に、本発明の触覚入出力装置の各実施例では、触覚操作手段の、突出高さ、振動態様、音声表示により、触覚操作に基づく触覚操作手段の設定状態を複数に表示できるので、触覚による認識が容易で、かつ、設定状態を区別させるために平面方向に見て少ないスペースで３以上の設定状態を表現できるという効果がある。
さらに、図中４列３行目の低い高さのキートップをシングルクリックすると、「ぴっ、時候の挨拶、３６文字」と音声で表示され、手紙の「時候の挨拶」という概念の内容が手紙の上部の部分に記述されていることが的確に把握できる。さらに図で「・」で示されている平面状態に設定されている３行目にならんだキートップを指でシングルクリックして確認すると、「ぴっ、時候の挨拶、３６文字」と表示されて、特に一番最初に発声される「ぴっ」という領域識別音は、４種類の、隣接する別の領域とは異なる音色で設定されているので（図ではｄという種類の音色）、その音色を聞くだけでそのキートップは「時候の挨拶」と同じ領域に属することが識別でき、次々にシングルクリックしていけば「時候の挨拶」が割り付けられている領域を識別できる。
このように、本発明によれば、情報の大まかな構造と位置関係は、キートップ１の２次元マトリックス上での分布と設定状態で識別できる一方、キートップ１をシングルクリックするとそのキートップ１に関連付けられたフィールドの属性情報を音声で確認できるので、その属性情報に含まれる領域識別音により各フィールドの占める領域が確認可能で、文書の構造やレイアウトを理解しやすいという効果がある。特に実施例のように、機械的にキートップを駆動させる方式の触覚入出力装置では、キートップの駆動は少なくしたい。従って平面状態のままでも必要に応じてそ領域を識別できる方式は有利である。
次に、４列３行目のキートップをダブルクリックするかシングルクリックしてそのままキートップを押しつづけていれば、動作は「内容表示」に移り、「拝啓 初秋の空が…」という時候の挨拶の内容が音声で出力される。
このように、本発明によれば、例えば実際は多数の文字で構成される内容でも、それをフィールドというブロック単位情報でグループ化してそれを一つのキートップに割り付けるとともに、そのキートップを押下操作するとその内容が音声で出力されるので、従来のように文字数毎にキートップを設置する必要がなく、数が限られた安価な触覚入出力装置でも、文書をわかりやすく閲覧できるという優れた効果がある。また、レイアウトを確認する触覚操作だけで内容が発声してしまうという不都合がなく使いやすいという効果がある。
なお、本実施例では、８列ｘ８行の触覚入出力装置を使用しているが、やや高価になるものの、１６列ｘ１６行のキートップを備えた触覚入出力装置を使用しても良い。その場合、プログラムにより自動的にその仕様が判別されて、同じ「手紙」の文書を閲覧した場合でも、図２７のような表示になる。この表示を図２６と見比べれば、図２６では７行目の「結文」と８行目の「追伸」には同じ「１行」で表現されていた領域が、表現能力が高い触覚入出力装置では、それぞれ１行、３行とより実際の文書に近い表現が可能であることがわかる。
このように、本発明によれば、触覚入出力装置の仕様を判別してその仕様に応じてキートップとフィールドなどの対応関係が適切に設定されて処理されるので、使用する触覚入出力装置に応じて適切に文書が閲覧できるという効果がある。
なお、本実施例で使用した文書は、８列ｘ８行で表現できる文書データであったが、もっとレイアウトが精細な文書では、ひとつの階層の表示が８列ｘ８行のキートップでは表現しきれない場合があり、その場合、インデックスデータは１６列ｘ１６行用のデータのみで記憶されている場合がある。その場合は図３５に示すように、１６列ｘ１６行を４つの８列ｘ８行に分割するとともに、４つのスクロール指定スイッチを配置し、その操作に基づき、表示する分割エリアを切り替えて表示させると、安価な触覚入出力装置でもレイアウトが精細な文書を閲覧できるようになるという効果が生まれる。
具体的には、図中左上のＡのエリアを表示させる場合は、左上のスクロールスイッチを操作すればよい。この際、スクロールスイッチの操作状況を、図のようにキートップの突出高さで表示すれば、現在表示されている分割エリアがどこのエリアか識別できてさらに好適である。もちろん固定的なスイッチで構成しても良い。
次に、図２６において、４行５列の高い突出状態のキートップをシングルクリックすると、「ぽっ、本文、４項目」と発声されて、このキートップには、４項目からなる本文が割り付けられていることが識別できるので、引き続きそのキートップをタブルクリックする。すると「画面展開」の動作が行われて「本文」の内容が詳しく表現されて、図２８の状態になる。参考のために示せば、１６列ｘ１６行の触覚入出力装置を使用している場合は図２９の状態になる。
この状態でキートップを触覚すれば、「はじめに」「実験結果の表」「実験結果の説明」「実験の考察」が所定の位置で、所定の領域を占めていることが読み取れる。さらに８列４行の「実験結果の表」をダブルクリックすると、新しく図７に示した「ｃ：￥ｒｅｓｕｌｔ．ｄａｔ」というデータが読み込まれ、ＴｏｐＮａｍｅに「実験結果の表」が設定されて所定の動作が行われ、結果的に図３０（１６列ｘ１６行の場合は図３１）の状態になる。各図中それぞれのキートップには表題や表頭表側の項目、表のセルなどが対応付けられて、例えば所定の表のセルに対応したキートップをダブルクリックすると、そのセルのデータの内容を音声により確認できる。
このように、本発明によれば、表のようにフィールドが多くなりがちな情報で１画面ではキートップの数が不足する場合でも、データが階層的に構成されていてその階層構造に応じて適切にキートップとフィールドとの対応情報が設定されるので、文書を適切な階層に別けて表示することが可能で、文書を見通しよく閲覧できるという優れた効果がある。
このような閲覧方法により同様に「手紙」の「追伸」の中にある「スナップ」（図６に示すスナップ写真を表現したデータ）を閲覧することが出来る。具体的には図２６で４列８行のキートップをダブルクリックすると図３２に示す状態になるのでさらに６列２行のキートップをダブルクリックすると、「ｃ：￥ｐｉｃｔｕｒｅ．ｄａｔ」というデータが読み込まれて図３３のように表示される。
視覚障害者にとって、図６に示したオリジナの写真を閲覧することは極めて困難である。狭いピッチで突出量をコントロールできる触覚ピンによりレリーフ状でイメージを触覚できる装置のアイデアも提案されてはいるが、どれも驚くほど装置が高価であるし、単にレリーフで写真の明暗を表示するだけでは内容が良く分からないという欠点があり実用になっていない。ところが、本発明をこのような「写真」や「絵画」を閲覧する目的で応用すれば、これらの課題が解決できる。
具体的には、晴眼者の協力により図６に示した写真を着目すべき領域に分割し、この分割された領域をフィールドとして登録するとともに、その部分の説明をテキストデータないしはその写真のイメージを表現するサウンドデータで記述するのである。
このようにして作成されたデータ（図５参照）を触覚入出力装置で表示すると、図３３に示すようになる。参考のため各フィールドの名前を対応するキートップ領域に付してある。実施例では簡単のために、例えば「ガンバ先生」を説明するには単一のフィールドで表現しているが、「なさけない顔」や「寒そうな頭」などと複数の下位フィールドで構成してより詳細に表記することもむろん可能であり、これを実際に行うには、今まで説明した技術の概念を応用すれば容易であることは言うまでもない。
このように、視覚障害者にとって不可能であった写真や絵画の鑑賞も、本発明を利用して「２次元平面に展開可能なデータ構造を有する情報」としてとらえ、その写真や絵画の特徴ある部分を説明する情報をブロック単位情報として記録するようにして本発明を適用すれば、その写真や絵画の内容を容易に理解できるという効果がある。
図６に示す写真に関する実施例は、芸術センスのない出願人によるものであるのでつまらない内容ではあるが、ゴッホやルノアールなど、今まで視覚障害者にとっては縁のなかった名画も、その絵画を見て感じた感動を、音声や音楽を使って表現し直してくれる各分野の芸術家の協力があれば、その絵画の視覚的情報を超えた新の芸術性までも伝えることができるであろう。
なお、使用途中で、触覚入出力装置のキートップに所定の情報が展開されている状態を記憶するコマンドを用意して、それを実行し、任意の名前を指定してその状態の情報をＨＤＤ２０４に記憶しておくとともに、使用を再開した際にその名前を指示して読み出し、中断した状態に復帰させるようにすれば、操作性が向上する。記憶する情報の中には、その情報を表示させるに至った上位の階層の情報も合わせて記憶しておけば、再開時に上位の情報へ戻ることができるので便利である。
次に、特許君は手紙の日付を書き忘れたことに気づいたので、マイク４００に向かって「へんしゅう」と話す。すると、Ｓ１４でそれが評価され閲覧モードから編集モードに変更される。
次に、図２６の状態で、新しく日付を書き込みたい場所の代表ポイントとして７列１行のキートップをダブルクリックする。すると、Ｓ２０で「新規作成」が選択され、サブルーチン「ＮｅｗＩｎｄｅｘ」が実行される。途中音声アナウンスに応じて、フィールドの名前は「日付」、左上と右下のポイントをそれぞれ「６列１行」「７列１行」、ＮｅｗＴｙｐｅを「ぶんしょう」と指定する。その後アナウンスにしたがって「へいせい、じゅうねん、くがつ、じゅうさんにち」とマイク４００に入力すると、「手紙」の文書データに「日付」という名前のフィールドが追加されて図４に示した編集後のデータになり、触覚入出力装置も新しいデータにしたがって変更されて、図３４に示す状態になる。
このように、修正したい部分をレイアウトを確認しながら所望の位置にキートップで指示できるとともに、使用者の声を入力してそこに含まれる情報を抽出して、操作されたキートップに関連したフィールドの記憶内容を更新することができるので、効率的に文書の内容を編集できるという効果がある。
また視覚障害者は、操作パネルの表面の汚れを視覚で確認できないので前述した掃除機能などのメンテナンスを行うタイミングを得にくい。したがってサブルーチン「ＤｉｓｐＩｎｄｅｘ」をコールした回数を、ＨＤＤ２０４などの不揮発性の記憶媒体に記憶しておき、一定回数コールされたら操作パネルの掃除を行う旨のメッセージを出力するようにすると、掃除のタイミングが得られて操作パネルをいつも清潔な状態に維持することが可能である。
また、所定の情報を閲覧していくと、図１３に示したメモリ２０２に設定された記憶領域の記憶内容（以下、状態情報と称する。）は、閲覧操作に応じて逐次変更されていくので、例えば「ＤｉｓｐＩｎｄｅｘ」をコールする毎に、その時点の状態情報を、ＨＤＤ２０４の所定の記憶領域に記憶すると、停電で突然装置の電源が切れてしまったり、利用者が電源を突然切ってしまったりした時にも、ＨＤＤ２０４に記録された状態情報に基づき最新の状態に復帰させることが可能である。
また、利用者が任意の時点での状態情報を、後から利用できるように名前を付けてＨＤＤ２０４に保存できるようにするとよい。実施例では、Ｓ１４において「じょうたいきおく」コマンドを認識できるようにして、次のステップで利用者から保存する名前を入力し、その名前で、その時点の状態情報をＨＤＤ２０４に記録すればよい。また、ＨＤＤ２０４に記憶された複数の状態情報の中から、再現させたい状態を名前で指定して読み出し、メモリ２０２に設定すれば、その状態に至るまでの操作を行わなくても、情報の閲覧状態を所望の状態にできる。
以上、本発明の実施例を説明するのに、例に上げた具体的なデータと、詳細なフローチャートを使って説明したが、以下には、この発明を応用すると効果のある形態に付いて、図面に基づいて簡単に説明する。以下の説明では、上記の説明で明確になった本発明の技術思想を適宜応用すれば達成できることから、具体的なデータと詳細なフローチャートは開示しない。
まず、パソコンなどの所定の装置の機能を選択的に実行するためのユーザーインターフェースに本発明を応用したものを説明する。
図５５は、パソコンの所定の機能を階層的に表現したものであり、「ホームページ閲覧」「メール送受信」「文書閲覧」という最上位の機能から、それぞれの機能を構成する下位の機能に展開されている。このようにパソコンの機能は、単位機能の集まりとして階層的に扱うと、それらの単位機能を、本発明の触覚入出力装置を用いて階層的に表現しながら所望の機能を指定して実行させるという応用ができる。
また、図５６は、図５５のパソコンの機能へアクセスするのに適したユーザーインターフェースを提供する触覚入出力装置のキートップの使用例を示す図である。
図５６の左下のキートップは、「スタートキー」としての機能が固定的に割り付けられている。この「スタートキー」は、現在パソコンの主流のＯＳで採用されている「スタート」キーに相当していて、視覚障害者は何はともあれ、このキーを操作することで、パソコンの機能にアクセスできるようになっている。
図５７は、実際に利用者が「スタートキー」を操作して、図５６の「デスクトップ領域」に、図５５に示すパソコンの機能の階層構造（図６３に対応するデータを示す。）を表示させて、「ホームページ閲覧」「設定」「アカウント」を順に選択した後、設定すべき「電話番号」「ユーザー名」「パスワード」という最終的に設定すべき入力項目に対応したキートップを表示させた状態を示している。
ここで「電話番号」をクリックすると、この項目がインターネットのアクセスポイントの電話番号を入力する項目である属性情報が表示され、ダブルクリックすると、Ｓ２２でコマンドデータであると判断されてＳ３３で、”ＳｅｔＴｅｌＮｏ．ｂａｔ”に指定されているパソコンの単位機能が実行される。具体的には「電話番号を入力してください。」というメッセージの後に、マイクから電話番号を設定する機能が実行される。
このように、ブロック単位情報には、表示に関する情報のみならず、パソコンの単位機能に関する情報も含めるので、階層的に構成されたパソコンの単位機能の中から、所望の単位磯能を簡単に指定して、所望の単位機能を実行させることができる。
次に、利用者は、「ホームページ閲覧」の下位のキートップの中に「接続」という機能が割り付けられていることをクリックにより確認した後にダブルクリックする。すると、ホームページ閲覧プログラムはモデムを制御してパソコンをインターネットに接続させ、所定のアドレスのホームページデータをダウンロードして、ＨＴＭＬデータに含まれる構造記述子を適宜解析して、デスクトップ領域で使用できるキートップの数に応じた適切な表示を行い、ホームページを、図５８に示すようなキートップの設定状態として表示させる。利用者は、適宜キートップを操作しながら必要な情報を閲覧できる。
一方、図５６に示すように、最下行の「スタートキー」の右に並ぶキートップ群は「タスクバー」であり、同様に主流のＯＳでも採用されている「タスクバー」に相当する。この「タスクバー」に属するキートップ１には、「スタートキー」に基づいて起動されたプログラムが生成するウインドウが割り付けられ、図５８では、デスクトップ領域で表示中のホームページ閲覧ソフトのウインドウが割り付けられている。
このタスクバーに含まれるキートップは、後述する「デスクトップ領域」でそのキートップに対応しているウインドウに含まれる下位の情報が展開表示されている場合には、タスクバーに含まれるキートップの突出高さを高くするなどのハイライト表示が設定され、デスクトップ領域で展開表示されていない場合は、タスクバーに含まれるキートップは突出高さが低い表示が設定される。この表示形式は、請求項９に記載の発明に相当しており、すでに下位の情報が対応付けられていることが自明なタスクバーのキートップに関しては、その識別状態の設定を、展開済みか否かの識別に用いるのである。
また、タスクバーのキートップをダブルクリックするとデスクトップ領域への展開状態と非展開の状態とを交互に切換えられるように、適宜制御プログラムを実装すれば、限られたデスクトップ領域のキートップを、複数のウインドウで切換えながら利用できる。具体的には、図５８のタスクバーの中のキートップをダブルクリックすれば、デスクトップ領域での表示が非表示となって、図５９に示す状態になる
また、よく使う文書やプログラムを、デスクトップ領域の所望の位置のキートップに関連付けて「アイコン」として記憶しておいてもよい。図５６の右上の２つのキートップは、別途所定の手順により前述の「手紙」と「スナップ」が対応付けられたキートップを示している。
キートップをアイコンとして利用すると、いずれのウインドウもデスクトップ領域で展開されていない時に、触覚入出力装置のいつもの場所のアイコンを操作するだけで、よく使う文章や機能に容易にアクセスできるようになる。具体的には、キートップをクリックするとそのキートップに対応付けられている文書名を簡潔に表示させ、ダブルクリックすることでその文章を展開表示できる。
このようにして、必要に応じてパソコンのスタートキーを操作してパソコンの機能を実行させ、デスクトップ領域を有効に使いながら、パソコンの所望の機能を利用して情報を閲覧したり編集することが可能になり、パソコン操作に不慣れな視覚障害者でも簡単に利用できるという効果がある。
最後に、視覚障害を持つ子どもが、算数を学習する場合に有効な応用例を上げておこう。図６０は、子どもが苦手な分数の計算を学習するために用意された教材を示す図である。
図では、２分の１と３分の１の足し算が課題である。そしてその課題を達成するための道筋として、それぞれの分母を通分するステップと、通分した分数の分子を加えるステップに対応して、数字の部分が空白の式が記載されている。課題の用紙には、それぞれの式の空白の部分に、どんな数字を入れるのか説明が文章で記載されていて、子どもはそのアドバイスを見ながら、課題に取り組むのである。
図６１は、同一の課題を、本発明の装置を使って表現した初期の図であり、図６２は、学習の最終段階の図である。
図からわかるように、キートップは、それぞれ数字や分数の横棒、プラス記号や等号などに対応した位置に表示されている。例えば、左端に３つ並んだキートップは、上から「１」「−」「３」に対応していて、下から順にクリックすると「さん」「ぶんの」「いち」という音声が表示される。また、右端に３つ並んだキートップは同様に、下から順に「解答欄」「−」「解答欄」に対応し、「解答欄」のキートップはハイライト表示され、解答を記入する欄であることを示している。そこで、子どもが分母のキーを押しつづけると、解答を考える上でのヒントが次のように音声で表示される。「２分の１と３分の１を通分しようね。」
このヒントを聞いて、子どもは左辺の分母の数を触覚してそれぞれ、「３」と「２」であることを確認し、右辺のそれぞれの分母に「６」と解答すべきであると理解する。そして、右辺の分母のキートップをダブルクリックして、音声で「ろく」と入力することで、分母の空白の部分に、それぞれ解答の「６」を入力できる。
同様にして、子どもは、分子にも解答を入力すると、制御プログラムはその内容が正しいことを判断して次のステップに進み、図６２に示す表示になる。
子どもは、新しく表示されたキートップの表示形態を触覚すると、右辺の分数を、１つの分数にまとめればよいというヒントを得て、空白のキートップの部分にそれぞれ同様な方法で「５」と「６」を入力する。すると、制御プログラムは課題が達成できたことを判断し、「よくできました。」と出力する。
以上のように、数字や記号の位置関係など、構造的な概念を用いた認識が不可欠な算数の学習課題に関して、本発明を応用することで、効率的な学習が行えることがわかる。
上記の分数計算の課題シートはあらかじめ定められた数式の空白部分に数字を埋めていく単純な例であったが、本発明を応用すれば、複雑な構造を有する方程式を、利用者が階層的に入力していくことで、より複雑な構造の方程式を用いた高度な学習に利用できることは言うまでもない。
産業上の利用可能性
以上のように、本発明にかかる視覚障害者用情報処理装置は、視覚障害者用の情報閲覧装置や文章作成装置として有用であり、また、本発明にかかる触覚入出力装置は、視覚障害者用情報処理装置などの入出力装置として有用である。
【図面の簡単な説明】
図１は、本発明のクレーム構成図である。
図２は、本発明の視覚障害者用情報閲覧装置の構成を示すブロック構成図である。
図３は、閲覧する文章の階層的な管理構造を記録したデータを示す図である。
図４は、文書データの例を示す図である。
図５は、「スナップ」のデータを示す図である。
図６は、「スナップ」の画像データを示す図である。
図７は、「実験結果の表」のデータを示す図である。
図８は、タグの定義の説明図である。
図９は、タグの定義の説明図である。
図１０は、「特許君蔵書」で示されるディレクトリの階層構造を示す図である。
図１１は、「手紙」のフィールドの階層構造を示す図である。
図１２は、「手紙」の文面とフィールドの階層構造との対応を示す図である。
図１３は、メモリに設定された記憶領域のデータ構成を示す図である。
図１４は、メインルーチンのフローチャート（前半）を示す図である。
図１５は、サブルーチン「ＤｉｓｐＩｎｄｅｘ」のフローチャートである。
図１６は、メインルーチンのフローチャート（後半）を示す図である。
図１７は、動作対応表を示す図である。
図１８は、属性表示の発声パターンを示す図である。
図１９は、サブルーチン「Ｃｌｅａｎｉｎｇ」のフローチャートである。
図２０は、サブルーチン「ＮｅｗＩｎｄｅｘ」のフローチャートである。
図２１は、サブルーチン「Ｃａｌｉｂｒａｔｉｏｎ」のフローチャートである。
図２２は、サブルーチン「ＢｌｏｃｋＤａｔａ」のフローチャートである。
図２３は、「特許君蔵書」閲覧時のキートップの設定状態を示す図である。
図２４は、「研究開発」閲覧時のキートップの設定状態を示す図である。
図２５は、「通信記録」閲覧時のキートップの設定状態を示す図である。
図２６は、「手紙」閲覧時のキートップの設定状態を示す図である。
図２７は、１６列ｘ１６行の触覚入出力装置における「手紙」閲覧時のキートップの設定状態を示す図である。
図２８は、「本文」閲覧時のキートップの設定状態を示す図である。
図２９は、１６列ｘ１６行の触覚入出力装置における「本文」閲覧時のキートップの設定状態を示す図である。
図３０は、「実験結果の表」閲覧時のキートップの設定状態を示す図である。
図３１は、１６列ｘ１６行の触覚入出力装置における「実験結果の表」閲覧時のキートップの設定状態を示す図である。
図３２は、「追伸」閲覧時のキートップの設定状態を示す図である。
図３３は、「スナップ」閲覧時のキートップの設定状態を示す図である。
図３４は、「日付」挿入後の「手紙」閲覧時のキートップの設定状態を示す図である。
図３５は、スクロール表示の説明図である。
図３６は、触覚入出力装置の上面図である。
図３７は、図３６のＡ−Ａ断面図である。
図３８は、４つのキーグループを図３７のＡ−Ａ断面の上方から見た図である。
図３９は、４つのキーグループを図３７のＢ−Ｂ断面の下方から見た図である。
図４０は、電子基板の４つのキーグループに対応する部分を図３７のＣ−Ｃ断面の上方から見た図である。
図４１は、４つのキーグループの昇降ギヤ及びピニオンギヤの位置関係を、図３７のＤ−Ｄ断面の下方から見た図である。
図４２は、位置決め駆動手段の機構を示す図である。
図４３は、昇降ピンの複数の昇降高さについて図３６のＡ−Ａ断面により示した図である。
図４４から図４８は、モーター取り付けフレームがそれぞれ、基準位置、左上位置、左下位置、右上位置、右下位置の際の４つのキーグループの昇降ギヤ及びピニオンギヤの位置関係ならびに位置決め駆動手段の機構の位置関係を図３７のＤ−Ｄ断面の下方から見た図である。
図４９は、操作パネル及び昇降ピンの第２の例に付いて昇降ピンの複数の昇降高さについて図３６のＡ−Ａ断面により示した図である。
図５０は、触覚入出力装置の第２の実施例の構成を示す図である。
図５１は、触覚入出力装置の第２の実施例のワンチップマイコンに内蔵されたプログラムのフローチャートである。
図５２は、触覚入出力装置の第３の実施例の構成を示す図である。
図５３は、振動ピンの構造を示す断面図である。
図５４は、ワンチップマイコンに内蔵されたプログラムのフローチャートである。
図５５は、パソコンの機能の階層構造を示す図である。
図５６は、図５５のパソコンの機能へアクセスするのに適したユーザーインターフェースを提供する触覚入出力装置のキートップの使用例を示す図である。
図５７は、図５５に示すパソコンの機能の階層構造の表示例である。
図５８は、ホームページを閲覧中のキートップの設定状態を示す図である。
図５９は、図５８で、タスクバーのキートップをダブルクリックした後のキートップの設定状態を示す図である。
図６０は、算数のワークシートを示す図である。
図６１は、図６０に対応したキートップの表示状態を示す図である。
図６２は、図６１の次のステップのキートップの表示状態を示す図である。
図６３は、図５５に示すパソコン機能のデータを示す図である。

Claims (30)

1. 各別に設定された所定の領域における指先での触覚動作に基づく識別状態を２以上の状態に設定可能であるとともにその所定の領域への操作を検出可能に構成された行方向と列方向の２次元マトリックス状に配置された複数の触覚操作手段と、前記所定の領域における操作に基づき所定の操作方法に対応した操作信号を抽出して出力する操作信号抽出手段と、２次元平面に展開可能なデータ構造を有する情報を複数のブロック単位情報で分割して記憶するとともに該ブロック単位情報と前記複数の触覚操作手段との対応関係を示す触覚操作手段対応関連情報を記憶する情報記憶手段と、前記情報記憶手段に所定の情報を設定する情報設定手段と、前記情報記憶手段の触覚操作手段対応関連情報を入力して前記触覚操作手段設定手段に触覚操作手段設定情報を供給する触覚操作手段設定情報供給手段と、触覚操作手段設定情報に基づき前記複数の触覚操作手段をそれぞれ所定の状態に設定する触覚操作手段設定手段と、音声関連情報を入力して音声を発生する音声発生手段と、前記操作信号を入力するとともに操作された触覚操作手段に対応したブロック単位情報を前記情報記憶手段から読み出して音声関連情報を抽出して前記音声発生手段に供給する音声関連情報供給手段と、前記操作信号を入力するとともに操作された触覚操作手段にもとづき前記情報記憶手段の内容を変更する情報変更手段と、からなることを特徴とした視覚障害者用情報処理装置。
2. １つ以上の前記ブロック単位情報は、表示に関する情報である表示情報と、その表示情報に関する属性情報である属性情報とを含むとともに、前記操作信号抽出手段は、表示情報を閲覧するための操作に基づく表示閲覧信号と、属性情報を閲覧するための操作に基づく属性閲覧信号とを少なくとも抽出するとともに、前記音声関連情報供給手段は、前記表示閲覧信号を入力するとその触覚操作手段に関連つけられたブロック単位情報の表示情報に関連した音声を発生し、属性閲覧信号を入力するとその触覚操作手段に関連つけられたブロック単位情報の属性情報に関連した音声を発生することを特徴とした請求項１に記載の視覚障害者用情報処理装置。
3. 前記２次元平面に展開可能なデータ構造を有する情報は複数の単位機能で構成される所定の装置の機能に関連する情報を含み、１つ以上の前記ブロック単位情報は、該単位機能の実行に関する単位機能情報と、単位機能の属性情報である属性情報とを含み、前記操作信号抽出手段は、単位機能を実行するための操作に基づく単位機能実行操作信号と属性情報を閲覧するための操作に基づく属性閲覧信号とを少なくとも抽出し、前記音声関連情報供給手段は属性閲覧信号を入力するとその触覚操作手段に関連つけられたブロック単位情報の属性情報に関連した音声を発生し、単位機能を実行する単位機能実行手段を備え、該単位機能実行手段は単位機能実行操作信号を入力するとその触覚操作手段に関連つけられたブロック単位情報に含まれる単位機能情報に基づいて単位機能を実行することを特徴とした請求項１に記載の視覚障害者用情報処理装置。
4. 前記ブロック単位情報は、１つのブロック単位情報が１つ以上の下位のブロック単位情報に関連付けられるように階層的に構成可能であるとともに、前記操作信号抽出手段は、操作された触覚操作手段に対応するブロック単位情報の下位の階層の情報を展開する操作に基づく下位階層展開信号を抽出可能であるとともに、前記情報変更手段は、前記下位階層展開信号を入力すると、操作された触覚操作手段に対応するブロック単位情報の下位の階層のブロック単位情報が新しく触覚操作手段に対応されるように、少なくとも前記触覚操作手段対応関連情報を変更することを特徴とした、請求項１から請求項３の何れかに記載の視覚障害者用情報処理装置。
5. 前記触覚操作手段対応関連情報は、対応する階層に含まれる複数のブロック単位情報が表示ないしは印刷される際のレイアウトに対応して設定されていることを特徴とした、請求項４に記載の視覚障害者用情報処理装置。
6. 前記触覚操作手段対応関連情報は、触覚操作手段の配列の一方向の並びにはデータの階層構造の深さ方向が対応付けられ、それに直行する方向の並びには同一の階層に含まれるブロック単位情報の列挙方向が対応付けられていることを特徴とした、請求項４に記載の視覚障害者用情報処理装置。
7. 前記情報変更手段は、前記下位階層展開信号を入力すると、操作された触覚操作手段に対応するブロック単位情報の下位の階層の情報を、操作された触覚操作手段以外の触覚操作手段に対応付けるように、前記触覚操作手段対応関連情報を変更するように構成されていることを特徴とした、請求項６に記載の視覚障害者用情報処理装置。
8. 前記触覚操作手段が設定される識別状態は、少なくとも３以上の状態に設定可能であるとともに、少なくとも１つの識別状態は、所定の触覚操作手段が対応するブロック単位情報が下位の階層のブロック単位情報に関連して展開可能である旨またはすでに他の触覚操作手段によって展開表示されている旨を示すために使用されることを特徴とした、請求項４から請求項７の何れかに記載の視覚障害者用情報処理装置。
9. 前記触覚操作手段は、その触覚操作手段が対応するブロック単位情報が下位の階層のブロック単位情報に関連して展開可能である場合に、展開されていない状態と、すでに他の触覚操作手段によって展開表示されている旨を別の識別状態に設定可能であることを特徴とした、請求項８に記載の視覚障害者用情報処理装置。
10. 前記触覚操作手段は複数の群に分類されるとともに、前記音声関連情報供給手段は、属性情報に関連した音声を発生する際に、操作された触覚操作手段が属するグループとそれ以外のグループとを識別するために各ブロック単位情報に割り当てられた領域識別音を出力することを特徴とした、請求項１から請求項９の何れかに記載の視覚障害者用情報処理装置。
11. 前記触覚操作手段設定手段は、設定動作状況を音声で認識可能なように構成されていることを特徴とした、請求項１から請求項１０の何れかに記載の視覚障害者用情報処理装置。
12. 前記触覚操作手段は、所定の基準平面からの操作部の突出高さの状態で、複数の識別状態を構成することを特徴とした、請求項１から請求項１１の何れかに記載の視覚障害者用情報処理装置。
13. 前記触覚操作手段は、各別に設定された所定の領域に設定された操作部への押下操作に基づき出力される音声の形態で、複数の識別状態を構成することを特徴とした、請求項１から請求項１１の何れかに記載の視覚障害者用情報処理装置。
14. 各別に設定された所定の領域に触れる指先に振動を伝達可能な振動手段を備え、前記触覚操作手段は、該振動手段の振動態様により複数の識別状態を構成することを特徴とした、請求項１から請求項１１の何れかに記載の視覚障害者用情報処理装置。
15. 前記触覚操作手段は、各別に設定された所定の領域に指先が接近したことを検出する指先検出手段を含み、前記振動手段は、該記指先検出手段が指先の接近を検出することに基づき前記振動動作を行うことを特徴とした、請求項１４に記載の視覚障害者用情報処理装置。
16. 前記触覚操作手段は、各別に設定された所定の領域に配設された触覚で認知可能な突起などの触覚部と、該触覚部の近傍に指先が接近したことを検出する指先検出手段とを含み、該記指先検出手段が指先の近接を検出することに基づき出力される音声の形態で、複数の識別状態を構成することを特徴とした、請求項１から請求項１１の何れかに記載の視覚障害者用情報処理装置。
17. 前記触覚操作手段は、各別に設定された所定の領域内の指先の押下操作を検出するように構成されていることを特徴とした、請求項１から請求項１６の何れかに記載の視覚障害者用情報処理装置。
18. 操作された触覚操作手段の位置に応じて、複数の触覚操作手段の設定動作の順序を変更することを特徴とした、請求項１から請求項１７の何れかに記載の視覚障害者用情報処理装置。
19. 前記触覚操作手段は、各別に設定された所定の領域内の指先の存在を検出する指先検出手段を含み、該領域外に設定された領域での補助入力操作を検出する補助操作手段が設けられ、前記操作信号抽出手段は、指先検出手段の検出結果と補助操作手段からの補助入力操作に基づき、所定の操作方法に対応した操作信号を抽出して出力するように構成されていることを特徴とした、請求項１から請求項１８の何れかに記載の視覚障害者用情報処理装置。
20. 更新情報を入力する更新情報入力手段を備えるとともに、前記情報変更手段は、操作された触覚操作手段にもとづきその触覚操作手段に関連した前記情報記憶手段の記憶内容を該更新情報入力手段から入力した情報に基づき変更することを特徴とした、請求項１から請求項１９の何れかに記載の視覚障害者用情報処理装置。
21. 前記更新情報入力手段は、マイクから入力した音声信号からテキスト情報を抽出する音声入力手段を備えていることを特徴とした、請求項２０に記載の視覚障害者用情報処理装置。
22. 装置の使用時間情報を積算する使用時間積算手段を備え、積算時間情報に基づき装置の保守作業を指示する動作を起動することを特徴とした、請求項１から請求項２１の何れかに記載の視覚障害者用情報処理装置。
23. 前記情報設定手段は、２次元平面に展開可能なデータ構造を有する情報を入力する情報入力手段と、入力した情報に含まれる構造記述子に基づき情報を複数のグループに分割するグループ分割手段と、前記複数のグループ間に親子関係がある場合にその階層構造を抽出する階層構造抽出手段と、前記グループに含まれる情報が表示または印刷の際に領域を占める場合にその領域に関する情報を求めるグループ領域抽出手段と、グループ領域抽出手段と前記階層構造抽出手段の抽出結果に基づいて、前記複数のグループといずれかの階層の表示状態で使われる少なくとも１以上の触覚操作手段との対応関係を設定するマッピング手段とを備え、前記グループに含まれる情報ならびに前記マッピング手段で設定された情報に基づき前記ブロック単位情報ならびに触覚操作手段対応関連情報を設定することを特徴とした、請求項１から請求項２２の何れかに記載の視覚障害者用情報処理装置。
24. １つの駆動モーターで複数の昇降式キートップを選択的に駆動するために駆動力の伝達経路の途中に機械的なクラッチ機構を含めるような構成を含む触覚入出力装置において、フレームと、モーター取り付けフレームと、前記モーター取り付けフレームに固定された複数の駆動モーターと、駆動モーター制御手段と、前記駆動モーターの出力軸に取り付けられた駆動力出力部と、操作入力部を有した昇降式キートップ、前記駆動力出力部と連結して駆動力を入力し前記昇降式キートップを昇降させる昇降式キートップ昇降手段、昇降式キートップを触覚する指先の押下操作を検出する操作検出手段で構成され、前記駆動モーター１つに対してそれぞれ複数フレームに配置されたキーユニットと、前記フレームと前記モーター取り付けフレームとを回転を伴わない平行方向に相対的に駆動して、前記駆動モーターに対応してフレームに配置された複数のキーユニットの中の任意のキーユニットの昇降式キートップ昇降手段に、該駆動モーターの駆動力出力部を連結させる位置決め駆動手段と、から構成されていることを特徴とする触覚入出力装置。
25. 前記キーユニットは、対応した駆動モーターの駆動力出力部を中心とした四角形の頂点に配置されていることを特徴とする請求項２４に記載の触覚入出力装置。
26. 前記駆動モーターはパルスモーターであり、前記駆動力出力部は該駆動モーターの回転出力軸に固着された駆動歯車であり、前記昇降式キートップ昇降手段は該駆動歯車に噛合して回転駆動される被駆動歯車で構成され、前記キーユニットは、前記被駆動歯車と前記被駆動歯車が正常に噛合する第１の取り付け状態と、前記被駆動歯車と前記被駆動歯車の歯先の当接を吸収するためにフレームに対して変位した第２の取り付け状態との２つの状態を取り得るとともに、該第２の取り付け位置から弾性体の付勢力により該第１の取り付け位置へ復元させるように構成されていることを特徴とした請求項２４または請求項２５に記載の触覚入出力装置。
27. 前記昇降式キートップは、その上部が前記フレームに形成されたガイド孔により上下方向に摺動可能にガイドされその下部は前記昇降式キートップ昇降手段に連結されるとともに、前記被駆動歯車の水平方向への退避動作に伴い該ガイド孔にガイドされた部分を中心に揺動するように構成されていることを特徴とした、請求項２６に記載の昇降式キートップを備えた入力装置。
28. 前記昇降式キートップは上部に押下操作を入力する部分が形成され、前記昇降式キートップと前記昇降式キートップ昇降手段は、ねじ結合またはカム接触により連結されて前記昇降式キートップ昇降手段の回転に伴い前記昇降式キートップが前記昇降式キートップ昇降手段に対して上下方向に昇降するように構成され、昇降式キートップ昇降手段の一部は、前記操作検出手段に接触して下側から支持され、前記昇降式キートップに入力された押下操作が昇降式キートップ昇降手段を介して操作検出手段により検出されるように構成されていることを特徴とした請求項２５から請求項２７の何れかに記載の触覚入出力装置。
29. 前記昇降式キートップ昇降手段は前記フレームに対して上方への移動を規制されているとともに、前記昇降式キートップと前記昇降式キートップ昇降手段は、前記昇降式キートップが降下して昇降式キートップ昇降手段に対する基準高さに達するのに伴い前記昇降式キートップ昇降手段の下面で前記操作検出手段と接触する部分で前記操作検出手段を押下する原点押下手段が突出するように構成され、該原点押下手段が前記操作検出手段を押下したことを検出することで前記昇降式キートップの昇降式キートップ昇降手段に対する基準高さを検出するように構成されていることを特徴とした、請求項２８に記載の触覚入出力装置。
30. 少なくとも前記情報記憶手段に含まれる対応情報を含んだ情報であって、利用者の操作の履歴が反映された装置の状態を再現可能な状態情報を不揮発性の記憶手段に記憶する状態情報記憶手段と、記憶された状態情報を読み込んで装置の状態を再現する状態情報読込手段とを備えることを特徴とした、請求項１から請求項２３の何れかに記載の視覚障害者用情報処理置。

Images