JP2004219558A - 画像表示装置 - Google Patents

画像表示装置 Download PDF

Info

Publication number
JP2004219558A
JP2004219558A JP2003004536A JP2003004536A JP2004219558A JP 2004219558 A JP2004219558 A JP 2004219558A JP 2003004536 A JP2003004536 A JP 2003004536A JP 2003004536 A JP2003004536 A JP 2003004536A JP 2004219558 A JP2004219558 A JP 2004219558A
Authority
JP
Japan
Prior art keywords
image
data
unit
image data
stippling
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2003004536A
Other languages
English (en)
Inventor
Ritsuo Matsushita
律男 松下
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Yamaha Corp
Original Assignee
Yamaha Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Yamaha Corp filed Critical Yamaha Corp
Priority to JP2003004536A priority Critical patent/JP2004219558A/ja
Publication of JP2004219558A publication Critical patent/JP2004219558A/ja
Pending legal-status Critical Current

Links

Images

Landscapes

  • User Interface Of Digital Computer (AREA)

Abstract

【課題】視覚により認識可能な画像データを手指等の触覚により認識するための画像表示装置において、物体の立体形状、物体までの距離を触覚により認識できるようにする。
【解決手段】互いに間隔をおいて同じ方向に向けて配された複数のカメラからなり、これらカメラにより複数の画像データを同時に取得する画像取得部5と、画像データの領域に対応づけてマトリクス状に配列される多数の細い棒状の触覚ピン、および触覚ピンをそれぞれ配列方向に直交する方向に移動させる駆動部を備えた点画表示部7と、複数の画像データに基づいて、各画像データに投影された物体の輪郭データを抽出し、画像取得部から輪郭データまでの距離データを算出する演算処理部21と、輪郭データの位置に対応する触覚ピンが距離データに応じた突出長さになるように、駆動部を制御する点画出力制御部25とを備える画像表示装置を提供する。
【選択図】 図5

Description

【0001】
【発明の属する技術分野】
この発明は、視覚により認識可能な画像データを手指等の触覚により認識するための画像表示装置に関する。
【0002】
【従来の技術】
従来、視覚障害者用の画像表示装置としては、1つの画像データを点画により表示して、視覚障害者が、触覚により画像データを認識できるものがある。
すなわち、例えば、特許文献1に示すように、絵等の画像データを点画イメージに変換して、筐体の表面に対して出没自在な多数の点字画触覚ピンにより、仮想的に立体化して表示するものがある。また、例えば、特許文献2に示すように、各セグメントの前進量を調整して画像データを表示することにより、より一層立体的に表示するものがある。
【0003】
【特許文献1】
特開平10−40054号公報
【特許文献2】
特開平11−224064号公報
【0004】
【発明が解決しようとする課題】
しかしながら、上記従来の画像表示装置は、いずれも画像データに投影された物体を仮想的に立体化して表示するものであったため、視覚障害者が、実際の物体の立体形状や、物体までの距離を認識できないという問題があった。
この発明は、上述した事情に鑑みてなされたものであって、物体の立体形状、物体までの距離を手指等の触覚により認識できる画像表示装置を提供することを目的としている。
【0005】
【課題を解決するための手段】
上記課題を解決するために、この発明は以下の手段を提案している。
請求項1に係る発明は、1つ以上のカメラを備え、該カメラにより複数の画像データを取得する画像取得部と、前記画像データの領域に対応づけてマトリクス状に配列される多数の細い棒状の触覚ピン、および該触覚ピンをそれぞれ前記配列方向に直交する方向に移動させる駆動部を備えた点画表示部と、複数の前記画像データに基づいて、各画像データに投影された物体の輪郭データを抽出し、前記画像取得部から該輪郭データまでの距離データを算出する演算処理部と、前記輪郭データの位置に対応する前記触覚ピンが前記距離データに応じた突出長さになるように、前記駆動部を制御する点画出力制御部とを備えることを特徴とする画像表示装置を提案している。
【0006】
この発明に係る画像表示装置によれば、物体を点画表示部に表示させる際には、複数の画像データに投影された物体の輪郭データ、および画像取得部から物体の輪郭までの距離データを基に、輪郭データの位置に対応する触覚ピンを突出させると共に、この触覚ピンの突出長さを距離データに関連づけて変化させる。
すなわち、例えば、物体の輪郭までの距離が短い場合には、触覚ピンの突出量を大きくし、また、物体の輪郭までの距離が長い場合には、触覚ピンの突出量を小さくする。そして、これら多数の触覚ピンを手指等で触れることにより各触覚ピンの突出長さの違いを認識できる。
【0007】
なお、画像取得部が、複数のカメラを備えている場合には、これら複数のカメラを互いに間隔をおいて同じ方向に向けて配置する。これにより複数の画像データを同時に取得することができるため、物体までの距離データを正確に、かつ高速に算出できる。
【0008】
請求項2に係る発明は、請求項1に記載の画像表示装置において、前記触覚ピンが磁性体からなり、前記駆動部が、前記触覚ピンの周囲に巻かれたコイルからなり、磁力により前記触覚ピンを突出方向に移動させるソレノイドと、前記触覚ピンを前記突出方向の逆方向に付勢する付勢手段とを備え、該付勢手段による付勢力が、磁力による前記触覚ピンの移動長さに比例することを特徴とする画像表示装置を提案している。
この発明に係る画像表示装置によれば、ソレノイドに電圧を印加することにより、印加電圧の高さに比例する磁力によって触覚ピンが突出方向に移動する。この際には、触覚ピンの移動長さに比例して、触覚ピンの移動方向と逆向きの付勢力が発生するため、触覚ピンが、これら磁力と付勢力とが等しくなる位置に保持される。すなわち、ソレノイドへの印加電圧の高さに応じて触覚ピンの突出長さが決定される。
【0009】
請求項3に係る発明は、請求項1または請求項2に記載の画像表示装置において、前記カメラが、前記画像データを連続的に取得し、これら画像データに基づいて、前記点画出力制御部が前記駆動部を制御して前記触覚ピンを順次移動させることを特徴とする画像表示装置を提案している。
この発明に係る画像表示装置によれば、画像データに投影される物体と画像取得部との相対位置の変化に対して、各触覚ピンを逐次移動させることにより、物体との相対的な動きを表現できるため、物体と画像取得部との相対的な動きを手指等の触覚により認識できる。
【0010】
請求項4に係る発明は、請求項3に記載の画像表示装置において、前記画像取得部および前記点画表示部が、携行可能な筐体の表面および該表面の背面側となる裏面にそれぞれ配され、前記演算処理部および前記点画出力制御部が前記筐体の内部に配されていることを特徴とする画像表示装置を提案している。
この発明に係る画像表示装置によれば、筐体を片手もしくは両手で把持した状態にて、筐体の表面に対向する物体を逐次点画表示部において表示できるため、視覚障害者が歩行しながら、その進行方向前方にある障害物までの距離を容易に認識できる。
【0011】
【発明の実施の形態】
図1から図6は、本発明の一実施形態を示しており、この実施の形態に係る画像表示装置1は、図1,2に示すように、携行可能な筐体3と、筐体3の表面3aに配され、画像データを取得する画像取得部5と、筐体3の表面3aの背面側となる裏面3bに配され、この画像データを触覚により認識可能に表示する点画表示部7とを備えている。
画像取得部5は、画像データを連続的に取得できる、すなわち動画データを取得できる2つのカメラ9,9から構成されている。これら2つのカメラ9,9は、筐体3の表面3aに直交する方向に向けて互いに間隔をおいて配されている。
【0012】
点画表示部7は、図3,4に示すように、細い棒状の磁石からなる多数の触覚ピン11と、これら触覚ピン11をそれぞれ筐体3の裏面3bから出没自在に移動させる駆動部13とを備えている。
多数の触覚ピン11は、前述の画像データの領域に対応づけてマトリクス状に配列されており、その長手方向の一端面11aにより矩形状の表示面12を構成している。
【0013】
駆動部13は、各触覚ピン11を筐体3の裏面3bから突出方向(A方向)に移動させるソレノイド15と、各触覚ピン11を裏面3bから筐体3内部に埋没させる方向(B方向)に付勢するスプリング17とを備えている。
ソレノイド15は、触覚ピン11の周囲に巻かれたコイルからなり、筐体3の内部に固定されている。したがって、このソレノイド15に電圧を印加することにより、印加電圧に比例する磁力によって触覚ピン11がA方向に移動することになる。
【0014】
スプリング17は、その一端部17aが筐体3の内部に固定され、その他端部17bが触覚ピン11に固定されている。また、このスプリング17は、図4(a)に示すように、触覚ピン11の一端面11aが筐体3の裏面3bと共に略同一平面をなしている状態において自然長となっており、図4(b)に示すように、触覚ピン11が裏面3bから突出することにより収縮する。したがって、スプリング17が収縮した状態においては、スプリング17により触覚ピン11をA方向に移動させる付勢力が発生し、この付勢力は、触覚ピン11の突出長さに比例する。
したがって、ソレノイド15に電圧を印加した場合には、ソレノイド15による磁力と、スプリング17による付勢力とが等しくなる位置まで触覚ピン11が突出し、その位置に保持されることになる。すなわち、ソレノイド15への印加電圧の高さに応じて触覚ピン11の突出長さが決定される。
【0015】
また、この画像表示装置1は、図5に示すように、画像取得部5において取得された2つの画像データに投影された物体の立体形状や、物体までの距離を点画表示部7に表示させるための演算処理部21、設定メモリ部23および点画出力制御部25を備えている。これら演算処理部21、設定メモリ部23および点画出力制御部25は、筐体3の内部に配されている。
演算処理部21は、画像取得部5において取得した2つの画像データに基づいて、画像データに投影された物体の輪郭データを抽出し、画像取得部5から各輪郭データまでの距離データを算出するものである。なお、この輪郭データには、画像データの領域における物体輪郭の位置データが含まれている。
【0016】
設定メモリ部23には、画像領域の位置データと各ソレノイド15とが対応づけて記憶されており、また、各輪郭データまでの距離が近い程ソレノイド15の突出長さが大きくなるように、距離データとソレノイド15への印加電圧の値とが対応づけて記憶されている。
点画出力制御部25は、演算処理部21の輪郭データおよび距離データに基づいて、輪郭データに対応する各ソレノイド15への印加電圧を設定メモリ部23から読み出し、各ソレノイド15の動作を制御するものである。
【0017】
以上のように構成された画像表示装置1による物体の表示方法について以下に説明する。ここでは、一例として、図6(a)に示すように、複数の物体31〜35を上方から撮影する場合を考える。なお、画像取得部5において取得される画像データの領域は、図中の二点鎖線L1により区画された領域となっている。
これら物体31〜35を点画表示部7に表示する場合には、はじめに、これら物体31〜35を含む2つの画像データをカメラ9,9により同時に取得する。この際には、演算処理部21が、それぞれの画像データに投影された各物体31〜35の輪郭データを抽出し、これら2つの画像データの輪郭データに基づいて、画像取得部5から各物体31〜35の輪郭までの距離データを算出する。
その後、点画出力制御部25が、各輪郭データの位置データに対応する触覚ピン11を移動させるソレノイド15、および距離データに対応する各ソレノイド15への印加電圧を設定メモリ部23から読み出して、該当するソレノイド15にそれぞれ所定の電圧を印加する。
【0018】
これにより、図6(b)に示すように、各物体31〜35に対応する位置の触覚ピン11が突出する。これら触覚ピン11の突出長さは、画像取得部5から各物体31〜35の輪郭までの距離に応じてそれぞれ異なっている。
すなわち、高さ寸法が大きい物体31,33は、これらの表面31a,33aが比較的画像取得部5の近くに位置するため、これに対応する触覚ピン11の突出長さが大きくなる。これに対して高さ寸法の小さい物体32は、その表面32aが比較的画像取得部5から遠くに位置するため、これに対応する触覚ピン11の突出長さが小さくなる。
これにより、点画表示部7に各物体31〜35にそれぞれ対応した形状41〜45が表示されることになる。
【0019】
また、画像取得部5のカメラ9,9が向く方向に対して傾斜する傾斜面を有する物体34,35は、傾斜面を画定する各輪郭データまでの距離が異なっているため、それぞれの輪郭データまでの距離に応じて触覚ピン11の突出長さが変化する。以上により、点画表示部7への物体の表示が終了する。そして、この状態において、多数の触覚ピン11を手指等で触れることにより、各触覚ピン11の突出長さの違いを認識することができる。
【0020】
したがって、上記の画像表示装置1によれば、点画表示部7の触覚ピン11を手指等で触れることにより、触覚ピン11の突出長さの違いを認識できるため、視覚障害者が、物体31〜35に直接触れることなく、実際の物体31〜35の立体形状や物体31〜35までの距離を的確に認識できる。
また、ソレノイド15へ印加する電圧に応じて触覚ピン11の突出長さを決定できるため、点画出力制御部25による駆動部13の制御を容易に行うことができる。
さらに、2つのカメラ9,9により2つの画像データを同時に取得するため、物体までの距離データを正確に、かつ高速に算出できる。
【0021】
なお、カメラ9,9は、それぞれ画像データを連続的に取得できるように構成されているため、筐体3を片手もしくは両手にて把持した状態にて、画像取得部5と物体31〜35との相対位置を変化させた際には、同時に得られる2つの画像データ毎に演算処理部21において輪郭データを抽出して、距離データが算出されると共に、点画出力制御部25により触覚ピン11の突出長さが変更されることになる。
これにより、点画表示部7において画像取得部5と物体31〜35との相対的な動きを表示できる。したがって、例えば、視覚障害者が歩行しながら、その進行方向前方に画像取得部5を向けた場合には、前方にある障害物までの距離を容易に認識できるため、視覚障害者が、周囲状況の変化を容易に把握できると共に、容易に障害物を避けて通行する等、周囲状況に応じて的確に行動できる。
【0022】
なお、上記の実施の形態においては、画像取得部5が2つのカメラ9,9から構成されるとしたが、これに限ることはなく、3つ以上のカメラから構成されるとしてもよい。この構成の場合には、各物体31〜35までの距離をさらに正確、かつ高速に算出することができる。
また、画像取得部5を1つのカメラから構成するとしてもよい。この構成の場合には、1つのカメラにおいて、焦点距離を変化させながら複数の画像データを取得し、これら画像データを相対的に比較する。そして、この比較結果から、焦点の合致した物体の輪郭データが映っている画像データの焦点距離を、その物体の輪郭データまでの距離データとする。
【0023】
さらに、画像取得部5および点画表示部7が、1つの筐体3に設けられるとしたが、これに限ることはなく、それぞれ別の筐体に設けるとしてもよい。
また、触覚ピン11は、磁石から形成されるとしたが、これに限ることはなく、少なくとも鉄等の磁性体から形成されていればよい。
【0024】
さらに、駆動部13は、ソレノイド15およびスプリング17により構成されるとしたが、これに限ることはなく、各触覚ピン11を移動させると共に所定の突出長さに保持できるものであればよい。
以上、本発明の実施形態について図面を参照して詳述したが、具体的な構成はこの実施形態に限られるものではなく、本発明の要旨を逸脱しない範囲の設計変更等も含まれる。
【0025】
【発明の効果】
以上説明したように、請求項1に係る発明によれば、点画表示部の触覚ピンを手指等で触れることにより、触覚ピンの突出長さの違いを認識できるため、視覚障害者が、物体に直接触れることなく、実際の物体の立体形状や物体までの距離を的確に認識できる。
【0026】
また、請求項2に係る発明によれば、ソレノイドに印加する電圧の高さにより触覚ピンの突出長さを決定できるため、点画出力制御部による駆動部の制御を容易に行うことができる。
【0027】
また、請求項3に係る発明によれば、触覚により物体と画像取得部との相対的な動きを認識できるため、視覚障害者でも周囲状況の変化を把握することができる。
【0028】
また、請求項4に係る発明によれば、進行方向前方にある障害物までの距離を容易に認識できるため、視覚障害者が、容易に障害物を避けて通行できる等、周囲の状況に応じて的確に行動することができる。
【図面の簡単な説明】
【図1】本発明の一実施形態に係る画像表示装置の表面側を示す斜視図である。
【図2】本発明の一実施形態に係る画像表示装置の裏面側を示す斜視図である。
【図3】図1,2の画像表示装置において、点画表示部を示す概略斜視図である。
【図4】図1,2の画像表示装置において、触覚ピンおよびアクチュエータを示す概略図であり、(a)は、ソレノイドに電圧が印加されていない状態を示しており、(b)は、ソレノイドに電圧が印加されている状態を示している。
【図5】図1,2の画像表示装置において、画像取得部において取得した画像データの表示内容を点画表示部に表示させる制御を示すブロック図である。
【図6】図1,2の画像表示装置において、物体を点画表示部に表示する一例を示しており、(a)は、表示対象となる物体の斜視図であり、(b)は、点画表示部における物体の表示結果を示す概略斜視図である。
【符号の説明】
1・・・画像表示装置、3・・・筐体、3a・・・表面、3b・・・裏面、5・・・画像取得部、7・・・点画表示部、9・・・カメラ、11・・・触覚ピン、13・・・駆動部、15・・・ソレノイド、17・・・スプリング(付勢手段)、21・・・演算処理部、25・・・点画出力制御部、31〜35・・・物体

Claims (4)

  1. 1つ以上のカメラを備え、該カメラにより複数の画像データを取得する画像取得部と、
    前記画像データの領域に対応づけてマトリクス状に配列される多数の細い棒状の触覚ピン、および該触覚ピンをそれぞれ前記配列方向に直交する方向に移動させる駆動部を備えた点画表示部と、
    複数の前記画像データに基づいて、各画像データに投影された物体の輪郭データを抽出し、前記画像取得部から該輪郭データまでの距離データを算出する演算処理部と、
    前記輪郭データの位置に対応する前記触覚ピンが前記距離データに応じた突出長さになるように、前記駆動部を制御する点画出力制御部とを備えることを特徴とする画像表示装置。
  2. 前記触覚ピンが磁性体からなり、
    前記駆動部が、前記触覚ピンの周囲に巻かれたコイルからなり、磁力により前記触覚ピンを突出方向に移動させるソレノイドと、前記触覚ピンを前記突出方向の逆方向に付勢する付勢手段とを備え、
    該付勢手段による付勢力が、磁力による前記触覚ピンの移動長さに比例することを特徴とする請求項1に記載の画像表示装置。
  3. 前記カメラが、前記画像データを連続的に取得し、これら画像データに基づいて、前記点画出力制御部が前記駆動部を制御して前記触覚ピンを順次移動させることを特徴とする請求項1または請求項2に記載の画像表示装置。
  4. 前記画像取得部および前記点画表示部が、携行可能な筐体の表面および該表面の背面側となる裏面にそれぞれ配され、前記演算処理部および前記点画出力制御部が前記筐体の内部に配されていることを特徴とする請求項3に記載の画像表示装置。
JP2003004536A 2003-01-10 2003-01-10 画像表示装置 Pending JP2004219558A (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2003004536A JP2004219558A (ja) 2003-01-10 2003-01-10 画像表示装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2003004536A JP2004219558A (ja) 2003-01-10 2003-01-10 画像表示装置

Publications (1)

Publication Number Publication Date
JP2004219558A true JP2004219558A (ja) 2004-08-05

Family

ID=32895487

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2003004536A Pending JP2004219558A (ja) 2003-01-10 2003-01-10 画像表示装置

Country Status (1)

Country Link
JP (1) JP2004219558A (ja)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006244436A (ja) * 2005-03-03 2006-09-14 Nippon Ekorojii Kk 通信端末装置
JP2008099750A (ja) * 2006-10-17 2008-05-01 Okumura Yu-Ki Co Ltd 遊技機
JP2009015815A (ja) * 2007-07-03 2009-01-22 Korea Advanced Inst Of Sci Technol 触感装置
JP2009205461A (ja) * 2008-02-28 2009-09-10 Nippon Hoso Kyokai <Nhk> 触覚情報表示装置
JP2010503062A (ja) * 2006-08-30 2010-01-28 韓國電子通信研究院 道案内サービス方法及び装置
CN105045420A (zh) * 2014-05-01 2015-11-11 奥林巴斯株式会社 操作终端和操作方法

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006244436A (ja) * 2005-03-03 2006-09-14 Nippon Ekorojii Kk 通信端末装置
JP2010503062A (ja) * 2006-08-30 2010-01-28 韓國電子通信研究院 道案内サービス方法及び装置
JP2008099750A (ja) * 2006-10-17 2008-05-01 Okumura Yu-Ki Co Ltd 遊技機
JP2009015815A (ja) * 2007-07-03 2009-01-22 Korea Advanced Inst Of Sci Technol 触感装置
JP2009205461A (ja) * 2008-02-28 2009-09-10 Nippon Hoso Kyokai <Nhk> 触覚情報表示装置
CN105045420A (zh) * 2014-05-01 2015-11-11 奥林巴斯株式会社 操作终端和操作方法
CN105045420B (zh) * 2014-05-01 2018-06-22 奥林巴斯株式会社 操作终端和操作方法
CN108509140A (zh) * 2014-05-01 2018-09-07 奥林巴斯株式会社 操作终端、操作方法和记录介质
US10180724B2 (en) 2014-05-01 2019-01-15 Olympus Corporation Operating terminal and operating method

Similar Documents

Publication Publication Date Title
TWI468995B (zh) 顯示裝置、影像顯示系統及影像顯示方法
JP5757790B2 (ja) 情報処理プログラム、情報処理装置、情報処理システム、及び、情報処理方法
US8648802B2 (en) Collapsible input device
EP2746897B1 (en) Volumetric image display device and method of providing user interface using visual indicator
CN102226880A (zh) 一种基于虚拟现实的体感操作方法及系统
JP2003058321A (ja) タッチパネル装置
JP6041604B2 (ja) 表示装置、制御システムおよび制御プログラム
JP2018092313A (ja) 情報処理装置、情報処理方法およびプログラム
KR20150072206A (ko) 홀로그램을 이용한 제스처 인식 시스템 및 그 제어 방법
KR101844303B1 (ko) 동적 자기장 제어를 이용하여 입출력 인터페이스를 제공하는 입체 영상 장치 및 그 장치를 이용한 방법
JP2004219558A (ja) 画像表示装置
US20190105562A1 (en) Haptic effects with multiple peripheral devices
JP6784824B2 (ja) 力覚提示物
KR20030002937A (ko) 비접촉식 3차원 무선 조이스틱
JP2008242894A (ja) スタイラスペン,及びこれを用いたコンピュータシミュレーション装置
JPH0721752B2 (ja) マルチウィンドウ表示方式
KR100868888B1 (ko) 진동촉각 공간마우스 및 진동촉각 공간마우스 시스템
US20210405842A1 (en) Force sense presenting object and force sense presenting method
JP2015197647A (ja) 投影装置
CN105723422A (zh) 针对多视点图像的标签信息的处理装置及其标签信息的处理方法
Gonzalez Avila et al. Adaptic: A shape changing prop with haptic retargeting
EP1425721A1 (en) Interaction with a three-dimensional computer model
Yazdian et al. 2-DOF contact location display for manipulating virtual objects
WO2018042718A1 (ja) 操作装置および前記操作装置を使用した触覚再現装置
KR102406715B1 (ko) 진동 액추에이터 및 이를 이용한 촉감 모사 방법