JPH11296304A - 画面表示入力装置及び視差補正方法 - Google Patents

Abstract

(57)【要約】 【課題】 タッチ入力による視差の補正を正確に行うこ
とができる画面表示入力装置を提供する。 【解決手段】 表示装置の表示画面１の前面にタッチパ
ネル装置のタッチセンサパネル２を付設し、情報を表示
するとともに手書き入力を可能とする画面表示入力装置
であって、操作者を撮影するカメラ装置からの画像を用
いて操作者の目の位置の所定の基準点からのずれの方向
及び距離を検出し、さらに目の位置を検出した画像の所
定の基準位置からのずれの方向及び距離を検出し、さら
に操作者と表示画面との距離の情報を検出し、これらの
情報により補正テーブルから補正値を読み出し、タッチ
センサパネルより入力される座標値に補正を行うことに
よりタッチ入力による視差の補正を正確に行うことがで
きる。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、液晶表示装置など
の表示装置の表示画面の前面にタッチパネル装置のタッ
チセンサ部材を付設し、表示画面に情報を画面表示する
とともに、タッチセンサ部材にタッチすることにより手
書き入力する画面表示入力装置及びこの画面表示入力装
置の手書き入力による視差を補正する視差補正方法に関
する。

【０００２】

【従来の技術】従来より、例えばテレビ会議通信端末装
置などのデータ端末装置、あるいはパーソナルコンピュ
ータ装置などのデータ処理装置における操作表示手段の
１つとして、液晶表示装置の表示画面の前面にタッチパ
ネル装置のタッチセンサを付設し、情報を画面表示する
と共に、タッチセンサによるタッチ入力を行う画面表示
入力装置が提案されている。

【０００３】表示画面とタッチセンサパネルを重ねる場
合、タッチパネル自体の厚みや枠の形状によりディスプ
レイ表面とタッチパネルの表面の間には、ある程度の距
離が生じる。このため、正面以外から見た場合にはタッ
チパネルの座標と表示画面の座標との間には視差と呼ば
れる誤差が生じる。

【０００４】図９を用いて上述の視差について説明す
る。図９には表示装置の表示画面１と、タッチパネル装
置のタッチセンサパネル２とが図示されている。同図に
示されるように表示画面の前面にはこの表示画面と同一
の大きさを有するタッチセンサパネルが付設されてお
り、同図にＹで示されたタッチセンサパネルの箇所を押
下することにより、ディスプレイでＸで示された箇所を
選択することができる構成となっている。

【０００５】このＸで示された箇所をＢの位置から画面
を見ている操作者が押下しようとすると、操作者の視点
及び表示画面とタッチセンサパネルとの距離が原因とな
りタッチパネルのＡの位置を押下してしまうこととな
る。よってタッチパネルから出力される座標と表示画面
から出力される座標にはＣだけのずれを生じることにな
る。同様にｂの位置から画面を見ている操作者はタッチ
センサパネルのａの位置を押下してしまうので、タッチ
センサパネルから出力される座標と画面上の座標にはｃ
だけのずれを生じることになる。なお、ここでは説明を
簡略化するために一次元での説明を行っているが、実際
には２次元であるので横軸方向にもずれを生じ、誤入力
が起こる可能性はさらに高くなる。このＣ及びｃを視差
と呼び、操作者の視点とディスプレイとの位置関係によ
り変化する。

【０００６】このため、視差の補正を行わない場合、デ
ィスプレイを見る位置により意図した位置とは違う位置
が制御部に通知されることになってしまう。つまり視差
補正を行わない場合、あるボタンを押下しようとしてい
るのに、そのボタンが押下されずに、その隣のボタンを
押下してしまうなどの問題が起こる。

【０００７】この視差補正に関する従来例１として、特
開平８−３０５４９４号公報の画面表示入力装置があ
る。本従来例は、液晶表示装置の表示画面部材の前面に
タッチパネル装置のタッチセンサ部材を付設し、情報を
画面表示すると共に、表示画面に手書き入力するための
画面表示入力装置であって、起動時に液晶表示装置の表
示画面に所定のテスト点をタッチ入力させ、それによっ
てタッチパネル装置から得られた入力座標と、テスト点
の座標に基づいて入力座標補正情報を検出し、その入力
座標補正情報に基づいて、タッチパネル装置から入力さ
れる座標を補正するタッチ入力座標補正手段を備えたこ
とを特徴としている。

【０００８】また、本発明と技術分野が類似する従来例
２として、特開平６−３２４８０８号公報のタッチパネ
ル制御方式がある。本従来例は、表示部と、表示部に付
設されたタッチパネルと、記憶部と、制御部を備え、記
憶部に格納されたタッチパネル押下有効領域情報テーブ
ルに基づき表示部の表示面にタッチパネル押下有効領域
を表示するタッチパネル入力装置におけるタッチパネル
制御方式であって、複数のオペレータ感知センサを設
け、記憶部にオペレータ身長情報変換テーブルと視差演
算テーブルを設け、制御部は複数のオペレータ感知セン
サの出力によりオペレータ身長情報変換テーブルを検索
してオペレータの身長情報を求め、身長情報に基づき視
差演算テーブルにより視差補正値を求め、視差補正値に
よりタッチパネル押下有効領域情報を補正し、表示部の
表示面に視差補正されたタッチパネル押下有効領域を表
示することを特徴としている。

【０００９】

【発明が解決しようとする課題】しかしながら、上記従
来例１の画面表示入力装置では、起動時に液晶表示装置
の表示画面に所定のテスト点をタッチ入力させ、それに
よってタッチパネル装置から得られた入力座標と、テス
ト点の座標に基づいて入力座標補正情報を検出し、その
入力座標補正情報に基づいて、タッチパネル装置から入
力される座標を補正しているので、操作者は起動時に正
確な手書き入力を可能とするためには、テスト入力を必
ず行わなければならず、手間のかかるものであった。

【００１０】また、上記従来例２のタッチパネル制御方
式では、複数のオペレータ感知センサの出力によりオペ
レータの身長情報だけを求めて、この身長情報に基づき
視差補正を行っているので、例えば、同じ目線の位置で
あっても表示画面からの距離により、視差が変動するこ
とについては考慮されていないので、正確な視差補正を
行うことはできないでいた。

【００１１】本発明は、上記問題点に鑑みてなされたも
のであり、タッチ入力による視差の補正を正確に行うこ
とができる画面表示入力装置及び視差補正方法を提供す
ることを目的とする。

【００１２】

【課題を解決するための手段】かかる目的を達成するた
めに本発明の画面表示入力装置は、表示手段の表示画面
の前面に画面入力手段を付設し、情報を画面表示すると
ともに、画面入力手段に触れることによる手書き入力を
可能とする画面表示入力装置であって、操作者を撮影す
る画像撮像手段と、画面入力手段より入力された座標値
を補正する補正量を記憶する補正量記憶手段と、上記各
手段を制御する制御手段とを有し、制御手段は、画像撮
像手段により撮影された画像を用いて操作者の目の位置
の所定の基準点からのずれの方向及び距離を検出して補
正量記憶手段に記憶された補正量を読み出し、画面入力
手段より入力される座標値を補正することを特徴として
いる。

【００１３】上記の補正量記憶手段は、画像撮像手段に
より撮影された画像上での操作者の目の位置の所定の基
準点からのずれ幅及び撮影された画像の所定の基準位置
からのずれ幅による座標値の補正量を記憶しており、制
御手段は、画像上での操作者の目の位置の所定の基準点
からのずれの方向及び距離と、検出に用いた画像の所定
の基準位置からのずれの方向及び距離とを検出して補正
量記憶手段より補正量を読み出し、画面入力手段より入
力される座標値を補正するとよい。

【００１４】上記の補正量記憶手段は、画像撮像手段に
より撮影された画像上での操作者の目の位置の所定の基
準点からのずれ幅と、操作者と表示画面との距離の情報
とによる座標値の補正量を記憶しており、制御手段は、
画像上での操作者の目の位置の所定の基準点からのずれ
の方向及び距離と、操作者と表示画面との距離の情報と
を検出して補正量記憶手段より補正量を読み出し、画面
入力手段より入力される座標値を補正するとよい。

【００１５】上記の補正量記憶手段は、画像撮像手段に
より撮影された画像上での操作者の目の位置の所定の基
準点からのずれ幅と、撮影された画像の所定の基準位置
からのずれ幅と、操作者と表示画面との距離の情報とに
よる座標値の補正量を記憶しており、制御手段は、画像
上での操作者の目の位置の所定の基準点からのずれの方
向及び距離と、検出に用いた画像の所定の基準位置から
のずれの方向及び距離と、操作者と表示画面との距離の
情報とを検出して補正量記憶手段より補正量を読み出
し、画面入力手段より入力される座標値を補正するとよ
い。

【００１６】上記の制御手段は、画像上での操作者の両
目の間隔を計測して操作者と表示画面との距離の情報を
検出するとよい。

【００１７】本発明の視差補正方法は表示手段の表示画
面の前面に画面入力手段を付設し、情報を画面表示する
とともに、画面入力手段に触れることによる手書き入力
を可能とする画面表示入力装置における視差補正方法で
あって、操作者の画像を撮影する画像撮像工程と、画像
撮像工程により撮影された画像を用いて操作者の目の位
置の所定の基準点からのずれの方向及び距離を検出する
第１の検出工程と、第１の検出工程により検出したずれ
の方向及び距離による画面入力手段より入力される座標
値の補正量を算出する第１の補正量算出工程と、第１の
補正量算出工程にて算出した補正量を用いて画面入力手
段より入力される座標値を補正する第１の座標値補正工
程とを有することを特徴としている。

【００１８】上記の視差補正方法は、画像撮像工程によ
り撮影された画像の所定の基準位置からのずれの距離及
び方向を検出する第２の検出工程と、第１の検出工程に
て検出した所定の基準点からのずれの方向及び距離と、
第２の検出工程にて検出した所定の基準位置からのずれ
の方向及び距離とによる画面入力手段より入力される座
標値の補正量を算出する第２の補正量算出工程と、第２
の補正量算出工程にて算出した補正量を用いて画面入力
手段より入力される座標値を補正する第２の座標値補正
工程とを有するとよい。

【００１９】上記の視差補正方法は、操作者と表示画面
との距離を検出する第３の検出工程と、第１の検出工程
にて検出した所定の基準点からのずれの方向及び距離
と、第３の検出工程にて検出した操作者の表示画面から
の距離とによる画面入力手段より入力される座標値の補
正量を算出する第３の補正量算出工程と、第３の補正量
算出工程にて算出した補正量を用いて画面入力手段より
入力される座標値を補正する第３の座標値補正工程とを
有するとよい。

【００２０】上記の視差補正方法は、画像撮像工程によ
り撮影された画像の所定の基準位置からのずれの距離及
び方向を検出する第２の検出工程と、操作者と表示画面
との距離を検出する第３の検出工程と、第１の検出工程
にて検出した所定の基準点からのずれの方向及び距離
と、第２の検出工程にて検出した所定の基準位置からの
ずれの方向及び距離と、第３の検出工程にて検出した操
作者の表示画面からの距離とによる画面入力手段より入
力される座標値の補正量を算出する第４の補正量算出工
程と、第４の補正量算出工程にて算出した補正量を用い
て画面入力手段より入力される座標値を補正する第４の
座標値補正工程とを有するとよい。

【００２１】上記の第３の検出工程は、画像上での操作
者の両目の間隔を計測して操作者と表示画面との距離の
情報を検出するとよい。

【００２２】

【発明の実施の形態】次に添付図面を参照して本発明の
画面表示入力装置及び視差補正方法の実施の形態を詳細
に説明する。図１〜図８を参照すると本発明の画面表示
入力装置及び視差補正方法の実施形態が示されている。
なお、図１は本発明の画面表示入力装置及び視差補正方
法の実施形態を表す構成図、図２〜図４及び図７はカメ
ラ装置により撮影された画像、図５、図６及び図８は動
作フローを表すフローチャートである。

【００２３】まず、図１を用いて本発明の画面表示入力
装置及び視差補正方法をテレビ会議用通信端末装置に適
用した実施形態の構成を説明する。本実施形態は、テレ
ライティング通信機能における表示装置として用いられ
る表示装置と、表示装置の表示画面の前面に設けられ、
タッチ操作された座標データやタッチ状態データなどを
入力するためのタッチパネル装置と、操作者の位置を検
出するためのカメラ装置と、前記各装置を制御する制御
装置とからなる。なお、図１には表示装置の表示画面１
と、タッチパネル装置のタッチセンサパネル２と、カメ
ラ装置３とが図示されている。

【００２４】表示装置の表示画面に表示された情報を選
択する場合、操作者は表示画面の選択する情報が示され
た箇所を見ながらタッチセンサパネルを押下する。しか
しながら図１に示されるように表示装置の表示画面にタ
ッチパネル装置のタッチセンサパネルが重ねて設けられ
ていると、操作者がタッチ操作した座標と表示画面での
座標とが微妙にずれるいわゆる操作上の視差を生じ、そ
のために画面表示入力装置の使い勝手が悪いという不具
合を生じていた。

【００２５】本実施形態は上記の課題を解決するために
カメラ装置を用いて操作者の目の位置を検出して適切な
視差補正を行うことを特徴としている。そこで、このカ
メラ装置による操作者の位置の認識方法及び視差補正方
法について説明する。なお、以下の説明で用いるタッチ
センサパネル及び表示画面の座標軸は、横軸がＸ軸、縦
軸がＹ軸、左上を原点、Ｘ軸は右に向かって増加、Ｙ軸
は下に向かって増加する座標系であるとする。

【００２６】まず、カメラ装置の設定位置について説明
する。カメラ装置は操作者が表示画面の正面で、目の位
置が表示画面の中心と一致する位置にある場合に、目の
位置が中央にくる画像を撮影するように固定されてい
る。図２には目の位置が画像の中心である基準点にある
場合の画像が示されている。

【００２７】次に操作者の目の位置の違いによりタッチ
入力による座標値にどのような誤差が生じるのかを説明
する。図３には操作者が表示画面の中央で、目の位置が
表示画面の中心よりも高い位置に居る場合にカメラ装置
が捕らえる画像が示されている。この位置にいる操作者
が表示画面の中心を押下しようとすると、表示画面を上
から見下ろすことになるので、タッチパネル装置から出
力される実際の出力値は操作者が意図した表示画面の座
標値よりも小さくなる。

【００２８】また、図４には操作者が表示画面の正面で
表示画面の中心よりも目の高さが低い位置に居る場合に
カメラ装置が捕らえる画像が示されている。この場合、
操作者は表示画面を下から見上げることになるので、こ
の視点から表示画面の中心を押下しようとすると、タッ
チパネル装置から出力される実際の出力値は操作者が意
図した表示画面の座標値よりも大きくなる。

【００２９】また、カメラが捕らえた画像の操作者の目
の位置が画面の中心より左側にある場合には、操作者は
表示画面の中心より右側に居るので、この視点から表示
画面の中心を押下しようとすると、タッチパネル装置か
ら出力される実際の出力値は、操作者が意図した表示画
面の座標値よりも大きくなる。同様にカメラが捕らえた
画像の操作者の目の位置が画面の中心より右側にある場
合には、操作者は表示画面の中心より左側に居るので、
この視点から表示画面の中心を押下しようとすると、タ
ッチパネル装置から出力される実際の出力値は、操作者
が意図した表示画面の座標値よりも小さくなる。

【００３０】制御装置は、カメラ装置から送られた画像
を用いて操作者の目の位置を認識し、操作者の目の位置
が基準点よりどの方向にどの程度離れているのかを算出
する。そして算出した値により操作者がタッチ入力した
座標値を補正する補正値を検出する。なお、この補正値
は予め補正テーブルに用意されている。また、補正テー
ブルは上から表示画面を見下ろしている場合には、タッ
チパネル装置の出力値は意図した座標値より小さいので
ずれの量に応じて補正値を加え、下から見上げている場
合には、補正値を減ずる、左側から見ている場合には補
正値を加え、右側から見ている場合には補正値を減ずる
ように作成されている。

【００３１】次に本実施形態による視差補正のフローを
図５を用いて説明する。まず、ステップＳ１にてカメラ
装置により操作者の目の位置を検出する。次にステップ
Ｓ２にて、入力した画像を用いて基準点からの目の位置
のずれを検出する。このずれの位置が基準点より上であ
った場合には（ステップＳ３／ＹＥＳ）、タッチパネル
装置から出力されたＹ軸の値に補正値を加える（ステッ
プＳ４）。また、このずれの位置が基準点より下側であ
った場合には（ステップＳ５／ＹＥＳ）、タッチパネル
装置から出力されたＹ軸の出力値から補正値を減算す
る。また、ずれの位置が基準点より右側にあった場合に
は（ステップＳ７／ＹＥＳ）、タッチパネル装置から出
力されたＸ軸の値に補正値を加える（ステップＳ８）。
また、ずれの位置が基準点より左側にあった場合には
（ステップＳ９／ＹＥＳ）、タッチパネル装置から出力
されたＸ軸の値から補正値を減算する（ステップＳ１
０）。

【００３２】上述のように、カメラ入力画像から操作者
の目の位置の基準点からのずれを検出し、このずれに応
じてタッチパネル装置から出力される出力値に補正を行
うことにより、正確な視差補正を行うことができる。

【００３３】次に、上述した構成において、カメラ装置
が上下左右に首を振ることができるパンチルト機構を持
つ装置であった場合の視差補正方法について説明する。
カメラ装置がパンチルト機構を備えている場合、カメラ
装置からの入力画像上での操作者の目の位置だけでなく
カメラ装置の向いている方向も考慮して視差の補正を行
う必要がある。

【００３４】具体的には、制御装置はカメラ装置の首降
りの角度情報によりカメラ装置からの画像の基準位置か
らのずれを検出し、画像上での操作者の目の位置の情報
と合わせて基準点からのずれの方向及び距離を検出す
る。なお、基準位置とは図２〜図４に示された画像を撮
影することができる位置である。例えば、カメラ装置が
上を向いている場合には、カメラ装置からの画像が操作
者の目を中心で捕らえている場合でも、操作者の目の位
置は、表示画面の中心よりも上にあり、操作者は表示画
面を上から見下げている。従ってこの場合、カメラ装置
の首降りの角度を考慮して操作者の目の位置の基準点か
らのずれの方向及び距離を算出する必要がある。また、
カメラ装置が下を向いている場合には、カメラ装置から
の画像が操作者の目を中心で捕らえている場合でも、操
作者の目の位置は表示画面の中心よりも下にあり、操作
者は表示画面を下から見上げている。従ってこの場合、
カメラ装置の首降りの角度を考慮して操作者の目の位置
の基準点からのずれの方向及び距離を算出する必要があ
る。

【００３５】上述のようにカメラ装置がパンチルト機構
を有している場合、カメラ装置からの画像が操作者の目
の位置を中心に撮られていても、操作者の位置は基準点
より外れているので、このカメラ装置の首降りの角度も
考慮に入れた補正テーブルを用意する必要がある。

【００３６】次に上述したカメラ装置がパンチルト機構
を有している場合の視差補正の動作フローを図６に示さ
れたフローチャートを用いて説明する。まず、ステップ
Ｓ１１にてカメラ装置により操作者の目の位置を検出す
る。次にステップＳ１２にて、入力した画像を用いて基
準点からの目の位置のずれを検出する。この時パンチル
トズームによるカメラ入力画像全体のずれを考慮して基
準点からの目の位置のずれを検出する。ずれの位置が基
準点より上であった場合には（ステップＳ１３／ＹＥ
Ｓ）、タッチパネル装置から出力されたＹ軸の値に補正
値を加える（ステップＳ１４）。また、このずれの位置
が基準点より下側であった場合には（ステップＳ１５／
ＹＥＳ）、タッチパネル装置から出力されたＹ軸の出力
値から補正値を減算する。また、ずれの位置が基準点よ
り右側にあった場合には（ステップＳ１７／ＹＥＳ）、
タッチパネル装置から出力されたＸ軸の値に補正値を加
える（ステップＳ１８）。また、ずれの位置が基準点よ
り左側にあった場合には（ステップＳ１９／ＹＥＳ）、
タッチパネル装置から出力されたＸ軸の値から補正値を
減算する（ステップＳ２０）。

【００３７】このようにカメラ装置の向きやズーム倍率
を考慮してカメラ入力画像から操作者の位置を推定し、
視差の補正を行っているので、カメラ装置の向きが正面
を向いていなくても操作者は視差を意識することなくタ
ッチ入力を行うことができる。

【００３８】また、カメラ入力画像上での目の位置は同
じでも操作者までの距離が異なることがある。距離が異
なるとタッチ入力による視差にも影響を与えることにな
る。例えば、カメラ入力画像上での目の位置が同じで
も、表示画面からの距離が近いほど、画面を上から見下
ろすこととなり、タッチ入力による視差も増加する。そ
こでカメラ装置から送られたカメラ入力画像による目の
位置の情報に加えて、操作者のカメラ装置からの距離も
考慮に入れて視差の補正を行う。このカメラ装置からの
距離の情報は、カメラ装置のオートフォーカス情報によ
り判断することができる。また、カメラ装置からの画像
により判断することもできる。図７には、図３に示され
た画像と同じ目の位置の画像であるが操作者が表示画面
から離れている場合の画像が示されている。図３及び図
７を比較すると明らかなように図７に示された操作者が
遠くにいる場合のほうが操作者が小さく映し出されるこ
ととなる。そこで、カメラ入力画像より操作者の両目の
間隔を検出することにより判断することができる。な
お、補正テーブルには表示画面と操作者との距離の情報
を考慮に入れた補正値が用意されている。

【００３９】次に上述のカメラ装置からの距離の情報も
考慮に入れた場合の動作例を図８に示されたフローチャ
ートを用いて説明する。まず、ステップＳ２１にてカメ
ラ装置により操作者の目の位置を検出する。次にステッ
プＳ２２にて、入力した画像を用いて基準点からの目の
位置のずれを検出する。このずれの位置が基準点より上
であった場合には（ステップＳ２３／ＹＥＳ）、補正テ
ーブルよりずれの大きさと操作者までの距離に応じた補
正値を取り出し、タッチパネル装置から出力されたＹ軸
の値に補正値を加える（ステップＳ２４）。また、この
ずれの位置が基準点より下側であった場合には（ステッ
プＳ２５／ＹＥＳ）、補正テーブルよりずれの大きさと
操作者までの距離に応じた補正値を取り出し、タッチパ
ネル装置から出力されたＹ軸の出力値から補正値を減算
する。また、ずれの位置が基準点より右側にあった場合
には（ステップＳ２７／ＹＥＳ）、補正テーブルよりず
れの大きさと操作者までの距離に応じた補正値を取り出
し、タッチパネル装置から出力されたＸ軸の値に補正値
を加える（ステップＳ２８）。また、ずれの位置が基準
点より左側にあった場合には（ステップＳ２９／ＹＥ
Ｓ）、補正テーブルよりずれの大きさと操作者までの距
離に応じた補正値を取り出し、タッチパネル装置から出
力されたＸ軸の値から補正値を減算する（ステップＳ３
０）。

【００４０】上述のように、操作者までの距離情報を考
慮してカメラ入力画像から操作者の位置を推定し、視差
補正を行っているので、画面までの距離に関わらず操作
者は正確なタッチ入力を行うことができる。

【００４１】なお、上述の実施形態は本発明の好適な実
施の一例である。但し、これに限定されるものではな
く、本発明の要旨を逸脱しない範囲内において種々変形
実施が可能である。例えば、上記の実施形態では、カメ
ラ装置の首降りの角度を考慮した補正と、操作者の表示
画面からの距離情報を考慮した補正とを分けて補正を行
っていたが、両方の補正が可能な補正テーブルを作成し
て視差補正を行うとも可能である。

【００４２】

【発明の効果】以上の説明より明らかなように本発明に
よれば、制御手段が画像撮像手段により撮影された画像
を用いて操作者の目の位置の所定の基準点からのずれの
方向及び距離を検出し、検出した値により補正量記憶手
段に記憶された補正量を読み出し、画面入力手段より入
力される座標値を補正することにより、画面入力手段よ
り入力される座標値の補正を正確に行うことができる。

【００４３】また、制御手段が画像上での操作者の目の
位置の前記所定の基準点からのずれの方向及び距離を検
出し、検出に用いた画像の所定の基準位置からのずれの
方向及び距離を検出して補正量記憶手段より補正量を読
み出し、画面入力手段より入力される座標値を補正する
ことにより、操作者の立ち位置が所定の位置でなくても
画像撮像手段が操作者の画像を撮影して視差の補正を正
確に行うことができる。

【００４４】また、制御手段が画像上での操作者の目の
位置の前記所定の基準点からのずれの方向及び距離を検
出し、検出に用いた画像の所定の基準位置からのずれの
方向及び距離を検出し、操作者と表示画面との距離の情
報を検出して補正量記憶手段より補正量を読み出し、画
面入力手段より入力される座標値を補正することによ
り、表示画面と操作者との距離を考慮した視差の補正を
行うことができる。

【図面の簡単な説明】

【図１】本発明の画面表示入力装置及び視差補正方法の
実施形態を表す図である。

【図２】操作者が画面正面にいる場合の画像を表す図で
ある。

【図３】操作者が画面正面より上にいる場合の画像を表
す図である。

【図４】操作者が画面正面より下にいる場合の画像を表
す図である。

【図５】図１に示された実施形態による動作例を表すフ
ローチャートである。

【図６】カメラの向きも考慮に入れた視差補正のフロー
チャートである。

【図７】操作者が表示画面から遠くにいる場合の画像を
表す図である。

【図８】操作者までの距離も考慮に入れた視差補正のフ
ローチャートである。

【図９】視差補正を説明するための図である。

【符号の説明】

１ 表示画面 ２ タッチセンサパネル ３ カメラ装置

Claims (10)

【特許請求の範囲】
1. 【請求項１】 表示手段の表示画面の前面に画面入力手
   段を付設し、情報を画面表示するとともに、前記画面入
   力手段に触れることによる手書き入力を可能とする画面
   表示入力装置において、 操作者を撮影する画像撮像手段と、 前記画面入力手段より入力された座標値を補正する補正
   量を記憶する補正量記憶手段と、 上記各手段を制御する制御手段とを有し、 前記制御手段は、前記画像撮像手段により撮影された画
   像を用いて操作者の目の位置の所定の基準点からのずれ
   の方向及び距離を検出して前記補正量記憶手段に記憶さ
   れた補正量を読み出し、前記画面入力手段より入力され
   る座標値を補正することを特徴とする画面表示入力装
   置。
2. 【請求項２】 前記補正量記憶手段は、前記画像撮像手
   段により撮影された画像上での操作者の目の位置の前記
   所定の基準点からのずれ幅及び前記撮影された画像の所
   定の基準位置からのずれ幅による前記座標値の補正量を
   記憶しており、 前記制御手段は、画像上での操作者の目の位置の前記所
   定の基準点からのずれの方向及び距離と、該検出に用い
   た画像の前記所定の基準位置からのずれの方向及び距離
   とを検出して前記補正量記憶手段より補正量を読み出
   し、前記画面入力手段より入力される座標値を補正する
   ことを特徴とする請求項１記載の画面表示入力装置。
3. 【請求項３】 前記補正量記憶手段は、前記画像撮像手
   段により撮影された画像上での操作者の目の位置の前記
   所定の基準点からのずれ幅と、操作者と前記表示画面と
   の距離の情報とによる前記座標値の補正量を記憶してお
   り、 前記制御手段は、前記画像上での操作者の目の位置の前
   記所定の基準点からのずれの方向及び距離と、操作者と
   前記表示画面との距離の情報とを検出して前記補正量記
   憶手段より補正量を読み出し、前記画面入力手段より入
   力される座標値を補正することを特徴とする請求項１記
   載の画面表示入力装置。
4. 【請求項４】 前記補正量記憶手段は、前記画像撮像手
   段により撮影された画像上での操作者の目の位置の前記
   所定の基準点からのずれ幅と、前記撮影された画像の所
   定の基準位置からのずれ幅と、操作者と前記表示画面と
   の距離の情報とによる前記座標値の補正量を記憶してお
   り、 前記制御手段は、前記画像上での操作者の目の位置の前
   記所定の基準点からのずれの方向及び距離と、該検出に
   用いた画像の前記所定の基準位置からのずれの方向及び
   距離と、操作者と前記表示画面との距離の情報とを検出
   して前記補正量記憶手段より補正量を読み出し、前記画
   面入力手段より入力される座標値を補正することを特徴
   とする請求項１記載の画面表示入力装置。
5. 【請求項５】 前記制御手段は、画像上での操作者の両
   目の間隔を計測して前記操作者と表示画面との距離の情
   報を検出することを特徴とする請求項３または４記載の
   画面表示入力装置。
6. 【請求項６】 表示手段の表示画面の前面に画面入力手
   段を付設し、情報を画面表示するとともに、前記画面入
   力手段に触れることによる手書き入力を可能とする画面
   表示入力装置における視差補正方法において、 操作者の画像を撮影する画像撮像工程と、 前記画像撮像工程により撮影された画像を用いて操作者
   の目の位置の所定の基準点からのずれの方向及び距離を
   検出する第１の検出工程と、 前記第１の検出工程により検出した前記ずれの方向及び
   距離による前記画面入力手段より入力される座標値の補
   正量を算出する第１の補正量算出工程と、 前記第１の補正量算出工程にて算出した補正量を用いて
   前記画面入力手段より入力される座標値を補正する第１
   の座標値補正工程とを有することを特徴とする視差補正
   方法。
7. 【請求項７】 前記画像撮像工程により撮影された画像
   の所定の基準位置からのずれの距離及び方向を検出する
   第２の検出工程と、 前記第１の検出工程にて検出した前記所定の基準点から
   のずれの方向及び距離と、前記第２の検出工程にて検出
   した前記所定の基準位置からのずれの方向及び距離とに
   よる前記画面入力手段より入力される座標値の補正量を
   算出する第２の補正量算出工程と、 前記第２の補正量算出工程にて算出した補正量を用いて
   前記画面入力手段より入力される座標値を補正する第２
   の座標値補正工程とを有することを特徴とする請求項６
   記載の視差補正方法。
8. 【請求項８】 操作者と前記表示画面との距離を検出す
   る第３の検出工程と、 前記第１の検出工程にて検出した前記所定の基準点から
   のずれの方向及び距離と、前記第３の検出工程にて検出
   した前記操作者の前記表示画面からの距離とによる前記
   画面入力手段より入力される座標値の補正量を算出する
   第３の補正量算出工程と、 前記第３の補正量算出工程にて算出した補正量を用いて
   前記画面入力手段より入力される座標値を補正する第３
   の座標値補正工程とを有することを特徴とする請求項６
   記載の視差補正方法。
9. 【請求項９】 前記画像撮像工程により撮影された画像
   の所定の基準位置からのずれの距離及び方向を検出する
   第２の検出工程と、 操作者と前記表示画面との距離を検出する第３の検出工
   程と、 前記第１の検出工程にて検出した前記所定の基準点から
   のずれの方向及び距離と、前記第２の検出工程にて検出
   した前記所定の基準位置からのずれの方向及び距離と、
   前記第３の検出工程にて検出した前記操作者の前記表示
   画面からの距離とによる前記画面入力手段より入力され
   る座標値の補正量を算出する第４の補正量算出工程と、 前記第４の補正量算出工程にて算出した補正量を用いて
   前記画面入力手段より入力される座標値を補正する第４
   の座標値補正工程とを有することを特徴とする請求項６
   記載の視差補正方法。
10. 【請求項１０】 前記第３の検出工程は、画像上での操
    作者の両目の間隔を計測して前記操作者と表示画面との
    距離の情報を検出することを特徴とする請求項８または
    ９記載の視差補正方法。