JP2011221833A - 表示装置 - Google Patents
表示装置 Download PDFInfo
- Publication number
- JP2011221833A JP2011221833A JP2010091068A JP2010091068A JP2011221833A JP 2011221833 A JP2011221833 A JP 2011221833A JP 2010091068 A JP2010091068 A JP 2010091068A JP 2010091068 A JP2010091068 A JP 2010091068A JP 2011221833 A JP2011221833 A JP 2011221833A
- Authority
- JP
- Japan
- Prior art keywords
- pointer
- display
- screen
- display information
- display element
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Position Input By Displaying (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
【課題】姿勢センサによるスクロール機能、及びポインタ制御機能を両立させて、大きな表示情報の閲覧とポインタの操作性を向上させる。
【解決手段】タッチセンサ5を用いてポインタ移動を行う機能を有し、スクロールのときにはポインタ4は表示素子3の枠に対して固定する。タッチセンサ5で指の移動を検出したときには、姿勢センサ6によるスクロールを中止し、指の移動が止まって所定時間の間はポインタ4を表示情報に対して固定する。これにより、姿勢センサ6によるスクロール機能、及びポインタ制御機能を両立させて、大きな表示情報の閲覧及びポインタの操作性が向上する。
【選択図】図1
【解決手段】タッチセンサ5を用いてポインタ移動を行う機能を有し、スクロールのときにはポインタ4は表示素子3の枠に対して固定する。タッチセンサ5で指の移動を検出したときには、姿勢センサ6によるスクロールを中止し、指の移動が止まって所定時間の間はポインタ4を表示情報に対して固定する。これにより、姿勢センサ6によるスクロール機能、及びポインタ制御機能を両立させて、大きな表示情報の閲覧及びポインタの操作性が向上する。
【選択図】図1
Description
本発明は、携帯電話、携帯端末、電子機器等に用いられる表示装置に関するものである。
携帯端末装置の表示素子は画面サイズが小さく、表示できる情報量には限界がある。
地図や広角画像など、表示素子の画面では表示しきれない大きな表示情報を表示するときには、キー操作などによるスクロール手段が有効である。
スクロール機能を特定の物理的キーで行う代わりに、表示素子上に配置された透明タッチパネルを用いた操作方法がある。(例えば特許文献1)
また、加速度センサや方位センサなどの姿勢センサで検出した端末の表示画面の向きに応じて表示情報をスクロールする方法も提案されており、キー操作が不要となり操作感が向上する。(例えば特許文献2)
地図や広角画像のように大きな表示情報を閲覧するだけなら、上記のスクロール機能で十分であるが、例えば、地図や画像などの表示情報の一部の拡大や、Webブラウザの表示情報を閲覧する場合には、スクロール機能に加えて、ポインタを用いて表示情報の特定位置を指定機能などが新たに必要となる。
また、加速度センサや方位センサなどの姿勢センサで検出した端末の表示画面の向きに応じて表示情報をスクロールする方法も提案されており、キー操作が不要となり操作感が向上する。(例えば特許文献2)
地図や広角画像のように大きな表示情報を閲覧するだけなら、上記のスクロール機能で十分であるが、例えば、地図や画像などの表示情報の一部の拡大や、Webブラウザの表示情報を閲覧する場合には、スクロール機能に加えて、ポインタを用いて表示情報の特定位置を指定機能などが新たに必要となる。
ポインタの表示は画面上に矢印などを用いて表示し、十字キーやタッチセンサ(タッチパッド)やマウスを用いて上下左右に動かすことが一般的である。
表示素子上に透明タッチパネルが存在する場合には、必ずしもポインタを表示する必要はなく、選択したい箇所を直接指で触れることで容易に位置の指定が可能である。(例えば特許文献1)
一方、3Dコンテンツとともに3D表示用機器が増えきている。
一方、3Dコンテンツとともに3D表示用機器が増えきている。
3Dの表示方法としては、左目視線の左画像と右目視線の右画像を横に並べたサイドバイサイドのステレオ画像を、それぞれ左右の目で見ることにより、3D画像を表示するステレオビューアを用いた3D表示方式がある。(例えば特許文献3)
従来のスクロール機能とポインタ機能が必要となるWebブラウザなどの操作においては、十字キーなどを用いて、上下左右のスクロールやポインタ移動を行っていたが、スクロールとポインタ機能を同時に行うことは想定されておらず、どちらか一方の機能しか操作することができない。すなわち、スクロールとポインタ機能の切り換えが必要となっていた。
また、特許文献1によれば、透明タッチパネル(タッチセンサ)を用いてスクロール及びポインタ機能を実現できるが、上記と同様にスクロールとポインタ機能のどちらか一方の機能しか操作することができない。
また、特許文献2によれば、姿勢センサで検出した表示画面の方向に応じて画面の表示情報をスクロールする方法は、キー操作などが不要で操作性が高まるが、ポインタ操作機能は想定されていなかった。
そこで、上記姿勢センサによるスクロール機能に、十字キーやタッチパッドによるポインタ操作を追加するとWebブラウザの操作が可能となる。
しかし、スクロールとポインタ移動を同時に操作すると、表示情報に対するポインタの位置が姿勢センサの動きとスクロールの動きの両方に影響を及ぼして変化してしまうため、ポインタの操作がうまく行うことができない。
従って、スクロールのときにはポインタ移動を停止し、ポインタ移動のときにはスクロールを停止するように切替え動作をユーザが行う必要があり、操作性が悪いという課題が残ってしまっていた。
また、上記特許文献2の姿勢センサによるスクロールは、携帯端末の表示画面サイズが小さくなると、以下の理由により操作性が大きく低下する。
携帯端末装置は、表示画面の短辺サイズは例えば約5センチメートルに対して、表示画面とユーザの視点との距離は通常20〜30センチメートルくらいで見ることが多い。例えば、表示画面サイズの1/5の10ミリメートルのスクロールを行うとき、表示画面に対する垂線ベクトルの方向の変化量は、約1〜1.5度くらいとなる。従って、携帯端末の向きを約1度より十分高い精度で一定になるようにコントロールしないと表示画面がぶれて見にくくなり、操作性が非常に悪い。
また、従来の磁気センサを用いた方位角の測定誤差は数度程度のため、上記の小さい角度変化量を制御するためには高精度のセンサが必要になる。
従って、上記姿勢センサによるスクロールは操作性が悪いという課題があった。
本発明は、上述の問題点を解決するためになされたもので、姿勢センサによるスクロール機能、及びポインタ制御機能を両立させて、大きな表示情報の閲覧とポインタの操作性を向上することを目的とする。
次に、上記の課題を解決するための手段について述べる。
本発明は、 表示素子と、姿勢センサと、前記表示素子上にはない第一ポインティング手段と、を有する表示装置であって、前記表示素子は、前記表示素子の画面よりも大きなサイズの表示情報の一部とポインタとを表示する機能を有し、前記表示素子は、前記姿勢センサから検出される前記表示画面の垂線ベクトルの向きまたはその変化量に応じて、表示情報を変化し、前記第一ポインティング手段は、操作方向と操作移動量を検出し、前記操作方向と前記操作移動量に応じて前記ポインタが移動し、前記操作移動量を検出したときには、表示情報が変化することを中断し、前記操作移動量の停止を検出したのち所定の経過時間の間は、前記ポインタの位置が表示情報に対して固定され、前記経過時間の間以外は、前記ポインタの位置が前記表示素子に対して固定されている。
また、本発明は、さらに双眼レンズを有し、前記表示素子の画面の一部を左画面と右画面に二分割し、分割された前記画面に前記表示情報の一部をそれぞれ表示し、前記双眼レンズを通して前記表示情報を表示する第一表示モードを有し、前記ポインタは前記左画面と前記右画面に同時に表示され、前記ポインタの移動ベクトル量は前記左画面と前記右画面で同じである。
また、本発明は、前記ポインタの前記左画面の中心に対する第一の位置が前記右画面の中心に対する第二の位置と水平方向に異なっていて、前記第一の位置と前記第二の位置の水平位置の差が一定のまま、前記ポインタが移動する。
また、本発明は、前記表示情報は左用表示情報と右用表示情報からなる立体情報であり、
前記左画面と前記右画面に前記左用表示情報と前記右用表示情報の一部をそれぞれ表示し、前記双眼レンズを通すことにより前記立体情報を表示する第二表示モードを有する。
前記左画面と前記右画面に前記左用表示情報と前記右用表示情報の一部をそれぞれ表示し、前記双眼レンズを通すことにより前記立体情報を表示する第二表示モードを有する。
また、本発明は、前記表示素子上にはない第二ポインティング手段を有し、前記第二ポインティング手段は第二操作移動量を検出し、前記第二表示モードにおいて、前記ポインタの前記水平位置の差が前記ポインティング手段の第二操作移動量に応じて変化する。
本発明によれば、姿勢センサによるスクロール機能、及びポインタ制御機能を両立させて、大きな表示情報の閲覧とポインタの操作性が高い表示装置を実現できる。
以下、本発明の実施の形態について、図面を用いて説明する。
(実施の形態1)
本実施の形態では携帯端末装置に適用した場合を例に説明するが、その他、ポータブルなカーナビゲーションやテレビやゲーム機など、表示素子を有する電子機器に適用した場合も同様である。
(実施の形態1)
本実施の形態では携帯端末装置に適用した場合を例に説明するが、その他、ポータブルなカーナビゲーションやテレビやゲーム機など、表示素子を有する電子機器に適用した場合も同様である。
図1に本発明の携帯端末装置の概略斜視構造図を示す。
表示素子3による表示機能を含む上筐体1とキー操作機能を含む下筐体2からなる折畳み型携帯端末装置であり、図のように上筐体が開いて、表示素子3の長辺が横向きになるように操作することができる。
なお、以下は表示素子3の長辺が横向きの場合について説明するが、長辺が縦向きの形態で使用するときも同様である。
下筐体にはキー7とタッチセンサ(タッチパッド)5が配置されている。
また、下筐体には携帯端末の姿勢を検出する姿勢センサ6が内蔵されている。姿勢センサは上筐体に内蔵されていても構わない。
姿勢センサ6は、例えば3軸の加速度センサと3軸の磁気センサを組み合わせたものである。これにより、携帯端末装置の表示画面の垂線ベクトルの絶対的方位がわかる。
なお、姿勢センサは表示画面の方向の変化が検出できればよく、例えば3軸の加速度センサのみであっても構わない。
姿勢センサ6で検出した表示画面の垂線ベクトルの方向の変化に応じて、表示素子の表示情報が上下または左右にスクロールする機能を有している。
図2を用いてスクロール方法について詳細に説明する。
図2(1)は全ての表示情報8を表示情報8の中心11(0、0)を原点としてxy座標軸に配置したものである。
ここで表示情報とは、例えば地図や広角画像やWebブラウザ情報などである。
全表示情報8の中の一部(または全部)の表示領域9を切り出して、表示素子3の全面または一部分へ表示する。
表示された表示情報9の上にポインタ4を例えば矢印で表示させる。ポインタは矢印で示しているがそれ以外の形状でも構わない。ポインタの位置の操作方法については後述する。
表示領域9は、全表示領域の中心点11の座標12(x0、y0)と拡大率nで定義できる。
拡大率nは、例えば表示領域9の縦の画素数A2に対する全表示情報8の縦の画素数A1の比として定義することができる。表示領域のサイズが小さくなると表示素子の表示情報は拡大表示される。
表示領域9の中心12の原点11に対する位置ベクトル10をΔaとする。
Δaは姿勢センサで検出された、表示画面の法線ベクトルeに応じて決定する。
法線ベクトルeからΔaの算出方法の一例を図2(2)に示す。
例えば、法線ベクトルがe0であった場合に表示領域9の中心を原点11と等しいとしたときに、表示画面の方向(法線ベクトル)がe1に変化したときには、Δa=c・(e1−e0)とすることにより、表示画面の方向の変化に応じて、表示領域9の位置が変化してスクロールが行われる。
ここで、cは正の定数であり、cが大きいとスクロールの速度が速くなる。
例えば、表示情報が静止画像や動画である場合に、原点に対する表示領域9の中心12方向の向きの変化がe1−e0に等しくなるように定数cを選ぶと、スクロールに応じた表示画像の変化が、実際に画像撮影したときの景色の変化と同等になるため、撮影場所に居るような感覚を得ることができる。
次に、ポインタ4の操作方法について述べる。
図3(1)にはスクロール時の表示画面の様子を示す。表示画面の方向が移動したときに、図のように表示情報16が移動(スクロール)する。
このとき、ポインタ4は表示素子の枠に対して固定することが必要である。
なぜなら、ポインタが表示情報とともに移動すると、スクロール操作によってポインタが画面から消えてしまう。または、ポインタが画面端に到達したときに消え失せないように画面端に固定することも可能だが、ポインタを中心付近まで移動させる手間が発生し、ポインタの操作性が劣化するからである。
ここで、「ポインタが表示素子の枠に対して固定する」というのは、図3(1)に示すように、表示情報(文字や地図や画像など)のスクロール(移動)とは無関係に、ポインタが表示素子の枠に対して動かないことをいう。
図3(2)はポインタ操作を行ったときの表示画面の様子を示す。下筐体2の上のタッチセンサ5の上を、例えば親指15で触れたままベクトル8の方向に移動したことをタッチセンサが検出したときに、表示情報のスクロールを自動的に中止する(無効とする)。
さらに、タッチセンサ5はベクトル8を検出し、ベクトル18に応じた方向と量のベクトル17の分だけ、ポインタ4を移動させる。
ポインタを移動するときにはスクロールが中止されるので、指の移動量に比例したポインタ移動が可能になる。
なお、ポインタの移動は、タッチセンサ5が指15の移動ベクトルを検出したときに行われ、指が単にタッチセンサに触れているだけでは、ポインタは移動せず、スクロールも中止されない。
ある一つのポインタ移動が実行された直後に、ユーザが行う行動として以下のことが考えられる。
(B1)ユーザはポインタ位置に関連付けられたメニューを実行するために、例えばキー7を押す。
(B2)ユーザはさらにポインタを動かすために、指を一旦タッチセンサから離したのち、再びタッチセンサに触れて指を移動させる。
(B3)ユーザはポインタ移動することをやめて、そのまま画面を見続けるかスクロール操作を開始する。
(B1)ユーザはポインタ位置に関連付けられたメニューを実行するために、例えばキー7を押す。
(B2)ユーザはさらにポインタを動かすために、指を一旦タッチセンサから離したのち、再びタッチセンサに触れて指を移動させる。
(B3)ユーザはポインタ移動することをやめて、そのまま画面を見続けるかスクロール操作を開始する。
ポインタ移動が停止したときに上述のスクロール操作を有効にする処理では、以下のような課題が発生する。
図4(1)に示すように、ユーザが(B1)のキー操作を行うときに携帯端末の画面9がぶれて表示情報16がぶれてしまい、表示情報に対するポインタの相対位置がずれてしまう。
また、ユーザが(B2)の動作を行う間に携帯端末が不本意に動くことがある。このとき、ユーザはポインタを動かす意思がなくても上記と同様に表示情報に対するポインタの相対位置がずれてしまう。
上記の課題を解決するために、ポインタ移動が停止した直後のある一定の時間(T)の間だけ図4(2)のようにスクロールのときにポインタも移動することによって、ポインタが表示情報に対して相対的に動かないように固定する。
なお、ここで「ポインタが表示情報に対して固定する」というのは、表示情報(文字や地図や画像など)の移動方向と移動量と同じ量だけポインタが移動することで、ポインタと表示情報の相対的位置が変わらないようにすることをいう。
ある一定時間Tが経過したのちには、ポインタが表示素子の枠に対して固定されるような元のスクロール動作に戻る。
ポインタ移動停止の直後は、ユーザが(B1)から(B3)のどの動作をするのかわからない。そこで、ある一定時間Tの間だけ上記の処理をすることによって、上述の(B1)や(B2)で発生する課題を解決することができる。
(B1)または(B2)を行うのはポインタ移動停止後わずかな時間内であることが多いため、例えば、時間Tは数秒以下の短い時間で構わない。
なお、ポインタ移動停止直後の時間Tの間はスクロールを停止するというだけの処理では、上述の(B1)と(B2)の課題は解決できるが、(B3)のスクロール操作ができないのでユーザにとって操作性が大きく劣化することになり、十分な解決方法とはならない。
本発明では、所定時間Tの間であっても、ポインタ移動操作かスクロール操作に限定するものではなく、両方の操作が可能である。
なお、ポインタが表示情報に対して固定する場合には、ポインタが指し示す文字や図から完全にずれない程度に固定されていればよく、文字の大きさや図の大きさより小さいずれ(表示情報に対するポインタの相対的位置ずれ)が発生しても構わない。
なお、上記時間Tの間にユーザが動作(B3)のスクロール操作を行うと、ポインタが画面の枠(=画面の端)より外側に移動して画面から消えることがある。そこで、(B3)のようにポインタが表示画面に対して移動しているときには、前記ポインタが前記画面から消えないようにポインタの移動を限定することが望ましい。例えば、ポインタが画面の端に到達したときにはポインタを表示素子の枠に対して固定すればよい。すなわち、上記時間Tの間は、ポインタが表示情報に対して相対的に動かないようにするが、例えばポインタが画面の端に到達したときには、上記時間Tの間でもポインタを表示素子の枠に対して固定するほうがよい場合もある。
なお、上記の説明ではポインタを動かすポインティングデバイスとして、タッチセンサを例に述べたが、例えばトラックボールやマウスなどのように、移動量と移動方向が指定できるデバイスであればどれでも構わない。
以上のように、本実施の形態1の携帯端末装置により、姿勢センサによるスクロール機能、及びポインタ制御機能を両立させて、ポインタの操作性が高い表示装置を実現できる。
(実施の形態2)
本実施の形態は実施の形態1と同様に、携帯端末装置に適用した場合を例に説明するが、その他、ポータブルなカーナビゲーションやテレビやゲーム機など、表示素子を有する電子機器に適用した場合も同様である。
(実施の形態2)
本実施の形態は実施の形態1と同様に、携帯端末装置に適用した場合を例に説明するが、その他、ポータブルなカーナビゲーションやテレビやゲーム機など、表示素子を有する電子機器に適用した場合も同様である。
図5に本発明の携帯端末装置の2画面表示モードのときの概略斜視構造図を示す。
本実施の形態の携帯端末装置は、通常表示モードと2画面表示モードを有する。
表示素子3の画面は長方形状を有していて、2画面表示モードのときには横向きで使用し、通常表示モードのときには横向きまたは縦向きいずれの場合でも使用できる。
2画面表示モードでは、実施の形態1の上下筐体の構造に加えて、2つの凸レンズからなる双眼レンズ20を用いる。
上筐体の表示素子の表面から所定距離だけ離れた場所に、双眼レンズ20を表示画面に平行に配置する。双眼レンズ20は上筐体1に固定されたアーム19に支えられることで所定位置に保持されている。
表示素子3の画面は左画面21と右画面22に左右二分割され、それぞれ同等の表示情報を表示する。
双眼レンズの左右凸レンズを介して、左目で左画面、右目で右画面を見ることによって、ステレオ表示(2画像の同一視)を実現する。
なお、凸レンズの倍率はルーペ等で利用される数倍の倍率、すなわち焦点距離が5cm〜15cm程度の低倍率のものが適している。倍率を大きくしすぎると左右画面が視野全体の収まらず、一部しか見えなくなるとともに、画素の粗さが目立ってくる。逆に倍率を小さくしすぎるとユーザと画面の距離を長くしないと焦点を結ぶことが困難となり、視野角が小さくなる。
なお、凸レンズは通常のガラスまたは透明樹脂製の凸レンズで構わないが、フレネルレンズを用いることによってより薄型化が可能となる。
図6は左右表示情報の表示方法の一例を示す。
実施の形態1と同様に、姿勢センサ6で検出した表示画面の法線ベクトル方向の変化量に関連したベクトルΔaだけ移動した点を中心として、仮の表示領域9を決める。
なお、ベクトルΔaの設定方法は実施の形態1と同様である。
図6(2)に示すように、表示領域9の一部をさらに切り出して、左画面と右画面とする。左画面を実線、右画面を点線で示す。左画面の中心は表示領域9の中心12よりも右に特定のシフト量23(ΔS)だけずれていて、一方、右画面の中心は中心12よりも左にΔSだけずれている。
ここで、シフト量23(ΔS)は左右画面の輻輳角を調整するためのパラメータである。
人間の両目の間隔が例えば約6.5cmに対して、例えば携帯端末の3インチディスプレイを2画面に分けたときの左右画面の中心点間隔は約3.5cmである。
従って、ΔSは正、すなわち表示領域9の中心12は左画面では左、右画面では右にシフトすることが必要である。
例えば、輻輳角をゼロ度にするためには、シフト量ΔS=1.5cm(=(6.5−3.5)/2)とすればよい。また、輻輳角をゼロより大きくするには、ΔSを1.5cmよりも少し小さくすればよい。
図6(3)に示すように、ポインタ4も表示情報と同様に、左画面と右画面上にそれぞれ表示し、左画面ポインタと右画面ポインタの水平位置を2×ΔSだけずらすことにより、表示情報と同じ輻輳角で認識できる。
従来の3インチ程度の横幅約7cmの表示画面をもつ携帯端末の第一形態での表示では、図2(1)に示すように、ユーザの目と画面の距離が約30cm程度離れた状態で使用することが多い。このときは横方向の視野角は約13度程度となる。
一方、上述の2画面表示モードでは、双眼レンズを用いることにより、ユーザの目と画面間距離を5〜10cm程度に小さくすることができる。これにより視野角が38度以上となり臨場感のある拡大表示を実現できる。
さらに、上述の2画面モードの構成は、姿勢センサを用いたスクロール機能の操作性が、レンズを用いない通常表示モードに比べて向上する。以下にその理由について説明する。
姿勢センサを用いたスクロール方法は、実施の形態1と同様であるため詳細説明は省略する。
図7(1)は通常表示モードにおける表示素子とユーザの目の位置関係を示す。
図7(2)は2画面表示モードにおける表示素子とユーザの目の位置関係を示す。
通常表示モードにおいて、表示素子の縦サイズLを約7cm、ユーザの目と表示素子間距離を約30cmとすると、画面が0.5Lだけ右に動かしたときの表示画面の垂線ベクトルの方向の変化量(移動角27)は約3.3度(=Arctan(3.5/30))となる。
従って、通常表示モードでは、わずかな角度変化(約3度)で画面スクロール量が大きい(50%)ので操作性が悪いといえる。
一方、2画面表示モードにおいて、ユーザの目と表示素子間距離を約10cmとすると、表示画面の垂線ベクトルの方向の変化量(移動角27)が約3.3度のとき、画面移動量は約0.57cmとなり、0.08×Lに相当する。
従って、2画面表示モードでは、わずかな角度変化(約3度)で画面スクロール量28が小さい(8%)ので、通常表示モードに比べて操作性が大きく向上する。
以上のように、本実施の形態2の携帯端末装置により、実施の形態1よりも姿勢センサによるスクロール機能の操作性が高い表示装置を実現できる。
(実施の形態3)
本実施の形態は実施の形態2と同様に、携帯端末装置に適用した場合を例に説明するが、その他、ポータブルなカーナビゲーションやテレビやゲーム機など、表示素子を有する電子機器に適用した場合も同様である。
(実施の形態3)
本実施の形態は実施の形態2と同様に、携帯端末装置に適用した場合を例に説明するが、その他、ポータブルなカーナビゲーションやテレビやゲーム機など、表示素子を有する電子機器に適用した場合も同様である。
本実施の形態の携帯端末装置は、通常表示モードと2画面表示モードに加えて、立体表示モードを有する。
立体表示モードの構成は図5に示す実施の形態2と同様のため、詳細説明は省略する。
左画面に左画像情報、右画面に右画像情報を表示し、双眼レンズを通して左右の目で左右画像を見ることによって立体視が可能となる。
図8は、立体表示モードにおける左右表示情報の決定方法を示す。
左表示情報31の中心11からΔa離れた点12を中心として仮の表示領域9を切り出す。さらに、表示領域9の中心12からシフト量ΔSだけ右にずれた点を中心とした領域を切り出し、左表示情報21とする。
また、右表示情報32の中心11からΔa離れた点12を中心として仮の表示領域9を切り出す。さらに、表示領域9の中心12からシフト量ΔSだけ左にずれた点を中心とした領域を切り出し、右表示情報22とする。
ここで、シフト量23(ΔS)は実施の形態2と同様に、左右画面の輻輳角を調整するためのパラメータである。最適なシフト量ΔSを設定することで、立体情報の再生が可能になる。
図9は、立体表示モードにおけるポインタの操作方法を示す。
下筐体2の操作面には左右2つのタッチセンサを有し、右側のタッチセンサ5はポインタの上下左右の移動で、左側のタッチセンサ33は奥行き方向の移動を実現する。
図9(1)は上下左右方向のポインタ移動方法を示す。タッチセンサ5に触れた指の移動量ベクトル18に比例したベクトル17の移動量でポインタ4を移動する。
図9(2)は表示画面に対して奥行き方向(垂直方向)のポインタ移動の様子を示す。タッチセンサ33に触れた指の縦方向の移動量18(Δt)に応じて、ポインタ4を奥行き方向へ移動させる。ここで、ポインタが遠ざかるときにはΔtが正とする。
次に、ポインタの奥行き方向の移動方法について説明する。
図10(1)から(3)にポインタの奥行き方向への移動とポインタ移動方向の関係を示す。
図10(4)は上から見たときの仮想立体空間36と投影面37と目の位置関係である。
仮想空間内のポインタの位置が点Q1(38)から点Q2(39)に移動したときに、左右の目で見た様子を投影面37に投影したとき、図10(4)に示すように両眼視差がΔpxl+Δpxrだけ減少する。ここで、Δpxlは左目の視差変化、Δpxrは右目の視差変化である。
従って、奥行き方向に移動したときは左右画面のポインタの視差が小さくなるように位置をずらせばよい。
図10(1)は、ポインタ位置35(px、py)のpy=0のときの移動の様子を示す。
右画面のポインタは左方向、左画面のポインタは右方向に移動し、上下方向の移動はない。
図10(2)は、ポインタ位置35(px、py)のpy<0のときの移動の様子を示す。
右画面のポインタは左方向、左画面のポインタは右方向に移動するとともに、上方向にΔpy移動する。
図10(3)は、ポインタ位置35(px、py)のpy>0のときの移動の様子を示す。
右画面のポインタは左方向、左画面のポインタは右方向に移動するとともに、下方向にΔpy移動する。
ポインタの移動量の設定方法の一例を示す。
視差ΔpxlとΔpxrをタッチセンサ33で検出した移動量Δtに比例して変化させる。
すなわち、Δpxl=Δpxr=c1・Δtとする。c1はある定数とする。
図10(4)に示すように、ポインタの仮想位置がQ1からQ2へ観察者(ユーザ)から遠ざかるように変化したとき、左右の視差の変化ΔpxlとΔpxrは一般的には異なるが、ここでは、Δpxl=Δpxrとしてよい。なぜなら、本発明のポインタ操作はポインタを相対的に単に動かすことが目的であり、仮想空間のQ1からQ2の場所に正確に移動させる必要はないからである。
上下方向の移動量Δpyは左右画面で同じである。また、Q1からQ2への奥行き方向の移動量が同じときには、ポインタの位置35のY座標pyが大きいほど大きくする。
すなわち、例えばΔpy=−c2・py・Δt とする。c2はある定数とする。
Δpyはpyに関して単調増加すれば、必ずしもpyに比例していなくても構わない。なぜなら、本発明のポインタ操作はポインタを相対的に単に動かすことが目的であり、仮想空間のQ1からQ2の場所に正確に移動させる必要はないからである。
さらに、ポインタが奥行き方向に移動するにしたがって、ポインタサイズDを小さくすることで、ポインタが立体空間の中で移動しているように見える。
例えばD=c3・|pxl−pxr|とすればよい。c3はある定数とする。
なお、両眼視差が小さくなるにしたがって、ポインタサイズDが小さくなり、最終的にゼロに近づくようにすれば、変化の仕方は自由に決めて構わない。
ポインタがQ1からQ2に変化したときのポインタサイズの変化を忠実に再現していなくても構わない。なぜなら、本発明のポインタが奥行き方向に移動したかどうかが判別できればよいからである。
次に、ポインタの追加機能について説明する。
ポインタが指定した点においてある特定の動作機能を実行するものとする。
図11(1)はポインタが仮想的な手を表し、手の位置にある仮想物体をつかむという特定の動作機能がある場合の表示画面の様子を示す。例えば「つかむ」という動作機能は、タッチセンサ15をタップ操作42することによって実現する。なお、タッチセンサの代わりに特定のキーを用いて行っても構わない。
図11(2)はポインタが仮想的な銃を表し、銃の位置から弾丸を発射するという特定の動作機能がある場合の表示画面の様子を示す。「発射する」という動作機能は、例えばタッチセンサ15をタップ操作42することによって実現する。なお、タッチセンサの代わりに特定のキーを用いて行っても構わない。
なお、前記動作機能は上記図11(1)、(2)に限定するものではなく、ポインタの先端が変形する機能やポインタからある物体が生成される機能であってもよい。
上述のポインタの追加機能により、例えばゲームなどにおいて複雑な操作が可能となる。
以上のように、本実施の形態3の携帯端末装置により、姿勢センサによるスクロール機能、及びポインタ制御機能を両立させて、ポインタの操作性が高い立体情報表示装置を実現できる。
本発明は例えば携帯端末装置として有用であり、テレビ、携帯電話、携帯端末、カーナビゲーション、等々の様々な電子機器に利用可能である。
1 上筐体
2 下筐体
3 表示素子
4 ポインタ
5 タッチセンサ
6 姿勢センサ
7 キー
8 全表示情報
9 表示領域
10 スクロールベクトル
11 表示情報の基準点
12 表示領域の中心
13 表示画面の法線ベクトル
14 基準点方向に対応する表示画面の法線ベクトル
15 指
16 表示情報の一部
17 ポインタの移動ベクトル
18 指の移動ベクトル
19 アーム
20 双眼レンズ
21 左画面
22 右画面
23 中心のシフトベクトル
24 表示素子の横の長さ
25 従来の端末移動量
26 従来の表示素子の視野角
27 移動角
28 本発明の端末移動量
29 本発明の表示素子の視野角
30 目
31 左表示情報
32 右表示情報
33 第二のタッチセンサ
34 奥行きのポインタ移動ベクトル
35 ポインタの先端点
36 仮想立体空間
37 投影面
38 移動前ポインタ位置
39 移動後ポインタ位置
40 右目の視差の変化
41 左目の視差の変化
42 タップ操作
2 下筐体
3 表示素子
4 ポインタ
5 タッチセンサ
6 姿勢センサ
7 キー
8 全表示情報
9 表示領域
10 スクロールベクトル
11 表示情報の基準点
12 表示領域の中心
13 表示画面の法線ベクトル
14 基準点方向に対応する表示画面の法線ベクトル
15 指
16 表示情報の一部
17 ポインタの移動ベクトル
18 指の移動ベクトル
19 アーム
20 双眼レンズ
21 左画面
22 右画面
23 中心のシフトベクトル
24 表示素子の横の長さ
25 従来の端末移動量
26 従来の表示素子の視野角
27 移動角
28 本発明の端末移動量
29 本発明の表示素子の視野角
30 目
31 左表示情報
32 右表示情報
33 第二のタッチセンサ
34 奥行きのポインタ移動ベクトル
35 ポインタの先端点
36 仮想立体空間
37 投影面
38 移動前ポインタ位置
39 移動後ポインタ位置
40 右目の視差の変化
41 左目の視差の変化
42 タップ操作
Claims (6)
- 表示素子と、姿勢センサと、前記表示素子上にはない第一ポインティング手段と、を有する表示装置であって、
前記表示素子は、前記表示素子の画面よりも大きなサイズの表示情報の一部とポインタとを表示する機能を有し、
前記表示素子は、前記姿勢センサから検出される前記表示素子の垂線ベクトルの向きまたはその変化量に応じて、前記表示素子に表示する表示情報を変化し、
前記第一ポインティング手段は、操作方向と操作移動量を検出し、前記操作方向と前記操作移動量に応じて前記ポインタが移動し、
前記操作移動量を検出したときには、表示情報が変化することを中断し、
前記操作移動量の停止を検出したのち所定の経過時間の間は、前記ポインタの位置が表示情報に対して固定され、前記経過時間の間以外は、前記ポインタの位置が前記表示素子に対して固定されていることを特徴とする表示装置。 - 双眼レンズを有し、
前記表示素子の画面の一部を左画面と右画面に二分割し、分割された前記画面に前記表示情報の一部をそれぞれ表示し、前記双眼レンズを通して前記表示情報を表示する第一表示モードを有し、
前記ポインタは前記左画面と前記右画面に同時に表示され、前記ポインタの移動ベクトル量は前記左画面と前記右画面で同じであることを特徴とする請求項1記載の表示装置。 - 前記左画面の中心に対する前記ポインタの第一の位置が前記右画面の中心に対する第二の位置と水平方向に異なっていて、前記第一の位置と前記第二の位置の水平位置の差が一定のまま、前記ポインタが移動することを特徴とする請求項1または請求項2のいずれかに記載の表示装置。
- 前記表示情報は左用表示情報と右用表示情報からなる立体情報であり、
前記左画面と前記右画面に前記左用表示情報と前記右用表示情報の一部をそれぞれ表示し、前記双眼レンズを通すことにより前記立体情報を表示する第二表示モードを有することを特徴とする請求項1から請求項3のいずれかに記載の表示装置。 - 前記表示素子上にはない第二ポインティング手段を有し、前記第二ポインティング手段は第二操作移動量を検出し、前記第二表示モードにおいて、
前記ポインタの前記水平位置の差が前記ポインティング手段の第二操作移動量に応じて変化することを特徴とする請求項1から請求項4のいずれかに記載の表示装置。 - 前記ポインタの移動量に応じて、前記ポインタの大きさが変化することを特徴とする請求項1から請求項5のいずれかに記載の表示装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010091068A JP2011221833A (ja) | 2010-04-12 | 2010-04-12 | 表示装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010091068A JP2011221833A (ja) | 2010-04-12 | 2010-04-12 | 表示装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2011221833A true JP2011221833A (ja) | 2011-11-04 |
Family
ID=45038732
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2010091068A Pending JP2011221833A (ja) | 2010-04-12 | 2010-04-12 | 表示装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2011221833A (ja) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8910079B2 (en) | 2012-06-28 | 2014-12-09 | Industry-University Cooperation Foundation Hanyang University | Method of adjusting an UI and user terminal using the same |
JPWO2014156229A1 (ja) * | 2013-03-27 | 2017-02-16 | オリンパス株式会社 | 操作入力装置およびマスタスレーブシステム |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH08329275A (ja) * | 1995-06-05 | 1996-12-13 | Shinichi Komatsu | 立体画像操作プログラム |
JP2004177431A (ja) * | 2002-11-22 | 2004-06-24 | Ricoh Co Ltd | モニター用ステレオビューアー |
JP2005332231A (ja) * | 2004-05-20 | 2005-12-02 | Nippon Telegr & Teleph Corp <Ntt> | ポインティング方法およびポインティング装置、ならびにポインティングプログラム |
JP2009003799A (ja) * | 2007-06-22 | 2009-01-08 | Aplix Corp | ポータブル機器およびポータブル機器における仮想空間の提供方法 |
JP2009181595A (ja) * | 2009-05-18 | 2009-08-13 | Sharp Corp | ポインティングデバイスを有する情報処理装置 |
WO2010026686A1 (ja) * | 2008-09-03 | 2010-03-11 | パナソニック株式会社 | 携帯端末装置及び携帯端末装置の入力操作方法・表示制御方法 |
-
2010
- 2010-04-12 JP JP2010091068A patent/JP2011221833A/ja active Pending
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH08329275A (ja) * | 1995-06-05 | 1996-12-13 | Shinichi Komatsu | 立体画像操作プログラム |
JP2004177431A (ja) * | 2002-11-22 | 2004-06-24 | Ricoh Co Ltd | モニター用ステレオビューアー |
JP2005332231A (ja) * | 2004-05-20 | 2005-12-02 | Nippon Telegr & Teleph Corp <Ntt> | ポインティング方法およびポインティング装置、ならびにポインティングプログラム |
JP2009003799A (ja) * | 2007-06-22 | 2009-01-08 | Aplix Corp | ポータブル機器およびポータブル機器における仮想空間の提供方法 |
WO2010026686A1 (ja) * | 2008-09-03 | 2010-03-11 | パナソニック株式会社 | 携帯端末装置及び携帯端末装置の入力操作方法・表示制御方法 |
JP2009181595A (ja) * | 2009-05-18 | 2009-08-13 | Sharp Corp | ポインティングデバイスを有する情報処理装置 |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8910079B2 (en) | 2012-06-28 | 2014-12-09 | Industry-University Cooperation Foundation Hanyang University | Method of adjusting an UI and user terminal using the same |
US9703470B2 (en) | 2012-06-28 | 2017-07-11 | Industry-University Cooperation Foundation Hanyang University | Method of adjusting an UI and user terminal using the same |
US11262908B2 (en) | 2012-06-28 | 2022-03-01 | Arability Ip Llc | Method of adjusting an UI and user terminal using the same |
JPWO2014156229A1 (ja) * | 2013-03-27 | 2017-02-16 | オリンパス株式会社 | 操作入力装置およびマスタスレーブシステム |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10318017B2 (en) | Viewing images with tilt control on a hand-held device | |
CA2893586C (en) | 3d virtual environment interaction system | |
JP5785753B2 (ja) | 電子機器、制御方法および制御プログラム | |
US8854320B2 (en) | Mobile type image display device, method for controlling the same and information memory medium | |
EP2423795B1 (en) | Mobile Terminal and controlling method thereof | |
US20160292922A1 (en) | Display control device, display control method, and recording medium | |
US20130147793A1 (en) | Mobile terminal and controlling method thereof | |
US9933853B2 (en) | Display control device, display control program, and display control method | |
US20160291687A1 (en) | Display control device, display control method, and recording medium | |
EP2752745A1 (en) | Input control device, input control method, and input control program | |
JP2010026638A (ja) | 携帯型画像表示装置、その制御方法、プログラム及び情報記憶媒体 | |
EP2558924B1 (en) | Apparatus, method and computer program for user input using a camera | |
KR20120034891A (ko) | 이동 단말기 및 그 제어방법 | |
US20160021353A1 (en) | I/o device, i/o program, and i/o method | |
KR20120023247A (ko) | 3d 객체 표시가 가능한 휴대용 장치 및 그 방법 | |
EP2137964A2 (en) | Projection method | |
US10324736B2 (en) | Transitioning between 2D and stereoscopic 3D webpage presentation | |
US20150304615A1 (en) | Projection control apparatus and projection control method | |
KR20160144197A (ko) | 휴대 장치 및 휴대 장치의 화면 변경방법 | |
US20180053338A1 (en) | Method for a user interface | |
US10469834B2 (en) | Stereoscopic display | |
KR101873746B1 (ko) | 이동 단말기 및 그 제어방법 | |
KR20120007195A (ko) | 이동 단말기 및 그 제어방법 | |
US20150381970A1 (en) | Input/output device, input/output program, and input/output method | |
US20140111551A1 (en) | Information-processing device, storage medium, information-processing method, and information-processing system |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20120229 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20120313 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20120703 |