JP4442112B2

JP4442112B2 - 画像表示装置及び画像ぶれ防止方法

Info

Publication number: JP4442112B2
Application number: JP2003112006A
Authority: JP
Inventors: 徹倉田
Original assignee: Sony Corp
Current assignee: Sony Corp
Priority date: 2003-04-16
Filing date: 2003-04-16
Publication date: 2010-03-31
Anticipated expiration: 2023-04-16
Also published as: US20040208394A1; JP2004317813A

Description

【０００１】
【発明の属する技術分野】
本発明は、画像表示装置及び画像ぶれ防止方法に関し、特に、移動しながら使用することを前提とした携帯端末に適用して好適なものに関する。
【０００２】
【従来の技術】
今日、移動しながら使用することを前提とした携帯端末として、高精細な画像表示装置を備えた携帯電話やＰＤＡやモバイル型パーソナルコンピュータや携帯型ゲーム機が広く普及しつつあり、これらは電車や車のような移動する乗り物内での待ち時間に利用される機会が非常に多い。
【０００３】
ところがこれらの機器を、移動する乗り物内で利用しようとすると、乗り物自体の振動により、表示画像がぶれて見えるため、細かい情報が表示された画像を凝視することが困難になる、という問題があった。
【０００４】
この問題はただ単に、画像情報を見ることが困難になるというだけでなく、眼精疲労やストレスを招き、場合によっては乗り物酔いを引き起こすことにも繋がるため、かなり以前から問題視されている。
【０００５】
従来、画像表示装置の画像ぶれを軽減するための技術としては、例えば、角速度センサのような振動検知手段で画像表示装置本体の振動を検知し、その検知結果から画像位置補正量を計算して、元画像の座標にこの画像位置補正量を加えた値を画像信号として液晶表示デバイスのような画像表示部に送ることが提案されている（例えば、特許文献１参照）。
【０００６】
一方、携帯端末を電車内等で利用しようとすると、他人から画面を覗き込んで情報を盗み見られるという問題がある。従来、この問題を軽減するための技術としては、画面の視認角度を狭めるためのプライバシーフィルタが提案されている。
【０００７】
【特許文献１】
特開２００２−１２３２４２公報（段落番号００１４〜００１６、図３及び図４）
【０００８】
【発明が解決しようとする課題】
しかし、上記特許文献１に記載の技術は、画像表示装置本体の振動の検知結果に基づいて画像の表示位置を補正するものであるため、画像表示装置とユーザの目との相対位置関係が変化しない場合（ユーザの頭の揺れ方と画像表示装置の揺れ方とが全く一致している場合）にはユーザからみた画像ぶれが軽減されるが、画像表示装置とユーザの目との相対位置関係が変化する場合（ユーザの頭の揺れ方と画像表示装置の揺れ方とが一致しない場合）にはユーザからみた画像ぶれが軽減されない。
【０００９】
そして、実際には、移動する乗り物内で携帯電話等を手にもって画像を見る場合、乗り物の振動による手の揺れ方と頭の揺れ方とが一致しない（手は揺れなかったが頭は揺れたり、手と頭とが別の向きに揺れたりする）ことにより、画像表示装置とユーザの目との相対位置関係が変化することが多い。
【００１０】
したがって、上記特許文献１に記載の技術では、移動する乗り物内での携帯電話等の表示画像のぶれを十分に軽減することはできない。
【００１１】
一方、他人による画面の覗き込みの問題を軽減するためにプライバシーフィルタを用いることには、画質の低下や着脱の煩わしさを伴うとともに、真後ろから覗き込まれた際には情報の盗み見を防止できないという欠点があった。
【００１２】
本発明は、上述の点に鑑み、画像表示装置とユーザの目との相対位置関係が変化する場合にも画像ぶれを軽減できるとともに、プライバシーフィルタを用いる場合のような画質の低下や着脱の煩わしさを伴うことなく電車内等での真後ろからの覗き込みによる情報の盗み見を防止できる画像表示装置及び画像ぶれ防止方法を提供することを課題としてなされたものである。
【００１３】
【課題を解決するための手段】
この課題を解決するために、本出願人は、撮像手段と、画像表示手段と、この撮像手段で撮影された画像から、画像認識によって顔の目の位置を検出する検出手段と、この検出手段の検出結果に基づいて、この画像表示手段での画像の表示位置を変更させる表示位置変更手段とを備えた画像表示装置を提案する。
【００１４】
この画像表示装置では、画像表示装置に備わっている撮像手段で撮影された画像から、画像認識によって顔の目の位置が検出される。そして、その検出結果に基づいて画像表示手段での画像の表示位置が変更される。
【００１５】
したがって、ユーザが撮像手段で自分の顔を撮影することにより、画像表示装置に対するユーザの目の位置（すなわち画像表示装置とユーザの目との相対位置関係）が検出され、この検出結果に基づいて画像の表示位置が変更される。
【００１６】
このように、画像表示装置とユーザの目との相対位置関係の検出結果に基づいて画像の表示位置が変更されるので、画像表示装置とユーザの目との相対位置関係が変化する場合にも、ユーザからみた画像ぶれを軽減することができる。
【００１７】
また、電車内等でユーザ以外の他人が真後ろからこの画像表示装置の画面を覗き込んだ際にも、その他人の頭の揺れ方とユーザの頭の揺れ方とが全く一致していない限り（画像表示装置とその他人の目との相対位置関係が、画像表示装置とユーザの目との相対位置関係と全く一致していない限り）、その他人からは表示画像がぶれて見えるので、情報の盗み見を防止することができる。
【００１８】
また、近年、移動しながら使用することを前提とした携帯端末にはカメラが搭載されることが多くなっているので、そうした携帯端末に適用することにより、カメラの用途や使用機会を増やして、カメラを有効活用することができるようになる。
【００１９】
なお、この画像表示装置において、表示位置変更手段は、例えば画像の表示位置をサブピクセル単位で平行移動させるデジタル補間フィルタで実現するようにすればよい。
【００２０】
画像表示装置をデジタル補間フィルタで実現する場合には、このデジタル補間フィルタに、デジタル補間フィルタでの処理によって発生する遅延時間分だけ将来の時点における画像の表示位置の平行移動量を予測して求めさせることが好適である。
【００２１】
このように、デジタル補間フィルタでの遅延時間分だけ将来の時点（すなわち実際に画像表示手段に画像が表示される時点）における画像の表示位置の平行移動量を求めることにより、画像ぶれを一層よく軽減できるようになる。
【００２２】
さらに、画像表示装置をデジタル補間フィルタで実現する場合には、外部すなわちユーザとの遠近方向の距離を計測する距離計測手段を画像表示装置にさらに備え、このデジタル補間フィルタに、この距離計測手段の計測結果に基づく画像の拡大・縮小処理をさらに行わせることが好適である。
【００２３】
それにより、ユーザがこの距離計測手段で画像表示装置と自分の顔との距離を計測することにより、画像表示装置と自分の顔との距離が大きくなったとき（ユーザの頭が後ろに揺れたとき）には画像を拡大表示し、画像表示装置と自分の顔との距離が小さくなったとき（ユーザの頭が前に揺れたとき）には画像を縮小表示することができる。したがって、画像表示装置と自分の顔との距離が変化しても、ユーザは常に同じ大きさの画像を見ることができるようになる。
【００２４】
また、この画像表示装置において、表示位置変更手段は、画像表示装置本体に対し画像表示手段を物理的に平行移動させる制動装置によって実現してもよい。
【００２５】
また、この画像表示装置において、画像表示装置本体の加速度を計測する加速度計測手段をさらに備え、表示位置変更手段に、検出手段の検出結果及びこの加速度計測手段の計測結果に基づいて画像表示手段での画像の表示位置を変更させるようにすることが好適である。
【００２６】
加速度計測手段は応答速度が速く計測精度も高いので、加速度計測手段による画像表示装置本体の加速度（振動）の計測結果を組み合わせて画像の表示位置を変更することにより、画像ぶれを一層よく軽減できるようになる。
【００２７】
また、この画像表示装置において、撮像手段としてはＣＭＯＳセンサを用いることが好適である。
【００２８】
ＣＭＯＳセンサは、任意の領域のみを読み出すブロック読出しが可能なので、ＣＭＯＳセンサからブロック読出しした画像から検出手段で画像認識による顔の目の位置の検出を行うことにより、高速なフレームレートで顔の目の位置を検出できるようになる。
【００２９】
次に、本出願人は、撮像手段と画像表示手段とを有する画像表示装置において、画像表示手段に表示される画像のぶれを防止する方法であって、撮像手段で撮影された画像から、画像認識によって顔の目の位置を検出する第１ステップと、第１ステップでの検出結果に基づいて、画像表示手段での画像の表示位置を変更させる第２ステップとを有する画像ぶれ防止方法を提案する。
ここで、上記第２ステップにおいて、画像の表示位置をサブピクセル単位で平行移動させるデジタル補間フィルタが、該デジタル補間フィルタでの処理によって発生する遅延時間分だけ将来の時点における画像の表示位置の平行移動量を予測して求めることが好適である。
また、上記第２ステップにおいて、画像表示装置本体に対し画像表示手段を物理的に平行移動させるようにしてもよい。
【００３０】
この画像ぶれ防止方法では、画像表示装置に備わっている撮像手段で撮影された画像から、画像認識により、顔の目の位置を検出する。そして、その検出結果に基づいて画像表示手段での画像の表示位置を変更する。
【００３１】
したがって、ユーザが撮像手段で自分の顔を撮影することにより、画像表示装置に対するユーザの目の位置（すなわち画像表示装置とユーザの目との相対位置関係）が検出され、この検出結果に基づいて画像の表示位置が変更される。
【００３２】
このように、画像表示装置とユーザの目との相対位置関係の検出結果に基づいて画像の表示位置が変更されるので、画像表示装置とユーザの目との相対位置関係が変化する場合にも、ユーザからみた画像ぶれを軽減することができる。
【００３３】
また、電車内等でユーザ以外の他人が真後ろからこの画像表示装置の画面を覗き込んだ際にも、その他人の頭の揺れ方とユーザの頭の揺れ方とが全く一致していない限り（画像表示装置とその他人の目との相対位置関係が、画像表示装置とユーザの目との相対位置関係と全く一致していない限り）、その他人からは表示画像がぶれて見えるので、情報の盗み見を防止することができる。
【００３４】
また、近年、移動しながら使用することを前提とした携帯端末にはカメラが搭載されることが多くなっているので、そうした携帯端末に適用することにより、カメラの用途や使用機会を増やして、カメラを有効活用することができるようになる。
【００３５】
【発明の実施の形態】
以下、本発明を、図面を用いて具体的に説明する。本発明の適用対象となるのは、図１に示すような、画像表示画面２とカメラ３とを有する携帯端末１である。ここでいう携帯端末は、移動しながら使用することを前提とした小型機器全般であり、携帯電話やＰＤＡのみならず、モバイル型のパーソナルコンピュータ（ノート型パーソナルコンピュータ等）や携帯ゲーム機も含まれる。
【００３６】
本発明は、こうした携帯端末１のカメラ３からユーザの目及び虹彩の位置を認識しその動きを追跡することで、携帯端末１とユーザとの相対的な位置の変動を観測し、その変動を打ち消すように、携帯端末１の画像表示画面２に表示される画像を平行移動させる、というものである。
【００３７】
図２は、携帯端末１のカメラ３によるユーザ撮像のイメージを示す図である。携帯端末の場合、ユーザが使用する際のユーザの姿勢がほぼ限定されており、ユーザと携帯端末が数１０ｃｍの距離を置いて正対するため、殆どの場合において図２のようにユーザの顔が画面内に収まる画像が得られる。
【００３８】
このことは、ユーザの目の位置を検出するという画像認識タスクにおいて、非常に重要である。画像認識においては、撮像環境や撮影条件に関するロバスト性への対応が最も実現困難な事柄だからである。
【００３９】
目及び虹彩（黒目）を画像認識によって検出する手段としては、Eigenface法や部分空間法を利用して距離や類似度を求める方法等、既に多くの方法が提案されているが、ここではリアルタイム処理が必要となるため、図１０に示すような低解像度のテンプレート１２を用意し、図２のような画像を低解像度化した画像に対して、画像の中央やや上方の矩形領域の探索範囲１１内でマッチング計算（相関値の最大探索）を行う。これにより、大まかな虹彩１３の位置が得られる。
【００４０】
この虹彩の正確な位置検出は、テンプレートの虹彩１３の中央部分に該当する画素を開始点とする、閾値以下の画素の再帰的探索の後、細線の除去と重心計算によって行う。これを両目独立に行った上で、両者の平均座標をそのフレームの虹彩の代表座標とする。なお、このようなテンプレートを用いた目や虹彩の位置の検出方法自体は、周知の方法であり、例えば特開２００２−５６３９４号公報や特開２００２−２８８６７０号公報等にも詳細に記載されている。
【００４１】
ここでの閾値は、テンプレート１２の探索範囲１１内の画素を、前もってヒストグラム化することで、適当な値を求めておく。このヒストグラムのピーク値もしくは平均値が、ある値よりも小さい場合は、撮像画像が暗すぎて虹彩の探索処理が出来ないものと判断し、以降の処理を行わない。つまり、虹彩の検出自体が困難な場合は、本発明の手法を適用しない。
【００４２】
以上のように、本発明で探索に使用する範囲１１は、撮像画面の数分の一であるため、演算の処理量としては大幅に軽くなる。これと組み合わせて有効な効果を発揮するのが、ＣＭＯＳを利用して製造された撮像センサ（ＣＭＯＳカメラＩＣ）である。
【００４３】
ＣＣＤ素子で構成されたカメラの場合、全画素読み出しが基本のため、撮像画像内の一部しか利用しない探索処理の場合でも、実際のフレームレートを上げることが出来ないのに対し、ＣＭＯＳカメラの場合、任意の領域のみを読み出すブロック読出しが可能なため、通常よりもずっと高速なフレームレートを実現できる。
【００４４】
本発明では、処理の遅延がぶれの解消効果に最も悪影響を及ぼすため、ＣＭＯＳカメラを利用することによる高速なフレームレートは最適解となる。また、ＣＭＯＳカメラは低消費電力であるため、この点においても、常時カメラを通電して使用する本発明の利用方法にとって、メリットとなる。
【００４５】
次に、ユーザの虹彩の探索処理を行った結果として、携帯端末に表示する画像を、どの方向に平行移動して表示すれば、ユーザから見て画像が静止しているように見えるのかを決定する。
【００４６】
このプロセスでは、計測された時点の虹彩の移動量（直前に検出した虹彩の位置と今回検出した虹彩の位置との差）から直接、表示画像の平行移動量を求めて良い。ただし、処理に数１０ｍｓ〜数１００ｍｓの遅延が発生することを考慮し、画像情報がディスプレイ上に反映し表示される時間における、平行移動量を予測する方が、より良い効果が得られる。それには、現時点だけでなく過去の虹彩の移動量を基に、周期の算出や統計的手法を用いた予測を行うのが望ましい。
【００４７】
つまり、図１１に示すように、ある時刻ｔ２の時点において、過去の時刻ｔ１の時点までの虹彩の移動量が計測されたとしたときに、現時点での最新の計測結果Ａをそのまま表示画像の平行移動量とするのではなく、画像が表示デバイスに表示される時刻ｔ３の平行移動量を予測するのである。
【００４８】
予測のアルゴリズムとしては、ＦＩＲ線形予測器、自己回帰移動平均法、重回帰法、指数平滑法、クロストン法等、様々なアルゴリズムが知られているが、本発明では特に限定しない。コストや計算速度に合わせて適宜選択して良い。
【００４９】
表示画像を平行移動させる方法には大きく２つの手法が考えられる。１つは、表示画像をサブピクセル単位で平行移動した画像を、デジタル補間フィルタによって生成する方法である。
【００５０】
これは、コスト的には極めて有利であるし、物理的動作が伴わないため、耐久性（低故障発生率）においても有効である。ただし、通常のデジタル補間フィルタの場合、どうしても画像がぼけたイメージとなるため、画質面においてはデメリットとなる。
【００５１】
この場合の装置構成を示す前に、従来の携帯端末の最低限の構成を図４に示す。カメラ３からの画像情報がデジタルデータとしてＣＰＵ２１に入力され、ＣＰＵ２１は描画ＩＣ２３に描画コマンドや画像そのものを出力する。ここでの描画ＩＣ２３は、電圧及び電流変換の単なるドライバＩＣの場合もあるし、パーソナルコンピュータのグラフィックスＬＳＩのように、高度な描画機能を有するものの場合もある。描画ＩＣ２３は、直接表示装置８を駆動し、画像を表示する。
【００５２】
本発明の画像の平行移動を、デジタル補間フィルタで実現する場合の構成を図５に示す。ＣＰＵ２１とは別に画像認識ＩＣ２４を別途搭載し、画像認識ＩＣ２４が出力した位置や位相といった平行移動情報を受けて、描画ＩＣ２５内に設けられたデジタル補間フィルタ２６が実際の平行移動を受け持つ。
【００５３】
画像認識ＩＣ２４は単独で動作し、ＣＰＵ２１とのデータのやり取りを行わなくても良い。しかし、過去のデータの処理やその統計処理及び振動周期の計算等を行おうとすると、その部分の処理は、処理能力と汎化能力が高いＣＰＵ２１のソフトウェアに任せるのが適切であると考えられる。
【００５４】
これを突き詰めて、画像認識ＩＣ２４を搭載せず、全ての処理をＣＰＵ２１で行っても良いが、本発明のぶれ防止機能は、常時動作することが求められ、処理内容が複雑にも関わらず、常に高速レスポンスが要求されるため、専用のハードウェアとして画像認識ＩＣ２４を搭載するのが妥当である。
【００５５】
また、低消費電力化要求と、異なる処理能力のＣＰＵを搭載した様々な携帯機器への展開を考えた場合でも、専用ＩＣ化によるモジュール化が良い。この場合、デジタル補間フィルタ回路も、描画ＩＣではなく画像認識ＩＣ側に搭載した方が、より汎用化可能である。
【００５６】
図５は、デジタル補間フィルタを描画ＩＣ側に持たせた構成である。ＣＰＵ２１側からの命令により描画ＩＣ２５で描画された画像は、画像認識ＩＣ２４からの移動情報に従いデジタル補間フィルタ２６によって平行移動されて、表示装置８に出力される。ここで求められる処理は、１画素単位よりも細かい、サブピクセル単位の画像の平行移動処理であるため、デジタル補間フィルタ２６はポリフェーズフィルタで構成されることが望ましい。
【００５７】
このデジタルフィルタリングの結果を画面に表示する際に有効な技術として、クリアタイプ（Clear Type）がある。これはマイクロソフト社の所有する技術であり、液晶ディスプレイのような規則的に赤、緑、青の表示セルが並んでいる固定画素画像表示装置において、通常、白い斜め線を表示しようとすると、図８のようにセルを点灯させるところを、図９のように点灯させることで、水平方向の解像度を実質的に３倍に引き上げる効果を有する。これを用いれば、サブピクセル単位の平行移動表示が、よりスムーズになる。
【００５８】
一方、表示画像を平行移動させる方法として、物理的に表示位置を平行移動させるものも考えられる。具体的には図３に示すように、液晶等で構成された画像表示装置８に制動装置９を設け、この制動装置９に信号を送って、表示装置８自体を（携帯端末１の正面から見て）上下左右方向に高速移動させる。
【００５９】
この制動装置９の高速応答性や耐久性が非常に重要となる。制動装置９内部の実際の制動素子としては、電磁力を応用したリニアモータ、静電駆動、マイクロマシンの他、ピエゾ素子、圧電素子、揺動モータ、アクチュエータ等が考えられる。ただし、本発明において制動素子に何を使うかは本質でないため、ここでは特に規定しない。
【００６０】
この構成を示したものが図６である。画像認識ＩＣ２４が平行移動量を算出した結果を、直接制動装置９に送り込む形となる。ＣＰＵ２１と表示装置８部分は通常の携帯端末の構成と何ら変わるところはない。ＣＰＵ２１の能力が高ければ、画像認識ＩＣ２４の代わりにＣＰＵ２１で全ての処理を行っても良い。
【００６１】
ここまで説明した内容は、カメラのみをセンサとして用いた構成であるが、他のセンサをカメラと共に使用することで、より精度を向上させることが可能である。このセンサの候補としては、加速度センサ（ジャイロを含む）とレンジセンサが筆頭となる。この構成を図７に示す。なお、図７はデジタル補間フィルタ２６による平行移動を実現する例であるが、これらのセンサと、制動装置９を利用したもの（図６）とを組み合わせても良い。
【００６２】
加速度センサ２７は、単独で携帯端末１の揺れを検知して、本発明が目的とする画像のぶれの軽減を行うことが可能である。カメラと比較して、応答速度が速いことと精度が高いことが長所である。ただし、ユーザの顔の振動を検知することが不可能なため、限られた性能しか得られない。従って、例えばカメラ３によって撮影された画像から画像認識によって求めた虹彩の移動量と加速度センサ２７の出力とを重み付けして足し合わせるというように、カメラ３と共に使用することで相補的な効果を得ることが出来る。
【００６３】
レンジセンサ２８は、携帯端末１とユーザとの距離を計測するために使用する。レンジセンサ２８も、高速応答と高精度がカメラよりも優れる。カメラ３によって撮影された画像から画像認識によって虹彩の移動量を求めるだけでは携帯端末１とユーザとの平行移動成分しか検出できいが、レンジセンサ２８を使用することで、携帯端末１とユーザとの遠近方向の距離が得られる。
【００６４】
レンジセンサ２８を用いれば、距離が近づいたときには画像を縮小し、逆に離れたときには画像を拡大することで、ユーザからは常に同じ大きさの画像を観測することが可能となる。この拡大縮小処理にはデジタル補間フィルタ２６を使用することになる。また、レンジセンサ２８からの情報を、例えばユーザの顔の凹凸による携帯端末１とユーザとの距離の変動に基づいて目の位置を検出するというように、画像認識を行う処理に使用すれば、より高精度なユーザの認識が実現できる。
【００６５】
【発明の効果】
以上のように、本発明によれば、画像表示装置とユーザの目との相対位置関係の検出結果に基づいて画像の表示位置が変更されるので、画像表示装置とユーザの目との相対位置関係が変化する場合（ユーザの頭の揺れ方と画像表示装置の揺れ方とが一致しない場合）にも、ユーザからみた画像ぶれを軽減することができるという効果が得られる。
なお、この画像表示装置において、表示位置変更手段として、例えば画像の表示位置をサブピクセル単位で平行移動させるデジタル補間フィルタを用い、デジタル補間フィルタでの処理によって発生する遅延時間分だけ将来の時点における画像の表示位置の平行移動量を予測して求めさせるようにした場合、画像ぶれを一層よく軽減できるようになる。
また、表示位置変更手段は、画像表示装置本体に対し画像表示手段を物理的に平行移動させる制動装置によって実現してもよい。
【００６６】
また、電車内等でユーザ以外の他人が真後ろからこの画像表示装置の画面を覗き込んだ際にも、その他人の頭の揺れ方とユーザの頭の揺れ方とが全く一致していない限り（画像表示装置とその他人の目との相対位置関係が、画像表示装置とユーザの目との相対位置関係と全く一致していない限り）、その他人からは表示画像がぶれて見えるので、情報の盗み見を防止することができるという効果が得られる。
【００６７】
また、カメラを搭載した携帯端末に適用することにより、カメラの用途や使用機会を増やして、カメラを有効活用することができるという効果が得られる。
【００６８】
さらに、画像表示装置と自分の顔との距離が大きくなったとき（ユーザの頭が後ろに揺れたとき）には画像を拡大表示し、画像表示装置と自分の顔との距離が小さくなったとき（ユーザの頭が前に揺れたとき）には画像を縮小表示することができるので、画像表示装置と自分の顔との距離が変化しても、ユーザは常に同じ大きさの画像を見ることができるという効果も得られる。
【００６９】
さらに、加速度計測手段による画像表示装置本体の加速度（振動）の計測結果を組み合わせて画像の表示位置を変更することにより、画像ぶれを一層よく軽減できるという効果も得られる。
【００７０】
さらに、ＣＭＯＳセンサからブロック読出しした画像から画像認識による顔の目の位置の検出を行うことにより、高速なフレームレートで顔の目の位置を検出できるという効果も得られる。
【図面の簡単な説明】
【図１】本発明の適用対象となる携帯端末の外観構成例を示す斜視図である。
【図２】携帯端末のカメラによるユーザの撮像イメージを示す図である。
【図３】画像表示位置の物理的な平行移動の例を示す図である。
【図４】一般的な携帯端末の回路構成を示すブロック図である。
【図５】本発明による携帯端末の回路構成例を示すブロック図である。
【図６】本発明による携帯端末の回路構成例を示すブロック図である。
【図７】本発明による携帯端末の回路構成例を示すブロック図である。
【図８】固定画素表示装置に通常の方法で斜め線を表示する場合のセル点灯例を示す図である。
【図９】固定画素表示装置にクリアタイプ技術で斜め線を表示する場合のセル点灯例を示す図である。
【図１０】テンプレート画像を示す図である。
【図１１】虹彩移動量の計測結果と、表示画像の平行移動量を予測すべき時刻とを示す図である。
【符号の説明】
１携帯端末、２画像表示画面、３カメラ、５目、６虹彩、８表示装置、９制動装置、２１ＣＰＵ、２３，２５描画ＩＣ、２４画像認識ＩＣ、２６デジタル補間フィルタ、２７加速度センサ、２８レンジセンサ

Claims

撮像手段と、
画像表示手段と、
前記撮像手段で撮影された画像から、画像認識によって顔の目の位置を検出する検出手段と、
前記検出手段の検出結果に基づいて、前記画像表示手段での画像の表示位置を変更させる表示位置変更手段と、を備え、
前記表示位置変更手段は、画像の表示位置をサブピクセル単位で平行移動させるデジタル補間フィルタであって、該デジタル補間フィルタでの処理によって発生する遅延時間分だけ将来の時点における画像の表示位置の平行移動量を予測して求める
画像表示装置。
請求項１に記載の画像表示装置において、
ユーザとの遠近方向の距離を計測する距離計測手段をさらに備え、
前記デジタル補間フィルタは、前記距離計測手段の計測結果に基づく画像の拡大・縮小処理をさらに行う
画像表示装置。
請求項１又は２に記載の画像表示装置において、
前記画像表示装置本体の加速度を計測する加速度計測手段をさらに備え、
前記表示位置変更手段は、前記検出手段の検出結果及び前記加速度計測手段の計測結果に基づいて、前記画像表示手段での画像の表示位置を変更させる
画像表示装置。
請求項１乃至３のいずれかに記載の画像表示装置において、
前記撮像手段はＣＭＯＳセンサである
画像表示装置。
画像表示装置本体と、
前記画像表示装置本体に取り付けられた撮像手段と、
前記画像表示装置本体に搭載されている画像表示手段と、
前記撮像手段で撮影された画像から、画像認識によって顔の目の位置を検出する検出手段と、
前記検出手段の検出結果に基づいて、画像表示手段に表示される画像と前記画像表示装置本体との位置関係を変更させる表示位置変更手段と、を備え、
前記表示位置変更手段は、前記画像表示装置本体に対し前記画像表示手段を物理的に平行移動させる制動装置である
画像表示装置。
請求項５に記載の画像表示装置において、
前記画像表示装置本体の加速度を計測する加速度計測手段をさらに備え、
前記表示位置変更手段は、前記検出手段の検出結果及び前記加速度計測手段の計測結果に基づいて、前記画像表示手段での画像の表示位置を変更させる
画像表示装置。
請求項５又は６のいずれかに記載の画像表示装置において、
前記撮像手段はＣＭＯＳセンサである
画像表示装置。
撮像手段と画像表示手段とを有する画像表示装置において前記画像表示手段に表示される画像のぶれを防止する方法であって、
前記撮像手段で撮影された画像から、画像認識によって顔の目の位置を検出する第１ステップと、
前記第１ステップでの検出結果に基づいて、前記画像表示手段での画像の表示位置を変更させる第２ステップと、を有し、
前記第２ステップにおいて、画像の表示位置をサブピクセル単位で平行移動させるデジタル補間フィルタが、該デジタル補間フィルタでの処理によって発生する遅延時間分だけ将来の時点における画像の表示位置の平行移動量を予測して求める
画像ぶれ防止方法。
撮像手段と画像表示手段とを有する画像表示装置において前記画像表示手段に表示される画像のぶれを防止する方法であって、
前記撮像手段で撮影された画像から、画像認識によって顔の目の位置を検出する第１ステップと、
前記第１ステップでの検出結果に基づいて、前記画像表示手段に表示される画像と前記画像表示装置本体との位置関係を変更させる第２ステップと、を有し、
前記第２ステップにおいて、前記画像表示装置本体に対し前記画像表示手段を物理的に平行移動させる
画像ぶれ防止方法。