JP5339464B2

JP5339464B2 - 表示装置

Info

Publication number: JP5339464B2
Application number: JP2010162631A
Authority: JP
Inventors: 拓也今井
Original assignee: NEC Infrontia Corp
Current assignee: NEC Platforms Ltd
Priority date: 2010-07-20
Filing date: 2010-07-20
Publication date: 2013-11-13
Anticipated expiration: 2030-07-20
Also published as: JP2012027528A

Description

本発明は表示装置、表示方法及び表示装置を制御するプログラムに関する。

従来、店舗に来店した顧客と従業員が接客端末でやりとりをする場合、第３者への個人情報流出の観点から、従業員は端末上に顧客の個人情報、例えば氏名、生年月日、住所、携帯電話の番号、職業、写真等を表示することができなかった。

そのため、顧客の個人情報を確認する場合、まず従業員のみが業務用端末で顧客情報データベースにアクセスして内容を確認した後、顧客に口頭もしくはプリントアウトした書類などで確認をとるという方法をとっていた。このような接客方法では、客と従業員が同時に個人情報を確認することができない。従って、従業員が確認した後、顧客に確認を取らなければならず、手続きが煩雑である。しかし、従来は個人の情報を他人に見られずに確認する適切な方法がなかった。

ところで、特許文献１および２には、タッチパネルに関する技術が記載されている。特許文献１には、マルチタッチ認識機能を有する表示装置及びその駆動方法に関する技術が記載されている。特許文献１に記載の技術では、液晶表示モジュールに複数のカメラを一体化している。当該複数のカメラが撮影した画像に基づき、タッチ部分の座標を算出する。そして、算出された位置に基づき、タッチ認識を信号処理して液晶表示モジュールを制御するものである。

特許文献２には、水平の卓上ディスプレイについての技術が記載されている。特許文献２に記載の技術は、ディスプレイ上にオブジェクトを表示させ、当該オブジェクトを操作するためのポップアップアイテムを、当該オブジェクトとは離れた場所に表示する。それにより、オブジェクトの編集、操作等をより容易にし、更に、複数のユーザが同時に操作することを可能とする。

また、特許文献３に記載の技術は、コンピュータディスプレイ上の文書データのうちの隠したい部分を隠して表示するものである。特許文献３に記載の技術は、文書データ中にマスクデータを挿入し、ディスプレイに表示された文書データの目的の位置にマスク掛けを行う。そして、当該マスクデータの変更を禁止して、マスクにパスワードを設定する。パスワードを入力すればマスクが解除されるものである。

特開２００８−１５２７５２号公報特開２００６−２２８２１５号公報特開２００７−１１５２２８号公報

しかしながら、特許文献１に記載の技術では、複数カメラを使用し、カメラによって撮影された画像に基づいてパネル上にタッチされたタッチイメージのそれぞれの座標を計算する。そのため、表示装置には複数のカメラが必要であるという問題がある。

また、個人情報等をタッチパネルに表示する場合、特許文献２に記載の技術では、個人情報がオブジェクトとは離れた位置に表示されるため、他人に個人情報が閲覧される恐れがあるという問題がある。

また、特許文献３に記載の技術では、マスクされ表示された情報のマスクを解除する際に、パスワードを用いて解除しなければならず、処理が面倒であるという問題がある。

本発明においては、顧客の個人情報を、他人に閲覧され難いように表示する表示装置を提供することを目的とする。

本発明にかかる表示装置は、マルチタッチ認識機能を有し、ユーザの手が表示パネルに接触した際に、接触部分を検出した形状に基づいて特定した表示領域のマスク処理を解除し、接触部分を検出している間はマスク処理の解除を継続し、接触部分を検出しなくなるとマスク処理を再開する表示装置であって、形状は、ユーザの手の甲の側面とそれに連なる小指の側面の接触によって形成されるものであり、接触を検出した形状が略くの字形である場合、表示領域は略くの字を円弧として、当該円弧の内側にある中心角を９０度とする扇形であるものである。

本発明によれば、顧客の個人情報を、他人に閲覧され難いように表示する表示装置を提供することができる。

実施の形態１にかかる表示装置１の概要を示す図である。実施の形態１にかかる表示装置１を詳細に示す図である。実施の形態１にかかる表示装置１を示す図である。実施の形態１にかかる本実施の形態にかかる表示装置１の動作を示すフローチャートである。実施の形態１にかかるマスクされた状態の表示パネル１０を示す図である。実施の形態１にかかる手と判定されたときの画像を示す図である。白領域が円弧であるかを判定するために必要な３点を説明するための図である。白領域が円弧であるかを判定する方法を説明するための図である。実施の形態１にかかる左手を表示パネル１０にかざした場合に、マスクが外された後の表示を示す図である。実施の形態１にかかる右手を表示パネル１０にかざした場合に、マスクが外された後の表示を示す図である。白領域が略直線であるかを判定する方法を説明するための図である。白領域が略直線であると判定された場合にマスク処理を解除する範囲を示す図である。

実施の形態１
以下、図面を参照して本発明の実施の形態について説明する。説明の明確化のため、以下の記載及び図面は、適宜、省略及び簡略化がなされている。また、様々な処理を行う機能ブロックとして図面に記載される各要素は、ハードウェア的には、ＣＰＵ（Central Processing Unit）、メモリ、その他の回路で構成することができ、ソフトウェア的には、メモリにロードされたプログラムなどによって実現される。したがって、これらの機能ブロックがハードウェアのみ、ソフトウェアのみ、またはそれらの組合せによっていろいろな形で実現できることは当業者には理解されるところであり、いずれかに限定されるものではない。また、以下の図面に示す各装置の構成は、例えば記憶装置に読み込まれたプログラムをコンピュータ（ＰＣ（personal computer）や携帯端末装置等）上で実行することにより実現される。

また、プログラムは、様々なタイプの非一時的なコンピュータ可読媒体（non-transitory computer readable medium）を用いて格納され、コンピュータに供給することができる。非一時的なコンピュータ可読媒体は、様々なタイプの実体のある記録媒体（tangible storage medium）を含む。非一時的なコンピュータ可読媒体の例は、磁気記録媒体（例えばフレキシブルディスク、磁気テープ、ハードディスクドライブ）、光磁気記録媒体（例えば光磁気ディスク）、ＣＤ−ＲＯＭ（Read Only Memory）、ＣＤ−Ｒ、ＣＤ−Ｒ／Ｗ、半導体メモリ（例えば、マスクＲＯＭ、ＰＲＯＭ（Programmable ROM）、ＥＰＲＯＭ（Erasable PROM）、フラッシュＲＯＭ、ＲＡＭ（Random Access Memory））を含む。また、プログラムは、様々なタイプの一時的なコンピュータ可読媒体（transitory computer readable medium）によってコンピュータに供給されてもよい。一時的なコンピュータ可読媒体の例は、電気信号、光信号、及び電磁波を含む。一時的なコンピュータ可読媒体は、電線及び光ファイバ等の有線通信路、又は無線通信路を介して、プログラムをコンピュータに供給できる。

図１は、本実施の形態にかかる表示装置１の概要を示す図である。本実施の形態にかかる表示装置１は、表示パネル２と、カメラ３と、領域算出部４と、表示部５とを有する。

本実施の形態にかかる表示装置は、マルチタッチ認識機能を有する表示装置において、ユーザが表示パネル２に接触した際に、接触部分を検出した形状に基づいて特定した表示領域のマスク処理を解除するものである。表示装置１は、透光性の表示パネル２の、ユーザがタッチする側とは反対側である背面側から、表示パネル２のユーザの接触部分に形成される影をカメラ３により撮影する。カメラ３が撮影した撮影画像を解析して、ユーザが表示パネルに接触したことを示すマルチタッチを検出し、ユーザが表示パネル２に接触した接触部分の形状を検出する。この検出した接触部分の形状の検出結果に基づき、表示パネル２のマスク処理を解除して情報表示する表示領域を算出する。そして、算出結果に基づき、表示パネル２の表示領域のマスク処理を解除し、情報を表示する。ここで、マスク処理を解除する表示領域は、ユーザが手を略くの字型にして表示パネルに接触させた当該接触部分（手の甲の側面とそれに連なる小指の側面が接触する部分）を円弧として、当該円弧の内側にある中心角を９０度とした略扇形である。

本実施の形態においては、タッチパネル上で、情報をユーザである顧客の略くの字型の手の中に表示することができる。これにより、顧客の個人情報を端末上に表示し、尚且つ周囲にはその情報を隠すことができる表示装置を提供することができる。

本実施の形態にかかる表示装置１について、さらに詳細に説明する。図２は、図１の表示装置１を詳細に示す図である。表示端末１は、表示パネル１０と、ＵＳＢカメラ１１と、領域算出部としてのＣＰＵ１２、メモリ１３、及びグラフィックカード１４と、表示部としてのプロジェクタ１５とを有する。ここで、図１の表示パネル１は、図２の表示パネル１０で、図１のカメラ３は図２のＵＳＢカメラ１１で構成される。また、図２の表示領域算出部４は図２のＵＳＢ１２、メモリ１３及びグラフィックカード１４で構成され、図１の表示部５は、図２のプロジェクタ１５で構成されている。表示装置１は、例えばネットワークを通じて、顧客のデータを有するサーバと接続され、表示パネルから入力された指示に従い、サーバから取得した顧客の個人情報等を表示するものである。表示パネル１０は、透光性のスクリーンで覆われており、プロジェクタ１０Ｅからの映像を表示する。ユーザである顧客及び従業員は、表示パネル１０に表示されているアプリケーション上でタッチ操作を行う。ここで、表示パネル１０は半透明であると更に望ましい。本実施の形態では、表示パネル１０は半透明である。また、表示パネル１０は、床面に水平に設置されているものとして説明する。

ＵＳＢカメラ１１は、表示パネル１０のユーザがタッチする側とは反対側である背面側に設置され、前記表示パネルのユーザの接触部分に形成される影を撮影する。本実施の形態においては、水平に設置された表示パネル１０の下にレンズ部分を上向きにして設置され、ユーザである従業員および顧客の手の影を撮影する。ＵＳＢカメラ１１は、撮影した映像をＣＰＵ１２に送信する。

ＣＰＵ１２は、メモリ１３及びグラフィックカード１４を制御する。メモリ１３は、情報隠蔽方法を実装したアプリケーションを格納している。

ＣＰＵ１２は、ＵＳＢカメラ１１からの画像をグラフィックカード１４に渡す。グラフィックカード１４は、不図示であるＧＰＵ（Graphic Processing Unit）とＶＲＡＭ（Video Random Access Memory）を持つ。ＧＰＵは、ＵＳＢカメラ１１から送られてくる画像処理し、ＶＲＡＭはＧＰＵが処理したデータを蓄える。グラフィックカード１４は、処理結果をプロジェクタ１５に出力する。

グラフィックカード１４は、撮影画像を左右反転して二値化し、ユーザの接触部分の座標を検出する。そして、当該接触部分の座標の示す形状が略円弧である場合、接触部分として検出する。この際、表示パネル１０の表示は、一部を除いてマスク処理されている。

また、本実施の形態において、ユーザが表示パネル１０に接触した場合、グラフィックカード１４は、接触部分を検出する。そして、検出された接触部分に応じた表示領域を算出する。さらに、表示領域毎に異なる情報を表示する。

プロジェクタ１５は、ＣＰＵ１２から送られてきた情報に従い、情報を表示パネル１０に映し出す。

表示装置１について更に説明する。図３は、表示装置１を示す図である。手２０は、ユーザである顧客または従業員の手である。顧客または従業員は、アプリケーションによって接客端末の表示パネルに映し出される画面をタッチ操作する。

マスク処理適用領域２１は、接客端末１０の表示パネル上において、マスク処理が適用される範囲を示している。表示装置１は、手２０によって覆われた（影になった）周辺のマスク処理を解除する。これにより、他人に閲覧されずに、情報を表示することができる。

次に、図４乃至図８を用いて、本実施の形態にかかる表示装置１の動作について説明する。図４は、本実施の形態にかかる表示装置１の動作を示すフローチャートである。

まず、表示装置１の表示パネル１０上に、顧客の個人情報は項目のみが表示される（ステップＳ１）。この際、個人情報はマスクされている。図５は、マスクされた状態の表示パネル１０を示す図である。

次に、従業員が表示パネル１０上に手をかざす。ＵＳＢカメラ１１は、表示パネル１０の映像を画像として取りこむ（ステップＳ２）。ここで、取り込んだ画像は、表示パネル上で操作している者から見ると、左右が反転したものになっている。そのため、マスク加工処理を行う際のことを考慮し、ＵＳＢカメラ１１は、取り込んだ画像の左右を反転させる。表示パネルに手２０が近ければ近いほど影は濃くなるため、取り込んだ画像では、接触部分付近はより黒く表示される。

次に、ＵＳＢカメラ１１は、取り込んだ画像をＣＰＵ１２に出力し、ＣＰＵ１２は、出力された画像をグラフィックカード１４に出力する。グラフィックカード１４は、取り込んだ画像を２５６階調（０〜２５５）のグレースケール画像へ変換する（ステップＳ３）。これによって、何も接触していない領域は黒領域となり、何か接触している領域は白領域となる。

次に、グラフィックカード１４は、ステップＳ３でグレースケール変換を行った画像において、閾値を６０とし、グラフィックカード１０Ｄは、輝度が６０以下である部分の画素を白色、輝度が６１以上である部分の画素を黒色に変換し、２値化する（ステップＳ４）。画素とは、画面を構成する最小単位である。

次に、グラフィックカード１４は、黒色と白色の２値画像に変換されたものに伸縮処理・膨張処理を加え、面積が５画素以下の白領域をノイズとしてみなし、除去する（ステップＳ５）。そして、ステップＳ４で抽出した画像より、残っている白領域のうち所定の長さ以下のもの（例えば１０ｃｍ）以下のものは、手の影ではないと判定し、消去する（ステップＳ６）。白領域の長さは、一方の端から他方の端まで領域の中心に沿って何点かプロットし、それらの長さを合算して求める。

次に、グラフィックカード１４は、残った白領域の座標を計算し、円弧になっている部分があれば、その白領域は手が表示パネルに触れている部分であると判定する（ステップＳ７）。図６は手と判定されたときの画像を示す図である。２５は、表示パネルに触れていると判定された手の形状（手の甲の側面とそれに連なる小指の側面が接触した部分）を表している。なお、図６では、白領域の外縁部のみ、何点かのポイントを選んで表示しているが、実際は、白領域の全域にわたって画素の分だけポイントが存在している。

本実施の形態では、白領域が所定の長さ以下のものは手の影ではないと判定し、次に白領域が円弧の形状をしているか否かの判定をしているが、形状の判定の後に長さの判定を行うようにしてもよい。

ここで、白領域が円弧になっているか否かの判定方法を説明する。まず、グラフィックカード１０Ｄは、白領域の座標を取得する。図７は、白領域が円弧であるかを判定するために必要な３点を説明するための図である。
（１）取得した白領域の座標の中から、白領域の一方の端の座標、白領域の他方の端の座標を取得し、それぞれを点Ａ、点Ｃとする。点Ａと点Ｃ間をつないで直線とし、この直線から最も遠い点をＢとする。ここで、ベクトルａは点Ｂから点Ａへのベクトルであり、ベクトルｂは点Ｂから点Ｃへのベクトルである。またθは∠Ｂの角度を示す。
（２）Ａ、Ｂ、Ｃの３点からなる三角形において、内積を使用し、∠Ｂの角度θを求める。図８は、白領域が円弧であるかを判定する方法を説明するための図である。

ここで、図８において、ここで、ベクトルａ及びベクトルｂを以下のように定める。

内積の公式より、以下のようにcosθは求められ、θを求めることができる。

なお、ベクトルａ、ベクトルｂは、Ａ、Ｂ、Ｃの３点の座標から求める。
（３）点Ｂにおける角度θが９０度より大きく、１８０度より小さければ、白領域の部分は円弧であると判定する。
上記は、右手をかざした場合であるが、左手をかざした場合も同様にして判定することができる。

ＣＰＵ１２は、ステップＳ７で円弧であると判定された場合、マスク処理を除去し、個人情報を表示する（ステップＳ８）。図９は、左手を表示パネル１０にかざした場合に、マスクが外された後の表示を示す図である。手２６は、表示パネル１０と左の手の接触部分を示す。左手で表示パネル１０に接触した場合、表示パネル１０は、タッチを検出した箇所である手２６の、ユーザから見て最も右の座標をもつＡ点から垂直に下におろした線、及び最もユーザ側に近い点であるＢ点から水平方向右側に引いた線で囲まれる略扇形の範囲を、マスク処理を解除する表示領域とする。そして、この表示領域にあるマスクを外す。

図１０は、右手を表示パネル１０にかざした場合に、マスクが外された後の表示を示す図である。手２７は、表示パネル１０と左の手の接触部分を示す。右手で表示パネル１０に接触した場合、表示パネル１０は、タッチを検出した箇所である手２６の、ユーザから見て最も左の座標をもつＡ点から垂直に下におろした線、及び最もユーザ側に近い点であるＢ点から水平方向左側に引いた線で囲まれる範囲を、マスク処理を解除する表示領域とする。そして、この表示領域にあるマスクを外す。

左右どちらの手の場合であっても、手が画面から離れ、接触部を検出しなくなると、マスク処理の解除を止めて、表示のマスクを再開する。（ステップＳ９、Ｓ１０）
従来の接客端末では、顧客の個人情報を接客端末上に表示することができず、顧客情報の確認までに手間が発生していた。本実施の形態にかかる表示装置１は、顧客と従業員が接客端末上で同時に顧客情報の確認ができる。そのため、接客時間の短時間化が期待でき、従来よりもスムーズな接客を行うことが可能となる。

実施の形態２
本実施の形態は、実施の形態１がマルチタッチ認識によって検出する形状が略円弧（略くの字型）であるのに対して、マルチタッチ認識よって検出する形状が縦の略直線である点が異なる。表示装置は、実施の形態１にかかる表示装置と構成は同じであるので、構成についての説明は省略する。本実施の形態では、ユーザつまり顧客が表示パネル１０に触れた略直線に基づく範囲のマスク処理を解除して情報を表示する。本実施の形態では、表示領域算出部４は、接触部分の形状が略直線である場合、当該接触部分を一辺とした略長方形を表示領域として算出する。

図１２の手２８及び２９は、顧客が指をまっすぐにのばした状態で画面に触れた際に、接触を検出した点を示す。図１２（ａ）は、表示画面の左端に近いところに左手を触れ、接触を検出した箇所を示し、図１２（ｂ）は、表示画面の右端に近いところに右手を触れ、接触を検出した箇所を示す。

本実施の形態にかかる表示領域の検出方法について、更に詳しく説明する。
手が指を伸ばして真っ直ぐに表示パネル上に置かれているかどうかの判定方法を、図１１を用いて説明する。
（１）取得した白領域の座標の中から、一方の端で最もｘ軸の座標値が小さい座標と、他方の端で最もｘ軸の座標値が小さい座標を取得し、それぞれ点Ｄ、点Ｅとし、ＤＥ間に直線を引く。
（２）（１）で引いた直線から最も距離のある座標を取得し、点Ｆとする。
（３）点Ｆと直線との距離が所定の長さ（例えば２ｃｍ）以内、即ち略直線であれば、手が表示パネル上に真っすぐな状態で置かれていると判定する。なお、直線ＤＥは、ｙ軸に対して平行である必要はなく、傾きを持っていてもよく、例えば、ｙ軸に対して＋４５度、−４５度の傾きの範囲にあればよい。

図１２（ａ）は、左手が、表示パネル上に、手が指を伸ばして真っ直ぐに置かれた場合を示す図である。
（４）点Ｇと点Ｈの距離となる直線Ｚの長さが所定の長さ（例えば１０ｃｍ）以上であれば、手が置かれていると判定する。長さは、一方の端から他方の端まで領域の中心に沿って何点かプロットし、それらの長さを合算して求める。そして、直線Ｚに対して水平方向の領域（領域２８、点Ｇから水平に伸ばした線、および点Ｈから水平に伸ばした線で囲まれた領域）のマスクを解除する。図１２（ａ）では、領域２８から右に直線を伸ばしているが、これは、左手を、表示パネルの左端に近いところにおいた場合を想定している。手が、表示パネルの中心より左側におかれていれば、領域２８の右側の領域のマスクを除去し、表示パネルの中心より右側におかれていれば、領域２８の左側の領域のマスクを除去する。なお、（３）の略直線か否かの判定と、（４）の所定の長さ以上であるか否かの判定は、（４）の長さの判定をしてから（３）の略直線の判定をするようにしてもよい。

図１２（ｂ）は、右手が、表示パネル上に、手が指を伸ばして真っ直ぐに置かれた場合を示す図である。このとき、点Ｉと点Ｊの距離となる直線Ｚ'の長さが所定の長さ（例えば１０ｃｍ）以上であれば、手が置かれていると判定し、直線Ｚ'に対して水平方向の領域（領域２９、点Ｉから水平に伸ばした線、および点Ｊから水平に伸ばした線で囲まれた領域）のマスクを解除する。図１２（ｂ）では、領域２９から左に直線を伸ばしているが、これは、右手を、表示パネルの右端に近いところにおいた場合を想定している。手が、表示パネルの中心より左側におかれていれば、領域２９の右側の領域のマスクを除去し、表示パネルの中心より右側におかれていれば、領域２９の左側の領域のマスクを除去する。
マスク処理解除後、表示パネル上から手が離されたら、マスク解除処理を行った部分に再びマスク処理を実施し、個人情報を隠す。

なお、マルチタッチを認識する装置は、上記の実施の形態１，２に記載のものには限定されず、赤外線イメージセンサー方式、抵抗膜方式、静電容量方式等の方式によってマルチタッチを認識できるものであればよい。

本実施の形態１及び２においては、今までにない新しいインタフェースを端末に実装することで、顧客に、端末を見てみたい又は触れてみたいといった感想を持ってもらえる可能性があり、端末からも顧客に対して店舗アピールができる。

従来では、マルチタッチを利用したインタフェースと言えば、２本の指を同時に使用した画像の拡大・縮小・回転や、程度であり、また、従来、マルチタッチに対応していないタッチパネルも存在し、効果的なインタフェースを提供しているとは言いがたかった。本実施の形態にかかる表示装置１では、複数の接触の同時認識をすることが可能であり、そのため、顧客により訴求力のあるインタフェースを持つアプリケーションを搭載した接客端末を提供することができる。

本発明は上記実施の形態に限られたものではなく、趣旨を逸脱しない範囲で適宜変更することが可能である。例えば、ＵＳＢカメラ１１から取り込んだ画像を常に処理し続けるため、表示装置は高い画像処理能力を必要とする。そのため、接客端末はＧＰＵとＶＲＡＭを持つグラフィックカードを持つようにしている。ここで、グラフィックカードではなく、マザーボードのチップセットに搭載されているグラフィック機能を使用すれば、画像処理・表示に遅延が発生するなど画像処理能力は下がってしまうが、より安価な値段で端末を提供することができる。

（付記１）
マルチタッチ認識機能を有する表示装置において、ユーザが表示パネルに接触した際に、接触部分を検出した形状に基づいて特定した表示領域のマスク処理を解除することを特徴とする表示装置。
（付記２）
前記接触を検出した前記形状が略くの字形である場合、前記表示領域は前記略くの字を円弧として、当該円弧の内側にある中心角を９０度とする扇形であることを特徴とする表示装置。
（付記３）
前記接触を検出した前記形状は略直線である場合、前記表示領域は略直線を含む四角形であることを特徴とする表示装置。
（付記４）
透光性の表示パネルと、
前記表示パネルのユーザがタッチする側とは反対側である背面側に設置され、前記表示パネルのユーザの接触部分に形成される影を撮影するカメラと、
前記カメラが撮影した撮影画像を解析して、ユーザが前記表示パネルに接触した前記接触部分の形状を検出して、前記検出した前記接触部分の形状に基づき、前記表示パネル上で情報を表示する領域を算出する領域算出部と、
前記パネルに情報が表示されないようにマスク処理し、前記領域算出部が算出した前記表示領域のみマスク処理を外して情報を表示させる表示部とを有する表示装置。
（付記５）
前記領域算出部は、前記接触部分の形状が略くの字である場合、当該接触部分を円弧として、当該円弧の内側にある中心角を９０度とした略扇形を前記表示領域として算出する付記４記載の表示装置。
（付記６）
前記領域算出部は、前記接触領部分の形状が略直線である場合、当該接触部分を一辺とした略長方形を前記表示領域として算出する付記４記載の表示装置。
（付記７）
前記表示部は、前記表示領域にユーザの個人情報を表示する付記４乃至６のうちいずれか１項記載の表示装置。
（付記８）
前記表示パネルは半透明である付記４乃至７のいずれか１項記載の表示装置。
（付記９）
前記検出部は、前記撮影画像を左右反転して二値化し、ユーザの接触部分の座標を検出する付記４乃至８のいずれか１項記載の表示装置。
（付記１０）
マルチタッチ認識機能を有する表示装置において、ユーザが表示パネルに接触した際に、接触部分を検出した形状に基づいて特定した表示領域のマスク処理を解除することを特徴とする表示装置の表示方法。
（付記１１）
前記接触を検出した前記形状が略くの字形である場合、前記表示領域は前記略くの字を円弧として、当該円弧の内側にある中心角を９０度とする扇形であることを特徴とする表示装置の表示方法。
（付記１２）
前記接触を検出した前記形状は略直線である場合、前記表示領域は略直線を含む四角形であることを特徴とする表示装置の表示方法。
（付記１３）
カメラにより、表示パネルのユーザがタッチする側とは反対側である背面側に設置され、前記表示パネルのユーザの接触部分に形成される影を撮影し、
前記カメラが撮影した撮影画像を解析して、ユーザが前記表示パネルに接触した前記接触部分の形状を検出し、
前記検出した前記接触部分の形状に基づき、前記表示パネル上で情報を表示する領域を算出し、
前記パネルに情報が表示されないようにマスク処理した前記表示パネルに前記領域算出部が算出した前記表示領域のみマスク処理を外して情報を表示させる表示装置の制御方法。
（付記１４）
前記表示領域を算出する際、前記接触部分の形状が略くの字である場合、当該接触部分を円弧として、当該円弧の内側にある中心角を９０度とした略扇形を前記表示領域として算出する付記１３記載の表示装置の制御方法。
（付記１５）
前記表示領域を算出する際、前記接触領部分の形状が略直線である場合、当該接触部分を一辺とした略長方形を前記表示領域として算出する付記１３記載の表示装置の制御方法。
（付記１６）
前記表示パネルに情報を表示する際、前記表示領域にユーザの個人情報を表示する付記１３乃至１５のうちいずれか１項記載の表示装置の制御方法。
（付記１７）
前記接触部分を検出する際、前記撮影画像を左右反転して二値化し、ユーザの接触部分の座標を検出する付記１３乃至１６のいずれか１項記載の表示装置の制御方法。
（付記１８）
マルチタッチ認識機能を有する表示装置において、ユーザが表示パネルに接触した際に、接触部分を検出した形状に基づいて特定した表示領域のマスク処理を解除する処理をコンピュータに実行させることを特徴とする表示装置の制御プログラム。
（付記１９）
カメラにより、表示パネルのユーザがタッチする側とは反対側である背面側に設置され、前記表示パネルのユーザの接触部分に形成される影を撮影し、
前記カメラが撮影した撮影画像を解析して、ユーザが前記表示パネルに接触した前記接触部分の形状を検出し、
前記検出したそれぞれの前記接触部分の形状に基づき、前記表示パネル上で情報を表示する領域を算出し、
前記パネルに情報が表示されないようにマスク処理した前記表示パネルに前記領域算出部が算出した前記表示領域のみマスク処理を外して情報を表示させる処理をコンピュータに実行させる表示装置の制御プログラム。

１表示装置
２表示パネル
３カメラ
４領域算出部
５表示部
１０表示パネル
１１ＵＳＢカメラ
１２ＣＰＵ
１３メモリ
１４グラフィックカード
１５プロジェクタ
２０手
２１マスク処理適用領域
２５手
２６手
２７手
２８手
２９手

Claims

マルチタッチ認識機能を有し、ユーザの手が表示パネルに接触した際に、接触部分を検出した形状に基づいて特定した表示領域のマスク処理を解除し、前記接触部分を検出している間はマスク処理の解除を継続し、前記接触部分を検出しなくなるとマスク処理を再開する表示装置であって、
前記形状は、ユーザの手の甲の側面とそれに連なる小指の側面の接触によって形成されるものであり、
前記接触を検出した前記形状が略くの字形である場合、前記表示領域は前記略くの字を円弧として、当該円弧の内側にある中心角を９０度とする扇形であることを特徴とする表示装置。
マルチタッチ認識機能を有し、ユーザの手が表示パネルに接触した際に、接触部分を検出した形状に基づいて特定した表示領域のマスク処理を解除し、前記接触部分を検出している間はマスク処理の解除を継続し、前記接触部分を検出しなくなるとマスク処理を再開する表示装置であって、
前記形状は、ユーザの手の甲の側面とそれに連なる小指の側面の接触によって形成されるものであり、
前記接触を検出した前記形状が略直線である場合、前記表示領域は略直線を含む四角形であることを特徴とする表示装置。
透光性の表示パネルと、
前記表示パネルのユーザがタッチする側とは反対側である背面側に設置され、前記表示パネルのユーザの接触部分に形成される影を撮影するカメラと、
前記カメラが撮影した撮影画像を解析して、ユーザの手が前記表示パネルに接触した前記接触部分の形状を検出して、前記検出した前記接触部分の形状に基づき、前記表示パネル上で情報を表示する領域を算出する領域算出部と、
前記パネルに情報が表示されないようにマスク処理し、前記領域算出部が算出した前記表示領域のみマスク処理を解除して情報を表示させる表示部と、を有し、前記接触部分を検出している間はマスク処理の解除を継続し、前記接触部分を検出しなくなるとマスク処理を再開する表示装置であって、
前記形状は、ユーザの手の甲の側面とそれに連なる小指の側面の接触によって形成されるものであり、
前記領域算出部は、前記接触部分の形状が略くの字である場合、当該接触部分を円弧として、当該円弧の内側にある中心角を９０度とした略扇形を前記表示領域として算出することを特徴とする表示装置。
透光性の表示パネルと、
前記表示パネルのユーザがタッチする側とは反対側である背面側に設置され、前記表示パネルのユーザの接触部分に形成される影を撮影するカメラと、
前記カメラが撮影した撮影画像を解析して、ユーザの手が前記表示パネルに接触した前記接触部分の形状を検出して、前記検出した前記接触部分の形状に基づき、前記表示パネル上で情報を表示する領域を算出する領域算出部と、
前記パネルに情報が表示されないようにマスク処理し、前記領域算出部が算出した前記表示領域のみマスク処理を解除して情報を表示させる表示部と、を有し、前記接触部分を検出している間はマスク処理の解除を継続し、前記接触部分を検出しなくなるとマスク処理を再開する表示装置であって、
前記形状は、ユーザの手の甲の側面とそれに連なる小指の側面の接触によって形成されるものであり、
前記領域算出部は、前記接触領部分の形状が略直線である場合、当該接触部分を一辺とした略長方形を前記表示領域として算出することを特徴とする表示装置。
前記表示部は、前記表示領域にユーザの個人情報を表示する請求項３または４記載の表示装置。
前記表示パネルは半透明である請求項３乃至５のいずれか１項記載の表示装置。