JP2009265438A - Display device and display method - Google Patents
Display device and display method Download PDFInfo
- Publication number
- JP2009265438A JP2009265438A JP2008116229A JP2008116229A JP2009265438A JP 2009265438 A JP2009265438 A JP 2009265438A JP 2008116229 A JP2008116229 A JP 2008116229A JP 2008116229 A JP2008116229 A JP 2008116229A JP 2009265438 A JP2009265438 A JP 2009265438A
- Authority
- JP
- Japan
- Prior art keywords
- light
- display
- color
- pointer
- data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Controls And Circuits For Display Device (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
Description
本発明は、レーザポインタなどの指示装置によって画面に照射された光の位置を特定することができる表示装置および表示方法に関する。 The present invention relates to a display device and a display method capable of specifying the position of light irradiated on a screen by an indication device such as a laser pointer.
大型の画面を用いてプレゼンテーションを行う発表者は、レーザポインタなどの光を照射して、画面に表示される映像内の位置を指し示し、画面を見る人は、画面に照射されたレーザポインタなどの光の位置によって、発表者が指し示したい位置を認識する。 A presenter who makes a presentation using a large screen irradiates light such as a laser pointer to indicate the position in the image displayed on the screen, and a viewer who views the screen uses a laser pointer or the like irradiated on the screen. The position that the presenter wants to point to is recognized by the position of the light.
特許文献１に記載されているポインティングデバイスは、レーザポインタによって指示ポインタが指示されている画面をＣＣＤカメラで撮像し、ＣＣＤカメラによって撮像された画像の中の画面の辺を認識し、認識した画面の辺の位置から指示ポインタの座標位置を特定するものである。したがって、画面に対して斜めの位置から指示してもレーザポインタによって指示される位置を特定することができる。
The pointing device described in
特許文献２に記載されている指示情報入力装置は、プロジェクタによって画像が表示された投影スクリーンをビデオカメラによって撮影し、ビデオカメラによって撮影された映像信号と、表示している映像信号との差分を抽出することによって、レーザポインタによって投射されている光の位置を特定する。
The instruction information input device described in
特許文献３に記載されている視野角制御表示装置は、見る人と画面との角度に応じて異なる画面を表示装置に表示するものであり、画面を構成する各発光素子に対応して、その発光素子による画面を見ることのできる角度内からきた光のみを選択受光する受光素子を備える。視野角制御表示装置は、この受光素子によって、レーザポインタなどから照射される光を受光する。
The viewing angle control display device described in
しかしながら、液晶ディスプレイなど表示装置自体が発光する画面にレーザポインタなどで光を照射した場合、画面を見る人は、レーザポインタからの光が液晶ディスプレイに吸収されて、光が照射されている位置を判別し難い場合がある。特許文献３に記載されている視野角制御表示装置は、発光素子ごとに受光素子が設けられており、レーザポインタによって光が照射された位置の受光素子が光を受光するので、光が照射された位置を正確に把握することはできるが、画面を見る人に光が照射されている位置をわかりやすくすることはできない。
However, when light is emitted from a laser pointer or the like to a screen that the display device itself emits, such as a liquid crystal display, a person who looks at the screen can see the position where the light from the laser pointer is absorbed by the liquid crystal display. It may be difficult to distinguish. In the viewing angle control display device described in
本発明の目的は、光を照射する指示装置によって画面に照射された光の位置を明示することができる表示装置および表示方法を提供することである。 An object of the present invention is to provide a display device and a display method that can clearly indicate the position of light irradiated on a screen by an indication device that emits light.
本発明は、画像を表示画面上に表示する複数の画素と、前記表示画面には受光する光の強さを複数の位置ごとに検出する検出手段とを備える表示装置であって、
前記検出手段によって検出された光の強さに応じて少なくとも光の検出位置を示す画像を前記表示画面上に表示させる制御手段とを含むことを特徴とする表示装置である。
The present invention is a display device comprising a plurality of pixels for displaying an image on a display screen, and detection means for detecting the intensity of light received at each of the plurality of positions on the display screen,
And a control unit that displays on the display screen at least an image indicating a light detection position in accordance with the intensity of light detected by the detection unit.
また本発明は、画像を表示する複数の画素と、受光する光の強さを位置ごとに検出する検出部とを備える表示装置に画像を表示する表示方法であって、
前記検出部によって検出された光の強さに応じて、検出位置を示す画像を表示させる制御ステップとを含むことを特徴とする表示方法である。
Further, the present invention is a display method for displaying an image on a display device including a plurality of pixels for displaying an image and a detection unit that detects the intensity of received light for each position.
And a control step of displaying an image indicating a detection position in accordance with the intensity of light detected by the detection unit.
本発明によれば、画像を表示画面上に表示する複数の画素と、前記表示画面には受光する光の強さを画素ごとに検出する検出手段とを備える表示装置に画像を表示するにあたって、制御手段によって、前記検出手段によって検出された光の強さに応じて少なくとも光の検出位置を示す画像が前記表示画面上に表示される。 According to the present invention, when displaying an image on a display device that includes a plurality of pixels that display an image on a display screen, and a detection unit that detects the intensity of light received on the display screen for each pixel. The control means displays an image showing at least a light detection position on the display screen in accordance with the intensity of light detected by the detection means.
したがって、光を照射する指示装置によって画面に照射された光の位置を明示することができる。 Therefore, the position of the light irradiated on the screen can be clearly indicated by the pointing device that emits light.
また本発明によれば、画像を表示する複数の画素と、受光する光の強さを位置ごとに検出する検出部とを備える表示装置に画像を表示するにあたって、制御ステップでは、前記検出部によって検出された光の強さに応じて、検出位置を示す画像を表示する。 According to the present invention, in displaying an image on a display device including a plurality of pixels that display an image and a detection unit that detects the intensity of received light for each position, in the control step, the detection unit An image indicating the detection position is displayed according to the detected light intensity.
したがって、本発明に係る表示方法を提供すれば、光を照射する指示装置によって画面に照射された光の位置を明示することができる。 Therefore, if the display method according to the present invention is provided, the position of the light irradiated on the screen can be clearly indicated by the pointing device that emits light.
図１は、本発明の実施の一形態である表示装置１０を含む表示システム１の構成を示す図である。表示システム１は、表示装置１０および発光指示装置３０を含んで構成される。本発明に係る表示方法は、表示装置１０によって処理される。
FIG. 1 is a diagram showing a configuration of a
表示装置１０は、Ｎ個の映像入力端子１１、表示用・表示処理用一時記憶部１２、光センサ内蔵表示用デバイス１３、表示処理部１４、中央演算部１５、内部記憶部１６、リモートコントロール（以下「リモコン」という）受光部１７、リモコン処理部１８、受光箇所判定部１９、指示ポインタ表示データ作成部２０および受光波形判定部２１を含んで構成される。
The
映像入力端子１１は、パーソナルコンピュータ（以下「パソコン」という）などからの映像信号が入力される端子であり、Ｎ個の入力端子が設けられている。Ｎは、自然数である。各映像入力端子１１から入力された映像信号は、表示用・表示処理用一時記憶部１２に送られる。表示用・表示処理用一時記憶部１２は、半導体メモリあるいはハードディスク装置などによって構成される書き込みおよび読み出し可能な記憶装置であり、映像入力端子１１から受け取る映像信号を表す画像情報、および中央演算部１５によって表示処理および表示用加工処理が行われる画像情報を記憶する。表示用・表示処理用一時記憶部１２に記憶される画像情報は、表示処理部１４および中央演算部１５から読み出し可能である。
The
光センサ内蔵表示用デバイス１３は、表示画像を構成する複数の画素、および受光する光の強さおよび色を検出する検出手段および検出部である光センサを画素ごとに内蔵する液晶ディスプレイである。さらに、光センサ内蔵表示用デバイス１３は、各画素を構成する赤、緑および青のサブピクセルごとに光センサが設けられ、受光した光の色も画素ごとに検出することができる。光センサ内蔵表示用デバイス１３は、表示処理部１４から受け取る画像情報を表示し、各光センサが画素ごとに検出する光の強さ（以下「受光の強さ」という）および色（以下「受光色」という）を中央演算部１５に送る。
The photosensor built-in
表示処理部１４は、表示用・表示処理用一時記憶部１２から読み出した画像情報を、中央演算部１５から指示される形式、たとえば光センサ内蔵表示用デバイス１３が表示可能な形式に変換して光センサ内蔵表示用デバイス１３に送り表示させる。
The
判断手段および制御手段である中央演算部１５は、中央処理装置（以下「ＣＰＵ」という）および表示装置１０を制御するための制御プログラムを記憶するメモリを含んで構成され、ＣＰＵがメモリに記憶される制御プログラムを実行することによって、光センサ内蔵表示用デバイス１３、表示処理部１４およびリモコン処理部１８を制御する。中央演算部１５は、ＣＰＵおよびメモリの代わりに、プログラミングすることができるＬＳＩ(
Large Scale Integration)であるＦＰＧＡ(Field Programmable Gate Array)、特定の用途のために設計、製造される集積回路であるＡＳＩＣ(Application Specific Integrated
Circuit)、あるいはその他の演算機能を有する回路によって構成してもよい。
The
Field Programmable Gate Array (FPGA), which is a large scale integration, and Application Specific Integrated (ASIC), which is an integrated circuit designed and manufactured for a specific application.
Circuit), or a circuit having other arithmetic functions.
内部記憶部１６は、たとえば書き込みおよび読み出し可能な半導体メモリなどの記憶装置によって構成され、中央演算部１５が制御プログラムを実行するときに用いる制御情報１６１を記憶する。制御情報１６１は、たとえば受光した光の色を表す受光色、受光した光の強さを表す受光の強さ、受光した光の数を表す受光数、指示ポインタの形状を表すポインタ形状、指示ポインタの色を表すポインタ表示色、指示ポインタの大きさを表すポインタサイズ、指示ポインタ表示の中心位置を表すポインタ表示位置、および指示ポインタの表示位置の基準を表すポインタ表示基準などの情報を含む。
The
受光数は、光を受光している受光箇所の数であり、光が重なっていなければ、光を照射している発光指示装置３０の数に一致する数である。受光箇所は、発光指示装置３０によって光が照射されている少なくとも１つの画素からなる画素群である。シンボル画像である指示ポインタは、発光指示装置３０によって光が照射されている位置を明示するための画像であり、受光箇所の代表点の位置を示す。ポインタ表示基準は、受光箇所の中心位置を基準とするか、受光箇所の最も明るい位置を基準とするかを示す。すなわち、代表点を受光箇所の中心位置とするか、受光箇所の最も明るい位置とするかの基準である。
The number of received light is the number of light receiving portions that receive light, and is the number that matches the number of light
リモコン受光部１７は、表示装置１を操作するための情報を表示装置１に送信する図示しないリモコンからの光を受光し、受光した光を電気信号に変換して、リモコン処理部１８に送る。リモコン処理部１８は、リモコン受光部１７から受け取る電気信号をリモコンから指示された情報に変換して、中央演算部１５に送る。
The remote control
受光箇所判定部１９、指示ポインタ表示データ作成部２０および受光波形判定部２１は、中央演算部１５が制御プログラムを実行することによって実現される機能である。受光箇所判定部１９は、光センサ内蔵表示用デバイス１３に照射されている光の箇所を判定する。具体的には、受光箇所判定部１９は、光センサ内蔵表示用デバイス１３の光センサから受け取る受光の強さが、予め定める基準強さ以上、たとえば０〜２５５の２５６段階で１２８以上の画素またはそれらの複数の画素が隣接している範囲を、発光指示装置３０から照射されている光を受光している受光箇所と判定する。 指示ポインタ表示データ作成部２０は、受光箇所判定部１９によって光を受光していると判定された受光箇所について、指示ポインタを表示する位置を決定するとともに、指示ポインタを表す指示ポインタデータを作成する。受光波形判定部２１は、発光指示装置３０から出射される光の出射パターンを判定する。具体的には、受光波形判定部２１は、光センサ内蔵表示用デバイス１３の光センサから受け取る受光の強さが、予め定める期間、たとえば２ミリ秒の期間予め定める基準強度以上であるとき、連続する出射パターンであると判定し、予め定める基準強度以上である状態と予め定める基準強度未満である状態とを予め定める期間に繰り返すとき、パルス状の出射パターンであると判定する。パルス状の出射パターンは、繰り返されるパルスの周波数、パルス幅、パルス間隔などを変化させて組み合わせることによって、複数の出射パターンとして用いることも可能である。
The light receiving
発光指示装置３０は、レーザポインタ、ＬＥＤ（Light Emitting Diode）あるいは懐中電灯など光を画面に照射して位置を指示する指示装置である。発光指示装置３０ａは、光を発光する発光部３１を含み、発光指示装置３０ｂは、発光部３１の他に、発光部３１をパルス状に発光させる間欠駆動部３２を含み、発光指示装置３０ｃは、発光部３１および間欠駆動部３２の他に、発光をパルス状に照射するか連続して照射するかを切り換えるボタン３３を含む。
The light
図２は、発光指示装置３０の光が照射された画面４０の例を示す図である。図２に示す発光指示装置３０は、レーザポインタなど焦点の広がりが小さい指示装置であり、発光指示装置３０からのレーザ光線３９が画面４０のうち、人物画像が表示されている領域４１に照射されている。画面４０の右側に引き出した画面４１は、画素４２の１つ１つがわかるように拡大した画面であり、画面４１には、人物の表示画像４３およびレーザ光線３９が照射されているレーザポインタ照射箇所４４が示されている。
FIG. 2 is a diagram illustrating an example of the
各画素４２は、赤色のサブピクセル４２１、緑色のサブピクセル４２２および青色のサブピクセル４２３によって構成され、さらに各画素４２には光センサ４６が設けられる。光センサ４６は、色を検出する３つの光センサ４６１〜４６３および光の強さを検出する図示しない光センサを含む。光センサ４６１は赤色を検出し、光センサ４６２は緑色を検出し、光センサ４６３は青色を検出する。
Each
図３は、光が照射された位置に表示される指示ポインタの例を示す図である。図３（ａ）は、レーザ光線３９が光を照射して指し示している位置を赤色で表した指示ポインタ４５ａを表示する拡大画面４１ａを示す。図３（ｂ）は、レーザ光線３９が光を照射して指し示している位置を３×３の白色の画素で表した指示ポインタ４５ｂを表示する拡大画面４１ｂを示す。図３（ｃ）は、レーザ光線３９が光を照射して指し示している位置を５×５の緑色の画素で表した指示ポインタ４５ｃを表示する拡大画面４１ｃを示す。指示ポインタ４５ｃは、図３（ｂ）に示した指示ポインタ４５ｂよりも大きさを大きくした指示ポインタである。図３（ｄ）は、レーザ光線３９が光を照射して指し示している位置を赤色の矢印の形状で示す指示ポインタ４５ｄを表示する拡大画面４１ｄを示す。矢印の先端は、たとえば光が照射されている画素の中心の画素の位置を示す。
FIG. 3 is a diagram illustrating an example of an instruction pointer displayed at a position irradiated with light. FIG. 3A shows an
図４は、照射された光に広がりがある場合の指示ポインタの例を示す図である。図４（ａ）は、懐中電灯からの光が広がりのある領域４４ｅに照射されていることを示している。図４（ａ）では、懐中電灯によって照射されている光は、領域４４ｅの中心ほど光の強さが強い。指示ポインタ表示データ作成部２０は、領域４４ｅの中心の画素の位置、または領域４４ｅに含まれる画素のうち最も受光の強さが強い画素の位置を、指示ポインタを表示する位置と決定する。図４（ｂ）は、指示ポインタ表示データ作成部２０が決定した位置に赤色の指示ポインタ４５ｆを表示した拡大画面４１ｆを示し、図４（ｃ）は、指示ポインタ表示データ作成部２０が決定した位置に赤色の矢印の形状の指示ポインタ４５ｇを表示した拡大画面４１ｇを示す。
FIG. 4 is a diagram illustrating an example of an instruction pointer when the irradiated light has a spread. FIG. 4A shows that the light from the flashlight is applied to the
図５は、照射する光の色が異なる２種類の発光指示装置３０ａ，３０ｂの光が照射された画面４０ｈの例を示す図である。発光指示装置３０ａ，３０ｂは、いずれもレーザポインタによって構成され、発光指示装置３０ａは赤色のレーザ光線を照射し、発光指示装置３０ｂは黄色のレーザ光線を照射する。図５（ａ）は、発光指示装置３０ａからの赤色のレーザ光線および発光指示装置３０ｂからの黄色のレーザ光線が画面４０ｈに照射されていることを示している。拡大画面４１ｈには、それぞれのレーザ光線が照射されている画素４５ｈ１，４５ｈ２が示されている。図５（ｂ）は、発光指示装置３０ａからの赤色のレーザ光線が照射されている位置に、３×３画素からなる四角形の赤い指示ポインタ４５ｊ１が表示され、発光指示装置３０ｂからの黄色のレーザ光線が照射されている位置に、黄色の矢印の形状の指示ポインタ４５ｊ２が表示されていることを示している。
FIG. 5 is a diagram illustrating an example of a
図６は、出射パターンが異なる２種類の発光指示装置３０ｃ，３０ｄの光が照射された画面４０ｋの例を示す図である。発光指示装置３０ｃ，３０ｄは、いずれもレーザポインタによって構成され、発光指示装置３０ｃはレーザ光線を連続する出射パターンで照射し、発光指示装置３０ｄはレーザ光線をパルス状の出射パターンで照射する。図６は、発光指示装置３０ｃからのレーザ光線および発光指示装置３０ｄからのレーザ光線が画面４０ｋに照射されていることを示しており、拡大画面４１ｋには、それぞれのレーザ光線が照射されている画素４５ｋ１，４５ｋ２が示されている。
FIG. 6 is a diagram illustrating an example of a
図６に示した例では、受光波形判定部２１は、画素４５ｋ１の光センサから受け取る受光の強さが、予め定める期間予め定める基準強度以上であるので、連続する出射パターンであると判定し、画素４５ｋ２の光センサから受け取る受光の強さが、予め定める基準強度以上である状態と予め定める基準強度未満である状態とを予め定める期間に繰り返すので、パルス状の出射パターンであると判定する。
In the example illustrated in FIG. 6, the received light
図７〜図１２のフローチャートで用いる変数には、受光数Ｌｃｏｕｎｔ、ポインタサイズＬｓｉｚｅ、ポインタ表示色Ｌｃｏｌｏｒ、ポインタ形状Ｌｐａｔｔｅｒｎ、ポインタ表示基準Ｌｂａｓｅ、受光色ＰｉｘｅｌＣｏｌｏｒ、受光の強さＰｉｘｅｌＶａｌｕｅ、受光箇所の座標データＬｐｏs、および指示ポインタデータＰｏｉｎｔＩｎｆの変数がある。 The variables used in the flowcharts of FIGS. 7 to 12 include the light reception number Lcount, the pointer size Lsize, the pointer display color Lcolor, the pointer shape Lpattern, the pointer display reference Lbase, the light reception color PixelColor, the light reception intensity PixelValue, and the coordinate data of the light reception location. There are variables of Lpos and pointing pointer data PointInf.
受光数Ｌｃｏｕｎｔは、光を受光している受光箇所の数であり、光が照射されている箇所が隣接する複数の画素から構成される場合は、その１つのまとまりを１箇所として数える。変数Ｌｃｏｕｎｔは、０からＬＭＡＸまでの整数であり、
ポインタサイズＬｓｉｚｅは、指示ポインタのサイズを表す値であり、値が「０」であると、大きいサイズを表し、値が「１」であると、中間のサイズを表し、値が「２」であると、小さいサイズを表す。ポインタ表示色Ｌｃｏｌｏｒは、指示ポインタの色を表す値であり、値が「０」であると、赤色を表し、値が「１」であると、緑色を表し、値が「２」であると、青色を表し、値が「３」であると、受光した色を表す。ポインタ形状Ｌｐａｔｔｅｒｎは、指示ポインタの形状を表す値であり、値が「０」であると、四角形を表し、値が「１」であると、丸を表し、値が「２」であると、矢印を表す。
The number of received light Lcount is the number of light receiving portions that receive light. When the portion irradiated with light is composed of a plurality of adjacent pixels, one unit is counted as one location. The variable Lcount is an integer from 0 to LMAX,
The pointer size Lsize is a value indicating the size of the pointer, and when the value is “0”, it indicates a large size, and when the value is “1”, it indicates an intermediate size and the value is “2”. If present, it represents a small size. The pointer display color Lcolor is a value indicating the color of the pointer, and when the value is “0”, it indicates red, when the value is “1”, it indicates green, and when the value is “2”. Represents blue, and a value of “3” represents the received color. The pointer shape Lpattern is a value representing the shape of the pointing pointer. When the value is “0”, it represents a quadrangle. When the value is “1”, it represents a circle, and when the value is “2”, Represents an arrow.
ポインタサイズＬｓｉｚｅ、ポインタ表示色Ｌｃｏｌｏｒおよびポインタ形状Ｌｐａｔｔｅｒｎは、それぞれＫ個、たとえば３個、すなわち受光色ごとに設定可能であり、それぞれを区別するときは、Ｌｓｉｚｅ［Ｋ］、Ｌｃｏｌｏｒ［Ｋ］およびＬｐａｔｔｅｒｎ［Ｋ］と表す。以下、ポインタサイズＬｓｉｚｅ、ポインタ表示色Ｌｃｏｌｏｒおよびポインタ形状Ｌｐａｔｔｅｒｎのデータを基本座標データともいう。ポインタサイズＬｓｉｚｅ、ポインタ表示色Ｌｃｏｌｏｒおよびポインタ形状Ｌｐａｔｔｅｒｎは、予め定める表示形態である。 The pointer size Lsize, the pointer display color Lcolor, and the pointer shape Lpattern can be set for each K, for example, three, that is, for each received color. When distinguishing each, Lsize [K], Lcolor [K], and Lpattern [K]. Hereinafter, the data of the pointer size Lsize, the pointer display color Lcolor, and the pointer shape Lpattern are also referred to as basic coordinate data. The pointer size Lsize, the pointer display color Lcolor, and the pointer shape Lpattern are display forms determined in advance.
ポインタ表示基準Ｌｂａｓｅは、懐中電灯などによって照射された光のように、照射された光に広がりがある場合、つまり光が照射されている箇所が隣接する複数の画素から構成される場合に、指示ポインタを表示する位置を、光が照射されている箇所の中心の位置を基準（以下「中央基準」という）にするか、照射されている光の強さが最も強い画素の位置を基準（以下「明るさ基準」という）にするかを示す変数であり、値が「０」であると、中央基準にすることを表し、値が「１」であると、明るさ基準にすることを表す。 The pointer display reference Lbase is indicated when the irradiated light has a spread like light emitted by a flashlight or the like, that is, when the portion irradiated with light is composed of a plurality of adjacent pixels. The position at which the pointer is displayed is based on the position of the center of the area where the light is irradiated (hereinafter referred to as “center reference”), or the position of the pixel where the intensity of the irradiated light is the strongest (referred to below) The value is “0”, indicating that the central reference is used, and if the value is “1”, the brightness is indicated. .
受光色ＰｉｘｅｌＣｏｌｏｒおよび受光の強さＰｉｘｅｌＶａｌｕｅは、受光した光についての受光色および受光の強さをそれぞれ画素ごとに表す画素データである。受光色ＰｉｘｅｌＣｏｌｏｒは、赤色のサブピクセル、緑色のサブピクセルおよび青色のサブピクセルに対応する３つの要素から構成され、それぞれ「０」〜「２５５」の２５６段階の階調で表わされる。各画素の画素データは、赤色のサブピクセルの階調、緑色のサブピクセルの階調、青色のサブピクセルの階調および受光の強さの４つの要素から構成される。４つの要素のうち、赤色のサブピクセルの階調、緑色のサブピクセルの階調および青色のサブピクセルの階調は、受光色ＰｉｘｅｌＣｏｌｏｒの画素データであり、受光の強さは、受光の強さＰｉｘｅｌＶａｌｕｅの画素データである。 The light reception color PixelColor and the light reception intensity PixelValue are pixel data representing the light reception color and the light reception intensity of the received light for each pixel. The light receiving color PixelColor is composed of three elements corresponding to the red sub-pixel, the green sub-pixel, and the blue sub-pixel, and is represented by 256 levels of gradation from “0” to “255”, respectively. The pixel data of each pixel is composed of four elements: the gradation of the red sub-pixel, the gradation of the green sub-pixel, the gradation of the blue sub-pixel, and the intensity of light reception. Among the four elements, the gradation of the red subpixel, the gradation of the green subpixel, and the gradation of the blue subpixel are pixel data of the light reception color PixelColor, and the light reception intensity is the light reception intensity. PixelValue pixel data.
光センサ内蔵表示用デバイス１３の画面は、横Ｍ個および縦Ｎ個の画素から構成され、画面に向かって左上の画素を原点とするＸＹ座標で各画素の位置を表す。たとえばＸＹ座標が（０，０）の画素の画素データは、（２５５，２５５，２５５，２５５）であり、ＸＹ座標が（０，１）の画素の画素データは、（２５５，２５０，２５５，２５２）であり、ＸＹ座標が（１００，２００）の画素の画素データは、（１２０，１００，２００，１８０）であり、ＸＹ座標が（１００，２０１）の画素の画素データは、（１２２，９８，２１０，１９０）であり、ＸＹ座標が（Ｍ−１，Ｎ−２）の画素の画素データは、（０，０，０，０）であり、ＸＹ座標が（Ｍ−１，Ｎ−１）の画素の画素データは、（０，０，０，０）である。各画素の受光色および受光の強さを表すときは、各画素のＸＹ座標を用いて、それぞれＰｉｘｅｌＣｏｌｏｒ［ｘ，ｙ］およびＰｉｘｅｌＶａｌｕｅ［ｘ，ｙ］と表す。
The screen of the
受光箇所の座標データ（以下「受光データ」ともいう）Ｌｐｏsは、受光箇所に含まれる各画素の座標を、受光箇所ごとに表す。指示ポインタデータＰｏｉｎｔＩｎｆは、指示ポインタを表示する座標、色、大きさおよび形状を、受光箇所ごとに表すデータである。ポインタサイズＬｓｉｚｅ、ポインタ表示色Ｌｃｏｌｏｒ、ポインタ形状Ｌｐａｔｔｅｒｎおよびポインタ表示基準Ｌｂａｓｅの変数の設定は、図１２に示す設定処理で詳述する。 The coordinate data (hereinafter also referred to as “light reception data”) Lpos of the light receiving part represents the coordinates of each pixel included in the light receiving part for each light receiving part. The instruction pointer data PointInf is data representing the coordinates, color, size, and shape for displaying the instruction pointer for each light receiving location. The setting of the variables of the pointer size Lsize, the pointer display color Lcolor, the pointer shape Lpattern, and the pointer display reference Lbase will be described in detail in the setting process shown in FIG.
図７は、中央演算部１５が行う第１の表示処理の一例を示すフローチャートである。第１の表示処理は、光を受光した画素に、受光した光の色つまり受光色と同じ色の指示ポインタを表示する処理である。中央演算部１５が表示用・表示処理用一時記憶部１２に記憶される画像情報を光センサ内蔵表示用デバイス（以下「パネル」ともいう）１３に表示するように表示処理部１４に指示した後、ステップＡ１に移る。
FIG. 7 is a flowchart illustrating an example of the first display process performed by the
ステップＡ１では、パネル１３から各光センサが検出した画素ごとのデータ、具体的には受光色および受光の強さのデータを取得し、それぞれ画素ごとに受光色ＰｉｘｅｌＣｏｌｏｒおよび受光の強さＰｉｘｅｌＶａｌｕｅにセットする。ステップＡ２では、変数Ｘ，Ｙに「０」を代入して初期化する。変数Ｘ，Ｙの値は、自然数である。ステップＡ３では、変数Ｙの値がパネル１３の垂直解像度、すなわち画面の縦方向の画素数未満であるか否かを判定する。Ｙの値がパネル１３の垂直解像度未満であると、ステップＡ４に進み、Ｙの値がパネル１３の垂直解像度以上であると、第１の表示処理を終了する。
In step A1, the data for each pixel detected by each photosensor, specifically the light reception color and the light reception intensity data, are obtained from the
ステップＡ４では、変数Ｘに「０」を代入して初期化する。ステップＡ５では、変数Ｘの値がパネル１３の水平解像度、すなわち画面の横方向の画素数未満であるか否かを判定する。変数Ｘの値がパネル１３の水平解像度未満であると、ステップＡ６に進み、変数Ｘの値がパネル１３の水平解像度以上であると、ステップＡ１０に進む。ステップＡ６では、座標（Ｘ，Ｙ）の画素のＰｉｘｅｌＶａｌｕｅつまり受光の強さを取得する。ステップＡ７では、取得したＰｉｘｅｌＶａｌｕｅの値が、所定の値、たとえば上述した予め定める基準強さより大きいか否か、すなわち光が照射されているか否かを判定する。ＰｉｘｅｌＶａｌｕｅの値が所定の値より大きいと、ステップＡ８に進み、ＰｉｘｅｌＶａｌｕｅの値が所定の値より大きくないと、ステップＡ９に進む。
In step A4, “0” is substituted into the variable X for initialization. In step A5, it is determined whether or not the value of the variable X is less than the horizontal resolution of the
ステップＡ８では、座標（Ｘ，Ｙ）の画素を、座標（Ｘ，Ｙ）のＰｉｘｅｌＣｏｌｏｒつまり受光色で表示する。具体的には、中央演算部１５は、表示用・表示処理用一時記憶部１２に記憶される画像情報のうち、座標（Ｘ，Ｙ）の画素の色を、座標（Ｘ，Ｙ）のＰｉｘｅｌＣｏｌｏｒつまり受光色の色に置き換える。表示処理部１４は、座標（Ｘ，Ｙ）の画素の色が書き換えられた画像情報を表示用・表示処理用一時記憶部１２から読み出し、所定の形式に変換してパネル１３に表示させる。ステップＡ９では、変数Ｘに「１」を加算して、ステップＡ５に戻る。ステップＡ１０では、変数Ｙに「１」を加算して、ステップＡ３に戻る。
In step A8, the pixel at the coordinate (X, Y) is displayed in the PixelColor of the coordinate (X, Y), that is, the received light color. Specifically, the
図８は、中央演算部１５が行う第２の表示処理の一例を示すフローチャートである。第２の表示処理は、光を受光した受光箇所の位置に、予め設定されている色および形状の指示ポインタを表示する処理である。中央演算部１５が表示用・表示処理用一時記憶部１２に記憶される画像情報をパネル１３に表示するように表示処理部１４に指示した後、ステップＢ１に移る。
FIG. 8 is a flowchart illustrating an example of the second display process performed by the
ステップＢ１では、パネル１３から各光センサが検出した画素ごとのデータ、具体的には受光色および受光の強さのデータを取得し、それぞれ画素ごとに受光色ＰｉｘｅｌＣｏｌｏｒおよび受光の強さＰｉｘｅｌＶａｌｕｅにセットする。ステップＢ２では、受光箇所検索処理を行う。ステップＢ３では、指示ポインタデータ作成処理を行う。ステップＢ４では、指示ポインタ表示処理を行って、ステップＢ１に戻る。
In step B1, data for each pixel detected by each photosensor, specifically, light reception color and light reception intensity data is acquired from the
図９は、第２の表示処理から呼び出される受光箇所検索処理の一例を示すフローチャートである。受光箇所検索処理は、受光箇所判定部１９によって実行され、受光箇所判定部１９は、図８に示した第２の表示処理から呼び出されると、ステップＣ１に移る。
FIG. 9 is a flowchart illustrating an example of a light receiving location search process called from the second display process. The light receiving location searching process is executed by the light receiving
ステップＣ１では、変数Ｘ，Ｙおよび受光数の変数Ｌｃｏｕｎｔに「０」を代入して初期化する。ステップＣ２では、変数Ｙの値がパネル１３の垂直解像度未満であるか否かを判定する。Ｙの値がパネル１３の垂直解像度未満であると、ステップＣ３に進み、Ｙの値がパネル１３の垂直解像度以上であると、受光箇所検索処理を終了する。ステップＣ３では、変数Ｘに「０」を代入して初期化する。ステップＣ４では、変数Ｘの値がパネル１３の水平解像度未満であるか否かを判定する。変数Ｘの値がパネル１３の水平解像度未満であると、ステップＣ５に進み、変数Ｘの値がパネル１３の水平解像度以上であると、ステップＣ１３に進む。
In Step C1, initialization is performed by substituting “0” into the variables X and Y and the variable Lcount of the number of received light. In Step C2, it is determined whether or not the value of the variable Y is less than the vertical resolution of the
ステップＣ５では、座標（Ｘ，Ｙ）の画素のＰｉｘｅｌＶａｌｕｅつまり受光の強さを取得する。ステップＣ６では、取得したＰｉｘｅｌＶａｌｕｅの値が、所定の値より大きいか否か、すなわち光が照射されているか否かを判定する。ＰｉｘｅｌＶａｌｕｅの値が所定の値より大きいと、ステップＣ７に進み、ＰｉｘｅｌＶａｌｕｅの値が所定の値より大きくないと、ステップＣ１１に進む。ステップＣ７では、受光データカウンタである変数Ｎに「０」を代入して初期化する。 In Step C5, PixelValue of the pixel at the coordinate (X, Y), that is, the intensity of light reception is acquired. In Step C6, it is determined whether or not the acquired PixelValue value is larger than a predetermined value, that is, whether or not light is irradiated. If the value of PixelValue is greater than the predetermined value, the process proceeds to step C7, and if the value of PixelValue is not greater than the predetermined value, the process proceeds to step C11. In Step C7, initialization is performed by substituting “0” into a variable N which is a light reception data counter.
ステップＣ８では、変数Ｎの値がＬｃｏｕｎｔの値つまりすでに検出されている受光数未満であるか否かを判定する。変数Ｎの値がＬｃｏｕｎｔの値未満であると、ステップＣ９に進み、変数Ｎの値がＬｃｏｕｎｔの値以上であると、ステップＣ１４に進む。ステップＣ９では、Ｎ番目の受光データＬｐｏsに、すでに光が照射されているとして検出された隣接する画素の座標（以下「隣接座標」という）があるか否かを判定する。Ｎ番目の受光データＬｐｏsに隣接座標があると、ステップＣ１０に進み、Ｎ番目の受光データＬｐｏsに隣接座標がないと、ステップＣ１２に進む。 In step C8, it is determined whether or not the value of the variable N is less than the value of Lcount, that is, the number of received light that has already been detected. If the value of variable N is less than the value of Lcount, the process proceeds to step C9, and if the value of variable N is equal to or greater than the value of Lcount, the process proceeds to step C14. In Step C9, it is determined whether or not the N-th received light data Lpos includes the coordinates of adjacent pixels detected as having been irradiated with light (hereinafter referred to as “adjacent coordinates”). If there is an adjacent coordinate in the Nth received light data Lpos, the process proceeds to step C10, and if there is no adjacent coordinate in the Nth received light data Lpos, the process proceeds to step C12.
ステップＣ１０では、座標（Ｘ，Ｙ）の値を、Ｎ番目の受光データＬｐｏｓに追加する。ステップＣ１１では、変数Ｘに「１」を加算して、ステップＣ４に戻る。ステップＣ１２では、変数Ｎに「１」を加算して、ステップＣ８に戻る。ステップＣ１３では、変数Ｙに「１」を加算して、ステップＣ２に戻る。ステップＣ１４では、変数Ｌｃｏｕｎｔに「１」を加算、すなわち受光数をカウントアップして、ステップＣ１０に進む。 In step C10, the value of the coordinate (X, Y) is added to the Nth received light data Lpos. In Step C11, “1” is added to the variable X, and the process returns to Step C4. In Step C12, “1” is added to the variable N, and the process returns to Step C8. In Step C13, “1” is added to the variable Y, and the process returns to Step C2. In Step C14, “1” is added to the variable Lcount, that is, the number of received light is counted up, and the process proceeds to Step C10.
図１０は、第２の表示処理から呼び出される指示ポインタデータ作成処理の一例を示すフローチャートである。指示ポインタデータ作成処理は、指示ポインタ表示データ作成部２０によって実行され、指示ポインタ表示データ作成部２０は、図８に示した第２の表示処理から呼び出されると、ステップＤ１に移る。
FIG. 10 is a flowchart illustrating an example of instruction pointer data creation processing called from the second display processing. The instruction pointer data generation process is executed by the instruction pointer display
ステップＤ１では、変数Ｎに「０」を代入して初期化する。ステップＤ２では、変数Ｎが受光数Ｌｃｏｕｎｔ未満であるか否かを判定する。変数Ｎが受光数Ｌｃｏｕｎｔ未満であると、ステップＤ３に進み、変数Ｎが受光数Ｌｃｏｕｎｔ以上であると、ステップＤ１１３に進む。ステップＤ３では、Ｎ番目の受光箇所の受光色を、受光箇所の座標データつまり受光データＬｐｏsと、各画素データの受光色ＰｉｘｅｌＣｏｌｏｒとに基づいて判定する。ステップＤ４では、ステップＤ３で判定した受光色に対応したポインタサイズＬｓｉｚｅおよびポインタ形状Ｌｐａｔｔｅｒｎの基本座標データを、指示ポインタデータＰｏｉｎｔＩｎｆの座標データにコピーする。基本座標データは、基準位置をＸＹ座標（０，０）とした場合の指示ポインタの各画素のＸＹ座標によって表される。 In step D1, "0" is substituted for variable N to be initialized. In step D2, it is determined whether or not the variable N is less than the received light number Lcount. If the variable N is less than the light reception number Lcount, the process proceeds to step D3. If the variable N is greater than or equal to the light reception number Lcount, the process proceeds to step D113. In step D3, the light reception color of the Nth light reception point is determined based on the coordinate data of the light reception point, that is, the light reception data Lpos, and the light reception color PixelColor of each pixel data. In step D4, the basic coordinate data of the pointer size Lsize and the pointer shape Lpattern corresponding to the received light color determined in step D3 is copied to the coordinate data of the instruction pointer data PointInf. The basic coordinate data is represented by XY coordinates of each pixel of the pointing pointer when the reference position is set to XY coordinates (0, 0).
ステップＤ５では、ステップＤ３で判定した受光色に対応したポインタ表示色Ｌｃｏｌｏｒの値が「３」つまり受光した色であるか否かを判定する。ポインタ表示色Ｌｃｏｌｏｒの値が「３」であると、ステップＤ１１に進み、ポインタ表示色Ｌｃｏｌｏｒの値が「３」でないと、ステップＤ６に進む。ステップＤ６では、指示ポインタデータＰｏｉｎｔＩｎｆの色データに、ポインタ表示色Ｌｃｏｌｏｒの色を設定する。ポインタ表示色Ｌｃｏｌｏｒの色は、たとえば赤色、緑色および青色のうちのいずれか１つの値である。 In step D5, it is determined whether or not the value of the pointer display color Lcolor corresponding to the light reception color determined in step D3 is “3”, that is, the received color. If the value of the pointer display color Lcolor is “3”, the process proceeds to step D11. If the value of the pointer display color Lcolor is not “3”, the process proceeds to step D6. In step D6, the color of the pointer display color Lcolor is set in the color data of the instruction pointer data PointInf. The color of the pointer display color Lcolor is, for example, one of red, green, and blue.
ステップＤ７では、ポインタ表示基準Ｌｂａｓｅの値が「０」であるか否か、つまり表示基準が中央部分つまり中央基準か否かを判定する。ポインタ表示基準Ｌｂａｓｅの値が「０」であると、ステップＤ８に進み、ポインタ表示基準Ｌｂａｓｅの値が「０」でないと、ステップＤ１２に進む。ステップＤ８では、Ｎ番目の受光箇所に含まれる画素のＸＹ座標の平均値を求め、求めたＸ座標の平均値を変数Ｘｂにセットし、求めたＹ座標の平均値を変数Ｙｂにセットする。 In step D7, it is determined whether or not the value of the pointer display reference Lbase is “0”, that is, whether or not the display reference is the central portion, that is, the central reference. If the value of the pointer display reference Lbase is “0”, the process proceeds to step D8. If the value of the pointer display reference Lbase is not “0”, the process proceeds to step D12. In step D8, the average value of the XY coordinates of the pixels included in the Nth light receiving location is obtained, the obtained average value of the X coordinate is set to the variable Xb, and the obtained average value of the Y coordinate is set to the variable Yb.
ステップＤ９では、ステップＤ４で指示ポインタデータＰｏｉｎｔＩｎｆの座標データにコピーした基本座標のＸ座標に変数Ｘｂの値を加え、Ｙ座標に変数Ｙｂの値を加える。 In step D9, the value of the variable Xb is added to the X coordinate of the basic coordinate copied to the coordinate data of the pointing pointer data PointInf in step D4, and the value of the variable Yb is added to the Y coordinate.
ステップステップＤ１０では、変数Ｎに「１」を加算して、ステップＤ２に戻る。ステップＤ１１では、指示ポインタデータＰｏｉｎｔＩｎｆの座標に対応する色データを、各画素データの受光色ＰｉｘｅｌＣｏｌｏｒから取り出して、指示ポインタデータＰｏｉｎｔＩｎｆの色データに設定し、ステップＤ７に進む。 In Step D10, “1” is added to the variable N, and the process returns to Step D2. In step D11, the color data corresponding to the coordinates of the instruction pointer data PointInf is extracted from the received color PixelColor of each pixel data, set to the color data of the instruction pointer data PointInf, and the process proceeds to step D7.
ステップＤ１２では、Ｎ番目の受光箇所に含まれる画素のうち、受光の強さＰｉｘｅｌＶａｌｕｅの値が最も大きい画素を検索し、検索した画素のデータのＸ座標を変数Ｘｂにセットし、Ｙ座標を変数Ｙｂにセットする。ステップＤ１３では、指示ポインタデータＰｏｉｎｔＩｎｆのうち、座標の値が負、またはパネル１３の解像度つまり画素数を超える値のデータを取り除く。ステップＤ１４では、指示ポインタデータＰｏｉｎｔＩｎｆを座標順にソートつまり並べ替えて、指示ポインタデータ作成処理を終了する。
In step D12, a pixel having the largest value of received light intensity PixelValue is searched for among the pixels included in the Nth light receiving location, the X coordinate of the searched pixel data is set in the variable Xb, and the Y coordinate is set as the variable. Set to Yb. In step D13, data having a negative coordinate value or a value exceeding the resolution of the
図１１は、第２の表示処理から呼び出される指示ポインタ表示処理の一例を示すフローチャートである。中央演算部１５は、図８に示した第２の表示処理のステップＢ４を実行すると、ステップＥ１に移る。
FIG. 11 is a flowchart illustrating an example of an instruction pointer display process called from the second display process. When executing step B4 of the second display process shown in FIG. 8, the
ステップＥ１では、変数Ｘ，Ｙ，Ｚに「０」を代入して初期化する。ステップＥ２では、変数Ｙの値がパネル１３の垂直解像度未満であるか否かを判定する。Ｙの値がパネル１３の垂直解像度未満であると、ステップＥ３に進み、Ｙの値がパネル１３の垂直解像度以上であると、指示ポインタ表示処理を終了する。ステップＥ３では、変数Ｘに「０」を代入して初期化する。ステップＥ４では、変数Ｘの値がパネル１３の水平解像度未満であるか否かを判定する。変数Ｘの値がパネル１３の水平解像度未満であると、ステップＥ５に進み、変数Ｘの値がパネル１３の水平解像度以上であると、ステップＥ９に進む。
In step E1, initialization is performed by substituting “0” into variables X, Y, and Z. In step E2, it is determined whether or not the value of the variable Y is less than the vertical resolution of the
ステップＥ５では、座標（Ｘ，Ｙ）とＺ番目のＰｏｉｎｔＩｎｆのデータの座標とが同じであるか否かを判定する。座標（Ｘ，Ｙ）とＺ番目のＰｏｉｎｔＩｎｆのデータの座標とが同じであると、ステップＥ６に進み、座標（Ｘ，Ｙ）とＺ番目のＰｏｉｎｔＩｎｆのデータの座標とが同じでないと、ステップＥ８に進む。 In step E5, it is determined whether or not the coordinates (X, Y) and the coordinates of the Z-th PointInf data are the same. If the coordinates (X, Y) and the coordinates of the Zth PointInf data are the same, the process proceeds to step E6. If the coordinates (X, Y) and the coordinates of the Zth PointInf data are not the same, step E8 is performed. Proceed to
ステップＥ６では、座標（Ｘ，Ｙ）の画素を、Ｚ番目のＰｏｉｎｔＩｎｆのデータの色で表示する。具体的には、中央演算部１５は、表示用・表示処理用一時記憶部１２に記憶される画像情報のうち、座標（Ｘ，Ｙ）の画素の色を、Ｚ番目のＰｏｉｎｔＩｎｆのデータの色に置き換える。表示処理部１４は、座標（Ｘ，Ｙ）の画素の色が書き換えられた画像情報を表示用・表示処理用一時記憶部１２から読み出し、所定の形式に変換してパネル１３に表示させる。ステップＥ８では、変数Ｘに「１」を加算して、ステップＥ４に戻る。ステップＥ９では、変数Ｙに「１」を加算して、ステップＥ２に戻る。図１０に示したステップＤ１〜Ｄ１４および図１１に示したステップＥ１〜Ｅ９は、制御ステップである。
In step E6, the pixel at the coordinate (X, Y) is displayed in the color of the Zth PointInf data. Specifically, the
図１２は、中央演算部１５が行う第３の表示処理の一例を示すフローチャートである。第３の表示処理は、複数の出射パターン、たとえば連続する出射パターンおよびパルス状の出射パターンの発光指示装置３０が用いられる場合に、発光指示装置ごとに異なる色および形状の指示ポインタを表示する処理である。中央演算部１５が表示用・表示処理用一時記憶部１２に記憶される画像情報をパネル１３に表示するように表示処理部１４に指示した後、ステップＦ１に移る。ステップＦ１〜Ｆ４は、それぞれ図８に示したステップＢ１〜Ｂ４に対応し、重複を避けるために説明を省略する。
FIG. 12 is a flowchart illustrating an example of the third display process performed by the
図１３は、第３の表示処理から呼び出される受光箇所検索処理の一例を示すフローチャートである。図１４は、第３の表示処理から呼び出される指示ポインタデータ作成処理の一例を示すフローチャートである。図１５は、第３の表示処理から呼び出される指示ポインタ表示処理の一例を示すフローチャートである。図１３に示す受光箇所検索処理は、図９に示した受光箇所検索処理と同じであり、図１５に示す指示ポインタ表示処理は、図１１に示した指示ポインタ表示処理と同じであり、重複を避けるために説明は省略する。 FIG. 13 is a flowchart illustrating an example of a light receiving location search process called from the third display process. FIG. 14 is a flowchart illustrating an example of instruction pointer data creation processing called from the third display processing. FIG. 15 is a flowchart illustrating an example of an instruction pointer display process called from the third display process. 13 is the same as the light receiving point search process shown in FIG. 9, and the instruction pointer display process shown in FIG. 15 is the same as the instruction pointer display process shown in FIG. The description is omitted to avoid it.
図１４に示す指示ポインタデータ作成処理は、指示ポインタ表示データ作成部２０によって実行され、指示ポインタ表示データ作成部２０は、図１２に示した第３の表示処理から呼び出されると、ステップＨ１に移る。ステップＨ１，Ｈ２は、それぞれ図１０に示したステップＤ１，Ｄ２と同じであり、ステップＨ６〜Ｈ９は、それぞれ図１０に示したステップＤ７〜Ｄ１０と同じであり、ステップＨ１２〜Ｈ１４は、それぞれ図１０に示したステップＤ１２〜Ｄ１４と同じであり、重複を避けるために説明は省略する。
The instruction pointer data creation process shown in FIG. 14 is executed by the instruction pointer display
ステップＨ３では、受光波形判定部２１の判定結果に基づいて、出射パターンがパルス状であるか否かを判定する。出射パターンがパルス状であると、ステップＨ４に進み、出射パターンがパルス状でないと、つまり連続状の出射パターンであると、ステップＨ１０に進む。ステップＨ４では、形状が四角形、大きさが「中間」の基準座標データを、指示ポインタデータＰｏｉｎｔＩｎｆの座標データにコピーする。ステップＨ５では、指示ポインタデータＰｏｉｎｔＩｎｆの色データに、青色を設定する。
In step H3, it is determined based on the determination result of the received light
ステップＨ１０では、形状が丸、大きさが「大きい」の基準座標データを、指示ポインタデータＰｏｉｎｔＩｎｆの座標データにコピーする。ステップＨ１１では、指示ポインタデータＰｏｉｎｔＩｎｆの色データに、赤色を設定し、ステップＨ６に進む。 In step H10, the reference coordinate data having a round shape and a size of “large” is copied to the coordinate data of the pointing pointer data PointInf. In step H11, red is set in the color data of the instruction pointer data PointInf, and the process proceeds to step H6.
図１６は、中央演算部１５が行う第４の表示処理の一例を示すフローチャートである。第４の表示処理は、複数の出射パターン、たとえば連続する出射パターンおよびパルス状の出射パターンの発光指示装置３０が用いられる場合に、発光指示装置ごとに異なる色および形状の指示ポインタを表示するとともに、いずれか１つの発光指示装置については、画面制御に係る制御を行う処理である。画面制御に係る制御は、たとえば画面のページをめくる制御であり、具体的には、画面のページをめくるコマンドを、映像信号を表示装置１に入力しているパソコンなどに送信することによって行う。中央演算部１５が表示用・表示処理用一時記憶部１２に記憶される画像情報をパネル１３に表示するように表示処理部１４に指示した後、ステップＫ１に移る。ステップＫ１〜Ｋ４は、それぞれ図８に示したステップＢ１〜Ｂ４に対応し、重複を避けるために説明を省略する。
FIG. 16 is a flowchart illustrating an example of a fourth display process performed by the
図１７は、第４の表示処理から呼び出される受光箇所検索処理の一例を示すフローチャートである。図１８は、第４の表示処理から呼び出される指示ポインタデータ作成処理の一例を示すフローチャートである。図１９は、第４の表示処理から呼び出される指示ポインタ表示処理の一例を示すフローチャートである。図１７に示す受光箇所検索処理は、図９に示した受光箇所検索処と同じであり、図１９に示す指示ポインタ表示処理は、図１１に示した指示ポインタ表示処理と同じであり、重複を避けるために説明は省略する。 FIG. 17 is a flowchart illustrating an example of a light receiving location search process called from the fourth display process. FIG. 18 is a flowchart illustrating an example of instruction pointer data creation processing called from the fourth display processing. FIG. 19 is a flowchart illustrating an example of an instruction pointer display process called from the fourth display process. The received light spot search process shown in FIG. 17 is the same as the received light spot search process shown in FIG. 9, and the instruction pointer display process shown in FIG. 19 is the same as the instruction pointer display process shown in FIG. The description is omitted to avoid it.
図１８に示す指示ポインタデータ作成処理は、指示ポインタ表示データ作成部２０によって実行され、指示ポインタ表示データ作成部２０は、図１６に示した第４の表示処理から呼び出されると、ステップＭ１に移る。ステップＭ１〜Ｍ５は、それぞれ図１４に示したステップＨ１〜Ｈ５と同じであり、ステップＭ９〜Ｍ１２は、それぞれ図１４に示したステップＨ８〜Ｈ１１と同じであり、ステップＭ１４，Ｍ１５は、それぞれ図１４に示したステップＨ１３，Ｈ１４と同じであり、重複を避けるために説明は省略する。
The instruction pointer data creation process shown in FIG. 18 is executed by the instruction pointer display
ステップＭ６では、Ｎ番目の受光箇所に含まれる画素のＸＹ座標の平均値を求め、求めたＸ座標の平均値を変数Ｘｂにセットし、求めたＹ座標の平均値を変数Ｙｂにセットする。ステップＭ７では、平均値のＸＹ座標（Ｘｂ，Ｙｂ）から、入力信号の解像度に換算した平均値のＸＹ座標（Ｘｃ，Ｙｃ）を算出する。具体的には、座標Ｘｃの値は、式（１）によって算出し、座標Ｙｃの値は、式（２）によって算出する。
Ｘｃ＝Ｘｂ×（入力信号水平解像度／パネル水平解像度） …（１）
Ｙｃ＝Ｙｂ×（入力信号垂直解像度／パネル垂直解像度） …（２）
In step M6, the average value of the XY coordinates of the pixels included in the Nth light receiving location is obtained, the obtained average value of the X coordinate is set to the variable Xb, and the obtained average value of the Y coordinate is set to the variable Yb. In step M7, the XY coordinates (Xc, Yc) of the average value converted to the resolution of the input signal are calculated from the XY coordinates (Xb, Yb) of the average value. Specifically, the value of the coordinate Xc is calculated by the equation (1), and the value of the coordinate Yc is calculated by the equation (2).
Xc = Xb × (input signal horizontal resolution / panel horizontal resolution) (1)
Yc = Yb × (input signal vertical resolution / panel vertical resolution) (2)
ステップＭ８では、画面のページをめくるコマンドを、ＸＹ座標（Ｘｃ，Ｙｃ）とともに、映像入力端子１１に映像を入力するパソコンなどに送信する。ステップＭ１３では、Ｎ番目の受光箇所に含まれる画素のＸＹ座標の平均値を求め、求めたＸ座標の平均値を変数Ｘｂにセットし、求めたＹ座標の平均値を変数Ｙｂにセットし、ステップＭ９に進む。
In step M8, a command for turning the page of the screen is transmitted to the personal computer or the like that inputs the video to the
図２０は、中央演算部１５が行う設定処理の一例を示すフローチャートである。利用者は、パソコンなどからの映像信号をパネル１３に表示させる前に、パネル１３に表示される図示しない設定画面に応答して、ポインタサイズＬｓｉｚｅ、ポインタ表示色Ｌｃｏｌｏｒ、ポインタ形状Ｌｐａｔｔｅｒｎおよびポインタ表示基準Ｌｂａｓｅの変数を、受光色ごとに予め設定することができる。
FIG. 20 is a flowchart illustrating an example of the setting process performed by the
中央演算部１５は、ポインタサイズＬｓｉｚｅ、ポインタ表示色Ｌｃｏｌｏｒ、ポインタ形状Ｌｐａｔｔｅｒｎおよびポインタ表示基準Ｌｂａｓｅの変数を設定するための設定画面の画像情報を生成して、表示用・表示処理用一時記憶部１２に記憶させ、表示用・表示処理用一時記憶部１２に記憶された画像情報を表示処理部１４によってパネル１３に表示させる。設定画面は、たとえばそれぞれの変数に設定する内容をリモコンによって選択することができる画面である。中央演算部１５は、設定画面をパネル１３に表示させた後、ステップＰ１に移る。
The
ステップＰ１では、リモコンによって選択されたポインタ表示基準が「中央基準」であるのか「明るさ基準」であるのかを判定する。選択されたポインタ表示基準が「中央基準」であると、ステップＰ２に進み、選択されたポインタ表示基準が「明るさ基準」であると、ステップＰ１４に進む。ステップＰ２では、変数Ｄに「０」を代入する。ステップＰ３では、表示基準Ｌｂａｓｅに変数Ｄの値を代入する。ステップＰ４では、受光色を選択するための変数Ｋに「０」つまり赤色を示す値を代入する。 In Step P1, it is determined whether the pointer display reference selected by the remote controller is “center reference” or “brightness reference”. If the selected pointer display standard is “center standard”, the process proceeds to step P2, and if the selected pointer display standard is “brightness standard”, the process proceeds to step P14. In step P2, “0” is substituted for variable D. In step P3, the value of the variable D is substituted for the display reference Lbase. In Step P4, "0", that is, a value indicating red is substituted for the variable K for selecting the received light color.
ステップＰ５では、変数Ｋの値が設定可能な受光色の数、たとえば赤色、青色および黄色の３色を表す値「３」未満であるか否かを判定する。変数Ｋの値が「３」未満であると、ステップＰ６に進み、変数Ｋの値が「３」以上であると、設定処理を終了する。変数Ｋは、赤色が「０」、青色が「１」および黄色が「２」である。設定を行っている受光色を設定画面に表示する。ステップＰ６では、まず、設定を行っている受光色、つまり変数Ｋの値によって決まる色が何かを設定画面に表示する。次に、リモコンによって選択されたポインタ形状が「四角形」であるのか「丸」であるのか「矢印」であるのかを判定する。選択されたポインタ形状が「四角形」であると、ステップＰ１５に進み、選択されたポインタ形状が「丸」であると、ステップＰ７に進み、選択されたポインタ形状が「矢印」であると、ステップＰ１６に進む。ステップＰ７では、変数Ａに「１」を代入する。 In Step P5, it is determined whether or not the value of the variable K is less than the number of light receiving colors that can be set, for example, a value “3” representing three colors of red, blue, and yellow. If the value of the variable K is less than “3”, the process proceeds to step P6. If the value of the variable K is “3” or more, the setting process is terminated. The variable K is “0” for red, “1” for blue, and “2” for yellow. Displays the light reception color that has been set on the setting screen. In step P6, first, the light reception color that has been set, that is, the color determined by the value of the variable K is displayed on the setting screen. Next, it is determined whether the pointer shape selected by the remote controller is “square”, “circle”, or “arrow”. If the selected pointer shape is “square”, the process proceeds to step P15. If the selected pointer shape is “circle”, the process proceeds to step P7. If the selected pointer shape is “arrow”, the process proceeds to step P15. Proceed to P16. In step P7, “1” is substituted for variable A.
ステップＰ８では、リモコンによって選択されたポインタの大きさが「大」であるのか「中」であるのか「小」であるのかを判定する。選択されたポインタの大きさが「大」であると、ステップＰ１７に進み、選択されたポインタの大きさが「中」であると、ステップＰ９に進み、選択されたポインタの大きさが「小」であると、ステップＰ１８に進む。ステップＰ９では、変数Ｂに「１」を代入する。 In step P8, it is determined whether the size of the pointer selected by the remote controller is “large”, “medium”, or “small”. If the size of the selected pointer is “large”, the process proceeds to step P17. If the size of the selected pointer is “medium”, the process proceeds to step P9, and the size of the selected pointer is “small”. ", The process proceeds to Step P18. In Step P9, “1” is substituted into the variable B.
ステップＰ１０では、リモコンによって選択されたポインタ色が「赤色」であるのか「青色」であるのか「緑色」であるのか「受光色」であるのかを判定する。選択されたポインタ色が「赤色」であると、ステップＰ１９に進み、選択されたポインタ色が「緑色」であると、ステップＰ１１に進み、選択されたポインタ色が「青色」であると、ステップＰ２０に進み、選択されたポインタ色が「受光色」であると、ステップＰ２１に進む。ステップＰ１１では、変数Ｃに「１」を代入する。 In Step P10, it is determined whether the pointer color selected by the remote controller is “red”, “blue”, “green”, or “light receiving color”. If the selected pointer color is “red”, the process proceeds to step P19. If the selected pointer color is “green”, the process proceeds to step P11. If the selected pointer color is “blue”, the process proceeds to step P19. Proceeding to P20, if the selected pointer color is “light receiving color”, the process proceeds to Step P21. In Step P11, “1” is substituted into the variable C.
ステップＰ１２では、設定した内容を記憶する。具体的には、変数Ｂの値をポインタの大きさＬｓｉｚｅ［Ｋ］に代入し、変数Ｃの値をポインタ色Ｌｃｏｌｏｒ［Ｋ］に代入し、変数Ａの値をポインタ形状Ｌｐａｔｔｅｒｎ［Ｋ］に代入する。ステップＰ１３では、変数Ｋに「１」を加算して、ステップＰ５に戻る。ステップＰ１４では、変数Ｄに「１」を代入して、ステップＰ３に進む。ステップＰ１５では、変数Ａに「０」を代入して、ステップＰ８に進む。ステップＰ１６では、変数Ａに「２」を代入して、ステップＰ８に進む。 In step P12, the set contents are stored. Specifically, the value of the variable B is assigned to the pointer size Lsize [K], the value of the variable C is assigned to the pointer color Lcolor [K], and the value of the variable A is assigned to the pointer shape Lpattern [K]. To do. In Step P13, “1” is added to the variable K, and the process returns to Step P5. In Step P14, “1” is substituted for the variable D, and the process proceeds to Step P3. In Step P15, “0” is substituted into the variable A, and the process proceeds to Step P8. In Step P16, “2” is substituted into the variable A, and the process proceeds to Step P8.
ステップＰ１７では、変数Ｂに「０」を代入して、ステップＰ１０に進む。ステップＰ１８では、変数Ｂに「２」を代入して、ステップＰ１０に進む。ステップＰ１９では、変数Ｃに「０」を代入して、ステップＰ１２に進む。ステップＰ２０では、変数Ｃに「２」を代入して、ステップＰ１２に進む。ステップＰ２１では、変数Ｃに「３」を代入して、ステップＰ１２に進む。 In Step P17, “0” is substituted into the variable B, and the process proceeds to Step P10. In Step P18, “2” is substituted into the variable B, and the process proceeds to Step P10. In Step P19, “0” is substituted for the variable C, and the process proceeds to Step P12. In Step P20, “2” is substituted into the variable C, and the process proceeds to Step P12. In Step P21, “3” is substituted for the variable C, and the process proceeds to Step P12.
このように、画像を表示画面上に表示する複数の画素と、前記表示画面には受光する光の強さを複数の位置ごとに検出する光センサとを備える表示装置１０に画像を表示するにあたって、中央演算部１５によって、光センサによって検出された光の強さに応じて光の検出位置を示す画像、たとえば指示ポインタが前記表示画面上に表示される。
As described above, when displaying an image on the
したがって、光を照射する指示装置によって画面に照射された光の位置を明示することができる。 Therefore, the position of the light irradiated on the screen can be clearly indicated by the pointing device that emits light.
さらに、前記表示画面上に表示させる画像は、予め定める色、たとえば赤色、緑色または青色であるので、画面を見る人がわかり易い色を用いることによって、光を照射する指示装置によって画面に照射された光の位置をより明瞭にすることができる。 Furthermore, since the image to be displayed on the display screen is a predetermined color, for example, red, green, or blue, the screen is irradiated by the pointing device that emits light by using a color that is easy for the viewer to see. The position of light can be made clearer.
さらに、光センサによって、受光する光の色が検出され、前記表示画面上に表示させる画像は、光センサが検出した色であるので、光を照射する指示装置によって照射している色をより明瞭にすることができる。 Furthermore, since the color of light received by the optical sensor is detected and the image displayed on the display screen is the color detected by the optical sensor, the color emitted by the pointing device that emits light is clearer. Can be.
さらに、前記表示画面上に表示させる画像は、予め定める表示形態、たとえば四角形、丸または矢印の形状であるので、画面を見る人がわかり易い形状を用いることによって、光を照射する指示装置によって画面に照射された光の位置をより明確に示すことができる。 Furthermore, since the image to be displayed on the display screen has a predetermined display form, for example, the shape of a rectangle, a circle, or an arrow, by using a shape that can be easily understood by the person viewing the screen, the image is displayed on the screen by an instruction device that emits light. The position of the irradiated light can be shown more clearly.
さらに、中央演算部１５によって、光センサによって検出された光の強さが予め定める基準強さ以上であるか否かが判断され、中央演算部１５によって、中央演算部１５によって、光センサによって検出された光の強さが予め定める基準強さ以上であると判断されたとき、前記画像が表示画面上に表示される。
Further, the
したがって、予め定める基準強さ以上の光が照射された位置を表示画面上に表示することができる。 Therefore, a position irradiated with light having a predetermined reference intensity or more can be displayed on the display screen.
さらに、画像を表示する複数の画素と、受光する光の強さを位置ごとに検出する光センサとを備える表示装置１０に画像を表示するにあたって、図１０に示したステップＤ１〜Ｄ１４および図１１に示したステップＥ１〜Ｅ９では、光センサによって検出された光の強さに応じて、検出位置を示す画像、たとえば指示ポインタを表示する。
Further, in displaying an image on the
したがって、本発明に係る表示方法を提供すれば、光を照射する指示装置によって画面に照射された光の位置を明示することができる。 Therefore, if the display method according to the present invention is provided, the position of the light irradiated on the screen can be clearly indicated by the pointing device that emits light.
１ 表示システム
１０ 表示装置
１１ 映像入力端子
１２ 表示用・表示処理用一時記憶部
１３ 光センサ内蔵表示用デバイス
１４ 表示処理部
１５ 中央演算部
１６ 内部記憶部
１７ リモコン受光部
１８ リモコン処理部
１９ 受光箇所判定部
２０ 指示ポインタ表示データ作成部
２１ 受光波形判定部
３０ 発光指示装置
３１ 発光部
３２ 間欠駆動部
３３ ボタン
４０ 画面
４１ 拡大画面
４２ 画素
４３ 表示画像
４４ レーザポインタ照射箇所
４５ 指示ポインタ
DESCRIPTION OF
Claims (6)
前記検出手段によって検出された光の強さに応じて少なくとも光の検出位置を示す画像を前記表示画面上に表示させる制御手段とを含むことを特徴とする表示装置。 A display device comprising: a plurality of pixels for displaying an image on a display screen; and a detection means for detecting the intensity of light received at each of the plurality of positions on the display screen,
And a control unit that displays on the display screen an image indicating at least a light detection position according to the intensity of light detected by the detection unit.
前記表示画面上に表示させる画像は、前記検出手段が検出した色であることを特徴とする請求項１に記載の表示装置。 The detecting means is capable of detecting the color of light received;
The display device according to claim 1, wherein an image to be displayed on the display screen is a color detected by the detection unit.
前記制御手段は、前記判断手段によって、前記検出手段によって検出された光の強さが予め定める基準強さ以上であると判断されたとき、前記画像を表示画面上に表示させることを特徴とする請求項１〜４のいずれか１つに記載の表示装置。 Determining means for determining whether the intensity of light detected by the detecting means is greater than or equal to a predetermined reference intensity;
The control unit displays the image on a display screen when the determination unit determines that the intensity of light detected by the detection unit is equal to or greater than a predetermined reference intensity. The display apparatus as described in any one of Claims 1-4.
前記検出部によって検出された光の強さに応じて、検出位置を示す画像を表示させる制御ステップとを含むことを特徴とする表示方法。 A display method for displaying an image on a display device comprising a plurality of pixels for displaying an image and a detection unit for detecting the intensity of received light for each position,
And a control step of displaying an image indicating a detection position in accordance with the intensity of light detected by the detection unit.
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2008116229A JP2009265438A (en) | 2008-04-25 | 2008-04-25 | Display device and display method |
| PCT/JP2009/057939 WO2009131131A1 (en) | 2008-04-25 | 2009-04-21 | Display device and display method |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2008116229A JP2009265438A (en) | 2008-04-25 | 2008-04-25 | Display device and display method |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2009265438A true JP2009265438A (en) | 2009-11-12 |
Family
ID=41391352
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2008116229A Pending JP2009265438A (en) | 2008-04-25 | 2008-04-25 | Display device and display method |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2009265438A (en) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2016184003A (en) * | 2015-03-25 | 2016-10-20 | セイコーエプソン株式会社 | Projector and method of controlling projector |
| KR20200059598A (en) * | 2018-11-21 | 2020-05-29 | (주) 이즈커뮤니케이션즈 | Method of extracting a Input Information to a Computer capable of minimizing an Image Processing Module and a Computer Input System implementing the method |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH04371063A (en) * | 1991-06-19 | 1992-12-24 | Sony Corp | Image display device |
| JPH06102994A (en) * | 1992-09-18 | 1994-04-15 | Matsushita Electric Ind Co Ltd | Position instruction device |
| JP2001175413A (en) * | 1999-12-16 | 2001-06-29 | Sanyo Electric Co Ltd | Display device |
| JP2005539247A (en) * | 2001-12-31 | 2005-12-22 | インテル コーポレイション | Light-emitting diode display that senses energy |
| JP2007042073A (en) * | 2005-07-01 | 2007-02-15 | Canon Inc | Video presentation system, video presentation method, program for causing computer to execute video presentation method and storage medium |
| JP2008022058A (en) * | 2006-07-10 | 2008-01-31 | Sony Corp | Display apparatus, operating method of display apparatus, and video display system |
-
2008
- 2008-04-25 JP JP2008116229A patent/JP2009265438A/en active Pending
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH04371063A (en) * | 1991-06-19 | 1992-12-24 | Sony Corp | Image display device |
| JPH06102994A (en) * | 1992-09-18 | 1994-04-15 | Matsushita Electric Ind Co Ltd | Position instruction device |
| JP2001175413A (en) * | 1999-12-16 | 2001-06-29 | Sanyo Electric Co Ltd | Display device |
| JP2005539247A (en) * | 2001-12-31 | 2005-12-22 | インテル コーポレイション | Light-emitting diode display that senses energy |
| JP2007042073A (en) * | 2005-07-01 | 2007-02-15 | Canon Inc | Video presentation system, video presentation method, program for causing computer to execute video presentation method and storage medium |
| JP2008022058A (en) * | 2006-07-10 | 2008-01-31 | Sony Corp | Display apparatus, operating method of display apparatus, and video display system |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2016184003A (en) * | 2015-03-25 | 2016-10-20 | セイコーエプソン株式会社 | Projector and method of controlling projector |
| KR20200059598A (en) * | 2018-11-21 | 2020-05-29 | (주) 이즈커뮤니케이션즈 | Method of extracting a Input Information to a Computer capable of minimizing an Image Processing Module and a Computer Input System implementing the method |
| KR102172564B1 (en) | 2018-11-21 | 2020-11-02 | (주)이즈커뮤니케이션즈 | Method of extracting a Input Information to a Computer capable of minimizing an Image Processing Module and a Computer Input System implementing the method |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US11016582B2 (en) | Position detecting device, position detecting system, and controlling method of position detecting device | |
| JP6205777B2 (en) | Projection apparatus, projection method, and program for projection | |
| CN108475145B (en) | Image recognition device, image recognition method, and image recognition unit | |
| CN104793809B (en) | Position detecting device and method for detecting position | |
| CN103279313B (en) | Display device and display control method | |
| KR102059359B1 (en) | Method of operating and manufacturing display device, and display device | |
| JP2014149740A (en) | Position detector, adjustment method, and adjustment program | |
| JP2019035609A (en) | Image processing system, setting assistance device, and setting assistance program | |
| JP6809292B2 (en) | Projector and projector control method | |
| JP2020125918A (en) | Image inspection device | |
| JP2009266037A (en) | Display device and display method | |
| CN109840056B (en) | Image display apparatus and control method thereof | |
| JP5545620B2 (en) | Cursor relative position detection method using infrared LED and single point light sensor, cursor relative position detection device using the method, and gun game machine equipped with cursor relative position detection device | |
| JP2009265438A (en) | Display device and display method | |
| JP2009266036A (en) | Display device and display method | |
| JP2008185354A (en) | Color discrimination device and method | |
| JP2011108251A (en) | Presentation controller and program | |
| JP5308705B2 (en) | Display device and display method | |
| JP2009265439A (en) | Display device and display method | |
| JP7251095B2 (en) | POSITION DETECTION DEVICE, DISPLAY DEVICE, DISPLAY SYSTEM AND POSITION DETECTION METHOD | |
| KR101929003B1 (en) | Oled display apparatus having optical sensing funtion | |
| WO2009131131A1 (en) | Display device and display method | |
| US11606541B2 (en) | Projection control device, projection control method and projection control system | |
| JP6903824B2 (en) | Projection device and its control method and control program | |
| WO2016157920A1 (en) | Information processing device, information processing method, and program |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20100826 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20120710 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20120907 |
|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20130604 |