JP2003099196A - Picture projection device for supporting conference or the like - Google Patents

Picture projection device for supporting conference or the like

Info

Publication number
JP2003099196A
JP2003099196A JP2001287901A JP2001287901A JP2003099196A JP 2003099196 A JP2003099196 A JP 2003099196A JP 2001287901 A JP2001287901 A JP 2001287901A JP 2001287901 A JP2001287901 A JP 2001287901A JP 2003099196 A JP2003099196 A JP 2003099196A
Authority
JP
Japan
Prior art keywords
coordinate
image
projection
designating
processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2001287901A
Other languages
Japanese (ja)
Other versions
JP4728540B2 (en
Inventor
Tadashi Honda
正 本田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ricoh Co Ltd
Original Assignee
Ricoh Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ricoh Co Ltd filed Critical Ricoh Co Ltd
Priority to JP2001287901A priority Critical patent/JP4728540B2/en
Publication of JP2003099196A publication Critical patent/JP2003099196A/en
Application granted granted Critical
Publication of JP4728540B2 publication Critical patent/JP4728540B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Landscapes

  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Image Processing (AREA)
  • Position Input By Displaying (AREA)

Abstract

PROBLEM TO BE SOLVED: To provide a picture projection device capable of performing plotting in a projected picture by detecting the coordinates of a point instructed by a coordinate instruction means in the projected picture capable of realizing simultaneous writing by a plurality of persons and simplifying the selection of processing instructions. SOLUTION: A plurality of coordinate instruction means 4 are provided with identifying parts 7 with high reflectively having different pattern shapes, and when a plurality of points in a projected picture are instructed by a plurality of coordinate instructing means 4, a high luminance part 9 of a picture fetched by a picture fetching means is extracted, and the shape of each extracted high luminance part is recognized so that the corresponding coordinate instructing means can be decided, and the coordinate value of the high luminance part is calculated so that the coordinate value of each coordinate instructing means can be detected. Thus, it is possible to provide menu display capable of realizing simultaneous writing by a plurality of persons and simplifying the selection of processing instructions.

Description

【発明の詳細な説明】Detailed Description of the Invention

【0001】[0001]

【発明の属する技術分野】本発明は、光学的に投影され
た画像中に文字や図形の書込みなどを行なうことができ
る会議等支援用の画像投影装置に関する。より詳細に
は、複数の座標指示手段により同時に指示された複数の
点の座標値を座標指示手段ごとに識別して検出すること
ができる会議等支援用の画像投影装置に関する。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to an image projection device for supporting conferences and the like, which allows writing of characters and figures in an optically projected image. More specifically, the present invention relates to an image projection device for supporting a conference or the like, which can identify and detect coordinate values of a plurality of points simultaneously designated by a plurality of coordinate designating means for each coordinate designating means.

【0002】[0002]

【従来の技術】光学的に投影された画面に文字や図形な
どを書き込むことができる会議等支援用の画像投影装置
が、会議やブレーンストーミングにおいて使用されてい
る。しかしながら、この方式の従来の画像投影装置に
は、次のような問題点があった。会議において1画面を
使用して議論を展開する場合、あるいはブレーンストー
ミングのように複数の参加者から同時に意見が出される
場合などには、複数人の同時書込みに対する強い要求が
ある。しかしながら、従来の装置では、操作者は1人に
制限されており、複数人の同時操作はできない。また従
来の画像投影装置では、図12に示すように、画面上部
にメニューバー31があり、操作者は所望の機能を選択
するためにメニューバー31の位置まで座標指示手段3
2を動かさなければならない。画面が大きくなると、こ
の動作は操作者への負担になる。さらに、従来の画像投
影装置では、クリック操作を容易にするために、座標指
示手段にスイッチを設けているものがある。この方式
は、座標指示手段に電源を必要とし、座標指示手段のサ
イズが大きくなりまた重くなるという欠点がある。先行
技術として、特開2000−242430公報には、複
数のユーザが同時に指し示した複数の点の座標を、どの
点をどのユーザが入力したかを識別しつつ検出すること
ができる技術が開示されている。また特開2000−1
63213公報、特開2000−172441公報、特
開平8−234895公報には、指またはペンと指で同
時に指示された複数の点を検出する技術が開示されてい
る。また特開平8−263212号公報には、ペンと描
画の消去用のイレーサが使用できる技術が開示されてい
る。
2. Description of the Related Art An image projection device for supporting a meeting or the like, which is capable of writing characters, figures and the like on an optically projected screen, is used in the meeting and the brainstorming. However, the conventional image projection apparatus of this system has the following problems. There is a strong demand for simultaneous writing by a plurality of people when a discussion is developed using a single screen at a meeting, or when opinions are simultaneously given by a plurality of participants such as in brainstorming. However, in the conventional device, the number of operators is limited to one, and a plurality of people cannot operate simultaneously. Further, in the conventional image projection apparatus, as shown in FIG. 12, there is a menu bar 31 at the upper part of the screen, and the operator can select the desired function by using the coordinate designating means 3 to the position of the menu bar 31.
You have to move 2. As the screen becomes larger, this action imposes a burden on the operator. Further, in some conventional image projection apparatuses, a switch is provided in the coordinate designating means in order to facilitate the click operation. This method has a drawback that the coordinate designating means requires a power source, and the size of the coordinate designating means becomes large and heavy. As a prior art, Japanese Patent Laid-Open No. 2000-242430 discloses a technique capable of detecting the coordinates of a plurality of points pointed to by a plurality of users at the same time while identifying which point is input by which user. There is. Also, Japanese Patent Laid-Open No. 2000-1
Japanese Patent No. 63213, Japanese Patent Application Laid-Open No. 2000-172441, and Japanese Patent Application Laid-Open No. 8-234895 disclose a technique for detecting a plurality of points which are simultaneously instructed by a finger or a pen and a finger. Further, Japanese Patent Laid-Open No. 8-263212 discloses a technique in which a pen and an eraser for erasing a drawing can be used.

【0003】しかしながら、上記公開公報に開示される
技術は、いずれも、タッチセンサタイプの座標入力装置
に関するものであり、本発明が対象としている、作業面
内に検出構造を内蔵せずに座標入力を行なう方式の画像
投影装置には適用できない技術である。さらに、本発明
が対象としている画像投影装置のように、作業面内に検
出構造を内蔵せずに座標入力を行なう方式の現存の製品
には、VIRTUAL INK社のmimio、EFI社のeBeamあるいはCa
non社の光デジタイザ等がある。しかし、これら全ての
製品は、座標指示手段であるペンが電源を有しており、
非常に大型であることが問題である。また複数人が同時
に書き込むことを想定しておらず、同時に2点以上をポ
イントするとマウスイベントの取り合いが起こり、正常
に描画を行なえない。さらにmimioおよびeBeamは、作業
面近傍にセンサを取り付ける必要があるためセンサ取り
付け可能な平面にしか設置できない。他方、光デジタイ
ザは、作業面にセンサを取り付ける必要がないが、プレ
ゼンテーションでのマウス操作(PowerPointのページ送
りやWindows(登録商標)の制御)あるいはアン
ダーライン、囲み強調等の装飾などをコンセプトとして
おり、文字の入力や図形の描画が困難であり、ユーザイ
ンターフェースも扱いにくい。
However, the techniques disclosed in the above-mentioned publications are all related to a touch sensor type coordinate input device, and the coordinate input without the detection structure built into the work surface, which is the object of the present invention, is performed. This is a technique that cannot be applied to the image projection apparatus of the method that performs Further, existing products such as the image projection device targeted by the present invention that input coordinates without incorporating a detection structure in the work surface include mimio from VIRTUAL INK, eBeam or Ca from EFI.
There are optical digitizers manufactured by non. However, in all of these products, the pen that is the coordinate indicating means has a power source,
The problem is that it is very large. Also, it is not supposed that multiple people write at the same time, and if two or more points are pointed at the same time, a mouse event conflict occurs and drawing cannot be performed normally. Furthermore, mimio and eBeam can only be installed on a flat surface where the sensor can be mounted because it is necessary to mount the sensor near the work surface. On the other hand, the optical digitizer does not require a sensor to be attached to the work surface, but has the concept of mouse operation (Powerful page feed and control of Windows (registered trademark)) in presentation, or decoration such as underline and box emphasis. , It is difficult to input characters and draw figures, and the user interface is also difficult to handle.

【0004】[0004]

【発明が解決しようとする課題】本発明は、上記の方式
の会議等支援用の画像投影装置において、複数人が同時
に操作可能にすること、メニューの選択のための操作者
の負担を軽減すること、座標指示手段にクリック操作な
どのためのスイッチや電源を設ける必要をなくするこ
と、複数人が同時に図形の描画やより高度な操作を行な
うことができるようにすることである。
DISCLOSURE OF THE INVENTION The present invention, in the image projection apparatus for supporting a conference or the like of the above method, allows a plurality of people to operate at the same time and reduces the burden on the operator for selecting a menu. That is, it is not necessary to provide a switch or a power source for a click operation or the like in the coordinate designating means, and a plurality of people can simultaneously draw a graphic or perform a more sophisticated operation.

【0005】[0005]

【課題を解決するための手段】複数人が同時に操作でき
るようにするという課題は、次の本発明の第1の画像投
影装置により解決される。 (1)画像投影手段により投影面に光学的に画像を投影
し、投影画面中の、座標指示手段により指示された点の
座標を検出して投影画面に描画または他の処理を行なう
画像投影装置であって、異なる模様形状を持つ高反射率
の識別部が設けられた、投影画像中の点を指示するため
の1つまたは複数の座標指示手段と、投影画像とその中
に置かれた座標指示手段の画像を取り込む画像取得手段
と、前記画像取得手段により取り込まれた画像の高輝度
部を抽出し、抽出された各高輝度部を形状認識して対応
する座標指示手段を決定し、かつその高輝度部の各画素
の座標を用いて指定座標値を決定するための所定の計算
を行ない座標値を算出する座標検出手段と、座標検出手
段により検出された、座標指示手段と対応づけられた座
標群を出力する出力手段を含む座標検出手段を備えたこ
とを特徴とする。
The problem of allowing a plurality of people to operate simultaneously is solved by the following first image projection apparatus of the present invention. (1) An image projecting device for optically projecting an image on a projection surface by the image projecting means, detecting the coordinates of a point in the projection screen designated by the coordinate designating means, and performing drawing or other processing on the projection screen. And one or more coordinate designating means for designating a point in the projected image, which is provided with a high reflectance discriminating portion having different pattern shapes, and the projected image and the coordinates placed therein. An image acquisition unit that captures the image of the instruction unit, a high-intensity part of the image captured by the image acquisition unit, and the shape of each extracted high-intensity part is recognized to determine the corresponding coordinate instruction unit, and Corresponding to the coordinate detecting means for performing a predetermined calculation for determining the designated coordinate value using the coordinates of each pixel of the high brightness portion and the coordinate indicating means detected by the coordinate detecting means. Output the coordinate group Characterized by comprising a coordinate detection means including means.

【0006】またメニュー選択のための操作者の負担を
軽減するという課題、および座標指示手段にクリック操
作などのためのスイッチや電源を設ける必要をなくする
という課題は、次の本発明の第2の画像投影装置により
解決される。 (2)画像投影手段により投影面に光学的に画像を投影
し、投影画面中の、座標指示手段により指示された点の
座標を検出して投影画面に描画または他の処理を行なう
画像投影装置であって、異なる模様形状を持つ高反射率
の識別部が設けられた、投影画像中の点を指示するため
の少なくとも1組の2つの座標指示手段と、投影画像と
その中に置かれた座標指示手段の画像を取り込む画像取
得手段と、前記画像取得手段により取り込まれた画像の
高輝度部を抽出し、抽出された各高輝度部を形状認識し
て対応する座標指示手段を決定し、かつその高輝度部の
各画素の座標を用いて指定座標値を決定するための所定
の計算を行ない座標値を算出する座標検出手段と、予め
決められた一方の座標指示手段に対する他方の座標指示
手段の位置関係を算出し、この位置関係を使って、予め
記憶された1つまたは複数の前記位置関係と各位置関係
に対応づけられた処理命令のテーブルを参照することに
より処理命令を決定する処理命令決定手段と、処理命令
決定手段により決定された処理命令を受け取り出力する
出力手段を含む座標検出手段を備えたことを特徴とす
る。
Further, the problem of reducing the burden on the operator for selecting the menu and the problem of eliminating the need to provide a switch or a power source for the click operation in the coordinate designating means are the second aspect of the present invention described below. Image projection device. (2) An image projection device that optically projects an image on a projection surface by the image projection means, detects the coordinates of a point in the projection screen designated by the coordinate designating means, and draws or performs other processing on the projection screen. In addition, at least one set of two coordinate pointing means for pointing a point in the projected image, which is provided with a high reflectance discriminating portion having a different pattern shape, is placed in the projected image and the coordinate image pointing means. An image acquisition unit that captures the image of the coordinate designating unit and a high-intensity part of the image captured by the image acquisition unit are extracted, and the shape of each of the extracted high-intensity units is recognized to determine the corresponding coordinate designating unit. And a coordinate detecting means for calculating a coordinate value by performing a predetermined calculation for determining a designated coordinate value using the coordinates of each pixel of the high-intensity part, and a predetermined coordinate instruction means for the other coordinate instruction means. The positional relationship of the means Processing instruction determining means for determining a processing instruction by referring to a table of processing instructions stored in advance and associated with the one or more positional relationships stored in advance, using this positional relationship. The present invention is characterized by comprising coordinate detecting means including output means for receiving and outputting the processing instruction determined by the processing instruction determining means.

【0007】さらに、複数人が同時により高度の描画そ
の他の処理を行なうことができるようにするという課題
は、次の本発明の第3の画像投影装置により解決され
る。 (3)画像投影手段により投影面に光学的に画像を投影
し、座標指示手段により指示された投影画面中の点の座
標を検出して投影画面に対して描画や選択された処理を
行なう画像投影装置であって、異なる模様形状を持つ高
反射率の識別部が設けられた、投影画像中の点を指示す
るための複数の座標指示手段と、投影画像とその中に置
かれた前記座標指示手段の画像を取り込む画像取得手段
と、前記画像取得手段により取り込まれた画像の高輝度
部を抽出し、抽出された各高輝度部を形状認識して対応
する座標指示手段を決定し、かつその高輝度部の各画素
の座標を用いて指定座標値を決定するための所定の計算
を行ない座標値を算出する座標検出手段と、座標検出手
段により検出された各座標値にその形状を用いて決めら
れる属性を付与する属性付与手段と、座標検出手段によ
って算出された座標値と属性付与手段によって与えられ
た属性を関連づけて出力する出力手段を含む座標検出手
段を備えたことを特徴とする。
Further, the problem that a plurality of people can simultaneously perform higher-level drawing and other processing is solved by the following third image projection apparatus of the present invention. (3) An image for optically projecting an image on the projection surface by the image projection means, detecting the coordinates of a point on the projection screen designated by the coordinate designating means, and performing the drawing or selected processing on the projection screen A projection apparatus, comprising a plurality of coordinate designating means for designating points in a projected image, which are provided with a high reflectance discriminating portion having different pattern shapes, and the projected image and the coordinates placed therein. An image acquisition unit that captures the image of the instruction unit, a high-intensity part of the image captured by the image acquisition unit, and the shape of each extracted high-intensity part is recognized to determine the corresponding coordinate instruction unit, and Coordinate detecting means for calculating a coordinate value by performing a predetermined calculation for determining a designated coordinate value using the coordinates of each pixel of the high-intensity part, and the shape is used for each coordinate value detected by the coordinate detecting means. Attributes that can be determined by And attribute assignment unit, characterized by comprising a coordinate detection means including output means for outputting in association with attribute given by the coordinate values and the attribute assignment unit calculated by the coordinate detecting means.

【0008】[0008]

【発明の実施の形態】以下、本発明の一実施形態例につ
いて、図面を参照しながら説明する。まず、本発明の第
1の画像投影装置について説明する。この画像投影装置
は、複数人が1つずつの座標指示手段を操作する使用形
態を想定している。図1は、本発明の第1の画像投影装
置の1実施形態の構成を示す説明図である。この画像投
影装置は、画像取得手段1、座標検出手段2、出力手段
3、画像投影手段5、投影面6、座標指示手段4などを
備えている。画像投影手段5は、例えばプロジェクタの
ような装置であり、図示されていないコンピュータやV
CRなどからRGB信号あるいはビデオ信号などの画像
入力信号により送られてくる画像を視覚化して、その画
像をレンズ系でスクリーンなどの投影面6に投影し結像
させる。符号4は、画像投影手段5により投影面6上に
投影された画像中の点を指し示すための座標指示手段で
ある。座標指示手段4は、図2に示すように、細長い棒
の先端部に、座標指示手段4ごとに異なる模様形状を持
つ、高反射率の識別部7を設けたものである。識別部7
の模様形状は、後述する画像処理による形状の認識、識
別が容易になるような形状が好ましい。図2に示す例で
は、外形が矩形の高反射率の領域8の中に、1つまたは
複数の細長い矩形の非反射領域9が、縦または横、また
は縦横の適宜な組み合せに配置されている。識別部7
は、例えば、画像投影手段5からの光を強く反射する反
射率の高い材料を貼り付け、この高反射率の材料の中
に、光を吸収する材料などの非反射材料を埋め込むこと
により形成できる。なお高反射率の材料には、光を乱反
射させるための細かい凹凸を設けることが好ましい。画
像取得手段1は、CCDカメラ等で投影画面を撮影して
その画像を取り込む。投影画面内に座標指示手段4が置
かれているときは、図3に示すような画像が取り込まれ
る。すなわち、各座標指示手段4の先端部の識別部7だ
けが高輝度部で、その他の部分が低輝度の画像である。
また各識別部7では、高反射率の領域8が高輝度部、非
反射領域9が低輝度になる。この画像取得手段1により
取り込まれた画像は、座標検出手段2に送られる。座標
検出手段2は、画像取得手段1によって取り込まれた画
像から、下記のようにして、投影画像中の各座標指示手
段の先端部の位置(座標値)を算出する。
BEST MODE FOR CARRYING OUT THE INVENTION An embodiment of the present invention will be described below with reference to the drawings. First, the first image projection apparatus of the present invention will be described. This image projection apparatus is assumed to be used by a plurality of people operating one coordinate designating means. FIG. 1 is an explanatory diagram showing a configuration of an embodiment of a first image projection apparatus of the present invention. This image projection apparatus includes an image acquisition unit 1, a coordinate detection unit 2, an output unit 3, an image projection unit 5, a projection surface 6, a coordinate designation unit 4, and the like. The image projection unit 5 is a device such as a projector, and is a computer or V (not shown).
The image sent from the CR or the like by the image input signal such as the RGB signal or the video signal is visualized, and the image is projected on the projection surface 6 such as the screen by the lens system to form an image. Reference numeral 4 is a coordinate designating means for pointing a point in the image projected on the projection surface 6 by the image projection means 5. As shown in FIG. 2, the coordinate designating means 4 is provided with a high reflectance discriminating portion 7 having a different pattern shape for each coordinate designating means 4 at the tip of a slender rod. Identification unit 7
The pattern shape is preferably a shape that facilitates recognition and identification of the shape by image processing described later. In the example shown in FIG. 2, one or more elongated rectangular non-reflective regions 9 are arranged in a high-reflectance region 8 having a rectangular outer shape in a vertical or horizontal direction or in an appropriate combination of vertical and horizontal directions. . Identification unit 7
Can be formed, for example, by sticking a material having a high reflectance that strongly reflects the light from the image projection means 5 and embedding a non-reflecting material such as a light absorbing material in the material having a high reflectance. . In addition, it is preferable that the material having a high reflectance be provided with fine irregularities for irregularly reflecting light. The image acquisition means 1 captures the image by photographing a projection screen with a CCD camera or the like. When the coordinate indicating means 4 is placed on the projection screen, an image as shown in FIG. 3 is captured. That is, only the identification section 7 at the tip of each coordinate designating means 4 is a high-luminance portion, and the other portions are low-luminance images.
Further, in each of the identification sections 7, the high reflectance area 8 has a high luminance portion and the non-reflection area 9 has a low luminance. The image captured by the image acquisition unit 1 is sent to the coordinate detection unit 2. The coordinate detecting means 2 calculates the position (coordinate value) of the tip of each coordinate instructing means in the projected image from the image captured by the image acquiring means 1 as follows.

【0009】図4は、座標検出手段2における処理の流
れを示すフローチャートである。まずステップS1にお
いて、画像取得手段1から受け取った画像データを2値
化する。すなわち、高輝度部の値を1、低輝度部の値を
0とする。次にステップS2において、予め用意されて
いる各座標指示手段4の模様形状を持つテンプレートと
高輝度部部の形状を比較して各座標指示手段4の画像を
見つけ出し、その高輝度部の略中心の座標値を算出して
指示された座標値とする。なお座標値は、高輝度部の略
中心の座標値でなく、他のやり方で算出してもよい。例
えば、座標指示手段のより先端に近い値を算出するよう
にしてもよい。この形状認識は、例えば、相関を用い
て、テンプレートに最も近い高輝度部を求めることによ
り行なうことができる。しかしながら、上述したように
画像を2値化してテンプレートとマッチングする方法
は、使用される可能性のある全ての座標指示手段のテン
プレートについて、画像全体に対してマッチング処理を
行なわなければならないので、非常に時間がかかる。
FIG. 4 is a flow chart showing the flow of processing in the coordinate detecting means 2. First, in step S1, the image data received from the image acquisition means 1 is binarized. That is, the value of the high-luminance part is 1, and the value of the low-luminance part is 0. Next, in step S2, the template having the pattern shape of each coordinate designating means 4 prepared in advance is compared with the shape of the high-intensity part to find the image of each coordinate designating means 4, and the approximate center of the high-intensity part The coordinate value of is calculated to be the designated coordinate value. Note that the coordinate value is not the coordinate value of the approximate center of the high-luminance portion, but may be calculated by another method. For example, a value closer to the tip of the coordinate designating means may be calculated. This shape recognition can be performed, for example, by using the correlation to find the high-luminance portion that is closest to the template. However, the method of binarizing an image and matching it with a template as described above requires matching processing for the entire image for all templates of the coordinate designating means that may be used. Takes time.

【0010】そこで別の方法として、図5のフローチャ
ートに示すような処理を行なうこともできる。まずステ
ップS3で2値化を行なって高輝度部の値を1、低輝度
部の値を0とするまでは図4と同じである。次にステッ
プS4で、座標指示手段ごとの座標を求めるためにグル
ープ化を行なう。グループ化の方法は一般的な手法でも
構わないが、例えば、画像をラスタスキャンで走査し、
1の値の画素に到達したらその上下左右のN画素を参照
し、参照領域内に存在する値1の画素の値を2に変化さ
せて記録する。そして再びラスタスキャンを続行し、1
の値の画素に到達したら同様の処理を行ない、今度は値
3を持たせて記録する。以上の処理を画像全体に繰り返
せば、画像内に存在する高輝度部集団ごとにグループ化
することができる。しかしながら実際の画像には、部分
的に高輝度部値を示す微小ノイズが存在する可能性があ
る。よってS5において、微小ノイズを消し去るために
ノイズ除去を行なう。微小ノイズの集団は座標指示手段
の集団に比べて面積が非常に小さいことを利用し、集団
ごとの総ピクセル数を比較して面積の小さい集団は値を
0にする。これにより、座標指示手段ごとに異なる値を
もった座標集団のみがグループ化されて残る。例えば、
図2に示す模様形状を持つ3つの座標指示手段4を用い
る場合には、2、6、11の値(以下ラベル値と呼ぶ)
の3つの集団が画像内に残ることになる。3〜5および
7〜10のラベルは、微小ノイズと判断されて消去され
たため欠番となってしまうが、消去されずに残った集団
のラベル値が分かっていればよいので、あえてラベル値
の振り直しをする必要はない。
Therefore, as another method, the process shown in the flowchart of FIG. 5 can be performed. First, the process is the same as in FIG. 4 until the binarization is performed in step S3 to set the value of the high luminance part to 1 and the value of the low luminance part to 0. Next, in step S4, grouping is performed to obtain the coordinates for each coordinate designating means. The grouping method may be a general method, for example, by scanning the image with a raster scan,
When the pixel having the value of 1 is reached, the upper, lower, left and right N pixels are referred to, and the value of the pixel having the value 1 existing in the reference area is changed to 2 and recorded. Then continue the raster scan again 1
When the pixel of the value of is reached, the same processing is performed, and this time, the value of 3 is given and the pixel is recorded. By repeating the above processing for the entire image, it is possible to group the high-intensity part groups existing in the image. However, in the actual image, there is a possibility that minute noise that partially indicates a high-luminance portion value exists. Therefore, in S5, noise removal is performed in order to erase the minute noise. Utilizing the fact that the group of minute noises has a very small area compared to the group of coordinate designating means, the total number of pixels for each group is compared, and the value is set to 0 for the group having a small area. As a result, only coordinate groups having different values for each coordinate indicating means are grouped and remain. For example,
When using the three coordinate designating means 4 having the pattern shape shown in FIG. 2, values of 2, 6, and 11 (hereinafter, referred to as label values)
Will remain in the image. Labels 3 to 5 and 7 to 10 are judged to be minute noise and are erased, resulting in missing numbers. There is no need to fix it.

【0011】次にステップS6において、グループ化さ
れた座標集団と座標指示手段との対応付けを行なう。こ
れは、座標指示手段で文字や図形を書く処理においては
時間tと時間t−1の各座標を線分で結ぶような処理が
行われるが、複数の座標指示手段でそれぞれ同時に描画
が行われる場合、対応可能な座標点が複数存在するた
め、次にどの座標点と線分で結べばよいか判断できなく
なってしまうからである。グループ化された座標集団と
座標指示手段との対応付けの方法は、図6に示す通りで
ある。すなわち、グループ化を終えた座標集団は、常に
図2のような水平の向きになっているわけではなく、殆
どの場合図6のように傾いている。そこで、識別部7の
外形が長方形であるという条件を使い、一般的なモーメ
ント法によって長辺方向と短辺方向を求める。そして、
長辺方向と短辺方向の積分(プロジェクション)を求め
ると、図6のように、変化点として、短辺方向の積分に
は3つの矩形、長辺方向には1つの矩形が現れる。この
ことから、この識別部の模様形状は、短辺方向のライン
が長辺方向に3本並べて配置されたものであることが分
かり、どの標指示手段であるか決定することができる。
最後にステップS7において、各座標集団の重心を求め
る。例えば、ラベル6の座標集団の各画素のxおよびy
座標を全て加算し、画素数で除算することで重心が求ま
る。この重心座標値をその座標集団の座標値とする。こ
のようにして座標検出手段2で算出された、座標指示手
段と対応づけられた座標値は、出力手段3に送られる。
出力手段3は、受け取った座標値に対して所定の処理を
行ない、その結果を投影画像内に表示するために、図1
に示すように、その出力が画像入力信号と合成される。
また座標値を外部の装置(コンピュータや処理プロセッ
サなど)に送出して、いろいろな処理を行わせることも
できる。
Next, in step S6, the group of coordinate groups and the coordinate indicating means are associated with each other. In the process of writing a character or a figure by the coordinate designating means, a process of connecting each coordinate of time t and time t-1 with a line segment is performed, but a plurality of coordinate designating means respectively perform drawing simultaneously. In this case, since there are a plurality of coordinate points that can be supported, it becomes impossible to determine which coordinate point to connect with a line segment next. The method of associating the group of coordinate groups with the coordinate designating means is as shown in FIG. That is, the coordinate group that has been grouped does not always have the horizontal orientation as shown in FIG. 2, but in most cases is inclined as shown in FIG. Therefore, the long-side direction and the short-side direction are obtained by a general method of moments, using the condition that the outer shape of the identification unit 7 is rectangular. And
When the integration (projection) in the long side direction and the short side direction is obtained, three rectangles appear in the integration in the short side direction and one rectangle appears in the long side direction as change points, as shown in FIG. From this, it is understood that the pattern shape of the identification portion is one in which three lines in the short side direction are arranged side by side in the long side direction, and it is possible to determine which mark indicating means.
Finally, in step S7, the center of gravity of each coordinate group is obtained. For example, x and y of each pixel in the coordinate group of label 6
The center of gravity is obtained by adding all coordinates and dividing by the number of pixels. This barycentric coordinate value is set as the coordinate value of the coordinate group. The coordinate value calculated by the coordinate detecting means 2 in this manner and associated with the coordinate indicating means is sent to the output means 3.
The output means 3 performs a predetermined process on the received coordinate values and displays the result in the projected image as shown in FIG.
The output is combined with the image input signal, as shown in.
Further, the coordinate values can be sent to an external device (computer, processor, etc.) to perform various processes.

【0012】次に本発明の第2の画像投影装置について
説明する。この画像投影装置は、複数人がそれぞれ1組
の2つずつの座標指示手段を操作する使用形態を想定し
ている。図7は、本発明の第2の画像投影装置の1実施
形態例の構成を示す説明図である。この構成における画
像投影手段16は、上記の第1の画像投影装置の画像投
影手段5と同じであり、プロジェクタのような装置で、
図示されていないコンピュータやVCRなどからRGB
信号あるいはビデオ信号などの画像入力信号により送ら
れてくる画像を視覚化して、その画像をレンズ系でスク
リーンなどの投影面17に投影し結像させる。また画像
取得手段11、座標検出手段12、処理命令決定手段1
3、出力手段14は、この画像投影装置の座標検出手段
を構成する。そして、画像取得手段11、座標検出手段
12、出力手段14は、図1に示した第1の画像投影装
置の画像取得手段1、座標検出手段2、座標指示手段3
と同じ働きをする。それに対して、上記第1の画像投影
装置に使用される複数の座標指示手段4には同じ機能が
与えられているが、この第2の画像投影装置に使用され
る2つの座標指示手段15−1と15−2には、異なる
機能が与えられている。すなわち、1方の座標指示手段
15−1は描画用(以下、描画ペンと呼ぶ)であり、他
方の座標指示手段15−2は処理命令選択用(以下コマ
ンドペンと呼ぶ)で、2つで1組になっている。さら
に、この画像投影装置の座標検出手段の処理命令決定手
段13は、座標検出手段12から描画ペン15−1とコ
マンドペン15−2の座標を受け取り、描画ペン25−
1に対するコマンドペン15−2の相対的な位置関係を
求め、その位置関係から、選択される処理命令を決定す
る。そして決定された処理命令を出力手段14に出力す
る。
Next, the second image projection apparatus of the present invention will be described. This image projection device is assumed to be used in such a manner that a plurality of people operate one set of two coordinate designating means. FIG. 7 is an explanatory diagram showing the configuration of an embodiment of the second image projection apparatus of the present invention. The image projecting means 16 in this configuration is the same as the image projecting means 5 of the above-mentioned first image projecting device, and is a device such as a projector,
RGB from a computer or VCR not shown
An image sent by an image input signal such as a signal or a video signal is visualized, and the image is projected by a lens system onto a projection surface 17 such as a screen to form an image. Further, the image acquisition unit 11, the coordinate detection unit 12, and the processing instruction determination unit 1
3. The output means 14 constitutes the coordinate detection means of this image projection apparatus. The image acquisition unit 11, the coordinate detection unit 12, and the output unit 14 are the image acquisition unit 1, the coordinate detection unit 2, and the coordinate instruction unit 3 of the first image projection apparatus shown in FIG.
Works the same as. On the other hand, although the same function is given to the plurality of coordinate designating means 4 used in the first image projecting device, two coordinate designating means 15-used in the second image projecting device are used. Different functions are given to 1 and 15-2. That is, one coordinate designating means 15-1 is for drawing (hereinafter referred to as a drawing pen), and the other coordinate designating means 15-2 is for processing command selection (hereinafter referred to as a command pen). It is a pair. Further, the processing command determining means 13 of the coordinate detecting means of the image projection apparatus receives the coordinates of the drawing pen 15-1 and the command pen 15-2 from the coordinate detecting means 12, and draws the drawing pen 25-.
The relative positional relationship of the command pen 15-2 with respect to 1 is obtained, and the selected processing instruction is determined from the positional relationship. Then, the determined processing instruction is output to the output means 14.

【0013】例えば、図8に示すように、描画ペン15
−1の位置の周囲の領域を上下左右、左上、左下、右
上、右下の領域18−1〜18−8に分割して、各領域
に、その領域にコマンドペン15−2が置かれたときに
選択される処理命令を設定して置き、かつコマンドペン
15−2が投影画面中に現れたときにこれらの処理メニ
ューが表示されるようにすることにより、コマンドペン
15−2を所望の処理命令の領域に置くだけで、一度の
動作でいろいろな処理命令を実行することが可能にな
る。例えば、図8に示すように各領域に対して処理命令
を設定した場合には、コマンドペン15−2を描画ペン
15−1の左領域18−7に置くと“前へ戻る”が実行
され、右領域18−3に置くと“次に進む”が実行され
る。設定できる処理命令の数は、領域の区分を適宜に設
定することにより任意に増やすことができる。さらに、
例えば、描画ペン15−1とコマンドペン15−2の役
割を切り替えることができるようにし、ペン15−1が
投影画面中に置かれるとペン15−2の周囲に別の処理
メニーが表示されるようにすると、選択できる処理命令
の数は倍になる。また処理メニーを描画ペンの周囲に表
示する代わりに、描画ペンの近傍に上下方向のリスト形
式で表示するようにしてもよい。
For example, as shown in FIG.
The area around the position of -1 is divided into upper, lower, left, upper left, lower left, upper right, and lower right areas 18-1 to 18-8, and the command pen 15-2 is placed in each area. By setting and placing the processing commands that are selected at times, and by displaying these processing menus when the command pen 15-2 appears in the projection screen, the command pen 15-2 can be displayed as desired. It is possible to execute various processing instructions with a single operation simply by placing them in the processing instruction area. For example, when a processing command is set for each area as shown in FIG. 8, when the command pen 15-2 is placed in the left area 18-7 of the drawing pen 15-1, "return to previous" is executed. When placed in the right area 18-3, "Next" is executed. The number of processing instructions that can be set can be arbitrarily increased by appropriately setting the area division. further,
For example, the roles of the drawing pen 15-1 and the command pen 15-2 can be switched, and when the pen 15-1 is placed on the projection screen, another processing menu is displayed around the pen 15-2. This doubles the number of processing instructions that can be selected. Further, instead of displaying the processing menu around the drawing pen, it may be displayed in a list format in the vertical direction near the drawing pen.

【0014】図9は、投影画面中にコマンドペン15−
2が置かれたとき描画ペン15−1の周囲または近傍に
処理命令のメニーが表示されるようにした場合の、処理
命令決定手段13の動作を示すフローチャートである。
処理命令決定手段13は、座標検出手段12から描画ペ
ン15−1とコマンドペン15−2の座標を受け取る。
そしてステップS11において、描画ペン15−1とコ
マンドペン15−2の位置関係を計算する。これにより
コマンドペン15−2が処理メニーのどの領域に置かれ
ているか求まる。次にステップS12において、この位
置関係の情報を使い、処理メニーの領域とこれらの領域
に設定された処理命令の対応表を参照し、ステップS1
3において選択された処理命令を決定する。このように
して決定された処理命令が出力手段14に送られる。出
力手段14は、受け取った出力命令を実行することで、
投影画面内に処理の結果を実現することができる。また
外部の別装置に出力を送り、異なる処理をすることも可
能である。またコマンドペン15−2の機能もメニーに
より選択できるようにすることにより、例えば、投影面
にコマンドペン15−2が出現したら、描画ペン15−
1を消しゴムにするという設定を予め行なっておけば、
文字を描画中に誤字を描画してしまい消したい場合など
に、左手を短距離移動するだけで簡単に消すことができ
る。さらにまた、描画ペン15−1をマウスカーソルの
移動、コマンドペン15−2をクリックイベント発生に
設定すれば、右手でカーソルを移動し、左手で決定とい
う操作も可能になる。なお上の例では、1人の操作者が
1組の2つの座標指示手段を操作する場合について説明
したが、複数人が複数の組の2つの座標指示手段を操作
することもできる。
FIG. 9 shows a command pen 15-in the projection screen.
6 is a flowchart showing the operation of the processing instruction determining means 13 when a menu of processing instructions is displayed around or near the drawing pen 15-1 when 2 is placed.
The processing command determining means 13 receives the coordinates of the drawing pen 15-1 and the command pen 15-2 from the coordinate detecting means 12.
Then, in step S11, the positional relationship between the drawing pen 15-1 and the command pen 15-2 is calculated. In this way, it is possible to find in which area of the processing menu the command pen 15-2 is placed. Next, in step S12, the positional relationship information is used to refer to the correspondence table of the processing many areas and the processing instructions set in these areas, and step S1
The processing instruction selected in 3 is determined. The processing command thus determined is sent to the output means 14. The output unit 14 executes the received output command,
The result of the processing can be realized within the projection screen. It is also possible to send the output to another external device and perform different processing. Also, by making the function of the command pen 15-2 selectable by many, for example, when the command pen 15-2 appears on the projection surface, the drawing pen 15-
If you set in advance that 1 is an eraser,
If you want to erase a typographical error while drawing a character, you can easily erase it by moving your left hand a short distance. Furthermore, if the drawing pen 15-1 is set to move the mouse cursor and the command pen 15-2 is set to generate a click event, the cursor can be moved with the right hand and the decision can be made with the left hand. In the above example, the case where one operator operates one set of two coordinate designating means has been described, but a plurality of people can also operate a plurality of sets of two coordinate designating means.

【0015】次に本発明の第3の画像投影装置について
説明する。上述した2つの画像投影装置では、ある時間
tでの処理について説明したが、座標指示手段で文字や
図形を描画するには、時間tの座標点と時間t−1の座
標点を線分で結ぶ処理を行なう必要があり、そのために
は、時間tの座標点が時間t−1のどの座標点に対応す
るかが分からなければならない。この本発明の第3の画
像投影装置は、時間tの座標点が時間t−1のどの座標
点に対応するかを決定する機能を持ち、より高度の描画
その他の処理を可能にするものである。図10は、本発
明による第3の画像投影装置の1実施例の構成を示す説
明図である。この画像投影装置の画像投影手段26は、
上記の第1の画像投影装置の画像投影手段5と同じであ
る。また画像取得手段21、座標検出手段22、処理命
令決定手段23、出力手段24は、この画像投影装置の
座標検出手段を構成する。そして、画像取得手段21、
座標検出手段22、出力手段24は、図1に示した第1
の画像投影装置の画像取得手段1、座標検出手段2、座
標指示手段3と同じ働きをする。またこの画像投影装置
の座標指示手段25は、上記第1の画像投影装置に使用
される複数の座標指示手段4と同じく、同じ機能が与え
られている。さらに、この画像投影装置の座標検出手段
の属性付与手段23は、図11のフローチャートに示す
ような動作をする。すなわち、過去t−nまでの座標
値、座標指示手段の識別部の形状、属性の組を記憶して
置き、座標検出手段22から座標値と識別部の形状が対
にされた情報(時刻t)を受け取ると、ステップS21
において、識別部の形状を用いて、記憶された過去の座
標値の識別部の形状を参照する。過去の座標値は、同じ
識別部の形状ごとに同じ属性を付与されているので、こ
の参照によりその形状に対応する属性が決定される。次
にS22において、その対応する属性を、時刻tの座標
値に付与する。時刻tの座標値は、時刻t+1では過去
となるので、ステップS23においてその座標値、形
状、属性を記憶する。そしてその座標値と属性を出力手
段24に送る。出力手段24は、受け取った座標値と属
性について、属性ごとに時間順に座標値を連結し表示す
ることで、投影画面内での描画を実現することができ
る。また外部の別装置に出力を送り、異なる処理をする
ことも可能である。
Next, the third image projection apparatus of the present invention will be described. In the two image projection devices described above, the processing at a certain time t has been described, but in order to draw a character or a graphic by the coordinate designating means, the coordinate point at the time t and the coordinate point at the time t-1 are formed by line segments. It is necessary to perform a connecting process, and for that purpose, it is necessary to know which coordinate point at time t-1 the coordinate point at time t corresponds to. The third image projection apparatus of the present invention has a function of determining which coordinate point at time t-1 the coordinate point at time t corresponds to, and enables higher-level drawing and other processing. is there. FIG. 10 is an explanatory diagram showing the configuration of one embodiment of the third image projection device according to the present invention. The image projection means 26 of this image projection device is
This is the same as the image projection means 5 of the above-mentioned first image projection device. Further, the image acquisition means 21, the coordinate detection means 22, the processing command determination means 23, and the output means 24 constitute the coordinate detection means of this image projection apparatus. The image acquisition means 21,
The coordinate detecting means 22 and the output means 24 are the first one shown in FIG.
The same functions as the image acquisition unit 1, the coordinate detection unit 2, and the coordinate designation unit 3 of the image projection apparatus of FIG. Further, the coordinate designating means 25 of the image projecting device is provided with the same function as the coordinate designating means 4 used in the first image projecting device. Further, the attribute assigning means 23 of the coordinate detecting means of this image projection apparatus operates as shown in the flowchart of FIG. That is, the coordinate values up to the past t-n, the shape of the identification unit of the coordinate designating unit, and the set of attributes are stored and stored, and the coordinate detection unit 22 makes a pair of the coordinate value and the shape of the identification unit (time t ) Is received, step S21
In, the shape of the identification unit is used to refer to the shape of the identification unit of the stored past coordinate values. Since the past coordinate values are given the same attribute for each shape of the same identification portion, the attribute corresponding to the shape is determined by this reference. Next, in S22, the corresponding attribute is added to the coordinate value at time t. Since the coordinate value at time t is the past at time t + 1, the coordinate value, shape, and attribute are stored in step S23. Then, the coordinate value and the attribute are sent to the output means 24. The output unit 24 can realize drawing in the projection screen by linking and displaying the received coordinate values and attributes in order of time for each attribute. It is also possible to send the output to another external device and perform different processing.

【0016】なお上の説明では、2人の操作者が2つの
座標指示手段を操作する場合について説明したが、3人
以上の操作者が座標指示手段を操作することもできる。
さらに上述した本発明の第1〜第3の画像投影装置にお
ける座標検出手段を、画像投影手段と別体の、投影画像
制御装置とすることもできる。内蔵する場合は、使用す
る度に投影面と画像取得手段を位置合わせする必要がな
く、また装置が一体化して扱い易い。これに対して、別
体の装置とし、画像投影装置と組み合わせて使用する場
合は、使用する度に投影面と画像取得手段を位置合わせ
する必要があり、また装置が複数になるため一体化され
た場合に比べて扱いにくいが、既存のいろいろな画像投
影装置と組み合わせて使用することができる利点があ
る。さらに上述した本発明の第1〜第3の画像投影装置
の画像取得手段、座標検出手段、処理命令決定手段、属
性付与手段、出力手段は、ハードウェア、ソフトウェ
ア、またはその適宜な組合せのいずれで実現されていて
もよい。
In the above description, the case where two operators operate the two coordinate designating means has been described, but three or more operators can also operate the coordinate designating means.
Furthermore, the coordinate detection means in the above-described first to third image projection apparatuses of the present invention can be a projection image control apparatus which is separate from the image projection means. When it is built in, it is not necessary to align the projection surface and the image acquisition means each time it is used, and the device is integrated and easy to handle. On the other hand, when it is used as a separate device in combination with the image projection device, it is necessary to align the projection surface and the image acquisition means each time it is used, and since there are multiple devices, they are integrated. Although it is difficult to handle compared to the case where it is used, there is an advantage that it can be used in combination with various existing image projection apparatuses. Furthermore, the image acquisition means, the coordinate detection means, the processing instruction determination means, the attribute addition means, and the output means of the above-described first to third image projection apparatuses of the present invention are hardware, software, or an appropriate combination thereof. It may be realized.

【0017】[0017]

【発明の効果】上記した本発明の第1の画像投影装置に
よれば、複数人の同時書き込みが可能になる。また上記
した本発明の第2の画像投影装置によれば、1人または
複数人が、1組または複数組の2つの座標指示手段を操
作することができ、メニーの選択などが容易になる。さ
らに本発明の第3の画像投影装置によれば、投影された
画像に対して、複数人が同時に図形の描画その他のより
高度な操作を行なうことが可能になる。また本発明の第
1から第3の画像投影装置の座標検出手段を画像投影手
段とは別体の投影画像制御装置とすることにより、既存
の画像投影装置に、本発明の画像投影装置の機能を付与
することが可能になる。
According to the first image projection apparatus of the present invention described above, a plurality of people can write simultaneously. Further, according to the second image projecting device of the present invention described above, one or a plurality of people can operate one set or a plurality of sets of two coordinate pointing means, and selection of many becomes easy. Further, according to the third image projecting device of the present invention, it becomes possible for a plurality of people to simultaneously perform drawing and other more sophisticated operations on the projected image. Further, by making the coordinate detecting means of the first to third image projecting devices of the present invention a projection image control device separate from the image projecting device, the existing image projecting device can function as the image projecting device of the present invention. Can be given.

【図面の簡単な説明】[Brief description of drawings]

【図1】本発明の第1の画像投影装置の1実施例の構成
の説明図である。
FIG. 1 is an explanatory diagram of a configuration of an embodiment of a first image projection device of the present invention.

【図2】本発明の画像投影装置で使用される座標指示手
段の説明図である。
FIG. 2 is an explanatory diagram of coordinate designating means used in the image projection apparatus of the present invention.

【図3】画像取得手段により取り込まれる画像の説明で
ある。
FIG. 3 is an illustration of an image captured by an image acquisition unit.

【図4】座標検出手段の、テンプレートマッチングによ
る座標指示手段の識別部の模様形状の認識動作を説明す
るフローチャートである。
FIG. 4 is a flowchart illustrating a pattern shape recognizing operation of an identification unit of a coordinate designating unit by template matching of a coordinate detecting unit.

【図5】座標検出手段の、グループ化による座標指示手
段の識別部の模様形状の認識動作を説明するフローチャ
ートである。
FIG. 5 is a flowchart illustrating a pattern shape recognizing operation of the identification unit of the coordinate designating unit by grouping, by the coordinate detecting unit.

【図6】座標指示手段が傾いている場合の、グループ化
による座標指示手段の識別部の模様形状の認識方法の説
明図である。
FIG. 6 is an explanatory diagram of a method of recognizing a pattern shape of an identification section of the coordinate designating means by grouping when the coordinate designating means is tilted.

【図7】本発明の第2の画像投影装置の1実施例の構成
の説明図である。
FIG. 7 is an explanatory diagram of a configuration of an embodiment of a second image projection device of the present invention.

【図8】本発明の第2の画像投影装置における出力命令
のメニーの一例の説明図である。
FIG. 8 is an explanatory diagram of an example of a many output command in the second image projection apparatus of the present invention.

【図9】本発明の第2の画像投影装置の処理命令決定手
段の動作を示すフローチャートである。
FIG. 9 is a flowchart showing an operation of a processing instruction determining unit of the second image projection device of the present invention.

【図10】本発明の第3の画像投影装置の1実施例の構
成の説明図である。
FIG. 10 is an explanatory diagram of a configuration of an embodiment of a third image projection device of the present invention.

【図11】本発明の第3の画像投影装置の属性付与手段
の動作を示すフローチャートである。
FIG. 11 is a flowchart showing the operation of the attribute assigning means of the third image projection apparatus of the present invention.

【図12】従来の画像投影装置におけるメニーの表示位
置の説明図である。
FIG. 12 is an explanatory diagram of a display position of a many in the conventional image projection device.

【符号の説明】[Explanation of symbols]

1 画像取得手段、2 座標検出手段、3 出力手段、
4 座標指示手段、5画像投影手段、6 投影面、7
識別部、8 高反射率領域、9 非反射領域、11 画
像取得手段、12 座標検出手段、13 処理命令決定
手段、14 出力手段、15−1、15−2 座標指示
手段、16 画像投影手段、17 投影面、18−1〜
18−8 処理選択領域、21 画像取得手段、22
座標検出手段、23 属性付与手段、24 出力手段、
26 画像投影手段、27 投影面
1 image acquisition means, 2 coordinate detection means, 3 output means,
4 coordinate designating means, 5 image projection means, 6 projection plane, 7
Identification unit, 8 high reflectance region, 9 non-reflection region, 11 image acquisition unit, 12 coordinate detection unit, 13 processing instruction determination unit, 14 output unit, 15-1, 15-2 coordinate instruction unit, 16 image projection unit, 17 Projection plane, 18-1 to
18-8 processing selection area, 21 image acquisition means, 22
Coordinate detecting means, 23 attribute assigning means, 24 output means,
26 image projection means, 27 projection plane

───────────────────────────────────────────────────── フロントページの続き Fターム(参考) 5B057 BA15 BA23 CA08 CA12 CA16 CE12 CH07 DA07 DB02 DB09 DC05 DC06 DC09 5B068 AA05 AA36 BC05 BD09 BE06 CC11 CD01 5B087 AA09 AB02 AE03 BC03 BC16 BC32 CC09 CC26 CC33 DE03 5C064 AA02 AC04 AC05 AC08 AC12 AC13 AD08    ─────────────────────────────────────────────────── ─── Continued front page    F term (reference) 5B057 BA15 BA23 CA08 CA12 CA16                       CE12 CH07 DA07 DB02 DB09                       DC05 DC06 DC09                 5B068 AA05 AA36 BC05 BD09 BE06                       CC11 CD01                 5B087 AA09 AB02 AE03 BC03 BC16                       BC32 CC09 CC26 CC33 DE03                 5C064 AA02 AC04 AC05 AC08 AC12                       AC13 AD08

Claims (6)

【特許請求の範囲】[Claims] 【請求項1】 画像投影手段により投影面に光学的に画
像を投影し、投影画面中の、座標指示手段により指示さ
れた点の座標を検出して投影画面に描画または他の処理
を行なう画像投影装置であって、 異なる模様形状を持つ高反射率の識別部が設けられた、
投影画像中の点を指示するための複数の座標指示手段
と、 投影画像とその中に置かれた前記座標指示手段の画像を
取り込む画像取得手段と、 前記画像取得手段により取り込まれた画像の高輝度部を
抽出し、抽出された各高輝度部を形状認識して対応する
座標指示手段を決定し、かつその高輝度部の各画素の座
標を用いて指定座標値を決定するための所定の計算を行
ない座標値を算出する座標検出手段と、 前記座標検出手段により検出された、座標指示手段と対
応づけられた座標群を出力する出力手段を含む座標検出
手段を備えたことを特徴とする会議等支援用画像投影装
置。
1. An image for optically projecting an image onto a projection surface by an image projection means, detecting coordinates of a point in the projection screen designated by the coordinate designating means, and performing drawing or other processing on the projection screen. A projection device, which is provided with a high-reflectance identification portion having different pattern shapes,
A plurality of coordinate designating means for designating points in the projected image, an image acquisition means for capturing the projected image and the image of the coordinate designating means placed therein, and a height of the image captured by the image acquiring means. A predetermined part for extracting the brightness part, recognizing the shape of each of the extracted high brightness parts to determine the corresponding coordinate designating means, and using the coordinates of each pixel of the high brightness part to determine the designated coordinate value. Coordinate detecting means for performing calculation to calculate coordinate values, and coordinate detecting means including output means for outputting a coordinate group detected by the coordinate detecting means and associated with the coordinate indicating means are provided. Image projection device for supporting meetings, etc.
【請求項2】 画像投影手段により投影面に光学的に画
像を投影し、投影画面中の、座標指示手段により指示さ
れた点の座標を検出して投影画面に描画または他の処理
を行なう画像投影装置であって、 異なる模様形状を持つ高反射率の識別部が設けられた、
投影画像中の点を指示するための少なくとも1組の2つ
の座標指示手段と、 投影画像とその中に置かれた前記座標指示手段の画像を
取り込む画像取得手段と、 前記画像取得手段により取り込まれた画像の高輝度部を
抽出し、抽出された各高輝度部を形状認識して対応する
座標指示手段を決定し、かつその高輝度部の各画素の座
標を用いて指定座標値を決定するための所定の計算を行
ない座標値を算出する座標検出手段と、 予め決められた一方の座標指示手段に対する他方の座標
指示手段の位置関係を算出し、この位置関係を使って、
予め記憶された1つまたは複数の前記位置関係と各位置
関係に対応づけられた処理命令のテーブルを参照するこ
とにより処理命令を決定する処理命令決定手段と、 前記処理命令決定手段により決定された処理命令を受け
取り出力する出力手段を含む座標検出手段を備えたこと
を特徴とする会議等支援用画像投影装置。
2. An image for optically projecting an image onto a projection surface by the image projection means, detecting coordinates of a point in the projection screen designated by the coordinate designating means, and performing drawing or other processing on the projection screen. A projection device, which is provided with a high-reflectance identification portion having different pattern shapes,
At least one set of two coordinate designating means for designating a point in the projected image, an image acquisition means for capturing the projected image and the image of the coordinate designating means placed therein, and an image capturing means for capturing the image. The high-intensity part of the image is extracted, the shape of each extracted high-intensity part is recognized, the corresponding coordinate designating means is determined, and the designated coordinate value is determined using the coordinates of each pixel of the high-intensity part. Coordinate detection means for performing a predetermined calculation for calculating coordinate values, and a positional relationship between the predetermined coordinate indicating means and the other coordinate indicating means, and using this positional relationship,
A processing instruction determining unit that determines a processing instruction by referring to a table of processing instructions associated with one or a plurality of the positional relationships stored in advance and each of the positional relationships, and the processing instruction determining unit. An image projecting apparatus for supporting a meeting or the like, comprising coordinate detection means including output means for receiving and outputting a processing command.
【請求項3】 画像投影手段により投影面に光学的に画
像を投影し、投影画面中の、座標指示手段により指示さ
れた点の座標を検出して投影画面に描画または他の指示
された処理を行なう画像投影装置であって、 異なる模様形状を持つ高反射率の識別部が設けられた、
投影画像中の点を指示するための複数の座標指示手段
と、 投影画像とその中に置かれた前記座標指示手段の画像を
取り込む画像取得手段と、 前記画像取得手段により取り込まれた画像の高輝度部を
抽出し、抽出された各高輝度部を形状認識して対応する
座標指示手段を決定し、かつその高輝度部の各画素の座
標を用いて指定座標値を決定するための所定の計算を行
ない座標値を算出する座標検出手段と、 前記座標検出手段により検出された各座標値に前記形状
を用いて決められる属性を付与する属性付与手段と、 前記座標検出手段によって算出された座標値と前記属性
付与手段によって与えられた属性を関連づけて出力する
出力手段を含む座標検出手段を備えたことを特徴とする
会議等支援用画像投影装置。
3. An image projecting means optically projects an image on a projection surface, detects coordinates of a point in the projection screen designated by the coordinate designating means, and draws or otherwise designates processing on the projection screen. An image projection device for performing, in which a high reflectance identification section having different pattern shapes is provided,
A plurality of coordinate designating means for designating points in the projected image, an image acquisition means for capturing the projected image and the image of the coordinate designating means placed therein, and a height of the image captured by the image acquiring means. A predetermined part for extracting the brightness part, recognizing the shape of each of the extracted high brightness parts to determine the corresponding coordinate designating means, and using the coordinates of each pixel of the high brightness part to determine the designated coordinate value. Coordinate detecting means for performing calculation to calculate coordinate values, attribute assigning means for imparting an attribute determined by using the shape to each coordinate value detected by the coordinate detecting means, and coordinates calculated by the coordinate detecting means An image projecting apparatus for supporting a meeting or the like, comprising: coordinate detecting means including output means for associating and outputting a value and an attribute given by the attribute giving means.
【請求項4】 前記座標検出手段の前記座標指示手段の
前記識別部の外形が矩形であり、 前記座標検出手段の前記座標検出手段における前記高輝
度部抽出により抽出される各高輝度部にたいして前記矩
形の長辺方向の積分および短辺方向の積分を算出し、該
積分値が所定の値以上変化する点の個数を取得すること
により、1つまたは複数の座標指示手段の識別部の模様
形状を認識するようにしたことを特徴とする請求項1か
ら4のいずれかの会議等支援用画像投影装置。
4. The outer shape of the identification unit of the coordinate instruction unit of the coordinate detection unit is a rectangle, and the high-intensity portions extracted by the high-intensity unit extraction in the coordinate detection unit of the coordinate detection unit are each described above. By calculating the integration in the long side direction and the integration in the short side direction of the rectangle and acquiring the number of points at which the integration value changes by a predetermined value or more, the pattern shape of the identification unit of one or more coordinate designating means The image projecting device for supporting a meeting or the like according to claim 1, wherein the image is projected.
【請求項5】 予め決められた一方の座標指示手段によ
り指示される点の周囲が複数の領域に分割され、各領域
に対して他方の座標指示手段がその領域内に置かれたと
きに選択される処理命令が設定されていることを特徴と
する請求項2の会議等支援用画像投影装置。
5. A selection is made when the circumference of a point designated by one of the predetermined coordinate designating means is divided into a plurality of areas, and for each area, the other coordinate designating means is placed within the area. The image projection apparatus for supporting a meeting or the like according to claim 2, wherein a processing command to be set is set.
【請求項6】 請求項1から5のいずれかの会議等支援
用画像投影装置の座標検出手段を画像投影手段別体の装
置とした、画像投影装置により光学的に投影された画像
中の指示された点の座標を検出して出力する投影画像制
御装置。
6. An instruction in an image optically projected by the image projecting device, wherein the coordinate detecting means of the image projecting device for supporting a meeting or the like according to claim 1 is a device separate from the image projecting device. A projection image control device for detecting and outputting the coordinates of a selected point.
JP2001287901A 2001-09-20 2001-09-20 Image projection device for meeting support Expired - Fee Related JP4728540B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2001287901A JP4728540B2 (en) 2001-09-20 2001-09-20 Image projection device for meeting support

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2001287901A JP4728540B2 (en) 2001-09-20 2001-09-20 Image projection device for meeting support

Publications (2)

Publication Number Publication Date
JP2003099196A true JP2003099196A (en) 2003-04-04
JP4728540B2 JP4728540B2 (en) 2011-07-20

Family

ID=19110633

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2001287901A Expired - Fee Related JP4728540B2 (en) 2001-09-20 2001-09-20 Image projection device for meeting support

Country Status (1)

Country Link
JP (1) JP4728540B2 (en)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008117083A (en) * 2006-11-01 2008-05-22 Sharp Corp Coordinate indicating device, electronic equipment, coordinate indicating method, coordinate indicating program, and recording medium with the program recorded thereon
JP2008520034A (en) * 2004-11-12 2008-06-12 ニュー インデックス アクティーゼルスカブ Visual system
US7464338B2 (en) 2005-01-21 2008-12-09 Cannon Kabushiki Kaisha Information processing apparatus and method for controlling the same
JP2009543173A (en) * 2006-06-28 2009-12-03 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ Method and apparatus for object learning and recognition based on optical parameters
JP2011204059A (en) * 2010-03-26 2011-10-13 Seiko Epson Corp Information input system and information input apparatus
JP2013045324A (en) * 2011-08-25 2013-03-04 Seiko Epson Corp Display device, control method of the same and program
JP2014063488A (en) * 2012-09-21 2014-04-10 Sharp Corp Method, system and apparatus for setting characteristic of digital marking device

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6057098B2 (en) 2012-01-09 2017-01-11 エプソン ノルウェー リサーチ アンド ディベロップメント アクティーゼルスカブEpson Norway Research And Development As Low interference system and method for synchronization, identification and tracking for visual and interactive systems

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3277658B2 (en) * 1993-12-28 2002-04-22 株式会社日立製作所 Information display device
JP4296607B2 (en) * 1997-08-06 2009-07-15 ソニー株式会社 Information input / output device and information input / output method
JPH1157216A (en) * 1997-08-15 1999-03-02 Sony Corp Game device
JPH11345087A (en) * 1998-03-31 1999-12-14 Seiko Epson Corp Presentation system and position detecting method

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008520034A (en) * 2004-11-12 2008-06-12 ニュー インデックス アクティーゼルスカブ Visual system
US7464338B2 (en) 2005-01-21 2008-12-09 Cannon Kabushiki Kaisha Information processing apparatus and method for controlling the same
JP2009543173A (en) * 2006-06-28 2009-12-03 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ Method and apparatus for object learning and recognition based on optical parameters
JP2013239198A (en) * 2006-06-28 2013-11-28 Koninklijke Philips Nv Method and apparatus for object learning and recognition on the basis of optical parameters
JP2008117083A (en) * 2006-11-01 2008-05-22 Sharp Corp Coordinate indicating device, electronic equipment, coordinate indicating method, coordinate indicating program, and recording medium with the program recorded thereon
JP2011204059A (en) * 2010-03-26 2011-10-13 Seiko Epson Corp Information input system and information input apparatus
JP2013045324A (en) * 2011-08-25 2013-03-04 Seiko Epson Corp Display device, control method of the same and program
JP2014063488A (en) * 2012-09-21 2014-04-10 Sharp Corp Method, system and apparatus for setting characteristic of digital marking device

Also Published As

Publication number Publication date
JP4728540B2 (en) 2011-07-20

Similar Documents

Publication Publication Date Title
JP6153564B2 (en) Pointing device with camera and mark output
KR100953606B1 (en) Image displaying apparatus, image displaying method, and command inputting method
US6999061B2 (en) Electronic whiteboard system
EP0771460B1 (en) Interactive projected video image display system
JP3419050B2 (en) Input device
US20030034961A1 (en) Input system and method for coordinate and pattern
WO2001052230A1 (en) Method and system for interacting with a display
WO2016021022A1 (en) Projection image display device and method for controlling same
JP2001273091A (en) Detection of pointed position by multiple resolution graphic analysis
KR20020052217A (en) Electronics device applying an image sensor
JP5664164B2 (en) Electronic information board device, information display method, program
JP2010079834A (en) Device for determination of mounting position of coordinate detection device and electronic board system
JP4728540B2 (en) Image projection device for meeting support
JP2000259338A (en) Input system, display system, presentation system and information storage medium
JP2015026189A (en) Image processing system, portable terminal device, display device, and computer program
JP3804302B2 (en) Display device and information recording medium
JP2001067183A (en) Coordinate input/detection device and electronic blackboard system
JP2005346453A (en) Image display device
JP2002312123A (en) Touch position detecting device
JP4266076B2 (en) Electronic blackboard system
JP2005148555A (en) Image projection display device, image projection display method, and image projection display program
JP2021036401A (en) Display device, display method and program
JP7331578B2 (en) Display device, image display method, program
JP7314719B2 (en) Display device, display method, program
JP2022139957A (en) Display device, program, conversion method, and display system

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20080902

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20080917

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20100716

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100727

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100921

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20110412

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20110415

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140422

Year of fee payment: 3

LAPS Cancellation because of no payment of annual fees