JP3517482B2 - Coordinate detecting device and method - Google Patents

Coordinate detecting device and method

Info

Publication number
JP3517482B2
JP3517482B2 JP14169395A JP14169395A JP3517482B2 JP 3517482 B2 JP3517482 B2 JP 3517482B2 JP 14169395 A JP14169395 A JP 14169395A JP 14169395 A JP14169395 A JP 14169395A JP 3517482 B2 JP3517482 B2 JP 3517482B2
Authority
JP
Grant status
Grant
Patent type
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP14169395A
Other languages
Japanese (ja)
Other versions
JPH08335136A (en )
Inventor
幸男 増田
浩平 稲村
泉 金井
Original Assignee
キヤノン株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Grant date

Links

Description

【発明の詳細な説明】 【0001】 【産業上の利用分野】本発明は座標検出装置及び方法、 BACKGROUND OF THE INVENTION DETAILED DESCRIPTION OF THE INVENTION [0001] The present invention is a coordinate detecting device and method,
詳しくは操作者により指示された座標位置を検出する座標検出装置及び方法に関するものである。 And more particularly to a coordinate detecting device and method for detecting the indicated coordinate positions by the operator. 【0002】 【従来の技術】従来、この種の装置としては、専用のタブレット上を専用のペンで示すタイプのデバイス(デジタイザと呼ばれる)と、回転ボールとそのボールの回転方向やその量を検出するロータリーエンコーダを内蔵したタイプのデバイス(例えばマウスやトラックボール) [0002] Conventionally, as this type of device, the type of the device shown on dedicated tablet dedicated pen (called digitizer), detects the rotation direction and the amount of rotation ball and its ball type of device with a built-in rotary encoder (for example a mouse or a trackball)
等がある。 And the like. 【0003】これらはいずれも、 表示画面を見る人=ポインティングデバイスを操作する人であるケースが多い。 [0003] These are both, in many cases, it is a person to operate the person = pointing device to see the display screen. 【0004】ところで、最近では、予め表示情報を電子化しておいて、その席上で、多数の人を前に各種プレゼンテーションを行うようになってきた。 [0004] By the way, in recent years, the pre-display information had been digitized, on the occasion that has been adapted to perform a variety of presentation before a large number of people. 一般に、このようなプレゼンテーションでは比較的大きな画面に表示されるこが望まれ、情報処理装置(例えばパーソナルコンピュータ等)にプロジェクタや、専用のOHP装置を接続することで行われることが多い。 Generally, such a presentation is desired this to be displayed relatively large screen, and a projector to an information processing apparatus (personal computer, for example), is often carried out by connecting a dedicated OHP device. 【0005】かかるシステムでは、プレゼンテーション用資料の作成等も、ワープロ感覚で作成できるので注目されている。 [0005] In such a system, create the like of the presentation materials are also attracting attention because it created in a word processor sense. 【0006】 【発明が解決しようとする課題】しかしながら、例えば表示(もしくは投影)された画像中に、いくつかのメニューを表示させていても、結局そのメニューを選択するのは、専用のオペレータであり、視聴者はあくまで受手としてしか参加できない。 [0006] The present invention is, however, for example in the display (or projected) image, even to display several menus, to select the menu eventually, a dedicated operator Yes, viewers will not only be able to participate only as 受手. 【0007】これを解決する手法としては、例えば、特開平4−18859号や特開平4−18860号がある。 [0007] As a method for solving this problem, for example, there is JP-A-4-18859 and JP-A-4-18860. これらの提案には、ポインティング光線を照射する手段と、スクリーンに設けられ、この照射された位置を検出する手段を備える技術が開示されている。 These proposals, means for irradiating the pointing light, provided on the screen, a technique comprising means for detecting the irradiated position is disclosed. 【0008】たしかに、かかる構成をすると、遠隔からスクリーン上の所望とする位置を指定することは可能ではあるが、そのスクリーンは複雑な構成を備えることになるので、製造が困難であり、且つ、非常に高価になる。 [0008] Indeed, when such a configuration, While it is possible to specify a desired and position on the screen from a remote, because the screen will be provided with a complicated structure, it is difficult to manufacture, and, it becomes very expensive. また、そのスクリーンが必須になるので、プレゼンテーションを行う場所も自ずと決まってくる。 In addition, because the screen is required, place where the presentation also come naturally determined. 【0009】 【課題を解決するための手段】及び【作用】本発明はかかる点に着目したものであり、簡単な構成でもって、既存の資源を活用しつつ、遠隔から所望とする位置を指定することを可能ならしめる座標検出装置及び方法を提供しようとするものである。 [0009] SUMMARY OF THE INVENTION and SUMMARY OF] The present invention has focused on this point, with a simple configuration, while utilizing the existing resources, specify where a desired remotely is intended to provide a coordinate detection device and method makes it possible to. 【0010】この課題を解決するため、例えば本発明の座標検出装置は以下の構成を備える。 [0010] To solve this problem, for example, the coordinate detecting device of the present invention comprises the following arrangement. すなわち、 遠隔か In other words, whether the remote
指示した座標位置を検出する座標検出装置であって、 A coordinate detecting device for detecting a et indicated coordinate positions,
撮像手段を備え、その撮像方向を自在に変更可能なポイ<br>ンティングデバイスと、該ポインティングデバイスから供給された像中の、座標入力空間を特定する少なくとも2つのマーカーを検出する検出手段と、検出されたマーカーの位置に基づいて、前記座標入力空間に対して前記 An imaging unit, and the imaging direction freely changeable POI <br> down computing device, in the image supplied from the pointing device, a detecting means for detecting at least two markers to identify the coordinate input space , based on the detected position of the marker, said against the coordinate input space
ポインティングデバイスが指定する座標位置を導出する導出手段と 前記ポインティングデバイスで指定される And deriving means for deriving a coordinate position pointing device is designated, designated by the pointing device
座標位置が、表示画面領域内にあるか否かを判定する判 Coordinate position is-format determines whether the display screen area
定手段と、 該判定手段によって、前記ポインティングデ A constant section, by said determining means, the pointing de
バイスで指定される座標位置が、前記表示画面領域外に Coordinate position specified by device is outside the display screen area
あると判定した場合、操作者に前記ポインティングデバ If it is determined that there, the pointing Device operator
イスで指定される座標位置が前記表示画面領域外にある Coordinate position specified by the chair is outside the display screen area
ことを知らしめる手段とを備える。 And it means to notify that. 【0011】 【0012】また、この場合におけるマーカーは表示画面の所定位置に表示される識別マーカー画像であることが望ましい。 [0011] [0012] It is desirable markers in this case is an identification marker image displayed on the predetermined position on the display screen. これにより、表示を制御する側でマーカーを表示させる処理を行なえばよくなり、画像を表示する側は汎用のものが使用できる。 This makes better be performed a process of displaying the marker on the side to control the display, the side that displays an image may be used those generally used. 【0013】また、マーカーは、着脱自在な物理的なマーカーであっても良い。 Further, the marker may be a removable physical marker. この場合には、表示を制御する側にはマーカーを表示する等の処理が不要になり、そのマーカーさえ設置すれば座標検出が行なえるようになる。 In this case, it eliminates the need for processing such as displaying a marker on the side to control the display, coordinate detection is so performed as long established that marker. 【0014】また、前記ポインティングデバイスと、前記検出手段及び導出手段は少なくとも別体になっていているが望ましい。 Further, with the pointing device, the detecting means and deriving means are has become at least another body is desirable. この結果、ポインティングデバイスは非常にコンパクトにすることができるので、マイクを持つような間隔で遠隔から座標入力が行なえる。 As a result, the pointing device can be very compact, it allows coordinate input remotely at intervals like having a microphone. 【0015】また、前記導出手段は、検出された2つのマーカーと、前記座標入力空間を特定する所定の形状情報に基づいて座標位置を導出するが望ましい。 Furthermore, the deriving means includes two markers is detected, but to derive the coordinate position based on the predetermined shape information identifying the coordinate input space desired. これによって、操作者と座標入力空間を載置した場所との間の距離に関わりなく座標入力を行なえるようになる。 This makes it so perform the coordinate input regardless of the distance between the place of mounting of the operator and the coordinate input space. 【0016】また、前記形状情報はアスペクト比であることが望ましい。 Further, it is desirable the shape information is the aspect ratio. この結果、座標検出は至極簡単になり、検出速度も高速に行なえるようになる。 As a result, coordinate detection becomes extremely easy, the detection speed becomes so performed at high speed. 【0017】更に、前記導出手段で導出された座標データを送出するための汎用インターフェースを備えるが望ましい。 Furthermore, although comprising a generic interface for sending the coordinate data derived by said deriving means desirable. この結果、汎用の情報処理装置に接続するだけ、座標入力を行なえるようになる。 As a result, simply connecting a general-purpose information processing apparatus, the so perform the coordinate input. 【0018】前記ポインティングデバイスには、少なくとも1つのボタンスイッチを備え、当該ボタンスイッチの状態情報を映像信号と共に出力するが望ましい。 [0018] The pointing device comprises at least one button switch, but outputs the status information of the button switch along with the video signal desired. この結果、単に座標の入力だけでなく、各種指示等を行なえるようになる。 As a result, not only the input of coordinates, comprising various instructions or the like so performed. 【0019】また、更に、前記マーカーの位置と座標入力空間の関係を調整する手段を備えることが望ましい。 [0019] Furthermore, it is desirable to provide a means for adjusting the relationship between the position and the coordinate input space of said markers.
これにより、異なる座標入力空間においても正常な座標入力が行なえるようになる。 This also normal coordinate input can be performed so in different coordinate input space. 【0020】 【実施例】以下、添付図面に従って本発明に係る一実施例を詳細に説明する。 [0020] [Example] Hereinafter, an embodiment of the present invention will be described in detail with reference to the accompanying drawings. 【0021】図1は実施例におけるシステムの構成を示している。 [0021] Figure 1 shows a system configuration in the embodiment. 図中、1は装置全体の制御を司るCPUであり、2はブートプログラム等を記憶しているROM、3 In the figure, 1 denotes a CPU which controls the overall apparatus, 2 stores a boot program and the like ROM, 3
はCPU1が処理するOSやアプリケーション或いはワーク領域として使用するRAMである。 Is a RAM used as the OS and applications, or work area CPU1 handles. 4はOSやアプリケーションプログラム、更には各種情報を格納している外部記憶装置(例えばハードディスク装置、フロッピーディスク装置、光磁気ディスク装置等)である。 4 OS and application programs, and further an external storage device which stores various kinds of information (e.g., hard disk device, floppy disk drive, magneto-optical disk drive, etc.). 5は各種コンマンドを入力したり、文字等を入力するためのキーボードである。 5 or input various Konmando, a keyboard for inputting characters and the like. 6は表示画面に表示するイメージを展開するVRAMであり、7はVRAM6に展開されたイメージを表示する表示装置である。 6 is a VRAM for developing the image to be displayed on the display screen, 7 is a display device for displaying the image developed in the VRAM6. 尚、VRAM6に各種イメージデータを展開すると、その展開されたイメージが表示装置7に表示される。 Incidentally, when developing various image data in VRAM6, the expanded image is displayed on the display device 7. 従って、VRAMにデータを書き込むことと、表示するということは等価である。 Therefore, the writing data to VRAM, is equivalent that display. 【0022】9が、操作者が操作する座標入力部であって、撮像素子と、一般のマウスデバイスや座標入力ペン等と同様にボタンが設けられている。 [0022] 9, a coordinate input unit which the operator operates, and the imaging device, general buttons like the mouse device and the coordinate input pen or the like is provided. 撮像された像データ及びこのボタンの押下情報は、図示のインターフェース8を介して装置に取り込まれる。 Pressing information of the image data and the button imaged is taken in the apparatus through an interface 8 shown. 【0023】上記構成において、今、本システムに電源が投入されると、CPU1はROM2内に格納されているブートプログラムに従って、外部記憶装置4からOS [0023] In the above structure, now, when the power to the system is turned on, CPU 1 in accordance with a boot program stored in the ROM 2, external storage device 4 OS
プログラムをRAM3に読み出してOSを稼動させる。 It reads the program to RAM3 to run the OS.
そして、操作者がキーボード5や実施例の座標入力部9 Then, the operator coordinate input section 9 of the keyboard 5 and Example
からの指示に基づいて各種アプリケーションを起動し、 Start a variety of applications on the basis of an instruction from,
処理を遂行していくことになる。 It will be to continue to carry out the process. このとき、実施例の座標入力部9を使用すると、表示装置7上には対応するカーソルが表示され、一般のマウスやデジタイザと同様の作業が行なえるようになる。 At this time, by using the coordinate input unit 9 of the embodiment, on the display device 7 displays the corresponding cursor, similar tasks and general mouse or digitizer is so performed. 尚、カーソルの表示制御自身は公知であり、本願発明には直接的には関係がないのでその説明は省略するが、少なくともOSは座標データ及びボタンの押下情報をインターフェース8を介して受け、カーソルの制御等を行うことになる。 The display control itself of the cursor are known, since there is no relation to the directly to the present invention and a description thereof will be omitted, at least the OS depression information of the coordinate data and the button received through the interface 8, the cursor It will perform the control. 【0024】図2に実施例のシステム及び座標入力部9 The system of Example 2 and the coordinate input section 9
の操作例を示す。 Show the operation example. 【0025】図示の如く、実施例における座標入力部9 [0025] As illustrated, coordinate input section 9 in the embodiment
は、手に持てる程度の大きさであり、遠隔から表示画面上のカーソルの位置を制御することを可能にしている、 Is large enough-held hand, is it possible to control the position of a cursor on a display screen from a remote,
図示において、9aは座標入力部9に設けられたボタンを示し、101は座標入力部9の操作に連動するカーソルである。 In the illustrated, 9a represents a button provided on the coordinate input unit 9, 101 is a cursor interlocked with the operation of the coordinate input section 9. 【0026】以下、図2に示す動作を実現するための原理を詳細に説明する。 The following describes the principle for realizing the operation shown in FIG. 2 in detail. 【0027】座標入力部9には、先に説明したように固体撮像素子(CCD)が内蔵されている。 The coordinate input unit 9, the solid-state imaging device (CCD) is built as described above. そして、その撮像された像を基にして座標入力部9の指し示した延長上の表示画面位置を検出するものである。 Then, it detects the display screen position on an extension which points of the coordinate input unit 9 based on the imaged image. 【0028】一般に、撮像した像を認識するには非常に複雑な処理を要するが、本願発明者はかかる処理を極めて簡単に実現した。 [0028] Generally, it takes a very complicated process to recognize the image captured, the present inventors have realized such a process very easily. 【0029】具体的には、表示装置7の表示領域(以下、スクリーン領域)の所定位置(少なくとも2箇所) [0029] Specifically, the display device 7 the display area (hereinafter, the screen area) predetermined position (at least 2 places)
に、表示画像と区別可能なマーカーを表示する。 To, to display a distinguishable marker and display image. 図2における符号102、103がマーカーである。 Code 102 and 103 is a marker in FIG. ここでマーカーは、特別な色にしたり、或いは、点滅する周期を所定値にしたりする等が考えられる。 Here marker or a special color, or the like or to a period that blinks a predetermined value is considered. いずれにしてもマーカーを認識できさえすれば、以下に説明する機能が実現できるので、その手法は問わない。 If only recognize the marker Anyway, since function can be realized as described below, regardless the technique. ここでは、説明を簡単にするため、マーカー102を赤色、マーカー10 Here, for simplicity of explanation, the marker 102 red marker 10
3を緑色にした例を説明する。 An example of a 3 green will be described. 但し、この場合には、スクリーン領域には、マーカーで使用している色は表示しないものとする。 However, in this case, in the screen area, the color being used in marker shall not be displayed. 【0030】図3は、座標入力部9での撮像例を示している。 [0030] Figure 3 shows an imaging example of the coordinate input section 9. 同図(A)は撮像の中心位置が撮像されたスクリーン領域の外にある例を、同図(B)は撮像の中心位置が撮像されたスクリーン領域内にある例を示している。 Fig (A) is an example outside the screen area in which the center position of the imaging is imaged, FIG. (B) shows an example of the screen region where the center position of the imaging is captured.
撮像の中心位置が、表示画面内に入っているか否かの判定は、2つのマーカー(赤色マーカーと緑色マーカー) The center position of the imaging, the determination of whether or not contained in the display screen, two markers (red markers and green marker)
を検出でき、且つ、撮像されたマーカーの位置から一義的に決まる撮像画像中のスクリーン領域のサイズと位置を演算し、それでもって判定すれば良い。 It can be detected, and calculates the size and position of the screen area in the captured image uniquely determined from the position of the imaged markers, but may be determined me. 【0031】例えば、表示装置7のスクリーン領域の縦横比(一般にアスペクト比と呼ばれる)が決まっていれば、2つのマーカーを検出しさえすれば、そのマーカー位置と、表示画面のアスペクト比でもって、撮像の中心位置の表示画面に対する座標を求めることができる。 [0031] For example, if the fixed aspect ratio of the screen area of ​​the display device 7 (generally referred to as aspect ratio), if only detect two markers, and the marker position, with an aspect ratio of the display screen, it is possible to obtain the coordinate on the display screen of the center position of the imaging. アスペクト比を用いることの利点は、座標入力部9の操作者の表示装置7からの距離を無視(操作者と表示画面との距離を無視)できるからである。 The advantage of using the aspect ratio is because (the distance between the operator and the display screen ignored) ignore the distance from the operator of the display device 7 of the coordinate input unit 9 may. 【0032】従って、同図(A)の状態であれば、検出した座標データは、範囲外として処理すれば良いし、同図(B)の状態であれば、マーカーによって決まるスクリーン領域に対する撮像の中心位置の座標を演算すれば良い。 [0032] Therefore, if the state of FIG. (A), the coordinate data detected may or be treated as a range, if the state of FIG. (B), the image pickup to the screen area that is determined by the marker the coordinates of the center position may be calculated. 【0033】ここで注目する点は、座標入力部9の指向方向がスクリーン領域のどの位置にあるかがわかれば良いわけであるから、座標入力部9がどのように操作者の手に持たれているかは一切考慮する必要はない点である。 The point to note here is because the directivity direction of the coordinate input section 9 is not good Knowing where it is in the position of the screen area, being held in the hands of how the operator coordinate input section 9 and it has or is the point it is not necessary to take into account at all. すなわち、ボタン9aが必ず上になるように持つことを義務付けるものではない。 That is, the button 9a is not requiring to have to always be on top. 【0034】尚、座標位置の求め方を簡単に説明すると、次のようになろう。 [0034] It should be noted, to explain how to determine the coordinate position briefly, would be as follows. 【0035】図4(A)は、座標入力部9で撮像されたスクリーン領域を示している(点A,B,A',B'で囲まれる領域)。 [0035] FIG. 4 (A), the coordinate input unit 9 is captured in the show screen region (points A, B, A ', B' region surrounded by). 【0036】ここで、点Aが赤色のマーカー、点Bが緑色のマーカーであるものとする。 [0036] Here, the point A is red marker, the point B is assumed to be a green marker. 勿論、この時点では点A',B'の位置は未定であるが、簡単に求めることはできる。 Of course, the point A at this time ', B' the position of a pending easily be determined can. すなわち、点A、Bの距離及び、点Bを基準とし、水平軸から点Aへの角度θ1は容易に検出(算出) That is, the point A, the distance B and, as a reference point B, the angle θ1 from the horizontal axis to the point A is easily detected (calculated)
できる。 it can. また、∠ABA'(=θ2)は固定であるので、点A'の水平線からの角度θ3は、 θ3=θ1-θ2 となる。 Further, ∠ABA '(= θ2) Since is a fixed point A' angle .theta.3 from horizon becomes θ3 = θ1-θ2. すなわち、この場合には、点Bを基準とし、点A及び点Pをθ3だけ時計まわりに回転さることで、スクリーンに表示された像を正立させることが可能になる。 That is, in this case, with respect to the point B, it monkey rotating the point A and the point P in the clockwise only .theta.3, it is possible to erect the image displayed on the screen. 【0037】この結果、点A'、B'は単純に求めることができる。 [0037] As a result, the points A ', B' can be simply determined. すなわち、点A'及び点B'は、それぞれ辺ABの長さに、cosθ2、sinθ2を掛け合わせれば得られる。 That is, the points A 'and the point B' is the length of each side AB, cos, obtained if ask multiplying Sinshita2. より詳しく説明すると、回転処理後の点A'のx In more detail, x of the points A 'after the rotation processing
座標は、回転処理後の点Aのx座標と同じであり、回転処理後の点B'のy座標は、回転処理後の点Aのy座標と同じである。 Coordinate is the same as the x-coordinate of point A after the rotation process, y coordinates of the point B after rotation processing 'is the same as the y-coordinate of a point A after the rotation process. 後は、点Pの座標x,yと点A、B、 After the coordinates x, y and the point A of the point P, B,
A',B'の大小比較のみで点Pがスクリーン領域内に入っているか否かを判定できる。 A ', B' compares only at the point P of the can determine whether is within the screen area. 【0038】すなわち、回転後における各点の座標を点Pの座標を(XP,YP)、点Aの座標を(XA,YA), [0038] That is, the coordinates of the point P with coordinates of a point after the rotation (XP, YP), the coordinates of the point A (XA, YA),
点Bを(XB,YB)とした場合、以下の条件を満足するとき、点Pはスクリーン領域内にあると判定できる。 If the point B and (XB, YB), when the following conditions are satisfied, the point P can be determined to be within the screen area. 【0039】XB≦XP≦XA YB≦YP≦YA 但し、ここでは、画面の左下を原点にし、右方向はX軸の正を、上方向をY軸の正の方向とした。 [0039] XB ≦ XP ≦ XA YB ≦ YP ≦ YA However, here, the bottom left of the screen is the origin, the right direction positive X-axis, and the upward direction is a positive direction of the Y-axis. 尚、軸の正の方向はこれに限らないのは勿論である。 Incidentally, the positive direction of the axis is not limited thereto as a matter of course. 【0040】また、情報処理装置内部で使用する座標空間のスクリーン領域の水平方向の最大座標値XMAX,及び垂直方向の最大座標YMAX(ドット数もしくはその情報処理装置が採用する仮想的な絶対座標値)は固定であるので、点Pの情報処理が活用する座標X,YはX=XMAX・(XP-XB)/(XA-XB) Y=YMAX・(YP-YB)/(YA-YB) で求めることができる。 Further, the maximum coordinate value in the horizontal direction of the screen area of ​​the coordinate space used inside information processing apparatus XMAX, and the maximum coordinate YMAX (the number of dots in the vertical direction or imaginary absolute coordinate value the information processing apparatus employs since) is fixed, the coordinate X of the information processing of the point P is utilized, Y is X = XMAX · (XP-XB) / (XA-XB) Y = YMAX · (YP-YB) / (YA-YB) it can be obtained at. 【0041】さて、実施例の装置(システム)におけるCPU1は、OSもしくはアプリケーションから座標位置を獲得する指示を受けると、図5に示す手順で座標を検出すれば良い。 [0041] Now, the CPU1 in the apparatus of Example (system), when receiving an instruction to acquire a coordinate position from the OS or an application may be detected coordinates to the procedure shown in FIG. 尚、同図の処理手順は、最初は外部記憶装置4に記憶されていて、システムが稼動状態になってRAM3に読み込まれ、適当な時間毎に呼び出されるものである。 Note that the processing procedure of the figure, initially be stored in the external storage device 4, the system is loaded in the RAM3 becomes operating state, it is intended to be called every appropriate time. 【0042】先ず、ステップS1において、座標入力部9から撮像映像を入力する。 [0042] First, in step S1, and inputs the captured image from the coordinate input unit 9. そして、ステップS2でもって、その中に2つのマーカーが存在するか否かを判定する。 Then, with a step S2, it determines whether there are two markers therein. 2つとも検出されない場合、座標入力部9は表示画面方向に向かっていないことになるから、ステップS When two even not detected, the coordinate input section 9 from would not facing the display screen direction, the step S
5に進んで、エラー処理を行う。 Proceed to 5, an error processing is performed. エラー処理としては、 As an error process,
例えばエラーである旨を呼び出し元に通知する、もしくは、スクリーン領域内にあると判定された最新の座標データを検出結果として通知する等である。 For example informs the caller that an error or a like to be notified as a detection result latest coordinate data is determined to be in the screen region. 後者の場合には、カーソルはスクリーン領域に表示されたままにさせることが可能になるので、操作者に自然な環境を提供できるであろう。 In the latter case, the cursor so it is possible to remain displayed in the screen area, could provide a natural environment to the operator. 【0043】さて、2つのマーカーが検出されると、それぞれのマーカーの位置と、予め設定されたスクリーン領域のアスペクト比に基づいて、撮像画像全体の中心位置が、撮像されたスクリーン領域内部に含まれるか否かを判定する。 [0043] Now, when the two markers are detected, and the position of each marker, based on the aspect ratio of a preset screen area, the captured image the whole of the center position, contained inside the screen area that is captured and determines whether or not. スクリーン領域外であると判定された場合には、ステップS5のエラー処理を行なう。 If it is determined to be outside the screen area, it performs error processing in step S5. 【0044】また、スクリーン領域内にあると判定された場合には、その撮像画像全体の中心位置の、スクリーン領域に対する座標を算出し、その算出結果と、ボタン9aの押下状態を示す情報を本処理の呼び出し元に返す。 [0044] If it is determined that the screen region, the central position of the entire captured image, and calculates the coordinates for the screen area, the information indicating the calculation result, the pressing state of the button 9a return to the calling process. 【0045】以上の結果、本実施例によれば、表示画像の所望とする位置の指定を、遠隔から、しかも格別な表示装置を用いずとも行なえるようになる。 [0045] As a result, according to this embodiment, the specified position of a desired display image from a remote, yet become so performed also without any special display device. 【0046】尚、上記実施例では情報処理装置内の全体の制御を司るCPU1が座標位置検出を行う例を示したが、例えば座標検出するための回路を独立させても良い。 [0046] In the above embodiment, CPU1 controls the whole in the information processing apparatus is an example of performing a coordinate position detection, for example, it may be the circuit is independent for coordinate detection. 一般に、情報処理装置(例えばパーソナルコンピュータ)には、各種機能を拡張するための拡張スロットと呼ばれるインターフェースを備えているので、上記の座標検出を行うカードもしくはボードを装着させれば良い。 Generally, the information processing apparatus (e.g., a personal computer), is provided with the interface called expansion slot for expanding various functions, it is sufficient to mount the card or board that performs the above coordinate detection. このようにすると、汎用の装置でもって上記実施例の機能を実現できるようになり、特別な情報処理装置である必要性はなくなる。 In this way, with a general-purpose device will be able to realize the functions of the above embodiment, it will not need a special processing apparatus. 【0047】<第2の実施例の説明>上記実施例では、 [0047] In the above embodiment <description of the second embodiment>
表示装置7の表示画面のアスペクト比が一定であるとして説明したが、その比を微調整できる装置もめずらしくはない。 Although the aspect ratio of the display screen of the display device 7 has been described as a constant, apparatus uncommon is not capable of fine adjustment of the ratio. また、同じプレゼンテーションデータを別な装置の別な表示装置で行う場合、各々の表示装置間でアスペクト比が必ず一定であるとの保証もない。 When performing the same presentation data on a different display device another device, there is no assurance that the aspect ratio is always constant between each of the display device. 【0048】そこで、本第2の実施例では、実際に座標入力部9でもって操作する前に、そのアスペクト比を決定する処理を付加した。 [0048] Therefore, in this second embodiment, before operating with actual coordinate input unit 9, and adds the process of determining the aspect ratio. 【0049】装置構成は図1と同じとし、以下では、座標入力の微調整処理の開始指示(例えばキーボードから該当するプログラムの起動指示)がなされた場合に起動する処理を、図6を用いて説明する。 The device structure the same city as Figure 1, in the following, a process that starts when a start instruction of the fine adjusting process of the coordinate input (e.g. activation instruction program corresponding keyboard) is made, with reference to FIG. 6 explain. なお、処理開始指示をする以前に、操作者は、座標入力部9を表示画面方向に適当にむけて固定しておくものとする(手で触れない)。 Incidentally, prior to the processing start instruction, the operator shall be fixed in appropriately toward the screen direction of the coordinate input section 9 (not touch). 【0050】先ず、ステップS11において、表示装置7上の右上隅位置にマーカーを表示する。 [0050] First, in step S11, it displays a marker in the upper-right corner position on the display device 7. ステップS1 Step S1
2では、このマーカーが座標入力部9の撮像範囲に入っているか否かを判断する。 In 2, the marker is determined whether the entered image capturing range of the coordinate input section 9. 入っていない場合には、座標入力部9の方向を調整し、ステップS12の判断がye If not entered adjusts the direction of the coordinate input section 9, the determination in step S12 is ye
sになるまで調整する。 Adjusted until the s. 尚、座標入力部9にズーム機能が搭載されている場合には、その倍率を小さめにセットしておきさえすれば、ステップS12の判定結果がNO Incidentally, when the zoom function in the coordinate input unit 9 is mounted, as long in advance and set the magnification smaller, the decision result in the step S12 is NO
になるケースは希である。 To become the case is rare. 【0051】さて、スクリーン領域の右上隅のマーカーが検出されると、撮像画像全体におけるマーカー位置を記憶保持しておく。 [0051] Now, when a marker in the upper-right corner of the screen area is detected, stores holding the marker position in the entire captured image. 次いで、ステップS14に進んで、 Subsequently, the procedure proceeds to step S14,
今度はスクリーン領域の左上隅にマーカーを表示させ、 This time, to display the marker in the upper left corner of the screen area,
同様の処理を行う(ステップS15、16)。 It performs the same processing (steps S15 and S16). 【0052】そして、スクリーン領域の右下隅にもマーカーを表示させ、その検出を行う(ステップS17、S [0052] Then, in the lower right corner of the screen area to display the marker, perform the detection (step S17, S
18)。 18). 【0053】こうして、スクリーンの形状を特定する位置のマーカー全て検出されると、それに従ってスクリーンのアスペクト比が決定されるので、この後は、この決定されたアスペクト比に従って座標検出を行えば良い。 [0053] Thus, when all marker positions that specify the shape of the screen is detected, since it screens the aspect ratio of is determined according to, after this, may be performed coordinate detection in accordance with the determined aspect ratio. 【0054】尚、一般に、表示画面のアスペクト比と、 [0054] It should be noted, and in general, the aspect ratio of the display screen,
表示画像の縦横のドット数の比は一致するこが望まれるが、表示画面のアスペクト比は表示装置に設けられた調整ツマミで自由に調整できるので、厳密には一致していない可能性がむしろ高い。 Although the ratio of the number of dots vertical and horizontal display image this matching is desired, the aspect ratio of the display screen can be freely adjusted by adjusting knob provided in the display device, strictly it may not coincide rather high. すなわち、情報処理装置内部では、例えばドット位置もしくはそれに相当する座標空間で処理している場合には、検出された撮像画像の中心位置を補正する必要がある。 That is, in the internal information processing apparatus, for example when being processed in the coordinate space corresponding to the dot position or it is necessary to correct the center position of the detected captured image. 【0055】このためには、例えば右上隅マーカーと右下隅マーカーの座標系における距離(装置が使用する絶対座標値)、及び、右上隅と左上隅の座標系における距離(同様)を入力し、それを補正パラメータとしてセットしておけば良いであろう。 [0055] Enter the For this purpose, for example, the distance (absolute coordinate value apparatus is used) in the coordinate system of the upper-right corner markers and the lower right corner markers, and the distance in the upper right corner and upper left corner of the coordinate system (the same), would it it is sufficient to set as a correction parameter. 【0056】以上説明したように本第2の実施例によれば、座標入力部9の操作する以前に微調整処理を行えるので、スクリーン領域のサイズや形状が多少異なる状況になったとしても正しく座標の入力が行なえるようになる。 [0056] According to the second embodiment as described above, since perform the fine adjustment process prior to the operation of the coordinate input section 9, even correctly as the size and shape of the screen area becomes somewhat different situation input of coordinates is so performed. 【0057】<第3の実施例の説明>上記第1、第2の実施例では、情報処理装置自身が座標検出処理を兼ねるものとして説明したが、座標検出にかかる処理部分を情報処理装置の外部に設ける例を第3の実施例として説明する。 [0057] The first <Description of Third Embodiment> In the second embodiment, the information processing apparatus itself has been described as serving also as a coordinate detection process, the information processing apparatus processing portion according to the coordinate detection explaining the example of providing the outside as a third embodiment. 【0058】図7に、第3の実施例における利用形態の模式図を示す。 [0058] Figure 7 shows a schematic view of a use form of the third embodiment. 図中、100は情報処理装置本体であり、200は情報処理装置からの映像信号を取り込み、 In the figure, 100 is an information processing apparatus main body, 200 takes the video signal from the information processing apparatus,
スクリーン500に投影するプロジェクタである。 Is a projector that projected on the screen 500. 30 30
0は座標検出装置、400は座標入力部である。 0 coordinate detecting device, 400 is a coordinate input unit. 【0059】本第3の実施例では、座標検出装置300 [0059] In the third embodiment, the coordinate detecting device 300
と情報処理装置100とをシリアルインターフェース(例えばRS−232C等)で接続した。 That connects the information processing apparatus 100 in a serial interface (e.g., RS-232C or the like). パーソナルコンピュータにおいてはこの種のインターフェースを備えているので、上記構成にすることで、接続する情報処理装置は汎用のもので構わない。 Since with this kind of interface in the personal computer, by the above configuration, the information processing apparatus to be connected may in what general purpose. 【0060】図8に第3の実施例の座標検出装置300 [0060] coordinate detection device of the third embodiment in FIG. 8 300
のブロック構成図を示す。 It shows a block diagram. 【0061】図中、301は本装置伝帯の制御を司るC [0061] In the figure, 301 is responsible for control of the device Den zone C
PU、302はその動作処理手順を記憶しているRO PU, 302 has stored the operation procedure RO
M、303はワーク領域として使用するRAMである。 M, 303 is a RAM used as a work area.
304は情報処理装置と双方向通信するシリアルインターフェース、305は座標入力部400からの映像信号をデジタル信号に変換する変換器を内蔵したインターフェースである。 304 denotes an information processing apparatus and bidirectional communication serial interface, 305 is an interface with a built-in converter for converting the video signal from the coordinate input unit 400 into a digital signal. 尚、このインターフェースには、座標入力部400のボタンの押下信号も供給されている。 Note that this interface is also supplied depression signal of a button of the coordinate input section 400. 30 30
6は本装置の環境を設定するための操作スイッチであって、例えば情報処理装置と通信するときのボーレートやパリティー等の設定するために使用する。 6 is used to set such baud rate and parity when a operation switch for setting the environment of the device, for example, to communicate with the information processing apparatus. 【0062】上記構成において、CPU301の座標検出処理内容は第1の実施例と同様である。 [0062] In the above configuration, the coordinate detection processing of the CPU301 is the same as the first embodiment. 但し、検出された座標データはインターフェース304を介して情報処理装置側に出力されることになる。 However, the detection coordinate data will be output to the information processing apparatus via the interface 304. また、第2の実施例で説明した調整処理は、情報処理装置から、調整する旨の指示コマンドを受信した際に実行すれば良い。 The adjustment process described in the second embodiment, the information processing apparatus may be executed upon receiving an instruction command to the effect that adjusting. もしくは、インターフェースがレディー状態になったら送出する。 Or interface sends Once become ready state. 【0063】以上の結果、既存の装置をそのまま活用し、遠隔から座標入力を行うことが可能になる。 [0063] As a result, directly utilize existing equipment, it is possible to perform coordinate input from the remote. 【0064】<第4の実施例の説明>上記第1〜第3の実施例では、いずれも表示可能領域上に特定のマーカーを表示させるものであった。 [0064] The <Fourth embodiment Description> The first to third embodiments, both were those displaying the specific markers displayable region. つまり、情報処理装置側で表示画像の所定の位置にマーカーを表示させることが必要であった。 In other words, it was necessary to display a marker at a predetermined position of the display image information processing apparatus. 【0065】しかしながら、これによって本願発明が限定されるものではない。 [0065] However, this does not present invention is not limited by the. 例えば、図9に示すように、投影面(もしくは表示領域)の外側に物理的なマーカーを設置し(取り外しでき、マーカーのみを運搬するだけで既存のスクリーンや表示装置に利用可)、そのマーカーを検出することでもって実現できるからである。 For example, as shown in FIG. 9, the projection plane (or display region) installed physical markers on the outside of the (removable, accessible to existing screen and the display device only by carrying only marker), the marker it is because it has been realized by detecting. 【0066】このようにすることで、マーカーを設置する、もしくはマーカーの付いた表示装置やスクリーンが必要にはなるものの、情報処理装置側では格別な処理は不要になる。 [0066] In this way, installing a marker, or although become the required display device or screen with a marker, exceptional processing by the information processing apparatus side is not necessary. 但し、マーカーを設置した場合には、最初に微調整処理は必要にはなる。 However, when installing the marker, the fine adjustment process first is the need. 【0067】<第5の実施例の説明>第1の実施例では、撮像画像の中心位置がスクリーン領域内にない場合に、マーカーを検出できてもエラー処理を行った。 [0067] The <Fifth embodiment Description> first embodiment, when the center position of the captured image is not within the screen area, even if able to detect the markers was performed error processing. この場合に、スクリーン領域を特定でき、座標がスクリーン領域外にある場合には、その座標を情報処理装置に出力するようにしても良い。 In this case, it can be identified screen area, if the coordinate is outside the screen area may be output the coordinates to the information processing apparatus. 情報処理装置側では、得られた座標が表示領域を越える場合には、図10に示すようにどの方向に座標入力部9が向いているのか示すようにしても良い。 The information processing apparatus, when the obtained coordinates exceeds the display area may be indicated whether the coordinate input unit 9 in any direction, as shown in FIG. 10 is oriented. 【0068】<第6の実施例の説明>第1の実施例では、マーカーを情報処理装置側の制御によって表示していたが、この部分を情報処理装置のCPUの介在無しに行うようにしても良い。 [0068] The <Sixth Embodiment Description of> the first embodiment, had been displayed by the control of the information processing apparatus a marker, so as to make this part without intervention of a CPU of an information processing apparatus it may be. 【0069】図11に第6の実施例の主要ブロック構成を示す。 [0069] Figure 11 shows the main block diagram of a sixth embodiment. 図示の合成回路は、表示しようとする映像信号を入力し、その入力した映像の右上隅と左下隅(これに限らず右上隅と右下隅でも構わない)にマーカーイメージを合成させ、表示装置(CRT表示装置やプロジェクタ、専用のOHP機器)に出力させるものである。 Combining circuit shown operates to input the video signal to be displayed, the marker image is synthesized in the upper right corner and lower left corner of the image and the input (or may be a right corner and the lower right corner is not limited thereto), the display device ( CRT display device or a projector, is intended to be output to the exclusive OHP device). また。 Also. また、座標入力部からの座標データ及びボタンの押下情報等を入力し、情報処理本体に出力する。 Also, enter the depression information of the coordinate data and the button from the coordinate input unit, and outputs to the information processing unit. 【0070】このような構成にすることで情報処理装置側のCPUが格別なマーカー表示制御を行なわなくてもよくなり、そのCPUの負担を軽減させることができる。 [0070] The CPU of the information processing apparatus by this configuration is improved even without any special marker display control, it is possible to reduce the burden on the CPU. 【0071】<第7の実施例の説明>上記実施例では、 [0071] In the <seventh embodiment description> above examples,
表示画面が矩形であることを前提として説明した。 It was described on the assumption that the display screen is rectangular. しかしながら、表示画面の大きさに対して相対的に操作者の距離が近い場合、その操作者が表示画面の正面にいるのではなく、偏った場所にいる場合、座標入力部9による撮像画像中のスクリーン領域は矩形になるとは限らない。 However, when the distance relative operator with respect to the size of the display screen are close, rather than the operator is in front of the display screen, if you are in biased location, the coordinate input section 9 by the captured image the screen area is not necessarily to be a rectangle. 【0072】そこで、座標入力部9に別途、微調整開始指示ボタンを設け、そのボタンの押下を検出した場合に、画面の四隅に順次マーカーを表示させることで、撮像画像中のスクリーン領域として台形等の形状も許容できるようにしても良い。 [0072] Therefore, separate the coordinate input section 9, provided fine adjustment starting instruction button, when it detects pressing of the button, by displaying the successively markers at the four corners of the screen, trapezoid as a screen area in the captured image shape etc. also may be acceptable. 【0073】また、実施例では、表示画面上のカーソルを連動させるためのポインティングデバイスとして説明した。 [0073] In the embodiment has been described as a pointing device for interlocking the cursor on the display screen. つまり、座標入力をむける対象は表示画面もしくはスクリーンとしたがこれに限るものではない。 That is, a subject directs the coordinate input has been set to the display screen or screen is not limited to this. 但し、 However,
プレゼンテーション等を行う際には、遠隔から操作結果が、表示画面に反映されることが望まれる。 When making a presentation or the like, the operation result from the remote is desired to be reflected on the display screen. 【0074】<第8の実施例の説明> また、座標入力部9に、LEDを装着し、2つのマーカーを検出できたか否かや、むけられた方向がスクリーン領域内にあるか否かを、同LEDで操作者に知らしめるようにし、ユーザフレンドリーにしても良い。 [0074] <Description of Eighth Embodiment> In addition, the coordinate input section 9, an LED is mounted, whether mosquito could be detected two markers, toward was direction whether in the screen area , so as to notify the operator with the same LED, may be user-friendly. 【0075】また、本実施例では上記の如く、1つの装置に適応しても、別々の装置として適応しても良い。 [0075] Further, as described above, in this embodiment, be adapted to a single device may be adapted as a separate device. また、外部からプログラムを供給することによっても実現しても良いのは勿論である。 Moreover, the may be realized by supplying a program from the outside is a matter of course. 従って、本発明は上記実施例に限定される、その思想の範囲に入る限りは、種々の改良もしくは適用が可能である。 Accordingly, the invention is limited to the above embodiments, as long as they come within the scope of the spirit, and various modifications or application. 【0076】 【発明の効果】以上説明したように本発明によれば、簡単な構成でもって、既存の資源を活用しつつ、遠隔から表示スクリーン上の所望とする位置を指定することが可能になる。 [0076] According to the present invention, as described above, according to the present invention, with a simple configuration, while utilizing the existing resources, to be capable of specifying a desired and position on the display screen from a remote Become. 【0077】 [0077]

【図面の簡単な説明】 【図1】実施例における装置のブロック構成図である。 BRIEF DESCRIPTION OF THE DRAWINGS FIG. 1 is a block diagram of apparatus in Embodiment. 【図2】実施例の座標入力部の操作例を示す図である。 2 is a diagram showing an operation example of the coordinate input section of the embodiment. 【図3】実施例における座標検出の原理を説明するための図である。 3 is a diagram for explaining the principle of coordinate detection in the embodiment. 【図4】実施例における座標判定処理及び座標検出処理を説明するための図である。 4 is a diagram for explaining a coordinate determination processing and the coordinate detection processing in the embodiment. 【図5】実施例における座標検出の処理手順を示すフローチャートである。 5 is a flowchart illustrating a processing procedure of the coordinate detection in the embodiment. 【図6】第2の実施例における微調整処理手順を示すフローチャートである。 6 is a flowchart showing fine adjustment processing procedure in the second embodiment. 【図7】第3の実施例における操作例を示す図である。 7 is a diagram showing an operation example of the third embodiment. 【図8】第3の実施例の座標検出装置のブロック構成図を示す図である。 8 is a diagram showing a block configuration diagram of a coordinate detection device of the third embodiment. 【図9】第4の実施例におけるスクリーンを示す図である。 9 is a diagram showing a screen in the fourth embodiment. 【図10】第5の実施例におけるスクリーンの表示例を示す図である。 10 is a diagram showing a display example of a screen in the fifth embodiment. 【図11】第6の実施例の構成を示す図である。 11 is a diagram showing the configuration of a sixth embodiment. 【符号の説明】 1 CPU 2 ROM 3 RAM 4 外部記憶装置5 キーボード6 VRAM 7 表示装置8 インターフェース9 座標入力部 [EXPLANATION OF SYMBOLS] 1 CPU 2 ROM 3 RAM 4 external storage device 5 keyboard 6 VRAM 7 display 8 interface 9 coordinate input unit

フロントページの続き (56)参考文献 特開 平7−121293(JP,A) 特開 昭60−138628(JP,A) 特開 平6−308879(JP,A) 特公 平4−72250(JP,B2) (58)調査した分野(Int.Cl. 7 ,DB名) G06F 3/033 - 3/037 Following (56) references of the front page Patent flat 7-121293 (JP, A) JP Akira 60-138628 (JP, A) JP flat 6-308879 (JP, A) Tokuoyake flat 4-72250 (JP , B2) (58) investigated the field (Int.Cl. 7, DB name) G06F 3/033 - 3/037

Claims (1)

  1. (57)【特許請求の範囲】 【請求項1】 遠隔から指示した座標位置を検出する座標検出装置であって、 撮像手段を備え、その撮像方向を自在に変更可能なポイ<br>ンティングデバイスと、 該ポインティングデバイスから供給された像中の、座標入力空間を特定する少なくとも2つのマーカーを検出する検出手段と、 検出されたマーカーの位置に基づいて、前記座標入力空間に対して前記ポインティングデバイスが指定する座標 (57) A coordinate detecting device for detecting a coordinate position [Claims 1 were instructed remotely, an imaging device, the imaging direction freely changeable POI <br> emissions Computing and the device, in the image supplied from the pointing device, a detecting means for detecting at least two markers to identify the coordinate input space, based on the detected position of the marker, said against the coordinate input space coordinate the pointing device to specify
    位置を導出する導出手段と 前記ポインティングデバイスで指定される座標位置が、 And deriving means for deriving a position, the coordinate position is designated by said pointing device,
    表示画面領域内にあるか否かを判定する判定手段と、 該判定手段によって、前記ポインティングデバイスで指 Judging means for judging whether or not the display screen area, by the judging means, the finger by the pointing device
    定される座標位置が、前記表示画面領域外にあると判定 Coordinate positions to be constant is, it is outside the display screen area and the determination
    した場合、操作者に前記ポインティングデバイスで指定 If, designated by the pointing device to the operator
    される座標位置が前記表示画面領域外にあることを知ら We know that the coordinate position to be is outside the display screen area
    しめる手段と を備えることを特徴とする座標検出装置。 Coordinate detecting device, characterized in that it comprises a crimped section. 【請求項2】 前記知らしめる手段は、前記導出手段で Wherein said known occupied means, in said deriving means
    導出した座標位置が前記表示画面領域外にあると判定し Deriving coordinate position is determined to be outside the display screen area
    た場合に、前記表示画面領域に、導出した座標位置の方 If the, on the display screen area, towards the derived coordinate positions
    向を表示するものであることを特徴とする請求項1に記 Serial to claim 1, characterized in that for displaying the direction
    載の座標検出装置。 Mounting coordinate detection device. 【請求項3】 前記知らしめる手段は、前記導出手段 Wherein the known occupied means, said deriving means
    で導出した座標位置が前記表示画面領域外にあるか否か In whether the derived coordinate position is outside the display screen area
    を、LEDによって知らしめるものであることを特徴と And wherein the a, it is intended to notify the LED
    する請求項1に記載の座標検出装置。 Coordinate detecting device according to claim 1. 【請求項4】 遠隔から指示した座標位置を検出する座標検出方法であって、 撮像手段を備え、その撮像方向を自在に変更可能なポイ<br>ンティングデバイスから供給された像中の、座標入力空間を特定する少なくとも2つのマーカーを検出する検出工程と、 検出されたマーカーの位置に基づいて、前記座標入力空間に対して前記ポインティングデバイスが指定する座標 4. A coordinate detection method for detecting a coordinate position indicated remotely, an imaging unit, in which is provided an image the imaging direction from freely alterable POI <br> down computing device, a detection step of detecting at least two markers to identify the coordinate input space, based on the detected position of the marker coordinate the pointing device against the coordinate input space is designated
    位置を導出する導出工程と 前記ポインティングデバイスで指定される座標位置が、 A deriving step of deriving a position, the coordinate position is designated by said pointing device,
    表示画面領域内にあるか否かを判定する判定工程と、 該判定工程によって、前記ポインティングデバイスで示 A determination step of determining whether the display screen area, by the determination step, shown by the pointing device
    される座標位置が、前記表示画面領域外にあると判定し Coordinate position to be found is determined to be outside the display screen area
    た場合、操作者に前記ポインティングデバイスで示され If, indicated by the pointing device to the operator
    る座標位置が前記表示画面領域外にあることを知らしめ Tighten known that that the coordinate position is outside the display screen area
    る工程と を備えることを特徴とする座標検出方法。 Coordinate detecting method characterized by comprising the that step. 【請求項5】 前記判定工程によって、前記導出工程で By wherein said determination step, in the deriving step
    導出した座標位置が前記表示画面領域外にあると判定し Deriving coordinate position is determined to be outside the display screen area
    た場合、前記知らしめる工程は前記表示画面領域に、導 If the known occupied step on the display screen area, guide
    出した座標位置の方向を表示することを特徴とする請求 Claims and displaying the direction of the out coordinate positions
    項4に記載の座標検出方法。 Coordinate detecting method according to claim 4. 【請求項6】 前記知らしめる工程は、前記導出手段 Wherein said known occupied step, said deriving means
    で導出した座標位置が前記表示画面領域外にあるか否か In whether the derived coordinate position is outside the display screen area
    を、LEDによって知らしめることを特徴とする請求項 And wherein the notify by LED claims
    4に記載の座標検出方法。 Coordinate detecting method according to 4.
JP14169395A 1995-06-08 1995-06-08 Coordinate detecting device and method Expired - Fee Related JP3517482B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP14169395A JP3517482B2 (en) 1995-06-08 1995-06-08 Coordinate detecting device and method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP14169395A JP3517482B2 (en) 1995-06-08 1995-06-08 Coordinate detecting device and method

Publications (2)

Publication Number Publication Date
JPH08335136A true JPH08335136A (en) 1996-12-17
JP3517482B2 true JP3517482B2 (en) 2004-04-12

Family

ID=15298020

Family Applications (1)

Application Number Title Priority Date Filing Date
JP14169395A Expired - Fee Related JP3517482B2 (en) 1995-06-08 1995-06-08 Coordinate detecting device and method

Country Status (1)

Country Link
JP (1) JP3517482B2 (en)

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7716008B2 (en) 2007-01-19 2010-05-11 Nintendo Co., Ltd. Acceleration data processing program, and storage medium, and acceleration data processing apparatus for use with the same
US7774155B2 (en) 2006-03-10 2010-08-10 Nintendo Co., Ltd. Accelerometer-based controller
US7786976B2 (en) 2006-03-09 2010-08-31 Nintendo Co., Ltd. Coordinate calculating apparatus and coordinate calculating program
US7877224B2 (en) 2006-03-28 2011-01-25 Nintendo Co, Ltd. Inclination calculation apparatus and inclination calculation program, and game apparatus and game program
US7927216B2 (en) 2005-09-15 2011-04-19 Nintendo Co., Ltd. Video game system with wireless modular handheld controller
US7931535B2 (en) 2005-08-22 2011-04-26 Nintendo Co., Ltd. Game operating device
US7942745B2 (en) 2005-08-22 2011-05-17 Nintendo Co., Ltd. Game operating device
US8072424B2 (en) 2004-04-30 2011-12-06 Hillcrest Laboratories, Inc. 3D pointing devices with orientation compensation and improved usability
US8308563B2 (en) 2005-08-30 2012-11-13 Nintendo Co., Ltd. Game system and storage medium having game program stored thereon
US8409003B2 (en) 2005-08-24 2013-04-02 Nintendo Co., Ltd. Game controller and game system
US8629836B2 (en) 2004-04-30 2014-01-14 Hillcrest Laboratories, Inc. 3D pointing devices with orientation compensation and improved usability
US8907889B2 (en) 2005-01-12 2014-12-09 Thinkoptics, Inc. Handheld vision based absolute pointing system
US8913003B2 (en) 2006-07-17 2014-12-16 Thinkoptics, Inc. Free-space multi-dimensional absolute pointer using a projection marker system
US9176598B2 (en) 2007-05-08 2015-11-03 Thinkoptics, Inc. Free-space multi-dimensional absolute pointer with improved performance
US9261978B2 (en) 2004-04-30 2016-02-16 Hillcrest Laboratories, Inc. 3D pointing devices and methods

Families Citing this family (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10333834A (en) * 1997-05-30 1998-12-18 Namco Ltd Information storage medium and picture generating device
US7749089B1 (en) 1999-02-26 2010-07-06 Creative Kingdoms, Llc Multi-media interactive play system
US6727885B1 (en) 1999-09-07 2004-04-27 Nikon Corporation Graphical user interface and position or attitude detector
US6761637B2 (en) 2000-02-22 2004-07-13 Creative Kingdoms, Llc Method of game play using RFID tracking device
US7445550B2 (en) 2000-02-22 2008-11-04 Creative Kingdoms, Llc Magical wand and interactive play experience
US7878905B2 (en) 2000-02-22 2011-02-01 Creative Kingdoms, Llc Multi-layered interactive play experience
US9446319B2 (en) 2003-03-25 2016-09-20 Mq Gaming, Llc Interactive gaming toy
US7066781B2 (en) 2000-10-20 2006-06-27 Denise Chapman Weston Children's toy with wireless tag/transponder
US20070066396A1 (en) 2002-04-05 2007-03-22 Denise Chapman Weston Retail methods for providing an interactive product to a consumer
US6967566B2 (en) 2002-04-05 2005-11-22 Creative Kingdoms, Llc Live-action interactive adventure game
WO2005062273A1 (en) * 2003-12-18 2005-07-07 Philips Intellectual Property & Standards Gmbh Method and system for control of a device
US7746321B2 (en) 2004-05-28 2010-06-29 Erik Jan Banning Easily deployable interactive direct-pointing system and presentation control system and calibration method therefor
EP1779226A2 (en) * 2004-08-12 2007-05-02 Philips Intellectual Property &amp; Standards GmbH Method and system for controlling a display
US9285897B2 (en) 2005-07-13 2016-03-15 Ultimate Pointer, L.L.C. Easily deployable interactive direct-pointing system and calibration method therefor
JP4262726B2 (en) 2005-08-24 2009-05-13 任天堂株式会社 Game controller and a game system
JP2007139918A (en) * 2005-11-16 2007-06-07 Pioneer Electronic Corp Apparatus, method, system, and program for controlling display image
JP4837405B2 (en) * 2006-03-09 2011-12-14 任天堂株式会社 Coordinate calculating apparatus and a coordinate calculating program
JP4984791B2 (en) * 2006-09-27 2012-07-25 カシオ計算機株式会社 Pointing device, pointing method and program
JP4861854B2 (en) * 2007-02-15 2012-01-25 ゼロプラス テクノロジー コーポレッド リミテッド Indication position calculation system, indicator and game system
JP4861855B2 (en) * 2007-02-15 2012-01-25 ゼロプラス テクノロジー コーポレッド リミテッド Indication position calculation system, indicator and game system
JP4858846B2 (en) * 2007-03-23 2012-01-18 サクサ株式会社 Detection area setting device and the setting system
JP4404927B2 (en) 2007-10-10 2010-01-27 シャープ株式会社 Detection method of a display system and the indicated position
JP4745316B2 (en) * 2007-11-07 2011-08-10 シャープ株式会社 Detection method of a display system and the indicated position
JP4745317B2 (en) * 2007-11-07 2011-08-10 シャープ株式会社 Detection method of a display system and the indicated position
JP4702377B2 (en) * 2008-02-18 2011-06-15 セイコーエプソン株式会社 Control system and the controlled device
JP5710589B2 (en) * 2009-04-08 2015-04-30 クゥアルコム・インコーポレイテッドQualcomm Incorporated Improved hand-held screen detected pointer
JP2012113494A (en) * 2010-11-24 2012-06-14 Doremio Co Ltd Instruction position detection device and instruction position detection method

Cited By (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9261978B2 (en) 2004-04-30 2016-02-16 Hillcrest Laboratories, Inc. 3D pointing devices and methods
US8629836B2 (en) 2004-04-30 2014-01-14 Hillcrest Laboratories, Inc. 3D pointing devices with orientation compensation and improved usability
US9946356B2 (en) 2004-04-30 2018-04-17 Interdigital Patent Holdings, Inc. 3D pointing devices with orientation compensation and improved usability
US9298282B2 (en) 2004-04-30 2016-03-29 Hillcrest Laboratories, Inc. 3D pointing devices with orientation compensation and improved usability
US8072424B2 (en) 2004-04-30 2011-12-06 Hillcrest Laboratories, Inc. 3D pointing devices with orientation compensation and improved usability
US9575570B2 (en) 2004-04-30 2017-02-21 Hillcrest Laboratories, Inc. 3D pointing devices and methods
US8937594B2 (en) 2004-04-30 2015-01-20 Hillcrest Laboratories, Inc. 3D pointing devices with orientation compensation and improved usability
US8907889B2 (en) 2005-01-12 2014-12-09 Thinkoptics, Inc. Handheld vision based absolute pointing system
US7942745B2 (en) 2005-08-22 2011-05-17 Nintendo Co., Ltd. Game operating device
US7931535B2 (en) 2005-08-22 2011-04-26 Nintendo Co., Ltd. Game operating device
US9700806B2 (en) 2005-08-22 2017-07-11 Nintendo Co., Ltd. Game operating device
US8870655B2 (en) 2005-08-24 2014-10-28 Nintendo Co., Ltd. Wireless game controllers
US8409003B2 (en) 2005-08-24 2013-04-02 Nintendo Co., Ltd. Game controller and game system
US8308563B2 (en) 2005-08-30 2012-11-13 Nintendo Co., Ltd. Game system and storage medium having game program stored thereon
US7927216B2 (en) 2005-09-15 2011-04-19 Nintendo Co., Ltd. Video game system with wireless modular handheld controller
US7786976B2 (en) 2006-03-09 2010-08-31 Nintendo Co., Ltd. Coordinate calculating apparatus and coordinate calculating program
US7774155B2 (en) 2006-03-10 2010-08-10 Nintendo Co., Ltd. Accelerometer-based controller
US8473245B2 (en) 2006-03-28 2013-06-25 Nintendo Co., Ltd. Inclination calculation apparatus and inclination calculation program, and game apparatus and game program
US8041536B2 (en) 2006-03-28 2011-10-18 Nintendo Co., Ltd. Inclination calculation apparatus and inclination calculation program, and game apparatus and game program
US7877224B2 (en) 2006-03-28 2011-01-25 Nintendo Co, Ltd. Inclination calculation apparatus and inclination calculation program, and game apparatus and game program
US8913003B2 (en) 2006-07-17 2014-12-16 Thinkoptics, Inc. Free-space multi-dimensional absolute pointer using a projection marker system
US7716008B2 (en) 2007-01-19 2010-05-11 Nintendo Co., Ltd. Acceleration data processing program, and storage medium, and acceleration data processing apparatus for use with the same
US9176598B2 (en) 2007-05-08 2015-11-03 Thinkoptics, Inc. Free-space multi-dimensional absolute pointer with improved performance

Also Published As

Publication number Publication date Type
JPH08335136A (en) 1996-12-17 application

Similar Documents

Publication Publication Date Title
US7176904B2 (en) Information input/output apparatus, information input/output control method, and computer product
US20060007177A1 (en) Method and apparatus for calibrating an interactive touch system
US6275214B1 (en) Computer presentation system and method with optical tracking of wireless pointer
US20100275159A1 (en) Input device
US20090167682A1 (en) Input device and its method
JP3262677B2 (en) Information input device
US7184020B2 (en) Operation instructing device, operation instructing method, and operation instructing program
US7522151B2 (en) Coordinate-based display object movement restriction method
US6531999B1 (en) Pointing direction calibration in video conferencing and other camera-based system applications
KR20080041809A (en) Apparatus and method for controlling display in potable terminal
JP2005216061A (en) Image processor, image processing method, recording medium, computer program and semiconductor device
US20070216642A1 (en) System For 3D Rendering Applications Using Hands
JPH08212005A (en) Three-dimensional position recognition type touch panel device
JPH09230993A (en) Simulation input device of jog dial
JP2001236181A (en) Pointing device
JP2004078977A (en) Interface device
JP2006074105A (en) Image display apparatus for vehicle periphery
JP2000105671A (en) Coordinate input and detecting device, and electronic blackboard system
US20120320198A1 (en) Imaging sensor based multi-dimensional remote controller with multiple input mode
JP2007121489A (en) Portable display device
US20050062719A1 (en) Method and apparatus for computer input using six degrees of freedom
JPH10283115A (en) Display input device
WO2004090706A2 (en) Auto-aligning touch system and method
JP2003288156A (en) Input device
US20100100853A1 (en) Motion controlled user interface

Legal Events

Date Code Title Description
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20040116

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20040126

FPAY Renewal fee payment (prs date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090130

Year of fee payment: 5

FPAY Renewal fee payment (prs date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090130

Year of fee payment: 5

FPAY Renewal fee payment (prs date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100130

Year of fee payment: 6

FPAY Renewal fee payment (prs date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110130

Year of fee payment: 7

LAPS Cancellation because of no payment of annual fees