JP7255842B2 - PROJECTION IMAGE SPECIFICATION DEVICE, GRAPHIC PROJECTION SYSTEM, PROJECTION IMAGE SPECIFICATION METHOD AND PROGRAM - Google Patents
PROJECTION IMAGE SPECIFICATION DEVICE, GRAPHIC PROJECTION SYSTEM, PROJECTION IMAGE SPECIFICATION METHOD AND PROGRAM Download PDFInfo
- Publication number
- JP7255842B2 JP7255842B2 JP2019004197A JP2019004197A JP7255842B2 JP 7255842 B2 JP7255842 B2 JP 7255842B2 JP 2019004197 A JP2019004197 A JP 2019004197A JP 2019004197 A JP2019004197 A JP 2019004197A JP 7255842 B2 JP7255842 B2 JP 7255842B2
- Authority
- JP
- Japan
- Prior art keywords
- projection
- area
- markers
- user
- photographing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Description
本発明は、投影像指定装置、図形投影システム、投影像指定方法及びプログラムに関する。 The present invention relates to a projection image designation device, a graphic projection system, a projection image designation method, and a program.
特許文献1に、映像自動監視システムの監視エリアの設定を行う装置が開示されている。同文献によると、この装置は、3点のマーカーを等間隔で監視エリアの一辺に設置し、これを監視カメラ20で撮影して、画像処理部12で検出することで、監視エリアを設定する。
Japanese Unexamined Patent Application Publication No. 2002-200001 discloses a device for setting a monitoring area of an automatic video monitoring system. According to the document, this device sets a monitoring area by setting three markers at equal intervals on one side of a monitoring area, photographing them with a
特許文献2には、操作が簡単であり、交通事故現場での計測作業を極力短時間にできるとともに、事故現場において現場見取図を容易に作成できるという位置計測作図装置が開示されている。同文献によると、この位置計測作図装置は、撮影手段で撮影した所望の位置の画像を表示する。そして、この位置計測作図装置は、その画像上で、所望の位置に設置されたマーカーの座標を検出することで、現場見取図を作成する。
以下の分析は、本発明によって与えられたものである。プロジェクター装置に代表される投影装置を用いて、特定の形状の像を投影したいというニーズがある。例えば、部屋や通路にプロジェクターを設置して、任意の色の像を提示することで、注意喚起や空間の演出を行うことができる。また、端的には、建物内の通路に、センターラインや横断歩道の形状の像を投影することで、場内の交通を随時整理することが可能となる。 The following analysis is given by the present invention. There is a need to project an image of a specific shape using a projection device represented by a projector device. For example, by installing a projector in a room or aisle and presenting an image of an arbitrary color, it is possible to draw attention or create a space. In short, by projecting an image of the shape of the centerline or pedestrian crossing onto the aisle inside the building, it becomes possible to organize the traffic in the venue at any time.
本発明は、投影装置に投影させる像の簡便な指定方法の提供に貢献できる投影像指定装置、図形投影システム、投影像指定方法及びプログラムを提供することを目的とする。 SUMMARY OF THE INVENTION It is an object of the present invention to provide a projection image designation device, a graphic projection system, a projection image designation method, and a program that can contribute to providing a simple method of designating an image to be projected by a projection device.
第1の視点によれば、所定の範囲を投影可能な投影装置と、前記投影装置の投影可能な範囲を撮影可能な撮影装置と、に接続され、前記撮影装置にて撮影された画像に基づいて、ユーザーによる図形の描画操作を認識する図形認識部と、前記投影装置に対して、前記図形の描画操作に基づいた図形の投影を指示する投影制御部と、を備えた投影像指定装置が提供される。
前記第1の視点の変形として、所定の範囲を投影可能な投影装置と、前記投影装置の投影可能な範囲を撮影可能な撮影装置と、に接続され、前記撮影装置にて撮影された画像に基づいて、ユーザーによる3以上のマーカーの設置操作を認識して前記3以上のマーカーのそれぞれの位置を特定して前記3以上のマーカーによって区切られる領域に係る領域データを作成する領域認識部と、前記領域データに基づいて、前記投影装置に対して、前記認識した前記ユーザーによる前記3以上のマーカーの設置操作に基づいて作成された前記領域の投影を指示する投影制御部と、を備えた投影像指定装置が提供される。
According to the first viewpoint, a projection device capable of projecting a predetermined range and a photographing device capable of photographing the projectable range of the projection device are connected to each other, and based on an image photographed by the photographing device, a projection image designating device comprising: a graphic recognizing unit that recognizes a graphic drawing operation by a user; and a projection control unit that instructs the projection device to project a graphic based on the graphic drawing operation. provided.
As a modification of the first viewpoint, an image captured by the imaging device is connected to a projection device capable of projecting a predetermined range and a photographing device capable of photographing the projectable range of the projection device. a region recognition unit that recognizes a user's placement operation of three or more markers, specifies the positions of each of the three or more markers, and creates region data related to a region delimited by the three or more markers; a projection control unit that instructs the projection device, based on the area data, to project the area created based on the installation operation of the three or more markers by the recognized user. An image designator is provided.
第2の視点によれば、所定の範囲を投影可能な投影装置と、前記投影装置の投影可能な範囲を撮影可能な撮影装置と、前記撮影装置にて撮影された画像に基づいて、前記ユーザーによる図形の描画操作を認識する図形認識部と、前記投影装置に対して、前記図形の描画操作に基づいた図形の投影を指示する投影制御部と、を備えた投影像指定装置と、を含む図形投影システムが提供される。
前記第2の視点の変形として、所定の範囲を投影可能な投影装置と、前記投影装置の投影可能な範囲を撮影可能な撮影装置と、前記撮影装置にて撮影された画像に基づいて、ユーザーによる3以上のマーカーの設置操作を認識して前記3以上のマーカーのそれぞれの位置を特定して前記3以上のマーカーによって区切られる領域に係る領域データを作成する領域認識部と、前記領域データに基づいて、前記投影装置に対して、前記認識した前記ユーザーによる前記3以上のマーカーの設置操作に基づいて作成された前記領域の投影を指示する投影制御部と、を備えた投影像指定装置と、を含む図形投影システムが提供される。
According to the second viewpoint, a projection device capable of projecting a predetermined range, a photographing device capable of photographing the projectable range of the projection device, and based on an image photographed by the photographing device, the user a projection image designating device comprising: a graphic recognizing unit for recognizing a graphic drawing operation by the A graphics projection system is provided.
As a modification of the second viewpoint, a projection device capable of projecting a predetermined range, a photographing device capable of photographing the projectable range of the projection device, and based on an image photographed by the photographing device, the user an area recognition unit for recognizing an installation operation of three or more markers by specifying the position of each of the three or more markers and creating area data related to an area delimited by the three or more markers; a projection image designation device for instructing the projection device to project the region created based on the installation operation of the three or more markers by the recognized user according to A graphics projection system is provided.
第3の視点によれば、所定の範囲を投影可能な投影装置と、前記投影装置の投影可能な範囲を撮影可能な撮影装置と、に接続されたコンピュータが、前記撮影装置にて撮影された画像に基づいて、前記ユーザーによる図形の描画操作を認識するステップと、前記投影装置に対して、前記認識した前記ユーザーによる図形の描画操作に基づいた図形の投影を指示するステップと、を備えた投影像指定方法が提供される。本方法は、ユーザーから図形の描画操作を受け付けて、図形の投影を指示する投影像指定装置という、特定の機械に結びつけられている。
前記第3の視点の変形として、所定の範囲を投影可能な投影装置と、前記投影装置の投影可能な範囲を撮影可能な撮影装置と、に接続されたコンピュータが、前記撮影装置にて撮影された画像に基づいて、ユーザーによる3以上のマーカーの設置操作を認識して前記3以上のマーカーのそれぞれの位置を特定して前記3以上のマーカーによって区切られる領域に係る領域データを作成するステップと、前記領域データに基づいて、前記投影装置に対して、前記認識した前記ユーザーによる前記3以上のマーカーの設置操作に基づいて作成された前記領域の投影を指示するステップと、を備えた投影像指定方法が提供される。
According to the third viewpoint, a computer connected to a projection device capable of projecting a predetermined range and a photographing device capable of photographing the projectable range of the projection device is photographed by the photographing device. a step of recognizing a figure drawing operation by the user based on an image; and a step of instructing the projection device to project a figure based on the recognized figure drawing operation by the user. A projection designation method is provided. This method is associated with a specific machine called a projection image designating device that accepts a graphic drawing operation from a user and instructs the projection of the graphic.
As a modification of the third viewpoint, a computer connected to a projection device capable of projecting a predetermined range and a photographing device capable of photographing the projectable range of the projection device is photographed by the photographing device. a step of recognizing an operation by a user to place three or more markers, specifying the positions of each of the three or more markers, and creating region data relating to a region delimited by the three or more markers, based on the obtained image; , based on the area data, instructing the projection device to project the area created based on the installation operation of the three or more markers by the recognized user. A specification method is provided.
第4の視点によれば、上記した投影像指定装置の機能を実現するためのプログラムが提供される。なお、このプログラムは、コンピュータが読み取り可能な(非トランジトリーな)記憶媒体に記録することができる。即ち、本発明は、コンピュータプログラム製品として具現することも可能である。 According to a fourth aspect, there is provided a program for realizing the functions of the projection image designation device described above. This program can be recorded in a computer-readable (non-transitory) storage medium. That is, the present invention can also be embodied as a computer program product.
本発明によれば、簡便に、投影装置に投影させる像の指定を行うことが可能となる。 According to the present invention, it is possible to easily designate an image to be projected by a projection device.
はじめに本発明の一実施形態の概要について図面を参照して説明する。なお、この概要に付記した図面参照符号は、理解を助けるための一例として各要素に便宜上付記したものであり、本発明を図示の態様に限定することを意図するものではない。また、以降の説明で参照する図面等のブロック間の接続線は、双方向及び単方向の双方を含む。一方向矢印については、主たる信号(データ)の流れを模式的に示すものであり、双方向性を排除するものではない。また、図中の各ブロックの入出力の接続点には、ポート又はインタフェースがあるが図示省略する。また、以下の説明において、「A及び/又はB」は、A及びBの少なくともいずれかという意味で用いる。 First, an outline of an embodiment of the present invention will be described with reference to the drawings. It should be noted that the drawing reference numerals added to this overview are added to each element for convenience as an example to aid understanding, and are not intended to limit the present invention to the illustrated embodiments. Also, connection lines between blocks in drawings and the like referred to in the following description include both bidirectional and unidirectional connections. The unidirectional arrows schematically show the flow of main signals (data) and do not exclude bidirectionality. Also, although there is a port or interface at the input/output connection point of each block in the drawing, it is omitted from the drawing. Moreover, in the following description, "A and/or B" is used to mean at least one of A and B.
本発明は、その一実施形態において、図1に示すように、所定の範囲を投影可能な投影装置12と、前記投影装置12の投影可能な範囲を撮影可能な撮影装置11と、に接続された投影像指定装置20にて実現できる。この投影像指定装置20は、撮影装置11にて撮影された画像に基づいて、ユーザーによる図形の描画操作を認識する図形認識部21と、投影装置12に対して、前記図形の描画操作に基づいた図形の投影を指示する投影制御部22と、を備える。
In one embodiment of the present invention, as shown in FIG. 1, it is connected to a
上記投影像指定装置20の動作について図2~図6を参照して説明する。まず、ユーザーUが図2に示すように、投影装置12に投影させたい形状の頂点にマーカーMを配置する。ここでは、ユーザーは、3つのマーカーを用いて三角形を描画するものとして説明する。
The operation of the projection
次に撮影装置11は、ユーザーが並べたマーカーMを含む領域を撮影する。投影像指定装置20の図形認識部21は、撮影装置11にて撮影された画像に基づいて、ユーザーによる図形の描画操作を認識する。図3の例では、図形認識部21は、マーカーMによって構成された三角形を認識する。図形認識部21は、認識した内容を投影制御部22に渡す。
Next, the photographing
次に、投影制御部22は、投影装置12に対して、前記図形の描画操作に基づいた三角形の投影を指示する。これにより、図4に示すように、3つのマーカーMを頂点とする三角形TR1が投影されることになる。
Next, the
より望ましい形態において、前記投影像指定装置20は、ユーザーからマーカーMの移動による修正操作を受け付ける。例えば、図5に示すように、ユーザーが右端のマーカーMを右側に動かしたものとする。
In a more desirable form, the projection
投影像指定装置20の図形認識部21は、撮影装置11にて撮影された画像に基づいて、ユーザーによる図形の修正操作を認識する。最終的に、投影制御部22は、図形認識部21により認識された内容に基づいて図6に示す三角形TR2を投影する。この三角形TR2は、右端のマーカーMを更に右側に動かしたことによって、図4の三角形TR1よりも面積が広くなっている。
The
なお、ユーザーからマーカーMの移動による修正操作を受け付ける期間を限定してもよい。例えば、投影後の一定期間だけ修正操作を受け付けるようにしてもよい。また、ユーザーから所定のジェスチャーや通信装置による修正要求操作を受け付けたタイミングで、図形認識部21に認識を行わせることでもよい。さらに、投影像指定装置20に備えられたボタンなどに、修正要求機能を割り当て、その操作(押下)により、マーカー移動の期間開始や期間終了を指定する構成も採用可能である。
Note that the period during which the correction operation by moving the marker M is accepted from the user may be limited. For example, correction operations may be accepted only for a certain period after projection. Alternatively, the
以上のように、本実施形態によれば、簡単な操作で投影装置12に、意図した形状の図形等を投影させることが可能となる。なお、図2~図6の例では、ユーザーが三角形の形状になるようにマーカーMを配置しているが、投影像指定装置20が認識可能な形状は三角形に限られない。例えば、n個のマーカーMを用いて表現されたn個の頂点を持つ多角形を認識させることもできる。また、2個のマーカーを用いて、任意の直線を認識し、投影させることもできる。さらに、マーカーMの種別(形、色)を変えることで、図形認識部21のその違いを認識させ、通常の多角形の角のみならず、アールの付いた角等を使い分けられるようにしてもよい。また、図4~図6の例では、マーカーの位置を基準に、マーカーを含む図形を認識するものとして説明したが、マーカーの位置と、認識する図形の関係は、別途ルールにて定めることができる。例えば、マーカーの内側を図形として認識してもよい。
As described above, according to the present embodiment, it is possible to cause the
[第1の実施形態]
続いて、本発明の第1の実施形態について図面を参照して詳細に説明する。図7は、本発明の第1の実施形態の領域提示システムの構成を示す図である。図7を参照すると、領域認識部101と、投影制御部102と、領域記憶部103と、監視部104と、投影部106と、撮影部107とを備えた構成が示されている。
[First Embodiment]
Next, a first embodiment of the present invention will be described in detail with reference to the drawings. FIG. 7 is a diagram showing the configuration of the region presentation system according to the first embodiment of the present invention. Referring to FIG. 7, a configuration including an
投影制御部102は、1台以上の投影装置によって構成された投影部106を用いて、領域記憶部103に登録された領域データを用いて領域の投影を行う。前記投影装置としてはDLP(登録商標)方式、LCD方式(透過型液晶方式)、LCoS方式(反射型液晶方式)などを用いたものを用いることができる。なお、DLPは、Digital Light Processingの略である。また、LCDは、Liquid Crystal Display、LCoSは、Liquid Crystal on Siliconの略である。また、投影制御部102は、上記した投影制御部22に相当する。
The
もちろん、投影制御部102は、複数の投影装置によって構成された投影部106を制御して投影を行うものとしてもよい。
Of course, the
撮影部107は、投影部106の投影可能領域をカバーする領域を撮影可能な1台以上のカメラなどによって構成される。撮影部107は、投影部106の出力座標とほぼ同一の座標にて被写体の位置を特定できるように、投影部106と近接して並列に配置されていることが好ましい。この撮影部107にて撮影された画像は、領域認識部101と、監視部104に入力される。なお、投影部106の投影可能領域と撮影部107の撮影領域(カバーする領域)は同じでなくてもよい。
The photographing
領域認識部101は、撮影部107にて撮影された画像に基づいて、ユーザーによる領域の設定操作を認識する。そして、領域認識部101は、前記ユーザーによって設定された領域の情報を領域記憶部103の領域データに追加又は反映する。従って、領域認識部101は、上記した図形認識部21に相当する。なお、撮影部107が複数設けられている場合、領域認識部101は、複数の撮影部107から画像を取得して、ユーザーによる領域の設定操作を認識することになる。
The
領域記憶部103は、投影制御部102に投影させる領域のデータを保持する。図8は、領域記憶部103が保持する領域データの一例を示す図である。図8の例では、ID#1の領域は、(x1,y1)、(x2,y2)、(x3,y3)、(x4,y4)、(x5,y5)の5点の内側の領域を示している。同様に、ID#3の領域は、(x6,y6)、(x7,y7)、(x8,y8)の3点の内側の領域を示している。これらの座標としては、投影装置が一般的な投影用スクリーンに投影する際の座標と同じものを使用することができる。なお、これらの領域の表現形態はあくまで一例であり、例えば、これらの座標に代えて、各領域のノードとなる点の物理的な位置(緯度経度、必要に応じて高さ)を用いて領域を管理してもよい。
The
監視部104は、撮影部107にて撮影された画像から、投影制御部102に投影された領域に近づく人、車両、ロボット、動物等(以下、これらを総称して「侵入者又は侵入物」という。)を認識し、その動きを検出する。そして、監視部104は、これらの「侵入者又は侵入物」の領域への侵入を検出したときに所定の警告動作や注意喚起動作を実施する。
The
続いて、本実施形態の動作について図面を参照して詳細に説明する。図9は、本発明の第1の実施形態の領域提示システム100の動作を説明するための図である。領域提示システム100の撮影部107が撮影を開始した状態において、ユーザーが図9の左図に示すように、クレーンの周囲に、マーカーとして用いるコーン(トラフィックコーン)を配置したものとする。
Next, the operation of this embodiment will be described in detail with reference to the drawings. FIG. 9 is a diagram for explaining the operation of the
領域提示システム100の領域認識部101は、撮影部107にて撮影された画像からコーンの位置を特定し、領域データを作成して領域記憶部103に登録する。ここでは、図9の右図のように5つの座標が特定されたものとする。これにより、図8の領域ID#1に相当する領域データが生成される。
The
これにより、投影制御部102は、領域記憶部103から読みだした領域データに基づいて、図10に示すように領域Z1を提示することが可能となる。以降、この領域Z1への侵入者を監視部104にて監視、警告することで、この領域Z1を危険領域として監視することが可能となる。
As a result, the
上記した領域は2つ以上設定することも可能である。例えば、図11の左図に示すように、ユーザーが危険領域の外側に、コーン(トラフィックコーン)を配置したものとする。 It is also possible to set two or more areas as described above. For example, as shown in the left diagram of FIG. 11, it is assumed that the user has placed a cone (traffic cone) outside the dangerous area.
領域提示システム100の領域認識部101は、図11の右図に示すように、撮影部107にて撮影された画像から新たに追加されたコーンの位置を特定し、領域データを作成して領域記憶部103に登録する。これにより、図8の領域ID#2に相当する領域データが生成される。
The
これにより、投影制御部102は、領域記憶部103から読みだした領域データに基づいて、図12に示すように領域Z2を提示することが可能となる。以降、この領域Z2への侵入者を監視部104にて監視する。例えば、この領域Z2への侵入者を検出したときに、警告ではなく、注意喚起動作を行わせることで、この領域Z2をグレーゾーンとして機能させることが可能となる。
As a result, the
領域Z1、Z2を修正する場合、以下の2つの方法を採ることができる。その1つは、図5、図6に示したように、コーン(トラフィックコーン)を移動し、領域提示システム100の領域認識部101に再認識させる方法である。もう1つの方法は、すべてのコーン(トラフィックコーン)を再配置し、領域提示システム100の領域認識部101に再認識させる方法である。いずれの場合も投影制御部102によって投影された領域を見ながら領域の修正を行うことができるので、領域の修正作業を効率よく行うことができる。
When correcting the regions Z1 and Z2, the following two methods can be adopted. One of them is a method of moving a cone (traffic cone) and having the
以上、説明したとおり、本実施形態の領域提示システム100によれば、投影装置に投影させる領域の設定を効率よく行うことが可能となる。その理由は、投影制御部102によって領域を提示しつつ、コーン(トラフィックコーン)を配置することで領域を設定できる簡便なユーザーインタフェースを提供したことにある。
As described above, according to the
図13は、背景技術に示した撮影画像から点a2を指定する方法に対する本発明の優位性(効果)を説明するための図である。図13の左図は、背景技術に示した撮影画像から、ポインタPを用いて点a2を指定している状態示す。しかしながら、この方法では、図13の右図に示すように、カメラの位置から点a2と同一直線上にある点a3を選択したのかそうでないのかの判断が難しくなってしまう。一方、本発明によれば、図3に示すように、実際に、マーカーを配置し、これをカメラで撮影し認識する構成を採っているので、意図した範囲を特定できないという問題が解消されることになる。 FIG. 13 is a diagram for explaining the advantage (effect) of the present invention over the method of designating the point a2 from the captured image shown in Background Art. The left diagram of FIG. 13 shows a state in which a pointer P is used to designate a point a2 from the photographed image shown in Background Art. However, with this method, as shown in the right diagram of FIG. 13, it becomes difficult to determine whether point a3 on the same straight line as point a2 from the position of the camera has been selected or not. On the other hand, according to the present invention, as shown in FIG. 3, the marker is actually placed and photographed with a camera for recognition, thereby solving the problem that the intended range cannot be specified. It will be.
なお、上記した実施形態では、コーン(トラフィックコーン)をカメラにて撮影することで領域を指定する例を挙げて説明したが、マーカーは、コーン(トラフィックコーン)に限定されない。領域認識部101による認識が好ましく行われるものであればよく、任意の形状の標識板や発光体等をマーカーとして利用することができる。また、領域認識部101がマーカーの認識に用いる装置はカメラに限定されない。例えば、マーカーとの距離と方位を特定可能な距離センサ等を用いて、マーカーの位置を特定してもよい。また例えば、マーカー自体にGPS(Global Positioning System)等の位置測定手段を持たせておき、その位置情報を受信する構成も採用可能である。この場合、領域提示システム100は、位置情報の受信手段を備えることになる。
In the above-described embodiment, an example in which an area is specified by photographing a cone (traffic cone) with a camera has been described, but the marker is not limited to a cone (traffic cone). As long as recognition by the
[第2の実施形態]
続いて、領域認識部101における領域の認識方法に変更を加えた第2の実施形態について図面を参照して詳細に説明する。本発明の第2の実施形態は、第1の実施形態と同様の構成にて実現できるので、以下、その動作上の相違点を中心に説明する。図14は、本発明の第2の実施形態の領域提示システム100の動作を説明するための図である。領域提示システム100の撮影部107が撮影を開始した状態において、ユーザーが図14の左図に示すように、コーンを移動させて、クレーンの周囲に、領域を描いたものとする。
[Second embodiment]
Next, a second embodiment in which the area recognition method of the
領域提示システム100の領域認識部101は、撮影部107にて撮影された画像からコーンの移動軌跡を特定し、この移動軌跡によって囲われた領域に対応する領域データを作成して領域記憶部103に登録する。例えば、ユーザーが第1の実施形態と同様の五角形を描くことで、第1の実施形態と同様に、5つの座標を特定させることができる。これにより、図8の領域ID#1に相当する領域データが生成される。もちろん、ユーザーがコーンを移動し、フリーハンドで不定形の領域を描いてもよい。その場合は、マーカーの軌跡の座標を持つ領域データを作成して領域記憶部103に登録すればよい。
The
以上、説明したように、本実施形態によれば、1つのマーカーで領域を指定可能な構成を得ることができる。もちろん、本実施形態においても、投影制御部102によって投影された領域を見ながら領域の修正を行うことができるので、領域の修正作業を効率よく行うことができる。
As described above, according to this embodiment, it is possible to obtain a configuration in which an area can be specified with one marker. Of course, in the present embodiment as well, the area can be corrected while viewing the area projected by the
[第3の実施形態]
続いて、マーカーとして投影したマーカー(仮想マーカー)を用いるようにした第3の実施形態について図面を参照して詳細に説明する。本発明の第3の実施形態は、第1の実施形態と同様の構成にて実現できるので、以下、その動作上の相違点を中心に説明する。図15は、本発明の第3の実施形態の領域提示システム100の動作を説明するための図である。撮影部107が撮影を開始した状態において、ユーザーが所定のジェスチャーを行うと、図15の左図に示すように、仮想マーカーが表示される。仮想マーカーの表示形態は、一度に複数の仮想マーカーを表示する形態であってもよいし、ユーザーのジェスチャーに応じて、ユーザーの指定位置に1つずつ仮想マーカーを表示する形態であってもよい。
[Third Embodiment]
Next, a third embodiment in which projected markers (virtual markers) are used as markers will be described in detail with reference to the drawings. Since the third embodiment of the present invention can be implemented with a configuration similar to that of the first embodiment, differences in operation thereof will be mainly described below. FIG. 15 is a diagram for explaining the operation of the
そして、領域提示システム100は、投影部106と撮影部107とを用いて、ユーザーの(第2の)ジェスチャーにより、これら仮想マーカーの位置修正インタフェースを提供する。例えば、領域提示システム100は、投影部106と撮影部107とを用いて、図16に示すように、仮想マーカーのドラグ&ドロップ操作にて、仮想マーカーの移動を受け付ける。そして、最終的に、ユーザーが図16の右図に示すように、点(x2,y2)を、点(x2a,y2a)に移動させた領域が特定されることになる。
Then, the
以上、説明したように、本実施形態によれば、物理的なマーカーを用意しなくても、領域を指定可能な構成を得ることができる。もちろん、本実施形態においても、投影制御部102によって投影された領域を見ながら領域の修正を行うことができるので、領域の修正作業を効率よく行うことができる。また、本実施形態においても、第2の実施形態と同様に、仮想マーカーの移動軌跡を認識して領域を認識する方法も採用可能である。
As described above, according to this embodiment, it is possible to obtain a configuration that allows designation of an area without preparing a physical marker. Of course, in the present embodiment as well, the area can be corrected while viewing the area projected by the
[第4の実施形態]
続いて、作成した領域の結合、分割をなしうるようにした第4の実施形態について図面を参照して詳細に説明する。本発明の第4の実施形態は、第1の実施形態と同様の構成にて実現できるので、以下、その動作上の相違点を中心に説明する。図17は、本発明の第4の実施形態の領域提示システム100の動作を説明するための図である。例えば、図17に示すように、2つの危険領域Z3、Z4が作成済みであるものとする。その状態でユーザーが所定の領域結合操作を行うと、領域提示システム100は、図17の右図に示すように、危険領域Z3、Z4を結合して危険領域Z5を作成する。
[Fourth embodiment]
Next, a detailed description will be given of a fourth embodiment in which created areas can be combined and divided with reference to the drawings. Since the fourth embodiment of the present invention can be implemented with a configuration similar to that of the first embodiment, differences in operation will be mainly described below. FIG. 17 is a diagram for explaining the operation of the
図18は、本発明の第4の実施形態の領域提示システム100の別の動作を説明するための図である。例えば、図18に示すように、危険領域Z5が作成済みであるものとする。その状態でユーザーが投影部106の前に立つと、ユーザーが陰になり、図18に示すように危険領域Z5は2つに分割される。その状態で、ユーザーが所定のジェスチャーを行うと、領域提示システム100は、図18の右図に示すように、危険領域Z5を、危険領域Z5-1、Z5-2に分割する。
FIG. 18 is a diagram for explaining another operation of the
以上、説明したように、本実施形態によれば、マーカーの移動を行わなくても、領域の形状を変更可能な構成を得ることができる。さらに、ユーザーの所定のジェスチャーにより、領域提示システム100が、四角形、三角形、円等の基本的な領域図形を提示するようにしてもよい。このようにすることで、これらの図形の結合と分割により、任意の形状の領域を作成する構成が得られる。
As described above, according to this embodiment, it is possible to obtain a configuration in which the shape of the area can be changed without moving the marker. Further, the
以上、本発明の各実施形態を説明したが、本発明は、上記した実施形態に限定されるものではなく、本発明の基本的技術的思想を逸脱しない範囲で、更なる変形・置換・調整を加えることができる。例えば、各図面に示した装置構成、各要素の構成、データの表現形態は、本発明の理解を助けるための一例であり、これらの図面に示した構成に限定されるものではない。 Although each embodiment of the present invention has been described above, the present invention is not limited to the above-described embodiments, and further modifications, replacements, and adjustments can be made without departing from the basic technical idea of the present invention. can be added. For example, the device configuration, the configuration of each element, and the representation form of data shown in each drawing are examples for helping understanding of the present invention, and are not limited to the configuration shown in these drawings.
上記した各実施形態では、本発明を領域提示システム100の領域の指定に用いた例を挙げて説明したが、同様の構成にて、投影により建物内のラインや模様等の任意の投影像を指定する用途に適用することができる。例えば、建物内のラインを投影する場合、領域提示システム100にマーカー等によって描かれた線を認識させて、投影すればよい。
In each of the above-described embodiments, an example in which the present invention is used to specify the region of the
また、上記した第1~第4の実施形態に示した手順は、領域提示システム100として機能するコンピュータ(図19の9000)に、領域提示システム100としての機能を実現させるプログラムにより実現可能である。このようなコンピュータは、図19のCPU(Central Processing Unit)9010、通信インタフェース9020、メモリ9030、補助記憶装置9040を備える構成に例示される。すなわち、図19のCPU9010にて、領域認識プログラムや投影制御プログラムを実行し、その補助記憶装置9040等に保持された各計算パラメーターの更新処理を実施させればよい。
Further, the procedures shown in the above-described first to fourth embodiments can be realized by a program that causes the computer (9000 in FIG. 19) functioning as the
即ち、上記した各実施形態に示した領域提示システム100の各部(処理手段、機能)は、領域提示システム100に搭載されたプロセッサに、そのハードウェアを用いて、上記した各処理を実行させるコンピュータプログラムにより実現することができる。
That is, each part (processing means, function) of the
最後に、本発明の好ましい形態を要約する。
[第1の形態]
(上記第1の視点による投影像指定装置参照)
[第2の形態]
上記した投影像指定装置が認識する前記ユーザーによる図形の描画操作は、
前記ユーザーによる3以上のマーカーの設置操作であり、
前記投影制御部は、前記3以上のマーカーによって区切られる領域を投影する構成を採ることができる。
[第3の形態]
上記した投影像指定装置が認識する前記ユーザーによる図形の描画操作は、
前記ユーザーがマーカーを移動させて領域を囲う操作であり、
前記投影制御部は、前記マーカーの軌跡によって指定された領域を投影する構成を採ることができる。
[第4の形態]
上記した投影像指定装置において、
前記マーカーとして、前記投影装置によって投影された仮想マーカーを用いる構成を採ることができる。
[第5の形態]
上記した投影像指定装置において、
前記図形認識部は、前記ユーザーのジェスチャーによる、前記投影装置によって投影された仮想マーカーに対する操作を認識する構成を採ることができる。
[第6の形態]
上記した投影像指定装置において、
前記図形認識部は、前記ユーザーのジェスチャーとして、前記仮想マーカーの設置、前記仮想マーカーの移動、領域の切断又は領域の結合の少なくとも1つ以上を認識可能な構成を採ることができる。
[第7の形態]
上記した投影像指定装置において、
前記図形認識部は、前記投影された図形を参照したユーザーによる図形の修正操作を認識し、
前記投影制御部は、前記投影装置に対して、前記図形の修正操作を反映した図形の投影を指示する構成を採ることができる。
[第8の形態]
(上記第2の視点による図形投影システム参照)
[第9の形態]
(上記第3の視点による投影像指定方法参照)
[第10の形態]
(上記第4の視点によるプログラム参照)
なお、上記第8~第10の形態は、第1の形態と同様に、第2~第7の形態に展開することが可能である。
Finally, preferred forms of the invention are summarized.
[First form]
(Refer to the projection image designating device from the first viewpoint above.)
[Second form]
The drawing operation of the figure by the user recognized by the projection image designation device is as follows:
An operation of placing three or more markers by the user;
The projection control section can adopt a configuration for projecting the area delimited by the three or more markers.
[Third form]
The drawing operation of the figure by the user recognized by the projection image designation device is as follows:
An operation in which the user moves a marker to enclose an area,
The projection control section can adopt a configuration that projects the area specified by the trajectory of the marker.
[Fourth mode]
In the projection image designation device described above,
A configuration can be adopted in which a virtual marker projected by the projection device is used as the marker.
[Fifth form]
In the projection image designation device described above,
The figure recognition unit may be configured to recognize an operation of the user's gesture on the virtual marker projected by the projection device.
[Sixth form]
In the projection image designation device described above,
The graphic recognition unit can recognize at least one of installation of the virtual marker, movement of the virtual marker, cutting of areas, and joining of areas as the user's gesture.
[Seventh form]
In the projection image designation device described above,
The figure recognition unit recognizes a figure modification operation by a user with reference to the projected figure,
The projection control unit may be configured to instruct the projection device to project a figure reflecting the modification operation of the figure.
[Eighth form]
(Refer to the graphic projection system from the second point of view above)
[Ninth form]
(Refer to the projection image specification method from the third viewpoint above)
[Tenth mode]
(Refer to the program from the fourth viewpoint above)
It should be noted that the above eighth to tenth modes can be developed into second to seventh modes in the same manner as the first mode.
なお、上記の特許文献の各開示を、本書に引用をもって繰り込むものとする。本発明の全開示(請求の範囲を含む)の枠内において、さらにその基本的技術思想に基づいて、実施形態ないし実施例の変更・調整が可能である。また、本発明の開示の枠内において種々の開示要素(各請求項の各要素、各実施形態ないし実施例の各要素、各図面の各要素等を含む)の多様な組み合わせ、ないし選択(部分的削除を含む)が可能である。すなわち、本発明は、請求の範囲を含む全開示、技術的思想にしたがって当業者であればなし得るであろう各種変形、修正を含むことは勿論である。特に、本書に記載した数値範囲については、当該範囲内に含まれる任意の数値ないし小範囲が、別段の記載のない場合でも具体的に記載されているものと解釈されるべきである。 It should be noted that each disclosure of the above patent documents is incorporated herein by reference. Within the framework of the full disclosure of the present invention (including the scope of claims), modifications and adjustments of the embodiments and examples are possible based on the basic technical concept thereof. Also, within the framework of the disclosure of the present invention, various combinations or selections (partial (including targeted deletion) is possible. That is, the present invention naturally includes various variations and modifications that can be made by those skilled in the art according to the entire disclosure including claims and technical ideas. In particular, any numerical range recited herein should be construed as specifically recited for any numerical value or subrange within that range, even if not otherwise stated.
11 撮影装置
12 投影装置
20 投影像指定装置
21 図形認識部
22 投影制御部
100 領域提示システム
101 領域認識部
102 投影制御部
103 領域記憶部
104 監視部
106 投影部
107 撮影部
9000 コンピュータ
9010 CPU
9020 通信インタフェース
9030 メモリ
9040 補助記憶装置
M マーカー
TR1、TR2 三角形
U ユーザー
Z1~Z5、Z5-1、Z5-2 領域
REFERENCE SIGNS
9020 Communication interface 9030
Claims (9)
前記撮影装置にて撮影された画像に基づいて、ユーザーによる3以上のマーカーの設置操作を認識して前記3以上のマーカーのそれぞれの位置を特定して前記3以上のマーカーによって区切られる領域に係る領域データを作成する領域認識部と、
前記領域データに基づいて、前記投影装置に対して、前記認識した前記ユーザーによる前記3以上のマーカーの設置操作に基づいて作成された前記領域の投影を指示する投影制御部と、
を備えた投影像指定装置。 connected to a projection device capable of projecting a predetermined range and a photographing device capable of photographing the projectable range of the projection device;
Based on the image captured by the photographing device, recognizing the operation of placing three or more markers by the user , specifying the positions of each of the three or more markers, and relating to the area delimited by the three or more markers an area recognition unit that creates area data ;
a projection control unit that instructs the projection device , based on the area data , to project the area created based on the installation operation of the three or more markers by the recognized user;
A projection image designation device with a
前記ユーザーが前記マーカーを移動させて前記領域を囲う操作であり、
前記投影制御部は、前記領域データに基づいて、前記投影装置に対して、前記マーカーの軌跡によって指定された前記領域の投影を指示する請求項1の投影像指定装置。 The installation operation of the three or more markers by the user is
an operation in which the user moves the marker to enclose the area;
2. A projection image designating device according to claim 1 , wherein said projection control unit instructs said projection device to project said region designated by said locus of said marker based on said region data .
前記投影制御部は、前記投影装置に対して、前記領域の修正操作を反映した領域の投影を指示する請求項1から5いずれか一の投影像指定装置。 The area recognition unit recognizes an area correction operation by a user with reference to the projected area ,
6. The projection image designation device according to claim 1, wherein the projection control unit instructs the projection device to project the area reflecting the correction operation of the area .
前記投影装置の投影可能な範囲を撮影可能な撮影装置と、
前記撮影装置にて撮影された画像に基づいて、ユーザーによる3以上のマーカーの設置操作を認識して前記3以上のマーカーのそれぞれの位置を特定して前記3以上のマーカーによって区切られる領域に係る領域データを作成する領域認識部と、
前記領域データに基づいて、前記投影装置に対して、前記認識した前記ユーザーによる前記3以上のマーカーの設置操作に基づいて作成された前記領域の投影を指示する投影制御部と、を備えた投影像指定装置と、
を含む図形投影システム。 a projection device capable of projecting a predetermined range;
a photographing device capable of photographing a projectable range of the projection device;
Based on the image captured by the photographing device, recognizing the operation of placing three or more markers by the user , specifying the positions of each of the three or more markers, and relating to the area delimited by the three or more markers an area recognition unit that creates area data ;
a projection control unit that instructs the projection device , based on the area data , to project the area created based on the installation operation of the three or more markers by the recognized user. an image designator;
Figure projection system including.
前記撮影装置にて撮影された画像に基づいて、ユーザーによる3以上のマーカーの設置操作を認識して前記3以上のマーカーのそれぞれの位置を特定して前記3以上のマーカーによって区切られる領域に係る領域データを作成するステップと、
前記領域データに基づいて、前記投影装置に対して、前記認識した前記ユーザーによる前記3以上のマーカーの設置操作に基づいて作成された前記領域の投影を指示するステップと、
を備えた投影像指定方法。 A computer connected to a projection device capable of projecting a predetermined range and a photographing device capable of photographing the projection range of the projection device,
Based on the image captured by the photographing device, recognizing the operation of placing three or more markers by the user , specifying the positions of each of the three or more markers, and relating to the area delimited by the three or more markers creating regional data ;
a step of instructing the projection device to project the area created based on the installation operation of the three or more markers by the recognized user , based on the area data ;
projection image specification method with
前記撮影装置にて撮影された画像に基づいて、ユーザーによる3以上のマーカーの設置操作を認識して前記3以上のマーカーのそれぞれの位置を特定して前記3以上のマーカーによって区切られる領域に係る領域データを作成する処理と、
前記領域データに基づいて、前記投影装置に対して、前記認識した前記ユーザーによる前記3以上のマーカーの設置操作に基づいて作成された前記領域の投影を指示する処理と、
を実行させるプログラム。 A computer connected to a projection device capable of projecting a predetermined range and a photographing device capable of photographing the projection range of the projection device,
Based on the image captured by the photographing device, recognizing the operation of placing three or more markers by the user , specifying the positions of each of the three or more markers, and relating to the area delimited by the three or more markers a process of creating region data ;
a process of instructing the projection device to project the area created based on the installation operation of the three or more markers by the recognized user , based on the area data ;
program to run.
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019004197A JP7255842B2 (en) | 2019-01-15 | 2019-01-15 | PROJECTION IMAGE SPECIFICATION DEVICE, GRAPHIC PROJECTION SYSTEM, PROJECTION IMAGE SPECIFICATION METHOD AND PROGRAM |
JP2023040760A JP2023099364A (en) | 2019-01-15 | 2023-03-15 | Designation device, system, designation method, and program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019004197A JP7255842B2 (en) | 2019-01-15 | 2019-01-15 | PROJECTION IMAGE SPECIFICATION DEVICE, GRAPHIC PROJECTION SYSTEM, PROJECTION IMAGE SPECIFICATION METHOD AND PROGRAM |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023040760A Division JP2023099364A (en) | 2019-01-15 | 2023-03-15 | Designation device, system, designation method, and program |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2020113102A JP2020113102A (en) | 2020-07-27 |
JP7255842B2 true JP7255842B2 (en) | 2023-04-11 |
Family
ID=71667089
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019004197A Active JP7255842B2 (en) | 2019-01-15 | 2019-01-15 | PROJECTION IMAGE SPECIFICATION DEVICE, GRAPHIC PROJECTION SYSTEM, PROJECTION IMAGE SPECIFICATION METHOD AND PROGRAM |
JP2023040760A Pending JP2023099364A (en) | 2019-01-15 | 2023-03-15 | Designation device, system, designation method, and program |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023040760A Pending JP2023099364A (en) | 2019-01-15 | 2023-03-15 | Designation device, system, designation method, and program |
Country Status (1)
Country | Link |
---|---|
JP (2) | JP7255842B2 (en) |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005275327A (en) | 2003-09-19 | 2005-10-06 | Fuji Electric Systems Co Ltd | Projection display device |
JP2012256270A (en) | 2011-06-10 | 2012-12-27 | Sony Corp | Information processor, program, and information processing method |
JP2013175216A (en) | 2013-04-17 | 2013-09-05 | Casio Comput Co Ltd | Electronic apparatus and program |
JP2014149614A (en) | 2013-01-31 | 2014-08-21 | Toshiba Corp | Electronic apparatus and handwritten document processing method |
JP2018074528A (en) | 2016-11-02 | 2018-05-10 | キヤノン株式会社 | Information processing system and component apparatus thereof, and method for monitoring real space |
JP2018072495A (en) | 2016-10-27 | 2018-05-10 | セイコーエプソン株式会社 | Projector, projection system, and detection light irradiation unit |
-
2019
- 2019-01-15 JP JP2019004197A patent/JP7255842B2/en active Active
-
2023
- 2023-03-15 JP JP2023040760A patent/JP2023099364A/en active Pending
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005275327A (en) | 2003-09-19 | 2005-10-06 | Fuji Electric Systems Co Ltd | Projection display device |
JP2012256270A (en) | 2011-06-10 | 2012-12-27 | Sony Corp | Information processor, program, and information processing method |
JP2014149614A (en) | 2013-01-31 | 2014-08-21 | Toshiba Corp | Electronic apparatus and handwritten document processing method |
JP2013175216A (en) | 2013-04-17 | 2013-09-05 | Casio Comput Co Ltd | Electronic apparatus and program |
JP2018072495A (en) | 2016-10-27 | 2018-05-10 | セイコーエプソン株式会社 | Projector, projection system, and detection light irradiation unit |
JP2018074528A (en) | 2016-11-02 | 2018-05-10 | キヤノン株式会社 | Information processing system and component apparatus thereof, and method for monitoring real space |
Also Published As
Publication number | Publication date |
---|---|
JP2023099364A (en) | 2023-07-12 |
JP2020113102A (en) | 2020-07-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6429545B2 (en) | Control device and control method | |
EP1694072A1 (en) | Surveillance system for masking privacy zone and method of setting mask zone | |
JP2011051403A (en) | Parking support system | |
JP2018205506A (en) | Projection device, control method thereof, and program | |
JP6079695B2 (en) | Image display photographing system, photographing device, display device, image display and photographing method, and computer program | |
JP7255842B2 (en) | PROJECTION IMAGE SPECIFICATION DEVICE, GRAPHIC PROJECTION SYSTEM, PROJECTION IMAGE SPECIFICATION METHOD AND PROGRAM | |
JP2002297119A (en) | Device and system for image display | |
JP6576117B2 (en) | Projection apparatus, program, and control method | |
JP7114049B2 (en) | Image processing device and image processing program | |
JP6117470B2 (en) | Display device, projector, image display method, and display system | |
JP5742379B2 (en) | Projection system and projection method | |
JP5963571B2 (en) | Image display device and surveillance camera system | |
JP2004177614A (en) | Multi-screen display device | |
JP2012058353A (en) | Image display device and control method thereof | |
JP2019110373A (en) | Projection apparatus and control method thereof | |
JP6784199B2 (en) | Image processing device | |
WO2023224031A1 (en) | Information processing method, information processing device, and information processing program | |
JP7239138B2 (en) | INFORMATION DISPLAY DEVICE, INFORMATION DISPLAY METHOD AND PROGRAM | |
WO2010125638A1 (en) | Camera symbol display device and computer program | |
WO2023224036A1 (en) | Information processing method, information processing device, and information processing program | |
US11908353B2 (en) | Information processing apparatus and information processing system | |
JP2005141695A (en) | Monitoring system | |
US20230125097A1 (en) | Photography support device and method, and computer-readable storage medium | |
JP2021009265A (en) | Information processing device, information processing method, and program | |
JP2010117465A (en) | Information processing device, information processing system and program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20211202 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20220930 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20221004 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20221024 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230228 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230323 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 7255842 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |