JP7255842B2 - PROJECTION IMAGE SPECIFICATION DEVICE, GRAPHIC PROJECTION SYSTEM, PROJECTION IMAGE SPECIFICATION METHOD AND PROGRAM - Google Patents

PROJECTION IMAGE SPECIFICATION DEVICE, GRAPHIC PROJECTION SYSTEM, PROJECTION IMAGE SPECIFICATION METHOD AND PROGRAM Download PDF

Info

Publication number
JP7255842B2
JP7255842B2 JP2019004197A JP2019004197A JP7255842B2 JP 7255842 B2 JP7255842 B2 JP 7255842B2 JP 2019004197 A JP2019004197 A JP 2019004197A JP 2019004197 A JP2019004197 A JP 2019004197A JP 7255842 B2 JP7255842 B2 JP 7255842B2
Authority
JP
Japan
Prior art keywords
projection
area
markers
user
photographing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2019004197A
Other languages
Japanese (ja)
Other versions
JP2020113102A (en
Inventor
裕一郎 江連
哲也 伊藤
典彦 鎌田
貴宏 長谷川
睦 伊藤
咲子 大神
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NEC Communication Systems Ltd
Original Assignee
NEC Communication Systems Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Communication Systems Ltd filed Critical NEC Communication Systems Ltd
Priority to JP2019004197A priority Critical patent/JP7255842B2/en
Publication of JP2020113102A publication Critical patent/JP2020113102A/en
Priority to JP2023040760A priority patent/JP2023099364A/en
Application granted granted Critical
Publication of JP7255842B2 publication Critical patent/JP7255842B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Description

本発明は、投影像指定装置、図形投影システム、投影像指定方法及びプログラムに関する。 The present invention relates to a projection image designation device, a graphic projection system, a projection image designation method, and a program.

特許文献1に、映像自動監視システムの監視エリアの設定を行う装置が開示されている。同文献によると、この装置は、3点のマーカーを等間隔で監視エリアの一辺に設置し、これを監視カメラ20で撮影して、画像処理部12で検出することで、監視エリアを設定する。 Japanese Unexamined Patent Application Publication No. 2002-200001 discloses a device for setting a monitoring area of an automatic video monitoring system. According to the document, this device sets a monitoring area by setting three markers at equal intervals on one side of a monitoring area, photographing them with a monitoring camera 20, and detecting them with an image processing unit 12. .

特許文献2には、操作が簡単であり、交通事故現場での計測作業を極力短時間にできるとともに、事故現場において現場見取図を容易に作成できるという位置計測作図装置が開示されている。同文献によると、この位置計測作図装置は、撮影手段で撮影した所望の位置の画像を表示する。そして、この位置計測作図装置は、その画像上で、所望の位置に設置されたマーカーの座標を検出することで、現場見取図を作成する。 Patent Literature 2 discloses a position measuring and plotting device that is easy to operate, can minimize measurement work at a traffic accident site, and can easily create a site sketch at the accident site. According to the document, this position measuring and plotting device displays an image of a desired position photographed by photographing means. Then, this position measuring and plotting device creates a site sketch by detecting the coordinates of markers placed at desired positions on the image.

特開2001-204007号公報Japanese Patent Application Laid-Open No. 2001-204007 特開平2-281380号公報JP-A-2-281380

以下の分析は、本発明によって与えられたものである。プロジェクター装置に代表される投影装置を用いて、特定の形状の像を投影したいというニーズがある。例えば、部屋や通路にプロジェクターを設置して、任意の色の像を提示することで、注意喚起や空間の演出を行うことができる。また、端的には、建物内の通路に、センターラインや横断歩道の形状の像を投影することで、場内の交通を随時整理することが可能となる。 The following analysis is given by the present invention. There is a need to project an image of a specific shape using a projection device represented by a projector device. For example, by installing a projector in a room or aisle and presenting an image of an arbitrary color, it is possible to draw attention or create a space. In short, by projecting an image of the shape of the centerline or pedestrian crossing onto the aisle inside the building, it becomes possible to organize the traffic in the venue at any time.

本発明は、投影装置に投影させる像の簡便な指定方法の提供に貢献できる投影像指定装置、図形投影システム、投影像指定方法及びプログラムを提供することを目的とする。 SUMMARY OF THE INVENTION It is an object of the present invention to provide a projection image designation device, a graphic projection system, a projection image designation method, and a program that can contribute to providing a simple method of designating an image to be projected by a projection device.

第1の視点によれば、所定の範囲を投影可能な投影装置と、前記投影装置の投影可能な範囲を撮影可能な撮影装置と、に接続され、前記撮影装置にて撮影された画像に基づいて、ユーザーによる図形の描画操作を認識する図形認識部と、前記投影装置に対して、前記図形の描画操作に基づいた図形の投影を指示する投影制御部と、を備えた投影像指定装置が提供される。
前記第1の視点の変形として、所定の範囲を投影可能な投影装置と、前記投影装置の投影可能な範囲を撮影可能な撮影装置と、に接続され、前記撮影装置にて撮影された画像に基づいて、ユーザーによる3以上のマーカーの設置操作を認識して前記3以上のマーカーのそれぞれの位置を特定して前記3以上のマーカーによって区切られる領域に係る領域データを作成する領域認識部と、前記領域データに基づいて、前記投影装置に対して、前記認識した前記ユーザーによる前記3以上のマーカーの設置操作に基づいて作成された前記領域の投影を指示する投影制御部と、を備えた投影像指定装置が提供される。
According to the first viewpoint, a projection device capable of projecting a predetermined range and a photographing device capable of photographing the projectable range of the projection device are connected to each other, and based on an image photographed by the photographing device, a projection image designating device comprising: a graphic recognizing unit that recognizes a graphic drawing operation by a user; and a projection control unit that instructs the projection device to project a graphic based on the graphic drawing operation. provided.
As a modification of the first viewpoint, an image captured by the imaging device is connected to a projection device capable of projecting a predetermined range and a photographing device capable of photographing the projectable range of the projection device. a region recognition unit that recognizes a user's placement operation of three or more markers, specifies the positions of each of the three or more markers, and creates region data related to a region delimited by the three or more markers; a projection control unit that instructs the projection device, based on the area data, to project the area created based on the installation operation of the three or more markers by the recognized user. An image designator is provided.

第2の視点によれば、所定の範囲を投影可能な投影装置と、前記投影装置の投影可能な範囲を撮影可能な撮影装置と、前記撮影装置にて撮影された画像に基づいて、前記ユーザーによる図形の描画操作を認識する図形認識部と、前記投影装置に対して、前記図形の描画操作に基づいた図形の投影を指示する投影制御部と、を備えた投影像指定装置と、を含む図形投影システムが提供される。
前記第2の視点の変形として、所定の範囲を投影可能な投影装置と、前記投影装置の投影可能な範囲を撮影可能な撮影装置と、前記撮影装置にて撮影された画像に基づいて、ユーザーによる3以上のマーカーの設置操作を認識して前記3以上のマーカーのそれぞれの位置を特定して前記3以上のマーカーによって区切られる領域に係る領域データを作成する領域認識部と、前記領域データに基づいて、前記投影装置に対して、前記認識した前記ユーザーによる前記3以上のマーカーの設置操作に基づいて作成された前記領域の投影を指示する投影制御部と、を備えた投影像指定装置と、を含む図形投影システムが提供される。
According to the second viewpoint, a projection device capable of projecting a predetermined range, a photographing device capable of photographing the projectable range of the projection device, and based on an image photographed by the photographing device, the user a projection image designating device comprising: a graphic recognizing unit for recognizing a graphic drawing operation by the A graphics projection system is provided.
As a modification of the second viewpoint, a projection device capable of projecting a predetermined range, a photographing device capable of photographing the projectable range of the projection device, and based on an image photographed by the photographing device, the user an area recognition unit for recognizing an installation operation of three or more markers by specifying the position of each of the three or more markers and creating area data related to an area delimited by the three or more markers; a projection image designation device for instructing the projection device to project the region created based on the installation operation of the three or more markers by the recognized user according to A graphics projection system is provided.

第3の視点によれば、所定の範囲を投影可能な投影装置と、前記投影装置の投影可能な範囲を撮影可能な撮影装置と、に接続されたコンピュータが、前記撮影装置にて撮影された画像に基づいて、前記ユーザーによる図形の描画操作を認識するステップと、前記投影装置に対して、前記認識した前記ユーザーによる図形の描画操作に基づいた図形の投影を指示するステップと、を備えた投影像指定方法が提供される。本方法は、ユーザーから図形の描画操作を受け付けて、図形の投影を指示する投影像指定装置という、特定の機械に結びつけられている。
前記第3の視点の変形として、所定の範囲を投影可能な投影装置と、前記投影装置の投影可能な範囲を撮影可能な撮影装置と、に接続されたコンピュータが、前記撮影装置にて撮影された画像に基づいて、ユーザーによる3以上のマーカーの設置操作を認識して前記3以上のマーカーのそれぞれの位置を特定して前記3以上のマーカーによって区切られる領域に係る領域データを作成するステップと、前記領域データに基づいて、前記投影装置に対して、前記認識した前記ユーザーによる前記3以上のマーカーの設置操作に基づいて作成された前記領域の投影を指示するステップと、を備えた投影像指定方法が提供される。
According to the third viewpoint, a computer connected to a projection device capable of projecting a predetermined range and a photographing device capable of photographing the projectable range of the projection device is photographed by the photographing device. a step of recognizing a figure drawing operation by the user based on an image; and a step of instructing the projection device to project a figure based on the recognized figure drawing operation by the user. A projection designation method is provided. This method is associated with a specific machine called a projection image designating device that accepts a graphic drawing operation from a user and instructs the projection of the graphic.
As a modification of the third viewpoint, a computer connected to a projection device capable of projecting a predetermined range and a photographing device capable of photographing the projectable range of the projection device is photographed by the photographing device. a step of recognizing an operation by a user to place three or more markers, specifying the positions of each of the three or more markers, and creating region data relating to a region delimited by the three or more markers, based on the obtained image; , based on the area data, instructing the projection device to project the area created based on the installation operation of the three or more markers by the recognized user. A specification method is provided.

第4の視点によれば、上記した投影像指定装置の機能を実現するためのプログラムが提供される。なお、このプログラムは、コンピュータが読み取り可能な(非トランジトリーな)記憶媒体に記録することができる。即ち、本発明は、コンピュータプログラム製品として具現することも可能である。 According to a fourth aspect, there is provided a program for realizing the functions of the projection image designation device described above. This program can be recorded in a computer-readable (non-transitory) storage medium. That is, the present invention can also be embodied as a computer program product.

本発明によれば、簡便に、投影装置に投影させる像の指定を行うことが可能となる。 According to the present invention, it is possible to easily designate an image to be projected by a projection device.

本発明の一実施形態の構成を示す図である。It is a figure which shows the structure of one Embodiment of this invention. 本発明の一実施形態の動作を説明するための図である。It is a figure for demonstrating the operation|movement of one Embodiment of this invention. 本発明の一実施形態の動作を説明するための図である。It is a figure for demonstrating the operation|movement of one Embodiment of this invention. 本発明の一実施形態の動作を説明するための図である。It is a figure for demonstrating the operation|movement of one Embodiment of this invention. 本発明の一実施形態の動作を説明するための図である。It is a figure for demonstrating the operation|movement of one Embodiment of this invention. 本発明の一実施形態の動作を説明するための図である。It is a figure for demonstrating the operation|movement of one Embodiment of this invention. 本発明の第1の実施形態の領域提示システムの構成を示す図である。1 is a diagram showing the configuration of an area presentation system according to a first embodiment of the present invention; FIG. 本発明の第1の実施形態の領域提示システムが保持する領域データの一例を示す図である。FIG. 3 is a diagram showing an example of region data held by the region presentation system according to the first embodiment of the present invention; FIG. 本発明の第1の実施形態の領域提示システムの動作を説明するための図である。FIG. 4 is a diagram for explaining the operation of the region presentation system according to the first embodiment of the present invention; FIG. 本発明の第1の実施形態の領域提示システムの動作を説明するための図である。FIG. 4 is a diagram for explaining the operation of the region presentation system according to the first embodiment of the present invention; FIG. 本発明の第1の実施形態の領域提示システムの動作を説明するための図である。FIG. 4 is a diagram for explaining the operation of the region presentation system according to the first embodiment of the present invention; FIG. 本発明の第1の実施形態の領域提示システムの動作を説明するための図である。FIG. 4 is a diagram for explaining the operation of the region presentation system according to the first embodiment of the present invention; FIG. 本発明の第1の実施形態の領域提示システムの効果を説明するための図である。FIG. 4 is a diagram for explaining the effects of the region presentation system according to the first embodiment of the present invention; FIG. 本発明の第2の実施形態の領域提示システムの動作を説明するための図である。FIG. 10 is a diagram for explaining the operation of the region presentation system according to the second embodiment of the present invention; FIG. 本発明の第3の実施形態の領域提示システムの動作を説明するための図である。FIG. 11 is a diagram for explaining the operation of the region presentation system according to the third embodiment of the present invention; 本発明の第3の実施形態の領域提示システムの動作を説明するための図である。FIG. 11 is a diagram for explaining the operation of the region presentation system according to the third embodiment of the present invention; 本発明の第4の実施形態の領域提示システムの動作を説明するための図である。FIG. 12 is a diagram for explaining the operation of the region presentation system according to the fourth embodiment of the present invention; FIG. 本発明の第4の実施形態の領域提示システムの動作を説明するための図である。FIG. 12 is a diagram for explaining the operation of the region presentation system according to the fourth embodiment of the present invention; FIG. 本発明の領域提示システムを構成するコンピュータの構成を示す図である。1 is a diagram showing the configuration of a computer that constitutes the region presentation system of the present invention; FIG.

はじめに本発明の一実施形態の概要について図面を参照して説明する。なお、この概要に付記した図面参照符号は、理解を助けるための一例として各要素に便宜上付記したものであり、本発明を図示の態様に限定することを意図するものではない。また、以降の説明で参照する図面等のブロック間の接続線は、双方向及び単方向の双方を含む。一方向矢印については、主たる信号(データ)の流れを模式的に示すものであり、双方向性を排除するものではない。また、図中の各ブロックの入出力の接続点には、ポート又はインタフェースがあるが図示省略する。また、以下の説明において、「A及び/又はB」は、A及びBの少なくともいずれかという意味で用いる。 First, an outline of an embodiment of the present invention will be described with reference to the drawings. It should be noted that the drawing reference numerals added to this overview are added to each element for convenience as an example to aid understanding, and are not intended to limit the present invention to the illustrated embodiments. Also, connection lines between blocks in drawings and the like referred to in the following description include both bidirectional and unidirectional connections. The unidirectional arrows schematically show the flow of main signals (data) and do not exclude bidirectionality. Also, although there is a port or interface at the input/output connection point of each block in the drawing, it is omitted from the drawing. Moreover, in the following description, "A and/or B" is used to mean at least one of A and B.

本発明は、その一実施形態において、図1に示すように、所定の範囲を投影可能な投影装置12と、前記投影装置12の投影可能な範囲を撮影可能な撮影装置11と、に接続された投影像指定装置20にて実現できる。この投影像指定装置20は、撮影装置11にて撮影された画像に基づいて、ユーザーによる図形の描画操作を認識する図形認識部21と、投影装置12に対して、前記図形の描画操作に基づいた図形の投影を指示する投影制御部22と、を備える。 In one embodiment of the present invention, as shown in FIG. 1, it is connected to a projection device 12 capable of projecting a predetermined range and a photographing device 11 capable of photographing the projection range of the projection device 12. can be realized by the projection image designating device 20. The projection image designation device 20 has a figure recognition unit 21 that recognizes a figure drawing operation by the user based on the image captured by the photographing device 11, and a figure recognition unit 21 that recognizes a figure drawing operation by the user based on the image drawing operation for the projection device 12. and a projection control unit 22 for instructing projection of the figure.

上記投影像指定装置20の動作について図2~図6を参照して説明する。まず、ユーザーUが図2に示すように、投影装置12に投影させたい形状の頂点にマーカーMを配置する。ここでは、ユーザーは、3つのマーカーを用いて三角形を描画するものとして説明する。 The operation of the projection image designation device 20 will be described with reference to FIGS. 2 to 6. FIG. First, as shown in FIG. 2, the user U places markers M at vertices of a shape to be projected by the projection device 12 . Here, it is assumed that the user draws a triangle using three markers.

次に撮影装置11は、ユーザーが並べたマーカーMを含む領域を撮影する。投影像指定装置20の図形認識部21は、撮影装置11にて撮影された画像に基づいて、ユーザーによる図形の描画操作を認識する。図3の例では、図形認識部21は、マーカーMによって構成された三角形を認識する。図形認識部21は、認識した内容を投影制御部22に渡す。 Next, the photographing device 11 photographs an area including the markers M arranged by the user. A figure recognition unit 21 of the projection image designation device 20 recognizes a figure drawing operation by the user based on the image captured by the image capturing device 11 . In the example of FIG. 3, the pattern recognition unit 21 recognizes a triangle formed by markers M. In the example of FIG. The figure recognition section 21 passes the recognized contents to the projection control section 22 .

次に、投影制御部22は、投影装置12に対して、前記図形の描画操作に基づいた三角形の投影を指示する。これにより、図4に示すように、3つのマーカーMを頂点とする三角形TR1が投影されることになる。 Next, the projection control unit 22 instructs the projection device 12 to project a triangle based on the graphic drawing operation. As a result, as shown in FIG. 4, a triangle TR1 having the three markers M as vertices is projected.

より望ましい形態において、前記投影像指定装置20は、ユーザーからマーカーMの移動による修正操作を受け付ける。例えば、図5に示すように、ユーザーが右端のマーカーMを右側に動かしたものとする。 In a more desirable form, the projection image specifying device 20 accepts a correction operation by moving the marker M from the user. For example, as shown in FIG. 5, it is assumed that the user has moved the rightmost marker M to the right.

投影像指定装置20の図形認識部21は、撮影装置11にて撮影された画像に基づいて、ユーザーによる図形の修正操作を認識する。最終的に、投影制御部22は、図形認識部21により認識された内容に基づいて図6に示す三角形TR2を投影する。この三角形TR2は、右端のマーカーMを更に右側に動かしたことによって、図4の三角形TR1よりも面積が広くなっている。 The figure recognition unit 21 of the projection image specifying device 20 recognizes the user's operation of correcting the figure based on the image captured by the image capturing device 11 . Finally, the projection control unit 22 projects a triangle TR2 shown in FIG. 6 based on the content recognized by the pattern recognition unit 21. FIG. This triangle TR2 has a wider area than the triangle TR1 in FIG. 4 by moving the rightmost marker M further to the right.

なお、ユーザーからマーカーMの移動による修正操作を受け付ける期間を限定してもよい。例えば、投影後の一定期間だけ修正操作を受け付けるようにしてもよい。また、ユーザーから所定のジェスチャーや通信装置による修正要求操作を受け付けたタイミングで、図形認識部21に認識を行わせることでもよい。さらに、投影像指定装置20に備えられたボタンなどに、修正要求機能を割り当て、その操作(押下)により、マーカー移動の期間開始や期間終了を指定する構成も採用可能である。 Note that the period during which the correction operation by moving the marker M is accepted from the user may be limited. For example, correction operations may be accepted only for a certain period after projection. Alternatively, the pattern recognition unit 21 may be caused to perform recognition at the timing of receiving a predetermined gesture from the user or a correction request operation by the communication device. Further, it is also possible to employ a configuration in which a correction request function is assigned to a button or the like provided in the projection image specifying device 20, and the start or end of the marker movement period is specified by operating (pressing) the button.

以上のように、本実施形態によれば、簡単な操作で投影装置12に、意図した形状の図形等を投影させることが可能となる。なお、図2~図6の例では、ユーザーが三角形の形状になるようにマーカーMを配置しているが、投影像指定装置20が認識可能な形状は三角形に限られない。例えば、n個のマーカーMを用いて表現されたn個の頂点を持つ多角形を認識させることもできる。また、2個のマーカーを用いて、任意の直線を認識し、投影させることもできる。さらに、マーカーMの種別(形、色)を変えることで、図形認識部21のその違いを認識させ、通常の多角形の角のみならず、アールの付いた角等を使い分けられるようにしてもよい。また、図4~図6の例では、マーカーの位置を基準に、マーカーを含む図形を認識するものとして説明したが、マーカーの位置と、認識する図形の関係は、別途ルールにて定めることができる。例えば、マーカーの内側を図形として認識してもよい。 As described above, according to the present embodiment, it is possible to cause the projection device 12 to project a figure or the like having an intended shape with a simple operation. In the examples of FIGS. 2 to 6, the user arranges the marker M so as to form a triangular shape, but the shape recognizable by the projected image designating device 20 is not limited to a triangular shape. For example, a polygon with n vertices expressed using n markers M can be recognized. It is also possible to recognize and project any straight line using two markers. Furthermore, by changing the type (shape, color) of the marker M, the pattern recognition unit 21 can recognize the difference, and not only the normal polygonal corners but also rounded corners can be used properly. good. In addition, in the examples of FIGS. 4 to 6, it was explained that the figure including the marker is recognized based on the position of the marker, but the relationship between the position of the marker and the figure to be recognized can be defined by separate rules. can. For example, the inside of the marker may be recognized as a figure.

[第1の実施形態]
続いて、本発明の第1の実施形態について図面を参照して詳細に説明する。図7は、本発明の第1の実施形態の領域提示システムの構成を示す図である。図7を参照すると、領域認識部101と、投影制御部102と、領域記憶部103と、監視部104と、投影部106と、撮影部107とを備えた構成が示されている。
[First Embodiment]
Next, a first embodiment of the present invention will be described in detail with reference to the drawings. FIG. 7 is a diagram showing the configuration of the region presentation system according to the first embodiment of the present invention. Referring to FIG. 7, a configuration including an area recognition unit 101, a projection control unit 102, an area storage unit 103, a monitoring unit 104, a projection unit 106, and an imaging unit 107 is shown.

投影制御部102は、1台以上の投影装置によって構成された投影部106を用いて、領域記憶部103に登録された領域データを用いて領域の投影を行う。前記投影装置としてはDLP(登録商標)方式、LCD方式(透過型液晶方式)、LCoS方式(反射型液晶方式)などを用いたものを用いることができる。なお、DLPは、Digital Light Processingの略である。また、LCDは、Liquid Crystal Display、LCoSは、Liquid Crystal on Siliconの略である。また、投影制御部102は、上記した投影制御部22に相当する。 The projection control unit 102 projects an area using the area data registered in the area storage unit 103 using the projection unit 106 configured by one or more projection devices. As the projection device, a device using a DLP (registered trademark) system, an LCD system (transmissive liquid crystal system), an LCoS system (reflective liquid crystal system), or the like can be used. DLP is an abbreviation for Digital Light Processing. LCD is an abbreviation for Liquid Crystal Display, and LCoS is an abbreviation for Liquid Crystal on Silicon. A projection control unit 102 corresponds to the projection control unit 22 described above.

もちろん、投影制御部102は、複数の投影装置によって構成された投影部106を制御して投影を行うものとしてもよい。 Of course, the projection control unit 102 may perform projection by controlling the projection unit 106 configured by a plurality of projection devices.

撮影部107は、投影部106の投影可能領域をカバーする領域を撮影可能な1台以上のカメラなどによって構成される。撮影部107は、投影部106の出力座標とほぼ同一の座標にて被写体の位置を特定できるように、投影部106と近接して並列に配置されていることが好ましい。この撮影部107にて撮影された画像は、領域認識部101と、監視部104に入力される。なお、投影部106の投影可能領域と撮影部107の撮影領域(カバーする領域)は同じでなくてもよい。 The photographing unit 107 is configured by one or more cameras capable of photographing an area covering the projectable area of the projection unit 106 . It is preferable that the photographing unit 107 be arranged close to and in parallel with the projecting unit 106 so that the position of the subject can be specified at coordinates that are substantially the same as the output coordinates of the projecting unit 106 . An image captured by the imaging unit 107 is input to the area recognition unit 101 and the monitoring unit 104 . Note that the projectable area of the projection unit 106 and the imaging area (covered area) of the imaging unit 107 may not be the same.

領域認識部101は、撮影部107にて撮影された画像に基づいて、ユーザーによる領域の設定操作を認識する。そして、領域認識部101は、前記ユーザーによって設定された領域の情報を領域記憶部103の領域データに追加又は反映する。従って、領域認識部101は、上記した図形認識部21に相当する。なお、撮影部107が複数設けられている場合、領域認識部101は、複数の撮影部107から画像を取得して、ユーザーによる領域の設定操作を認識することになる。 The region recognition unit 101 recognizes a user's region setting operation based on the image captured by the imaging unit 107 . Then, the area recognition unit 101 adds or reflects the information of the area set by the user to the area data of the area storage unit 103 . Therefore, the area recognition section 101 corresponds to the figure recognition section 21 described above. Note that when a plurality of imaging units 107 are provided, the area recognition unit 101 acquires images from the plurality of imaging units 107 and recognizes the area setting operation by the user.

領域記憶部103は、投影制御部102に投影させる領域のデータを保持する。図8は、領域記憶部103が保持する領域データの一例を示す図である。図8の例では、ID#1の領域は、(x1,y1)、(x2,y2)、(x3,y3)、(x4,y4)、(x5,y5)の5点の内側の領域を示している。同様に、ID#3の領域は、(x6,y6)、(x7,y7)、(x8,y8)の3点の内側の領域を示している。これらの座標としては、投影装置が一般的な投影用スクリーンに投影する際の座標と同じものを使用することができる。なお、これらの領域の表現形態はあくまで一例であり、例えば、これらの座標に代えて、各領域のノードとなる点の物理的な位置(緯度経度、必要に応じて高さ)を用いて領域を管理してもよい。 The area storage unit 103 holds data of areas to be projected by the projection control unit 102 . FIG. 8 is a diagram showing an example of area data held by the area storage unit 103. As shown in FIG. In the example of FIG. 8, the area of ID#1 is the area inside the five points (x1, y1), (x2, y2), (x3, y3), (x4, y4), and (x5, y5). showing. Similarly, the area of ID#3 indicates the area inside three points (x6, y6), (x7, y7), and (x8, y8). As these coordinates, the same coordinates as those used when a projection device projects onto a general projection screen can be used. It should be noted that these representation forms of the regions are only examples. may be managed.

監視部104は、撮影部107にて撮影された画像から、投影制御部102に投影された領域に近づく人、車両、ロボット、動物等(以下、これらを総称して「侵入者又は侵入物」という。)を認識し、その動きを検出する。そして、監視部104は、これらの「侵入者又は侵入物」の領域への侵入を検出したときに所定の警告動作や注意喚起動作を実施する。 The monitoring unit 104 detects people, vehicles, robots, animals, etc. (hereinafter collectively referred to as “intruders or intruders”) approaching the area projected on the projection control unit 102 from the image captured by the imaging unit 107 . ) and detect its movement. Then, the monitoring unit 104 performs a predetermined warning operation or alerting operation when detecting the entry of these "intruders or intruders" into the area.

続いて、本実施形態の動作について図面を参照して詳細に説明する。図9は、本発明の第1の実施形態の領域提示システム100の動作を説明するための図である。領域提示システム100の撮影部107が撮影を開始した状態において、ユーザーが図9の左図に示すように、クレーンの周囲に、マーカーとして用いるコーン(トラフィックコーン)を配置したものとする。 Next, the operation of this embodiment will be described in detail with reference to the drawings. FIG. 9 is a diagram for explaining the operation of the region presentation system 100 according to the first embodiment of the present invention. Assume that the user places cones (traffic cones) used as markers around the crane as shown in the left diagram of FIG.

領域提示システム100の領域認識部101は、撮影部107にて撮影された画像からコーンの位置を特定し、領域データを作成して領域記憶部103に登録する。ここでは、図9の右図のように5つの座標が特定されたものとする。これにより、図8の領域ID#1に相当する領域データが生成される。 The area recognition unit 101 of the area presentation system 100 identifies the position of the cone from the image captured by the imaging unit 107 , creates area data, and registers the area data in the area storage unit 103 . Here, it is assumed that five coordinates are identified as shown in the right diagram of FIG. As a result, area data corresponding to area ID #1 in FIG. 8 is generated.

これにより、投影制御部102は、領域記憶部103から読みだした領域データに基づいて、図10に示すように領域Z1を提示することが可能となる。以降、この領域Z1への侵入者を監視部104にて監視、警告することで、この領域Z1を危険領域として監視することが可能となる。 As a result, the projection control unit 102 can present the area Z1 as shown in FIG. 10 based on the area data read from the area storage unit 103. FIG. Thereafter, the monitoring unit 104 monitors and warns an intruder to the area Z1, so that the area Z1 can be monitored as a dangerous area.

上記した領域は2つ以上設定することも可能である。例えば、図11の左図に示すように、ユーザーが危険領域の外側に、コーン(トラフィックコーン)を配置したものとする。 It is also possible to set two or more areas as described above. For example, as shown in the left diagram of FIG. 11, it is assumed that the user has placed a cone (traffic cone) outside the dangerous area.

領域提示システム100の領域認識部101は、図11の右図に示すように、撮影部107にて撮影された画像から新たに追加されたコーンの位置を特定し、領域データを作成して領域記憶部103に登録する。これにより、図8の領域ID#2に相当する領域データが生成される。 The region recognition unit 101 of the region presentation system 100 identifies the position of the newly added cone from the image captured by the imaging unit 107, creates region data, and identifies the region as shown in the right diagram of FIG. Register in the storage unit 103 . As a result, area data corresponding to area ID #2 in FIG. 8 is generated.

これにより、投影制御部102は、領域記憶部103から読みだした領域データに基づいて、図12に示すように領域Z2を提示することが可能となる。以降、この領域Z2への侵入者を監視部104にて監視する。例えば、この領域Z2への侵入者を検出したときに、警告ではなく、注意喚起動作を行わせることで、この領域Z2をグレーゾーンとして機能させることが可能となる。 As a result, the projection control unit 102 can present the area Z2 as shown in FIG. 12 based on the area data read from the area storage unit 103. FIG. Thereafter, the monitoring unit 104 monitors an intruder to this area Z2. For example, when an intruder to this area Z2 is detected, it is possible to cause this area Z2 to function as a gray zone by performing an alerting action instead of issuing a warning.

領域Z1、Z2を修正する場合、以下の2つの方法を採ることができる。その1つは、図5、図6に示したように、コーン(トラフィックコーン)を移動し、領域提示システム100の領域認識部101に再認識させる方法である。もう1つの方法は、すべてのコーン(トラフィックコーン)を再配置し、領域提示システム100の領域認識部101に再認識させる方法である。いずれの場合も投影制御部102によって投影された領域を見ながら領域の修正を行うことができるので、領域の修正作業を効率よく行うことができる。 When correcting the regions Z1 and Z2, the following two methods can be adopted. One of them is a method of moving a cone (traffic cone) and having the area recognition unit 101 of the area presentation system 100 re-recognize it, as shown in FIGS. Another method is to rearrange all the cones (traffic cones) and have the area recognition unit 101 of the area presentation system 100 recognize them again. In either case, since the region can be corrected while viewing the region projected by the projection control unit 102, the region can be corrected efficiently.

以上、説明したとおり、本実施形態の領域提示システム100によれば、投影装置に投影させる領域の設定を効率よく行うことが可能となる。その理由は、投影制御部102によって領域を提示しつつ、コーン(トラフィックコーン)を配置することで領域を設定できる簡便なユーザーインタフェースを提供したことにある。 As described above, according to the area presentation system 100 of the present embodiment, it is possible to efficiently set the area to be projected by the projection device. The reason for this is that the projection control unit 102 presents the area and provides a simple user interface that allows the area to be set by arranging cones (traffic cones).

図13は、背景技術に示した撮影画像から点a2を指定する方法に対する本発明の優位性(効果)を説明するための図である。図13の左図は、背景技術に示した撮影画像から、ポインタPを用いて点a2を指定している状態示す。しかしながら、この方法では、図13の右図に示すように、カメラの位置から点a2と同一直線上にある点a3を選択したのかそうでないのかの判断が難しくなってしまう。一方、本発明によれば、図3に示すように、実際に、マーカーを配置し、これをカメラで撮影し認識する構成を採っているので、意図した範囲を特定できないという問題が解消されることになる。 FIG. 13 is a diagram for explaining the advantage (effect) of the present invention over the method of designating the point a2 from the captured image shown in Background Art. The left diagram of FIG. 13 shows a state in which a pointer P is used to designate a point a2 from the photographed image shown in Background Art. However, with this method, as shown in the right diagram of FIG. 13, it becomes difficult to determine whether point a3 on the same straight line as point a2 from the position of the camera has been selected or not. On the other hand, according to the present invention, as shown in FIG. 3, the marker is actually placed and photographed with a camera for recognition, thereby solving the problem that the intended range cannot be specified. It will be.

なお、上記した実施形態では、コーン(トラフィックコーン)をカメラにて撮影することで領域を指定する例を挙げて説明したが、マーカーは、コーン(トラフィックコーン)に限定されない。領域認識部101による認識が好ましく行われるものであればよく、任意の形状の標識板や発光体等をマーカーとして利用することができる。また、領域認識部101がマーカーの認識に用いる装置はカメラに限定されない。例えば、マーカーとの距離と方位を特定可能な距離センサ等を用いて、マーカーの位置を特定してもよい。また例えば、マーカー自体にGPS(Global Positioning System)等の位置測定手段を持たせておき、その位置情報を受信する構成も採用可能である。この場合、領域提示システム100は、位置情報の受信手段を備えることになる。 In the above-described embodiment, an example in which an area is specified by photographing a cone (traffic cone) with a camera has been described, but the marker is not limited to a cone (traffic cone). As long as recognition by the region recognition unit 101 is preferably performed, any shape of a sign board, a light emitter, or the like can be used as a marker. Also, the device used by the area recognition unit 101 for marker recognition is not limited to a camera. For example, the position of the marker may be specified using a distance sensor or the like that can specify the distance and direction from the marker. Further, for example, a configuration in which the marker itself is provided with position measuring means such as GPS (Global Positioning System) and the position information is received can also be adopted. In this case, the region presentation system 100 is provided with position information receiving means.

[第2の実施形態]
続いて、領域認識部101における領域の認識方法に変更を加えた第2の実施形態について図面を参照して詳細に説明する。本発明の第2の実施形態は、第1の実施形態と同様の構成にて実現できるので、以下、その動作上の相違点を中心に説明する。図14は、本発明の第2の実施形態の領域提示システム100の動作を説明するための図である。領域提示システム100の撮影部107が撮影を開始した状態において、ユーザーが図14の左図に示すように、コーンを移動させて、クレーンの周囲に、領域を描いたものとする。
[Second embodiment]
Next, a second embodiment in which the area recognition method of the area recognition unit 101 is changed will be described in detail with reference to the drawings. Since the second embodiment of the present invention can be implemented with a configuration similar to that of the first embodiment, differences in operation will be mainly described below. FIG. 14 is a diagram for explaining the operation of the region presentation system 100 according to the second embodiment of the present invention. Assume that the user draws an area around the crane by moving the cone as shown in the left diagram of FIG.

領域提示システム100の領域認識部101は、撮影部107にて撮影された画像からコーンの移動軌跡を特定し、この移動軌跡によって囲われた領域に対応する領域データを作成して領域記憶部103に登録する。例えば、ユーザーが第1の実施形態と同様の五角形を描くことで、第1の実施形態と同様に、5つの座標を特定させることができる。これにより、図8の領域ID#1に相当する領域データが生成される。もちろん、ユーザーがコーンを移動し、フリーハンドで不定形の領域を描いてもよい。その場合は、マーカーの軌跡の座標を持つ領域データを作成して領域記憶部103に登録すればよい。 The region recognizing unit 101 of the region presentation system 100 identifies the movement trajectory of the cone from the image captured by the imaging unit 107 , creates region data corresponding to the region surrounded by this movement trajectory, and stores the region data in the region storage unit 103 . to register. For example, when the user draws a pentagon similar to that of the first embodiment, five coordinates can be identified as in the first embodiment. As a result, area data corresponding to area ID #1 in FIG. 8 is generated. Of course, the user may move the cone and draw an irregular area freehand. In that case, area data having the coordinates of the trajectory of the marker may be created and registered in the area storage unit 103 .

以上、説明したように、本実施形態によれば、1つのマーカーで領域を指定可能な構成を得ることができる。もちろん、本実施形態においても、投影制御部102によって投影された領域を見ながら領域の修正を行うことができるので、領域の修正作業を効率よく行うことができる。 As described above, according to this embodiment, it is possible to obtain a configuration in which an area can be specified with one marker. Of course, in the present embodiment as well, the area can be corrected while viewing the area projected by the projection control unit 102, so the area can be corrected efficiently.

[第3の実施形態]
続いて、マーカーとして投影したマーカー(仮想マーカー)を用いるようにした第3の実施形態について図面を参照して詳細に説明する。本発明の第3の実施形態は、第1の実施形態と同様の構成にて実現できるので、以下、その動作上の相違点を中心に説明する。図15は、本発明の第3の実施形態の領域提示システム100の動作を説明するための図である。撮影部107が撮影を開始した状態において、ユーザーが所定のジェスチャーを行うと、図15の左図に示すように、仮想マーカーが表示される。仮想マーカーの表示形態は、一度に複数の仮想マーカーを表示する形態であってもよいし、ユーザーのジェスチャーに応じて、ユーザーの指定位置に1つずつ仮想マーカーを表示する形態であってもよい。
[Third Embodiment]
Next, a third embodiment in which projected markers (virtual markers) are used as markers will be described in detail with reference to the drawings. Since the third embodiment of the present invention can be implemented with a configuration similar to that of the first embodiment, differences in operation thereof will be mainly described below. FIG. 15 is a diagram for explaining the operation of the region presentation system 100 according to the third embodiment of the present invention. When the user performs a predetermined gesture while the imaging unit 107 has started imaging, a virtual marker is displayed as shown in the left diagram of FIG. 15 . The display form of the virtual markers may be a form in which a plurality of virtual markers are displayed at once, or a form in which virtual markers are displayed one by one at positions specified by the user according to the user's gesture. .

そして、領域提示システム100は、投影部106と撮影部107とを用いて、ユーザーの(第2の)ジェスチャーにより、これら仮想マーカーの位置修正インタフェースを提供する。例えば、領域提示システム100は、投影部106と撮影部107とを用いて、図16に示すように、仮想マーカーのドラグ&ドロップ操作にて、仮想マーカーの移動を受け付ける。そして、最終的に、ユーザーが図16の右図に示すように、点(x2,y2)を、点(x2a,y2a)に移動させた領域が特定されることになる。 Then, the area presentation system 100 uses the projection unit 106 and the imaging unit 107 to provide an interface for correcting the positions of these virtual markers according to the user's (second) gesture. For example, the region presentation system 100 uses the projection unit 106 and the imaging unit 107 to receive the movement of the virtual marker by drag-and-drop operation of the virtual marker, as shown in FIG. 16 . Finally, as shown in the right diagram of FIG. 16, the user moves the point (x2, y2) to the point (x2a, y2a) to specify the area.

以上、説明したように、本実施形態によれば、物理的なマーカーを用意しなくても、領域を指定可能な構成を得ることができる。もちろん、本実施形態においても、投影制御部102によって投影された領域を見ながら領域の修正を行うことができるので、領域の修正作業を効率よく行うことができる。また、本実施形態においても、第2の実施形態と同様に、仮想マーカーの移動軌跡を認識して領域を認識する方法も採用可能である。 As described above, according to this embodiment, it is possible to obtain a configuration that allows designation of an area without preparing a physical marker. Of course, in the present embodiment as well, the area can be corrected while viewing the area projected by the projection control unit 102, so the area can be corrected efficiently. Also in the present embodiment, as in the second embodiment, a method of recognizing the movement locus of the virtual marker and recognizing the area can be adopted.

[第4の実施形態]
続いて、作成した領域の結合、分割をなしうるようにした第4の実施形態について図面を参照して詳細に説明する。本発明の第4の実施形態は、第1の実施形態と同様の構成にて実現できるので、以下、その動作上の相違点を中心に説明する。図17は、本発明の第4の実施形態の領域提示システム100の動作を説明するための図である。例えば、図17に示すように、2つの危険領域Z3、Z4が作成済みであるものとする。その状態でユーザーが所定の領域結合操作を行うと、領域提示システム100は、図17の右図に示すように、危険領域Z3、Z4を結合して危険領域Z5を作成する。
[Fourth embodiment]
Next, a detailed description will be given of a fourth embodiment in which created areas can be combined and divided with reference to the drawings. Since the fourth embodiment of the present invention can be implemented with a configuration similar to that of the first embodiment, differences in operation will be mainly described below. FIG. 17 is a diagram for explaining the operation of the region presentation system 100 according to the fourth embodiment of the present invention. For example, as shown in FIG. 17, it is assumed that two dangerous areas Z3 and Z4 have already been created. When the user performs a predetermined area combining operation in that state, the area presentation system 100 combines the dangerous areas Z3 and Z4 to create a dangerous area Z5, as shown in the right diagram of FIG.

図18は、本発明の第4の実施形態の領域提示システム100の別の動作を説明するための図である。例えば、図18に示すように、危険領域Z5が作成済みであるものとする。その状態でユーザーが投影部106の前に立つと、ユーザーが陰になり、図18に示すように危険領域Z5は2つに分割される。その状態で、ユーザーが所定のジェスチャーを行うと、領域提示システム100は、図18の右図に示すように、危険領域Z5を、危険領域Z5-1、Z5-2に分割する。 FIG. 18 is a diagram for explaining another operation of the region presentation system 100 according to the fourth embodiment of the present invention. For example, as shown in FIG. 18, it is assumed that a dangerous area Z5 has already been created. When the user stands in front of the projection unit 106 in this state, the user is shaded, and the dangerous area Z5 is divided into two as shown in FIG. In this state, when the user makes a predetermined gesture, the area presentation system 100 divides the dangerous area Z5 into dangerous areas Z5-1 and Z5-2 as shown in the right diagram of FIG.

以上、説明したように、本実施形態によれば、マーカーの移動を行わなくても、領域の形状を変更可能な構成を得ることができる。さらに、ユーザーの所定のジェスチャーにより、領域提示システム100が、四角形、三角形、円等の基本的な領域図形を提示するようにしてもよい。このようにすることで、これらの図形の結合と分割により、任意の形状の領域を作成する構成が得られる。 As described above, according to this embodiment, it is possible to obtain a configuration in which the shape of the area can be changed without moving the marker. Further, the region presentation system 100 may present basic region graphics such as rectangles, triangles, circles, etc. according to a predetermined gesture of the user. In this way, by combining and dividing these figures, it is possible to obtain a configuration for creating regions of arbitrary shape.

以上、本発明の各実施形態を説明したが、本発明は、上記した実施形態に限定されるものではなく、本発明の基本的技術的思想を逸脱しない範囲で、更なる変形・置換・調整を加えることができる。例えば、各図面に示した装置構成、各要素の構成、データの表現形態は、本発明の理解を助けるための一例であり、これらの図面に示した構成に限定されるものではない。 Although each embodiment of the present invention has been described above, the present invention is not limited to the above-described embodiments, and further modifications, replacements, and adjustments can be made without departing from the basic technical idea of the present invention. can be added. For example, the device configuration, the configuration of each element, and the representation form of data shown in each drawing are examples for helping understanding of the present invention, and are not limited to the configuration shown in these drawings.

上記した各実施形態では、本発明を領域提示システム100の領域の指定に用いた例を挙げて説明したが、同様の構成にて、投影により建物内のラインや模様等の任意の投影像を指定する用途に適用することができる。例えば、建物内のラインを投影する場合、領域提示システム100にマーカー等によって描かれた線を認識させて、投影すればよい。 In each of the above-described embodiments, an example in which the present invention is used to specify the region of the region presentation system 100 has been described. It can be applied to specified uses. For example, when projecting a line inside a building, the region presentation system 100 may be caused to recognize a line drawn with a marker or the like and project it.

また、上記した第1~第4の実施形態に示した手順は、領域提示システム100として機能するコンピュータ(図19の9000)に、領域提示システム100としての機能を実現させるプログラムにより実現可能である。このようなコンピュータは、図19のCPU(Central Processing Unit)9010、通信インタフェース9020、メモリ9030、補助記憶装置9040を備える構成に例示される。すなわち、図19のCPU9010にて、領域認識プログラムや投影制御プログラムを実行し、その補助記憶装置9040等に保持された各計算パラメーターの更新処理を実施させればよい。 Further, the procedures shown in the above-described first to fourth embodiments can be realized by a program that causes the computer (9000 in FIG. 19) functioning as the region presentation system 100 to realize the function as the region presentation system 100. . Such a computer is exemplified by a configuration including a CPU (Central Processing Unit) 9010, a communication interface 9020, a memory 9030, and an auxiliary storage device 9040 in FIG. That is, the CPU 9010 in FIG. 19 may execute the area recognition program and the projection control program to update each calculation parameter held in the auxiliary storage device 9040 or the like.

即ち、上記した各実施形態に示した領域提示システム100の各部(処理手段、機能)は、領域提示システム100に搭載されたプロセッサに、そのハードウェアを用いて、上記した各処理を実行させるコンピュータプログラムにより実現することができる。 That is, each part (processing means, function) of the region presentation system 100 shown in each of the above-described embodiments is a computer that causes the processor mounted in the region presentation system 100 to execute each of the above-described processes using its hardware. It can be implemented by a program.

最後に、本発明の好ましい形態を要約する。
[第1の形態]
(上記第1の視点による投影像指定装置参照)
[第2の形態]
上記した投影像指定装置が認識する前記ユーザーによる図形の描画操作は、
前記ユーザーによる3以上のマーカーの設置操作であり、
前記投影制御部は、前記3以上のマーカーによって区切られる領域を投影する構成を採ることができる。
[第3の形態]
上記した投影像指定装置が認識する前記ユーザーによる図形の描画操作は、
前記ユーザーがマーカーを移動させて領域を囲う操作であり、
前記投影制御部は、前記マーカーの軌跡によって指定された領域を投影する構成を採ることができる。
[第4の形態]
上記した投影像指定装置において、
前記マーカーとして、前記投影装置によって投影された仮想マーカーを用いる構成を採ることができる。
[第5の形態]
上記した投影像指定装置において、
前記図形認識部は、前記ユーザーのジェスチャーによる、前記投影装置によって投影された仮想マーカーに対する操作を認識する構成を採ることができる。
[第6の形態]
上記した投影像指定装置において、
前記図形認識部は、前記ユーザーのジェスチャーとして、前記仮想マーカーの設置、前記仮想マーカーの移動、領域の切断又は領域の結合の少なくとも1つ以上を認識可能な構成を採ることができる。
[第7の形態]
上記した投影像指定装置において、
前記図形認識部は、前記投影された図形を参照したユーザーによる図形の修正操作を認識し、
前記投影制御部は、前記投影装置に対して、前記図形の修正操作を反映した図形の投影を指示する構成を採ることができる。
[第8の形態]
(上記第2の視点による図形投影システム参照)
[第9の形態]
(上記第3の視点による投影像指定方法参照)
[第10の形態]
(上記第4の視点によるプログラム参照)
なお、上記第8~第10の形態は、第1の形態と同様に、第2~第7の形態に展開することが可能である。
Finally, preferred forms of the invention are summarized.
[First form]
(Refer to the projection image designating device from the first viewpoint above.)
[Second form]
The drawing operation of the figure by the user recognized by the projection image designation device is as follows:
An operation of placing three or more markers by the user;
The projection control section can adopt a configuration for projecting the area delimited by the three or more markers.
[Third form]
The drawing operation of the figure by the user recognized by the projection image designation device is as follows:
An operation in which the user moves a marker to enclose an area,
The projection control section can adopt a configuration that projects the area specified by the trajectory of the marker.
[Fourth mode]
In the projection image designation device described above,
A configuration can be adopted in which a virtual marker projected by the projection device is used as the marker.
[Fifth form]
In the projection image designation device described above,
The figure recognition unit may be configured to recognize an operation of the user's gesture on the virtual marker projected by the projection device.
[Sixth form]
In the projection image designation device described above,
The graphic recognition unit can recognize at least one of installation of the virtual marker, movement of the virtual marker, cutting of areas, and joining of areas as the user's gesture.
[Seventh form]
In the projection image designation device described above,
The figure recognition unit recognizes a figure modification operation by a user with reference to the projected figure,
The projection control unit may be configured to instruct the projection device to project a figure reflecting the modification operation of the figure.
[Eighth form]
(Refer to the graphic projection system from the second point of view above)
[Ninth form]
(Refer to the projection image specification method from the third viewpoint above)
[Tenth mode]
(Refer to the program from the fourth viewpoint above)
It should be noted that the above eighth to tenth modes can be developed into second to seventh modes in the same manner as the first mode.

なお、上記の特許文献の各開示を、本書に引用をもって繰り込むものとする。本発明の全開示(請求の範囲を含む)の枠内において、さらにその基本的技術思想に基づいて、実施形態ないし実施例の変更・調整が可能である。また、本発明の開示の枠内において種々の開示要素(各請求項の各要素、各実施形態ないし実施例の各要素、各図面の各要素等を含む)の多様な組み合わせ、ないし選択(部分的削除を含む)が可能である。すなわち、本発明は、請求の範囲を含む全開示、技術的思想にしたがって当業者であればなし得るであろう各種変形、修正を含むことは勿論である。特に、本書に記載した数値範囲については、当該範囲内に含まれる任意の数値ないし小範囲が、別段の記載のない場合でも具体的に記載されているものと解釈されるべきである。 It should be noted that each disclosure of the above patent documents is incorporated herein by reference. Within the framework of the full disclosure of the present invention (including the scope of claims), modifications and adjustments of the embodiments and examples are possible based on the basic technical concept thereof. Also, within the framework of the disclosure of the present invention, various combinations or selections (partial (including targeted deletion) is possible. That is, the present invention naturally includes various variations and modifications that can be made by those skilled in the art according to the entire disclosure including claims and technical ideas. In particular, any numerical range recited herein should be construed as specifically recited for any numerical value or subrange within that range, even if not otherwise stated.

11 撮影装置
12 投影装置
20 投影像指定装置
21 図形認識部
22 投影制御部
100 領域提示システム
101 領域認識部
102 投影制御部
103 領域記憶部
104 監視部
106 投影部
107 撮影部
9000 コンピュータ
9010 CPU
9020 通信インタフェース
9030 メモリ
9040 補助記憶装置
M マーカー
TR1、TR2 三角形
U ユーザー
Z1~Z5、Z5-1、Z5-2 領域
REFERENCE SIGNS LIST 11 photographing device 12 projection device 20 projection image designating device 21 graphic recognition unit 22 projection control unit 100 area presentation system 101 area recognition unit 102 projection control unit 103 area storage unit 104 monitoring unit 106 projection unit 107 imaging unit 9000 computer 9010 CPU
9020 Communication interface 9030 Memory 9040 Auxiliary storage device M Marker TR1, TR2 Triangle U User Z1 to Z5, Z5-1, Z5-2 Area

Claims (9)

所定の範囲を投影可能な投影装置と、前記投影装置の投影可能な範囲を撮影可能な撮影装置と、に接続され、
前記撮影装置にて撮影された画像に基づいて、ユーザーによる3以上のマーカーの設置操作を認識して前記3以上のマーカーのそれぞれの位置を特定して前記3以上のマーカーによって区切られる領域に係る領域データを作成する領域認識部と、
前記領域データに基づいて、前記投影装置に対して、前記認識した前記ユーザーによる前記3以上のマーカーの設置操作に基づいて作成された前記領域の投影を指示する投影制御部と、
を備えた投影像指定装置。
connected to a projection device capable of projecting a predetermined range and a photographing device capable of photographing the projectable range of the projection device;
Based on the image captured by the photographing device, recognizing the operation of placing three or more markers by the user , specifying the positions of each of the three or more markers, and relating to the area delimited by the three or more markers an area recognition unit that creates area data ;
a projection control unit that instructs the projection device , based on the area data , to project the area created based on the installation operation of the three or more markers by the recognized user;
A projection image designation device with a
前記ユーザーによる前記3以上のマーカーの設置操作は、
前記ユーザーが前記マーカーを移動させて前記領域を囲う操作であり、
前記投影制御部は、前記領域データに基づいて、前記投影装置に対して、前記マーカーの軌跡によって指定された前記領域投影を指示する請求項の投影像指定装置。
The installation operation of the three or more markers by the user is
an operation in which the user moves the marker to enclose the area;
2. A projection image designating device according to claim 1 , wherein said projection control unit instructs said projection device to project said region designated by said locus of said marker based on said region data .
前記マーカーが、前記投影装置によって投影された仮想マーカーである請求項1又は2の投影像指定装置。 3. A projection image specifying device according to claim 1 , wherein said marker is a virtual marker projected by said projection device. 前記領域認識部は、前記ユーザーのジェスチャーによる、前記投影装置によって投影された仮想マーカーに対する操作を認識する請求項の投影像指定装置。 4. The projection image designation device according to claim 3 , wherein the area recognition unit recognizes an operation by the user's gesture on the virtual marker projected by the projection device. 前記領域認識部は、前記ユーザーのジェスチャーとして、前記仮想マーカーの設置、前記仮想マーカーの移動、領域の切断又は領域の結合の少なくとも1つ以上を認識可能である請求項の投影像指定装置。 5. The projection image designating device according to claim 4 , wherein said area recognition unit can recognize at least one of installation of said virtual marker, movement of said virtual marker, cutting of areas, and joining of areas as said user's gesture. 前記領域認識部は、前記投影された領域を参照したユーザーによる領域の修正操作を認識し、
前記投影制御部は、前記投影装置に対して、前記領域の修正操作を反映した領域の投影を指示する請求項1からいずれか一の投影像指定装置。
The area recognition unit recognizes an area correction operation by a user with reference to the projected area ,
6. The projection image designation device according to claim 1, wherein the projection control unit instructs the projection device to project the area reflecting the correction operation of the area .
所定の範囲を投影可能な投影装置と、
前記投影装置の投影可能な範囲を撮影可能な撮影装置と、
前記撮影装置にて撮影された画像に基づいて、ユーザーによる3以上のマーカーの設置操作を認識して前記3以上のマーカーのそれぞれの位置を特定して前記3以上のマーカーによって区切られる領域に係る領域データを作成する領域認識部と、
前記領域データに基づいて、前記投影装置に対して、前記認識した前記ユーザーによる前記3以上のマーカーの設置操作に基づいて作成された前記領域の投影を指示する投影制御部と、を備えた投影像指定装置と、
を含む図形投影システム。
a projection device capable of projecting a predetermined range;
a photographing device capable of photographing a projectable range of the projection device;
Based on the image captured by the photographing device, recognizing the operation of placing three or more markers by the user , specifying the positions of each of the three or more markers, and relating to the area delimited by the three or more markers an area recognition unit that creates area data ;
a projection control unit that instructs the projection device , based on the area data , to project the area created based on the installation operation of the three or more markers by the recognized user. an image designator;
Figure projection system including.
所定の範囲を投影可能な投影装置と、前記投影装置の投影可能な範囲を撮影可能な撮影装置と、に接続されたコンピュータが、
前記撮影装置にて撮影された画像に基づいて、ユーザーによる3以上のマーカーの設置操作を認識して前記3以上のマーカーのそれぞれの位置を特定して前記3以上のマーカーによって区切られる領域に係る領域データを作成するステップと、
前記領域データに基づいて、前記投影装置に対して、前記認識した前記ユーザーによる前記3以上のマーカーの設置操作に基づいて作成された前記領域の投影を指示するステップと、
を備えた投影像指定方法。
A computer connected to a projection device capable of projecting a predetermined range and a photographing device capable of photographing the projection range of the projection device,
Based on the image captured by the photographing device, recognizing the operation of placing three or more markers by the user , specifying the positions of each of the three or more markers, and relating to the area delimited by the three or more markers creating regional data ;
a step of instructing the projection device to project the area created based on the installation operation of the three or more markers by the recognized user , based on the area data ;
projection image specification method with
所定の範囲を投影可能な投影装置と、前記投影装置の投影可能な範囲を撮影可能な撮影装置と、に接続されたコンピュータに、
前記撮影装置にて撮影された画像に基づいて、ユーザーによる3以上のマーカーの設置操作を認識して前記3以上のマーカーのそれぞれの位置を特定して前記3以上のマーカーによって区切られる領域に係る領域データを作成する処理と、
前記領域データに基づいて、前記投影装置に対して、前記認識した前記ユーザーによる前記3以上のマーカーの設置操作に基づいて作成された前記領域の投影を指示する処理と、
を実行させるプログラム。
A computer connected to a projection device capable of projecting a predetermined range and a photographing device capable of photographing the projection range of the projection device,
Based on the image captured by the photographing device, recognizing the operation of placing three or more markers by the user , specifying the positions of each of the three or more markers, and relating to the area delimited by the three or more markers a process of creating region data ;
a process of instructing the projection device to project the area created based on the installation operation of the three or more markers by the recognized user , based on the area data ;
program to run.
JP2019004197A 2019-01-15 2019-01-15 PROJECTION IMAGE SPECIFICATION DEVICE, GRAPHIC PROJECTION SYSTEM, PROJECTION IMAGE SPECIFICATION METHOD AND PROGRAM Active JP7255842B2 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2019004197A JP7255842B2 (en) 2019-01-15 2019-01-15 PROJECTION IMAGE SPECIFICATION DEVICE, GRAPHIC PROJECTION SYSTEM, PROJECTION IMAGE SPECIFICATION METHOD AND PROGRAM
JP2023040760A JP2023099364A (en) 2019-01-15 2023-03-15 Designation device, system, designation method, and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2019004197A JP7255842B2 (en) 2019-01-15 2019-01-15 PROJECTION IMAGE SPECIFICATION DEVICE, GRAPHIC PROJECTION SYSTEM, PROJECTION IMAGE SPECIFICATION METHOD AND PROGRAM

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2023040760A Division JP2023099364A (en) 2019-01-15 2023-03-15 Designation device, system, designation method, and program

Publications (2)

Publication Number Publication Date
JP2020113102A JP2020113102A (en) 2020-07-27
JP7255842B2 true JP7255842B2 (en) 2023-04-11

Family

ID=71667089

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2019004197A Active JP7255842B2 (en) 2019-01-15 2019-01-15 PROJECTION IMAGE SPECIFICATION DEVICE, GRAPHIC PROJECTION SYSTEM, PROJECTION IMAGE SPECIFICATION METHOD AND PROGRAM
JP2023040760A Pending JP2023099364A (en) 2019-01-15 2023-03-15 Designation device, system, designation method, and program

Family Applications After (1)

Application Number Title Priority Date Filing Date
JP2023040760A Pending JP2023099364A (en) 2019-01-15 2023-03-15 Designation device, system, designation method, and program

Country Status (1)

Country Link
JP (2) JP7255842B2 (en)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005275327A (en) 2003-09-19 2005-10-06 Fuji Electric Systems Co Ltd Projection display device
JP2012256270A (en) 2011-06-10 2012-12-27 Sony Corp Information processor, program, and information processing method
JP2013175216A (en) 2013-04-17 2013-09-05 Casio Comput Co Ltd Electronic apparatus and program
JP2014149614A (en) 2013-01-31 2014-08-21 Toshiba Corp Electronic apparatus and handwritten document processing method
JP2018074528A (en) 2016-11-02 2018-05-10 キヤノン株式会社 Information processing system and component apparatus thereof, and method for monitoring real space
JP2018072495A (en) 2016-10-27 2018-05-10 セイコーエプソン株式会社 Projector, projection system, and detection light irradiation unit

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005275327A (en) 2003-09-19 2005-10-06 Fuji Electric Systems Co Ltd Projection display device
JP2012256270A (en) 2011-06-10 2012-12-27 Sony Corp Information processor, program, and information processing method
JP2014149614A (en) 2013-01-31 2014-08-21 Toshiba Corp Electronic apparatus and handwritten document processing method
JP2013175216A (en) 2013-04-17 2013-09-05 Casio Comput Co Ltd Electronic apparatus and program
JP2018072495A (en) 2016-10-27 2018-05-10 セイコーエプソン株式会社 Projector, projection system, and detection light irradiation unit
JP2018074528A (en) 2016-11-02 2018-05-10 キヤノン株式会社 Information processing system and component apparatus thereof, and method for monitoring real space

Also Published As

Publication number Publication date
JP2023099364A (en) 2023-07-12
JP2020113102A (en) 2020-07-27

Similar Documents

Publication Publication Date Title
JP6429545B2 (en) Control device and control method
EP1694072A1 (en) Surveillance system for masking privacy zone and method of setting mask zone
JP2011051403A (en) Parking support system
JP2018205506A (en) Projection device, control method thereof, and program
JP6079695B2 (en) Image display photographing system, photographing device, display device, image display and photographing method, and computer program
JP7255842B2 (en) PROJECTION IMAGE SPECIFICATION DEVICE, GRAPHIC PROJECTION SYSTEM, PROJECTION IMAGE SPECIFICATION METHOD AND PROGRAM
JP2002297119A (en) Device and system for image display
JP6576117B2 (en) Projection apparatus, program, and control method
JP7114049B2 (en) Image processing device and image processing program
JP6117470B2 (en) Display device, projector, image display method, and display system
JP5742379B2 (en) Projection system and projection method
JP5963571B2 (en) Image display device and surveillance camera system
JP2004177614A (en) Multi-screen display device
JP2012058353A (en) Image display device and control method thereof
JP2019110373A (en) Projection apparatus and control method thereof
JP6784199B2 (en) Image processing device
WO2023224031A1 (en) Information processing method, information processing device, and information processing program
JP7239138B2 (en) INFORMATION DISPLAY DEVICE, INFORMATION DISPLAY METHOD AND PROGRAM
WO2010125638A1 (en) Camera symbol display device and computer program
WO2023224036A1 (en) Information processing method, information processing device, and information processing program
US11908353B2 (en) Information processing apparatus and information processing system
JP2005141695A (en) Monitoring system
US20230125097A1 (en) Photography support device and method, and computer-readable storage medium
JP2021009265A (en) Information processing device, information processing method, and program
JP2010117465A (en) Information processing device, information processing system and program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20211202

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20220930

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20221004

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20221024

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230228

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230323

R151 Written notification of patent or utility model registration

Ref document number: 7255842

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151