JP5549631B2 - Portable setting terminal and monitoring system - Google Patents

Portable setting terminal and monitoring system Download PDF

Info

Publication number
JP5549631B2
JP5549631B2 JP2011077730A JP2011077730A JP5549631B2 JP 5549631 B2 JP5549631 B2 JP 5549631B2 JP 2011077730 A JP2011077730 A JP 2011077730A JP 2011077730 A JP2011077730 A JP 2011077730A JP 5549631 B2 JP5549631 B2 JP 5549631B2
Authority
JP
Japan
Prior art keywords
image
boundary
real space
unit
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2011077730A
Other languages
Japanese (ja)
Other versions
JP2012213042A (en
Inventor
裕一 伊東
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Denso Wave Inc
Original Assignee
Denso Wave Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Denso Wave Inc filed Critical Denso Wave Inc
Priority to JP2011077730A priority Critical patent/JP5549631B2/en
Publication of JP2012213042A publication Critical patent/JP2012213042A/en
Application granted granted Critical
Publication of JP5549631B2 publication Critical patent/JP5549631B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Description

本発明は、監視システムで用いる携帯型設定端末及び監視システムに関するものである。   The present invention relates to a portable setting terminal and a monitoring system used in a monitoring system.

従来より、レーザレーダ装置等の監視装置を用いた監視システムが提供されている。例えば、特許文献1の監視システムでは、監視対象となる空間においてレーザ光による走査を行い、このレーザ光が物体に照射されたときの当該物体からの反射光を受光手段によって検出することで物体検出を行っている。さらに、この監視システムでは、物体に照射されるときのレーザ光の向き、及びレーザ光の投射から反射光の受光までに要した時間に基づいて、空間内における検出物体の位置を把握しており、この位置が、予め設定された監視範囲内にある場合に、侵入物として検出している。   Conventionally, a monitoring system using a monitoring device such as a laser radar device has been provided. For example, in the monitoring system of Patent Document 1, scanning with a laser beam is performed in a space to be monitored, and object detection is performed by detecting reflected light from the object when the laser beam is irradiated on the object by a light receiving unit. It is carried out. Furthermore, in this monitoring system, the position of the detected object in the space is grasped based on the direction of the laser beam when the object is irradiated and the time required from the projection of the laser beam to the reception of the reflected light. When this position is within a preset monitoring range, it is detected as an intruder.

特開平7−160956号公報JP-A-7-160956

ところで、上記監視システムでは、監視装置によって物体を監視する前に、空間内のどのエリアを監視対象とするかを予め登録しておく必要があり、所望の領域に正確且つ簡易に監視エリアを設定可能であることが求められている。   By the way, in the above monitoring system, it is necessary to register in advance which area in the space is to be monitored before the object is monitored by the monitoring device, and the monitoring area can be accurately and easily set in a desired area. It is required to be possible.

例えば、レーザレーダ装置を用いた監視システムでは、レーザ光を投射する性質上、何ら条件を設定せずに物体検出を行おうとすると、レーザ光が届く範囲に存在する物体を全て検出してしまうことになため、一般的には、装置から一定距離に至るまでの範囲(例えば、単純な円状或いは扇状の範囲)を監視エリアとして定め、装置からの距離が一定距離を超えている物体については、エリア外の物体として無視するといった手法が採られている。   For example, in a monitoring system using a laser radar device, due to the property of projecting laser light, if an object detection is performed without setting any conditions, all objects existing within the range that the laser light can reach are detected. Therefore, in general, a range from a device to a certain distance (for example, a simple circular or fan-shaped range) is defined as a monitoring area, and for an object whose distance from the device exceeds a certain distance, The method of ignoring it as an object outside the area is employed.

しかしながら、住宅や施設の敷地内で不審者を監視するシステム、或いは、工場内で稼働する装置付近で作業者の装置への近接を監視するシステムなどでは、監視エリアをより複雑な範囲形状に設定することが求められる場合がある。例えば、住宅の庭などに監視エリアを設定する場合、庭内の固定物(木、柵、その他の外構物、建物の出っ張り等)が検出されてしまわないようにこれら固定物を避けてエリアを設定する必要があり、且つ、敷地外(庭外)を通る人などがその都度検出されてしまわないように、敷地外が監視エリアとならないように設定する必要がある。その上で、敷地内における検出不能領域が極力少なくなるように、敷地の形状や固体物の位置に合わせて監視エリアを複雑に設定することが要望される。   However, in a system that monitors suspicious persons on the premises of a house or facility, or a system that monitors the proximity of workers to equipment in the vicinity of equipment operating in the factory, the monitoring area is set to a more complicated range shape. May be required to do. For example, when setting a monitoring area in a garden of a house, avoid these fixed objects so that fixed objects in the garden (trees, fences, other external structures, ledges of buildings, etc.) are not detected. It is necessary to set so that the outside of the site does not become a monitoring area so that a person passing through the outside of the site (outside the garden) is not detected each time. In addition, it is desired to set the monitoring area in a complicated manner according to the shape of the site and the position of the solid object so that the undetectable area in the site is minimized.

このような要望に対し、特許文献1では、作業者に予め距離や角度を具体的に入力させ、その入力データを反映して境界位置を設定するように監視エリアを規定するといった方法を用いている。このような方法を用いると、監視エリアを単純な形状(例えば円状、扇状等)に設定する場合と比較して、作業者が、ある程度は範囲を調整することが可能となり、監視エリアを実環境に適合させやすくなる。   In response to such a request, Patent Document 1 uses a method in which an operator specifically inputs a distance and an angle in advance and defines a monitoring area so as to set a boundary position reflecting the input data. Yes. By using such a method, it becomes possible for the operator to adjust the range to some extent compared with the case where the monitoring area is set to a simple shape (for example, circular shape, fan shape, etc.). Easy to adapt to the environment.

しかしながら、特許文献1の方法では、検出エリアを設定するためのデータの準備や設定装置の準備、或いはデータ入力作業等、相当の労力を要することが懸念される。特に、検出エリアを複雑に設定する場合には、より細かな条件設定が必要となり、膨大なデータを用意しなければならなくなる。このような方法では、データの準備やデータ入力の負荷が極めて大きくなってしまい、どの程度の設定値を用いるかといった判断には相当の熟練度が要求される。   However, in the method of Patent Document 1, there is a concern that considerable labor is required such as data preparation for setting a detection area, preparation of a setting device, or data input work. In particular, when the detection area is set in a complicated manner, more detailed condition setting is required, and a huge amount of data must be prepared. In such a method, the load of data preparation and data input becomes extremely large, and a considerable degree of skill is required for the determination of how much set value to use.

また、特許文献1の方法は、コンピュータなどの情報処理装置を用い、単純に距離や角度を入力することによって所望のエリアを設定しようとするものであり、どの程度の入力値が実環境に照らして妥当であるかを判断する基準を得ることが難しい。従って、このような方法では、実環境に細かく適合させるように監視エリアを設定することは容易ではなく、例えば、入力値が妥当でないために、設定された監視エリアが実環境で要望される境界位置から大幅にずれてしまうといった事態が生じやすく、このような場合には、入力値の設定変更作業や実機での確認作業を何回も繰り返す必要が生じる。   The method of Patent Document 1 uses an information processing device such as a computer to try to set a desired area by simply inputting a distance and an angle. It is difficult to obtain a standard for judging whether it is appropriate. Therefore, in such a method, it is not easy to set the monitoring area so as to be finely adapted to the actual environment. For example, since the input value is not valid, the set monitoring area is a boundary that is desired in the actual environment. It is likely that the position will be greatly deviated from the position. In such a case, it is necessary to repeat the input value setting change operation and the confirmation operation with the actual machine many times.

本発明は、上述した課題を解決するためになされたものであり、熟練度にそれほど依存することなく、且つ複雑なデータ入力作業を伴うことなく、監視エリアを所望の位置により正確に設定することが可能な携帯型設定端末及び監視システムを提供することを目的とする。   The present invention has been made to solve the above-described problems, and accurately sets a monitoring area at a desired position without depending on skill level and without complicated data input work. It is an object of the present invention to provide a portable setting terminal and a monitoring system capable of performing the above.

上記目的を達成するため、請求項1の発明は、
実空間に設定された監視エリア内を監視する監視システムに用いられ、前記監視エリアを設定変更可能に構成された携帯型設定端末であって、
前記実空間に設定される前記監視エリアの境界位置データを登録する登録手段と、
当該携帯型設定端末における所定方向を撮像方向とするように、前記実空間の画像を撮像する撮像手段、
前記撮像手段による前記撮像方向又は当該撮像方向と一定関係で定められた所定方向の前記実空間内での向きを検出可能な方向検出手段と、
当該携帯型設定端末の実空間内での座標を検出する座標検出手段と、
前記登録手段に登録された前記境界位置データと、前記方向検出手段によって検出された前記撮像方向又は前記所定方向の前記実空間内での向きと、前記座標検出手段によって検出された当該携帯型設定端末の前記実空間内での前記座標と、に基づき、前記撮像手段によって撮像された前記実空間の画像に対し当該画像内の前記境界位置データで特定される位置に境界画像を組み込んで合成画像を生成する合成画像生成手段と、
前記合成画像生成手段によって生成された前記合成画像を表示する表示手段と、
外部からの入力操作を受け付ける入力手段と、
前記入力手段において前記境界画像の一部を指定する所定の指定操作がなされたときに、前記表示手段に表示される前記境界画像においてその指定位置を検出する指定位置検出手段と、
前記入力手段において前記境界画像の変更位置を指示する所定の指示操作がなされたことを検出する指示操作検出手段と、
前記指示操作検出手段によって前記指示操作が検出されたときに、前記指定位置検出手段によって検出された前記指定位置を、前記指示操作検出手段によって検出された前記指示操作での指示位置に変更するように前記境界位置データを再生成する再生成手段と、
前記再生成手段によって再生成された前記境界位置データを出力する出力手段と、
を備えたことを特徴とする。
In order to achieve the above object, the invention of claim 1
A portable setting terminal used in a monitoring system for monitoring a monitoring area set in a real space and configured to change the setting of the monitoring area,
Registration means for registering boundary position data of the monitoring area set in the real space;
An imaging means for imaging an image of the real space so that a predetermined direction in the portable setting terminal is an imaging direction;
Direction detecting means capable of detecting a direction in the real space of the imaging direction by the imaging means or a predetermined direction defined in a fixed relationship with the imaging direction;
Coordinate detection means for detecting coordinates in real space of the portable setting terminal;
The boundary position data registered in the registration unit, the imaging direction detected by the direction detection unit or the orientation of the predetermined direction in the real space, and the portable setting detected by the coordinate detection unit Based on the coordinates in the real space of the terminal, a composite image obtained by incorporating a boundary image at a position specified by the boundary position data in the image with respect to the image in the real space captured by the imaging unit Synthetic image generation means for generating
Display means for displaying the composite image generated by the composite image generation means;
An input means for accepting external input operations;
Designated position detecting means for detecting the designated position in the boundary image displayed on the display means when a predetermined designation operation for designating a part of the boundary image is performed in the input means;
Instruction operation detecting means for detecting that a predetermined instruction operation for instructing a change position of the boundary image is performed in the input means;
When the instruction operation is detected by the instruction operation detection means, the designated position detected by the designated position detection means is changed to an instruction position in the instruction operation detected by the instruction operation detection means. Regenerating means for regenerating the boundary position data;
Output means for outputting the boundary position data regenerated by the regenerating means;
It is provided with.

請求項1の発明に係る携帯型設定端末には、合成画像生成手段が設けられており、この合成画像生成手段は、登録手段に登録された境界位置データと、方向検出手段によって検出された撮像方向又は所定方向の実空間内での向きと、座標検出手段によって検出された当該携帯型設定端末の実空間内での座標と、に基づき、撮像手段によって撮像された実空間の画像に対し当該画像内の境界位置データで特定される位置に境界画像を組み込んで合成画像を生成している。そして、表示手段がこの生成された合成画像を表示するように構成されている。
この構成では、端末内において当該端末の座標と撮像手段の撮像方向とを特定することができるため、得られた撮像画像(実空間の画像)内の各位置の座標(実空間内での座標)を特定できるようになる。従って、境界位置データによって特定される位置に境界画像をより正確に組み込んで合成画像を生成し、これを表示できるようになる。これにより、実空間内のどの位置に境界が設定されるかを、実空間内に存在する物と合わせて視覚的に把握できるようになり、特別なデータ解析等を行わずとも実空間内において境界が適切な位置に設定されているか否かを判断できるようになる。
更に、入力手段において境界画像の一部を指定する所定の指定操作がなされたときに、表示手段に表示される境界画像においてその指定位置を検出する指定位置検出手段と、入力手段において境界画像の変更位置を指示する所定の指示操作がなされたことを検出する指示操作検出手段とが設けられており、再生成手段は、指示操作検出手段によって指示操作が検出されたときに、指定位置検出手段によって検出された指定位置を、指示操作検出手段によって検出された指示操作での指示位置に変更するように境界位置データを再生成している。そして、この再生成された境界位置データが出力手段によって出力されるようになっている。
この構成では、実空間の画像と共に境界位置を具体的に把握しながら、境界位置を部分的に変更したい場合には、境界画像においてその位置を指定すると共に変更位置を指示することで、所望の位置に簡単に設定変更することができる。従って、熟練度にそれほど依存することなく、且つ複雑なデータ入力作業を伴うことなく、監視エリアを所望の位置により正確に設定することが可能となる。
The portable setting terminal according to the invention of claim 1 is provided with a composite image generating means, and this composite image generating means is the boundary position data registered in the registration means and the imaging detected by the direction detecting means. Based on the direction or direction in the real space of the predetermined direction and the coordinates in the real space of the portable setting terminal detected by the coordinate detection unit, the image of the real space captured by the imaging unit A combined image is generated by incorporating a boundary image at a position specified by boundary position data in the image. Then, the display means is configured to display the generated composite image.
In this configuration, since the coordinates of the terminal and the imaging direction of the imaging means can be specified in the terminal, the coordinates of each position (the coordinates in the real space) in the obtained captured image (the real space image) ) Can be specified. Therefore, it is possible to generate a composite image by more accurately incorporating the boundary image at the position specified by the boundary position data and display it. As a result, it is possible to visually grasp where the boundary is set in the real space together with the objects existing in the real space, and in the real space without performing special data analysis etc. It becomes possible to determine whether or not the boundary is set to an appropriate position.
Further, when a predetermined designation operation for designating a part of the boundary image is performed in the input unit, a designated position detection unit that detects the designated position in the boundary image displayed on the display unit, and Instruction operation detecting means for detecting that a predetermined instruction operation for indicating a change position has been performed, and the regenerating means is a designated position detecting means when the instruction operation is detected by the instruction operation detecting means. The boundary position data is regenerated so as to change the designated position detected by the instruction operation detection means to the instruction position in the instruction operation detected by the instruction operation detection means. The regenerated boundary position data is output by the output means.
In this configuration, when it is desired to partially change the boundary position while specifically grasping the boundary position together with the image in the real space, the position is specified in the boundary image and the change position is indicated, thereby specifying a desired position. The setting can be easily changed to the position. Therefore, the monitoring area can be accurately set according to a desired position without depending on the skill level so much and without complicated data input work.

請求項2の発明において、再生成手段は、指示操作検出手段によって指示操作が検出されたときの座標検出手段による検出結果に基づき、指示操作時の当該携帯型設定端末の実空間での座標を特定し、指定位置検出手段によって検出された境界画像の指定位置を、その特定された座標位置に変更するように境界位置データを再生成している。
この構成では、境界画像において変更すべき位置を指定した後に、所望の位置に端末を移動させて指示操作を行えば、その指示位置を新たな境界として再設定することができる。従って、設定作業に慣れていない者であっても、実空間内の実際の位置を把握しながら、実空間内の所望の位置に正確に且つ容易に境界を設定することができる。
In the invention of claim 2, the regenerating means calculates the coordinates in the real space of the portable setting terminal at the time of the instruction operation based on the detection result by the coordinate detection means when the instruction operation is detected by the instruction operation detecting means. The boundary position data is regenerated so that the specified position of the boundary image detected by the specified position detecting means is changed to the specified coordinate position.
In this configuration, when the position to be changed in the boundary image is designated and then the terminal is moved to a desired position and an instruction operation is performed, the indicated position can be reset as a new boundary. Therefore, even a person who is not accustomed to setting work can accurately and easily set a boundary at a desired position in the real space while grasping the actual position in the real space.

請求項3の発明において、表示手段は、合成画像を表示可能な表示部と、表示部を覆う操作パネルとを備えたタッチパネルからなり、操作パネルが入力手段として構成されている。
そして、指定位置検出手段は、表示部に合成画像が表示された状態で操作パネルにおいて境界画像の位置が押圧されたときに、境界画像におけるその押圧位置を指定位置として検出し、再生成手段は、指定位置検出手段により指定位置が検出された後に操作パネルに対して所定の解除操作が行われたときに、座標検出手段による検出結果に基づき、解除操作時の当該携帯型設定端末の実空間での座標を特定し、指定位置検出手段によって検出された指定位置を、その特定された座標位置に変更するように境界位置データを再生成している。
この構成では、実空間の画像と共に表示された境界画像において、変更すべき部分をタッチパネルで視認しながら当該タッチパネル上での押圧操作によって簡単に指定することができる。また、このような指定の後には、所望の位置に端末を移動させてタッチパネル上で解除操作を行えば良く、これにより、その解除操作時の位置(座標)を新たな境界位置として簡単に再設定することができる。
According to a third aspect of the present invention, the display means comprises a touch panel including a display section capable of displaying a composite image and an operation panel covering the display section, and the operation panel is configured as an input means.
The designated position detecting means detects the pressed position in the boundary image as the designated position when the position of the boundary image is pressed on the operation panel in a state where the composite image is displayed on the display unit, and the regeneration means When the predetermined release operation is performed on the operation panel after the specified position is detected by the specified position detection unit, the real space of the portable setting terminal at the time of the release operation based on the detection result by the coordinate detection unit The boundary position data is regenerated so as to change the designated position detected by the designated position detecting means to the specified coordinate position.
In this configuration, in the boundary image displayed together with the image in the real space, the portion to be changed can be easily designated by a pressing operation on the touch panel while visually recognizing the portion to be changed. After such designation, the terminal may be moved to a desired position and a release operation may be performed on the touch panel. With this, the position (coordinates) at the time of the release operation can be easily reset as a new boundary position. Can be set.

請求項4の発明において、表示手段は、合成画像を表示可能な表示部と、表示部を覆う操作パネルとを備えたタッチパネルからなり、操作パネルが入力手段として構成されている。また、指定位置検出手段は、表示部に合成画像が表示された状態で操作パネルにおいて境界画像の位置が押圧されたときに、境界画像におけるその押圧位置を指定位置として検出する構成をなしている。更に、撮像手段は、指定位置検出手段によって指定位置が検出された後に、当該携帯型設定端末の位置又は向きが変化した場合に、その変化後の所定方向を撮像方向とするように実空間の画像の撮像を繰り返すように構成され、表示部は、撮像手段によって繰り返し取得される撮像画像を逐次更新表示するように構成されている。
そして、再生成手段は、指定位置検出手段により指定位置が検出された後に、表示部にて更新表示される実空間の撮像画像内の位置を指定するように操作パネルによって解除操作が行われたときに、その指定された位置の実空間での座標を特定し、指定位置検出手段によって検出された指定位置を、その特定された座標位置に変更するように境界位置データを再生成するように構成されている。
この構成では、実空間の画像と共に表示された境界画像において、変更すべき部分をタッチパネルで視認しながら当該タッチパネル上での押圧操作によって簡単に指定することができる。また、このような指定の後には、端末を所望の位置或いは向きに変更し、更新表示される画面上の希望する位置を指示するように解除操作を行えば、その指示された画面上の位置を新たな境界位置として簡単に再設定することができる。
According to a fourth aspect of the present invention, the display means includes a touch panel including a display unit capable of displaying a composite image and an operation panel covering the display unit, and the operation panel is configured as an input unit. The designated position detecting means is configured to detect the pressed position in the boundary image as the designated position when the position of the boundary image is pressed on the operation panel in a state where the composite image is displayed on the display unit. . Furthermore, when the position or orientation of the portable setting terminal is changed after the designated position is detected by the designated position detecting means, the imaging means is configured so that the predetermined direction after the change is the imaging direction. The imaging unit is configured to repeat image capturing, and the display unit is configured to sequentially update and display captured images repeatedly acquired by the imaging unit.
Then, after the designated position is detected by the designated position detecting means, the regeneration means is operated by the operation panel so as to designate the position in the captured image of the real space that is updated and displayed on the display unit. Sometimes, the coordinates of the designated position in the real space are specified, and the boundary position data is regenerated so as to change the designated position detected by the designated position detection means to the specified coordinate position. It is configured.
In this configuration, in the boundary image displayed together with the image in the real space, the portion to be changed can be easily designated by a pressing operation on the touch panel while visually recognizing the portion to be changed. After such designation, if the terminal is changed to a desired position or orientation and a release operation is performed so as to indicate the desired position on the screen to be updated and displayed, the position on the indicated screen Can be easily reset as a new boundary position.

請求項5の発明には、レーザレーダ装置を通信対象として通信を行う通信手段が設けられており、この通信手段が出力手段として構成されている。
そして、登録手段は、通信手段がレーザレーダ装置からデータを受信した場合に、その受信したデータに基づいて境界位置データを登録し、通信手段は、再生成手段によって境界位置データが再生成された場合に、その再生成された境界位置データをレーザレーダ装置に出力するように構成されている。
この構成によれば、レーザレーダ装置で設定されている監視エリアのデータを携帯型設定端末に展開して実画像と共に表示することができ、更に、上記手法を用いて当該監視エリアのデータを所望の内容に再生成することができる。また、端末にて監視エリアを再生成した後には、この再生後のデータをレーザレーダ装置に展開することができるため、レーザレーダ装置内で複雑な設定作業を行わずとも、監視エリアを所望のエリア構成とするように容易に調整することができる。
The invention of claim 5 is provided with a communication means for performing communication with the laser radar device as a communication object, and this communication means is configured as an output means.
When the communication means receives data from the laser radar device, the registration means registers the boundary position data based on the received data, and the communication means regenerates the boundary position data by the regeneration means. In this case, the regenerated boundary position data is output to the laser radar device.
According to this configuration, the monitoring area data set in the laser radar device can be developed on the portable setting terminal and displayed together with the actual image, and further, the monitoring area data can be obtained using the above method. Can be regenerated to the contents of In addition, after the monitoring area is regenerated at the terminal, the reproduced data can be expanded to the laser radar apparatus. Therefore, the monitoring area can be set to a desired area without performing complicated setting work in the laser radar apparatus. It can be easily adjusted to an area configuration.

請求項6の発明は、合成画像に組み合わせる候補画像を記憶する候補画像記憶手段と、候補画像記憶手段から候補画像を選択する選択手段とを備えている。そして、合成画像生成手段は、撮像手段によって撮像された実空間の画像に対し、当該画像内の境界位置データで特定される位置に境界画像を組み込み、且つ選択手段で選択された候補画像を組み込んで合成画像を生成している。そして、表示手段により、候補画像が組み込まれた合成画像が表示された状態で、入力手段における指定操作及び指示操作が可能とされている。
この構成では、実際に存在しない物体等を実空間の画像に組み込んだ状態で境界位置を調整すること可能となる。従って、実空間に物体が存在している状態では端末の設定作業(物体付近への移動等)が難しいような環境(例えば、工場内で稼働するロボットの近傍に監視エリアを設定する場合)において、当該物体を想定した境界設定を行う場合に特に有利となる。
The invention of claim 6 comprises candidate image storage means for storing candidate images to be combined with the composite image, and selection means for selecting candidate images from the candidate image storage means. The composite image generation means incorporates the boundary image into the position specified by the boundary position data in the image and the candidate image selected by the selection means with respect to the real space image captured by the imaging means. A composite image is generated. And the designation | designated operation and instruction | indication operation in an input means are enabled in the state by which the composite image in which the candidate image was integrated was displayed by the display means.
In this configuration, it is possible to adjust the boundary position in a state where an object that does not actually exist is incorporated in an image in real space. Therefore, in an environment where it is difficult to set up the terminal (moving to the vicinity of the object, etc.) when an object exists in real space (for example, when setting a monitoring area in the vicinity of a robot operating in a factory) This is particularly advantageous when performing boundary setting assuming the object.

請求項7の発明によれば、請求項1と同様の効果を奏する監視システムを実現できる。   According to the seventh aspect of the present invention, a monitoring system having the same effect as that of the first aspect can be realized.

図1は、第1実施形態に係る監視システムの電気的構成を例示するブロック図である。FIG. 1 is a block diagram illustrating the electrical configuration of the monitoring system according to the first embodiment. 図2は、図1の監視システムで用いられるレーザレーダ装置を概略的に例示する断面図である。FIG. 2 is a cross-sectional view schematically illustrating a laser radar device used in the monitoring system of FIG. 図3は、携帯型設定端末で行われる境界位置データ更新処理の流れを例示するフローチャートである。FIG. 3 is a flowchart illustrating the flow of boundary position data update processing performed in the portable setting terminal. 図4は、実空間内に位置する携帯型設定端末を、監視エリアの実空間内での領域構成と共に概念的に説明する説明図である。FIG. 4 is an explanatory diagram for conceptually explaining the portable setting terminal located in the real space together with the region configuration in the real space of the monitoring area. 図5は、携帯型設定端末が実空間内において所望の位置(更新対象位置)に移動した様子を示す説明図である。FIG. 5 is an explanatory diagram showing a state where the portable setting terminal has moved to a desired position (update target position) in the real space. 図6(A)は、監視エリア内で実空間を撮像しているときに表示部に表示される画像を例示する説明図である。図6(B)は、図5のように移動して更新した後の撮像画像を例示する説明図である。FIG. 6A is an explanatory diagram illustrating an image displayed on the display unit when the real space is imaged in the monitoring area. FIG. 6B is an explanatory diagram illustrating the captured image after moving and updating as shown in FIG. 図7は、更新された境界位置データに基づいて設定される監視エリアを概念的に説明する説明図である。FIG. 7 is an explanatory diagram conceptually illustrating a monitoring area set based on updated boundary position data. 図8(A)は、図4のように設定される監視エリアの各頂点の座標を概念的に説明する説明図であり、図8(B)は、図5のように更新された後に設定される監視エリアの各頂点の座標を概念的に説明する説明図である。FIG. 8A is an explanatory diagram conceptually illustrating the coordinates of each vertex of the monitoring area set as shown in FIG. 4, and FIG. 8B is set after being updated as shown in FIG. It is explanatory drawing which illustrates notionally the coordinate of each vertex of the monitoring area to be performed. 図9(A)は、図4のように設定される監視エリア内を撮像した場合に、撮像画像内に物体画像を組み込んで表示する例を示す説明図である。図9(B)は、撮像画像内に物体画像を組み込んで表示しながら、図5のように更新する場合の表示例を示す説明図である。FIG. 9A is an explanatory diagram illustrating an example in which an object image is incorporated and displayed in the captured image when the inside of the monitoring area set as illustrated in FIG. 4 is captured. FIG. 9B is an explanatory diagram illustrating a display example when updating is performed as illustrated in FIG. 5 while an object image is incorporated and displayed in a captured image. 図10(A)は、図4のように設定される監視エリア内を撮像した場合に、撮像画像内に物体画像を組み込んで表示する例を示す説明図である。図10(B)は、図10(A)から更に新たな監視エリアを追加する場合を示す説明図である。FIG. 10A is an explanatory diagram illustrating an example in which an object image is incorporated and displayed in a captured image when the inside of the monitoring area set as illustrated in FIG. 4 is captured. FIG. 10B is an explanatory diagram showing a case where a new monitoring area is further added from FIG.

[第1実施形態]
以下、本発明を具現化した第1実施形態について、図面を参照して説明する。
(監視システムの概要)
まず、図1を参照し、第1実施形態に係る監視システムについて概説する。なお、図1は、第1実施形態に係る監視システムの電気的構成を例示するブロック図である。
監視システム1は、実空間に設定された監視エリア内をレーザレーダ装置2によって監視するシステムとして構成されており、主として、レーザレーダ装置2と携帯型設定端末100によって構成されている。レーザレーダ装置2は、後述する走査手段によってレーザ光を横方向に走査し得るものであり、記憶部72(記憶手段)に記憶されたデータ(監視エリアの境界位置を定めるデータ)に基づいて設定される監視エリア内で物体検出を行うように構成されている。また、携帯型設定端末100は、レーザレーダ装置2と通信を行う通信部102(通信手段)を有し、レーザレーダ装置2に記憶されたデータ(監視エリアの境界位置を定めるデータ)を更新する更新データを生成可能に構成されている。
[First embodiment]
Hereinafter, a first embodiment embodying the present invention will be described with reference to the drawings.
(Overview of monitoring system)
First, the monitoring system according to the first embodiment will be outlined with reference to FIG. FIG. 1 is a block diagram illustrating the electrical configuration of the monitoring system according to the first embodiment.
The monitoring system 1 is configured as a system that monitors the monitoring area set in the real space with the laser radar device 2, and mainly includes the laser radar device 2 and the portable setting terminal 100. The laser radar device 2 can scan the laser beam in the horizontal direction by a scanning unit described later, and is set based on data stored in the storage unit 72 (storage unit) (data for determining the boundary position of the monitoring area). The object is detected in the monitored area. The portable setting terminal 100 includes a communication unit 102 (communication means) that communicates with the laser radar device 2 and updates data stored in the laser radar device 2 (data that determines the boundary position of the monitoring area). The update data can be generated.

(レーザレーダ装置)
図2は、図1の監視システムで用いられるレーザレーダ装置を概略的に例示する断面図である。図2に示すように、レーザレーダ装置2は、レーザダイオード10と、検出物体からの反射光L2を受光するフォトダイオード20とを備え、検出物体までの距離や方位を検出する装置として構成されている。
(Laser radar device)
FIG. 2 is a cross-sectional view schematically illustrating a laser radar device used in the monitoring system of FIG. As shown in FIG. 2, the laser radar device 2 includes a laser diode 10 and a photodiode 20 that receives the reflected light L2 from the detection object, and is configured as a device that detects the distance and direction to the detection object. Yes.

レーザダイオード10は、例えば公知のレーザダイオードによって構成されている。このレーザダイオード10は、図示しない駆動回路からパルス電流の供給を受け、このパルス電流に応じてパルスレーザ光(レーザ光L1)を所定間隔おきに間欠的に投光するものである。   The laser diode 10 is constituted by, for example, a known laser diode. The laser diode 10 is supplied with a pulse current from a drive circuit (not shown) and intermittently projects a pulse laser beam (laser beam L1) at predetermined intervals according to the pulse current.

フォトダイオード20は、例えば、アバランシェフォトダイオード等の公知のフォトダイオードで構成されており、レーザダイオード10からレーザ光L1が発生したときに、このレーザ光L1が外部空間に存在する物体で反射した反射光L2を受光し、電気信号に変換する構成をなしている。なお、検出物体からの反射光L2については、光学系で設定された視野範囲のものが取り込まれる構成となっており、図2の例では、レーザ光L1が実線で示す経路を通過する場合には、例えば符号L2で示す2つのライン間の領域を通る反射光が取り込まれるようになっている。
なお、フォトダイオード20は、「受光手段」の一例に相当するものであり、レーザ光が実空間に存在する物体に照射されたときの反射光を受光するように機能する。
The photodiode 20 is formed of a known photodiode such as an avalanche photodiode, for example. When the laser light L1 is generated from the laser diode 10, the reflection of the laser light L1 reflected by an object existing in the external space. The light L2 is received and converted into an electrical signal. The reflected light L2 from the detection object is configured to be captured in the visual field range set by the optical system. In the example of FIG. 2, the laser light L1 passes through the path indicated by the solid line. For example, reflected light passing through a region between two lines indicated by reference numeral L2 is captured.
The photodiode 20 corresponds to an example of a “light receiving unit” and functions to receive reflected light when laser light is irradiated onto an object existing in real space.

レーザダイオード10から照射されるレーザ光L1の光軸上にはレンズ60が設けられている。このレンズ60は、コリメートレンズとして構成されるものであり、レーザダイオード10からのレーザ光L1を略平行光に変換する機能を有する。   A lens 60 is provided on the optical axis of the laser light L1 emitted from the laser diode 10. The lens 60 is configured as a collimating lens and has a function of converting the laser light L1 from the laser diode 10 into substantially parallel light.

レンズ60を通過したレーザ光L1の光路上には、揺動ミラー31が配置されている。この揺動ミラー31は、レーザダイオード10からのレーザ光L1を回転偏向装置40に向けて反射する構成をなし、且つ揺動可能に構成されている。この揺動ミラー31は、偏向部41に対するレーザ光の入射方向を相対的に変化させることで、偏向部41からの反射の向きを変化させ、空間に照射されるレーザ光L1と水平面(鉛直方向と直交する仮想平面)とのなす角度を変更するように機能している。   On the optical path of the laser beam L1 that has passed through the lens 60, the oscillating mirror 31 is disposed. The oscillating mirror 31 is configured to reflect the laser beam L1 from the laser diode 10 toward the rotary deflecting device 40, and is configured to be oscillated. The oscillating mirror 31 changes the direction of reflection from the deflecting unit 41 by relatively changing the incident direction of the laser beam with respect to the deflecting unit 41, and the laser beam L <b> 1 irradiated to the space and the horizontal plane (vertical direction) It functions so as to change the angle formed by a virtual plane orthogonal to the horizontal plane.

また、この揺動ミラー31を、多自由度をもって駆動するミラー駆動部が設けられている。このようにミラーを多自由度をもって駆動する技術はガルバノミラー等の分野において公知であるので詳細は省略するが、ミラー駆動部については、例えば、揺動ミラー31をジンバル、ピボット軸受等で支持することにより、二方向へ回転運動させる構成とすることができる。   In addition, a mirror driving unit that drives the oscillating mirror 31 with multiple degrees of freedom is provided. Since the technique for driving the mirror with multiple degrees of freedom is well known in the field of galvano mirrors and the like, details thereof will be omitted, but for the mirror driving unit, for example, the oscillating mirror 31 is supported by a gimbal, a pivot bearing or the like. Thereby, it can be set as the structure made to rotationally move to two directions.

なお、本明細書では、回転偏向装置40の中心軸42aの方向をY軸方向とし、このY軸方向と直交する所定方向をX軸方向とし、X軸方向及びY軸方向に直交する方向をZ軸方向として説明する。このような定義において、反射面31aとXY平面とのなす角をα、反射面31aとYZ平面とのなす角をβ、反射面31aとXZ平面とのなす角をγとした場合、アクチュエータ36は、これらα、β、γを変更し得るように構成されており、後述する制御回路70がアクチュエータ36を制御して、α、β、γの値を調整することにより、揺動ミラー31からのレーザ光L1の向き、及びレーザ光L1が偏向部41に入射するときの入射方向が定まり、これにより空間に照射されるレーザ光L1と水平面(鉛直方向と直交する仮想平面)とのなす角度が決定されるようになっている。   In the present specification, the direction of the central axis 42a of the rotary deflection device 40 is the Y-axis direction, the predetermined direction orthogonal to the Y-axis direction is the X-axis direction, and the directions orthogonal to the X-axis direction and the Y-axis direction are the directions. The description will be made on the Z-axis direction. In such a definition, when the angle between the reflecting surface 31a and the XY plane is α, the angle between the reflecting surface 31a and the YZ plane is β, and the angle between the reflecting surface 31a and the XZ plane is γ, the actuator 36 Are configured to be able to change these α, β, and γ, and the control circuit 70 to be described later controls the actuator 36 to adjust the values of α, β, and γ, so The direction of the laser beam L1 and the incident direction when the laser beam L1 is incident on the deflecting unit 41 are determined, whereby the angle formed between the laser beam L1 irradiated into the space and the horizontal plane (virtual plane orthogonal to the vertical direction) Is to be decided.

揺動ミラー31で反射したレーザ光L1の光軸上には、回転偏向装置40が設けられている。この回転偏向装置40は、中心軸42aを中心として回転可能に構成された偏向部41と、偏向部41を回転駆動するモータ50とを備え、偏向部41を回転させつつレーザダイオード10にて発生したレーザ光L1を偏向部41により外部空間に向けて偏向させるように機能している。   On the optical axis of the laser beam L1 reflected by the oscillating mirror 31, a rotary deflection device 40 is provided. The rotary deflection device 40 includes a deflection unit 41 configured to be rotatable about a central axis 42 a and a motor 50 that rotationally drives the deflection unit 41, and is generated by the laser diode 10 while rotating the deflection unit 41. The laser beam L1 thus functioned is deflected by the deflecting unit 41 toward the external space.

回転偏向装置40は、主として、偏向部41、支持台43、軸部42、モータ50、回転角度センサ52によって構成されている。偏向部41は、平坦な反射面41aを備えたミラーとして構成されており、反射面41aが斜め上方を向き且つこの反射面41aが入射するレーザ光L1に対して傾斜するように配されている。支持台43は、偏向部41を支持する台座として構成されるものであり、モータ50によって回転される軸部42に一体的に取り付けられている。軸部42は、図示しない軸受によって回転可能に支持されつつ、モータ50の駆動力を受けて回転するように構成されている。   The rotation deflection device 40 is mainly configured by a deflection unit 41, a support base 43, a shaft unit 42, a motor 50, and a rotation angle sensor 52. The deflecting unit 41 is configured as a mirror having a flat reflecting surface 41a, and is arranged so that the reflecting surface 41a faces obliquely upward and the reflecting surface 41a is inclined with respect to the incident laser beam L1. . The support base 43 is configured as a pedestal that supports the deflection unit 41, and is integrally attached to the shaft part 42 rotated by the motor 50. The shaft portion 42 is configured to rotate by receiving the driving force of the motor 50 while being rotatably supported by a bearing (not shown).

モータ50は、例えば公知の直流モータ或いは公知の交流モータによって構成されている。そして、制御回路70からの駆動指示があったときに、図示しないモータドライバによって駆動状態(例えば、回転タイミングや回転速度)が制御されるようになっており、このときに、予め定められた一定の回転速度で定常回転するようになっている。   The motor 50 is configured by, for example, a known DC motor or a known AC motor. When a drive instruction is issued from the control circuit 70, a drive state (for example, rotation timing and rotation speed) is controlled by a motor driver (not shown), and at this time, a predetermined constant is set. It is designed to rotate at a constant rotation speed.

このモータは、回転駆動軸が軸部42と一体的に構成されており、軸部42と偏向部41とを、中心軸42aを回転中心として定常回転させるように構成されている。偏向部41は、偏向面(反射面41a)と中心軸42aとのなす角度θが一定角度(例えば45°)となるように配置されており、モータ50の駆動力を受けたときにこの角度θを一定角度で維持しつつ回転するようになっている。   In this motor, the rotation drive shaft is configured integrally with the shaft portion 42, and the shaft portion 42 and the deflecting portion 41 are configured to normally rotate about the center shaft 42a. The deflection unit 41 is arranged such that an angle θ formed by the deflection surface (reflection surface 41a) and the central axis 42a is a constant angle (for example, 45 °), and this angle when receiving the driving force of the motor 50. It rotates while maintaining θ at a constant angle.

また、本実施形態では、図2に示すように、モータ50の軸部42の回転角度位置(即ち偏向部41の回転角度位置)を検出する回転角度センサ52が設けられている。回転角度センサ52は、ロータリーエンコーダなど、軸部42の回転角度位置を検出しうるものであれば様々な種類のものを使用できる。   In the present embodiment, as shown in FIG. 2, a rotation angle sensor 52 that detects the rotation angle position of the shaft portion 42 of the motor 50 (that is, the rotation angle position of the deflection unit 41) is provided. Various types of rotation angle sensors 52 can be used as long as they can detect the rotation angle position of the shaft portion 42, such as a rotary encoder.

また、回転偏向装置40からフォトダイオード20に至るまでの反射光の光路上には、フォトダイオード20に向けて反射光を集光する集光レンズ62が設けられ、その集光レンズ62とフォトダイオード20の間にはフィルタ64が設けられている。集光レンズ62は、偏向部41からの反射光を集光してフォトダイオード20に導くように機能している。また、フィルタ64は、回転偏向装置40からフォトダイオード20に至るまでの反射光の光路上において反射光を透過させ且つ反射光以外の光を除去するように機能している。例えば、反射光L2に対応した特定波長の光(例えば一定領域の波長の光)のみを透過させそれ以外の光を遮断する波長選択フィルタによって構成することができる。   A condensing lens 62 that condenses the reflected light toward the photodiode 20 is provided on the optical path of the reflected light from the rotary deflecting device 40 to the photodiode 20, and the condensing lens 62 and the photodiode are provided. 20 is provided with a filter 64. The condensing lens 62 functions to collect the reflected light from the deflecting unit 41 and guide it to the photodiode 20. The filter 64 functions to transmit the reflected light and remove light other than the reflected light on the optical path of the reflected light from the rotary deflecting device 40 to the photodiode 20. For example, it can be configured by a wavelength selection filter that transmits only light having a specific wavelength corresponding to the reflected light L2 (for example, light having a wavelength in a certain region) and blocks other light.

制御回路70は、CPUを備えたマイクロコンピュータなどの1又は複数の制御回路によって構成されており、上述したレーザダイオード10の投光動作やモータ50の回転動作などを制御するように構成されている。また、フォトダイオード20や回転角度センサ52に接続されており、これらからの信号を取得可能に構成されている。なお、制御回路70は、「監視エリア作成部」「距離作成部」として機能する部分を有しており、これらについては後述する。   The control circuit 70 includes one or a plurality of control circuits such as a microcomputer provided with a CPU, and is configured to control the light projecting operation of the laser diode 10 and the rotation operation of the motor 50 described above. . Moreover, it is connected to the photodiode 20 and the rotation angle sensor 52, and is configured to be able to acquire signals from these. The control circuit 70 has portions that function as a “monitoring area creation unit” and a “distance creation unit”, which will be described later.

また、制御回路70には、ROM、RAM,不揮発性メモリ等によって構成される記憶部72が接続されており、制御回路70は、この記憶部72に記憶された情報の読み出しや記憶部72に対する書き込みを行うことが可能となっている。なお、記憶部72は、「記憶手段」の一例に相当し、監視エリアデータ(監視エリアの境界位置を定めるデータ)を記憶するデータベースを備えており、これについては後述する。   The control circuit 70 is connected to a storage unit 72 composed of ROM, RAM, nonvolatile memory, etc. The control circuit 70 reads information stored in the storage unit 72 and It is possible to write. The storage unit 72 corresponds to an example of a “storage unit” and includes a database that stores monitoring area data (data that determines the boundary position of the monitoring area), which will be described later.

また、本実施形態では、レーザダイオード10、フォトダイオード20、レーザ光偏向部30、レンズ60、回転偏向装置40、モータ50等がケース3内に収容され、防塵や衝撃保護が図られている。ケース3における偏向部41の周囲には、当該偏向部41を取り囲むようにレーザ光L1及び反射光L2の通過を可能とする導光部4が形成されている。導光部4は、偏向部41に入光するレーザ光L1の光軸を中心とした環状形態で、ほぼ360°に亘って構成されており、この導光部4を閉塞する形態でガラス板等からなるレーザ光透過板5が配され、防塵が図られている。   In the present embodiment, the laser diode 10, the photodiode 20, the laser beam deflecting unit 30, the lens 60, the rotation deflecting device 40, the motor 50, and the like are housed in the case 3, and dust and shock protection are achieved. Around the deflection unit 41 in the case 3, a light guide unit 4 that allows the laser light L <b> 1 and the reflected light L <b> 2 to pass is formed so as to surround the deflection unit 41. The light guide 4 is formed in an annular shape centering on the optical axis of the laser beam L1 incident on the deflecting unit 41 and is substantially 360 °, and the glass plate is closed in the form of closing the light guide 4. A laser light transmission plate 5 made of a material such as the like is arranged to prevent dust.

また、レーザレーダ装置2には、通信部74が設けられている。この通信部74は、外部装置と無線通信又は有線通信を行うためのインターフェースとして構成されており、例えば、無線LANインタフェース等の公知の無線通信インタフェースとして構成され、後述する携帯型設定端末100と無線通信を行うことができるようになっている。   The laser radar device 2 is provided with a communication unit 74. The communication unit 74 is configured as an interface for performing wireless communication or wired communication with an external device. For example, the communication unit 74 is configured as a known wireless communication interface such as a wireless LAN interface, and wirelessly communicates with a portable setting terminal 100 described later. Communication is now possible.

(物体検出動作)
次に、レーザレーダ装置2で行われる物体の検出処理(監視処理)について基本的な動作を説明する。
図2に示すレーザレーダ装置2では、モータ50からの駆動力により偏向部41が一定速度で回転するようになっており、このような回転時に、レーザダイオード10に対してパルス電流が供給されると、このパルス電流のタイミング及びパルス幅に応じた時間間隔のパルスレーザ光(レーザ光L1)がレーザダイオード10から出力される。このレーザ光L1は、ある程度の広がり角をもった拡散光として投光され、レンズ60を通過することで平行光に変換される。レンズ60を通過したレーザ光L1は、揺動ミラー31で反射した後、偏向部41で更に反射し、空間に向けて照射される。なお、本実施形態では、レーザダイオード10及び回転偏向装置40が「走査手段」の一例に相当し、実空間においてレーザ光を走査するように機能する。
(Object detection operation)
Next, a basic operation of the object detection process (monitoring process) performed by the laser radar device 2 will be described.
In the laser radar device 2 shown in FIG. 2, the deflection unit 41 is rotated at a constant speed by the driving force from the motor 50, and a pulse current is supplied to the laser diode 10 during such rotation. Then, a pulse laser beam (laser beam L1) at a time interval corresponding to the timing and pulse width of the pulse current is output from the laser diode 10. The laser light L1 is projected as diffused light having a certain spread angle, and is converted into parallel light by passing through the lens 60. The laser beam L1 that has passed through the lens 60 is reflected by the oscillating mirror 31, and then is further reflected by the deflecting unit 41 and irradiated toward the space. In the present embodiment, the laser diode 10 and the rotary deflection device 40 correspond to an example of “scanning means” and function to scan laser light in real space.

このように偏向部41から照射されたレーザ光L1が、外部空間に存在する物体(検出物体)に当たったときには、この検出物体で反射して装置側に戻ってくる反射光の一部(反射光L2参照)がレーザ光透過板5を介してケース内に入り込み、偏向部41に入射することになる。偏向部41は、この反射光L2をフォトダイオード20側へ誘導(反射)し、その誘導された反射光L2は、集光レンズ62で集光され、フィルタ64を通過してフォトダイオード20に入射する。そして、フォトダイオード20は、このような反射光L2を受光したとき、その受光した反射光L2の強度に応じた電気信号(例えば受光した反射光L2に応じた電圧値)を出力する。   When the laser light L1 emitted from the deflecting unit 41 hits an object (detected object) existing in the external space, a part of the reflected light (reflected) reflected by the detected object and returned to the apparatus side. The light L2) enters the case through the laser light transmission plate 5 and enters the deflecting unit 41. The deflecting unit 41 guides (reflects) the reflected light L2 toward the photodiode 20, and the guided reflected light L2 is collected by the condenser lens 62, passes through the filter 64, and enters the photodiode 20. To do. When the photodiode 20 receives such reflected light L2, the photodiode 20 outputs an electrical signal corresponding to the intensity of the received reflected light L2 (for example, a voltage value corresponding to the received reflected light L2).

制御回路70は、レーザダイオード10に対するパルス信号の送信タイミングとフォトダイオード20からの受光信号が出力されるタイミングとに基づいて、レーザ光L1の投光から受光までの時間T(即ち、レーザダイオード10がパルスレーザ光L1を出力してからフォトダイオード20が当該パルスレーザ光に応じた反射光L2を受光するまでの時間)を測定しており、更に、制御回路70は、この時間Tと、既知の光速Cとに基づいて、装置内の基準位置(例えば位置P1)から検出物体までの距離Lを算出している。   Based on the transmission timing of the pulse signal to the laser diode 10 and the timing at which the light reception signal from the photodiode 20 is output, the control circuit 70 sets the time T from the projection of the laser light L1 to the reception thereof (that is, the laser diode 10 The time from when the pulse laser beam L1 is output until the photodiode 20 receives the reflected light L2 corresponding to the pulse laser beam), and the control circuit 70 further knows the time T The distance L from the reference position (for example, position P1) in the apparatus to the detected object is calculated based on the light speed C.

更に、制御回路70は、アクチュエータ36の変位量を制御しているため、上記パルスレーザ光L1が照射されるときの揺動ミラー31の変位(揺動ミラー31の反射面31aとXY平面とのなす角α、反射面31aとYZ平面とのなす角β、反射面31aとXZ平面とのなす角γ)を把握でき、且つ、パルスレーザ光L1が照射されるときの回転角度センサ52からの出力値(即ち、パルスレーザ光L1が照射されるタイミングにおける偏向部41の基準角度からの回転変位θ)をも把握できるようになっている。このように、揺動ミラー31の反射面31aとXY平面とのなす角α、反射面31aとYZ平面とのなす角β、反射面31aとXZ平面とのなす角γが定まり、偏向部41の回転変位θが定まると、偏向部41からレーザ光L1が向かう方向が一の方位に定まるため、制御回路70は、パルスレーザ光L1の出力時におけるこれら値(α、β、γ、θ)と上記の算出距離Lとに基づいて、検出物体の方位を正確に検出できる。   Further, since the control circuit 70 controls the amount of displacement of the actuator 36, the displacement of the oscillating mirror 31 when the pulse laser beam L1 is irradiated (the reflection surface 31a of the oscillating mirror 31 and the XY plane The angle α formed, the angle β formed between the reflecting surface 31a and the YZ plane, and the angle γ formed between the reflecting surface 31a and the XZ plane, and from the rotation angle sensor 52 when the pulse laser beam L1 is irradiated. The output value (that is, the rotational displacement θ from the reference angle of the deflection unit 41 at the timing of irradiation with the pulsed laser light L1) can also be grasped. Thus, the angle α formed between the reflecting surface 31a of the oscillating mirror 31 and the XY plane, the angle β formed between the reflecting surface 31a and the YZ plane, and the angle γ formed between the reflecting surface 31a and the XZ plane are determined, and the deflecting unit 41 When the rotational displacement θ is determined, the direction in which the laser beam L1 travels from the deflecting unit 41 is determined as one direction, and the control circuit 70 determines these values (α, β, γ, θ) when the pulse laser beam L1 is output. And the calculated distance L, the orientation of the detected object can be accurately detected.

また、このレーザレーダ装置の周囲には図4のように監視エリアが設定されている。図4の例では、位置P1、P2、P7を頂点とする三角形状の境界面、位置P1、P2、P3を頂点とする三角形状の境界面、位置P1、P3、P4を頂点とする三角形状の境界面、位置P1、P4、P5を頂点とする三角形状の境界面、位置P1、P5、P6を頂点とする三角形状の境界面、位置P1、P6、P7を頂点とする三角形状の境界面によって囲まれる領域が監視エリアとなっている。なお、各位置P1〜P7の座標は例えば図4(A)のように設定データとして登録されている。制御回路70は、上述のようにレーザ走査で検出された物体の位置がこのような設定データに基づいて構成される監視エリアの内部に存在するか否かを判断し、監視エリアの内部にある場合には物体検出と判定して所定の出力を行う。一方、検出された物体の位置が監視エリアの外部の場合には、物体検出と判定せずに無視する。   A monitoring area is set around the laser radar device as shown in FIG. In the example of FIG. 4, a triangular boundary surface having apexes at positions P1, P2, and P7, a triangular boundary surface having apexes at positions P1, P2, and P3, and a triangular shape having apexes at positions P1, P3, and P4 Boundary surface, triangular boundary surface having apexes at positions P1, P4, P5, triangular boundary surface having apexes at positions P1, P5, P6, and triangular boundary having apexes at positions P1, P6, P7 The area surrounded by the surface is the monitoring area. The coordinates of the positions P1 to P7 are registered as setting data as shown in FIG. 4A, for example. The control circuit 70 determines whether or not the position of the object detected by the laser scanning as described above exists within the monitoring area configured based on such setting data, and is within the monitoring area. In this case, it is determined that the object is detected and a predetermined output is performed. On the other hand, when the position of the detected object is outside the monitoring area, it is ignored without determining that the object is detected.

(携帯型設定端末)
次に、携帯型設定端末100について説明する。
図1に示す携帯型設定端末100は、カメラ機能を有する情報処理端末として構成されており、主として、制御部106、通信部102、メモリ104、タッチパネル110、カメラ130、センサ(ジャイロセンサ121、GPSセンサ122、距離計測器123)によって構成されている。
(Portable setting terminal)
Next, the portable setting terminal 100 will be described.
A portable setting terminal 100 shown in FIG. 1 is configured as an information processing terminal having a camera function, and mainly includes a control unit 106, a communication unit 102, a memory 104, a touch panel 110, a camera 130, a sensor (gyro sensor 121, GPS). It is constituted by a sensor 122 and a distance measuring device 123).

制御部106は、CPUを備えたマイコン等によって構成されており、情報処理機能を有し、携帯型設定端末100内の各種制御を行うように構成されている。   The control unit 106 is configured by a microcomputer or the like equipped with a CPU, has an information processing function, and is configured to perform various controls in the portable setting terminal 100.

通信部102は、外部装置と無線通信又は有線通信を行うためのインターフェースとして構成されており、例えば、無線LANインタフェース等の公知の無線通信インタフェースとして機能し、上述のレーザレーダ装置2と無線通信を行うことができるようになっている。なお、通信部102は、「出力手段」「通信手段」の一例に相当する。   The communication unit 102 is configured as an interface for performing wireless communication or wired communication with an external device. For example, the communication unit 102 functions as a known wireless communication interface such as a wireless LAN interface, and performs wireless communication with the laser radar device 2 described above. Can be done. The communication unit 102 corresponds to an example of “output unit” and “communication unit”.

タッチパネル110は、「表示手段」の一例に相当するものであり、ハードウェア的には公知のタッチパネル型の表示装置として構成されている。このタッチパネル110は、液晶表示器等の公知の表示デバイスとして構成される表示部114と、この表示部114の表示画面を覆う透明性の操作パネル112とを備えている。操作パネル112は、「入力手段」の一例に相当するものであり、表示部114上のどの位置に押圧操作があったかを検出可能に構成されている。   The touch panel 110 corresponds to an example of “display means” and is configured as a known touch panel type display device in terms of hardware. The touch panel 110 includes a display unit 114 configured as a known display device such as a liquid crystal display, and a transparent operation panel 112 that covers a display screen of the display unit 114. The operation panel 112 corresponds to an example of “input means”, and is configured to be able to detect which position on the display unit 114 has been pressed.

メモリ104は、ROM、RAM、不揮発性メモリ、HDD等の記憶媒体によって構成されており、携帯型設定端末100で扱われる各種データを記憶可能とされている。   The memory 104 is configured by a storage medium such as a ROM, a RAM, a nonvolatile memory, and an HDD, and can store various data handled by the portable setting terminal 100.

カメラ130は、公知のCMOSカメラ、CCDカメラ等として構成されており、実空間内で設定された方向(撮像方向)の画像を撮像するように構成されている。このカメラ130はズーム機能を有していてもよい。
なお、カメラ130は、「撮像手段」の一例に相当し、携帯型設定端末100における所定方向を撮像方向とするように、実空間の画像を撮像するように機能する。
The camera 130 is configured as a known CMOS camera, CCD camera, or the like, and is configured to capture an image in a direction (imaging direction) set in real space. The camera 130 may have a zoom function.
The camera 130 corresponds to an example of “imaging means” and functions to capture an image of real space so that a predetermined direction in the portable setting terminal 100 is an imaging direction.

ジャイロセンサ121は、公知のジャイロセンサによって構成されており、携帯型設定端末100の姿勢を検出し得るように構成されている。具体的には、カメラ130の撮像方向(例えば、カメラ130のレンズの光軸が向く方位)を特定し得るように構成されている。また、GPSセンサ122は、公知のGPSセンサとして構成されており、携帯型設定端末100の水平方向の座標(X座標及びY座標)を検出するように構成されている。また、距離計測器123は、携帯型設定端末100の高さ(Z座標)を検出するように構成されている。   The gyro sensor 121 is configured by a known gyro sensor and configured to detect the attitude of the portable setting terminal 100. Specifically, it is configured to be able to specify the imaging direction of the camera 130 (for example, the direction in which the optical axis of the lens of the camera 130 faces). The GPS sensor 122 is configured as a known GPS sensor, and is configured to detect horizontal coordinates (X coordinate and Y coordinate) of the portable setting terminal 100. The distance measuring device 123 is configured to detect the height (Z coordinate) of the portable setting terminal 100.

なお、本実施形態では、ジャイロセンサ121が「方向検出手段」の一例に相当し、カメラ130(撮像手段)による撮像方向の実空間内での向きを検出可能とされている。また、GPSセンサ122及び距離計測器123は、「座標検出手段」の一例に相当し、携帯型設定端末100の実空間内での座標を検出するように構成されている。   In the present embodiment, the gyro sensor 121 corresponds to an example of a “direction detection unit”, and the direction in the real space of the imaging direction by the camera 130 (imaging unit) can be detected. The GPS sensor 122 and the distance measuring device 123 correspond to an example of “coordinate detection means”, and are configured to detect coordinates in the real space of the portable setting terminal 100.

次に、携帯型設定端末100で行われる境界位置データ更新処理について説明する。
図3は、携帯型設定端末で行われる境界位置データ更新処理の流れを例示するフローチャートである。図3の処理は、例えば電源投入、或いは携帯型設定端末100で所定操作がなされたことをトリガとして実行されるものである。この処理では、まず、レーザレーダ装置2から境界位置データを取り込む(S1)。具体的には、レーザレーダ装置2の記憶部72に記憶されている境界位置データ(図8(A)のようなデータ)をダウンロードし、メモリ104に記憶しておく。
なお、本実施形態では、制御部106及びメモリ104が「登録手段」の一例に相当し、実空間に設定される監視エリアの境界位置データを登録するように機能する。
Next, the boundary position data update process performed by the portable setting terminal 100 will be described.
FIG. 3 is a flowchart illustrating the flow of boundary position data update processing performed in the portable setting terminal. The processing in FIG. 3 is executed, for example, when the power is turned on or a predetermined operation is performed on the portable setting terminal 100. In this process, first, boundary position data is taken from the laser radar device 2 (S1). Specifically, the boundary position data (data as shown in FIG. 8A) stored in the storage unit 72 of the laser radar device 2 is downloaded and stored in the memory 104.
In the present embodiment, the control unit 106 and the memory 104 correspond to an example of “registration means” and function to register boundary position data of the monitoring area set in the real space.

S1の後には、カメラ130で撮像されている実空間(実際の空間)の画像を表示部114に表示する処理を行う。この処理では、撮像された実空間の画像において、メモリ104に登録されている境界位置データによって特定される境界位置に境界画像を組み込み、両画像を合わせて表示する。例えば、境界位置データによって実空間内に図4のような監視エリアの境界が設定される場合、監視エリアの所定位置(位置P3,P6の方向)を撮像したときには図6(A)のような表示がなされる。   After S <b> 1, processing for displaying an image of the real space (actual space) captured by the camera 130 on the display unit 114 is performed. In this processing, in the captured real space image, the boundary image is incorporated at the boundary position specified by the boundary position data registered in the memory 104, and both images are displayed together. For example, when the boundary of the monitoring area as shown in FIG. 4 is set in the real space by the boundary position data, as shown in FIG. 6A when a predetermined position (direction of positions P3 and P6) of the monitoring area is imaged. Display is made.

本実施形態では、制御部106が「合成画像生成手段」の一例に相当し、メモリ104(登録手段)に登録された境界位置データと、方向検出手段によって検出された撮像方向の実空間内での向きと、座標検出手段によって検出された当該携帯型設定端末の実空間内での座標と、に基づき、カメラ130(撮像手段)によって撮像された実空間の画像に対し当該画像内の境界位置データで特定される位置に境界画像を組み込んで合成画像を生成するように機能する。   In the present embodiment, the control unit 106 corresponds to an example of “composite image generation unit”, and the boundary position data registered in the memory 104 (registration unit) and the real space of the imaging direction detected by the direction detection unit. Boundary position in the image with respect to the real space image captured by the camera 130 (imaging means) based on the orientation of the mobile device and the coordinates in the real space of the portable setting terminal detected by the coordinate detection means It functions to generate a composite image by incorporating a boundary image at a position specified by data.

S2の後には、S2で表示される境界画像において位置指定がなされたか否かを判断する。本実施形態では、例えば、図4のように構成される監視エリアの各頂点位置P1〜P7がカメラ130の撮像範囲に入ったときに図6(A)のように頂点位置にそれぞれ対応するマーク(図6(A)では、頂点位置P3、P6に対応するマークP3’、P6’)が表示されるようになっている。そして、このように頂点位置に対応するマークが表示部114に表示されているときに、操作パネル112を利用して頂点位置を指定できるようになっており、S3ではこのような位置指定がなされたか否かを判断する。なお、位置指定がなされていない場合にはS3にてNoに進み、カメラ130の撮像範囲の画像を境界位置データと共に表示し続ける。なお、S3の処理は例えば所定の短時間毎に行われるようになっており、S2では、カメラ130の向きが変わる毎に向きに応じた画像(撮像範囲の実空間の画像と、これに対応する境界画像)をリアルタイムで表示する。   After S2, it is determined whether or not a position has been designated in the boundary image displayed in S2. In the present embodiment, for example, when the vertex positions P1 to P7 of the monitoring area configured as shown in FIG. 4 enter the imaging range of the camera 130, marks corresponding to the vertex positions as shown in FIG. (In FIG. 6A, marks P3 ′ and P6 ′ corresponding to the vertex positions P3 and P6) are displayed. When the mark corresponding to the vertex position is displayed on the display unit 114 in this way, the vertex position can be designated using the operation panel 112, and such a designation is made in S3. It is determined whether or not. If the position is not designated, the process proceeds to No in S3, and the image in the imaging range of the camera 130 is continuously displayed together with the boundary position data. Note that the process of S3 is performed, for example, every predetermined short time, and in S2, an image corresponding to the orientation (an image in the real space of the imaging range and the corresponding response each time the orientation of the camera 130 is changed). Border image) to be displayed in real time.

S3で位置指定がなされたと判断された場合には、S3にてYesに進む。図6(A)のような表示画像に対してマークがされた場合には、その指定された頂点位置のマークを他のマークと区別可能な状態で表示する(例えば、他のマークと別の色で表示したり、点滅表示としたりする)。その後、所定の解除操作がなされるまではカメラ130の移動に応じて変化する撮像画像をリアルタイムで表示する(S4)。このS4の表示では、例えば、上記のように指定された頂点位置のマークを携帯型設定端末100の座標位置にリアルタイムで表示し続ける。図6(B)では、図6(A)で位置指定されたマークP6’が携帯型設定端末100の座標位置のマークP8’に置き換わった例を示している。   If it is determined in S3 that the position has been designated, the process proceeds to Yes in S3. When a mark is displayed on the display image as shown in FIG. 6A, the mark at the designated vertex position is displayed in a state distinguishable from other marks (for example, different from other marks). Display in color or blink). Thereafter, until a predetermined release operation is performed, a captured image that changes according to the movement of the camera 130 is displayed in real time (S4). In the display of S4, for example, the mark at the vertex position designated as described above is continuously displayed in real time at the coordinate position of the portable setting terminal 100. 6B shows an example in which the mark P6 'whose position is specified in FIG. 6A is replaced with the mark P8' at the coordinate position of the portable setting terminal 100. FIG.

そして、S4の後には、所定の解除操作がなされたか否かを判断する(S5)。本実施形態では、例えば、タッチパネル110に表示される境界画像において頂点位置のマーク部分を押すように操作パネル112が操作されたときにその押圧位置のマークが指定されるようになっており、このときS3にてYesに進むようになっている。そして、この指定は、例えば当該マーク部分から押圧が解除されるまで継続する。従って、ユーザがタッチパネル110において頂点位置P1〜P7のいずれかに対応するマーク部分を指で押したときには、押し続けながら移動する間はS4の表示処理が繰り返される。そして、S4の表示処理では、その押圧位置のマークが、撮像された実空間の画像において携帯型設定端末100の座標位置となるように撮像画像がリアルタイムで表示されることになる。そして、ユーザがこのようなマークの押圧操作を終了し、タッチパネル110から指を離すような解除操作を行ったときには、S5でYesに進むことになる。   Then, after S4, it is determined whether or not a predetermined release operation has been performed (S5). In the present embodiment, for example, when the operation panel 112 is operated so as to press the mark portion at the vertex position in the boundary image displayed on the touch panel 110, the mark at the pressed position is designated. At S3, the process proceeds to Yes. This designation continues until, for example, the pressing is released from the mark portion. Accordingly, when the user presses the mark portion corresponding to any one of the vertex positions P1 to P7 on the touch panel 110 with the finger, the display process of S4 is repeated while moving while keeping pressing. In the display process of S4, the captured image is displayed in real time so that the mark at the pressed position is the coordinate position of the portable setting terminal 100 in the captured image of the real space. Then, when the user finishes the mark pressing operation and performs a releasing operation to release the finger from the touch panel 110, the process proceeds to Yes in S5.

本実施形態では、制御部106が「指定位置検出手段」の一例に相当し、操作パネル112(入力手段)において境界画像の一部を指定する所定の指定操作がなされたときに、表示部114(表示手段)に表示される境界画像においてその指定位置を検出するように機能する。また、制御部106は、「指示操作検出手段」の一例に相当し、操作パネル112(入力手段)において境界画像の変更位置を指示する所定の指示操作がなされたことを検出するように機能する。   In the present embodiment, the control unit 106 corresponds to an example of a “designated position detection unit”, and the display unit 114 is displayed when a predetermined designation operation for designating a part of the boundary image is performed on the operation panel 112 (input unit). It functions to detect the designated position in the boundary image displayed on the (display means). The control unit 106 corresponds to an example of “instruction operation detection unit”, and functions to detect that a predetermined instruction operation for instructing a change position of the boundary image is performed on the operation panel 112 (input unit). .

S5で解除操作がなされたと判断された場合には、その解除操作がなされたときの携帯型設定端末100の位置を新たな頂点位置とする。例えば、図6(A)のような表示画像において頂点位置のマークP6’(位置P6に対応するマーク)が指定され、その後、図5のような位置で解除操作(マークの押圧の解除)がなされたときには、その解除操作時の携帯型設定端末100の座標が新たな頂点位置(位置P6から変更される新たな頂点位置)となる。例えば、図5のような位置において解除操作(マークの押圧の解除)がなされた場合には、図5の頂点位置P6が図7の位置P8に変更されるように、監視エリアの境界位置データが変更される。境界位置データでは、図8(B)のように、変更対象となった位置P6の座標が位置P8の座標に置き換わることになる。   If it is determined in S5 that the release operation has been performed, the position of the portable setting terminal 100 when the release operation is performed is set as a new vertex position. For example, in the display image as shown in FIG. 6A, a mark P6 ′ at the apex position (a mark corresponding to the position P6) is designated, and then a release operation (release of pressing of the mark) is performed at the position as shown in FIG. When done, the coordinates of the portable setting terminal 100 at the time of the release operation become a new vertex position (new vertex position changed from the position P6). For example, when a release operation (release of mark pressing) is performed at a position as shown in FIG. 5, the vertex position P6 in FIG. 5 is changed to the position P8 in FIG. Is changed. In the boundary position data, as shown in FIG. 8B, the coordinates of the position P6 to be changed are replaced with the coordinates of the position P8.

S6において更新処理がなされた後には、所定の終了操作(例えば、終了ボタンの押圧等)がなされたか否かを判断し、終了操作がなされた場合には図3の処理を終了する。一方、終了操作がなされていない場合には、S7にてNoに進み、S2以降の処理を行う。なお、S6の更新処理の際には、データが更新される都度、その更新後のデータをレーザレーダ装置2に送信するようにしてもよい。或いは、S7でYesと進む場合に、更新されたデータをレーザレーダ装置2に送信してから終了するようにしてもよい。
この場合、通信部102とこれを制御部する制御部106が「出力手段」に相当し、再生成手段によって再生成された境界位置データを出力するように機能する。なお、再生成された境界位置データの出力は、このような通信部102によるデータ送信だけを指すものではなく、図6(B)のように、更新された境界位置データに基づく境界画像を表示部114に表示することも含む。この場合、表示部114とこれを制御する制御部106が「出力手段」に相当する。
After the update process is performed in S6, it is determined whether or not a predetermined end operation (for example, pressing an end button or the like) has been performed. If the end operation has been performed, the process of FIG. 3 ends. On the other hand, if the end operation has not been performed, the process proceeds to No in S7, and the processes after S2 are performed. In the update process of S6, the updated data may be transmitted to the laser radar device 2 every time the data is updated. Alternatively, when the process proceeds to Yes in S7, the updated data may be transmitted to the laser radar device 2 and then terminated.
In this case, the communication unit 102 and the control unit 106 that controls the communication unit 102 correspond to “output unit”, and function to output boundary position data regenerated by the regenerating unit. Note that the output of the regenerated boundary position data does not only indicate the data transmission by the communication unit 102, but displays a boundary image based on the updated boundary position data as shown in FIG. 6B. Displaying on the unit 114 is also included. In this case, the display unit 114 and the control unit 106 that controls the display unit 114 correspond to an “output unit”.

また、本実施形態では、制御部106が「再生成手段」の一例に相当し、指示操作検出手段によって指示操作が検出されたときに、指定位置検出手段によって検出された指定位置を、指示操作検出手段によって検出された指示操作での指示位置に変更するように境界位置データを再生成するように機能する。具体的には、指示操作検出手段によって指示操作が検出されたとき(図3ではS5でYesと判断されるとき)の座標検出手段による検出結果に基づき、指示操作時の当該携帯型設定端末100の実空間での座標を特定し、指定位置検出手段によって検出された境界画像の指定位置(図3ではS3で判断される指定位置)を、その特定された座標位置に変更するように境界位置データを再生成している。   In the present embodiment, the control unit 106 corresponds to an example of a “regeneration unit”. When the instruction operation is detected by the instruction operation detection unit, the designated position detected by the designated position detection unit is changed to the instruction operation. It functions to regenerate the boundary position data so as to change to the designated position in the designated operation detected by the detecting means. Specifically, based on the detection result by the coordinate detection means when the instruction operation is detected by the instruction operation detection means (when it is determined Yes in S5 in FIG. 3), the portable setting terminal 100 at the time of the instruction operation The boundary position is specified so that the coordinate in the real space is specified and the specified position of the boundary image detected by the specified position detecting means (the specified position determined in S3 in FIG. 3) is changed to the specified coordinate position. Regenerating data.

(第1実施形態の主な効果)
請求項1の発明に係る携帯型設定端末1には、合成画像生成手段が設けられており、この合成画像生成手段は、メモリ104(登録手段)に登録された境界位置データと、ジャイロセンサ121(方向検出手段)によって検出された撮像方向の実空間内での向きと、GPSセンサ122及び距離計測器123(座標検出手段)によって検出された当該携帯型設定端末1の実空間内での座標と、に基づき、カメラ130(撮像手段)によって撮像された実空間の画像に対し当該画像内の境界位置データで特定される位置に境界画像を組み込んで合成画像を生成している。そして、タッチパネル110(表示手段)において、この生成された合成画像を表示している。
(Main effects of the first embodiment)
The portable setting terminal 1 according to the first aspect of the present invention is provided with a composite image generating means, and the composite image generating means includes the boundary position data registered in the memory 104 (registration means) and the gyro sensor 121. The orientation in the real space of the imaging direction detected by the (direction detection means) and the coordinates in the real space of the portable setting terminal 1 detected by the GPS sensor 122 and the distance measuring device 123 (coordinate detection means). Based on the above, a boundary image is incorporated into a position specified by boundary position data in the real space image captured by the camera 130 (imaging means) to generate a composite image. The generated composite image is displayed on the touch panel 110 (display means).

この構成では、端末内において当該端末の座標と撮像手段の撮像方向とを特定することができるため、得られた撮像画像(実空間の画像)内の各位置の座標(実空間内での座標)を特定できるようになる。従って、境界位置データによって特定される位置に境界画像をより正確に組み込んで合成画像を生成し、これを表示できるようになる。これにより、実空間内のどの位置に境界が設定されるかを、実空間内に存在する物と合わせて視覚的に把握できるようになり、特別なデータ解析等を行わずとも実空間内において境界が適切な位置に設定されているか否かを判断できるようになる。   In this configuration, since the coordinates of the terminal and the imaging direction of the imaging means can be specified in the terminal, the coordinates of each position (the coordinates in the real space) in the obtained captured image (the real space image) ) Can be specified. Therefore, it is possible to generate a composite image by more accurately incorporating the boundary image at the position specified by the boundary position data and display it. As a result, it is possible to visually grasp where the boundary is set in the real space together with the objects existing in the real space, and in the real space without performing special data analysis etc. It becomes possible to determine whether or not the boundary is set to an appropriate position.

更に、操作パネル112(入力手段)において境界画像の一部を指定する所定の指定操作がなされたときに、タッチパネル110(表示手段)に表示される境界画像においてその指定位置を検出する指定位置検出手段と、操作パネル112(入力手段)において境界画像の変更位置を指示する所定の指示操作がなされたことを検出する指示操作検出手段とが設けられている。そして、再生成手段は、このように指示操作検出手段によって指示操作が検出されたときに、指定位置検出手段によって検出された指定位置を、指示操作検出手段によって検出された指示操作での指示位置に変更するように境界位置データを再生成している。そして、この再生成された境界位置データが通信部102(出力手段)によってレーザレーダ装置2に出力されるようになっている。   Further, when a predetermined designation operation for designating a part of the boundary image is performed on the operation panel 112 (input means), a designated position detection for detecting the designated position in the boundary image displayed on the touch panel 110 (display means). And an instruction operation detecting means for detecting that a predetermined instruction operation for instructing a change position of the boundary image is performed on the operation panel 112 (input means). Then, the regenerating means detects the designated position detected by the designated position detecting means when the designated operation is detected by the designated operation detecting means in this way. The boundary position data is regenerated to change to The regenerated boundary position data is output to the laser radar device 2 by the communication unit 102 (output means).

この構成では、実空間の画像と共に境界位置を具体的に把握しながら、境界位置を部分的に変更したい場合には、境界画像においてその位置を指定すると共に変更位置を指示することで、所望の位置に簡単に設定変更することができる。従って、熟練度にそれほど依存することなく、且つ複雑なデータ入力作業を伴うことなく、監視エリアを所望の位置により正確に設定することが可能となる。   In this configuration, when it is desired to partially change the boundary position while specifically grasping the boundary position together with the image in the real space, the position is specified in the boundary image and the change position is indicated, thereby specifying a desired position. The setting can be easily changed to the position. Therefore, the monitoring area can be accurately set according to a desired position without depending on the skill level so much and without complicated data input work.

特に、本実施形態の構成では、カメラ(撮像手段)の動きに連動するように境界画像を変化させることができるため、ユーザによるアナログ的な感覚(例えば、カメラの向きや位置を連続的に微調整する感覚等)を境界位置の設定・修正により直接的に反映することができる。例えば、従来から行われていた境界位置の設定・修正方法(例えば、数値を入力して設定、修正を行う方法)では、ユーザ(作業者)の感覚をその都度数値に置き換えて修正する必要があったため微調整等が難しく、しかも、実空間内では修正の目安となる数値を取得し難いという問題があったが、本実施形態の方法によれば、このような問題をいずれも解消することができる。特に、セキュリティシステムなど、実空間内で高度な微調整を要求される分野では、本手法は極めて有益である。   In particular, in the configuration of the present embodiment, the boundary image can be changed so as to be interlocked with the movement of the camera (imaging means), so that the analog sense (for example, the direction and position of the camera) by the user is continuously reduced. The sense of adjustment, etc.) can be directly reflected by setting and correcting the boundary position. For example, in the conventional boundary position setting / correction method (for example, a method of inputting and setting a numerical value), it is necessary to correct the user's (operator) sense by replacing it with a numerical value each time. However, there is a problem that it is difficult to make fine adjustments, and it is difficult to obtain a numerical value that is a guideline for correction in the real space. However, according to the method of this embodiment, all of these problems can be solved. Can do. In particular, this technique is extremely useful in fields that require advanced fine tuning in real space, such as security systems.

また、本実施形態では、再生成手段は、指示操作検出手段によって指示操作が検出されたときの座標検出手段による検出結果に基づき、指示操作時の当該携帯型設定端末の実空間での座標を特定している。そして、指定位置検出手段によって検出された境界画像の指定位置を、その特定された座標位置に変更するように境界位置データを再生成している。
この構成では、境界画像において変更すべき位置を指定した後に、所望の位置に端末を移動させて指示操作を行えば、その指示位置を新たな境界として再設定することができる。従って、設定作業に慣れていない者であっても、実空間内の実際の位置を把握しながら、実空間内の所望の位置に正確に且つ容易に境界を設定することができる。
Further, in this embodiment, the regeneration unit calculates the coordinates in the real space of the portable setting terminal at the time of the instruction operation based on the detection result by the coordinate detection unit when the instruction operation is detected by the instruction operation detection unit. I have identified. Then, the boundary position data is regenerated so as to change the designated position of the boundary image detected by the designated position detecting means to the specified coordinate position.
In this configuration, when the position to be changed in the boundary image is designated and then the terminal is moved to a desired position and an instruction operation is performed, the indicated position can be reset as a new boundary. Therefore, even a person who is not accustomed to setting work can accurately and easily set a boundary at a desired position in the real space while grasping the actual position in the real space.

また、本実施形態において、表示手段は、合成画像を表示可能な表示部114と、表示部114を覆う操作パネル112とを備えたタッチパネル110からなり、操作パネル112が入力手段として構成されている。
そして、指定位置検出手段は、表示部114に合成画像が表示された状態で操作パネル112において境界画像の位置が押圧されたときに、境界画像におけるその押圧位置を指定位置として検出している。更に、再生成手段は、指定位置検出手段により指定位置が検出された後に操作パネル112に対して所定の解除操作が行われたときに、座標検出手段による検出結果に基づき、解除操作時の当該携帯型設定端末の実空間での座標を特定し、指定位置検出手段によって検出された指定位置を、その特定された座標位置に変更するように境界位置データを再生成している。
この構成では、実空間の画像と共に表示された境界画像において、変更すべき部分をタッチパネル110で視認しながら当該タッチパネル110上での押圧操作によって簡単に指定することができる。また、このような指定の後には、所望の位置に端末を移動させてタッチパネル110上で解除操作を行えば良く、これにより、その解除操作時の位置(座標)を新たな境界位置として簡単に再設定することができる。
In the present embodiment, the display means includes a touch panel 110 including a display unit 114 capable of displaying a composite image and an operation panel 112 covering the display unit 114, and the operation panel 112 is configured as an input unit. .
The designated position detecting means detects the pressed position in the boundary image as the designated position when the position of the boundary image is pressed on the operation panel 112 in a state where the composite image is displayed on the display unit 114. Further, the regenerating unit is configured to perform the operation at the time of the release operation based on the detection result by the coordinate detection unit when a predetermined release operation is performed on the operation panel 112 after the specified position is detected by the specified position detection unit. The coordinates in the real space of the portable setting terminal are specified, and the boundary position data is regenerated so as to change the specified position detected by the specified position detecting means to the specified coordinate position.
In this configuration, in the boundary image displayed together with the image in the real space, the portion to be changed can be easily specified by a pressing operation on the touch panel 110 while visually recognizing the portion to be changed. Further, after such designation, the terminal may be moved to a desired position and a release operation may be performed on the touch panel 110, whereby the position (coordinates) at the time of the release operation can be easily set as a new boundary position. Can be reset.

また、本実施形態では、レーザレーダ装置2を通信対象として通信を行う通信部102(通信手段)が設けられており、この通信手段が出力手段として構成されている。そして、メモリ104(登録手段)は、通信手段がレーザレーダ装置2からデータを受信した場合に、その受信したデータに基づいて境界位置データを登録している。更に、通信部102(通信手段)は、再生成手段によって境界位置データが再生成された場合に、その再生成された境界位置データをレーザレーダ装置2に出力するように構成されている。
この構成によれば、レーザレーダ装置2で設定されている監視エリアのデータを携帯型設定端末100に展開して実画像と共に表示することができ、更に、上記手法を用いて当該監視エリアのデータを所望の内容に再生成することができる。また、端末にて監視エリアを再生成した後には、この再生後のデータをレーザレーダ装置2に展開することができるため、レーザレーダ装置2内で複雑な設定作業を行わずとも、監視エリアを所望のエリア構成とするように容易に調整することができる。
In the present embodiment, a communication unit 102 (communication means) that performs communication with the laser radar device 2 as a communication target is provided, and the communication means is configured as an output means. When the communication unit receives data from the laser radar device 2, the memory 104 (registration unit) registers boundary position data based on the received data. Further, the communication unit 102 (communication means) is configured to output the regenerated boundary position data to the laser radar device 2 when the boundary position data is regenerated by the regenerating means.
According to this configuration, the monitoring area data set in the laser radar device 2 can be developed on the portable setting terminal 100 and displayed together with the actual image, and further, the monitoring area data can be displayed using the above-described method. Can be regenerated to the desired content. In addition, after the monitoring area is regenerated at the terminal, the reproduced data can be developed in the laser radar device 2, so that the monitoring area can be saved without performing complicated setting work in the laser radar device 2. It can be easily adjusted to obtain a desired area configuration.

[第1実施形態の変更例]
第1実施形態では、カメラ130で撮像された実空間の画像と監視エリアの境界画像とを合わせて表示していたが、更に、別の画像(予め用意された仮想的な候補画像)を組み込むようにしてもよい。例えば、図9(A)のような物体画像Rbを表示するためのデータを予め記憶しておき、ユーザがこのような物体画像Rbの表示を選択できるようにしておく。そして、ユーザにより、このような物体画像Rbの表示が選択されたときに、この物体画像Rbをカメラ130で撮像された実空間の画像に組み込むように表示してもよい。
[Modification of the first embodiment]
In the first embodiment, the real space image captured by the camera 130 and the boundary image of the monitoring area are displayed together, but another image (a virtual candidate image prepared in advance) is further incorporated. You may do it. For example, data for displaying the object image Rb as shown in FIG. 9A is stored in advance so that the user can select the display of the object image Rb. When the display of the object image Rb is selected by the user, the object image Rb may be displayed so as to be incorporated into the real space image captured by the camera 130.

このような候補画像は、実空間内のどの位置に配置すべきかを特定可能な形で画像を構成しておくと良い。例えば、図9(A)のような物体画像Rbの場合、画像の形状データだけでなく、当該物体画像Rbの実空間内での位置(例えば、物体画像Rbを構成する各頂点の実空間内での座標や各線分の実空間内での位置等)を指定データとして記憶しておけば、カメラ130で撮像された実空間の撮像画像内においてその指定データに対応する位置に物体画像Rb(候補画像)を組み込むことができる。この場合、図3のような処理を行うときに、S2やS4の表示処理においてこのような物体画像Rbを指定位置(上記指定データで指定される実空間内の位置)に組み込んで表示を行うようにすれば、実際には存在しない物体を想定した上で監視エリアを調整することができる(図9(B)参照)。   Such a candidate image may be configured in such a way that it can be specified at which position in the real space it should be placed. For example, in the case of the object image Rb as shown in FIG. 9A, not only the image shape data but also the position of the object image Rb in the real space (for example, in the real space of each vertex constituting the object image Rb) If coordinates such as the position of each line segment in the real space) are stored as the designated data, the object image Rb (at the position corresponding to the designated data in the captured image of the real space captured by the camera 130 is stored. Candidate images) can be incorporated. In this case, when the processing as shown in FIG. 3 is performed, display is performed by incorporating such an object image Rb into a specified position (a position in the real space specified by the specified data) in the display processing of S2 and S4. By doing so, it is possible to adjust the monitoring area while assuming an object that does not actually exist (see FIG. 9B).

この場合、メモリ104が「候補画像記憶手段」の一例に相当し、合成画像に組み合わせる候補画像(例えば物体画像Rb等)を記憶するように機能する。また、操作パネル112及び制御部106は「選択手段」の一例に相当し、候補画像記憶手段から候補画像を選択するように機能する。また、この場合、「合成画像生成手段」に相当する制御部106は、カメラ130(撮像手段)によって撮像された実空間の画像に対し、当該画像内の境界位置データで特定される位置に境界画像を組み込み、且つ選択手段で選択された候補画像(例えば図9のような物体画像Rb)を組み込んで合成画像を生成するように機能している。   In this case, the memory 104 corresponds to an example of “candidate image storage unit”, and functions to store candidate images (for example, object image Rb) to be combined with the composite image. The operation panel 112 and the control unit 106 correspond to an example of a “selecting unit”, and function to select a candidate image from the candidate image storage unit. Further, in this case, the control unit 106 corresponding to the “composite image generation unit” has a boundary at a position specified by the boundary position data in the image with respect to the real space image captured by the camera 130 (imaging unit). An image is incorporated, and a candidate image (for example, an object image Rb as shown in FIG. 9) selected by the selection unit is incorporated to generate a composite image.

この構成では、実空間に物体が存在している状態では端末の設定作業(物体付近への移動等)が難しいような環境(例えば、工場内で稼働するロボットの近傍に監視エリアを設定する場合)において、当該物体を想定した境界設定を行う場合に特に有利となる。   In this configuration, when the object exists in real space, it is difficult to set the terminal (moving to the vicinity of the object, etc.) (for example, when setting the monitoring area near the robot operating in the factory) ) Is particularly advantageous when performing boundary setting assuming the object.

また、図10(A)のように、仮想的な候補画像(物体画像Rb)を表示する場合、このような画像を継続的に表示しつつ、図4のような監視エリアに代えて、或いは図4のような監視エリアとは別に、新たな監視エリアを設定できるようにしてもよい。図10(B)の例では、このような新たな監視エリアの設定方法を示しており、例えば、ユーザが、図10(A)のような画像(図9(A)と同様の画像であり、カメラ130で撮像した実空間の画像に境界画像と物体画像Rbを組み込んだ画像)を見ながら、図10(B)のようにこの表示画像内の複数位置(図10(B)では位置P21〜P26)を指Fなどによる押圧操作で指定したときに、これら位置によって囲まれるエリアを新たな監視エリアとするように設定してもよい。このように指定された新たな監視エリアは、既に設定されている監視エリアと置き換えて使用する場合には、更新された境界位置データとしてレーザレーダ装置2に送信するように用いればよい。また、新たな監視エリアを別の監視エリアとして用いる場合には、既に設定されている境界位置データとは別で第2の境界位置データとしてレーザレーダ装置2に送信するようにすればよい。この場合、レーザレーダ装置2では、新たな監視エリアを既に設定されている監視エリアとは別の用途に用いることができる(例えば、当該新たな監視エリア内で物体が検出された場合には警報を発する等)。   Further, when a virtual candidate image (object image Rb) is displayed as shown in FIG. 10A, such an image is continuously displayed, instead of the monitoring area as shown in FIG. A new monitoring area may be set separately from the monitoring area as shown in FIG. In the example of FIG. 10B, such a new monitoring area setting method is shown. For example, the user displays an image like FIG. 10A (an image similar to FIG. 9A). While viewing the real space image captured by the camera 130, an image in which the boundary image and the object image Rb are incorporated), a plurality of positions in the display image as shown in FIG. 10B (position P21 in FIG. 10B). -P26) may be set so that the area surrounded by these positions is set as a new monitoring area when it is designated by a pressing operation with a finger F or the like. The new monitoring area designated in this way may be used so as to be transmitted to the laser radar device 2 as updated boundary position data when used in place of the already set monitoring area. When a new monitoring area is used as another monitoring area, it may be transmitted to the laser radar device 2 as the second boundary position data separately from the already set boundary position data. In this case, in the laser radar device 2, the new monitoring area can be used for a different application from the already set monitoring area (for example, if an object is detected in the new monitoring area, an alarm is issued. Etc.).

[他の実施形態]
本発明は上記記述及び図面によって説明した実施形態に限定されるものではなく、例えば次のような実施形態も本発明の技術的範囲に含まれる。
[Other Embodiments]
The present invention is not limited to the embodiments described with reference to the above description and drawings. For example, the following embodiments are also included in the technical scope of the present invention.

上記実施形態では、三次元的に走査を行うレーザレーダ装置を例に挙げたが、二次元的な走査(水平走査)を行うレーザレーダ装置を用い、同様の方法で監視エリアを設定するようにしてもよい。   In the above embodiment, a laser radar apparatus that performs scanning three-dimensionally is taken as an example, but a monitoring area is set by a similar method using a laser radar apparatus that performs two-dimensional scanning (horizontal scanning). May be.

上記実施形態では、携帯型設定端末100で生成された更新データ(境界位置データ)をレーザレーダ装置2に対し無線通信によって送信する例を示したが、有線通信で送信してもよく、外部メモリなどを媒介としてユーザの手によって渡すようにしてもよい。   In the above-described embodiment, the update data (boundary position data) generated by the portable setting terminal 100 is transmitted to the laser radar device 2 by wireless communication. It may be passed by the user's hand as a medium.

また、上記実施形態と同様の構成(図1、図2等)を用い、図3に示す制御方法の一部を以下のように変更してもよい。
例えば、図3のS1〜S4と同様に制御、処理を行い、S5での解除操作の判断のみ異ならせるようにしてもよい。この構成でも、指定位置検出手段によって指定位置が検出された後(即ち、S3でYesとなった後)、S5でYesとなるまでは、当該携帯型設定端末1の位置又は向きが変化した場合に、その変化後のカメラ130の撮像方向(所定方向)における実空間の画像の撮像を繰り返し、表示部114は、カメラ130によって繰り返し取得される撮像画像を逐次更新表示する。
そして、このような更新表示がなされている最中に、その更新表示される実空間の撮像画像内の位置を指示するように操作パネル112によって解除操作(例えば、撮像画像内の所定位置を押圧する押圧操作等)が行われたときに、S5にてYesに進み、その指定された位置の実空間での座標を特定し、指定位置検出手段によって検出された指定位置(S3で判断された指定位置)を、その特定された座標位置に変更するように境界位置データを再生成する。なお、本実施形態では、表示された撮像画像(実空間の画像)内の指示位置(解除操作時の押圧位置)の座標は、ジャイロセンサ121、GPSセンサ122、距離計測器123による各検出値に基づき特定することができる。
この構成でも、操作パネル112が「入力手段」として機能する。また、この場合も、制御部106が「指定位置検出手段」の一例に相当し、操作パネル112(入力手段)において境界画像の一部を指定する所定の指定操作がなされたときに、表示部114(表示手段)に表示される境界画像においてその指定位置を検出するように機能する。また、制御部106は、「指示操作検出手段」の一例に相当し、操作パネル112(入力手段)において境界画像の変更位置を指示する所定の指示操作がなされたことを検出するように機能する。
また、制御部106が「再生成手段」の一例に相当し、指示操作検出手段によって指示操作が検出されたときに、指定位置検出手段によって検出された指定位置を、指示操作検出手段によって検出された指示操作での指示位置に変更するように境界位置データを再生成するように機能する。具体的には、指定位置検出手段により指定位置が検出された後に、表示部114にて更新表示される実空間の撮像画像内の位置を指定するように操作パネル112によって解除操作が行われたときに、その指定された位置の実空間での座標を特定し、指定位置検出手段によって検出された指定位置を、その特定された座標位置に変更するように境界位置データを再生成するように機能する。
この構成では、実空間の画像と共に表示された境界画像において、変更すべき部分をタッチパネルで視認しながら当該タッチパネル上での押圧操作によって簡単に指定することができる。また、このような指定の後には、端末を所望の位置或いは向きに変更し、更新表示される画面上の希望する位置を指示するように解除操作を行えば、その指示された画面上の位置を新たな境界位置として簡単に再設定することができる。
3 may be modified as follows using the same configuration (FIG. 1, FIG. 2, etc.) as in the above embodiment.
For example, control and processing may be performed in the same manner as S1 to S4 in FIG. 3, and only the determination of the release operation in S5 may be made different. Even in this configuration, after the designated position is detected by the designated position detecting means (that is, after “Yes” in S3) and until “Yes” in S5, the position or orientation of the portable setting terminal 1 changes. In addition, the imaging of the real space in the imaging direction (predetermined direction) of the camera 130 after the change is repeated, and the display unit 114 sequentially updates and displays the captured images repeatedly acquired by the camera 130.
While such an update display is being performed, a release operation (for example, pressing a predetermined position in the captured image) is performed by the operation panel 112 so as to indicate a position in the captured image of the real space to be updated and displayed. When a pressing operation is performed, the process proceeds to Yes in S5, the coordinates of the designated position in the real space are specified, and the designated position detected by the designated position detecting means (determined in S3) The boundary position data is regenerated so as to change the designated position) to the specified coordinate position. In the present embodiment, the coordinates of the indicated position (pressed position at the time of the release operation) in the displayed captured image (real space image) are detected values by the gyro sensor 121, the GPS sensor 122, and the distance measuring device 123. Can be identified.
Even in this configuration, the operation panel 112 functions as an “input unit”. Also in this case, the control unit 106 corresponds to an example of a “designated position detection unit”, and the display unit is displayed when a predetermined designation operation for designating a part of the boundary image is performed on the operation panel 112 (input unit). It functions to detect the designated position in the boundary image displayed on 114 (display means). The control unit 106 corresponds to an example of “instruction operation detection unit”, and functions to detect that a predetermined instruction operation for instructing a change position of the boundary image is performed on the operation panel 112 (input unit). .
The control unit 106 corresponds to an example of a “regeneration unit”. When the instruction operation is detected by the instruction operation detection unit, the designated position detected by the designated position detection unit is detected by the instruction operation detection unit. The boundary position data is regenerated so as to change to the designated position in the designated operation. Specifically, after the designated position is detected by the designated position detecting means, the release operation is performed by the operation panel 112 so as to designate the position in the captured image of the real space that is updated and displayed on the display unit 114. Sometimes, the coordinates of the designated position in the real space are specified, and the boundary position data is regenerated so as to change the designated position detected by the designated position detection means to the specified coordinate position. Function.
In this configuration, in the boundary image displayed together with the image in the real space, the portion to be changed can be easily designated by a pressing operation on the touch panel while visually recognizing the portion to be changed. After such designation, if the terminal is changed to a desired position or orientation and a release operation is performed so as to indicate the desired position on the screen to be updated and displayed, the position on the indicated screen Can be easily reset as a new boundary position.

1…監視システム
10…レーザダイオード(走査手段)
20…フォトダイオード(受光手段)
40…回転偏向装置(走査手段)
72…記憶部(記憶手段)
100…携帯型設定端末
106…制御部(方向検出手段、合成画像生成手段、指定位置検出手段、指示操作検出手段、再生成手段、出力手段、選択手段、登録手段)
102…通信部(出力手段、通信手段)
104…メモリ(登録手段、候補画像記憶手段)
110…タッチパネル(表示手段)
112…操作パネル(入力手段)
114…表示部
122…GPSセンサ(座標検出手段)
123…距離計測器(座標検出手段)
130…カメラ(撮像手段)
DESCRIPTION OF SYMBOLS 1 ... Monitoring system 10 ... Laser diode (scanning means)
20 ... Photodiode (light receiving means)
40: Rotating deflection device (scanning means)
72. Storage section (storage means)
DESCRIPTION OF SYMBOLS 100 ... Portable type setting terminal 106 ... Control part (Direction detection means, synthetic | combination image generation means, designated position detection means, instruction | indication operation detection means, regeneration means, output means, selection means, registration means)
102: Communication unit (output means, communication means)
104: Memory (registration means, candidate image storage means)
110 ... Touch panel (display means)
112 ... Operation panel (input means)
114 ... Display unit 122 ... GPS sensor (coordinate detection means)
123 ... Distance measuring device (coordinate detection means)
130 ... Camera (imaging means)

Claims (7)

実空間に設定された監視エリア内を監視する監視システムに用いられ、前記監視エリアを設定変更可能に構成された携帯型設定端末であって、
前記実空間に設定される前記監視エリアの境界位置データを登録する登録手段と、
当該携帯型設定端末における所定方向を撮像方向とするように、前記実空間の画像を撮像する撮像手段と、
前記撮像手段による前記撮像方向又は当該撮像方向と一定関係で定められた所定方向の前記実空間内での向きを検出可能な方向検出手段と、
当該携帯型設定端末の実空間内での座標を検出する座標検出手段と、
前記登録手段に登録された前記境界位置データと、前記方向検出手段によって検出された前記撮像方向又は前記所定方向の前記実空間内での向きと、前記座標検出手段によって検出された当該携帯型設定端末の前記実空間内での前記座標と、に基づき、前記撮像手段によって撮像された前記実空間の画像に対し当該画像内の前記境界位置データで特定される位置に境界画像を組み込んで合成画像を生成する合成画像生成手段と、
前記合成画像生成手段によって生成された前記合成画像を表示する表示手段と、
外部からの入力操作を受け付ける入力手段と、
前記入力手段において前記境界画像の一部を指定する所定の指定操作がなされたときに、前記表示手段に表示される前記境界画像においてその指定位置を検出する指定位置検出手段と、
前記入力手段において前記境界画像の変更位置を指示する所定の指示操作がなされたことを検出する指示操作検出手段と、
前記指示操作検出手段によって前記指示操作が検出されたときに、前記指定位置検出手段によって検出された前記指定位置を、前記指示操作検出手段によって検出された前記指示操作での指示位置に変更するように前記境界位置データを再生成する再生成手段と、
前記再生成手段によって再生成された前記境界位置データを出力する出力手段と、
を備えたことを特徴とする携帯型設定端末。
A portable setting terminal used in a monitoring system for monitoring a monitoring area set in a real space and configured to change the setting of the monitoring area,
Registration means for registering boundary position data of the monitoring area set in the real space;
Imaging means for imaging an image of the real space so that a predetermined direction in the portable setting terminal is an imaging direction;
Direction detecting means capable of detecting a direction in the real space of the imaging direction by the imaging means or a predetermined direction defined in a fixed relationship with the imaging direction;
Coordinate detection means for detecting coordinates in real space of the portable setting terminal;
The boundary position data registered in the registration unit, the imaging direction detected by the direction detection unit or the orientation of the predetermined direction in the real space, and the portable setting detected by the coordinate detection unit Based on the coordinates in the real space of the terminal, a composite image obtained by incorporating a boundary image at a position specified by the boundary position data in the image with respect to the image in the real space captured by the imaging unit Synthetic image generation means for generating
Display means for displaying the composite image generated by the composite image generation means;
An input means for accepting external input operations;
Designated position detecting means for detecting the designated position in the boundary image displayed on the display means when a predetermined designation operation for designating a part of the boundary image is performed in the input means;
Instruction operation detecting means for detecting that a predetermined instruction operation for instructing a change position of the boundary image is performed in the input means;
When the instruction operation is detected by the instruction operation detection means, the designated position detected by the designated position detection means is changed to an instruction position in the instruction operation detected by the instruction operation detection means. Regenerating means for regenerating the boundary position data;
Output means for outputting the boundary position data regenerated by the regenerating means;
A portable setting terminal comprising:
前記再生成手段は、前記指示操作検出手段によって前記指示操作が検出されたときの前記座標検出手段による検出結果に基づき、前記指示操作時の当該携帯型設定端末の実空間での座標を特定し、前記指定位置検出手段によって検出された前記境界画像の前記指定位置を、その特定された座標位置に変更するように前記境界位置データを再生成することを特徴とする請求項1に記載の携帯型設定端末。   The regeneration means specifies the coordinates in the real space of the portable setting terminal at the time of the instruction operation based on the detection result by the coordinate detection means when the instruction operation is detected by the instruction operation detection means. 2. The mobile phone according to claim 1, wherein the boundary position data is regenerated so as to change the specified position of the boundary image detected by the specified position detection unit to the specified coordinate position. Type setting terminal. 前記表示手段は、前記合成画像を表示可能な表示部と、前記表示部を覆う操作パネルとを備えたタッチパネルからなり、
前記操作パネルが前記入力手段として構成されており、
前記指定位置検出手段は、前記表示部に前記合成画像が表示された状態で前記操作パネルにおいて前記境界画像の位置が押圧されたときに、前記境界画像におけるその押圧位置を前記指定位置として検出し、
前記再生成手段は、前記指定位置検出手段により前記指定位置が検出された後に前記操作パネルに対して所定の解除操作が行われたときに、前記座標検出手段による検出結果に基づき、前記解除操作時の当該携帯型設定端末の前記実空間での座標を特定し、前記指定位置検出手段によって検出された前記指定位置を、その特定された座標位置に変更するように前記境界位置データを再生成することを特徴とする請求項2に記載の携帯型設定端末。
The display means includes a touch panel including a display unit capable of displaying the composite image and an operation panel covering the display unit,
The operation panel is configured as the input means;
The designated position detecting means detects the pressed position in the boundary image as the designated position when the position of the boundary image is pressed on the operation panel in a state where the composite image is displayed on the display unit. ,
The regeneration unit is configured to perform the release operation based on a detection result of the coordinate detection unit when a predetermined release operation is performed on the operation panel after the designated position is detected by the designated position detection unit. The coordinates in the real space of the portable setting terminal at the time are specified, and the boundary position data is regenerated so as to change the specified position detected by the specified position detection means to the specified coordinate position The portable setting terminal according to claim 2.
前記表示手段は、前記合成画像を表示可能な表示部と、前記表示部を覆う操作パネルとを備えたタッチパネルからなり、
前記操作パネルが前記入力手段として構成されており、
前記指定位置検出手段は、前記表示部に前記合成画像が表示された状態で前記操作パネルにおいて前記境界画像の位置が押圧されたときに、前記境界画像におけるその押圧位置を前記指定位置として検出する構成をなしており、
前記撮像手段は、前記指定位置検出手段によって前記指定位置が検出された後に、当該携帯型設定端末の位置又は向きが変化した場合に、その変化後の前記所定方向を撮像方向とするように前記実空間の画像の撮像を繰り返し、
前記表示部は、前記撮像手段によって繰り返し取得される撮像画像を逐次更新表示するように構成されており、
前記再生成手段は、前記指定位置検出手段により前記指定位置が検出された後に、前記表示部にて更新表示される前記実空間の撮像画像内の位置を指定するように前記操作パネルによって解除操作が行われたときに、その指定された位置の前記実空間での座標を特定し、前記指定位置検出手段によって検出された前記指定位置を、その特定された座標位置に変更するように前記境界位置データを再生成することを特徴とする請求項1に記載の携帯型設定端末。
The display means includes a touch panel including a display unit capable of displaying the composite image and an operation panel covering the display unit,
The operation panel is configured as the input means;
The designated position detecting means detects the pressed position in the boundary image as the designated position when the position of the boundary image is pressed on the operation panel in a state where the composite image is displayed on the display unit. Made up of
When the position or orientation of the portable setting terminal is changed after the designated position is detected by the designated position detecting means, the imaging means is configured to set the predetermined direction after the change as the imaging direction. Repeated imaging of real space images,
The display unit is configured to sequentially update and display captured images repeatedly acquired by the imaging unit,
The regeneration unit performs a release operation by the operation panel so as to designate a position in the captured image of the real space that is updated and displayed on the display unit after the designated position is detected by the designated position detection unit. Is performed, the coordinates of the designated position in the real space are specified, and the boundary is so changed that the designated position detected by the designated position detecting means is changed to the designated coordinate position. The portable setting terminal according to claim 1, wherein the position data is regenerated.
前記実空間においてレーザ光を走査する走査手段と、前記走査手段によって走査される前記レーザ光が前記実空間に存在する物体に照射されたときの反射光を受光する受光手段と、前記監視エリアの境界位置を定めるデータを記憶する記憶手段と、を備え、前記記憶手段に記憶されるデータに基づいて設定された前記監視エリア内で物体検出を行うように構成されたレーザレーダ装置を通信対象として通信を行う通信手段を有し、
前記通信手段が前記出力手段として構成されており、
前記登録手段は、前記通信手段が前記レーザレーダ装置からデータを受信した場合に、その受信したデータに基づいて前記境界位置データを登録し、
前記通信手段は、前記再生成手段によって前記境界位置データが再生成された場合に、その再生成された前記境界位置データを前記レーザレーダ装置に出力することを特徴とする請求項1から請求項4のいずれか一項に記載の携帯型設定端末。
Scanning means for scanning laser light in the real space; light receiving means for receiving reflected light when the laser light scanned by the scanning means is irradiated on an object existing in the real space; and Storage means for storing data for determining the boundary position, and a laser radar device configured to detect an object within the monitoring area set based on the data stored in the storage means Having communication means for performing communication;
The communication means is configured as the output means;
The registration unit registers the boundary position data based on the received data when the communication unit receives data from the laser radar device.
The said communication means outputs the said regenerated boundary position data to the said laser radar apparatus, when the said boundary position data are regenerated by the said regeneration means. 5. The portable setting terminal according to any one of 4.
前記合成画像に組み合わせる候補画像を記憶する候補画像記憶手段と、
前記候補画像記憶手段から候補画像を選択する選択手段と、
を備え、
前記合成画像生成手段は、前記撮像手段によって撮像された前記実空間の画像に対し、当該画像内の前記境界位置データで特定される位置に前記境界画像を組み込み、且つ前記選択手段で選択された前記候補画像を組み込んで合成画像を生成しており、
前記表示手段により、前記候補画像が組み込まれた前記合成画像が表示された状態で、前記入力手段における前記指定操作及び前記指示操作が可能とされていることを特徴とする請求項1から請求項5のいずれか一項に記載の携帯型設定端末。
Candidate image storage means for storing candidate images to be combined with the composite image;
Selecting means for selecting candidate images from the candidate image storage means;
With
The composite image generation unit incorporates the boundary image at a position specified by the boundary position data in the image with respect to the real space image captured by the imaging unit, and is selected by the selection unit. The candidate image is incorporated to generate a composite image,
The specification operation and the instruction operation in the input unit are enabled in a state where the composite image including the candidate image is displayed by the display unit. The portable setting terminal according to claim 5.
実空間においてレーザ光を走査する走査手段と、前記走査手段によって走査される前記レーザ光が前記実空間に存在する物体に照射されたときの反射光を受光する受光手段と、監視エリアの境界位置を定めるデータを記憶する記憶手段とを備え、前記記憶手段に記憶されたデータに基づいて設定される前記監視エリア内で物体検出を行うレーザレーダ装置と、
前記レーザレーダ装置と通信を行う通信手段を有し、前記境界位置を定めるデータの更新データを生成可能に構成された携帯型設定端末と、
を備えた監視システムであって、
前記携帯型設定端末は、
前記レーザレーダ装置からのデータ受信又は前記レーダレーダ装置以外からの外部入力に基づいて前記監視エリアの境界位置データを登録する登録手段と、
当該携帯型設定端末における所定方向を撮像方向とするように、前記実空間の画像を撮像する撮像手段、
前記撮像手段による前記撮像方向又は当該撮像方向と一定関係で定められた所定方向の前記実空間内での向きを検出可能な方向検出手段と、
当該携帯型設定端末の実空間内での座標を検出する座標検出手段と、
前記登録手段に登録された前記境界位置データと、前記方向検出手段によって検出された前記撮像方向又は前記所定方向の前記実空間内での向きと、前記座標検出手段によって検出された当該携帯型設定端末の前記実空間内での前記座標と、に基づき、前記撮像手段によって撮像された前記実空間の画像に対し当該画像内の前記境界位置データで特定される位置に境界画像を組み込んで合成画像を生成する合成画像生成手段と、
前記合成画像生成手段によって生成された前記合成画像を表示する表示手段と、
外部からの入力操作を受け付ける入力手段と、
前記入力手段において前記境界画像の一部を指定する所定の指定操作がなされたときに、前記表示手段に表示される前記境界画像においてその指定位置を検出する指定位置検出手段と、
前記入力手段において前記境界画像の変更位置を指示する所定の指示操作がなされたことを検出する指示操作検出手段と、
前記指示操作検出手段によって前記指示操作が検出されたときに、前記指定位置検出手段によって検出された前記指定位置を、前記指示操作検出手段によって検出された前記指示操作での指示位置に変更するように前記境界位置データを再生成する再生成手段と、
を備え、
前記通信手段は、前記再生成手段によって再生成された前記境界位置データを前記レーザレーダ装置に出力するように構成されており、
前記レーザレーダ装置は、前記携帯型設定端末の前記通信手段から出力された再生成後の前記境界位置データに基づいて前記記憶手段に記憶される前記境界位置を定めるデータを更新することを特徴とする監視システム。
Scanning means for scanning laser light in real space, light receiving means for receiving reflected light when the laser light scanned by the scanning means is irradiated on an object existing in the real space, and a boundary position of the monitoring area A laser radar device for detecting an object in the monitoring area set based on the data stored in the storage means,
A portable setting terminal having communication means for communicating with the laser radar device, and configured to generate update data of data defining the boundary position;
A monitoring system comprising:
The portable setting terminal is
Registration means for registering boundary position data of the monitoring area based on data reception from the laser radar device or external input from other than the radar radar device;
An imaging means for imaging an image of the real space so that a predetermined direction in the portable setting terminal is an imaging direction;
Direction detecting means capable of detecting a direction in the real space of the imaging direction by the imaging means or a predetermined direction defined in a fixed relationship with the imaging direction;
Coordinate detection means for detecting coordinates in real space of the portable setting terminal;
The boundary position data registered in the registration unit, the imaging direction detected by the direction detection unit or the orientation of the predetermined direction in the real space, and the portable setting detected by the coordinate detection unit Based on the coordinates in the real space of the terminal, a composite image obtained by incorporating a boundary image at a position specified by the boundary position data in the image with respect to the image in the real space captured by the imaging unit Synthetic image generation means for generating
Display means for displaying the composite image generated by the composite image generation means;
An input means for accepting external input operations;
Designated position detecting means for detecting the designated position in the boundary image displayed on the display means when a predetermined designation operation for designating a part of the boundary image is performed in the input means;
Instruction operation detecting means for detecting that a predetermined instruction operation for instructing a change position of the boundary image is performed in the input means;
When the instruction operation is detected by the instruction operation detection means, the designated position detected by the designated position detection means is changed to an instruction position in the instruction operation detected by the instruction operation detection means. Regenerating means for regenerating the boundary position data;
With
The communication means is configured to output the boundary position data regenerated by the regeneration means to the laser radar device,
The laser radar device updates data defining the boundary position stored in the storage unit based on the regenerated boundary position data output from the communication unit of the portable setting terminal. Monitoring system.
JP2011077730A 2011-03-31 2011-03-31 Portable setting terminal and monitoring system Active JP5549631B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2011077730A JP5549631B2 (en) 2011-03-31 2011-03-31 Portable setting terminal and monitoring system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2011077730A JP5549631B2 (en) 2011-03-31 2011-03-31 Portable setting terminal and monitoring system

Publications (2)

Publication Number Publication Date
JP2012213042A JP2012213042A (en) 2012-11-01
JP5549631B2 true JP5549631B2 (en) 2014-07-16

Family

ID=47266651

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2011077730A Active JP5549631B2 (en) 2011-03-31 2011-03-31 Portable setting terminal and monitoring system

Country Status (1)

Country Link
JP (1) JP5549631B2 (en)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10192128B2 (en) 2015-03-27 2019-01-29 Nec Corporation Mobile surveillance apparatus, program, and control method
KR101690781B1 (en) * 2016-03-04 2016-12-29 주식회사 에센코 Method for Configuring Region of Interest of Radar Monitoring System and Apparatus Therefor
EP3460772B1 (en) * 2016-05-17 2020-07-15 Konica Minolta, Inc. Monitoring system setting method, and monitoring system
US11199627B2 (en) 2016-05-17 2021-12-14 Konica Minolta, Inc. Monitoring system
CN116760954B (en) * 2023-08-18 2023-11-14 国网山东省电力公司滨州市沾化区供电公司 Monitoring alarm system for underground cable

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6385772B1 (en) * 1998-04-30 2002-05-07 Texas Instruments Incorporated Monitoring system having wireless remote viewing and control
DE69921237T2 (en) * 1998-04-30 2006-02-02 Texas Instruments Inc., Dallas Automatic video surveillance system
JP4006577B2 (en) * 2002-03-13 2007-11-14 オムロン株式会社 Monitoring device
US8659619B2 (en) * 2004-03-26 2014-02-25 Intellectual Ventures Fund 83 Llc Display device and method for determining an area of importance in an original image
US20050220080A1 (en) * 2004-04-01 2005-10-06 Nokia Corporation System, method, computer program product, and business method for device group management using virtual device domain
CN101790003A (en) * 2009-01-23 2010-07-28 英华达(上海)电子有限公司 Monitoring or listening method used for mobile device with audio function or video function
US9854207B2 (en) * 2009-07-31 2017-12-26 Antonio Garrett Mobile surveillance system

Also Published As

Publication number Publication date
JP2012213042A (en) 2012-11-01

Similar Documents

Publication Publication Date Title
JP5060358B2 (en) Surveying system
AU2011328191B2 (en) Device for measuring and marking space points along horizontally running contour lines
JP5544032B2 (en) Method and laser measurement system for controlling a laser tracker using a gesture
JP5748521B2 (en) Laser scanner and moving object detection method
JP6211876B2 (en) Measuring method and measuring device
JP5549631B2 (en) Portable setting terminal and monitoring system
EP2068116B1 (en) Surveying system
US20140190025A1 (en) Surveying appliance and method having a targeting functionality which is based on the orientation of a remote control unit and is scalable
WO2016063419A1 (en) Surveying instrument and program
EP2587215A2 (en) Image measuring system
JP2010038901A (en) Surveying device and automatic tracking method
JP6396141B2 (en) Measuring method and measuring device
CN104620129A (en) Laser scanner with dynamical adjustment of angular scan velocity
EP3187824B1 (en) Measurement and installation data indicating apparatus and method
JP2016513257A (en) Projection system
US9671217B2 (en) Structure measuring unit for tracking, measuring and marking edges and corners of adjacent surfaces
CA2822180C (en) Measuring appliance comprising a dynamic sighting functionality and associated method
JP7313955B2 (en) Surveying instrument, surveying method and surveying program
JP2017528700A (en) Tracking method and tracking system
JP6675336B2 (en) Laser measuring device
JP6800698B2 (en) How to control the magnifying observation device and the magnifying observation device
JP2020067405A (en) Surveying device
CN111248933A (en) Scanning method, device and system
JP2012061587A (en) Teaching system of robot
JPH0755439A (en) Three-dimensional shape measuring equipment

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20130730

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20140408

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20140422

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20140505

R150 Certificate of patent or registration of utility model

Ref document number: 5549631

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250