JPH11283406A - Automatic tracking lighting system - Google Patents

Automatic tracking lighting system

Info

Publication number
JPH11283406A
JPH11283406A JP10144931A JP14493198A JPH11283406A JP H11283406 A JPH11283406 A JP H11283406A JP 10144931 A JP10144931 A JP 10144931A JP 14493198 A JP14493198 A JP 14493198A JP H11283406 A JPH11283406 A JP H11283406A
Authority
JP
Japan
Prior art keywords
irradiation target
irradiation
illumination
tracking
pixel coordinates
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP10144931A
Other languages
Japanese (ja)
Inventor
Juichi Kawashima
寿一 川島
Minoru Yoshida
稔 吉田
Kenichi Hagio
健一 萩尾
Eiichi Fukui
栄一 福井
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Electric Works Co Ltd
Original Assignee
Matsushita Electric Works Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Works Ltd filed Critical Matsushita Electric Works Ltd
Priority to JP10144931A priority Critical patent/JPH11283406A/en
Publication of JPH11283406A publication Critical patent/JPH11283406A/en
Pending legal-status Critical Current

Links

Landscapes

  • Non-Portable Lighting Devices Or Systems Thereof (AREA)
  • Control Of Position Or Direction (AREA)

Abstract

PROBLEM TO BE SOLVED: To deal with an increase in the number of targets for irradiation to be tracked without adding image pickup means and to reduce the processing time required for image processing at the start of tracking. SOLUTION: An automatic tracking lighting system has an illumination means 1 having directively and capable of changing its irradiating direction, a plurality of image pickup means 2 whereby images of the space illuminated by the illumination means are picked up from different directions, an image recognition means 3 for identifying targets for irradiation from the images picked up by plurality of image pickup means and for specifying the pixel coordinates of each image pickup means which picks up images of the targets for irradiation, and a position coordinate computing means 4 for computing the positions of the targets for irradiation within the illuminated space from the plurality of pixel coordinates specified by the image recognition means. When the tracking of the targets for irradiation is started, the targets for irradiation are identified only in the parts of the image corresponding to a predetermined range of the pixel coordinates on the basis of the computation results of the pixel coordinates computed by the position coordinated computing means.

Description

【発明の詳細な説明】DETAILED DESCRIPTION OF THE INVENTION

【0001】[0001]

【発明の属する技術分野】本発明は、宴会場やホール及
び舞台等の会場において、出演者を投光しながら自動的
に追尾する自動追尾照明装置に関する。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to an automatic tracking lighting device for automatically tracking performers while projecting light in venues such as banquet halls, halls and stages.

【0002】[0002]

【従来の技術】従来より、人物等の移動する照射目標を
自動的に追尾して投光する自動追尾照明装置としては、
例えば、撮像方向を可変する駆動装置を具備した撮像カ
メラで照射目標を撮像し、撮像した映像を画像処理して
照射目標が常に撮像映像の中心にみえるように駆動装置
を制御して撮像カメラから照射目標への方向を特定し、
照射目標の座標を特定するものがある。また、複数台の
駆動装置付き撮像カメラで同一の照射目標を追尾するこ
とによって、その照射目標の3次元座標を特定するもの
もある。
2. Description of the Related Art Conventionally, as an automatic tracking lighting device for automatically tracking and projecting a moving irradiation target of a person or the like,
For example, an imaging camera equipped with a driving device that changes the imaging direction captures an irradiation target, processes the captured image, and controls the driving device so that the irradiation target always appears at the center of the captured image. Identify the direction to the irradiation target,
Some of them specify the coordinates of the irradiation target. In some cases, the same irradiation target is tracked by a plurality of imaging cameras with a driving device to specify three-dimensional coordinates of the irradiation target.

【0003】[0003]

【発明が解決しようとする課題】しかしながら、上述の
ような従来の自動追尾照明装置においては、3次元での
座標特定を行うためには、個々の照射目標について最低
でも2台の撮像カメラが必要となるので、例えば、照射
目標がn個(n≧2)の場合には最低でもn×2台の撮
像カメラを制御する必要がある。このように上述のよう
な従来の自動追尾照明装置においては、照射目標が増え
た場合に撮像カメラの台数が増えるとともに多数の撮像
カメラを制御しなければならないために制御が複雑にな
り、コストが高くなるという問題点があった。
However, in the above-described conventional automatic tracking illumination apparatus, at least two imaging cameras are required for each irradiation target in order to specify the coordinates in three dimensions. Therefore, for example, when the number of irradiation targets is n (n ≧ 2), it is necessary to control at least n × 2 imaging cameras. As described above, in the conventional automatic tracking illumination device as described above, when the number of irradiation targets increases, the number of imaging cameras increases, and a large number of imaging cameras must be controlled. There was a problem that it became expensive.

【0004】また、追尾を開始する際に照射目標を撮像
カメラの撮像映像内に捕捉する必要があるが、そのため
に撮像映像の一画面全体にわたって画像処理を行うと、
画像処理にかかる処理時間がかかり、さらに画像処理に
関するノイズ等によって照射目標を誤認識する場合も考
えられ、しかも撮像カメラを複数台使用していれば、全
ての撮像カメラの撮像映像について画像処理を終了する
までの総処理時間が長引くおそれがあった。
[0004] When the tracking is started, it is necessary to capture the irradiation target in the image captured by the image capturing camera.
It may take a long time to process the image, and the irradiation target may be erroneously recognized due to noise related to the image processing.In addition, if a plurality of imaging cameras are used, the image processing is performed on the images captured by all the imaging cameras. There is a possibility that the total processing time until completion is prolonged.

【0005】本発明は、上記のような問題点を解決する
ためになされたもので、その目的とするところは、追尾
すべき照射目標の増加に対して撮像手段を追加せずに対
応が可能にすると共に、追尾を開始する際の画像処理に
かかる処理時間をおさえた自動追尾照明装置を提供する
ことにある。
SUMMARY OF THE INVENTION The present invention has been made to solve the above problems, and an object thereof is to cope with an increase in irradiation targets to be tracked without adding imaging means. In addition, an object of the present invention is to provide an automatic tracking illumination device in which the processing time required for image processing when starting tracking is reduced.

【0006】[0006]

【課題を解決するための手段】請求項1記載の発明にあ
っては、指向性を有するとともに照射方向が可変可能な
照明手段と、前記照明手段による照明空間を各々異なる
方向から撮像する複数の撮像手段と、前記複数の撮像手
段の各映像から照射目標を識別するとともに該照射目標
を撮像している各撮像手段における画素座標を特定する
画像認識手段と、前記画像認識手段で特定された複数の
画素座標から前記照明空間内の照射目標の位置を演算す
る位置座標演算手段と、照明空間に対する前記照明手段
の位置および前記位置座標演算手段の演算結果に基づい
て前記照明手段の照射方向を照射目標に向けるように制
御するための制御値を演算する制御値演算手段と、前記
制御値に応じて前記照明手段の照射方向を可変制御する
制御手段とを備えたことを特徴とする。
According to the first aspect of the present invention, there is provided an illuminating means having directivity and a variable irradiating direction, and a plurality of images for illuminating the illumination space of the illuminating means from different directions. An imaging unit; an image recognition unit that identifies an irradiation target from each image of the plurality of imaging units and specifies pixel coordinates in each imaging unit that is imaging the irradiation target; A position coordinate calculating means for calculating a position of an irradiation target in the lighting space from the pixel coordinates of the light source; and irradiating an irradiation direction of the lighting means based on a position of the lighting means with respect to the lighting space and a calculation result of the position coordinate calculating means. Control value calculating means for calculating a control value for controlling the light source toward a target, and control means for variably controlling the irradiation direction of the lighting means according to the control value are provided. It is characterized in.

【0007】請求項2記載の発明にあっては、請求項1
記載の自動追尾照明装置において、照射目標の追尾を開
始する際に、照射目標のおよその位置をあらわす照射目
標認識補助情報と前記照明手段の照射方向とを基にし
て、照射目標の追尾を開始する画素座標を演算する開始
座標演算手段を有し、前記画像認識手段は、照射目標の
追尾を開始する際に、前記開始座標演算手段で求まる前
記画素座標の演算結果を基にして、前記画素座標の所定
の範囲の画像部分に限って照射目標を識別するものであ
ることを特徴とする。
[0007] According to the second aspect of the present invention, the first aspect is provided.
In the automatic tracking illumination device according to the above description, when tracking of the irradiation target is started, the tracking of the irradiation target is started based on the irradiation target recognition auxiliary information indicating the approximate position of the irradiation target and the irradiation direction of the lighting unit. Starting coordinate calculating means for calculating pixel coordinates to be performed, the image recognizing means, when starting tracking of the irradiation target, based on the calculation result of the pixel coordinates obtained by the starting coordinate calculating means, the pixel The present invention is characterized in that an irradiation target is identified only in an image portion within a predetermined range of coordinates.

【0008】請求項3記載の発明にあっては、請求項2
記載の自動追尾照明装置において、前記開始座標演算手
段は、照射目標が存在する被照射面を基準にした所定の
高さを、前記照射目標認識補助情報として演算に用いる
ことを特徴とする。
[0008] According to the third aspect of the invention, a second aspect is provided.
In the automatic tracking illumination device described above, the start coordinate calculation means uses a predetermined height based on a surface to be irradiated on which an irradiation target is present as a reference as the irradiation target recognition auxiliary information.

【0009】請求項4記載の発明にあっては、請求項1
記載の自動追尾照明装置において、前記照明手段は複数
設けられるものであり、前記開始座標演算手段は、照射
目標の追尾を開始する際に、前記複数の照明手段の各照
射方向の交点座標を基にして、照射目標の追尾を開始す
る画素座標を演算するものであり、前記画像認識手段
は、照射目標の追尾を開始する際に、前記開始座標演算
手段で求まる前記画素座標の演算結果を基にして、前記
画素座標の所定の範囲の画像部分に限って照射目標を識
別するものであることを特徴とする。
According to the fourth aspect of the present invention, there is provided the first aspect.
In the automatic tracking illumination device described above, the illumination unit is provided in a plurality, and the start coordinate calculation unit is configured to start the tracking of the irradiation target based on intersection coordinates of the illumination directions of the plurality of illumination units. The image recognition means calculates the pixel coordinates at which the tracking of the irradiation target is started, and when the tracking of the irradiation target is started, based on the calculation result of the pixel coordinates obtained by the start coordinate calculation means. The irradiation target is identified only in an image portion within a predetermined range of the pixel coordinates.

【0010】請求項5記載の発明にあっては、請求項1
乃至4記載の自動追尾照明装置において、前記位置座標
演算手段にて前記照明空間内の照射目標の位置を演算す
る場合に各撮像手段における画素座標によって特定する
照射目標の座標の補正を行う座標補正手段を備えたこと
を特徴とする。
[0010] According to the fifth aspect of the present invention, a first aspect is provided.
In the automatic tracking illumination device according to any one of (1) to (4), when the position coordinate calculation means calculates the position of the irradiation target in the illumination space, coordinate correction for correcting the coordinates of the irradiation target specified by the pixel coordinates in each imaging means. Means are provided.

【0011】[0011]

【発明の実施の形態】以下、本発明に係る自動追尾照明
装置の第1の実施の形態を図1乃至図7に基づいて、第
2の実施の形態を図8に基づいて、第3の実施の形態を
図9に基づいて、第4の実施の形態を図10乃至図13
に基づいてそれぞれ詳細に説明する。
DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS Hereinafter, a first embodiment of an automatic tracking illumination device according to the present invention will be described with reference to FIGS. 1 to 7, and a second embodiment will be described with reference to FIG. The fourth embodiment is described with reference to FIGS.
Each will be described in detail with reference to FIG.

【0012】[第1の実施の形態]図1は自動追尾照明
装置を説明するブロック図である。図2はスポットライ
トを設けた照明空間の平面図で、図3は側面図である。
図4は撮像カメラを設けた照明空間の平面図で、図5は
側面図である。図6は撮像カメラの映像画面で捉えた照
射目標の画素座標位置の説明図である。図7はスポット
ライトの取り付け段階から含めて自動追尾照明装置の一
連の制御の流れをあらわしたフローチャートである。
FIG. 1 is a block diagram for explaining an automatic tracking illumination device. FIG. 2 is a plan view of an illumination space provided with a spotlight, and FIG. 3 is a side view.
FIG. 4 is a plan view of an illumination space provided with an imaging camera, and FIG. 5 is a side view. FIG. 6 is an explanatory diagram of the pixel coordinate position of the irradiation target captured on the video screen of the imaging camera. FIG. 7 is a flowchart showing a flow of a series of controls of the automatic tracking illumination device including the stage of mounting the spotlight.

【0013】図1に示すように、本実施の形態の自動追
尾照明装置は、指向性を有するとともに照射方向が可変
可能な照明手段1と、照明手段1による照明空間Wを各
々異なる方向から撮像する複数の撮像手段2と、複数の
撮像手段2の各映像から照射目標qを識別するとともに
該照射目標qを撮像している各撮像手段2における画素
座標を特定する画像認識手段3と、画像認識手段3で特
定された画素座標から照明空間W内の照射目標qの位置
を演算する位置座標演算手段4と、照明空間Wに対する
照明手段1の位置および位置座標演算手段4の演算結果
に基づいて照明手段1の照射方向を照射目標qに向ける
ように制御するための制御値を演算する制御値演算手段
5と、制御値に応じて照明手段1の照射方向を可変制御
する制御手段6とを備えている。
As shown in FIG. 1, the automatic tracking illumination apparatus according to the present embodiment has an illumination means 1 having directivity and a variable illumination direction, and an illumination space W by the illumination means 1 taken from different directions. A plurality of image capturing means 2 for performing image processing; an image recognizing means 3 for identifying an irradiation target q from each image of the plurality of image capturing means 2 and specifying pixel coordinates in each of the image capturing means 2 capturing the irradiation target q; A position coordinate calculating means 4 for calculating the position of the irradiation target q in the illumination space W from the pixel coordinates specified by the recognizing means 3, and a position of the lighting means 1 with respect to the lighting space W and a calculation result of the position coordinate calculating means 4. Control value calculating means 5 for calculating a control value for controlling the irradiation direction of the lighting means 1 to the irradiation target q, and control means 6 for variably controlling the irradiation direction of the lighting means 1 according to the control value. It is provided.

【0014】また、自動追尾照明装置には、照射目標q
のおよその位置をあらわす照射目標認識補助情報と照明
手段1の照射方向とを基にして、照射目標qの追尾を開
始する画素座標を、照射目標qの追尾を開始する際に演
算する開始座標演算手段7が備えられている。また、画
像認識手段3は、照射目標qの追尾を開始する際に、開
始座標演算手段7から画素座標の演算結果を受信して、
画素座標の所定の範囲の画像部分に限って照射目標を識
別するものである。
In addition, the automatic tracking illumination device has an irradiation target q
Starting coordinate for calculating the pixel coordinates for starting the tracking of the irradiation target q based on the irradiation target recognition auxiliary information indicating the approximate position of the irradiation target 1 and the irradiation direction of the illumination means 1 when the tracking of the irradiation target q is started. Calculation means 7 is provided. Further, the image recognition means 3 receives the calculation result of the pixel coordinates from the start coordinate calculation means 7 when starting the tracking of the irradiation target q,
The irradiation target is identified only in an image portion within a predetermined range of pixel coordinates.

【0015】照明手段1は、図2及び図3に示すよう
に、天井面等に取り付けられたブラケット1aによって
水平方向並びに垂直方向に回動自在になるように固定さ
れ図示しない駆動機構により水平方向の回動(パン)と
垂直方向の回動(チルト)とが可能な、灯体の向きが照
射方向になるようなスポットライト1から成り、制御手
段6により上記駆動機構が駆動制御されて照射方向が可
変されるものである。なお、制御手段6は、後述するよ
うに制御値演算手段5から与えられる制御値に応じて上
記駆動機構を駆動制御するドライブ回路等を具備するも
のである。また、照明手段1は、パン、チルトの各軸別
に、回動用モータと、回動角度を電気信号に変換する例
えばポテンショメータなどの回動角センサとを備えてお
り、制御ルームに設置された調光装置(不図示)から遠
隔制御信号を受けた場合にも、遠隔制御信号に従ってパ
ン、チルトの2軸方向に回動する。
As shown in FIGS. 2 and 3, the illuminating means 1 is fixed so as to be rotatable in the horizontal and vertical directions by a bracket 1a attached to a ceiling surface or the like, and is horizontally rotated by a driving mechanism (not shown). The light source comprises a spotlight 1 capable of rotating (panning) and rotating in a vertical direction (tilting), and in which the direction of the lamp body is the irradiation direction. The direction is variable. The control means 6 includes a drive circuit for controlling the drive mechanism according to a control value given from the control value calculation means 5 as described later. The illumination means 1 includes a rotation motor and a rotation angle sensor such as a potentiometer for converting the rotation angle into an electric signal for each of the pan and tilt axes. Even when a remote control signal is received from an optical device (not shown), the camera rotates in two directions of pan and tilt according to the remote control signal.

【0016】また、複数(本実施例で2台)の撮像手段
2は、CCDカメラ21 、22 から成り、互いに同じ取
り付け状態にならないように、つまり図4及び図5に示
すように照明空間Wを異なる方向から撮像するように照
明空間Wの対角位置に固定配設され、照明空間Wの床面
イをくまなく撮像する。2台のCCDカメラ21 、2 2
は、同じ仕様のものであって、CCD撮像素子の寸法
が、図6に示すように2SW(横)×2SH(縦)[m
m]、レンズの焦点距離がf[mm]、画像認識におけ
る有効画素数が2DW(横)×2DH(縦)とする。
A plurality (two in this embodiment) of image pickup means
2 is a CCD camera 21, 2TwoAnd have the same
4 and FIG.
So that the illumination space W is imaged from different directions.
The lighting space W is fixedly arranged at a diagonal position of the lighting space W, and the floor surface of the lighting space W
Take an image of the entire b. Two CCD cameras 21, 2 Two
Are the same specifications, and the dimensions of the CCD image sensor
However, as shown in FIG. 6, 2SW (horizontal) × 2SH (vertical) [m
m], the focal length of the lens is f [mm], and in image recognition
The effective pixel number is 2DW (horizontal) × 2DH (vertical).

【0017】ここで、図4及び図5に示すように照明空
間Wの任意点(例えば、床面イの隅の一点)を原点とす
る3次元直交座標系を想定する。このとき、CCDカメ
ラ2 1 、22 の取付位置の座標を各々CP1(Xc1
Yc1 ,Zc1 )、CP2(Xc2 ,Yc2 ,Zc2
とし、取付方向(CCDカメラ21 、22 の各光軸ロの
方向)を各々CD1(Pc1 ,Tc1 )、CD2(Pc
2 ,Tc2 )とする。但し、Pc1 、Pc2 はそれぞれ
CCDカメラ21 、22 の光軸ロと水平面(XY平面)
とのなす角と定義する。これらCP1、CP2、CD
1、CD2の値は別途測定するなどして特定しておき、
予め、CCDカメラ21 、22 に関するパラメータ情報
として位置座標演算手段4に記憶させておく。
Here, as shown in FIG. 4 and FIG.
An arbitrary point of the space W (for example, one point of the corner of the floor a) is set as the origin.
A three-dimensional orthogonal coordinate system is assumed. At this time, the CCD camera
La 2 1, 2TwoThe coordinates of the mounting position of each are CP1 (Xc1,
Yc1, Zc1), CP2 (XcTwo, YcTwo, ZcTwo)
And the mounting direction (CCD camera 21, 2TwoOf each optical axis
Direction) for each CD1 (Pc1, Tc1), CD2 (Pc
Two, TcTwo). However, Pc1, PcTwoAre each
CCD camera 21, 2TwoOptical axis b and horizontal plane (XY plane)
Is defined as the angle between These CP1, CP2, CD
1. The value of CD2 is specified by measuring it separately.
In advance, CCD camera 21, 2TwoParameter information about
And stored in the position coordinate calculation means 4.

【0018】画像認識手段3、位置座標演算手段4、制
御値演算手段5並びに開始座標演算手段7は、例えばM
PUを主構成要素とするコンピュータ装置および該コン
ピュータ装置に搭載されたソフトウェアを以って構成可
能である。また、画像認識手段3、位置座標演算手段
4、制御値演算手段5並びに開始座標演算手段7は、そ
れぞれ単体のハードウェアであってもかまわない。
The image recognizing means 3, the position coordinate calculating means 4, the control value calculating means 5, and the starting coordinate calculating means 7 are, for example, M
It can be configured with a computer device having a PU as a main component and software installed in the computer device. Further, the image recognition means 3, the position coordinate calculation means 4, the control value calculation means 5, and the start coordinate calculation means 7 may each be a single piece of hardware.

【0019】開始座標演算手段7は、具体的には次のよ
うな演算を行って、照射目標qの追尾を開始する画素座
標を、算出する。まず、照明手段1が、制御ルームに設
置された調光装置から遠隔制御信号を受けて、照射方向
の初期値(X,Y,Z)=(0,0,−1)からパン、
チルトの2軸方向に回動し、結果として照射目標qを照
射しているとする。
The start coordinate calculating means 7 calculates the pixel coordinates at which the tracking of the irradiation target q is started by specifically performing the following calculation. First, the illuminating means 1 receives a remote control signal from the dimmer installed in the control room, and pans from the initial value (X, Y, Z) = (0, 0, -1) of the irradiation direction.
It is assumed that the irradiation target q is radiated as a result of rotation in two tilt directions.

【0020】この状態での照明手段1から照射目標qへ
向けた方向余弦を(lsj,msj,n sj)としてあらわす
と、方向余弦(lsj,msj,nsj)は、次式(1)で算
出できる。
In this state, the illumination means 1 moves to the irradiation target q.
The direction cosine of (lsj, Msj, N sj)
And the direction cosine (lsj, Msj, Nsj) Is calculated by the following equation (1).
I can get out.

【0021】[0021]

【数1】 (Equation 1)

【0022】ここで、パン方向駆動行列[Psj]は、X
YZ直交座標系における物体を、Z軸まわりに角度Psj
だけ回転させる作用をあらわす行列であり、照明手段1
がパン方向に回動した結果の照射方向を与える。また、
チルト方向駆動行列[Tsj]は、XYZ直交座標系にお
ける物体を、X軸まわりに角度Tsjだけ回転させる作用
をあらわす行列であり、照明手段1がチルト方向に回動
した結果の照射方向を与える。さらに、取り付けずれ行
列[Psj0]は、照明手段1の取り付け状態がY軸まわ
りにどれだけ傾いて取り付いているかをあらわす行列で
あり、照明手段1を別途測定して得た取り付け傾きによ
って、照明手段1がY軸まわりに回動していると同様の
回転作用を与える。パン方向駆動行列[Psj]は、
(2)式であらわすことができ、チルト方向駆動行列
[Tsj]は、(3)式であらわすことができる。取り付
けずれ行列[Psj0]は、(4)式であらわすことがで
きる。
Here, the pan direction driving matrix [P sj ] is X
An object in the YZ rectangular coordinate system is set at an angle P sj about the Z axis.
Is a matrix representing the action of rotating only
Gives the irradiation direction as a result of rotating in the pan direction. Also,
The tilt direction drive matrix [T sj ] is a matrix representing an operation of rotating an object in the XYZ orthogonal coordinate system by an angle T sj around the X axis. The illumination direction as a result of the rotation of the illumination unit 1 in the tilt direction is described. give. Further, the mounting misalignment matrix [P sj 0] is a matrix representing how much the mounting state of the lighting unit 1 is attached around the Y axis while being attached. The mounting inclination obtained by separately measuring the lighting unit 1 is The illuminating means 1 provides the same rotating action as rotating around the Y axis. The pan direction driving matrix [P sj ] is
The tilt driving matrix [T sj ] can be expressed by the equation (2), and the tilt direction driving matrix [T sj ] can be expressed by the equation (3). The attachment displacement matrix [P sj 0] can be expressed by equation (4).

【0023】[0023]

【数2】 (Equation 2)

【0024】[0024]

【数3】 (Equation 3)

【0025】[0025]

【数4】 (Equation 4)

【0026】式(1)で算出された方向余弦(lsj,m
sj,nsj)と、XYZ直交座標系における照明手段1の
取り付け位置(Xsj,Ysj,Zsj)とを基にして、照明
手段1から照射目標qへの照射方向を通る直線Lj を、
(5)式であらわすことができる。ここで、tj
(5)式内で共通な媒介変数であり、tj の値が1つに
決まると直線Lj 上の1点(Xj ,Yj ,Zj )を決め
ることができる。
The direction cosine (l sj , m) calculated by equation (1)
sj , n sj ) and the mounting position (X sj , Y sj , Z sj ) of the illuminating means 1 in the XYZ orthogonal coordinate system, a straight line L j passing through the irradiation direction from the illuminating means 1 to the irradiation target q. To
It can be expressed by equation (5). Here, t j is a common parameter in the equation (5), and when the value of t j is determined to be one, one point (X j , Y j , Z j ) on the straight line L j can be determined. it can.

【0027】[0027]

【数5】 (Equation 5)

【0028】ここで、開始座標演算手段7には、照射目
標認識補助情報として、照射目標qが存在する被照射面
(床面イ)を基準にした所定の高さZ=Zq(図3参
照)が、記憶されている。そこで、(5)式にZ=Zq
を代入すると、媒介変数tj の値が1つに決まり、直線
j 上の1点(Xj ,Yj ,Zj )を決めることができ
る。所定の高さZqは、照射目標qが演技者などの人体
である場合には、頭部の高さとしておけばよい。所定の
高さZqを(5)式と併用するため、照明手段1はひと
つで済むのである。
Here, the starting coordinate calculating means 7 has, as the irradiation target recognition auxiliary information, a predetermined height Z = Zq (see FIG. 3) based on the irradiated surface (floor A) on which the irradiation target q exists. ) Is stored. Therefore, Z = Zq in equation (5)
Is substituted, the value of the parameter t j is determined to be one, and one point (X j , Y j , Z j ) on the straight line L j can be determined. The predetermined height Zq may be the height of the head when the irradiation target q is a human body such as an actor. Since the predetermined height Zq is used in combination with the expression (5), only one illumination means 1 is required.

【0029】以上のようにして、開始座標演算手段7
は、照射目標qの追尾を開始する画素座標を、算出す
る。このように開始座標演算手段7を一連の処理に介入
させることによって、照射目標qを最初に捕捉するため
の画像処理を、照射目標qの写っている画像領域の周辺
に限定できるようになり、照射目標qの写っていない余
計な画像領域まで画像処理する必要がなくなるのであ
る。つまり、画像認識手段3は、開始座標演算手段7か
ら直線Lj 上の1点(Xj ,Yj ,Zj )を入力され
て、(Xj ,Yj ,Zj )の付近の所定画像部分だけを
画像処理することによって、画像中の照射目標qの抽出
にかかる処理時間を短縮できるのである。
As described above, the start coordinate calculating means 7
Calculates the pixel coordinates at which the tracking of the irradiation target q is started. By interposing the start coordinate calculating means 7 in a series of processes in this manner, image processing for first capturing the irradiation target q can be limited to the periphery of the image area where the irradiation target q is captured, This eliminates the need to perform image processing on an extra image area where the irradiation target q is not shown. That is, the image recognizing means 3 receives one point (X j , Y j , Z j ) on the straight line L j from the start coordinate calculating means 7, and receives a predetermined point near (X j , Y j , Z j ). By processing only the image portion, the processing time required for extracting the irradiation target q in the image can be reduced.

【0030】すなわち、画像認識手段3は、従来周知の
画像処理技術を用いてCCDカメラ21 、22 の撮像映
像を画像処理し、2次元直交座標系(Xd ,Yd )にお
ける照射目標qの座標(この座標を「画素座標」とよ
ぶ。)を、直線Lj 上の1点(Xj ,Yj ,Zj )の近
傍に限って求める。2次元直交座標系(Xd ,Yd )と
は、図6に示すようにCCDカメラ21 、22 が具備す
るCCD撮像素子の中心を原点(0,0)として想定さ
れる2次元直交座標系である。照射目標qの画素座標を
求める手法としては、例えば、パターンマッチングやカ
ラーマッチングのほか、照射目標qが存在しないときの
照明空間Wの映像を原画像としてメモリに記憶してお
き、CCDカメラ21 、22 で撮像した映像を上記原画
像と比較することにより、照射目標qを抽出してその画
素座標を求めるというような手法が適用できる。また、
このような手法によって、複数の照射目標q1 、q2
・・・の抽出並びに画素座標の算出が可能となる。
[0030] That is, the image recognition unit 3, image processing CCD camera 2 1, 2 2 of the imaging image using well-known image processing techniques, two-dimensional orthogonal coordinate system (X d, Y d) the irradiation target in The coordinates of q (this coordinates are referred to as “pixel coordinates”) are obtained only in the vicinity of one point (X j , Y j , Z j ) on the straight line L j . Two-dimensional orthogonal coordinate system (X d, Y d) and the two-dimensional orthogonal envisaged the center of the CCD image sensor CCD camera 2 1, 2 2 are provided as shown in FIG. 6 as the origin (0, 0) It is a coordinate system. The method of obtaining the pixel coordinates of the irradiation target q, for example, other pattern matching or color matching, the image of the illumination space W when the irradiation target q does not exist is stored in the memory as an original image, CCD camera 2 1 by the video imaged by 2 2 compared with the original image, it can be applied techniques such as that determine its pixel coordinates and extracts irradiation target q. Also,
By such a method, a plurality of irradiation targets q 1 , q 2 ,
.. And the pixel coordinates can be calculated.

【0031】このように照射目標qを一度捕捉すると、
照射目標qが移動しても、照射目標qの移動速度すなわ
ち人体の歩行速度は大方決まっていて同歩行速度に応じ
て照射目標qの移動後のおよその位置は見当がつくの
で、画像認識手段3は、照射目標qの移動後のおよその
位置を予測して、CCDカメラ21 、22 で撮影された
新たな撮像映像を画像処理する。照射目標qの画素座標
は、以下では位置座標演算手段4で算出される。
As described above, once the irradiation target q is captured,
Even if the irradiation target q moves, the moving speed of the irradiation target q, that is, the walking speed of the human body is largely determined, and the approximate position after the movement of the irradiation target q can be determined according to the walking speed. 3 predicts the approximate position after the movement of the irradiation target q, image processing of a new captured image taken by the CCD camera 2 1, 2 2. The pixel coordinates of the irradiation target q are calculated by the position coordinate calculation means 4 below.

【0032】位置座標演算手段4は、2台のCCDカメ
ラ21 、22 の撮像映像から画像認識手段3で得られた
照射目標qの画素座標を、各々(Xd1,Yd1)、
(Xd2,Y d2)とする。また、CCDカメラ21 、22
の座標系における基準ベクトル(方向余弦)を(X,
Y,Z)=(0,1,0)とおくと、位置座標演算手段
4は、図6に示すように、基準ベクトル(0,1,0)
に対してCCD撮像素子の中心(原点)(0,0)から
照射目標qの像までの方向ベクトル(Xe1,Ye1
e1)を、次の(6)式で求める(但しCCDカメラ2
1 の映像についてのみ記す。)。
The position coordinate calculating means 4 comprises two CCD cameras.
La 21, 2TwoObtained by the image recognition means 3 from the captured video of
The pixel coordinates of the irradiation target q are represented by (Xd1, Yd1),
(Xd2, Y d2). In addition, CCD camera 21, 2Two
The reference vector (direction cosine) in the coordinate system of (X,
Y, Z) = (0, 1, 0), the position coordinate calculation means
4 is a reference vector (0, 1, 0) as shown in FIG.
From the center (origin) (0,0) of the CCD image sensor
Direction vector (Xe1, Ye1,
Ze1) Is calculated by the following equation (6) (however, the CCD camera 2
1Only the video of this is described. ).

【0033】[0033]

【数6】 (Equation 6)

【0034】また、ここでの基準ベクトル(0,1,
0)は、実際の照明空間WにおけるXYZ直交座標系で
はCCDカメラ21 の取付状態の分だけ回転してしまっ
ていることになる。従って、位置座標演算手段4は、実
際の照明空間WにおけるCCDカメラ21 から照射目標
qまでの方向ベクトル(l1 ,m1 ,n1 )を、次の
(6)式で求める。
The reference vector (0, 1,
0) it would have gone rotated by the amount of the attachment state of the CCD camera 2 1 in the actual XYZ orthogonal coordinate system in the illumination space W of. Therefore, the position coordinate calculating means 4, the direction vector from the CCD camera 2 1 to the irradiation target q in the actual lighting space W (l 1, m 1, n 1), calculated by the following equation (6).

【0035】[0035]

【数7】 (Equation 7)

【0036】一方、CCDカメラ21 から照射目標qま
での方向と、CCDカメラ21 の取付座標が予め特定さ
れているので、これらの値を基にして、位置座標演算手
段4は、CCDカメラ21 と照射目標qとを結ぶ直線L
1 を、(8)式で求めることができる。ここで、t1
直線L1 内における媒介変数である。
On the other hand, the direction from the CCD camera 2 1 to the irradiation target q, since the CCD camera 2 1 mounting coordinates are specified in advance, based on these values, the position coordinate calculating means 4, the CCD camera straight line L 2 1 and connecting the irradiation target q
1 can be obtained by equation (8). Here, t 1 is a parameter in the straight line L 1 .

【0037】[0037]

【数8】 (Equation 8)

【0038】また、同様にCCDカメラ22 と照射目標
qとの間について、位置座標演算手段4は、CCDカメ
ラ22 と照射目標qとを結ぶ直線L2 を、(9)式で求
めることができる。ここで、(l2 ,m2 ,n2 )は直
線L2 の方向ベクトルであり、t2 は直線L2 内におけ
る媒介変数である。
[0038] Similarly, for between CCD camera 2 2 and the irradiation target q, the position coordinate calculating means 4, the straight line L 2 connecting the CCD camera 2 2 and the irradiation target q, be determined by the equation (9) Can be. Here, (l 2 , m 2 , n 2 ) is a direction vector of the straight line L 2 , and t 2 is a parameter in the straight line L 2 .

【0039】[0039]

【数9】 (Equation 9)

【0040】ここで、照射目標qは2つの直線L1 、L
2 の交点に存在しているはずであり、2つの直線L1
2 を算出することにする。(8)式と(9)式とを等
しいとして、次の(10)式と(11)式と(12)式
とを連立方程式として解いたt1 、t2 の各値を、(1
0)式と(11)式と(12)式とのいずれかに代入す
れば、XYZ直交座標系における照射目標qの座標が算
出される。
Here, the irradiation target q is represented by two straight lines L 1 , L
2 must be present at the intersection of two straight lines L 1 ,
It will be to calculate the L 2. Assuming that equations (8) and (9) are equal, the values of t 1 and t 2 obtained by solving the following equations (10), (11) and (12) as simultaneous equations are represented by (1)
By substituting into any of the equations (0), (11) and (12), the coordinates of the irradiation target q in the XYZ orthogonal coordinate system are calculated.

【0041】[0041]

【数10】 (Equation 10)

【0042】[0042]

【数11】 [Equation 11]

【0043】[0043]

【数12】 (Equation 12)

【0044】位置座標演算手段4は、上記アルゴリズム
にて照射目標qの座標を算出する。以下では、照射目標
qの座標を(Xq,Yq,Zq)としてあらわす。
The position coordinate calculation means 4 calculates the coordinates of the irradiation target q by the above algorithm. Hereinafter, the coordinates of the irradiation target q are represented as (Xq, Yq, Zq).

【0045】次に、制御値演算手段5が上記照射目標q
の座標(Xq,Yq,Zq)から制御手段6に与える制
御値(パン及びチルトの角度)を求める手順について説
明する。照明手段1であるスポットライトのパンの回動
軸がZ軸に平行であり、チルトの回動軸がXY平面に平
行である。また、図2及び図3に示すような追尾照射に
用いる照明手段1が複数使用されるとして、各照明手段
1の取付位置を(Xsj,Ysj,Zsj)(jは照明手段の
ナンバーをあらわす。j=1,2,・・・)と表現す
る。任意の照明手段1から照射目標qまでの方向余弦
(lsj,msj,nsj)を、次式(13)のようにあらわ
すことができる。ここで、|B|は、ベクトルB(Xq
−Xsj,Yq−Ysj,Zq−Zsj)の大きさ(絶対値)
とする。
Next, the control value calculating means 5 calculates the irradiation target q
A procedure for obtaining a control value (pan and tilt angles) to be given to the control means 6 from the coordinates (Xq, Yq, Zq) of the control will be described. The rotation axis of the pan of the spotlight as the illumination means 1 is parallel to the Z axis, and the rotation axis of the tilt is parallel to the XY plane. Further, assuming that a plurality of lighting means 1 used for tracking irradiation as shown in FIGS. 2 and 3 are used, the mounting position of each lighting means 1 is set to ( Xsj , Ysj , Zsj ) (j is the number of the lighting means). . J = 1, 2,...). The direction cosine (l sj , m sj , n sj ) from any illumination means 1 to the irradiation target q can be represented by the following equation (13). Here, | B | is a vector B (Xq
−X sj , Yq−Y sj , Zq−Z sj ) (absolute value)
And

【0046】[0046]

【数13】 (Equation 13)

【0047】次に、回転に関するマトリクス(行列)を
考える。照明空間Wにおける基準の方向(以下では基準
の方向を(X,Y,Z)=(0,1,0)とする)を前
提にして、任意の照明手段1について、初期状態として
照射方向が(0,0,−1)を向いているとして、パン
の回動角Psjは上記(2)式に相当して式(14)で表
現され、チルトの回動角Tsjは上記(3)式に相当して
式(15)で表現され、上記(4)式に相当する取り付
けずれ行列[Psj0]は式(16)で表現される。な
お、パンの回動角Psjは図2に示すように照明手段1の
取付時の基準方向ハを0(基準)とする。
Next, consider a matrix related to rotation. Assuming that the reference direction in the illumination space W (hereinafter, the reference direction is (X, Y, Z) = (0, 1, 0)), the illumination direction is set as an initial state for an arbitrary illumination unit 1. Assuming that the pan is oriented at (0, 0, -1), the pan rotation angle P sj is expressed by equation (14) corresponding to the above equation (2), and the tilt rotation angle T sj is calculated by the equation (3). ) Is represented by Expression (15), and the attachment displacement matrix [P sj 0] corresponding to Expression (4) is represented by Expression (16). As shown in FIG. 2, the pan rotation angle P sj is 0 (reference) when the reference direction c when the lighting means 1 is attached.

【0048】[0048]

【数14】 [Equation 14]

【0049】[0049]

【数15】 (Equation 15)

【0050】[0050]

【数16】 (Equation 16)

【0051】これらをまとめると、次式(17)のよう
にあらわされる。
These are summarized as in the following equation (17).

【0052】[0052]

【数17】 [Equation 17]

【0053】式(17)を変形して、次式(18)を得
る。[Psj0]-1は取り付けずれ行列[Psj0]の逆行
列をあらわす。
By transforming equation (17), the following equation (18) is obtained. [P sj 0] −1 represents an inverse matrix of the attachment displacement matrix [P sj 0].

【0054】[0054]

【数18】 (Equation 18)

【0055】式(18)は右辺が定数で左辺が変数とし
て分離されるため、容易に解くことができる。従って、
制御値演算手段5は、パンの回動角Psj、チルトの回動
角T sjを算出できる。制御値演算手段5は、パンの回動
角Psj、チルトの回動角Tsjをそれぞれ、実際の制御を
行うための角度値などの制御値に変換し、制御手段6へ
送信する。制御手段6は、制御値演算手段5から送信さ
れる制御値によって駆動する、モータなどを含む駆動機
構であり、制御値に従って、照明手段1の照射方向を照
射目標qに向けるのである。
In equation (18), the right side is a constant and the left side is a variable.
And can be easily unraveled. Therefore,
The control value calculation means 5 calculates the rotation angle P of the pan.sj, Tilt rotation
Angle T sjCan be calculated. The control value calculation means 5 controls the rotation of the pan.
Angle Psj, Tilt rotation angle TsjThe actual control
To a control value such as an angle value for performing
Send. The control means 6 receives the data transmitted from the control value calculation means 5.
Driving machine including motor, etc., driven by control value
The illumination direction of the illumination means 1 is illuminated according to the control value.
It is aimed at the shooting target q.

【0056】以上の一連の処理を、画像認識の段階から
連続的に繰り返すことによって、照明手段1のスポット
光を自動的に照射目標qへ向ける照射向き制御が、行え
るのである。図7は、上述の一連の制御を説明する概略
のフローチャートである。以上説明した照射向き制御の
一連の流れを、図7を用いて、簡単に説明する。
By repeating the above series of processes continuously from the image recognition stage, the irradiation direction control for automatically directing the spot light of the illumination means 1 to the irradiation target q can be performed. FIG. 7 is a schematic flowchart for explaining the above-described series of controls. A series of flows of the irradiation direction control described above will be briefly described with reference to FIG.

【0057】まず、開始座標演算手段7は、照明手段1
の取り付け位置(Xsj,Ysj,Zsj)と、所定の高さZ
qとを、予め入力されて記憶している(ステップ10
0)。次に、開始座標演算手段7は、照明手段1が天井
面等に取り付けられた後、照明手段1の取り付けずれ行
列[Psj0]の測定値を入力されて記憶する(ステップ
110)。
First, the start coordinate calculating means 7 is provided with the lighting means 1.
Mounting position (X sj , Y sj , Z sj ) and a predetermined height Z
and q are input and stored in advance (step 10).
0). Next, after the lighting means 1 is mounted on a ceiling surface or the like, the start coordinate calculating means 7 receives and stores the measured value of the mounting displacement matrix [P sj 0] of the lighting means 1 (step 110).

【0058】制御手段6は、調光装置から遠隔制御信号
を受けると(ステップ120)、遠隔制御信号に従って
パン、チルトの2軸方向に照射方向を回動し、開始座標
演算手段7へ、照射目標の追尾を開始する旨の信号を、
送信する(ステップ130)。
Upon receiving the remote control signal from the dimmer (step 120), the control means 6 rotates the irradiation direction in two directions of pan and tilt according to the remote control signal, and irradiates the start coordinate calculation means 7 with the light. A signal to start tracking the target
Send it (step 130).

【0059】開始座標演算手段7は、上記ステップ13
0の結果、パン方向駆動行列[Psj]と、チルト方向駆
動行列[Tsj]とを得て、方向余弦(lsj,msj
sj)と、照明手段1の取り付け位置(Xsj,Ysj,Z
sj)と、所定の高さZqとを基にして、直線Lj 上の1
点(Xj ,Yj ,Zj )を決める(ステップ140、ス
テップ150)。以上が、開始座標演算手段7を使用す
るステップであり、追尾目標である照射目標qを先ず捕
捉する段階であり、開始座標演算手段7は、照射目標q
の追尾を開始する画素座標を演算して画像認識手段3へ
出力する。
The start coordinate calculating means 7 executes the processing in step 13
As a result of 0, a pan direction driving matrix [P sj ] and a tilt direction driving matrix [T sj ] are obtained, and the direction cosine (l sj , m sj ,
n sj ) and the mounting position (X sj , Y sj , Z
and sj), based on the predetermined height Zq, 1 on the straight line L j
The point (X j , Y j , Z j ) is determined (step 140, step 150). The above is the step of using the start coordinate calculating means 7 and the step of first capturing the irradiation target q which is a tracking target.
The pixel coordinates for starting the tracking of are calculated and output to the image recognition means 3.

【0060】画像認識手段3は、定期的に撮像画像のサ
ンプリングを行い、画像処理を行う(ステップ16
0)。位置座標演算手段4は、直線L1 と直線L2 との
交点座標を求め、照射目標qの位置座標の記憶値を更新
し(ステップ170)、照射目標qの位置座標の記憶値
を、制御値演算手段5へ送信する。制御値演算手段5
は、パン、チルトの制御値を算出し、該制御値を制御手
段6へ送信する。制御手段6は、該制御値に従って、照
射目標qの移動に伴い、照明手段1の照射方向を照射目
標qに向け(ステップ180)、位置座標演算手段4
に、照射目標qの位置座標の算出を促す。すなわち、制
御の段階は上記ステップ160の直前に戻る。上記ステ
ップ160から上記ステップ180までが繰り返される
ことによって、照射目標qの追尾を行う。
The image recognizing means 3 periodically samples the taken image and performs image processing (step 16).
0). Position coordinate calculating means 4 calculates the intersection coordinates of the lines L 1 and the straight line L 2, and updates the stored values of the position coordinates of the irradiation target q (step 170), the stored value of the position coordinates of the irradiation target q, control It is transmitted to the value calculation means 5. Control value calculation means 5
Calculates the pan and tilt control values and transmits the control values to the control means 6. The control means 6 directs the irradiation direction of the illuminating means 1 to the irradiation target q in accordance with the movement of the irradiation target q in accordance with the control value (step 180).
Prompts the user to calculate the position coordinates of the irradiation target q. That is, the control stage returns immediately before step 160. The tracking of the irradiation target q is performed by repeating the steps 160 to 180.

【0061】従って、自動追尾照明装置は、指向性を有
するとともに照射方向が可変可能な照明手段1と、照明
手段1による照明空間Wを各々異なる方向から撮像する
複数の撮像手段2と、複数の撮像手段2の各映像から照
射目標qを識別するとともに該照射目標qを撮像してい
る各撮像手段2における画素座標を特定する画像認識手
段3と、画像認識手段3で特定された画素座標から照明
空間W内の照射目標qの位置を演算する位置座標演算手
段4と、照明空間Wに対する照明手段1の位置および位
置座標演算手段4の演算結果に基づいて照明手段1の照
射方向を照射目標qに向けるように制御するための制御
値を演算する制御値演算手段5と、制御値に応じて照明
手段1の照射方向を可変制御する制御手段6とを備える
ため、固定された複数の撮像手段2で得た画像から、1
乃至複数の照射目標qの位置座標を特定でき、照射目標
qが増えた場合においても、撮像手段2を追加すること
なく対応することが可能である。しかも、撮像カメラの
台数が増えず、撮像手段2の撮影方向を変えるための駆
動手段が不用であるので、コストが高くなることもな
い。また、多数の撮像カメラを制御することもないの
で、制御が複雑になることもない。
Accordingly, the automatic tracking illumination device has an illumination means 1 having directivity and a variable illumination direction, a plurality of imaging means 2 for imaging the illumination space W of the illumination means 1 from different directions, and a plurality of imaging means. An image recognition unit 3 that identifies an irradiation target q from each image of the imaging unit 2 and specifies pixel coordinates in each imaging unit 2 that is capturing the irradiation target q, and a pixel coordinate specified by the image recognition unit 3. A position coordinate calculating means 4 for calculating the position of the irradiation target q in the lighting space W; and a position of the lighting means 1 with respect to the lighting space W and an irradiation direction of the lighting means 1 based on the calculation result of the position coordinate calculating means 4. The control value calculating means 5 for calculating a control value for controlling the light source toward q and the control means 6 for variably controlling the irradiation direction of the lighting means 1 according to the control value are fixed. From the image obtained by the number of imaging means 2, 1
In addition, the position coordinates of the plurality of irradiation targets q can be specified, and even when the number of irradiation targets q increases, it is possible to cope without adding the imaging unit 2. Moreover, the number of imaging cameras does not increase, and a driving unit for changing the imaging direction of the imaging unit 2 is unnecessary, so that the cost does not increase. Further, since a large number of imaging cameras are not controlled, the control does not become complicated.

【0062】また、自動追尾照明装置には、照射目標q
のおよその位置をあらわす照射目標認識補助情報と照明
手段1の照射方向とを基にして、照射目標qの追尾を開
始する画素座標を、照射目標qの追尾を開始する際に演
算する開始座標演算手段7が備えられており、画像認識
手段3は、照射目標qの追尾を開始する際に、開始座標
演算手段7から画素座標の演算結果を受信して、画素座
標の所定の範囲の画像部分に限って照射目標を識別する
ものであるため、照射目標qの追尾を開始する際に、撮
像映像の一画面全体にわたって画像処理を行う必要が無
く、画像処理にかかる処理時間を抑えることができ、さ
らに画像処理に関するノイズ等によって照射目標を誤認
識するおそれも抑えることができ、撮像カメラを複数台
使用する場合でも、全ての撮像カメラの撮像映像につい
て画像処理を終了するまでの総処理時間が長引くのを抑
えることができる。
In addition, the automatic tracking illumination device has an irradiation target q
Starting coordinate for calculating the pixel coordinates for starting the tracking of the irradiation target q based on the irradiation target recognition auxiliary information indicating the approximate position of the irradiation target 1 and the irradiation direction of the illumination means 1 when the tracking of the irradiation target q is started. When the tracking of the irradiation target q is started, the image recognizing unit 3 receives the calculation result of the pixel coordinates from the start coordinate calculating unit 7 and sets the image in a predetermined range of the pixel coordinates. Since the irradiation target is identified only for the part, when tracking the irradiation target q is started, it is not necessary to perform the image processing over the entire screen of the captured image, and the processing time required for the image processing can be suppressed. It is also possible to suppress the possibility of erroneously recognizing the irradiation target due to noise or the like relating to image processing. Even when using a plurality of imaging cameras, the image processing is completed for the images captured by all the imaging cameras. It is possible to suppress the up of the total processing time is prolonged that.

【0063】[第2の実施の形態]図8はミラースキャ
ンタイプのスポットライトの説明図で、(a)は正面
図、(b)は側面図である。なお、前述の第1の実施の
形態と同一の箇所には同じ符号を付し、同一の箇所の詳
細な説明は省略する。この第2の実施の形態の自動追尾
照明装置が前述の第1の実施の自動追尾照明装置と異な
り特徴となる構成は、照明手段1が、灯体の向きが照射
方向になるようなものではなく、ミラースキャンタイプ
のものである点である。この場合、下記に記すように、
一部のマトリクス(行列)の変更が必要になる。
[Second Embodiment] FIGS. 8A and 8B are explanatory views of a mirror scan type spotlight, wherein FIG. 8A is a front view and FIG. 8B is a side view. The same parts as those in the first embodiment are denoted by the same reference numerals, and detailed description of the same parts will be omitted. The configuration in which the automatic tracking illumination device of the second embodiment is different from the automatic tracking illumination device of the first embodiment described above is characterized in that the illumination unit 1 is such that the direction of the lamp body is the irradiation direction. Rather, it is of the mirror scan type. In this case, as described below,
Some matrix changes are required.

【0064】ミラースキャンタイプのスポットライト1
は、図8に示すように、筒状の本体10a内部の一端側
に光源10bを具備し、本体10a内部の他端側に図示
しない駆動部により回動自在に配設された反射鏡(ミラ
ー)10cに光源10bの光を反射させ、本体10aの
ミラー10c側の端部に設けた開口部10dから照明空
間Wへ反射光を照射する。
Mirror scan type spotlight 1
As shown in FIG. 8, a reflecting mirror (mirror) provided with a light source 10b at one end inside a cylindrical main body 10a and rotatably arranged at the other end inside the main body 10a by a driving unit (not shown). ) The light from the light source 10b is reflected by 10c, and the reflected light is applied to the illumination space W from an opening 10d provided at the end of the main body 10a on the side of the mirror 10c.

【0065】スポットライト1は、当初、XY平面内で
Y軸から測った光軸のずれ角がasj、YZ平面内でY軸
から測った光軸のずれ角がbsj、ZX平面内でX軸から
測った光軸のずれ角がcsj、のそれぞれの向きをもって
いる状態であるとする。また、スポットライト1は、実
施形態1と同様に当初、光軸の向きが(0、0、−1)
である。ミラー10cは、図8(a)に示すようにZX
平面内で時計回りを正の回転方向としてパン回転するも
のとし、図8(b)に示すようにYZ平面内で反時計回
りを正の回転方向としてチルト回転するものとする。
The spotlight 1 initially has a deviation angle of the optical axis measured from the Y axis in the XY plane as sj , a deviation angle of the optical axis measured in the YZ plane from the Y axis is b sj , and It is assumed that the deviation angle of the optical axis measured from the X axis has a direction of c sj . The spotlight 1 initially has the optical axis direction (0, 0, -1) as in the first embodiment.
It is. The mirror 10c is, as shown in FIG.
It is assumed that pan rotation is performed with the clockwise rotation as the positive rotation direction in the plane, and tilt rotation is performed with the counterclockwise rotation as the positive rotation direction in the YZ plane as shown in FIG. 8B.

【0066】実施形態1と同様にマトリクス(行列)を
考える。スポットライト1の向きは、式(19)のパン
の回動角行列[Psj]と、式(20)のチルトの回動角
行列[Tsj]と、基準の方向からの取り付けのずれ[a
sj](式(21))および[bsj](式(22))およ
び[csj](式(23))とを以て、式(24)のよう
に表現できる。
A matrix is considered as in the first embodiment. The orientation of the spotlight 1 is determined by the pan rotation angle matrix [P sj ] in equation (19), the tilt rotation angle matrix [T sj ] in equation (20), and the displacement of the mounting from the reference direction [ a
[sj ] (Equation (21)), [b sj ] (Equation (22)) and [c sj ] (Equation (23)) can be expressed as in Equation (24).

【0067】[0067]

【数19】 [Equation 19]

【0068】[0068]

【数20】 (Equation 20)

【0069】[0069]

【数21】 (Equation 21)

【0070】[0070]

【数22】 (Equation 22)

【0071】[0071]

【数23】 (Equation 23)

【0072】[0072]

【数24】 (Equation 24)

【0073】式(24)を変形して、式(25)を得
る。
By transforming equation (24), equation (25) is obtained.

【0074】[0074]

【数25】 (Equation 25)

【0075】式(25)は式(18)と同様に、右辺が
定数で左辺が未知数に分離されて容易に解くことがで
き、パンの回動角Psj、チルトの回動角Tsjを算出でき
る。これらパンの回動角Psj、チルトの回動角Tsjを制
御値演算手段5で実際の制御値に変換して、制御手段6
に入力すれば、制御手段6が駆動機構を駆動制御して、
ミラー10cの向きを変更でき、スポットライト1の照
射方向を照射目標qの位置座標に向けるのである。
Equation (25) can be easily solved by solving the right-hand side constant and the left-hand side unknown as in equation (18). The pan rotation angle P sj and tilt rotation angle T sj can be calculated as follows. Can be calculated. The control unit 6 converts the pan rotation angle P sj and the tilt rotation angle T sj into actual control values by the control value calculation unit 5,
, The control means 6 controls the driving of the driving mechanism,
The direction of the mirror 10c can be changed, and the irradiation direction of the spotlight 1 is directed to the position coordinates of the irradiation target q.

【0076】このようにしても、上記第1の実施の形態
と略同様の効果を奏する。 [第3の実施の形態]図9は照明手段1の取り付け段階
から含めて自動追尾照明装置の一連の制御の流れをあら
わしたフローチャートである。なお、前述の第1の実施
の形態と同一の箇所には同じ符号を付し、同一の箇所の
詳細な説明は省略する。
In this case, substantially the same effects as in the first embodiment can be obtained. [Third Embodiment] FIG. 9 is a flowchart showing a flow of a series of controls of the automatic tracking illuminating device including the mounting stage of the illuminating means 1. The same parts as those in the first embodiment are denoted by the same reference numerals, and detailed description of the same parts will be omitted.

【0077】この第3の実施の形態の自動追尾照明装置
が前述の第1の実施の自動追尾照明装置と異なり特徴と
なる構成は、照明手段1を1台追加して2台とし、2台
の照明手段1の照射方向の交点を以て所定の高さZqを
算出するようにした点である。以下では各記号の添え字
k(小文字)は、追加した照明手段1に関する記号をあ
らわすものとする。
The configuration of the automatic tracking illuminator of the third embodiment, which is different from the automatic tracking illuminator of the above-described first embodiment, is characterized in that one illumination means 1 is added and two illumination units are added. The predetermined height Zq is calculated based on the intersection point of the illumination direction of the illumination means 1. Hereinafter, the suffix k (small letter) of each symbol indicates a symbol relating to the added lighting means 1.

【0078】2台の照明手段1のそれぞれの取り付け位
置を(Xsj,Ysj,Zsj)、(Xkj,Ykj,Zkj)と表
現する。取り付け位置(Xkj,Ykj,Zkj)の照明手段
1から照射目標qへの照射方向を通る直線Lk と、直線
j との交点が、照射目標qの位置座標である。すなわ
ち、(5)式によって直線Lj を求める一方、(26)
式を用いて直線Lk を求めればよい。直線Lk は、(2
6)式で表現される。ここで、(lkj,mkj,nkj
は、直線Lk の方向余弦(方向ベクトル)である。つま
り、開始座標演算手段7は、直線Lk と直線Lj との交
点を算出して、照射目標qの位置座標とする。
The mounting positions of the two illumination means 1 are expressed as ( Xsj , Ysj , Zsj ) and ( Xkj , Ykj , Zkj ). Mounting position (X kj, Y kj, Z kj) and the straight line L k through the irradiation direction from the illumination means 1 to the irradiation target q, the intersection of the straight line L j, the position coordinates of the irradiation target q. That is, while the straight line Lj is obtained by the equation (5), the equation (26)
It may be obtained a line L k using equation. The straight line L k is (2
6) It is expressed by the equation. Here, (l kj , m kj , n kj )
Is the direction cosine of the straight line L k (direction vector). That is, the start coordinate computing means 7 calculates the intersection of the straight line L k and the straight line L j, the position coordinates of the irradiation target q.

【0079】[0079]

【数26】 (Equation 26)

【0080】以下に、自動追尾照明装置の一連の処理
を、図7のフローチャートを基にした図9を用いて、簡
単に説明する。
Hereinafter, a series of processes of the automatic tracking illumination device will be briefly described with reference to FIG. 9 based on the flowchart of FIG.

【0081】開始座標演算手段7は、上記ステップ10
0の処理のかわりに、2台の照明手段1のそれぞれの取
り付け位置(Xsj,Ysj,Zsj)、(Xkj,Ykj
kj)を予め入力されて記憶している(ステップ10
1)。次に、開始座標演算手段7は、2台の照明手段1
が天井面等に取り付けられた後、2台の照明手段1の取
り付けずれ行列[Psj0]、[Pkj0]の測定値を入力
されて記憶する(ステップ111)。
The start coordinate calculating means 7 performs the processing in step 10
0, the mounting positions (X sj , Y sj , Z sj ), (X kj , Y kj ,
Z kj ) is previously input and stored (step 10).
1). Next, the start coordinate calculating means 7 includes two lighting means 1
Are attached to the ceiling surface or the like, the measured values of the displacement matrices [P sj 0] and [P kj 0] of the two lighting means 1 are input and stored (step 111).

【0082】各照明手段1の制御手段6は、調光装置か
ら遠隔制御信号を受けると(ステップ121)、遠隔制
御信号に従って各パン、各チルトの2軸方向に照射方向
を回動し、各開始座標演算手段7へ、照射目標の追尾を
開始する旨の信号を、送信する(ステップ131)。
Upon receiving the remote control signal from the light control device (step 121), the control means 6 of each lighting means 1 rotates the irradiation direction in two directions of each pan and each tilt in accordance with the remote control signal. A signal to start tracking of the irradiation target is transmitted to the start coordinate calculating means 7 (step 131).

【0083】各照明手段1の開始座標演算手段7は、上
記ステップ130の結果、自機に関して、パン方向駆動
行列[Psj]、[Pkj]と、チルト方向駆動行列
[Tsj]、[Tkj]とを得て、方向余弦(lsj,msj
sj)、(lkj,mkj,nkj)と、照明手段1の取り付
け位置(Xsj,Ysj,Zsj)、(Xkj,Ykj,Zkj)と
を基にして、直線Lj 上且つ直線Lj 上に位置する1点
(Xj ,Yj ,Zj )を決める(ステップ141、ステ
ップ151)。以上が、各開始座標演算手段7を使用す
るステップであり、追尾目標である照射目標qを先ず捕
捉する段階であり、各開始座標演算手段7は、照射目標
qの追尾を開始する画素座標を演算して画像認識手段3
へ出力する。
As a result of step 130, the start coordinate calculating means 7 of each lighting means 1 determines the pan direction driving matrices [P sj ] and [P kj ] and the tilt direction driving matrices [T sj ] and [T sj ] of the self apparatus. T kj ] to obtain the direction cosine (l sj , m sj ,
n sj), (l kj, m kj, and n kj), the mounting position of the illumination means 1 (X sj, Y sj, Z sj), based on (X kj, Y kj, the Z kj) and the straight line L j on and point located on the straight line L j (X j, Y j , Z j) deciding (step 141, step 151). The above is the step of using each start coordinate calculating means 7 and the step of first capturing the irradiation target q which is the tracking target. Each start coordinate calculating means 7 calculates the pixel coordinates at which the tracking of the irradiation target q is started. Calculation and image recognition means 3
Output to

【0084】画像認識手段3は、定期的に撮像画像のサ
ンプリングを行い、画像処理を行う(ステップ16
0)。位置座標演算手段4は、直線L1 と直線L2 との
交点座標を求め、照射目標qの位置座標の記憶値を更新
し(ステップ170)、照射目標qの位置座標の記憶値
を、制御値演算手段5へ送信する。制御値演算手段5
は、パン、チルトの制御値を算出し、該制御値を制御手
段6へ送信する。制御手段6は、該制御値に従って、照
射目標qの移動に伴い、照明手段1の照射方向を照射目
標qに向け(ステップ180)、位置座標演算手段4
に、照射目標qの位置座標の算出を促す。すなわち、制
御の段階は上記ステップ160の直前に戻る。上記ステ
ップ160から上記ステップ180までが繰り返される
ことによって、照射目標qの追尾を行う。
The image recognizing means 3 periodically samples the taken image and performs image processing (step 16).
0). Position coordinate calculating means 4 calculates the intersection coordinates of the lines L 1 and the straight line L 2, and updates the stored values of the position coordinates of the irradiation target q (step 170), the stored value of the position coordinates of the irradiation target q, control It is transmitted to the value calculation means 5. Control value calculation means 5
Calculates the pan and tilt control values and transmits the control values to the control means 6. The control means 6 directs the irradiation direction of the illuminating means 1 to the irradiation target q in accordance with the movement of the irradiation target q in accordance with the control value (step 180).
Prompts the user to calculate the position coordinates of the irradiation target q. That is, the control stage returns immediately before step 160. The tracking of the irradiation target q is performed by repeating the steps 160 to 180.

【0085】従って、自動追尾照明装置は、指向性を有
するとともに照射方向が可変可能な照明手段1と、照明
手段1による照明空間Wを各々異なる方向から撮像する
複数の撮像手段2と、複数の撮像手段2の各映像から照
射目標qを識別するとともに該照射目標qを撮像してい
る各撮像手段2における画素座標を特定する画像認識手
段3と、画像認識手段3で特定された画素座標から照明
空間W内の照射目標qの位置を演算する位置座標演算手
段4と、照明空間Wに対する照明手段1の位置および位
置座標演算手段4の演算結果に基づいて照明手段1の照
射方向を照射目標qに向けるように制御するための制御
値を演算する制御値演算手段5と、制御値に応じて照明
手段1の照射方向を可変制御する制御手段6とを備える
ため、固定された複数の撮像手段2で得た画像から、1
乃至複数の照射目標qの位置座標を特定でき、照射目標
qが増えた場合においても、撮像手段2を追加すること
なく対応することが可能である。しかも、撮像カメラの
台数が増えず、撮像手段2の撮影方向を変えるための駆
動手段が不用であるので、コストが高くなることもな
い。また、多数の撮像カメラを制御することもないの
で、制御が複雑になることもない。
Accordingly, the automatic tracking illumination device comprises: an illumination means 1 having directivity and a variable irradiation direction; a plurality of imaging means 2 for imaging the illumination space W of the illumination means 1 from different directions; An image recognition unit 3 that identifies an irradiation target q from each image of the imaging unit 2 and specifies pixel coordinates in each imaging unit 2 that is capturing the irradiation target q, and a pixel coordinate specified by the image recognition unit 3. A position coordinate calculating means 4 for calculating the position of the irradiation target q in the lighting space W; and a position of the lighting means 1 with respect to the lighting space W and an irradiation direction of the lighting means 1 based on the calculation result of the position coordinate calculating means 4. The control value calculating means 5 for calculating a control value for controlling the light source toward q and the control means 6 for variably controlling the irradiation direction of the lighting means 1 according to the control value are fixed. From the image obtained by the number of imaging means 2, 1
In addition, the position coordinates of the plurality of irradiation targets q can be specified, and even when the number of irradiation targets q increases, it is possible to cope without adding the imaging unit 2. Moreover, the number of imaging cameras does not increase, and a driving unit for changing the imaging direction of the imaging unit 2 is unnecessary, so that the cost does not increase. Further, since a large number of imaging cameras are not controlled, the control does not become complicated.

【0086】また、前記第1の実施の形態と比較して、
所定の高さZqを設定入力する手間が省け、床面など基
準面が平坦でなく所定の高さZqを測定しにくい場合で
も対応がしやすくなる。
Further, as compared with the first embodiment,
This eliminates the need for setting and inputting the predetermined height Zq, and makes it easier to cope with the case where the reference height such as the floor surface is not flat and it is difficult to measure the predetermined height Zq.

【0087】[第4の実施の形態]図10は自動追尾照
明装置を説明するブロック図である。図11は撮像カメ
ラが被撮像面に正対していない場合の分解能の不均一発
生なる不具合を説明する模式図、図12は撮像カメラが
被撮像面に正対している場合の分解能の均一なる状態を
説明する模式図である。図13は照射目標の位置を近似
する考え方を説明する模式図で、(a) は2つの撮像カメ
ラの撮像方向をあらわす2つの直線がねじれの位置の関
係にある場合を説明した模式図、(b) は(a) の2つの直
線間の最短距離上に照射目標が位置するとみなす考え方
を説明する模式図である。
[Fourth Embodiment] FIG. 10 is a block diagram illustrating an automatic tracking illumination device. FIG. 11 is a schematic diagram for explaining a problem of non-uniform resolution when the imaging camera is not directly facing the imaging surface, and FIG. 12 is a state in which the resolution is uniform when the imaging camera is directly facing the imaging surface. FIG. FIG. 13 is a schematic diagram for explaining the concept of approximating the position of the irradiation target, and FIG. 13A is a schematic diagram for explaining a case where two straight lines representing the imaging directions of the two imaging cameras are in a relationship of the twist position. (b) is a schematic diagram for explaining the idea of assuming that the irradiation target is located on the shortest distance between two straight lines in (a).

【0088】なお、前述の第1の実施の形態と同一の箇
所には同じ符号を付し、同一の箇所の詳細な説明は省略
する。
The same parts as those in the first embodiment are denoted by the same reference numerals, and detailed description of the same parts will be omitted.

【0089】この第3の実施の形態の自動追尾照明装置
が前述の第1の実施の自動追尾照明装置と異なり特徴と
なる構成は、上記ステップ150の位置座標演算手段4
にて照射目標qの位置座標を算出する際に各撮像手段2
の照射目標qの位置座標に補正を施す、座標補正手段を
設けた点である。
The automatic tracking illuminating device of the third embodiment is different from the automatic tracking illuminating device of the first embodiment in that the characteristic feature is that the position coordinate calculating means 4 in the step 150 is used.
When calculating the position coordinates of the irradiation target q in
Is provided with coordinate correction means for correcting the position coordinates of the irradiation target q.

【0090】前述の第1の実施の形態においては、撮像
手段2であるCCDカメラ21 、2 2 は固定されている
ので、殆どの場合照射目標qは撮像映像の座標の中心に
写ることはない。そこで、CCDカメラ21 、22 に広
角レンズを用いた場合に次のようなことが問題となる。
すなわち、図11および図12に示すように、光学レン
ズを具備したCCDカメラ21 、22 の撮像面上では等
距離である距離St1、t2、 t3、 ・・が、実際の照明
空間Wにおける床面イ上では各2点間の距離が異なって
しまう(図11ではSt1<St2<St3<・・、図12で
はSp1=Sp2=Sp3=・・)。
In the first embodiment described above,
CCD camera 2 as means 21, 2 TwoIs fixed
Therefore, in most cases, the irradiation target q is located at the center of the coordinates of the captured image.
There is no picture. So, CCD camera 21, 2TwoNihiro
The following problems arise when a square lens is used.
That is, as shown in FIG. 11 and FIG.
CCD camera 2 equipped with1, 2TwoEtc. on the imaging surface of
Distance S, which is the distancet1,St2,St3,.. but actual lighting
On the floor a in the space W, the distance between each two points is different.
(S in FIG. 11t1<St2<St3<・ ・ 、 In FIG.
Is Sp1= Sp2= Sp3= ・ ・).

【0091】このような事情を受け、前述の第1の実施
の形態においては、位置座標演算手段4にて直線L1
直線L2 とは厳密には解を持たず、ねじれの位置の関係
にあることが多い。この場合、図13に示すように、直
線L1 と直線L2 との間の最短距離となる線分V1−V
2上に照射目標qが存在するとみなす。
Under such circumstances, in the above-described first embodiment, the position coordinate calculating means 4 does not have a strict solution between the straight line L 1 and the straight line L 2 , There are many. In this case, as shown in FIG. 13, the shortest distance between the lines L 1 and the straight line L 2 segment V1-V
It is assumed that the irradiation target q exists on 2.

【0092】座標補正手段8は、位置座標演算手段4と
制御値演算手段5とに接続しており、位置座標演算手段
4にて照明空間W内の照射目標qの位置座標を演算する
場合に、各撮像手段2における画素座標によって特定す
る照射目標qの座標の補正を行ってから、照射目標qの
座標の補正値を、制御値演算手段5へ送信する。
The coordinate correcting means 8 is connected to the position coordinate calculating means 4 and the control value calculating means 5, and is used when the position coordinate calculating means 4 calculates the position coordinates of the irradiation target q in the illumination space W. Then, after correcting the coordinates of the irradiation target q specified by the pixel coordinates in each imaging unit 2, the correction value of the coordinates of the irradiation target q is transmitted to the control value calculation unit 5.

【0093】座標補正手段8における、照射目標qの座
標の補正値の算出の考え方は、以下のとおりである。直
線L1 上の点V1(Xv1,Yv1,Zv1)と、直線L2
の点V2(Xv2,Yv2,Zv2)とは、次のように求めら
れる。すなわち、線分V1−V2が直線L1 と直線L2
とのいずれにも直交するため、直線L1 の方向ベクトル
と線分V1−V2の方向ベクトルとの内積が0であり、
式(27)が成り立ち、且つ直線L2 の方向ベクトルと
線分V1−V2の方向ベクトルとの内積が0であり、式
(28)が成り立つ。
The concept of calculating the correction value of the coordinates of the irradiation target q in the coordinate correction means 8 is as follows. A point on the line L 1 V1 (X v1, Y v1, Z v1), and the point on the straight line L 2 V2 (X v2, Y v2, Z v2), is determined as follows. That is, the line segment V1-V2 is a straight line L 1 and the straight line L 2
To perpendicular to both the inner product of the direction vector of the direction vector and a line segment V1-V2 of the straight line L 1 is 0,
Equation is true (27), and the inner product of the direction vector of the direction vector of the straight line L 2 and the segment V1-V2 is 0, the formula (28) holds.

【0094】[0094]

【数27】 [Equation 27]

【0095】[0095]

【数28】 [Equation 28]

【0096】式(27)、式(28)に、式(8)、式
(9)を代入してまとめると、式(29)、式(30)
が成り立つ。ここで、E11、E12、E22、F1 、F
2 は、式(31)であらわされる定数である。
By substituting Equations (8) and (9) into Equations (27) and (28), Equations (29) and (30) are obtained.
Holds. Here, E 11 , E 12 , E 22 , F 1 , F
2 is a constant represented by Expression (31).

【0097】[0097]

【数29】 (Equation 29)

【0098】[0098]

【数30】 [Equation 30]

【0099】[0099]

【数31】 (Equation 31)

【0100】式(29)、式(30)の媒介変数t1
2 を求めると、式(32)が得られる。式(32)で
得た媒介変数t1 、t2 を式(8)、式(9)に代入し
てまとめると、点V1(Xv1,Yv2,Zv3)と点V2
(Xv2,Yv2,Zv2)とが決まる。
In the equations (29) and (30), the parameters t 1 ,
When t 2 is obtained, Expression (32) is obtained. Equation (32) the parametric t 1, t 2 obtained by the equation (8), summary into Equation (9), the point V1 (X v1, Y v2, Z v3) and the point V2
(X v2 , Y v2 , Z v2 ) are determined.

【0101】[0101]

【数32】 (Equation 32)

【0102】ここで、線分V1−V2をi1:i2に内
分割する点を、照射目標qの座標の補正点とする。照射
目標qの座標の補正点は、(Xq,Yq,Zq)であら
わすとして、式(33)のようになる。
Here, a point at which the line segment V1-V2 is internally divided into i1: i2 is a correction point of the coordinates of the irradiation target q. The correction point of the coordinates of the irradiation target q is represented by (Xq, Yq, Zq), as shown in Expression (33).

【0103】[0103]

【数33】 [Equation 33]

【0104】なお、i1、i2はそれぞれ点V2、点V
1が照射目標qの位置座標にどれだけ近いかをあらわす
確かさで、その値が大きいほど確かであるとする。い
ま、画像処理の画素座標系は、2DW(X軸方向)×2
DH(Y軸方向)の分解能があり、X軸方向は補正の必
要がなく、Y軸方向の座標を補正する必要があるとす
る。実際に画像処理で求められる補正結果は−DH≦Y
dk<DHとなる。
Note that i1 and i2 are points V2 and V, respectively.
1 is a certainty indicating how close to the position coordinates of the irradiation target q, and the larger the value is, the more certain it is. Now, the pixel coordinate system of the image processing is 2DW (X-axis direction) × 2
It is assumed that there is a resolution of DH (Y-axis direction), no correction is required in the X-axis direction, and it is necessary to correct the coordinates in the Y-axis direction. The correction result actually obtained by the image processing is -DH ≦ Y
dk <DH.

【0105】一方、点V1(Xv1,Yv1,Zv1)の確か
さi2と、点V2(Xv2,Yv2,Z v2)の確かさi1と
は、CCD撮像素子のY座標を用いて式(34)のよう
に算出される。
On the other hand, the point V1 (Xv1, Yv1, Zv1) Sure
I2 and the point V2 (Xv2, Yv2, Z v2) And i1
Is expressed by the equation (34) using the Y coordinate of the CCD image sensor.
Is calculated.

【0106】[0106]

【数34】 (Equation 34)

【0107】実際は、距離St1、 t2、 t3、 ・・であ
らわされる床面イ上の距離と、画素座標との関係は、単
純ではない。つまり、確かさi1、i2が式(34)の
ように算出可能な場合のみではない。そこで、式(3
4)のように算出する以外の方法として、画素座標と床
面イ上の距離との関係を、関数化したり、データテーブ
ルに予め対応付けたりしておき、確かさi1、i2を求
めることでも対応可能である。
[0107] In practice, the distance S t1, S t2, S t3 , the distance on the floor Lee represented by ..., the relationship between the pixel coordinates, not simple. In other words, this is not limited to the case where the certainties i1 and i2 can be calculated as in Expression (34). Therefore, equation (3)
As a method other than the calculation as in 4), the relationship between the pixel coordinates and the distance on the floor surface a may be converted into a function or associated with a data table in advance to obtain the certainty i1 and i2. Available.

【0108】従って、本実施の形態においては、位置座
標演算手段4にて照明空間W内の照射目標qの位置を演
算する場合に各撮像手段2における画素座標によって特
定する照射目標qの座標の補正を行う座標補正手段8を
備えたため、各撮像手段2の撮像範囲を広くするために
広角レンズを使用した場合でも、照射目標qの位置座標
特定の分解能の低下に対応できる。
Therefore, in the present embodiment, when the position coordinate calculating means 4 calculates the position of the irradiation target q in the illumination space W, the coordinates of the irradiation target q specified by the pixel coordinates in each imaging means 2 are used. Since the coordinate correction means 8 for performing the correction is provided, even if a wide-angle lens is used to widen the imaging range of each imaging means 2, it is possible to cope with a decrease in the resolution for specifying the position coordinates of the irradiation target q.

【0109】また、上記各実施の形態においては、照明
手段1の駆動角度検出は、ポテンショメータによって角
度検出を行うものを例示したが、本発明はこれに限ら
ず、ポテンショメータのかわりにエンコーダを用いても
よい。
In each of the above embodiments, the drive angle of the illuminating means 1 is detected by a potentiometer. However, the present invention is not limited to this, and an encoder may be used instead of a potentiometer. Is also good.

【0110】[0110]

【発明の効果】請求項1記載の発明にあっては、指向性
を有するとともに照射方向が可変可能な照明手段と、照
明手段による照明空間を各々異なる方向から撮像する複
数の撮像手段と、複数の撮像手段の各映像から照射目標
を識別するとともに該照射目標を撮像している各撮像手
段における画素座標を特定する画像認識手段と、画像認
識手段で特定された複数の画素座標から照明空間内の照
射目標の位置を演算する位置座標演算手段と、照明空間
に対する照明手段の位置および位置座標演算手段の演算
結果に基づいて照明手段の照射方向を照射目標に向ける
ように制御するための制御値を演算する制御値演算手段
と、制御値に応じて照明手段の照射方向を可変制御する
制御手段とを備えたため、固定された複数の撮像手段で
得た画像から、1乃至複数の照射目標の位置座標を特定
でき、照射目標が増えた場合においても、撮像手段を追
加することなく対応することが可能である。しかも、撮
像手段の数が増えず、撮像手段の撮影方向を変えるため
の駆動手段等が不用であるので、コストが高くなること
もない。また、多数の撮像手段を制御することもないの
で、制御が複雑になることもない。
According to the first aspect of the present invention, there is provided an illuminating means having directivity and a variable irradiating direction, a plurality of imaging means for imaging an illumination space by the illuminating means from different directions, and An image recognition unit that identifies an irradiation target from each image of the imaging unit and specifies pixel coordinates in each imaging unit that is imaging the irradiation target; and a plurality of pixel coordinates specified by the image recognition unit in an illumination space. Position coordinate calculating means for calculating the position of the irradiation target, and a control value for controlling the irradiation direction of the lighting means to the irradiation target based on the position of the lighting means with respect to the illumination space and the calculation result of the position coordinate calculating means. , And control means for variably controlling the irradiation direction of the illumination means in accordance with the control value. You can identify the optimal multiple position coordinates of the irradiation target, in the case of increasing the irradiation target also, it is possible to cope with without adding imaging means. In addition, since the number of imaging means does not increase and a driving means for changing the imaging direction of the imaging means is unnecessary, the cost does not increase. In addition, since there is no need to control a large number of imaging units, the control does not become complicated.

【0111】請求項2記載の発明にあっては、請求項1
記載の発明の効果に加えて、照射目標の追尾を開始する
際に、照射目標のおよその位置をあらわす照射目標認識
補助情報と照明手段の照射方向とを基にして、照射目標
の追尾を開始する画素座標を演算する開始座標演算手段
を有し、画像認識手段は、照射目標の追尾を開始する際
に、開始座標演算手段で求まる画素座標の演算結果を基
にして、画素座標の所定の範囲の画像部分に限って照射
目標を識別するものであるため、照射目標の追尾を開始
する際に、撮像映像の一画面全体にわたって画像処理を
行う必要が無く、画像処理にかかる処理時間を抑えるこ
とができ、さらに画像処理に関するノイズ等によって照
射目標を誤認識するおそれも抑えることができ、撮像手
段を複数使用する場合でも、全ての撮像手段の撮像映像
について画像処理を終了するまでの総処理時間が長引く
のを抑えることができる。
In the invention according to claim 2, claim 1
In addition to the effects of the invention described above, when tracking of the irradiation target is started, the tracking of the irradiation target is started based on the irradiation target recognition auxiliary information indicating the approximate position of the irradiation target and the irradiation direction of the lighting means. The image recognizing means calculates a predetermined pixel coordinate based on a result of the pixel coordinate calculation obtained by the start coordinate calculating means when starting tracking of the irradiation target. Since the irradiation target is identified only in the image portion of the range, when tracking the irradiation target is started, it is not necessary to perform the image processing over the entire screen of the captured video, and the processing time required for the image processing is suppressed. In addition, it is possible to suppress the possibility of erroneously recognizing the irradiation target due to noise or the like relating to image processing. The total processing time to end it is possible to suppress the protracted.

【0112】請求項3記載の発明にあっては、請求項2
記載の発明の効果に加えて、開始座標演算手段は、照射
目標が存在する被照射面を基準にした所定の高さを、照
射目標認識補助情報として演算に用いるため、照射目標
の照射したい位置に合わせて画像処理の中心点を設定す
ることができ、特に、照射目標が舞台演技者や司会者な
どであって、胸から上の部分や顔のみなど、部分的にス
ポット光を照射したい場合には、画像認識手段の画像処
理の負担を抑えることができ、画像処理にかかる時間も
節減できる。
In the invention according to claim 3, claim 2
In addition to the effects of the invention described above, the starting coordinate calculation means uses a predetermined height based on the irradiated surface on which the irradiation target exists as the irradiation target recognition auxiliary information for the calculation, so that the irradiation position of the irradiation target is desired. The center point of image processing can be set according to the time, especially when the irradiation target is a stage performer or a moderator and you want to irradiate a spot light partially such as the part above the chest or only the face Thus, the burden of image processing on the image recognition means can be reduced, and the time required for image processing can be reduced.

【0113】請求項4記載の発明にあっては、請求項1
記載の発明の効果に加えて、照明手段は複数設けられる
ものであり、開始座標演算手段は、照射目標の追尾を開
始する際に、複数の照明手段の各照射方向の交点座標を
基にして、照射目標の追尾を開始する画素座標を演算す
るものであり、画像認識手段は、照射目標の追尾を開始
する際に、開始座標演算手段で求まる画素座標の演算結
果を基にして、画素座標の所定の範囲の画像部分に限っ
て照射目標を識別するものであるため、照射目標の追尾
を開始する画素座標を特定するために例えば照射目標の
所定の高さなど別入力のパラメータ値を設定入力する手
間が省け、床面など基準面が平坦でなく照射目標の所定
の高さを測定しにくい場合でも対応がしやすくなる。
In the invention according to claim 4, claim 1 is
In addition to the effects of the described invention, a plurality of lighting means are provided, and the start coordinate calculating means, when starting tracking of the irradiation target, based on intersection coordinates of the plurality of lighting means in respective irradiation directions. The image recognition means calculates the pixel coordinates at which the tracking of the irradiation target is started. The image recognition means, when starting the tracking of the irradiation target, calculates the pixel coordinates based on the calculation result of the pixel coordinates obtained by the start coordinate calculation means. Since the irradiation target is identified only in the image portion of the predetermined range, another input parameter value such as a predetermined height of the irradiation target is set to specify a pixel coordinate at which the tracking of the irradiation target is started. This eliminates the need for inputting, and makes it easier to cope with the case where the reference surface such as the floor surface is not flat and it is difficult to measure the predetermined height of the irradiation target.

【0114】請求項5記載の発明にあっては、請求項1
乃至4記載の発明の効果に加えて、位置座標演算手段に
て照明空間内の照射目標の位置を演算する場合に各撮像
手段における画素座標によって特定する照射目標の座標
の補正を行う座標補正手段を備えたため、各撮像手段の
撮像範囲を広くするために広角レンズを使用して各撮像
手段の撮像映像が歪んでしまい照射目標の座標の補正が
必要な場合でも、照射目標の位置座標特定の分解能の低
下に対応できる。
In the invention according to claim 5, claim 1 is
In addition to the effects of the inventions described in (4) to (4), coordinate correction means for correcting the coordinates of the irradiation target specified by the pixel coordinates in each imaging means when calculating the position of the irradiation target in the illumination space by the position coordinate calculation means Therefore, even if the captured image of each imaging unit is distorted using a wide-angle lens to widen the imaging range of each imaging unit and the coordinates of the irradiation target need to be corrected, the position coordinates of the irradiation target can be specified. It can cope with a decrease in resolution.

【図面の簡単な説明】[Brief description of the drawings]

【図1】本発明の自動追尾照明装置の第1の実施の形態
を説明するブロック図である。
FIG. 1 is a block diagram illustrating a first embodiment of an automatic tracking illumination device according to the present invention.

【図2】同上のスポットライトを設けた照明空間の平面
図である。
FIG. 2 is a plan view of an illumination space provided with the same spotlight.

【図3】同上のスポットライトを設けた照明空間の側面
図である。
FIG. 3 is a side view of an illumination space provided with the same spotlight.

【図4】同上の撮像カメラを設けた照明空間の平面図で
ある。
FIG. 4 is a plan view of an illumination space provided with the above imaging camera.

【図5】同上の撮像カメラを設けた照明空間の側面図で
ある。
FIG. 5 is a side view of an illumination space provided with the above imaging camera.

【図6】同上の撮像カメラの映像画面で捉えた照射目標
の画素座標位置の説明図である。
FIG. 6 is an explanatory diagram of a pixel coordinate position of an irradiation target captured on a video screen of the above imaging camera.

【図7】同上の一連の制御の流れをあらわしたフローチ
ャートである。
FIG. 7 is a flowchart showing a series of control flows according to the embodiment.

【図8】本発明の自動追尾照明装置の第2の実施の形態
のスポットライトの説明図である。
FIG. 8 is an explanatory diagram of a spotlight according to a second embodiment of the automatic tracking illumination device of the present invention.

【図9】本発明の自動追尾照明装置の第3の実施の一連
の制御の流れをあらわしたフローチャートである。
FIG. 9 is a flowchart showing a series of control flows of a third embodiment of the automatic tracking illumination device of the present invention.

【図10】本発明の自動追尾照明装置の第4の実施の形
態を説明するブロック図である。
FIG. 10 is a block diagram illustrating a fourth embodiment of the automatic tracking illumination device of the present invention.

【図11】同上の撮像カメラが被撮像面に正対していな
い場合の分解能の不均一発生なる不具合を説明する模式
図である。
FIG. 11 is a schematic diagram for explaining a problem of non-uniform resolution when the imaging camera is not directly facing the imaging surface;

【図12】同上の撮像カメラが被撮像面に正対している
場合の分解能の均一なる状態を説明する模式図である。
FIG. 12 is a schematic diagram illustrating a state in which the resolution is uniform when the imaging camera is directly facing an imaging surface.

【図13】同上の照射目標の位置を近似する考え方を説
明する模式図である。
FIG. 13 is a schematic diagram for explaining a concept of approximating the position of the irradiation target according to the embodiment.

【符号の説明】[Explanation of symbols]

1 照明手段 2 撮像手段 3 画像認識手段 4 位置座標演算手段 5 制御値演算手段 6 制御手段 7 開始座標演算手段 8 座標補正手段 q 照射目標 W 照明空間 Zq 所定の高さ DESCRIPTION OF SYMBOLS 1 Illumination means 2 Imaging means 3 Image recognition means 4 Position coordinate calculation means 5 Control value calculation means 6 Control means 7 Start coordinate calculation means 8 Coordinate correction means q Irradiation target W Illumination space Zq Predetermined height

───────────────────────────────────────────────────── フロントページの続き (72)発明者 福井 栄一 大阪府門真市大字門真1048番地松下電工株 式会社内 ──────────────────────────────────────────────────続 き Continued on the front page (72) Inventor Eiichi Fukui 1048 Kadoma, Kadoma City, Osaka Prefecture Matsushita Electric Works, Ltd.

Claims (5)

【特許請求の範囲】[Claims] 【請求項1】 指向性を有するとともに照射方向が可変
可能な照明手段と、前記照明手段による照明空間を各々
異なる方向から撮像する複数の撮像手段と、前記複数の
撮像手段の各映像から照射目標を識別するとともに該照
射目標を撮像している各撮像手段における画素座標を特
定する画像認識手段と、前記画像認識手段で特定された
複数の画素座標から前記照明空間内の照射目標の位置を
演算する位置座標演算手段と、照明空間に対する前記照
明手段の位置および前記位置座標演算手段の演算結果に
基づいて前記照明手段の照射方向を照射目標に向けるよ
うに制御するための制御値を演算する制御値演算手段
と、前記制御値に応じて前記照明手段の照射方向を可変
制御する制御手段とを備えたことを特徴とする自動追尾
照明装置。
An illumination unit having directivity and a variable illumination direction, a plurality of imaging units for imaging an illumination space of the illumination unit from different directions, and an illumination target from each image of the plurality of imaging units. Image recognition means for identifying pixel coordinates in each imaging means for imaging the irradiation target and calculating a position of the irradiation target in the illumination space from a plurality of pixel coordinates specified by the image recognition means. And a control for calculating a control value for controlling the irradiation direction of the lighting means to the irradiation target based on the position of the lighting means with respect to the illumination space and the calculation result of the position coordinate calculation means. An automatic tracking illumination device comprising: a value calculation unit; and a control unit that variably controls an irradiation direction of the illumination unit according to the control value.
【請求項2】 照射目標の追尾を開始する際に、照射目
標のおよその位置をあらわす照射目標認識補助情報と前
記照明手段の照射方向とを基にして、照射目標の追尾を
開始する画素座標を演算する開始座標演算手段を有し、
前記画像認識手段は、照射目標の追尾を開始する際に、
前記開始座標演算手段で求まる前記画素座標の演算結果
を基にして、前記画素座標の所定の範囲の画像部分に限
って照射目標を識別するものであることを特徴とする請
求項1記載の自動追尾照明装置。
2. A method of starting tracking of an irradiation target, based on irradiation target recognition auxiliary information indicating an approximate position of the irradiation target and an irradiation direction of the illuminating means, pixel coordinates for starting tracking of the irradiation target. Has start coordinate calculating means for calculating
The image recognition means, when starting tracking the irradiation target,
2. An automatic irradiation apparatus according to claim 1, wherein an irradiation target is identified only in an image portion within a predetermined range of said pixel coordinates, based on a calculation result of said pixel coordinates obtained by said start coordinate calculation means. Tracking lighting device.
【請求項3】 前記開始座標演算手段は、照射目標が存
在する被照射面を基準にした所定の高さを、前記照射目
標認識補助情報として演算に用いることを特徴とする請
求項2記載の自動追尾照明装置。
3. The irradiation apparatus according to claim 2, wherein the start coordinate calculation means uses a predetermined height based on a surface to be irradiated on which the irradiation target is present as the irradiation target recognition auxiliary information. Automatic tracking lighting device.
【請求項4】 前記照明手段は複数設けられるものであ
り、前記開始座標演算手段は、照射目標の追尾を開始す
る際に、前記複数の照明手段の各照射方向の交点座標を
基にして、照射目標の追尾を開始する画素座標を演算す
るものであり、前記画像認識手段は、照射目標の追尾を
開始する際に、前記開始座標演算手段で求まる前記画素
座標の演算結果を基にして、前記画素座標の所定の範囲
の画像部分に限って照射目標を識別するものであること
を特徴とする請求項1記載の自動追尾照明装置。
4. The lighting device according to claim 1, wherein a plurality of the illuminating units are provided, and the start coordinate calculating unit, based on coordinates of intersections of the irradiating directions of the plurality of illuminating units when starting tracking of the irradiation target, It is to calculate the pixel coordinates to start the tracking of the irradiation target, the image recognition means, when starting the tracking of the irradiation target, based on the calculation result of the pixel coordinates obtained by the start coordinate calculation means, 2. The automatic tracking illumination device according to claim 1, wherein an irradiation target is identified only in an image portion within a predetermined range of the pixel coordinates.
【請求項5】 前記位置座標演算手段にて前記照明空間
内の照射目標の位置を演算する場合に各撮像手段におけ
る画素座標によって特定する照射目標の座標の補正を行
う座標補正手段を備えたことを特徴とする請求項1乃至
4記載の自動追尾照明装置。
5. A coordinate correcting means for correcting the coordinates of the irradiation target specified by the pixel coordinates in each imaging means when the position coordinate calculating means calculates the position of the irradiation target in the illumination space. 5. The automatic tracking illumination device according to claim 1, wherein:
JP10144931A 1998-01-30 1998-05-27 Automatic tracking lighting system Pending JPH11283406A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP10144931A JPH11283406A (en) 1998-01-30 1998-05-27 Automatic tracking lighting system

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP1990298 1998-01-30
JP10-19902 1998-01-30
JP10144931A JPH11283406A (en) 1998-01-30 1998-05-27 Automatic tracking lighting system

Publications (1)

Publication Number Publication Date
JPH11283406A true JPH11283406A (en) 1999-10-15

Family

ID=26356774

Family Applications (1)

Application Number Title Priority Date Filing Date
JP10144931A Pending JPH11283406A (en) 1998-01-30 1998-05-27 Automatic tracking lighting system

Country Status (1)

Country Link
JP (1) JPH11283406A (en)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8659230B2 (en) 2011-06-16 2014-02-25 Panasonic Corporation Illumination control system
CN107889317A (en) * 2017-12-12 2018-04-06 广东工业大学 A kind of system, controller and the method for spotlight tracking target
CN108759831A (en) * 2018-04-02 2018-11-06 佛山科学技术学院 A kind of cargo spotter and cargo localization method
CN109854996A (en) * 2019-01-25 2019-06-07 太仓秦风广告传媒有限公司 A kind of intelligence is followed spot formula stage and its working method
JP2019160477A (en) * 2018-03-09 2019-09-19 Necプラットフォームズ株式会社 Irradiation target determining device, illumination control system, method, and program

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8659230B2 (en) 2011-06-16 2014-02-25 Panasonic Corporation Illumination control system
CN107889317A (en) * 2017-12-12 2018-04-06 广东工业大学 A kind of system, controller and the method for spotlight tracking target
CN107889317B (en) * 2017-12-12 2024-04-23 广东工业大学 System, controller and method for tracking target by spotlight
JP2019160477A (en) * 2018-03-09 2019-09-19 Necプラットフォームズ株式会社 Irradiation target determining device, illumination control system, method, and program
CN108759831A (en) * 2018-04-02 2018-11-06 佛山科学技术学院 A kind of cargo spotter and cargo localization method
CN108759831B (en) * 2018-04-02 2024-02-13 佛山科学技术学院 Goods positioning device and goods positioning method
CN109854996A (en) * 2019-01-25 2019-06-07 太仓秦风广告传媒有限公司 A kind of intelligence is followed spot formula stage and its working method

Similar Documents

Publication Publication Date Title
US5023709A (en) Automatic follow-up lighting system
US7710463B2 (en) Method and system for compensating for parallax in multiple camera systems
US6832044B2 (en) Iris imaging apparatus
US20060017812A1 (en) Camera link system, camera device and camera link control method
JPH11261868A (en) Fisheye lens camera device and image distortion correction method and image extraction method thereof
JP3817302B2 (en) Image generation device
JPH11134089A (en) Hand pointing device
JP3271900B2 (en) Automatic tracking lighting system
JP3057004B2 (en) Tracking device
KR102193984B1 (en) Monitoring System and Method for Controlling PTZ using Fisheye Camera thereof
KR100585822B1 (en) Monitor system use panorama image and control method the system
JPH11283406A (en) Automatic tracking lighting system
KR102138333B1 (en) Apparatus and method for generating panorama image
JP2003023553A (en) Remote operation camera and image providing apparatus
JPH09126758A (en) Environment recognizing device for vehicle
JP3906512B2 (en) Automatic tracking lighting device
KR20220139569A (en) System for Vehicle Number Recognition Control Using Artificial Intelligence and Method thereof
JPH11339507A (en) Automatic tracking illumination system
KR100736565B1 (en) Method of taking a panorama image and mobile communication terminal thereof
JP2002344796A (en) System and method for remote image centering
JP4218283B2 (en) Target projection type three-dimensional shape measuring method and apparatus
JP2020067511A (en) Camera system, control method and program of the same
JPH09180513A (en) Illumination control device
WO2022059584A1 (en) Camera system and camera system control method
KR102373572B1 (en) Surround view monitoring system and method thereof