JPH04242626A - Visual axis detector - Google Patents

Visual axis detector

Info

Publication number
JPH04242626A
JPH04242626A JP3011493A JP1149391A JPH04242626A JP H04242626 A JPH04242626 A JP H04242626A JP 3011493 A JP3011493 A JP 3011493A JP 1149391 A JP1149391 A JP 1149391A JP H04242626 A JPH04242626 A JP H04242626A
Authority
JP
Japan
Prior art keywords
eyeball
light
image sensor
line
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP3011493A
Other languages
Japanese (ja)
Other versions
JP2995877B2 (en
Inventor
Kazuki Konishi
一樹 小西
Akihiko Nagano
明彦 長野
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP3011493A priority Critical patent/JP2995877B2/en
Publication of JPH04242626A publication Critical patent/JPH04242626A/en
Priority to US08/364,503 priority patent/US5508759A/en
Application granted granted Critical
Publication of JP2995877B2 publication Critical patent/JP2995877B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Abstract

PURPOSE:To provide a visual axis detector capable of detecting the visual axis of one's eyeball with high accuracy by obtaining the positional coordinate of a first Purkinje image based on reflected light from one's eyeball and that of the pupil by the use of an image sensor and properly controlling the integrating time of the image sensor and a projected light amount from a projector. CONSTITUTION:A light flux from a projecting means 7 is incident on one's eyeball 201, and the positional coordinate of a Purkinje image based on the reflected ray from the eyeball and that of the pupil are detected by a detecting means 4 having an image sensor 4a. When the visual axis of eyeball is obtained by the use of these positional coordinates detected by the detecting means 4, the integrating time of the image sensor 4a is changed by an integrating time control means 9 on the basis of the output signal from a photometric sensor 8 for photometry of brightness near the front of the eyeball, while a luminescent amount from the projecting means 7 is changed by a luminescence control means 5.

Description

【発明の詳細な説明】[Detailed description of the invention]

【0001】0001

【産業上の利用分野】本発明は視線検出装置に関し、特
に観察者(撮影者)の眼球に投光手段から光束を照射し
、該眼球からの反射光に基づくプルキンエ第1像(角膜
反射像)と瞳孔をイメージセンサー面上に形成し、その
ときの各像のイメージセンサー面上の位置座標を用いて
眼球の視線を検出する際にイメージセンサーで光束を検
出する際の積分時間及び投光手段からの発光光量を適切
に制御し、高精度な視線検出を可能としたものである。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a line-of-sight detection device, and more particularly, the present invention relates to a line-of-sight detection device, and in particular, a device that irradiates the eyeball of an observer (photographer) with a light beam from a light projecting means, and uses the first Purkinje image (corneal reflection image) based on the light reflected from the eyeball. ) and a pupil on the image sensor surface, and the line of sight of the eyeball is detected using the position coordinates of each image on the image sensor surface.The integration time and light projection when detecting the light flux with the image sensor. The amount of light emitted from the device is appropriately controlled to enable highly accurate line-of-sight detection.

【0002】0002

【従来の技術】図9は従来の視線検出装置の要部ブロッ
ク図である。
2. Description of the Related Art FIG. 9 is a block diagram of main parts of a conventional line of sight detection device.

【0003】図中91はマイクロプロセッシングユニッ
ト(M.P.U)であり、プルキンエ第1像や瞳孔の位
置情報を用い視線演算等の各種の演算処理を行っている
。92はメモリー、93はインターフェイス回路であり
、A/D変換機能を有している。97は投光手段であり
、赤外発光ダイオード97aから放射した観察者に不感
の赤外光を投光レンズ97bを介して観察者の眼球(不
図示)に入射させている。95は発光制御回路であり、
赤外発光ダイオード97aの発光を制御している。 96は位置センサーであり、視線検出装置をカメラに適
用したときはそのカメラの縦横を検知している。
Reference numeral 91 in the figure represents a microprocessing unit (M.P.U.), which performs various calculation processes such as line of sight calculations using Purkinje's first image and pupil position information. 92 is a memory, and 93 is an interface circuit, which has an A/D conversion function. Reference numeral 97 denotes a light projecting means, which causes infrared light emitted from an infrared light emitting diode 97a, which is insensitive to the viewer, to enter the viewer's eyeball (not shown) via a light projecting lens 97b. 95 is a light emission control circuit;
The light emission of the infrared light emitting diode 97a is controlled. Reference numeral 96 denotes a position sensor, which detects the vertical and horizontal directions of the camera when the line of sight detection device is applied to the camera.

【0004】94は検出手段であり、イメージセンサー
94a、駆動回路94bそして受光レンズ94c等を有
しており、眼球からの反射光に基づくプルキンエ第1像
と瞳孔を受光レンズ94cを介してイメージセンサー9
4a面上に結像している。
Reference numeral 94 denotes a detection means, which includes an image sensor 94a, a drive circuit 94b, a light-receiving lens 94c, etc., and transmits the Purkinje first image based on the reflected light from the eyeball and the pupil to the image sensor through the light-receiving lens 94c. 9
The image is formed on the 4a plane.

【0005】同図における眼球の視線検出方法は例えば
特開平2−209125号公報や特開平2−26463
2号公報等で提案されている。同公報では投光手段97
からの赤外光のうち眼球からの反射光に基づくプルキン
エ第1像(角膜反射像)と複数の瞳孔輪部より算出され
る瞳孔中心の二つの位置情報を用いて視線を検出してい
る。
A method for detecting the line of sight of the eyeball in the figure is disclosed in, for example, Japanese Patent Laid-Open No. 2-209125 and Japanese Patent Laid-Open No. 2-26463.
This is proposed in Publication No. 2, etc. In the same publication, the light projecting means 97
The line of sight is detected using two pieces of information: the first Purkinje image (corneal reflection image) based on the reflected light from the eyeball among the infrared light emitted from the eye, and the positional information of the pupil center calculated from a plurality of pupillary limbus.

【0006】即ち、投光手段からの赤外光を観察者の眼
球に正面から照明し、このとき角膜前面で反射して生ず
る赤外発光ダイオードの虚像、所謂プルキンエ第1像の
発生する位置をイメージセンサーで検出する。このとき
プルキンエ第1像の発生する位置は眼球の回転角が零の
とき(ただし眼球の光軸)瞳孔中心の位置と一致し、眼
球が回転するにつれて瞳孔中心との位置がずれてくる。
That is, infrared light from the light projecting means is illuminated from the front onto the observer's eyeball, and at this time, the position where the so-called Purkinje first image, which is a virtual image of the infrared light emitting diode generated by reflection on the front surface of the cornea, is generated is determined. Detected with an image sensor. At this time, the position where the Purkinje first image is generated coincides with the position of the pupil center when the rotation angle of the eyeball is zero (however, the optical axis of the eyeball), and as the eyeball rotates, the position with respect to the pupil center shifts.

【0007】そしてこのときのプルキンエ第1像と瞳孔
中心とのずれ(間隔)は眼球の回転角に正弦にほぼ比例
する。この為プルキンエ第1像と瞳孔中心の位置情報か
ら、その位置間隔を求め眼球の回転角、更に視軸補正な
ど演算を行い撮影者の視線を求めている。
[0007] At this time, the deviation (distance) between the first Purkinje image and the center of the pupil is approximately proportional to the sine of the rotation angle of the eyeball. For this purpose, from the positional information of the Purkinje first image and the center of the pupil, the positional interval is determined, the rotation angle of the eyeball, and calculations such as visual axis correction are performed to determine the line of sight of the photographer.

【0008】このときイメージセンサーで光束を受光す
る際のイメージセンサーの積分時間は赤外発光ダイオー
ドの発光輝度、イメージセンサーの感度、S/N比、又
通常予想される撮影での外光などの諸条件を考慮して妥
当と思われる蓄積時間を定め、このとき定められた一定
の積分時間を用いてイメージセンサーの蓄積を行ってい
る。
[0008] At this time, the integration time of the image sensor when the image sensor receives the light flux depends on the luminance of the infrared light emitting diode, the sensitivity of the image sensor, the S/N ratio, and the external light normally expected during shooting. A reasonable accumulation time is determined in consideration of various conditions, and the determined integration time is used to perform accumulation on the image sensor.

【0009】[0009]

【発明が解決しようとする課題】従来の視線検出装置に
おいてはイメージセンサーで光束を受光する際のイメー
ジセンサーの積分時間を前述の如く予め諸条件を考慮し
て設定し、このとき設定した一定の積分時間を用いて受
光していた。
[Problem to be Solved by the Invention] In the conventional line of sight detection device, the integration time of the image sensor when the image sensor receives a luminous flux is set in advance by considering various conditions as described above, and the fixed time set at this time is set. Light was received using integration time.

【0010】この為、例えば眼球前眼部の照度によって
は種々な問題点が生じてくる場合があった。例えば照度
が低い時は瞳孔部と虹彩部の明暗差(出力信号値の差)
が小さく瞳孔輪部の検出が困難となる。又逆に照度が非
常に高いときにはイメージセンサーが飽和してしまい、
本来明暗差のあるプルキンエ第1像と虹彩部の出力信号
の差が消失してしまいプルキンエ第1像の検出が不可能
もしくは困難になってくるという問題点があった。
[0010] For this reason, various problems may occur depending on, for example, the illuminance of the anterior segment of the eyeball. For example, when the illuminance is low, the difference in brightness between the pupil and the iris (difference in output signal value)
is small, making it difficult to detect the pupillary limbus. Conversely, when the illuminance is very high, the image sensor becomes saturated,
There is a problem in that the difference between the Purkinje first image, which originally has a difference in brightness, and the output signal of the iris portion disappears, making it impossible or difficult to detect the Purkinje first image.

【0011】本発明はイメージセンサーで光束を受光す
る際のイメージセンサーの積分時間と投光手段からの発
光光量を適切に制御することによりイメージセンサーの
ダイナミックレンジの範囲内でプルキンエ第1像の検出
にも、又瞳孔の検出にも十分なコントラストのある信号
を得ることが出来、高精度な視線検出を可能とした視線
検出装置の提供を目的とする。
The present invention detects the first Purkinje image within the dynamic range of the image sensor by appropriately controlling the integration time of the image sensor and the amount of light emitted from the light projecting means when the image sensor receives the light beam. It is an object of the present invention to provide a line-of-sight detecting device that can obtain a signal with sufficient contrast for detecting the pupil and detecting the line-of-sight with high accuracy.

【0012】0012

【課題を解決するための手段】本発明の積分時間制御手
段を有した視線検出装置は、投光手段からの光束を眼球
に入射させ、該眼球からの反射光に基づくプルキンエ像
の位置座標と瞳孔の位置座標とをイメージセンサーを有
する検出手段で検出し、該検出手段で検出したこれらの
位置座標を用いて眼球の視線を求める際、眼球前眼部付
近の明るさを測光する測光センサーからの出力信号に基
づいて積分時間制御手段により、該イメージセンサーの
積分時間を変化させると共に発光制御手段により該投光
手段からの発光光量を変化させたことを特徴としている
[Means for Solving the Problems] A line of sight detection device having an integral time control means of the present invention makes a light beam from a light projection means enter an eyeball, and determines the position coordinates of a Purkinje image based on the light reflected from the eyeball. When the positional coordinates of the pupil are detected by a detection means having an image sensor, and the line of sight of the eyeball is determined using these positional coordinates detected by the detection means, a photometric sensor that measures the brightness near the anterior segment of the eyeball is used. The present invention is characterized in that the integration time control means changes the integration time of the image sensor based on the output signal of the image sensor, and the light emission control means changes the amount of light emitted from the light projecting means.

【0013】このように本発明ではイメージセンサーの
積分時間を測光センサーからの出力に応じて定めると共
に、それに対応してプルキンエ第1像を形成するための
投光手段からの発光光量を変化させることによって、即
ち積分時間の短くなる外光の輝度の高い状態では発光光
量を増し、逆に積分時間の長くなる外光の輝度の低い状
態では発光光量を減らすことによって、外光の状態に左
右されずに良好に眼球前眼部の画像を得て、これにより
高精度な視線検出を可能としている。
As described above, in the present invention, the integration time of the image sensor is determined according to the output from the photometric sensor, and the amount of light emitted from the light projecting means for forming the first Purkinje image is changed accordingly. In other words, the amount of emitted light is increased when the brightness of outside light is high, which shortens the integration time, and conversely, the amount of emitted light is decreased when the brightness of outside light is low, where the integration time becomes long. This enables highly accurate line-of-sight detection by obtaining images of the anterior segment of the eyeball without any problems.

【0014】[0014]

【実施例】図1は本発明の実施例1の要部ブロック図、
図2(A)は本発明に係る視線検出手段を一眼レフカメ
ラに適用したときの要部概略図、図2(B)は図2(A
)の一部分の要部斜視図である。
[Embodiment] Fig. 1 is a block diagram of main parts of Embodiment 1 of the present invention.
FIG. 2(A) is a schematic diagram of the main part when the line of sight detection means according to the present invention is applied to a single-lens reflex camera, and FIG.
) is a perspective view of a part of the main part.

【0015】図1において1はマイクロプロセッシング
ユニット(M.P.U)であり、プルキンエ第1像や瞳
孔の位置情報を用い視線演算等の各種の演算処理を行っ
ている。2はメモリー、3はインターフェイス回路であ
り、A/D変換機能を有している。7は投光手段であり
、赤外発光ダイオード7aから放射した観察者に不感の
赤外光を投光レンズ7bを介して観察者の眼球に入射さ
せている。5は発光制御回路(発光制御手段)であり、
後述する測光センサー8からの出力信号に応じて赤外発
光ダイオード7aの発光光量を制御している。6は位置
センサーであり、視線検出装置をカメラに適用したとき
は、そのカメラの縦横を検知している。
In FIG. 1, reference numeral 1 denotes a microprocessing unit (M.P.U.), which performs various calculation processes such as line of sight calculations using Purkinje's first image and pupil position information. 2 is a memory, and 3 is an interface circuit, which has an A/D conversion function. Reference numeral 7 denotes a light projecting means, which causes infrared light emitted from an infrared light emitting diode 7a, which is insensitive to the viewer, to enter the eyeball of the viewer via a light projecting lens 7b. 5 is a light emission control circuit (light emission control means);
The amount of light emitted from the infrared light emitting diode 7a is controlled according to an output signal from a photometric sensor 8, which will be described later. 6 is a position sensor, which detects the vertical and horizontal directions of the camera when the line of sight detection device is applied to the camera.

【0016】4は検出手段であり、イメージセンサー4
a、駆動回路4bそして受光レンズ4c等を有しており
、眼球からの反射光に基づくプルキンエ第1像と瞳孔を
受光レンズ4cを介してイメージセンサー4a面上に結
像している。
4 is a detection means, and an image sensor 4
a, a drive circuit 4b, a light-receiving lens 4c, etc., and a Purkinje first image based on reflected light from the eyeball and the pupil are formed on the surface of the image sensor 4a via the light-receiving lens 4c.

【0017】8は測光センサーであり、眼球前眼部の照
度を測光している。9は積分時間制御回路(積分時間制
御手段)であり、測光センサー8からの信号に基づいて
イメージセンサー4aでプルキンエ第1像と瞳孔に基づ
く光束を受光する際のイメージセンサー4aの積分時間
(蓄積時間)を制御している。
A photometric sensor 8 measures the illuminance of the anterior segment of the eyeball. Reference numeral 9 denotes an integral time control circuit (integral time control means), which controls the integral time (accumulation) of the image sensor 4a when the image sensor 4a receives the light flux based on the first Purkinje image and the pupil based on the signal from the photometric sensor 8. time).

【0018】次に図2(A),(B)を用いて本発明を
一眼レフカメラに適用したときの構成について説明する
Next, the configuration when the present invention is applied to a single-lens reflex camera will be explained using FIGS. 2(A) and 2(B).

【0019】図中21は接眼レンズであり、その内部に
は可視光透過・赤外光反射のダイクロイックミラー21
aが斜設されており、光路分割器を兼ねている。4aは
イメージセンサー、4cは受光レンズ、7a1,7a2
は投光手段7の一要素である光源で例えば発光ダイオー
ドから成っている。
Reference numeral 21 in the figure is an eyepiece lens, and inside thereof is a dichroic mirror 21 that transmits visible light and reflects infrared light.
A is provided obliquely and also serves as an optical path splitter. 4a is an image sensor, 4c is a light receiving lens, 7a1, 7a2
is a light source which is one element of the light projecting means 7 and is made of, for example, a light emitting diode.

【0020】イメージセンサー4aは光電素子列を2次
元的に配置した構成より成り、受光レンズ4c及び接眼
レンズ21に関して所定の位置(眼鏡を使用しない撮影
者の一般的なアイポイントの位置)にある眼の瞳孔近傍
と共役になるように配置している。8は測光センサーで
あり、接眼レンズ21近傍に配置している。
The image sensor 4a is composed of a two-dimensional array of photoelectric elements, and is located at a predetermined position with respect to the light receiving lens 4c and the eyepiece 21 (the general eye point position of a photographer who does not use glasses). It is placed so that it is conjugate with the vicinity of the pupil of the eye. 8 is a photometric sensor, which is arranged near the eyepiece lens 21.

【0021】29は処理装置で、視線補正演算、視線補
正データ記憶、視線演算機能の他に図1のM.P.U1
、積分時間制御回路9、発光制御回路5、メモリ−2、
インターフェイス回路3等を有している。
Reference numeral 29 denotes a processing device, in addition to the functions of line-of-sight correction calculation, line-of-sight correction data storage, and line-of-sight calculation functions, M.29 in FIG. P. U1
, integral time control circuit 9, light emission control circuit 5, memory 2,
It has an interface circuit 3 and the like.

【0022】201は撮影レンズ、202はクイックリ
ターン(QR)ミラー、203は表示素子、204はピ
ント板、205はコンデンサーレンズ、206はペンタ
ダハプリズム、207はサブミラー、208は多点焦点
検出装置であり、公知の方法により撮影画面内の複数の
領域を選択して焦点検出を行っている。209はカメラ
制御装置であり、ファインダー内表示素子駆動、焦点検
出演算及びレンズ駆動機能等を有している。
201 is a photographing lens, 202 is a quick return (QR) mirror, 203 is a display element, 204 is a focusing plate, 205 is a condenser lens, 206 is a penta roof prism, 207 is a sub-mirror, and 208 is a multi-point focus detection device. , focus detection is performed by selecting a plurality of areas within the photographic screen using a known method. A camera control device 209 has functions such as driving a display element in the finder, performing focus detection calculations, and driving a lens.

【0023】本実施例では撮影レンズ201を透過した
被写体光の一部はQRミラー202によって反射してピ
ント板204近傍に被写体像を結像する。ピント板20
4の拡散面で拡散した被写体光はコンデンサーレンズ2
05、ペンタダハプリズム206、接眼レンズ21を介
してアイポイントEに導光している。
In this embodiment, a part of the object light transmitted through the photographing lens 201 is reflected by the QR mirror 202 to form an object image near the focusing plate 204. Focus board 20
The subject light diffused by the diffusion surface of 4 is transferred to the condenser lens 2.
05, the light is guided to the eye point E via the pentagonal roof prism 206 and the eyepiece lens 21.

【0024】ここで表示素子203は例えば偏光板を用
いない2層タイプのゲスト−ホスト型液晶素子で、ファ
インダー視野内の測距域(焦点検出位置)を表示してい
る。
The display element 203 is, for example, a two-layer guest-host type liquid crystal element that does not use a polarizing plate, and displays the distance measurement area (focus detection position) within the field of view of the finder.

【0025】又、撮影レンズ201を透過した被写体光
の一部は、QRミラー202を透過し、サブミラー20
7で反射してカメラ本体底部に配置した前述の多点焦点
検出装置208に導光している。更に多点焦点検出装置
208の選択した被写体面上の位置の焦点検出情報に基
づいて、不図示の撮影レンズ駆動装置により撮影レンズ
201の繰り出し(もしくは繰り込み)を行い焦点調節
を行っている。
[0025] Also, a part of the subject light that has passed through the photographic lens 201 passes through the QR mirror 202, and then passes through the sub-mirror 20.
7 and is guided to the aforementioned multi-point focus detection device 208 placed at the bottom of the camera body. Furthermore, based on the focus detection information of the position on the subject surface selected by the multi-point focus detection device 208, the photographic lens 201 is extended (or retracted) by a photographic lens driving device (not shown) to adjust the focus.

【0026】視線検出方法の原理は前述の特開平2−2
09125号公報や特開平2−264632号公報で提
案した方法と同じである。
The principle of the line of sight detection method is described in the above-mentioned Japanese Patent Application Laid-Open No. 2-2.
This method is the same as the method proposed in JP-A No. 09125 and JP-A-2-264632.

【0027】本実施例においては赤外発光ダイオード7
a1,7a2から放射される赤外光は図中上方から接眼
レンズ21に入射し、ダイクロイックミラー21aによ
り反射されアイポイントE近傍に位置する観察者の眼球
211を照明する。又眼球211で反射した赤外光はダ
イクロイックミラー21aで反射され受光レンズ4cに
よって収斂しながらイメージセンサー4a上に像を形成
する。
In this embodiment, the infrared light emitting diode 7
Infrared light emitted from a1 and 7a2 enters the eyepiece lens 21 from above in the figure, is reflected by the dichroic mirror 21a, and illuminates the eyeball 211 of the observer located near the eye point E. Further, the infrared light reflected by the eyeball 211 is reflected by the dichroic mirror 21a and is converged by the light receiving lens 4c to form an image on the image sensor 4a.

【0028】本実施例では眼球の視線をこのときのイメ
ージセンサー4aに形成したプルキンエ第1像と瞳孔中
心の位置により求めている。即ちイメージセンサー4a
面上に結像したプルキンエ第1像の生じた眼球前眼部の
画像をM.P.U1はインターフェイス回路3を介して
読み込み、その画像信号よりプルキンエ第1像の座標及
び複数の瞳孔輪部の座標より算出される瞳孔中心の座標
を求める。そしてこの二つの量より、撮影者の眼球の回
転角とカメラに対する相対的シフト量を更にファインダ
ー系上での視線の位置を求めている。
In this embodiment, the line of sight of the eyeball is determined from the first Purkinje image formed on the image sensor 4a at this time and the position of the center of the pupil. That is, the image sensor 4a
M.I. P. U1 is read through the interface circuit 3, and the coordinates of the pupil center calculated from the coordinates of the first Purkinje image and the coordinates of a plurality of pupillary rings are determined from the image signal. From these two quantities, the rotation angle of the photographer's eyeball and the amount of relative shift with respect to the camera are used to determine the position of the line of sight on the finder system.

【0029】このとき本実施例では発光制御回路5によ
り赤外発光ダイオード7aからの発光光量と積分時間制
御回路9によりイメージセンサー4aの積分時間を適切
に設定することにより、イメージセンサー4aから演算
に適した信号を得ている。
At this time, in this embodiment, the amount of light emitted from the infrared light emitting diode 7a is appropriately set by the light emission control circuit 5, and the integration time of the image sensor 4a is appropriately set by the integral time control circuit 9. I am getting a suitable signal.

【0030】本実施例においては、測光センサーからの
出力に応じてイメージセンサーの積分時間を変化させる
とともに、それに対応してプルキンエ第1像を形成する
ための赤外発光ダイオードからの発光光量を増減するこ
とにより、どのような場合においてもイメージセンサー
から演算に適した信号出力を得て、これにより眼球の視
線を高精度に検出している。
In this embodiment, the integration time of the image sensor is changed according to the output from the photometric sensor, and the amount of light emitted from the infrared light emitting diode for forming the first Purkinje image is increased or decreased accordingly. By doing so, a signal output suitable for calculation is obtained from the image sensor in any case, and the line of sight of the eyeball is detected with high precision.

【0031】例えば外光の輝度が高いときはイメージセ
ンサーの積分時間を短くし、それに対応して赤外発光ダ
イオードからの発光光量を増す。この外光により眼球前
眼部が十分に照明されている状態では、瞳孔と虹彩の境
界のコントラストは比較的高く瞳孔の検出には良好な画
像が得られる。
For example, when the brightness of external light is high, the integration time of the image sensor is shortened, and the amount of light emitted from the infrared light emitting diode is correspondingly increased. When the anterior segment of the eyeball is sufficiently illuminated by this external light, the contrast between the boundary between the pupil and the iris is relatively high, and a good image for detecting the pupil can be obtained.

【0032】しかしながら虹彩の信号強度が強いため、
虹彩上にプルキンエ第1像が形成されたときには、その
信号の強度差が小さくプルキンエ第1像の検出が困難と
なる。通常、外光の輝度が高い際は瞳孔径が小さいので
プルキンエ第1像が虹彩上に形成される可能性が高い。
However, since the signal strength of the iris is strong,
When the first Purkinje image is formed on the iris, the difference in signal intensity is small, making it difficult to detect the first Purkinje image. Normally, when the brightness of external light is high, the pupil diameter is small, so there is a high possibility that a Purkinje first image will be formed on the iris.

【0033】そこで本実施例ではこのような場合、イメ
ージセンサーの積分時間を短くし、信号全体の強度を下
げるとともに赤外発光ダイオードからの発光光量を増し
、プルキンエ第1像の信号強度を上げている。
Therefore, in this embodiment, in such a case, the integration time of the image sensor is shortened, the overall signal intensity is lowered, and the amount of light emitted from the infrared light emitting diode is increased to increase the signal intensity of the first Purkinje image. There is.

【0034】逆に外光の輝度が低いときはイメージセン
サーの積分時間を長くし、それに対応して赤外発光ダイ
オードからの発光光量を減らす。この外光により眼球前
眼部が十分に照明されていない状態では、瞳孔と虹彩の
境界のコントラストは低く、瞳孔の検出が困難となる。
Conversely, when the brightness of outside light is low, the integration time of the image sensor is lengthened, and the amount of light emitted from the infrared light emitting diode is correspondingly reduced. When the anterior segment of the eyeball is not sufficiently illuminated by this external light, the contrast between the boundary between the pupil and the iris is low, making it difficult to detect the pupil.

【0035】これに対してプルキンエ第1像の強度は外
光に依らずほぼ一定であるので、その検出は容易となる
。そこで本実施例ではこのような場合はイメージセンサ
ーの積分時間を長くし、信号全体を上げ、瞳孔と虹彩の
境界のコントラストを高めるとともに、赤外発光ダイオ
ードからの発光光量を減らしプルキンエ第1像の強度を
下げイメージセンサーが飽和しないようにしている。
On the other hand, since the intensity of the first Purkinje image is almost constant regardless of external light, its detection is easy. Therefore, in this embodiment, in such a case, the integration time of the image sensor is lengthened, the overall signal is increased, the contrast between the pupil and the iris is increased, and the amount of light emitted from the infrared light emitting diode is reduced, so that the first Purkinje image is The intensity is lowered to prevent the image sensor from becoming saturated.

【0036】又、イメージセンサーの積分時間が長くな
ったときには赤外発光ダイオードからの発光光量を減ら
し眼球に照射される赤外発光ダイオードのエネルギーを
小さくして眼球を保護している。
Furthermore, when the integration time of the image sensor becomes long, the amount of light emitted from the infrared light emitting diode is reduced to reduce the energy of the infrared light emitting diode irradiated to the eyeball, thereby protecting the eyeball.

【0037】図3に本実施例の動作のフローチャートを
示す。同図において視線モードスイッチ(不図示)が押
されるなどして視線検出要求が生じるとM.P.Uの制
御は視線検出のルーチンに入る。視線検出のルーチンに
入るとM.P.Uは後述の方法により設定される赤外発
光ダイオードからの発光光量とイメージセンサーの積分
時間によって赤外発光ダイオードを発光し積分動作を開
始する。
FIG. 3 shows a flowchart of the operation of this embodiment. In the figure, when a line-of-sight detection request is generated by pressing the line-of-sight mode switch (not shown), the M. P. Control of U enters a line of sight detection routine. When entering the line of sight detection routine, M. P. U emits light from the infrared light emitting diode and starts an integration operation based on the amount of light emitted from the infrared light emitting diode and the integration time of the image sensor, which are set by a method described later.

【0038】そして積分動作終了後イメージセンサーの
出力を読み込み、プルキンエ第1像と瞳孔を求め、更に
撮影者の視線位置を求め、必要に応じてその値をメモリ
ーに記憶する。そしてレリーズの要求があったならばレ
リーズのルーチンへ移行する。
After the integration operation is completed, the output of the image sensor is read, the first Purkinje image and the pupil are determined, and the line of sight position of the photographer is determined, and the values are stored in the memory as necessary. Then, if a release request is made, the routine shifts to a release routine.

【0039】図4は図1の積分時間制御回路9の回路説
明図、図5は図4の積分時間制御回路9のタイミングチ
ャートである。
FIG. 4 is a circuit explanatory diagram of the integral time control circuit 9 of FIG. 1, and FIG. 5 is a timing chart of the integral time control circuit 9 of FIG.

【0040】同図において100はOR回路、101,
103はカウンター、102,104はAND回路、1
05はプリセット機能を有するN進カウンター、106
はインバーター、107はカウンター105への入力を
安定させるための抵抗、108はA/D変換器、109
はA/D変換の最小電圧を与えるための分圧抵抗である
In the figure, 100 is an OR circuit, 101,
103 is a counter, 102 and 104 are AND circuits, 1
05 is an N-ary counter with a preset function, 106
is an inverter, 107 is a resistor for stabilizing the input to the counter 105, 108 is an A/D converter, 109
is a voltage dividing resistor for providing the minimum voltage for A/D conversion.

【0041】カメラのメインスイッチがオンになり、基
準クロックが与えられるとOR回路100の入力の一端
は”Low”であるので、OR回路100の出力よりカ
ウンター101に基準クロックが入力する。基準クロッ
クが(2a +2b )個入力するとAND回路102
の出力、即ち積分信号が”High”となる。と同時に
OR回路100の入力の一端も”High”となり、O
R回路100の出力が”High”に固定し基準クロッ
クの供給が停止し、積分信号は”High”をカウンタ
ー101のリセット端子にリセット電圧が与えられるま
で維持する。
When the main switch of the camera is turned on and the reference clock is applied, one end of the input of the OR circuit 100 is "Low", so the reference clock is input to the counter 101 from the output of the OR circuit 100. When (2a + 2b) reference clocks are input, the AND circuit 102
The output, that is, the integral signal becomes "High". At the same time, one end of the input of the OR circuit 100 also becomes "High", and O
The output of the R circuit 100 is fixed at "High", the supply of the reference clock is stopped, and the integral signal maintains "High" until a reset voltage is applied to the reset terminal of the counter 101.

【0042】又、基準クロックはカウンター103にも
与えられ、この数が(2c +2d )個になるとAN
D回路104の出力が”High”となり、カウンター
103のリセット端子にリセット電圧が与えられAND
回路104の出力も”Low”となる。
The reference clock is also given to the counter 103, and when this number reaches (2c + 2d), the AN
The output of the D circuit 104 becomes "High", a reset voltage is applied to the reset terminal of the counter 103, and the AND
The output of the circuit 104 also becomes "Low".

【0043】カウンター103には常に基準クロックが
与えられているのでAND回路104の出力端子には短
い幅のパルスが例えば(2c +2d )個のパルスが
カウンター103に与えられる毎に出力されることにな
る。 そしてこの短い幅のパルスはプリセット機能を有するN
進カウンター105に入力する。
Since the reference clock is always supplied to the counter 103, a short width pulse is outputted to the output terminal of the AND circuit 104 every time, for example, (2c + 2d) pulses are supplied to the counter 103. Become. And this short width pulse has a preset function.
input to the digit counter 105.

【0044】N進カウンター105においてはこの短い
幅のパルスが(N−M+1)個入力するとCARRY端
子に出力が”High”から”Low”に反転する。た
だしMはプリセット端子(図5のJ1 〜J4 )にセ
ットされた値である。CARRY端子の出力が反転する
とインバーター106を介してカウンター101のリセ
ット端子にリセット電圧が与えられ、AND回路102
の出力、即ち積分信号が”Low”となる。と同時にO
R回路100の入力の一端も”Low”となるので再び
カウンター101に基準クロックが供給される。以下は
上記動作が繰返し行なわれる。
When (N-M+1) short width pulses are input to the N-ary counter 105, the output to the CARRY terminal is inverted from "High" to "Low". However, M is the value set in the preset terminals (J1 to J4 in FIG. 5). When the output of the CARRY terminal is inverted, a reset voltage is applied to the reset terminal of the counter 101 via the inverter 106, and the AND circuit 102
The output, that is, the integral signal becomes "Low". At the same time O
Since one end of the input of the R circuit 100 also becomes "Low", the reference clock is supplied to the counter 101 again. After that, the above operation is repeated.

【0045】以上説明してきたように積分信号は基準ク
ロックが(2a+2b )個入力すると”High”と
なり、(2c +2d )×(N−M+1)個入力する
と”Low”となる。即ち積分時間Tは   T={(2c +2d )(N−M+1)−(2a
 +2b )}/fCK    (3)       
     fCK:基準クロックの周波数となる。
As explained above, the integral signal becomes "High" when (2a+2b) reference clocks are input, and becomes "Low" when (2c +2d)×(N-M+1) are input. That is, the integration time T is T={(2c +2d)(N-M+1)-(2a
+2b)}/fCK (3)
fCK: This is the frequency of the reference clock.

【0046】本実施例ではa,b,c,d,N,M,f
CKを任意に組み合わせて積分時間を可変にしている。
In this example, a, b, c, d, N, M, f
Integration time is made variable by arbitrarily combining CKs.

【0047】次いで測光せンサー8の出力(即ち眼球前
眼部付近の明るさ)に応じて積分時間を変化させること
について述べる。
Next, a description will be given of changing the integration time in accordance with the output of the photometric sensor 8 (ie, the brightness near the anterior segment of the eyeball).

【0048】測光センサー8からの出力はアンプ110
を介してA/D変換器108に与えられる。そしてその
A/D変換された各出力端子がN進カウンター105の
プリセット端子に接続されている。よって測光センサー
8からの出力が大きければ、即ち眼球前眼部付近が明る
ければ明るいほど、A/D変換器108のデジタル出力
が大きくなり、N進カウンター105のプリセットされ
る値Mも大きくなり、(3)式で示される積分時間も短
くなる。
The output from the photometric sensor 8 is sent to the amplifier 110.
The signal is applied to the A/D converter 108 via the A/D converter 108. Each A/D converted output terminal is connected to a preset terminal of the N-ary counter 105. Therefore, the greater the output from the photometric sensor 8, that is, the brighter the area near the anterior segment of the eyeball, the greater the digital output of the A/D converter 108, and the greater the preset value M of the N-ary counter 105. The integration time shown by equation (3) also becomes shorter.

【0049】一方、A/D変換の零レベルVL と、最
大値のレベルVH は各々分圧抵抗109と定電圧VH
 によって与えられている。分圧抵抗109によって与
えられる電圧VL 以下にA/D変換器108の入力電
圧がなる場合はN進カウンター105のプリセット端子
が全て”Low”(即ちM=0)にセットされる。
On the other hand, the zero level VL and the maximum level VH of A/D conversion are determined by the voltage dividing resistor 109 and the constant voltage VH, respectively.
is given by. When the input voltage of the A/D converter 108 becomes less than the voltage VL given by the voltage dividing resistor 109, all the preset terminals of the N-ary counter 105 are set to "Low" (ie, M=0).

【0050】(3)式より明らかなようにM=0のとき
に積分時間の最大値が与えられるので(3)式に示すa
,b,c,d,N,fCKを定め積分時間の最大値を決
め、零レベル電圧VL を与えて、それに対応する測光
センサー出力を定めている。以上のようにして眼球前眼
部付近の明るさがある明るさ以下のときに最長積分時間
が設定され、それから明るくになるにしたがって積分時
間も短くなっていくようにしている。
As is clear from equation (3), the maximum value of the integration time is given when M=0, so a shown in equation (3)
, b, c, d, N, and fCK to determine the maximum value of the integration time, give a zero level voltage VL, and determine the corresponding photometric sensor output. As described above, the longest integration time is set when the brightness near the anterior segment of the eyeball is below a certain brightness, and then as the brightness increases, the integration time becomes shorter.

【0051】以上の説明においてはAND回路としては
2入力のものを、又プリセット機能を有するN進カウン
ターとしては16進(4ビット)のものを図5に示した
が実際の回路においてはこの限りではない。例えばAN
D回路102をそれぞれl1 入力、l2 入力とすれ
ばとなる。
In the above explanation, a two-input AND circuit is shown, and a hexadecimal (4-bit) N-ary counter with a preset function is shown in FIG. 5, but in actual circuits, this is not the case. isn't it. For example, AN
If the D circuit 102 has l1 input and l2 input, respectively.

【0052】次に本実施例において赤外発光ダイオード
8からの発光光量を発光制御回路5により設定する方法
について説明する。
Next, a method for setting the amount of light emitted from the infrared light emitting diode 8 by the light emission control circuit 5 in this embodiment will be explained.

【0053】図6は発光制御回路5の回路説明図である
。図中、120はアンプ、121はA/D変換器、12
2,123,124,125は各々赤外発光ダイオード
に流れる電流を規定するための抵抗、126,127,
128,129は各々スイッチング素子の役割を果たす
トランジスタ、130はA/D変換の最小レベル電圧を
与えるための抵抗である。
FIG. 6 is a circuit explanatory diagram of the light emission control circuit 5. In the figure, 120 is an amplifier, 121 is an A/D converter, 12
2, 123, 124, 125 are resistors for regulating the current flowing to the infrared light emitting diode, 126, 127,
128 and 129 are transistors each serving as a switching element, and 130 is a resistor for providing a minimum level voltage for A/D conversion.

【0054】測光センサー8からの出力はアンプ120
でA/D変換に適したレベルに増幅し、A/D変換器1
21に送っている。そこでA/D変換したデジタル信号
はトランジスタ126,127,128,129に送り
、その結果デジタル信号の各ビットの値に応じトランジ
スタがオン・オフする。即ちその値が”1”であるビッ
トに対応するトランジスタがオンし他のトランジスタは
オフとなる。
The output from the photometric sensor 8 is sent to the amplifier 120.
A/D converter 1 amplifies it to a level suitable for A/D conversion.
I sent it to 21. Therefore, the A/D converted digital signal is sent to transistors 126, 127, 128, and 129, and as a result, the transistors are turned on and off according to the value of each bit of the digital signal. That is, the transistor corresponding to the bit whose value is "1" is turned on, and the other transistors are turned off.

【0055】一方、抵抗122,123,124,12
5の抵抗値R1 ,R2 ,R3 ,R4 は例えばR
1 :R2 :R3 :R4 =8:4:2:1になる
ように設定している。この為赤外発光ダイオード7aに
流れる電流はA/D変換器121のデジタル出力(測光
センサー8からの出力に相当)に比例する。
On the other hand, the resistors 122, 123, 124, 12
The resistance values R1, R2, R3, and R4 of 5 are, for example, R
It is set so that 1:R2:R3:R4=8:4:2:1. Therefore, the current flowing through the infrared light emitting diode 7a is proportional to the digital output of the A/D converter 121 (corresponding to the output from the photometric sensor 8).

【0056】赤外発光ダイオード7aの発光光量は一般
にそこに流れる電流に比例するため、測光センサー8か
らの出力にほぼ比例する形で赤外発光ダイオード7aの
発光光量を得ている。
Since the amount of light emitted from the infrared light emitting diode 7a is generally proportional to the current flowing therein, the amount of light emitted from the infrared light emitting diode 7a is obtained in a manner substantially proportional to the output from the photometric sensor 8.

【0057】図6の回路においてA/D変換器121の
デジタル出力の最小値を1としている。そのために本実
施例においては抵抗130を用いてA/D変換の最低レ
ベルを定めるようにしている。尚、アンプ120は線形
増幅器でも非線形増幅器であっても構わない。又A/D
変換器121として本実施例では4bitのものを用い
ているが、この限りではない。さらに測光センサー8と
してカメラの露出制御用の測光センサーを用いることも
可能である。この場合、撮影者のいる場所と被写体のあ
る場所の違いによりその出力に若干の差を生じるが一般
にこの差は許容範囲内のものであり問題はない。
In the circuit of FIG. 6, the minimum value of the digital output of the A/D converter 121 is set to 1. Therefore, in this embodiment, the resistor 130 is used to determine the lowest level of A/D conversion. Note that the amplifier 120 may be a linear amplifier or a nonlinear amplifier. Also A/D
Although a 4-bit converter 121 is used in this embodiment, the converter 121 is not limited to this. Furthermore, it is also possible to use a photometric sensor for controlling exposure of a camera as the photometric sensor 8. In this case, there will be a slight difference in the output due to the difference between the location of the photographer and the location of the subject, but this difference is generally within an allowable range and poses no problem.

【0058】図7は本発明の実施例2のフローチャート
、図8は本発明の実施例2の要部ブロック図である。
FIG. 7 is a flowchart of a second embodiment of the present invention, and FIG. 8 is a block diagram of main parts of the second embodiment of the present invention.

【0059】本実施例の特徴はM.P.U1が測光セン
サー8からの出力に基づいてイメージセンサー4aの積
分時間Tと赤外発光ダイオード7aの発光光量I(実際
にM.P.U1で算出されるのは発光光量Iに比例した
定数D)を算出・設定している点である。
The feature of this embodiment is that M. P. Based on the output from the photometric sensor 8, U1 calculates the integration time T of the image sensor 4a and the amount of light emitted from the infrared light emitting diode 7a I (actually calculated by M.P.U1 is a constant D proportional to the amount of light emitted I). ) is calculated and set.

【0060】本実施例においてM.P.U1はインタフ
ェーイス回路3を介して測光センサー8の出力を読み込
む。そしてこの値を用いてまずイメージセンサー4aの
積分時間Tを設定する。これは図8に示すプリセット機
能を有するN進カウンター105に積分時間Tに対応す
る数値Mをセットすることにより行なっている。但しM
はM=(V−VL )/(VH −VL )*Nと表わ
されるが、Mが負となった場合はM=0となるように、
又Mの最大値はNとなるようにしている。ここでVは測
光センサー8からの出力電圧、VH ,VL は積分時
間を設定するために定められる任意の定数で予想される
測光センサー8からの出力の最大値・最小値に対応して
いる。このようにしてMがN進カウンター105に設定
されたときの積分時間Tは として定めている。
In this example, M. P. U1 reads the output of the photometric sensor 8 via the interface circuit 3. Using this value, first, the integration time T of the image sensor 4a is set. This is done by setting a numerical value M corresponding to the integration time T in an N-ary counter 105 having a preset function as shown in FIG. However, M
is expressed as M=(V-VL)/(VH-VL)*N, but if M becomes negative, M=0,
Also, the maximum value of M is set to N. Here, V is the output voltage from the photometric sensor 8, and VH and VL are arbitrary constants determined for setting the integration time and correspond to the maximum and minimum values of the expected output from the photometric sensor 8. When M is set in the N-ary counter 105 in this way, the integration time T is determined as follows.

【0061】これより所望の積分時間Tが得られるよう
にMを求めている。Mが算出されたのち、M.P.U1
はインターフェイス回路3を介して、この値MをN進カ
ウンター105のプリセット端子(J1 〜J4 )に
セットする。
From this, M is determined so that the desired integration time T can be obtained. After M is calculated, M. P. U1
sets this value M to the preset terminals (J1 to J4) of the N-ary counter 105 via the interface circuit 3.

【0062】次いでM.P.U1は赤外発光ダイオード
7aの発光光量I並びに発光光量Iを設定するため定数
Dを求める。発光光量Iは眼球に照射できるエネルギー
E(これはレーザーの安全基準などを参考にして求めら
れ、現在我々はレーザの照射許容値の1/10の値を用
いている)と、先に算出された積分時間TとからI=E
/T として求めている。
Next, M. P. U1 determines a constant D in order to set the light emission amount I and the light emission amount I of the infrared light emitting diode 7a. The amount of emitted light I is calculated in advance from the energy E that can be irradiated to the eyeball (this is obtained by referring to laser safety standards, etc., and currently we use a value of 1/10 of the laser irradiation tolerance). From the integration time T, I=E
/T.

【0063】このように積分時間の長短に依らず一定と
することで視線検出装置の安全性を確保している。ここ
で定数Dの算出手順について述べる。
[0063] In this way, by keeping the integration time constant regardless of the length, the safety of the line of sight detection device is ensured. Here, the procedure for calculating the constant D will be described.

【0064】赤外発光ダイオード7aの発光効率をη、
回路の電源電圧をVCC、回路の見かけ上の抵抗値をR
とすると、I=η・VCC/Rと表わされる。定数Dを
設定することによりトランジスタがDの値に応じてオン
・オフして抵抗値Rが決まる。図8の回路の例ではとな
る。但しR1 は抵抗122〜125の中で最小の抵抗
値であり、抵抗値R1 ,R2 ,R3 ,R4 の間
には8R1 =4R2 =2R3 =R4 の関係があ
る。
The luminous efficiency of the infrared light emitting diode 7a is η,
The power supply voltage of the circuit is VCC, and the apparent resistance value of the circuit is R.
Then, it is expressed as I=η·VCC/R. By setting the constant D, the transistor is turned on and off according to the value of D, and the resistance value R is determined. In the example of the circuit shown in FIG. However, R1 is the minimum resistance value among the resistors 122 to 125, and there is a relationship of 8R1 = 4R2 = 2R3 = R4 between the resistance values R1, R2, R3, and R4.

【0065】そこで本実施例では所望の発光光量Iが得
られるように定数Dを求め、この値をインターフェイス
回路3とバッファー131を介して設定している。
Therefore, in this embodiment, a constant D is determined so as to obtain the desired amount of emitted light I, and this value is set via the interface circuit 3 and the buffer 131.

【0066】このようにして本実施例では積分時間T、
発光光量Iを設定したのちにカメラから視線検出の要求
があれば視線検出のルーチンに入る。視線検出のルーチ
ンに入ると、M.P.U1は前述のようにして設定され
た発光光量と積分時間によって赤外発光ダイオードを発
光し、積分動作を開始する。そして積分動作終了後イメ
ージセンサーの出力を読み込み、プルキンエ第1像と瞳
孔の検出を行ない、更にこの2つの値より撮影者の視線
位置を求め、必要に応じてその値をメモリーに記憶する
。そしてレリーズの要求があったならばレリーズのルー
チンへ移行する。
In this way, in this embodiment, the integration time T,
After setting the amount of emitted light I, if there is a request for line-of-sight detection from the camera, a line-of-sight detection routine is entered. When entering the line of sight detection routine, M. P. U1 causes the infrared light emitting diode to emit light according to the amount of emitted light and the integration time set as described above, and starts the integration operation. After the integral operation is completed, the output of the image sensor is read, the first Purkinje image and the pupil are detected, and the position of the photographer's line of sight is determined from these two values, and the value is stored in memory as necessary. Then, if a release request is made, the routine shifts to a release routine.

【0067】本実施例においても実施例1と同様にAN
D回路として2入力以外のものを用いても良いし、又N
進カウンター105も任意のものを用いても良い。
In this example, as in Example 1, AN
You may use something other than 2 inputs as the D circuit, or you can use N
An arbitrary counter 105 may also be used.

【0068】又、発光光量の設定に用いるトランジスタ
の数も4つとは限らずいくつでも良い。そして測光セン
サー8をカメラの露出制御用のものと兼用しても良く、
又イメージセンサー4aからの出力信号を測光センサー
の出力と見なして用いても良い。
Furthermore, the number of transistors used to set the amount of emitted light is not limited to four, but may be any number. The photometric sensor 8 may also be used for camera exposure control.
Alternatively, the output signal from the image sensor 4a may be regarded as the output of the photometric sensor and used.

【0069】[0069]

【発明の効果】本発明によれば前述の如くイメージセン
サーで光束を受光する際のイメージセンサーの積分時間
と投光手段からの発光光量を適切に制御することにより
、イメージセンサーのダイナミックレンジの範囲内でプ
ルキンエ第1像の検出にも、又瞳孔の検出にも十分なコ
ントラストのある信号を得ることが出来、高精度な視線
検出を可能とした視線検出装置を達成することができる
According to the present invention, as described above, the dynamic range of the image sensor can be improved by appropriately controlling the integration time of the image sensor and the amount of light emitted from the light projecting means when the image sensor receives the light flux. It is possible to obtain a signal with sufficient contrast for both the detection of the first Purkinje image and the detection of the pupil, thereby achieving a line-of-sight detection device that enables highly accurate line-of-sight detection.

【0070】特に本発明においては測光センサーを設け
、その出力に応じてイメージセンサーの積分時間を定め
ると同時に、それに対応してプルキンエ第1像を形成す
るための赤外発光ダイオードの発光光量を変化させるこ
とによって、即ち積分時間の短くなる外光の輝度の高い
状態では発光光量を増し、逆に積分時間の長くなる外光
の輝度の低い状態では発光光量を減らすことによって外
光の状態に左右されずに良好な眼球前眼部の画像を得て
高精度な視線検出を行なうと共に眼球に照射されるエネ
ルギー(発光光量と発光時間の積)を一定とし眼球の安
全を確保することが出来る等の特長を有している。
In particular, in the present invention, a photometric sensor is provided, and the integration time of the image sensor is determined according to its output, and at the same time, the amount of light emitted by the infrared light emitting diode for forming the first Purkinje image is changed accordingly. In other words, the amount of emitted light is increased when the brightness of outside light is high, which shortens the integration time, and conversely, the amount of emitted light is reduced when the brightness of outside light is low, where the integration time is lengthened. It is possible to obtain a good image of the anterior segment of the eyeball and perform highly accurate line-of-sight detection without causing any damage, and to ensure the safety of the eyeball by keeping the energy irradiated to the eyeball (product of the amount of light emitted and the time of light emitted) constant. It has the following characteristics.

【図面の簡単な説明】[Brief explanation of the drawing]

【図1】  本発明の実施例1の要部ブロック図。FIG. 1 is a block diagram of main parts of Embodiment 1 of the present invention.

【図2】  (A)は本発明を一眼レフカメラに適用し
たときの要部概略図、(B)は図2(A)の一部分の要
部斜視図。
2(A) is a schematic view of the main parts when the present invention is applied to a single-lens reflex camera, and (B) is a perspective view of the main parts of a part of FIG. 2(A).

【図3】  本発明の実施例1のフローチャート。FIG. 3 is a flowchart of Embodiment 1 of the present invention.

【図4】  本発明の実施例1の積分時間制御回路の説
明図。
FIG. 4 is an explanatory diagram of the integration time control circuit according to the first embodiment of the present invention.

【図5】  図4の積分時間制御回路のタイミングチャ
ート。
5 is a timing chart of the integral time control circuit of FIG. 4. FIG.

【図6】  本発明の実施例1の発光制御回路の要部概
略図。
FIG. 6 is a schematic diagram of main parts of a light emission control circuit according to Example 1 of the present invention.

【図7】  本発明の実施例2のフローチャート。FIG. 7 is a flowchart of Embodiment 2 of the present invention.

【図8】  本発明の実施例2の要部ブロック図。FIG. 8 is a block diagram of main parts of Embodiment 2 of the present invention.

【図9】  従来の視線検出装置の要部概略図。FIG. 9 is a schematic diagram of the main parts of a conventional line of sight detection device.

【符号の説明】[Explanation of symbols]

1  マイクロプロセッシングユニット(M.P.U)
2  メモリ− 3  インターフェイス回路 4  検出手段 4a  イメージセンサー 4b  駆動回路 4c  受光レンズ 5  発光制御回路 7  投光手段 7a  赤外発光ダイオード 7b  投光レンズ 8  測光センサー 9  積分時間制御回路 29  処理回路 211  眼球
1 Microprocessing unit (M.P.U)
2 Memory - 3 Interface circuit 4 Detection means 4a Image sensor 4b Drive circuit 4c Light receiving lens 5 Light emission control circuit 7 Light projection means 7a Infrared light emitting diode 7b Light projection lens 8 Photometric sensor 9 Integral time control circuit 29 Processing circuit 211 Eyeball

Claims (3)

【特許請求の範囲】[Claims] 【請求項1】  投光手段からの光束を眼球に入射させ
、該眼球からの反射光に基づくプルキンエ像の位置座標
と瞳孔の位置座標とをイメージセンサーを有する検出手
段で検出し、該検出手段で検出したこれらの位置座標を
用いて眼球の視線を求める際、眼球前眼部付近の明るさ
を測光する測光センサーからの出力信号に基づいて積分
時間制御手段により、該イメージセンサーの積分時間を
変化させると共に発光制御手段により該投光手段からの
発光光量を変化させたことを特徴とする視線検出装置。
1. A light beam from a light projection means is made incident on an eyeball, and a detection means having an image sensor detects the position coordinates of a Purkinje image and the position coordinates of a pupil based on light reflected from the eyeball, the detection means When determining the line of sight of the eyeball using these position coordinates detected by , the integration time of the image sensor is controlled by the integration time control means based on the output signal from the photometric sensor that measures the brightness near the anterior segment of the eyeball. A line of sight detecting device characterized in that the amount of light emitted from the light projecting means is changed by a light emitting control means.
【請求項2】  前記測光センサーとして前記検出手段
のイメージセンサーを兼用したことを特徴とする請求項
1の視線検出装置。
2. The line of sight detection device according to claim 1, wherein the photometric sensor also serves as an image sensor of the detection means.
【請求項3】  前記投光手段は赤外発光ダイオードを
有しており、前記発光制御手段は該赤外発光ダイオード
の発光光量を制御していることを特徴とする請求項1の
視線検出装置。
3. The line of sight detection device according to claim 1, wherein the light projecting means includes an infrared light emitting diode, and the light emission control means controls the amount of light emitted from the infrared light emitting diode. .
JP3011493A 1991-01-08 1991-01-08 Eye gaze detection device Expired - Fee Related JP2995877B2 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP3011493A JP2995877B2 (en) 1991-01-08 1991-01-08 Eye gaze detection device
US08/364,503 US5508759A (en) 1991-01-08 1994-12-27 Visual axis detection apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP3011493A JP2995877B2 (en) 1991-01-08 1991-01-08 Eye gaze detection device

Publications (2)

Publication Number Publication Date
JPH04242626A true JPH04242626A (en) 1992-08-31
JP2995877B2 JP2995877B2 (en) 1999-12-27

Family

ID=11779566

Family Applications (1)

Application Number Title Priority Date Filing Date
JP3011493A Expired - Fee Related JP2995877B2 (en) 1991-01-08 1991-01-08 Eye gaze detection device

Country Status (1)

Country Link
JP (1) JP2995877B2 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008136501A (en) * 2006-11-29 2008-06-19 Nidek Co Ltd Cornea surgery apparatus
JP2014094186A (en) * 2012-11-09 2014-05-22 Jvc Kenwood Corp Visual line detector and visual line detection method

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008136501A (en) * 2006-11-29 2008-06-19 Nidek Co Ltd Cornea surgery apparatus
US8523846B2 (en) 2006-11-29 2013-09-03 Nidek Co., Ltd. Corneal surgery apparatus
JP2014094186A (en) * 2012-11-09 2014-05-22 Jvc Kenwood Corp Visual line detector and visual line detection method

Also Published As

Publication number Publication date
JP2995877B2 (en) 1999-12-27

Similar Documents

Publication Publication Date Title
JPH04242627A (en) Visual axis detector having integrating time control means
JPH04240438A (en) Line of sight detector
EP0441303B1 (en) Camera having device for display within viewfinder
US5508759A (en) Visual axis detection apparatus
JPH04242630A (en) Optical device having visual axis detecting device
JPH06304142A (en) Device for detecting line of sight
US4465355A (en) Single-lens reflex camera
JP2676870B2 (en) Optical device having gazing point detection means
US5561289A (en) Device for detecting line of sight
JP2995876B2 (en) Eye gaze detection device
JPH04242626A (en) Visual axis detector
JPH01277533A (en) Optical apparatus
US5570158A (en) Camera having visual line detecting device and method of photography performed thereby
US5717959A (en) Apparatus for detecting a sight axis
US5497210A (en) Apparatus with focus detection means and sight axis detection means
JPH05333405A (en) Finder device
JPS60184235A (en) Auto-focus camera
JPH0265834A (en) Visual axis detector
KR100244951B1 (en) Passive auto-focus control apparatus and method having variableness to area of distance measuring
JP3288728B2 (en) Camera auxiliary lighting device
JP3294290B2 (en) camera
JPH0694979A (en) Camera provided with device for detecting
JPH05232372A (en) Camera provided with device for detecting line of sight
JP2744417B2 (en) Equipment with gaze detection device
JPH07333690A (en) Optical device provided with visibility correcting means

Legal Events

Date Code Title Description
LAPS Cancellation because of no payment of annual fees