JP2017217119A - Ophthalmologic device and ophthalmologic device control program - Google Patents

Ophthalmologic device and ophthalmologic device control program Download PDF

Info

Publication number
JP2017217119A
JP2017217119A JP2016112274A JP2016112274A JP2017217119A JP 2017217119 A JP2017217119 A JP 2017217119A JP 2016112274 A JP2016112274 A JP 2016112274A JP 2016112274 A JP2016112274 A JP 2016112274A JP 2017217119 A JP2017217119 A JP 2017217119A
Authority
JP
Japan
Prior art keywords
eye
unit
face
region
interest
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2016112274A
Other languages
Japanese (ja)
Other versions
JP6843527B2 (en
JP2017217119A5 (en
Inventor
徹 有川
Toru Arikawa
徹 有川
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nidek Co Ltd
Original Assignee
Nidek Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nidek Co Ltd filed Critical Nidek Co Ltd
Priority to JP2016112274A priority Critical patent/JP6843527B2/en
Priority to EP17173945.1A priority patent/EP3260040B1/en
Priority to US15/610,919 priority patent/US11039740B2/en
Priority to CN201710409814.4A priority patent/CN107495919B/en
Publication of JP2017217119A publication Critical patent/JP2017217119A/en
Publication of JP2017217119A5 publication Critical patent/JP2017217119A5/ja
Priority to JP2020137700A priority patent/JP6927389B2/en
Application granted granted Critical
Publication of JP6843527B2 publication Critical patent/JP6843527B2/en
Priority to US17/319,308 priority patent/US20210259538A1/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Eye Examination Apparatus (AREA)

Abstract

PROBLEM TO BE SOLVED: To execute alignment in a wide range appropriately.SOLUTION: An ophthalmologic device for examining an eye to be examined includes: an eye examining part having eye examining means for examining the eye to be examined, and face imaging means for capturing a photographic image including the face of a subject; adjusting means for relatively moving the eye examining part with respect to the eye to be examined; and calculation processing means for setting a region of interest based on the position of the eye examining part moved by the adjusting means in the photographic image, and processing an image signal in the region of interest.SELECTED DRAWING: Figure 6

Description

本開示は、被検眼を検査するための眼科装置、および眼科装置制御プログラムに関する。   The present disclosure relates to an ophthalmologic apparatus for inspecting an eye to be examined, and an ophthalmologic apparatus control program.

従来の眼科装置としては、例えば、眼屈折力測定装置、角膜曲率測定装置、眼圧測定装置、眼底カメラ、OCT、SLO等が知られている。これらの眼科装置では、ジョイスティック等の操作部材の操作によって検眼部を被検眼に対して上下左右前後方向に移動させ、被検眼に対して検眼部を所定の位置にアライメントすることが一般的である(特許文献1参照)。   As conventional ophthalmologic apparatuses, for example, an eye refractive power measuring apparatus, a corneal curvature measuring apparatus, an intraocular pressure measuring apparatus, a fundus camera, OCT, SLO, and the like are known. In these ophthalmologic apparatuses, it is common to move the optometry part up, down, left, and right, back and forth with respect to the eye to be examined by operating an operation member such as a joystick, and align the optometry part with a predetermined position with respect to the eye to be examined. (See Patent Document 1).

また、従来の眼科装置において、被検者の顔を撮影し、広範囲でのアライメントを行う眼科装置が提案されている(特許文献2参照)。   In addition, in the conventional ophthalmologic apparatus, an ophthalmologic apparatus that captures a face of a subject and performs alignment over a wide range has been proposed (see Patent Document 2).

特開2013−066760JP2013-066760 特開平10−216089JP-A-10-216089

しかしながら、現在の市販の眼科装置は、被検眼を見つけるまでは操作部材による検者の操作を伴うものであり、広範囲でのアライメントが可能な装置は実現されていない。つまり、広範囲でのアライメントが可能な装置の実現においては、種々の検討事項がありうる。本発明者らは、これらを鑑み、広範囲でのアライメントが可能な装置のプロトタイプを考案するに至った。   However, the current commercially available ophthalmic apparatus is accompanied by the operation of the examiner using the operation member until the eye to be examined is found, and an apparatus capable of wide-range alignment has not been realized. In other words, there are various considerations in realizing an apparatus capable of alignment over a wide range. In view of the above, the present inventors have devised a prototype of an apparatus capable of a wide range of alignment.

本開示は、上記問題点を鑑み、広範囲でのアライメントを好適に行うことができる眼科装置、及び眼科装置制御プログラムを提供することを技術課題とする。   In view of the above problems, it is an object of the present disclosure to provide an ophthalmologic apparatus and an ophthalmologic apparatus control program that can suitably perform alignment in a wide range.

上記課題を解決するために、本開示は、以下のような構成を備えることを特徴とする。   In order to solve the above problems, the present disclosure is characterized by having the following configuration.

(1) 被検眼を検査する眼科装置であって、
前記被検眼を検査するための検眼手段と、被検者の顔を含む撮影画像を撮影するための顔撮影手段と、を備える検眼部と、
前記被検眼に対して前記検眼部を相対移動させる調整手段と、
前記調整手段によって移動される前記検眼部の位置に基づく関心領域を前記撮影画像に設定し、前記関心領域における画像信号を処理する演算処理手段と、
を備えることを特徴とする。
(2) 被検眼を検査する眼科装置において実行される眼科装置制御プログラムであって、
前記眼科装置は、
被検眼を検査するための検眼手段と、被検者の顔を含む撮影画像を撮影するための顔撮影手段と、を備える検眼部と、
前記被検眼に対して前記検眼部を相対移動させる調整手段と、を備え、
前記眼科装置制御プログラムは、前記眼科装置のプロセッサによって実行されることで、
前記調整手段によって移動される前記検眼部の位置に基づく関心領域を前記撮影画像に設定し、前記関心領域における画像信号を処理する演算処理ステップを、
前記眼科装置に実行させることを特徴とする。
(3) 被検眼を検査する眼科装置であって、
前記被検眼を検査するための検眼手段と、顔照明光学系と、前記顔照明光学系によって照明された被検者の顔を含む撮影画像を撮影するための顔撮影手段と、を備える検眼部と、
前記被検眼に対して前記検眼部を相対移動させる調整手段と、
前記調整手段によって移動される前記検眼部の位置に基づいて前記顔照明光学系による照明条件を制御する演算処理手段と、を備えることを特徴とする。
(4) 被検眼を検査する眼科装置であって、
前記被検眼を検査するための検眼手段と、被検者の顔を含む撮影画像を撮影するための顔撮影手段と、を備える検眼部と、
前記被検眼に対して前記検眼部を相対移動させる調整手段と、
前記撮影画像における被検者の顔の少なくとも一部に対して関心領域を設定し、前記関心領域における画像信号を処理する演算処理手段と、
を備えることを特徴とする。
(1) An ophthalmic apparatus for inspecting an eye to be examined,
An optometry unit comprising: an optometry means for examining the eye to be examined; and a face photographing means for photographing a photographed image including the face of the subject;
Adjusting means for moving the optometry part relative to the eye to be examined;
An arithmetic processing unit that sets a region of interest based on the position of the optometry unit moved by the adjusting unit in the captured image and processes an image signal in the region of interest;
It is characterized by providing.
(2) An ophthalmologic apparatus control program executed in an ophthalmologic apparatus for inspecting an eye to be examined,
The ophthalmic device comprises:
An optometric unit comprising: an optometry means for examining the eye to be examined; and a face photographing means for photographing a photographed image including the face of the subject;
Adjusting means for moving the optometry part relative to the eye to be examined,
The ophthalmic apparatus control program is executed by a processor of the ophthalmic apparatus,
An arithmetic processing step for setting a region of interest based on the position of the optometry unit moved by the adjusting means in the captured image and processing an image signal in the region of interest,
The ophthalmologic apparatus is executed.
(3) An ophthalmic apparatus for inspecting an eye to be examined,
An optometry comprising: an optometry means for examining the eye to be examined; a face illumination optical system; and a face photographing means for photographing a photographed image including the face of the subject illuminated by the face illumination optical system. And
Adjusting means for moving the optometry part relative to the eye to be examined;
Arithmetic processing means for controlling an illumination condition by the face illumination optical system based on the position of the optometry unit moved by the adjustment means.
(4) An ophthalmic apparatus for inspecting an eye to be examined,
An optometry unit comprising: an optometry means for examining the eye to be examined; and a face photographing means for photographing a photographed image including the face of the subject;
Adjusting means for moving the optometry part relative to the eye to be examined;
An arithmetic processing means for setting a region of interest for at least a part of the face of the subject in the captured image and processing an image signal in the region of interest;
It is characterized by providing.

本実施例の外観を示す概略図である。It is the schematic which shows the external appearance of a present Example. 本実施例の制御系を示すブロック図である。It is a block diagram which shows the control system of a present Example. 本実施例の光学系を示す概略図である。It is the schematic which shows the optical system of a present Example. 本実施例の測定時の制御動作を示す図である。It is a figure which shows the control action at the time of the measurement of a present Example. 本実施例のフルオートアライメントの制御動作を示す図である。It is a figure which shows the control operation | movement of the full auto alignment of a present Example. オートゲイン制御の一例を示す図である。It is a figure which shows an example of auto gain control. 検眼部の位置に応じたROIの位置に切換例を示す図である。It is a figure which shows the example of switching to the position of ROI according to the position of an optometry part. 検眼部の位置に応じて顔照明を変更する場合の一例を示す図である。It is a figure which shows an example in the case of changing face illumination according to the position of an optometry part. 3次元実空間上で左右眼が存在すると考えられる立体の領域の一例を示す図である。It is a figure which shows an example of the area | region of the solid | solid considered that the left and right eyes exist in a three-dimensional real space. 実空間上の関心領域の立体の頂点が、撮影画像上のどこに投影されるか求めるための一例を示す図である。It is a figure which shows an example for calculating | requiring where on the picked-up image the vertex of the solid of the region of interest on real space is projected. カメラ画像の歪みについて説明するための図である。It is a figure for demonstrating distortion of a camera image. 検眼部の3次元位置に基づく関心領域ROIを、顔撮影部の撮影画像に設定する場合の一例を示す図である。It is a figure which shows an example in the case of setting the region of interest ROI based on the three-dimensional position of an optometry part to the picked-up image of a face imaging | photography part.

<実施形態>
以下、本開示に係る眼科装置の実施形態について説明する。本実施形態の眼科装置は、例えば、被検眼を検査する。眼科装置は、例えば、眼屈折力測定装置、角膜曲率測定装置、角膜形状測定装置、眼圧測定装置、眼軸長測定装置、眼底カメラ、OCT、SLO、超音波検眼装置等であってもよい。
<Embodiment>
Hereinafter, an embodiment of an ophthalmologic apparatus according to the present disclosure will be described. The ophthalmologic apparatus of this embodiment inspects an eye to be examined, for example. The ophthalmologic apparatus may be, for example, an eye refractive power measuring device, a corneal curvature measuring device, a corneal shape measuring device, an intraocular pressure measuring device, an axial length measuring device, a fundus camera, OCT, SLO, an ultrasonic optometry device, or the like. .

眼科装置は、検眼部(装置本体ともいう)と、調整部と、演算処理部と、を備えてもよい。検眼部は、例えば、検眼系と、顔撮影部と、を備えてもよい。検眼系としては、被検眼を検査するための構成を備えてもよく、例えば、検査光学系、超音波測定系等であってもよい。検眼系は、検眼部に内蔵されてもよいし、検眼部の筐体外面に設けられてもよい。   The ophthalmologic apparatus may include an optometry unit (also referred to as an apparatus main body), an adjustment unit, and an arithmetic processing unit. The optometry unit may include, for example, an optometry system and a face photographing unit. The optometry system may include a configuration for inspecting the eye to be examined, and may be, for example, an inspection optical system, an ultrasonic measurement system, or the like. The optometry system may be built in the optometry unit or provided on the outer surface of the housing of the optometry unit.

顔撮影部は、被検者の顔を含む撮影画像を撮影するために設けられてもよく、例えば、撮像素子を備える撮影光学系を備えてもよいし、他の撮影系が用いられてもよい。顔撮影部は、検眼部に内蔵されてもよいし、検眼部の筐体外面に設けられてもよい。顔撮影部は、例えば、両眼を少なくとも含む被検者の顔を撮像可能な顔撮影部であってもよいし、被検者の片眼を広範囲で撮像可能な顔撮影部であってもよい。なお、顔撮影部は、被検眼の前眼部を撮影するための前眼部撮影部を兼用してもよいし、前眼部撮影部とは別に設けられてもよい。   The face photographing unit may be provided for photographing a photographed image including the face of the subject. For example, the face photographing unit may include a photographing optical system including an imaging element or another photographing system may be used. Good. The face photographing unit may be built in the optometry unit or provided on the outer surface of the housing of the optometry unit. The face photographing unit may be, for example, a face photographing unit capable of photographing a subject's face including at least both eyes, or a face photographing unit capable of photographing one eye of the subject over a wide range. Good. The face photographing unit may also be used as an anterior eye part photographing part for photographing the anterior eye part of the eye to be examined, or may be provided separately from the anterior eye part photographing part.

調整部は、被検眼に対して検眼部を相対移動させるための移動部として用いられてもよく、例えば、駆動部(アクチュエータ)を備え、駆動部の駆動によって検眼部が被検眼に対して移動されてもよい。調整部は、被検眼と検眼部との相対位置を少なくとも1方向において調整してもよい。もちろん、3次元的に調整してもよい。例えば、調整部は、被検眼に対して検眼部を左右(X)方向、上下(Y)方向、前後(Z)方向に移動させる。   The adjustment unit may be used as a moving unit for moving the optometric unit relative to the eye to be examined. For example, the adjusting unit includes a drive unit (actuator), and the optometry unit is driven by the drive unit. May be moved. The adjustment unit may adjust the relative position between the eye to be examined and the optometry unit in at least one direction. Of course, you may adjust three-dimensionally. For example, the adjustment unit moves the optometry unit in the left / right (X) direction, the up / down (Y) direction, and the front / rear (Z) direction with respect to the eye to be examined.

演算処理部は、撮影画像を処理してもよく、例えば、プロセッサであってもよい。撮影画像は、例えば、顔撮影部によって撮影された撮影画像、前眼部撮影部によって撮影された撮影画像であってもよい。演算処理部は、例えば、撮影画像を処理して装置を制御するための演算制御部であってもよいし、撮影画像を処理するための画像処理部であってもよい。演算処理部は、撮影部側に設けられてもよい。なお、演算制御部と画像処理部の組合せによって演算処理部が構築されてもよい。   The arithmetic processing unit may process the captured image, and may be, for example, a processor. The photographed image may be, for example, a photographed image photographed by the face photographing unit or a photographed image photographed by the anterior eye photographing unit. The arithmetic processing unit may be, for example, an arithmetic control unit for processing captured images and controlling the apparatus, or an image processing unit for processing captured images. The arithmetic processing unit may be provided on the photographing unit side. Note that the arithmetic processing unit may be constructed by a combination of the arithmetic control unit and the image processing unit.

演算処理部は、例えば、撮影部(例えば、顔撮影部、前眼部撮影部)による撮影画像の画像信号を処理して装置を制御してもよい。装置の制御としては、例えば、撮影部による撮影条件の制御、被検眼に対する検眼部の移動制御(アライメント調整)であってもよい。   The arithmetic processing unit may control the apparatus by processing an image signal of an image captured by a photographing unit (for example, a face photographing unit or an anterior eye photographing unit), for example. The control of the apparatus may be, for example, control of imaging conditions by the imaging unit and movement control (alignment adjustment) of the optometry unit with respect to the eye to be examined.

<関心領域の設定(例えば、図6、図12参照)>
演算処理部は、顔撮影部によって撮影された撮影画像に関心領域を設定し、設定された関心領域における画像信号を処理してもよい。この場合、演算処理部は、被検者の顔の少なくとも一部を検出するために関心領域を設定してもよく、例えば、被検眼を検出するための関心領域を設定してもよいし、被検者の顔の肌の少なくとも一部を検出するために関心領域を設定してもよい。この場合、顔全体の任意の部位が関心領域として設定される場合もあれば、顔全体における所定部位(例えば、眼)が関心領域として設定される場合もありうる。
<Setting of region of interest (for example, see FIGS. 6 and 12)>
The arithmetic processing unit may set a region of interest in the captured image photographed by the face photographing unit and process an image signal in the set region of interest. In this case, the arithmetic processing unit may set a region of interest for detecting at least a part of the subject's face, for example, may set a region of interest for detecting the eye to be examined. A region of interest may be set to detect at least part of the skin of the subject's face. In this case, an arbitrary part of the entire face may be set as the region of interest, or a predetermined part (for example, an eye) in the entire face may be set as the region of interest.

例えば、演算処理部は、関心領域における画像信号を処理して被検眼を検出してもよいし、関心領域における画像信号を処理して、顔撮影部の撮影条件を制御するための評価値を得てもよい。この場合の評価値としては、例えば、被検者の顔の輝度を評価するための評価値であってもよい。   For example, the arithmetic processing unit may detect an eye to be examined by processing the image signal in the region of interest, or may process an image signal in the region of interest to obtain an evaluation value for controlling the imaging conditions of the face imaging unit. May be obtained. The evaluation value in this case may be, for example, an evaluation value for evaluating the brightness of the subject's face.

例えば、演算処理部は、関心領域における画像信号に基づいて装置を制御してもよい。この場合、演算処理部は、関心領域における画像信号に基づいて顔撮影部による撮影条件を制御してもよいし(例えば、図6参照)、関心領域における画像信号に基づいて調整部による検眼部の移動を制御してもよい(例えば、図12参照)。撮影条件の制御としては、例えば、顔撮影部のオートゲイン制御、自動露光時間制御であってもよい。なお、演算処理部は、関心領域における画像信号に基づいて顔撮影部による撮影条件を制御し、制御された撮影条件にて取得された撮影画像に基づいて調整部による検眼部の移動を制御してもよい。また、演算処理部は、関心領域における画像信号に基づいて顔照明光学系の照明条件を自動的に制御してもよい。   For example, the arithmetic processing unit may control the apparatus based on the image signal in the region of interest. In this case, the arithmetic processing unit may control the photographing condition by the face photographing unit based on the image signal in the region of interest (see, for example, FIG. 6), or the optometry by the adjusting unit based on the image signal in the region of interest. You may control the movement of a part (for example, refer FIG. 12). As the control of the photographing conditions, for example, auto gain control and automatic exposure time control of the face photographing unit may be used. The arithmetic processing unit controls the photographing conditions by the face photographing unit based on the image signal in the region of interest, and controls the movement of the optometry unit by the adjusting unit based on the photographed image acquired under the controlled photographing conditions. May be. The arithmetic processing unit may automatically control the illumination condition of the face illumination optical system based on the image signal in the region of interest.

関心領域の設定において、演算処理部は、例えば、調整部によって移動される検眼部の位置に基づく関心領域を撮影画像に設定してもよい。この場合、検眼部の位置に対応する撮影画像上の関心領域の位置が、記憶部に予め記憶されていてもよく、演算処理部は、記憶部に予め記憶された関心領域の位置に基づいて関心領域を設定してもよい。この場合、顔支持部に支持された被検者と検眼部との位置関係に基づいて、撮影画像上に関心領域が設定されてもよい。   In setting the region of interest, the arithmetic processing unit may set, for example, a region of interest based on the position of the optometry unit moved by the adjustment unit in the captured image. In this case, the position of the region of interest on the captured image corresponding to the position of the optometry unit may be stored in advance in the storage unit, and the arithmetic processing unit is based on the position of the region of interest stored in advance in the storage unit. Region of interest may be set. In this case, the region of interest may be set on the captured image based on the positional relationship between the subject supported by the face support unit and the optometry unit.

ここで、検眼部の位置に基づく関心領域が設定されることによって、例えば、被検者の顔の少なくとも一部を容易に特定でき、顔の少なくとも一部の画像信号に対する処理をスムーズに行うことができる。なお、顔撮影部からの撮影画像に基づいて顔の少なくとも一部を検出するような場合、ノイズ光の影響等によって検出が難しい場合がありうる。ここで、検眼部と被検者との位置関係を考慮して設定された関心領域における画像信号を処理することで、顔の少なくとも一部を容易に検出できる。   Here, by setting the region of interest based on the position of the optometry unit, for example, at least a part of the face of the subject can be easily identified, and the processing on the image signal of at least a part of the face is smoothly performed. be able to. When detecting at least a part of a face based on a photographed image from the face photographing unit, it may be difficult to detect due to the influence of noise light or the like. Here, it is possible to easily detect at least a part of the face by processing the image signal in the region of interest set in consideration of the positional relationship between the optometry unit and the subject.

なお、被検者の顔の個人差によって撮影画像における顔画像(顔の少なくとも一部の画像)の形成位置にバラツキがあるので、これらを考慮して関心領域が設定されてもよい。また、関心領域における画像信号を優先的に処理し、顔の少なくとも一部が検出されなかった場合、撮影画像全体において検出処理が行われてもよい。   In addition, since the formation position of the face image (at least a part of the face) in the photographed image varies depending on individual differences in the face of the subject, the region of interest may be set in consideration of these. Further, when the image signal in the region of interest is preferentially processed and at least a part of the face is not detected, the detection process may be performed on the entire captured image.

もちろん、撮影画像における被検者の顔の少なくとも一部に対して関心領域を設定し、関心領域における画像信号を処理する場合、演算処理部は、検眼部の位置情報を用いず、顔の少なくとも一部を画像処理によって特定してもよい。   Of course, when the region of interest is set for at least a part of the face of the subject in the captured image and the image signal in the region of interest is processed, the arithmetic processing unit does not use the position information of the optometry unit, At least a part may be specified by image processing.

例えば、演算処理部は、画像処理によって特定された関心領域における画像信号に基づいて顔撮影部による撮影条件を制御し、撮影条件の制御後に取得された撮影画像を処理して被検眼を検出してもよい。これによって、例えば、被検者の肌と眼とのコントラストが調整された状態で眼を検出できる。この場合、例えば、被検者の顔全体、又は被検者の顔の肌の少なくとも一部に関心領域が設定されてもよい被検者の顔の少なくとも一部は、例えば、被検者の顔と背景との輝度差、パターンパッチング等を利用して特定されてもよい。   For example, the arithmetic processing unit controls the photographing conditions by the face photographing unit based on the image signal in the region of interest specified by the image processing, and processes the photographed image acquired after controlling the photographing conditions to detect the eye to be examined. May be. Thereby, for example, the eye can be detected in a state in which the contrast between the skin of the subject and the eye is adjusted. In this case, for example, at least a part of the subject's face whose region of interest may be set on the entire face of the subject or at least a part of the skin of the subject's face is, for example, the subject's face It may be specified using a luminance difference between the face and the background, pattern patching, or the like.

<検眼部の位置に応じた関心領域の位置変更(例えば、図7参照)>
検眼部の位置に基づいて関心領域を設定する場合、例えば、演算処理部は、検眼部の位置の変化に応じて、撮影画像における関心領域の位置を変更してもよい。これによって、検眼部の位置の変化によって被検者の顔と検眼部との位置関係が変動した場合であっても、被検者の顔の少なくとも一部を確実に検出できる。
<Changing the position of the region of interest according to the position of the optometry unit (for example, see FIG. 7)>
When the region of interest is set based on the position of the optometry unit, for example, the arithmetic processing unit may change the position of the region of interest in the captured image in accordance with a change in the position of the optometry unit. As a result, even when the positional relationship between the subject's face and the optometry unit varies due to a change in the position of the optometry unit, at least a part of the subject's face can be reliably detected.

顔支持部によって被検者の顔が適正に支持された場合、装置の中心位置あたりに被検者の顔の左右中心が位置され、結果として、被検者の顔が位置決めされ、左右眼においても位置決めされる。   When the subject's face is properly supported by the face support unit, the left and right centers of the subject's face are positioned around the center position of the device, and as a result, the subject's face is positioned and the left and right eyes Is also positioned.

撮影画像における顔の位置は、顔に対する顔撮影部の位置によって変化する。例えば、顔撮影部が顔の正面に位置された場合、撮影画像における撮像中心(例えば、光軸位置)を含む一定の領域に、被検者の顔が形成される。一方、顔撮影部が顔に対して(装置から見て)右側に配置された場合、撮像中心に対して左側の領域に顔が形成される。また、顔撮影部が顔に対して左側に配置された場合、撮像中心に対して右側の領域が形成される。もちろん、顔に対して顔撮影部が上下に移動した場合においても、被検者の顔の形成位置は、上下方向に変化する。上記位置関係の変化は、撮影画像における左右眼の位置においても同様である。   The position of the face in the photographed image varies depending on the position of the face photographing unit with respect to the face. For example, when the face photographing unit is positioned in front of the face, the face of the subject is formed in a certain region including the imaging center (for example, the optical axis position) in the photographed image. On the other hand, when the face photographing unit is arranged on the right side (viewed from the apparatus) with respect to the face, the face is formed in the left region with respect to the imaging center. Further, when the face photographing unit is arranged on the left side with respect to the face, a region on the right side with respect to the imaging center is formed. Of course, even when the face photographing unit moves up and down with respect to the face, the position of the subject's face changes in the vertical direction. The change in the positional relationship is the same in the positions of the left and right eyes in the captured image.

顔撮影部の位置は検眼部の位置と一対の関係にあるので、演算処理部は、検眼部の位置情報に基づいて、撮影画像に関心領域を設定することによって、被検者の顔の少なくとも一部を確実に検出できる。   Since the position of the face photographing unit has a pair relationship with the position of the optometry unit, the arithmetic processing unit sets the region of interest in the photographed image based on the position information of the optometry unit, thereby Can be reliably detected.

この場合、撮影画像上での関心領域の位置と、検眼部の位置との対応関係が、予め記憶部に記憶されてもよい。例えば、検眼部の各位置に対応する関心領域の位置が予め記憶されていてもよいし、検眼部の基準位置に対応する関心領域の位置が予め記憶され、基準位置からの検眼部の移動距離に対応する関心領域の移動量が予め記憶されていてもよい。   In this case, the correspondence between the position of the region of interest on the captured image and the position of the optometry unit may be stored in advance in the storage unit. For example, the position of the region of interest corresponding to each position of the optometry unit may be stored in advance, or the position of the region of interest corresponding to the reference position of the optometry unit may be stored in advance, and the optometry unit from the reference position The movement amount of the region of interest corresponding to the movement distance may be stored in advance.

演算処理部は、検眼部の位置を検出するための位置検出センサからの検出信号に基づいて検眼部の位置情報を取得し、取得された位置情報に対応する関心領域を設定するようにしてもよい。位置検出センサとしては、種々の変容がありうるが、例えば、検眼部を移動可能に保持する基台に設けられたポテンショメータであってもよいし、駆動部のモータ部に設けられたエンコーダ等であってもよい。   The arithmetic processing unit acquires position information of the optometry unit based on a detection signal from a position detection sensor for detecting the position of the optometry unit, and sets a region of interest corresponding to the acquired position information. May be. The position detection sensor may have various changes. For example, the position detection sensor may be a potentiometer provided on a base that holds the optometric unit movably, an encoder provided on the motor unit of the drive unit, or the like. It may be.

検眼部の位置に応じて関心領域の位置を変更する場合、例えば、演算処理部は、検眼部の左右方向における位置の変化に応じて、撮影画像上における関心領域を左右方向に関してシフトさせるようにしてもよい。これによって、検眼部が左右に移動される場合であっても、顔の少なくとも一部をスムーズに検出できる。   When changing the position of the region of interest according to the position of the optometry unit, for example, the arithmetic processing unit shifts the region of interest on the captured image with respect to the left and right direction according to a change in the position of the optometry unit in the left and right direction. You may do it. Thereby, even when the optometric part is moved to the left and right, at least a part of the face can be detected smoothly.

また、例えば、演算処理部は、検眼部の3次元位置の変化に応じて、撮影画像上における関心領域をシフトさせるようにしてもよい。これによって、検眼部が3次元的に移動される場合であっても、顔の少なくとも一部をスムーズに検出できる。   Further, for example, the arithmetic processing unit may shift the region of interest on the captured image in accordance with a change in the three-dimensional position of the optometry unit. Thereby, even when the optometric unit is moved three-dimensionally, at least a part of the face can be detected smoothly.

<所定位置に対応する関心領域の設定(例えば、図6参照)>
検眼部の位置に基づいて関心領域を設定する場合、例えば、演算処理部は、予め設定された検眼部の所定位置に対応する関心領域を撮影画像に設定してもよい。これによって、検眼部が所定位置に配置された状態での顔撮影部からの画像信号を処理する場合、顔の少なくとも一部の位置が特定されるので、被検者の顔の少なくとも一部を確実に検出できる。
<Setting of region of interest corresponding to predetermined position (for example, see FIG. 6)>
When the region of interest is set based on the position of the optometry unit, for example, the arithmetic processing unit may set a region of interest corresponding to a predetermined position of the optometry unit set in advance in the captured image. Accordingly, when processing the image signal from the face photographing unit in a state where the optometry unit is arranged at a predetermined position, the position of at least a part of the face is specified, so at least a part of the face of the subject Can be reliably detected.

顔撮影部による撮影を行う段階において、演算処理部は、例えば、予め設定された所定位置に検眼部を配置させておく。所定位置は、初期位置であってもよい。所定位置は、記憶部に記憶されていてもよい。この場合、被検眼への素早いアライメントのため、左右眼のいずれかに近い側に検査軸(例えば、検眼光学系の光軸)が配置される位置が、所定位置として設定されてもよい。もちろん、所定位置は、左右眼の中間に検査軸が配置される位置であってもよい。   At the stage of photographing by the face photographing unit, the arithmetic processing unit places the optometry unit at a predetermined position set in advance, for example. The predetermined position may be an initial position. The predetermined position may be stored in the storage unit. In this case, for quick alignment with the eye to be examined, a position where the examination axis (for example, the optical axis of the optometry optical system) is arranged on the side closer to either the left or right eye may be set as the predetermined position. Of course, the predetermined position may be a position where the inspection axis is arranged between the left and right eyes.

検眼部を所定位置に配置させる場合、演算処理部は、検眼部の所定位置に対応する関心領域を設定し、設定された関心領域での画像信号を処理してもよい。所定位置に対応する関心領域の位置は、例えば、検眼部が所定位置に配置されたときの撮影画像において、被検者の顔の少なくとも一部が形成される位置に設定されてもよい。   When arranging the optometry unit at a predetermined position, the arithmetic processing unit may set a region of interest corresponding to the predetermined position of the optometry unit and process an image signal in the set region of interest. For example, the position of the region of interest corresponding to the predetermined position may be set to a position where at least a part of the face of the subject is formed in the captured image when the optometry unit is disposed at the predetermined position.

<オートゲイン制御(例えば、図7参照)>
関心領域における画像信号に基づいて顔撮影部による撮影条件を制御する場合、例えば、演算処理部は、関心領域での画像信号に基づいて顔撮影部のオートゲイン制御を行うようにしてもよい。ここで、検眼部の位置に基づいて設定された関心領域での画像信号に基づいてオートゲイン制御が行われることで、顔画像の輝度が許容レベルに調整される。これによって、外乱光等の影響があっても、顔の位置が特定され、被検者の顔と眼とのコントラストが調整される。その結果として、例えば、撮影画像における眼検出を確実に行うことができ、被検眼に対するスムーズなアライメントが可能となる。
<Auto gain control (for example, see FIG. 7)>
When controlling the shooting conditions by the face photographing unit based on the image signal in the region of interest, for example, the arithmetic processing unit may perform auto gain control of the face photographing unit based on the image signal in the region of interest. Here, the brightness of the face image is adjusted to an allowable level by performing auto gain control based on the image signal in the region of interest set based on the position of the optometry unit. Thereby, even if there is an influence of disturbance light or the like, the position of the face is specified, and the contrast between the face and the eye of the subject is adjusted. As a result, for example, eye detection in a captured image can be reliably performed, and smooth alignment with respect to the eye to be examined is possible.

被検者の顔の肌と眼とのコントラストを精度よく調整するため、顔の肌の少なくとも一部が形成される画像領域が関心領域として設定されるように、検眼部の位置に対応して関心領域が設定されてもよい。また、顔画像以外(例えば、背景、髪等)に関心領域が設定されないように、被検者の顔の中心部が形成される画像領域が関心領域として設定されるように、検眼部の位置に対応して関心領域が設定されてもよい。   In order to accurately adjust the contrast between the skin and eyes of the subject's face, it corresponds to the position of the optometry part so that the image area where at least part of the skin of the face is formed is set as the region of interest. A region of interest may be set. Further, in order not to set the region of interest other than the face image (for example, background, hair, etc.), the image area of the optometry unit is set so that the image region where the center of the subject's face is formed is set as the region of interest. A region of interest may be set corresponding to the position.

撮影画像における関心領域の位置、サイズ等については、顔に関するオートゲインを調整可能な範囲で適宜設定可能である。関心領域のサイズとしては、少なくとも、平均的な人による顔画像の画像領域よりも小さいことが好ましい(背景部分を含めないため)。ここで、関心領域は、顔画像に対するオートゲイン制御用として設定されてもよい。なお、関心領域の形状は、例えば、矩形、丸等がありうるが、特定の画像領域を抽出する形状としては、特に限定されない。   The position, size, and the like of the region of interest in the captured image can be set as appropriate within a range in which the auto gain related to the face can be adjusted. The size of the region of interest is preferably at least smaller than the image region of an average person's face image (because the background portion is not included). Here, the region of interest may be set for auto gain control on the face image. The shape of the region of interest may be, for example, a rectangle or a circle, but is not particularly limited as a shape for extracting a specific image region.

検眼部を所定位置に配置させる場合、演算処理部は、検眼部の所定位置に対応する関心領域を設定し、関心領域での画像信号を解析処理してオートゲイン制御を行うようにしてもよい。また、演算処理部は、検眼部の位置に応じて関心領域の位置を変更し、変更された関心領域での画像信号を解析処理してオートゲイン制御を行うようにしてもよい。   When placing the optometry unit at a predetermined position, the arithmetic processing unit sets a region of interest corresponding to the predetermined position of the optometry unit, analyzes the image signal in the region of interest, and performs auto gain control. Also good. In addition, the arithmetic processing unit may change the position of the region of interest according to the position of the optometry unit, analyze the image signal in the changed region of interest, and perform auto gain control.

オートゲインに際し、解析領域の画像信号が解析処理され、オートゲインを行うための評価値が取得されてもよい。オートゲインのための評価値としては、関心領域内での平均輝度であってもよいし、関心領域内の各画素の輝度累積値、関心領域内での最大輝度値、であってもよい。また、評価値として、関心領域内における画像のコントラスト、ヒストグラム等が用いられてもよい。   At the time of auto gain, the image signal in the analysis region may be analyzed and an evaluation value for performing auto gain may be acquired. The evaluation value for the auto gain may be an average luminance in the region of interest, a cumulative luminance value of each pixel in the region of interest, or a maximum luminance value in the region of interest. Further, an image contrast, a histogram, or the like in the region of interest may be used as the evaluation value.

なお、オートゲイン制御においては、例えば、顔撮影部に設けられた撮像素子(例えば、CMOSカメラ)に備わるオートゲイン機能が用いられてもよい。この場合、例えば、装置の制御部が、撮像素子に設けられた演算処理部に対して関心領域の位置情報を設定しておくことで、設定された関心領域での画像信号に基づいてオートゲイン制御が行われる。また、撮像素子自体にオートゲイン機能が設けられていない場合、装置の制御部上で画像解析を行い、その画像解析の結果によってゲインを制御してもよい。なお、上記説明においては、関心領域での画像信号に基づいて顔撮影部のオートゲイン制御を行うようにしたが、関心領域での画像信号に基づいて顔撮影部90の露光時間を自動的に制御する場合において、上記実施形態の適用が可能である。   In the auto gain control, for example, an auto gain function provided in an image sensor (for example, a CMOS camera) provided in the face photographing unit may be used. In this case, for example, the control unit of the apparatus sets the position information of the region of interest with respect to the arithmetic processing unit provided in the image sensor, so that the auto gain is based on the image signal in the set region of interest. Control is performed. Further, when the image sensor itself is not provided with an auto gain function, image analysis may be performed on the control unit of the apparatus, and gain may be controlled based on the result of the image analysis. In the above description, the automatic gain control of the face photographing unit is performed based on the image signal in the region of interest. However, the exposure time of the face photographing unit 90 is automatically set based on the image signal in the region of interest. In the case of controlling, the above embodiment can be applied.

<眼位置検出(例えば、図12参照)>
例えば、演算処理部は、検眼部の位置に基づいて設定された関心領域での画像信号に基づいて、撮影画像における眼の位置を検出してもよい。これによって、検眼部の位置を利用して被検眼の位置を特定できるので、例えば、撮影画像における眼検出を確実に行うことができ、被検眼に対するスムーズなアライメントが可能となる。なお、眼検出の具体的手法としては、眼に形成された指標(例えば、前眼部反射像)を検出してもよいし、眼の特徴部位(例えば、瞳孔、虹彩、強膜、血管等)を検出してもよい。また、関心領域は、撮影画像において眼を探索するための探索範囲として設定されてもよい。
<Eye position detection (see, for example, FIG. 12)>
For example, the arithmetic processing unit may detect the position of the eye in the captured image based on the image signal in the region of interest set based on the position of the optometry unit. As a result, the position of the eye to be examined can be specified by using the position of the optometry part, so that, for example, eye detection in the captured image can be performed reliably, and smooth alignment with the eye to be examined is possible. In addition, as a specific method of eye detection, an index (for example, an anterior segment reflection image) formed on the eye may be detected, or a characteristic part of the eye (for example, pupil, iris, sclera, blood vessel, etc.) ) May be detected. The region of interest may be set as a search range for searching for an eye in the captured image.

撮影画像における眼を精度よく検出するために、被検眼が形成される画像領域が関心領域として設定されるように、検眼部の位置に対応して関心領域が設定されてもよい。撮影画像に左右眼が含まれる場合、被検者の左右眼の少なくともいずれかが形成される画像領域が関心領域として設定されるように、検眼部の位置に対応して関心領域が設定されてもよい。なお、左右眼毎に異なる関心領域が設定されてもよいし、左右眼を含む関心領域が設定されてもよい。   In order to accurately detect the eyes in the captured image, the region of interest may be set corresponding to the position of the optometric unit so that the image region in which the eye to be examined is formed is set as the region of interest. When the captured image includes left and right eyes, the region of interest is set corresponding to the position of the optometric unit so that an image region in which at least one of the left and right eyes of the subject is formed is set as the region of interest. May be. Note that different regions of interest may be set for the left and right eyes, or regions of interest including the left and right eyes may be set.

撮影画像における関心領域の位置、サイズ等については、瞳孔間距離の個人差、顔の大きさの違いによる眼の上下位置の個人差等の眼の位置を考慮して、適宜設定可能である。また、関心領域における眼を検出するため、関心領域は、顔画像全体が含まれるようなサイズに設定されてもよい。   The position, size, and the like of the region of interest in the captured image can be set as appropriate in consideration of individual positions of the distance between the pupils and individual differences in the vertical position of the eyes due to differences in face size. Further, in order to detect eyes in the region of interest, the region of interest may be set to a size that includes the entire face image.

検眼部を所定位置に配置させる場合、演算処理部は、検眼部の所定位置に対応する関心領域を設定し、関心領域での画像信号を解析処理して眼検出を行うようにしてもよい。所定位置に対応する関心領域が設定されることで、ノイズの要因となる画像領域(例えば、背景、髪等)の影響が軽減され、顔における眼の位置が検出される。   When placing the optometry unit at a predetermined position, the arithmetic processing unit may set a region of interest corresponding to the predetermined position of the optometry unit, analyze the image signal in the region of interest, and perform eye detection. Good. By setting the region of interest corresponding to the predetermined position, the influence of an image region (for example, background, hair, etc.) that causes noise is reduced, and the position of the eye on the face is detected.

また、演算処理部は、検眼部の位置に応じて関心領域の位置を変更し、変更された関心領域での画像信号を解析処理して眼検出を行うようにしてもよい。これによって、検眼部の位置に関わらず、ノイズの要因となる画像領域の影響が軽減され、顔における眼の位置が検出される。   The arithmetic processing unit may change the position of the region of interest according to the position of the optometry unit, and perform eye detection by analyzing the image signal in the changed region of interest. As a result, regardless of the position of the optometry part, the influence of the image area that causes noise is reduced, and the position of the eye on the face is detected.

なお、撮影画像において眼位置が検出されると、演算処理部は、眼位置の検出結果に基づいて駆動部を制御することによって、被検眼に対する検眼部の自動アライメントを行うようにしてもよい。   When the eye position is detected in the captured image, the arithmetic processing unit may perform automatic alignment of the optometry unit with respect to the eye to be examined by controlling the driving unit based on the detection result of the eye position. .

なお、演算処理部は、関心領域での画像信号に基づくオートゲイン制御を行い、オートゲインによって調整された撮影画像に設定された関心領域での画像信号に基づいて眼の位置を検出してもよい。この場合、眼位置検出のための関心領域は、オートゲインのための関心領域に対して、位置又はサイズの少なくともいずれかが異なってもよい。これによって、各種制御を精度よく行うことができる。もちろん、これに限定されず、オートゲインと眼位置検出とで、同じ位置及びサイズの関心領域が用いられてもよい。   Note that the arithmetic processing unit performs auto gain control based on the image signal in the region of interest, and detects the position of the eye based on the image signal in the region of interest set in the captured image adjusted by the auto gain. Good. In this case, the region of interest for eye position detection may be different in position and / or size from the region of interest for auto gain. As a result, various controls can be performed with high accuracy. Of course, the present invention is not limited to this, and regions of interest having the same position and size may be used for auto gain and eye position detection.

<変容形態>
なお、上記説明においては、検眼部の位置に応じて顔撮影部の撮影条件を制御するものとしたが、これに限定されず、検眼部の位置に応じて、顔照明光学系による照明条件を制御するようにしてもよい(図8参照)。
<実施例>
本開示に係る眼科装置を図面に基づいて説明する。なお、以下の説明では、眼科装置として眼屈折力測定装置を例に説明するが、角膜曲率測定装置、角膜形状測定装置、眼圧測定装置、眼軸長測定装置、眼底カメラ、OCT(optical coherence tomography)、SLO(Scanning Laser Ophthalmoscope)等の他の眼科装置にも適用可能である。
<Transformation>
In the above description, the photographing conditions of the face photographing unit are controlled according to the position of the optometry unit. However, the present invention is not limited to this, and illumination by the face illumination optical system is performed according to the position of the optometry unit. The conditions may be controlled (see FIG. 8).
<Example>
An ophthalmologic apparatus according to the present disclosure will be described based on the drawings. In the following description, an ocular refractive power measurement device will be described as an example of an ophthalmic device, but a corneal curvature measurement device, a corneal shape measurement device, an intraocular pressure measurement device, an axial length measurement device, a fundus camera, an OCT (optical coherence) tomography) and SLO (Scanning Laser Ophthalmoscope).

本実施例の眼科装置は、例えば、被検眼の眼屈折力を他覚的に測定する。例えば、本実施例の眼科装置は、片眼毎に測定を行ってもよいし、両眼同時に(両眼視で)測定を行う装置であってもよい。眼科装置は、例えば、検眼部と、撮影部と、駆動部と、制御部と、を主に備える。
<外観>
図1に基づいて、眼科装置の外観を説明する。図1に示すように、本実施例の眼科装置1は、検眼部2と、顔撮影部90と、駆動部4と、を主に備える。検眼部2は、被検眼を検査する。検眼部2は、例えば、被検眼の眼屈折力、角膜曲率、眼圧等を測定する光学系を備えてもよい。また、検眼部2は、被検眼の前眼部、眼底等を撮影するための光学系等を備えてもよい。本実施例では、屈折力を測定する検眼部2を例に説明する。顔撮影部90は、例えば、被検眼の顔を撮影する。顔撮影部90は、例えば、左右の被検眼のうち少なくとも一方を含む顔を撮影する。駆動部4は、例えば、検眼部2および撮影部3を基台5に対して上下左右前後方向(3次元方向)に移動させる。
The ophthalmologic apparatus of the present embodiment objectively measures the eye refractive power of the eye to be examined, for example. For example, the ophthalmologic apparatus according to the present embodiment may perform measurement for each eye, or may be an apparatus that performs measurement for both eyes simultaneously (by binocular vision). The ophthalmologic apparatus mainly includes, for example, an optometry unit, an imaging unit, a drive unit, and a control unit.
<Appearance>
The external appearance of the ophthalmologic apparatus will be described based on FIG. As shown in FIG. 1, the ophthalmologic apparatus 1 of this embodiment mainly includes an optometry unit 2, a face photographing unit 90, and a drive unit 4. The optometry unit 2 examines the eye to be examined. The optometry unit 2 may include, for example, an optical system that measures the eye refractive power, corneal curvature, intraocular pressure, and the like of the eye to be examined. Further, the optometry unit 2 may include an optical system for photographing the anterior eye part, the fundus, and the like of the eye to be examined. In this embodiment, the optometry unit 2 that measures refractive power will be described as an example. For example, the face photographing unit 90 photographs the face of the eye to be examined. For example, the face photographing unit 90 photographs a face including at least one of the left and right eye to be examined. For example, the drive unit 4 moves the optometry unit 2 and the imaging unit 3 in the up / down / left / right front-rear direction (three-dimensional direction) with respect to the base 5.

さらに、本実施例の眼科装置1は、例えば、筐体6、表示部7、操作部8、顔支持部9等を備えてもよい。例えば、筐体6は、検眼部2、顔撮影部90、駆動部4等を収納する。表示部7は、例えば、被検眼の観察画像および測定結果等を表示させる。表示部7は、例えば、装置1と一体的に設けられてもよいし、装置とは別に設けられてもよい。眼科装置1は、操作部8を備えてもよい。操作部8は、装置1の各種設定、測定開始時の操作に用いられる。操作部8には、検者による各種操作指示が入力される。例えば、操作部8は、タッチパネル、ジョイスティック、マウス、キーボード、トラックボール、ボタン等の各種ヒューマンインターフェイスであってもよい。顔支持部9は、例えば、額当て10と顎台11を備えてもよい。顎台11は、顎台駆動部12の駆動によって上下方向に移動されてもよい。
<制御系>
図2に示すように、本装置1は制御部70を備える。制御部70は、本装置1の各種制御を司る。制御部70は、例えば、一般的なCPU(Central Processing Unit)71、ROM72、RAM73等を備える。例えば、ROM72には、眼科装置を制御するための眼科装置制御プログラム、初期値等が記憶されている。例えば、RAMは、各種情報を一時的に記憶する。制御部70は、検眼部2、顔撮影部90、駆動部4、表示部7、操作部8、顎台駆動部12、記憶部(例えば、不揮発性メモリ)74等と接続されている。記憶部74は、例えば、電源の供給が遮断されても記憶内容を保持できる非一過性の記憶媒体である。例えば、ハードディスクドライブ、着脱可能なUSBフラッシュメモリ等を記憶部74として使用することができる。また、制御部70には、検眼部2の位置を検出するための位置検出センサ75が接続されている。
<検眼部>
検眼部2は、被検眼の測定,検査,撮影などを行う。検眼部2は、例えば、被検眼の屈折力を測定する測定光学系を備えてもよい。例えば、図3に示すように、検眼部2は、測定光学系20と、固視標呈示光学系40と、指標投影光学系50と、観察光学系(撮像光学系)60と、を備えてもよい。
Furthermore, the ophthalmologic apparatus 1 of the present embodiment may include, for example, a housing 6, a display unit 7, an operation unit 8, a face support unit 9, and the like. For example, the housing 6 houses the optometry unit 2, the face photographing unit 90, the drive unit 4, and the like. The display unit 7 displays, for example, an observation image of the eye to be examined, a measurement result, and the like. For example, the display unit 7 may be provided integrally with the device 1 or may be provided separately from the device. The ophthalmologic apparatus 1 may include an operation unit 8. The operation unit 8 is used for various settings of the apparatus 1 and operations at the start of measurement. Various operation instructions by the examiner are input to the operation unit 8. For example, the operation unit 8 may be various human interfaces such as a touch panel, a joystick, a mouse, a keyboard, a trackball, and a button. The face support unit 9 may include, for example, a forehead pad 10 and a chin rest 11. The chin rest 11 may be moved in the vertical direction by driving the chin rest driving unit 12.
<Control system>
As shown in FIG. 2, the apparatus 1 includes a control unit 70. The control unit 70 manages various controls of the apparatus 1. The control unit 70 includes, for example, a general CPU (Central Processing Unit) 71, a ROM 72, a RAM 73, and the like. For example, the ROM 72 stores an ophthalmologic apparatus control program for controlling the ophthalmologic apparatus, initial values, and the like. For example, the RAM temporarily stores various information. The control unit 70 is connected to the optometry unit 2, the face photographing unit 90, the drive unit 4, the display unit 7, the operation unit 8, the chin rest drive unit 12, the storage unit (for example, a non-volatile memory) 74, and the like. The storage unit 74 is, for example, a non-transitory storage medium that can retain stored contents even when power supply is interrupted. For example, a hard disk drive, a removable USB flash memory, or the like can be used as the storage unit 74. Further, a position detection sensor 75 for detecting the position of the optometry unit 2 is connected to the control unit 70.
<Optometry section>
The optometry unit 2 performs measurement, examination, imaging, etc. of the eye to be examined. The optometry unit 2 may include, for example, a measurement optical system that measures the refractive power of the eye to be examined. For example, as shown in FIG. 3, the optometry unit 2 includes a measurement optical system 20, a fixation target presentation optical system 40, an index projection optical system 50, and an observation optical system (imaging optical system) 60. May be.

測定光学系20は、投影光学系(投光光学系)20aと、受光光学系20bと、を有している。投影光学系20aは、被検眼の瞳孔を介して眼底Efに光束を投影する。また、受光光学系20bは、瞳孔周辺部を介して眼底Efからの反射光束(眼底反射光)をリング状に取り出し、主に屈折力の測定に用いるリング状の眼底反射像を撮像する。   The measurement optical system 20 includes a projection optical system (light projecting optical system) 20a and a light receiving optical system 20b. The projection optical system 20a projects a light beam onto the fundus oculi Ef through the pupil of the eye to be examined. In addition, the light receiving optical system 20b takes out a reflected light beam (fundus reflected light) from the fundus oculi Ef via the periphery of the pupil in a ring shape, and captures a ring-shaped fundus reflection image mainly used for measuring refractive power.

投影光学系20aは、測定光源21と、リレーレンズ22と、ホールミラー23と、対物レンズ24と、を光軸L1上に有している。光源21は、リレーレンズ22から対物レンズ24、および、瞳孔中心部を介して眼底Efにスポット状の光源像を投影する。光源21は、移動機構33によって光軸L1方向に移動される。ホールミラー23には、リレーレンズ22を介した光源21からの光束を通過させる開口が設けられている。ホールミラー23は、被検眼の瞳孔と光学的に共役な位置に配置されている。   The projection optical system 20a has a measurement light source 21, a relay lens 22, a hall mirror 23, and an objective lens 24 on the optical axis L1. The light source 21 projects a spot-like light source image from the relay lens 22 to the fundus oculi Ef through the objective lens 24 and the pupil center. The light source 21 is moved in the direction of the optical axis L1 by the moving mechanism 33. The hall mirror 23 is provided with an opening through which the light beam from the light source 21 through the relay lens 22 passes. The hall mirror 23 is disposed at a position optically conjugate with the pupil of the eye to be examined.

受光光学系20bは、ホールミラー23と、対物レンズ24と、を投影光学系20aと共用する。また、受光光学系20bは、リレーレンズ26と、全反射ミラー27と、を有している。更に、受光光学系20bは、受光絞り28と、コリメータレンズ29と、リングレンズ30と、撮像素子32と、をホールミラー23の反射方向の光軸L2上に有している。撮像素子32には、エリアCCD等の二次元受光素子を用いることができる。受光絞り28、コリメータレンズ29、リングレンズ30、及び撮像素子32は、移動機構33によって、投影光学系20aの測定光源21と一体的に光軸L2方向に移動される。移動機構33によって光源21が眼底Efと光学的に共役な位置に配置される場合、受光絞り28及び撮像素子32も、眼底Efと光学的に共役な位置に配置される。   The light receiving optical system 20b shares the hall mirror 23 and the objective lens 24 with the projection optical system 20a. The light receiving optical system 20b includes a relay lens 26 and a total reflection mirror 27. Further, the light receiving optical system 20 b has a light receiving stop 28, a collimator lens 29, a ring lens 30, and an image sensor 32 on the optical axis L <b> 2 in the reflection direction of the Hall mirror 23. As the imaging element 32, a two-dimensional light receiving element such as an area CCD can be used. The light receiving aperture 28, the collimator lens 29, the ring lens 30, and the image sensor 32 are moved by the moving mechanism 33 in the direction of the optical axis L2 integrally with the measurement light source 21 of the projection optical system 20a. When the light source 21 is disposed at a position optically conjugate with the fundus oculi Ef by the moving mechanism 33, the light receiving aperture 28 and the image sensor 32 are also disposed at positions optically conjugate with the fundus oculi Ef.

リングレンズ30は、対物レンズ24からコリメータレンズ29を介して導かれる眼底反射光を、リング状に整形するための光学素子である。リングレンズ30は、リング状のレンズ部と、遮光部と、を有している。また、受光絞り28及び撮像素子32が、眼底Efと光学的に共役な位置に配置される場合、リングレンズ30は、被検眼の瞳孔と光学的に共役な位置に配置される。撮像素子32では、リングレンズ30を介したリング状の眼底反射光(以下、リング像という)が受光される。撮像素子32は、受光したリング像の画像情報を、CPU71に出力する。その結果、CPU71では、表示部7でのリング像の表示、およびリング像に基づく屈折力の算出等が行われる。   The ring lens 30 is an optical element for shaping the fundus reflection light guided from the objective lens 24 through the collimator lens 29 into a ring shape. The ring lens 30 has a ring-shaped lens portion and a light shielding portion. Further, when the light receiving aperture 28 and the image sensor 32 are disposed at a position optically conjugate with the fundus oculi Ef, the ring lens 30 is disposed at a position optically conjugate with the pupil of the eye to be examined. The image sensor 32 receives ring-shaped fundus oculi reflection light (hereinafter referred to as a ring image) via the ring lens 30. The image sensor 32 outputs image information of the received ring image to the CPU 71. As a result, the CPU 71 performs display of the ring image on the display unit 7, calculation of refractive power based on the ring image, and the like.

また、図3に示すように、本実施例では、対物レンズ24と被検眼との間に、ダイクロイックミラー39が配置されている。ダイクロイックミラー39は、光源21から出射された光、および、光源21からの光に応じた眼底反射光を透過する。また、ダイクロイックミラー39は、後述の固視標呈示光学系40からの光束を被検眼に導く。更に、ダイクロイックミラー39は、後述の指標投影光学系50からの光の前眼部反射光を反射して、その前眼部反射光を観察光学系60に導く。   As shown in FIG. 3, in this embodiment, a dichroic mirror 39 is disposed between the objective lens 24 and the eye to be examined. The dichroic mirror 39 transmits light emitted from the light source 21 and fundus reflected light corresponding to the light from the light source 21. The dichroic mirror 39 guides a light beam from a fixation target presenting optical system 40 described later to the eye to be examined. Further, the dichroic mirror 39 reflects the anterior segment reflected light of light from the index projection optical system 50 described later, and guides the anterior segment reflected light to the observation optical system 60.

図3に示すように、被検眼の前方には、指標投影光学系50が配置されている。指標投影光学系50は、主に、被検眼に対する光学系の位置合わせ(アライメント)に用いられる指標を前眼部に投影する。この場合、指標投影光学系50は、被検眼に対する光学系のXY方向又はZ方向の少なくともいずれかに位置合わせ(アライメント)に用いられる指標を前眼部に投影する。なお、指標投影光学系50を用いず、前眼部画像における特徴部位を検出することによってアライメント検出を行うようにしてもよい。もちろん、指標検出と、特徴部位の検出とを併用して、アライメントを検出してもよい。   As shown in FIG. 3, an index projection optical system 50 is arranged in front of the eye to be examined. The index projection optical system 50 mainly projects an index used for alignment (alignment) of the optical system with respect to the eye to be examined on the anterior eye segment. In this case, the index projection optical system 50 projects an index used for alignment (alignment) on at least one of the XY direction and the Z direction of the optical system with respect to the eye to be examined. It should be noted that alignment detection may be performed by detecting a characteristic part in the anterior segment image without using the index projection optical system 50. Of course, the alignment may be detected by using both the index detection and the feature part detection.

指標投影光学系50は、例えば、リング指標投影部51と、指標投影部52と、を備える。リング指標投影部51は、被検者眼Eの角膜に拡散光を投影し、リング指標(いわゆるマイヤーリング)を投影する。リング指標投影部51は、本実施例の眼科装置1では、被検者眼Eの前眼部を照明する前眼部照明としても用いられる。指標投影部52は、被検眼の角膜に平行光を投影し、無限遠指標を投影する。   The index projection optical system 50 includes, for example, a ring index projection unit 51 and an index projection unit 52. The ring index projection unit 51 projects diffused light onto the cornea of the subject's eye E and projects a ring index (so-called Mayer ring). The ring index projection unit 51 is also used as anterior ocular segment illumination that illuminates the anterior segment of the subject's eye E in the ophthalmologic apparatus 1 of the present embodiment. The index projection unit 52 projects parallel light onto the cornea of the eye to be examined and projects an infinity index.

視標呈示光学系40は、光源41、固視標42、リレーレンズ43、反射ミラー46の反射方向の光軸L4上に有している。固視標42は、他覚屈折力測定時に被検眼を固視させるために使用される。例えば、光源41によって固視標42が照明されることによって、被検眼に呈示される。   The optotype presenting optical system 40 is provided on the optical axis L4 in the reflection direction of the light source 41, the fixation target 42, the relay lens 43, and the reflection mirror 46. The fixation target 42 is used to fix the eye to be examined when measuring objective refractive power. For example, the fixation target 42 is illuminated by the light source 41 and is presented to the eye to be examined.

光源41及び固視標42は、駆動機構48によって光軸L4の方向に一体的に移動される。光源41及び固視標42の移動によって、固視標の呈示位置(呈示距離)を変更してもよい。これによって、被検眼に雲霧をかけて屈折力測定を行うことができる。   The light source 41 and the fixation target 42 are integrally moved in the direction of the optical axis L4 by the drive mechanism 48. The presentation position (presentation distance) of the fixation target may be changed by moving the light source 41 and the fixation target 42. As a result, the refractive power can be measured by applying fog to the eye to be examined.

前眼撮影光学系60は、撮像レンズ61と、撮像素子62とを、ハーフミラー63の反射方向の光軸L3上に備える。撮像素子62は、被検眼の前眼部と光学的に共役な位置に配置される。撮像素子62は、リング指標投影部51によって照明される前眼部を撮像する。撮像素子62からの出力は、CPU71に入力される。その結果、撮像素子62によって撮像される被検眼の前眼部画像Iaが、表示部7に表示される(図2参照)。また、撮像素子62では、指標投影光学系50によって被検眼の角膜に形成されるアライメント指標像(本実施例では、リング指標および無限遠指標)が撮像される。その結果、CPU71は、撮像素子62の撮像結果に基づいてアライメント指標像を検出できる。また、CPU71は、アライメント状態の適否を、アライメント指標像が検出される位置に基づいて判定できる。
<顔撮影部>
顔撮影部90は、例えば、左右の被検眼のうち少なくとも一方を含む顔を撮影するための光学系である。例えば、図3に示すように、本実施例の顔撮影部90は、例えば、撮像素子91と、撮像レンズ92を主に備える。なお、顔撮影部90の光路には、可視光カットフィルタが配置され、可視光によるノイズ光が制限されてもよい。
The anterior imaging optical system 60 includes an imaging lens 61 and an imaging element 62 on the optical axis L3 in the reflection direction of the half mirror 63. The image sensor 62 is disposed at a position optically conjugate with the anterior segment of the eye to be examined. The image sensor 62 images the anterior segment illuminated by the ring index projection unit 51. An output from the image sensor 62 is input to the CPU 71. As a result, the anterior eye image Ia of the eye to be examined imaged by the image sensor 62 is displayed on the display unit 7 (see FIG. 2). In the image sensor 62, an alignment index image (in this embodiment, a ring index and an infinity index) formed on the cornea of the eye to be examined is captured by the index projection optical system 50. As a result, the CPU 71 can detect the alignment index image based on the imaging result of the imaging element 62. Further, the CPU 71 can determine the suitability of the alignment state based on the position where the alignment index image is detected.
<Face shooting part>
The face photographing unit 90 is an optical system for photographing a face including at least one of the left and right eye to be examined, for example. For example, as shown in FIG. 3, the face photographing unit 90 of the present embodiment mainly includes, for example, an imaging element 91 and an imaging lens 92. Note that a visible light cut filter may be disposed in the optical path of the face photographing unit 90 to limit noise light due to visible light.

本実施例の顔撮影部90は、駆動部4によって検眼部2とともに移動される。もちろん、顔撮影部90は、例えば、基台5に対して固定され、移動しない構成でもよい。   The face photographing unit 90 of this embodiment is moved together with the optometry unit 2 by the driving unit 4. Of course, the face photographing unit 90 may be configured to be fixed to the base 5 and not move, for example.

なお、撮影レンズ92は、例えば、広角レンズであってもよい。広角レンズは、例えば、魚眼レンズ、円錐レンズ等である。広角レンズを備えることによって、顔撮影部90は、広い画角で被検者の顔を撮影できる。画角は例えば、87°以上である。これによって、顔撮影部90は、被検者の両眼を撮影し易い。
<顔照明光学系>
顔照明光学系80は、被検眼の顔を照明する。顔照明光学系80は、例えば、照明光源81を備える。顔照明光学系80は、例えば、指向性の低い光源が用いられる。なお、顔照明光学系80は、赤外光にて被検者の顔を照明する顔照明光学系であってもよい。ここで、顔撮影部90において可視光をカットしておくことで、赤外光による顔からの反射光が顔撮影部90によって検出される。この場合、赤外光によるノイズ光が顔撮影部90に入射される可能性があるので、オートゲイン、眼検出のための関心領域ROIを撮影画像に設定することによって、赤外光ノイズの影響を軽減できる。
<制御方法>
以下、本装置1の制御動作について説明する。本装置1は、例えば、被検眼を検査するために、検眼部2と被検眼とのアライメントを全自動(フルオート)で行う。
The photographing lens 92 may be a wide angle lens, for example. The wide-angle lens is, for example, a fisheye lens or a conical lens. By providing the wide-angle lens, the face photographing unit 90 can photograph the face of the subject with a wide angle of view. The angle of view is, for example, 87 ° or more. Thus, the face photographing unit 90 can easily photograph both eyes of the subject.
<Face lighting optical system>
The face illumination optical system 80 illuminates the face of the eye to be examined. The face illumination optical system 80 includes an illumination light source 81, for example. For the face illumination optical system 80, for example, a light source with low directivity is used. The face illumination optical system 80 may be a face illumination optical system that illuminates the subject's face with infrared light. Here, the face photographing unit 90 detects visible light reflected by the infrared light by cutting the visible light. In this case, noise light due to infrared light may be incident on the face photographing unit 90. Therefore, by setting the region of interest ROI for auto gain and eye detection in the photographed image, the influence of infrared light noise Can be reduced.
<Control method>
Hereinafter, the control operation of the apparatus 1 will be described. For example, in order to inspect the eye to be inspected, the apparatus 1 performs alignment between the optometry unit 2 and the eye to be inspected fully automatically (full auto).

フルオート測定のフローチャートを図4に示す。例えば、制御部70は、測定を行った後、フルオートアライメントを行い、被検眼Eと検眼部2との位置合わせを行う。その後、眼の測定を行い、もう一方の眼に検眼部2を移動させて再度フルオートアライメントを行う。アライメントが完了すると、制御部70は、被検眼の測定を行い、処理を終了する。以下、各ステップについて説明する。   A flowchart of the full auto measurement is shown in FIG. For example, after performing the measurement, the control unit 70 performs full auto alignment, and performs alignment between the eye E and the optometry unit 2. Thereafter, the eye is measured, the optometry unit 2 is moved to the other eye, and full auto alignment is performed again. When the alignment is completed, the control unit 70 measures the eye to be examined and ends the process. Hereinafter, each step will be described.

{ステップS100:顎台調整}
ステップS100において、制御部70は顎台調整を行う。顎台調整についての詳細は後述する。制御部70は、顎台調整が完了すると、ステップS200に移行する。
{Step S100: Adjustment of chin rest}
In step S100, the control unit 70 performs chin rest adjustment. Details of chin rest adjustment will be described later. When the chin rest adjustment is completed, the control unit 70 proceeds to step S200.

{ステップS200:フルオートアライメント(1)}
ステップS200において、制御部70は、左右の一方の被検眼に対するフルオートアライメントを行う。例えば、制御部70は、顔撮影部90によって撮影された顔画像から被検者の眼を検出し、その方向に検眼部2を移動させる。このとき、制御部70は、前眼部観察光学系60によって撮影された被検眼の前眼部画像から、指標投影光学系50によって投影されたアライメント指標を検出してもよい。顔画像から検出された被検眼の情報に基づいて、粗アライメントが行われたところで、前眼部画像からアライメント指標を検出すると、制御部70は、アライメント指標による微アライメントを行う。例えば、制御部70は、アライメント指標の位置が所定位置となるように検眼部2を移動させ、アライメントを完了させる。
{Step S200: Fully automatic alignment (1)}
In step S200, the control unit 70 performs full auto alignment with respect to one of the left and right eyes. For example, the control unit 70 detects the eye of the subject from the face image photographed by the face photographing unit 90 and moves the optometry unit 2 in that direction. At this time, the control unit 70 may detect the alignment index projected by the index projection optical system 50 from the anterior segment image of the eye to be examined photographed by the anterior segment observation optical system 60. When the rough alignment is performed based on the information of the eye to be examined detected from the face image, when the alignment index is detected from the anterior eye image, the control unit 70 performs fine alignment using the alignment index. For example, the control unit 70 moves the optometry unit 2 so that the position of the alignment index becomes a predetermined position, and completes the alignment.

{ステップS300:測定(1)}
ステップS300において、制御部70は被検眼の検査を行う。例えば、制御部70は、測定光を被検眼の眼底に照射し、眼底によって反射された測定光の検出結果に基づいて、被検眼の眼屈折力を測定する。
{Step S300: Measurement (1)}
In step S300, the control unit 70 examines the eye to be examined. For example, the control unit 70 irradiates the fundus of the subject's eye with the measurement light, and measures the eye refractive power of the subject's eye based on the detection result of the measurement light reflected by the fundus.

{ステップS400:左右眼切換}
ステップS400において、制御部70は測定対象眼を切り換える。例えば、制御部70は、ステップS300において検査が完了した眼からもう一方の眼に検眼部2を移動させる。
{Step S400: Left and right eye switching}
In step S400, the control unit 70 switches the eye to be measured. For example, the control unit 70 moves the optometry unit 2 from the eye that has been examined in step S300 to the other eye.

{ステップS500:フルオートアライメント(2)}
ステップS500において、制御部70は検査が完了していない方の被検眼に対して、ステップS200と同様にフルオートアライメントを行う。
{Step S500: Fully automatic alignment (2)}
In step S500, the control unit 70 performs full auto alignment on the subject eye that has not been inspected, as in step S200.

{ステップS600:測定(2)}
ステップS600において、制御部70は、もう一方の被検眼の検査を行う。
{Step S600: Measurement (2)}
In step S600, the control unit 70 examines the other eye to be examined.

<測定準備から測定まで>
続いて、ステップS100の測定準備からステップS300の測定までの制御について図5を用いてより詳しく説明する。例えば、制御部70は、顔撮影部90によって撮影される顔画像から被検者の両眼検出を行う。
<From measurement preparation to measurement>
Next, the control from the measurement preparation in step S100 to the measurement in step S300 will be described in more detail with reference to FIG. For example, the control unit 70 detects both eyes of the subject from the face image photographed by the face photographing unit 90.

{ステップS110:顔画像解析}
ステップS110において、制御部70は、予め設定された初期位置に検眼部2を位置させる。この場合、例えば、制御部70は、記憶部74に記憶された初期位置に検眼部2を位置させてもよい。また、制御部70は、位置検出センサ75によって検眼部2が初期位置に達したことを検知することによって検眼部2を初期位置に位置させてもよい。制御部70は、顔照明光学系80による顔の照明を行うと共に、顔撮影部90からの撮像信号に基づいて、左右眼の少なくともいずれかの被検眼の位置を検出する。
{Step S110: Face Image Analysis}
In step S110, the control unit 70 positions the optometry unit 2 at a preset initial position. In this case, for example, the control unit 70 may position the optometry unit 2 at the initial position stored in the storage unit 74. The control unit 70 may place the optometry unit 2 at the initial position by detecting that the optometry unit 2 has reached the initial position by the position detection sensor 75. The control unit 70 illuminates the face with the face illumination optical system 80 and detects the position of at least one of the left and right eyes based on the imaging signal from the face photographing unit 90.

{ステップS120:前眼部画像解析}
ステップS120において、制御部70は、前眼撮影光学系60からの撮像信号に基づいて前眼部画像を解析し、被検眼の検出処理を行う。例えば、制御部70は、前眼部画像を解析し、指標または眼の特徴部位の検出処理を行う。
{Step S120: Anterior Eye Image Analysis}
In step S120, the control unit 70 analyzes the anterior ocular segment image based on the imaging signal from the anterior ocular photographing optical system 60, and performs detection processing for the eye to be examined. For example, the control unit 70 analyzes an anterior ocular segment image and performs detection processing of an index or an eye characteristic part.

{ステップS130:被検眼検出判定}
ステップS130において、制御部70は、ステップS120の検出処理において、前眼撮影光学系60からの撮像信号に基づいて被検眼が検出できたか否かを判定する。制御部70は、被検眼が検出された場合は、ステップS140の顎台調整をスキップして、前眼撮影光学系60による検眼部2の位置調整に移行する。また、被検眼が検出されなかった場合は、ステップS140に移る。
{Step S130: Determination of Eye Detection>
In step S130, the control unit 70 determines whether or not the eye to be inspected has been detected based on the imaging signal from the anterior eye photographing optical system 60 in the detection process of step S120. When the eye to be examined is detected, the control unit 70 skips the chin rest adjustment in step S <b> 140 and proceeds to position adjustment of the optometry unit 2 by the anterior eye photographing optical system 60. If the eye to be examined is not detected, the process proceeds to step S140.

{ステップS140:顎台調整}
ステップS140において、制御部70は、例えば、顎台駆動部12を制御し、顎台の高さを調整する。制御部70は、ステップS110の解析結果に基づいて顎台駆動部12を制御し、顎台の高さを調整する。この場合、制御部は、検眼部2の移動可能範囲内に被検眼が配置されるように顎台駆動部12を制御し、顎台の高さを調整してもよい。なお、顎台調整が必要ない場合は、ステップS180に移ってもよい。
{Step S140: Jaw support adjustment}
In step S140, for example, the control unit 70 controls the chin rest drive unit 12 to adjust the height of the chin rest. The control unit 70 controls the chin rest drive unit 12 based on the analysis result of step S110 to adjust the height of the chin rest. In this case, the control unit may adjust the height of the chin rest by controlling the chin rest driving section 12 so that the eye to be examined is disposed within the movable range of the optometry section 2. If chin rest adjustment is not necessary, the process may move to step S180.

{ステップS150:第2の顔画像解析}
顎台の高さ調整が完了されると、制御部70は、ステップS150において、制御部70は、顔撮影部90からの撮像信号に基づいて、左右眼の少なくともいずれかの被検眼を検出する。
{Step S150: Second face image analysis}
When the height adjustment of the chin rest is completed, in step S150, the control unit 70 detects at least one of the left and right eyes based on the imaging signal from the face imaging unit 90. .

{ステップS160:第2の前眼部画像解析}
ステップS120において、制御部70は、前眼撮影光学系60からの撮像信号に基づいて前眼部画像を解析し、被検眼の検出処理を行う。
{Step S160: Second Anterior Eye Image Analysis}
In step S120, the control unit 70 analyzes the anterior ocular segment image based on the imaging signal from the anterior ocular photographing optical system 60, and performs detection processing for the eye to be examined.

{ステップS170:第2の被検眼検出判定}
ステップS170において、制御部70は、ステップS160の検出処理において、被検眼が検出できたか否かを判定する。制御部70は、被検眼が検出された場合は、顔撮影部90による検眼部2の位置調整をスキップして、前眼撮影光学系60による検眼部2の位置調整に移行する。また、被検眼が検出されなかった場合は、ステップS180に移る。
{Step S170: Second Eye Detection Determination}
In step S170, the control unit 70 determines whether or not the eye to be examined has been detected in the detection process of step S160. When the eye to be examined is detected, the control unit 70 skips the position adjustment of the optometry unit 2 by the face photographing unit 90 and shifts to the position adjustment of the optometry unit 2 by the anterior eye photographing optical system 60. If the eye to be examined is not detected, the process proceeds to step S180.

{ステップS180:顔撮影部による位置調整}
ステップS180において、制御部70は、例えば、顔撮影部90からの撮像信号に基づいて駆動部4を制御し、検眼部2の位置を調整する。制御部70は、顔撮影部90からの撮像信号に基づいて眼の位置を検出する。制御部70は、位置検出結果に基づいて駆動部4を制御し、検眼部2の3次元位置を調整する。この場合、制御部は、前眼撮影光学系60による撮影可能範囲内に被検眼が配置されるように駆動部4を制御し、検眼部2の位置を調整してもよい。
{Step S180: Position Adjustment by Face Shooting Unit}
In step S180, the control unit 70 controls the drive unit 4 based on the imaging signal from the face photographing unit 90, for example, and adjusts the position of the optometry unit 2. The control unit 70 detects the eye position based on the imaging signal from the face photographing unit 90. The control unit 70 controls the drive unit 4 based on the position detection result and adjusts the three-dimensional position of the optometry unit 2. In this case, the control unit may adjust the position of the optometry unit 2 by controlling the drive unit 4 so that the eye to be examined is arranged within the range where the anterior imaging optical system 60 can shoot.

{ステップS190:前眼撮影光学系60による位置調整}
ステップS190において、制御部70は、前眼撮影光学系60からの撮像信号に基づいて駆動部4を制御し、検眼部2の位置を調整する。制御部70は、前眼撮影光学系60からの撮像信号に基づいて被検眼の位置を検出する。制御部70は、位置検出結果に基づいて駆動部4を制御し、検眼部2の位置を調整する。この場合、制御部は、アライメント許容範囲内に被検眼が配置されるように駆動部4を制御し、検眼部2の3次元位置を調整してもよい。
{Step S190: Position Adjustment by Anterior Eye Photography Optical System 60}
In step S <b> 190, the control unit 70 controls the drive unit 4 based on the imaging signal from the anterior imaging optical system 60 and adjusts the position of the optometry unit 2. The control unit 70 detects the position of the eye to be inspected based on the imaging signal from the anterior eye photographing optical system 60. The control unit 70 controls the drive unit 4 based on the position detection result and adjusts the position of the optometry unit 2. In this case, the control unit may adjust the three-dimensional position of the optometry unit 2 by controlling the drive unit 4 so that the eye to be examined is arranged within the alignment allowable range.

<オートゲイン制御における関心領域ROIの設定>
次に、ステップS110における顔画像解析において顔撮影部90のオートゲイン制御を行う場合の一例を説明する。図6はオートゲイン制御の一例を示す図である。制御部70は、初期位置に配置された検眼部の位置に基づく関心領域ROIを、顔撮影部90の撮影画像に設定する。この場合、関心領域ROIは、オートゲイン制御を行うために設定された関心領域である。
<Setting of ROI of interest in auto gain control>
Next, an example in which the automatic gain control of the face photographing unit 90 is performed in the face image analysis in step S110 will be described. FIG. 6 is a diagram illustrating an example of auto gain control. The control unit 70 sets a region of interest ROI based on the position of the optometry unit arranged at the initial position in the captured image of the face imaging unit 90. In this case, the region of interest ROI is a region of interest set for performing auto gain control.

例えば、顎台11によって支持された被検者を初期位置にて撮影した際、顔の領域となる可能性が高い画像領域が、関心領域ROIとして予め設定される。ここで、関心領域ROIでの輝度が目標値となるようにゲインが自動的に調整される。   For example, when the subject supported by the chin rest 11 is imaged at the initial position, an image region that is highly likely to be a face region is preset as the region of interest ROI. Here, the gain is automatically adjusted so that the luminance in the region of interest ROI becomes the target value.

例えば、制御部は、ROIの輝度が目標値Th1となるように、オートゲイン制御を行う。より詳細には、制御部は、ROI内の各画素の輝度累計値を任意の目標値Th1に近づくように、オートゲイン制御を行うようにしてもよく、輝度累計値が目標値を下回る場合、ゲインを増加させ、輝度累計値が目標値を上回る場合、ゲインを減少させてもよい。   For example, the control unit performs auto gain control so that the brightness of the ROI becomes the target value Th1. More specifically, the control unit may perform auto gain control so that the accumulated luminance value of each pixel in the ROI approaches an arbitrary target value Th1, and when the accumulated luminance value is lower than the target value, If the gain is increased and the accumulated luminance value exceeds the target value, the gain may be decreased.

これにより、広角ゆえに外乱光を集光しやすい顔撮影部90によって撮影された撮影画像において、被検者の顔と眼とのコントラストが適正に調整され、以降の眼検出をスムーズに行うことができる。   Thereby, in the photographed image photographed by the face photographing unit 90 that easily collects disturbance light because of the wide angle, the contrast between the face and the eye of the subject is appropriately adjusted, and subsequent eye detection can be performed smoothly. it can.

なお、初期位置でのオートゲイン制御が行われた後も、オートゲイン制御が実行されてもよいし(例えば、ステップ150、ステップ180等)、終了してもよい。オートゲイン制御が常時実行されてもよい。   Note that, after the auto gain control at the initial position is performed, the auto gain control may be executed (for example, step 150, step 180, etc.) or may be terminated. Auto gain control may always be executed.

なお、初期位置でのオートゲイン制御が行われた後、制御部は、検眼部2の位置に応じて関心領域ROIを移動させてもよい。図7は、検眼部2の位置に応じたROIの位置に切換例を示す図である。本実施例では、検眼部2の左右位置に応じて異なる複数の関心領域ROIが設定される。この場合、左右方向での検眼部2の移動量と、撮影画像における関心領域ROIの移動量とが一対の関係であってもよい。   Note that after the auto gain control at the initial position is performed, the control unit may move the region of interest ROI according to the position of the optometry unit 2. FIG. 7 is a diagram illustrating an example of switching to the ROI position according to the position of the optometry unit 2. In this embodiment, a plurality of different regions of interest ROI are set according to the left and right positions of the optometry unit 2. In this case, the movement amount of the optometry unit 2 in the left-right direction and the movement amount of the region of interest ROI in the captured image may have a paired relationship.

撮影画像における関心領域ROIのサイズは、画像処理の目的に合わせて適宜設定されてもよい。本実施例では、顔の輝度を適正に調整して良好な眼検出を行うことを目的であり、被検者の肌の一部が少なくとも形成されるサイズに設定される(眼を避けた位置であることが好ましい)。この場合、上下左右方向に関してそれぞれ関心領域ROIに対応する境界が設定されてもよいし、左右方向に関してのみ関心領域ROIに対応する境界が設定されてもよい。   The size of the region of interest ROI in the captured image may be appropriately set according to the purpose of image processing. The purpose of this embodiment is to perform good eye detection by appropriately adjusting the brightness of the face, and is set to a size at which a part of the subject's skin is at least formed (position avoiding the eyes). Is preferable). In this case, a boundary corresponding to the region of interest ROI may be set with respect to the up / down / left / right directions, or a boundary corresponding to the region of interest ROI may be set only with respect to the left / right direction.

検眼部2の位置と関心領域ROIの設定位置との対応関係は、予め記憶部74に記憶されてもよく、制御部70は、記憶部74に記憶された対応関係を用いて、検眼部2の位置に応じて関心領域ROIを設定してもよい。検眼部2の位置とROIの設定位置との対応関係は、例えば、検眼部2、及び検眼部2における顔撮影部90の位置を考慮したシミュレーションによって求められてもよい。また、被検者の顔が顎台11によって支持された状態で顔撮影部90によって実際に撮影することによって、検眼部2の位置と関心領域ROIの設定位置との対応関係を求めてもよい。   The correspondence relationship between the position of the optometry unit 2 and the set position of the region of interest ROI may be stored in the storage unit 74 in advance, and the control unit 70 uses the correspondence relationship stored in the storage unit 74 to perform optometry. The region of interest ROI may be set according to the position of the unit 2. The correspondence relationship between the position of the optometry unit 2 and the set position of the ROI may be obtained, for example, by simulation considering the optometry unit 2 and the position of the face photographing unit 90 in the optometry unit 2. In addition, even when the face of the subject is actually captured by the face photographing unit 90 with the chin rest 11 supported, the correspondence between the position of the optometry unit 2 and the set position of the region of interest ROI can be obtained. Good.

なお、図7では、左右位置に応じて異なる4種類のROIが設定されるが、これに限定されず、2〜3種類のROIが設定されてもよいし、5種類以上のROIが設定されてもよい。もちろん、検眼部2の位置に応じてリニアに関心領域ROIが設定されてもよい。   In FIG. 7, four different types of ROIs are set according to the left and right positions, but the present invention is not limited to this, and two to three types of ROIs may be set, and five or more types of ROIs are set. May be. Of course, the region of interest ROI may be set linearly according to the position of the optometry unit 2.

制御部70は、位置検出センサ75からの検眼部2の位置情報に基づいて撮影画像における関心領域ROIの設定位置を変更し、変更された関心領域ROIでの画像信号に基づいてオートゲイン制御を行ってもよい。これによって、検眼部2の位置に関わらず、適正な位置に関心領域ROIが設定され、オートゲインを適正に行うことができる。   The control unit 70 changes the setting position of the region of interest ROI in the captured image based on the position information of the optometry unit 2 from the position detection sensor 75, and performs auto gain control based on the image signal in the changed region of interest ROI. May be performed. Thereby, regardless of the position of the optometry unit 2, the region of interest ROI is set at an appropriate position, and auto gain can be appropriately performed.

また、制御部70は、検眼部2の位置に応じて関心領域ROIを設定してオートゲイン制御を行うことで、撮影画像における顔の形成位置に応じたゲイン調整を行うことができるので、さらに有利である。つまり、検眼部2の位置に応じて顔照明による照明状態が異なり、撮影画像の調整が必要な場合がある。そこで、前述のように検眼部2の位置に応じて設定された関心領域ROIを用いて、オートゲインを再度行うことによって、照明状態の変化にも対応でき、顔撮影部90を用いた眼検出によるアライメントを良好に行うことができる。また、検眼部2の位置に応じて関心領域ROIの位置を変更することによって、検眼部2の位置に関わらず、外部照明等の明るさに関係なく顔の明るさが一定の目標レベルに調整され、眼の検出等を確実に行うことができる。   In addition, the control unit 70 can perform gain adjustment according to the face formation position in the captured image by setting the region of interest ROI according to the position of the optometry unit 2 and performing auto gain control. Further advantageous. That is, the illumination state by face illumination differs depending on the position of the optometry unit 2, and the captured image may need to be adjusted. Therefore, by using the region of interest ROI set in accordance with the position of the optometry unit 2 as described above, auto-gain is performed again, so that it is possible to cope with changes in the illumination state, and the eye using the face photographing unit 90 Alignment by detection can be performed satisfactorily. Further, by changing the position of the region of interest ROI according to the position of the optometry unit 2, regardless of the position of the optometry unit 2, the brightness of the face is a constant level regardless of the brightness of external illumination or the like. Thus, the eye detection and the like can be performed reliably.

なお、上記説明においては、検眼部2の位置に応じて関心領域ROIの位置を変更し、オートゲイン制御を行うものとしたが、これに限定されず、検眼部2の位置に応じて、顔照明による照明状態を変更してもよい。   In the above description, the position of the region of interest ROI is changed according to the position of the optometry unit 2 and the automatic gain control is performed. However, the present invention is not limited to this, and depending on the position of the optometry unit 2 The illumination state by face illumination may be changed.

図8は、検眼部2の位置に応じて顔照明を変更する場合の一例を示す図である。例えば、検眼部2が左眼側に移動したときは、顔照明1〜顔照明3を点灯させて、顔照明4〜6を消灯し、検眼部2が右眼側に移動したときは、顔照明4〜6を点灯させて、顔照明1〜3を消灯してもよい。また、検眼部2が中心位置に配置されている場合、顔照明1〜6を点灯させてもよい。また、複数の照明光源の点灯/消灯に限定されず、光源の照明光量を調整してもよい。また、顔照明の配置構成は上記に限定されず、種々の変容が可能である。また、検眼部2の位置に応じて、顔照明1〜6をそれぞれ独立させた光量制御を行ってもよい。   FIG. 8 is a diagram illustrating an example of changing the face illumination according to the position of the optometry unit 2. For example, when the optometry unit 2 is moved to the left eye side, the face illuminations 1 to 3 are turned on, the face illuminations 4 to 6 are turned off, and the optometry unit 2 is moved to the right eye side. Alternatively, the face lights 4 to 6 may be turned on and the face lights 1 to 3 may be turned off. Moreover, when the optometry part 2 is arrange | positioned in the center position, you may light the face illuminations 1-6. Further, the illumination light quantity of the light source may be adjusted without being limited to turning on / off the plurality of illumination light sources. Moreover, the arrangement configuration of the face illumination is not limited to the above, and various modifications are possible. Further, the light amount control in which the face illuminations 1 to 6 are made independent according to the position of the optometry unit 2 may be performed.

<眼検出における関心領域ROIの設定>
次に、ステップS110、ステップ150、ステップ180等における顔画像解析において、眼検出を行う場合の一例を説明する。
<Setting of ROI of interest in eye detection>
Next, an example of performing eye detection in the face image analysis in step S110, step 150, step 180, etc. will be described.

制御部70は、検眼部の位置に基づく関心領域ROIを、顔撮影部90の撮影画像に設定する。この場合、関心領域ROIは、眼検出を行うために設定された関心領域であり、眼検出における画像探索範囲として設定される。   The control unit 70 sets a region of interest ROI based on the position of the optometry unit as a captured image of the face imaging unit 90. In this case, the region of interest ROI is a region of interest set for performing eye detection, and is set as an image search range in eye detection.

本実施例では、顔撮影部90から眼を検出する。眼の検出において、撮影画像上の探索範囲を限定できれば、例えば、検出処理を高速化できると共に誤検出(異なるものを眼として検出する)を削減できる。この場合、検眼部2の位置によって眼の位置が変わるので、検眼部2の3次元位置情報に基づいて関心領域(画像探索範囲)ROIを設定し、関心領域ROIの中で眼を探索する。   In this embodiment, eyes are detected from the face photographing unit 90. In eye detection, if the search range on the captured image can be limited, for example, the detection process can be speeded up, and erroneous detection (detecting different things as eyes) can be reduced. In this case, since the position of the eye changes depending on the position of the optometry unit 2, a region of interest (image search range) ROI is set based on the three-dimensional position information of the optometry unit 2, and an eye is searched for in the region of interest ROI. To do.

顎台11に顔を置いた状態で顔が撮影される場合、3次元実空間上の眼の存在しうる範囲は、ある程度限定される。例えば、瞳孔間距離、顔の大きさには個人差があるが、一定の範囲に存在するからである。そこで、眼が存在しうる実空間領域が、顔撮影部90の撮影画像上でどの領域になるか求め、その範囲内を探索する領域とする。   When a face is photographed with the face placed on the chin rest 11, the range in which the eye can exist in the three-dimensional real space is limited to some extent. For example, there is an individual difference in the distance between the pupils and the size of the face, but it exists in a certain range. Therefore, the real space area where the eye can exist is determined as an area on the photographed image of the face photographing unit 90, and the area is searched for.

以下、3次元実空間上の関心領域(眼が存在すると考えられる領域)の設定、実空間上の関心領域を撮影画像上の座標に変換する方法、顔撮影部90のレンズの歪みを考慮して座標変換の結果を補正する方法、座標変換の補正の結果から画像上の関心領域(眼が存在すると考えられる領域)を求める方法について述べる。   Hereinafter, in consideration of the setting of the region of interest in the three-dimensional real space (the region where the eye is considered to exist), the method of converting the region of interest in the real space into the coordinates on the photographed image, and distortion of the lens of the face photographing unit 90 A method for correcting the result of coordinate transformation and a method for obtaining a region of interest on the image (a region where an eye is considered to exist) from the result of the coordinate transformation correction will be described.

ここで、3次元実空間上で、被検者が顔を顎台11に載せたとき、右眼が存在すると考えられる立体の領域を設定する(図9参照)。この立体は、点R1〜R8から成る立体で、それぞれR1=(XR1, YR1, ZR1)、・・・、R8=(XR8, YR8, ZR8)とする。同様に、左眼が存在すると考えられる点L1〜L8から成る直方体を設定する。 Here, on the three-dimensional real space, when the subject places his face on the chin rest 11, a three-dimensional region in which the right eye is considered to exist is set (see FIG. 9). This solid is composed of points R1 to R8, and R1 = (X R1 , Y R1 , Z R1 ),..., R8 = (X R8 , Y R8 , Z R8 ). Similarly, a rectangular parallelepiped composed of points L1 to L8 where the left eye is considered to exist is set.

例えば、左右方向に関して、R1−R5−R8−R4の面の位置は、瞳孔間距離が最も大きい被検眼(例えば、PD=90mm)を想定した右眼の位置であり、例えば、装置の中心位置から45mm離れた位置に設定される。また、R2−R6−R7−R3の面の位置は、瞳孔間距離が最も小さい被検眼(例えば、PD=30mm)を想定した右眼の位置であり、例えば、装置の中心位置から15mm離れた位置に設定される。中心位置は、例えば、駆動部の左右方向の駆動範囲の中心位置であってもよいし、装置本体(例えば、基台、顔支持部など)の左右対称軸の位置であってもよい。   For example, regarding the left-right direction, the position of the surface of R1-R5-R8-R4 is the position of the right eye assuming the eye to be examined (for example, PD = 90 mm) having the largest inter-pupil distance, for example, the center position of the device Is set at a position 45 mm away. Further, the position of the surface of R2-R6-R7-R3 is the position of the right eye assuming the subject eye (for example, PD = 30 mm) having the smallest inter-pupil distance, and is, for example, 15 mm away from the center position of the device Set to position. The center position may be, for example, the center position of the drive range in the left-right direction of the drive unit, or may be the position of the left-right symmetry axis of the apparatus main body (eg, base, face support unit, etc.).

また、上下方向に関して、R1−R2−R3−R4の面の位置は、検眼部2の移動可能範囲の上限であり、例えば、アイレベルマーカーの位置から上に32mm離れた位置に設定される。R5−R6−R7−R8の面の位置は、検眼部2の移動可能範囲の下限であり、例えば、アイレベルマーカーの位置から上に32mm離れた位置に設定される。   Further, with respect to the vertical direction, the position of the surface of R1-R2-R3-R4 is the upper limit of the movable range of the optometry unit 2, and is set, for example, at a position 32 mm above the position of the eye level marker. . The position of the surface of R5-R6-R7-R8 is the lower limit of the movable range of the optometry unit 2, and is set, for example, at a position 32 mm upward from the position of the eye level marker.

また、Z方向に関して、R3−R7−R8−R4の面の位置は、被検者が顔支持部9に支持されたときの平均的な眼の位置に対し、装置側に所定量(例えば、20mm)シフトした位置に設定される。また、R2−R6−R5−R1の面の位置は、被検者が顔支持部9に支持されたときの平均的な眼の位置に対し、被検者側に所定量(例えば、20mm)シフトした位置に設定される。なお、左眼についても、同様の手法が採用できるので、説明を省略する。   Further, with respect to the Z direction, the position of the surface of R3-R7-R8-R4 is a predetermined amount (for example, on the apparatus side) relative to the average eye position when the subject is supported by the face support unit 9. 20 mm) is set at the shifted position. Further, the position of the surface of R2-R6-R5-R1 is a predetermined amount (for example, 20 mm) on the subject side with respect to the average eye position when the subject is supported by the face support unit 9. Set to the shifted position. Since the same method can be adopted for the left eye, the description is omitted.

上記のように設定した実空間上の関心領域の立体の頂点が、撮影画像上のどこに投影されるか求める(図10参照)。撮影画像における右眼の関心領域ROIについて求める方法で説明する。まず、R1〜R8がそれぞれカメラ上のr1〜r8に投影されるとする。それぞれ、r1=(xr1, yr1)、・・・、r8=(xr8, yr8)。このr1〜r8を求める。 Where the solid vertex of the region of interest in the real space set as described above is projected on the captured image is obtained (see FIG. 10). A method for obtaining the region of interest ROI of the right eye in the captured image will be described. First, R1 to R8 are projected onto r1 to r8 on the camera, respectively. R1 = (x r1 , y r1 ),..., R8 = (x r8 , y r8 ), respectively. These r1 to r8 are obtained.

ピンホールカメラモデルを適用すると、3次元の座標が撮影画像上の2次元座標に投影される関係式より、R1=(XR1,YR1,ZR1)とr1=(xr1, yr1)の間には式(1)の関係が成り立つ。 When the pinhole camera model is applied, R1 = (X R1 , Y R1 , Z R1 ) and r1 = (x r1 , y r1 ) from the relational expression in which the three-dimensional coordinates are projected onto the two-dimensional coordinates on the captured image. The relationship of Formula (1) is established between.


は、顔撮影部90のカメラパラメータ行列である。カメラパラメータは、顔撮影部90の焦点位置、光学中心を表す内部パラメータと、顔撮影部90の向き、位置を表す外部パラメータである。事前のキャリブレーション(校正)により計測された値と、位置検出センサ75から検出される検眼部2の3次元的な位置情報より、c11〜c34の値が得られる。式(1)を解くと、式(2)となる。

Is a camera parameter matrix of the face photographing unit 90. The camera parameters are internal parameters representing the focal position and optical center of the face photographing unit 90, and external parameters representing the orientation and position of the face photographing unit 90. The values c 11 to c 34 are obtained from the values measured by the previous calibration (calibration) and the three-dimensional position information of the optometry unit 2 detected from the position detection sensor 75. Solving equation (1) yields equation (2).

同様に、L1〜L8がカメラ上に投影される座標、l1〜l8を求める。 Similarly, coordinates L1 to L8, which are projected on the camera, are obtained.

なお、本実施例では、顔撮影部90の撮影画像には歪みが発生する(図11参照)。本実施例では、眼の検出は原画像に対して行う(歪み補正せずに行う)。もちろん歪み補正を行ってもよい。なお、歪みの影響が少ない場合、画像処理での歪み対応は必ずしも必要ではない。   In this embodiment, distortion occurs in the captured image of the face photographing unit 90 (see FIG. 11). In this embodiment, eye detection is performed on the original image (without distortion correction). Of course, distortion correction may be performed. When the influence of distortion is small, it is not always necessary to deal with distortion in image processing.

上記求めたr1〜r8は歪みを考慮していない座標である。そこで、歪みなしの座標r1〜r8に歪みを考慮した座標r‘1〜r’8に変換する。r1(xr1, yr1)をr‘1( x’r1, y’r1)に変換する例で説明する。r1とr‘1の関係は式(3)で表される。 The obtained r1 to r8 are coordinates that do not take distortion into consideration. Therefore, the coordinates r'1 to r'8 taking the distortion into consideration are converted into the coordinates r1 to r8 having no distortion. An example in which r1 (x r1 , y r1 ) is converted to r′1 (x ′ r1 , y ′ r1 ) will be described. The relationship between r1 and r′1 is expressed by equation (3).

ただし、(xc, yc)は画像上の光学中心座標、k1〜k3は歪み係数、mは画像上の光学中心からの半径で、 Where (x c , y c ) are the optical center coordinates on the image, k 1 to k 3 are distortion coefficients, m is the radius from the optical center on the image,

である。 It is.

式(3)よりr‘1が求められる。同様にr’2~r’8を求める。同様に、歪みなしの座標l1〜l8に歪みを考慮した座標l’1〜l’8に変換する。   R′1 is obtained from equation (3). Similarly, r′2 to r′8 are obtained. Similarly, the coordinates l'1 to l'8 in consideration of the distortion are converted into the coordinates 11 to l8 without distortion.

撮影画像上における右眼の関心領域ROIは、r‘1〜r’8を全て含む最小の矩形領域内(図12の矩形のROI参照)とする。同様に、左眼の関心領域ROIは l‘1〜l’8を全て含む最小の矩形領域内とする。   The region of interest ROI for the right eye on the captured image is within the smallest rectangular region including all r′1 to r′8 (see the rectangular ROI in FIG. 12). Similarly, the region of interest ROI of the left eye is within the smallest rectangular region including all l′ 1 to l′ 8.

上記手法を用いて、制御部70は、検眼部2の位置に基づいて関心領域ROIを設定する。制御部70は、設定された関心領域ROIの画像信号を処理して関心領域ROIに含まれる眼を探索し、眼検出を行う。   Using the above method, the control unit 70 sets a region of interest ROI based on the position of the optometry unit 2. The control unit 70 processes the image signal of the set region of interest ROI, searches for eyes included in the region of interest ROI, and performs eye detection.

<変容例>
<顔撮影と前眼部撮影の並行>
なお、制御部70は、前眼撮影光学系60による眼検出後においても、顔撮影部90による眼検出を行ってもよい。例えば、前眼撮影光学系60による眼検出後、被検者の顔が動いた場合、前眼撮影光学系60の撮像画像において眼が検出されず、眼の位置を検出できない可能性がある。
<Transformation example>
<Simultaneous face photography and anterior eye photography>
Note that the control unit 70 may perform eye detection by the face photographing unit 90 even after eye detection by the anterior eye photographing optical system 60. For example, when the subject's face moves after eye detection by the anterior eye imaging optical system 60, the eye may not be detected in the captured image of the anterior eye imaging optical system 60, and the position of the eye may not be detected.

制御部70は、前眼撮影光学系60による眼検出後においても、顔撮影部90による眼検出を並行して行うようにしてもよい。顔撮影部90による眼検出は、前眼撮影光学系60からの画像による眼検出と常時並行して行ってもよいし、交互に行ってもよい。   The controller 70 may perform eye detection by the face photographing unit 90 in parallel even after eye detection by the anterior eye photographing optical system 60. The eye detection by the face photographing unit 90 may be performed at the same time as the eye detection based on the image from the anterior eye photographing optical system 60 or may be performed alternately.

これによって、前眼撮影光学系60による眼検出後においても、顔撮影部90によって眼の位置を広範囲にて検出することができ、再度初期位置に戻る必要もなく、スムーズなアライメントを行うことができる。この場合、制御部70は、前眼撮影光学系60において眼が検出されない場合において、顔撮影部90による眼検出に復帰するようにしてもよい。   As a result, even after the eye is detected by the anterior eye photographing optical system 60, the face photographing unit 90 can detect the position of the eye over a wide range, and smooth alignment can be performed without having to return to the initial position again. it can. In this case, the control unit 70 may return to the eye detection by the face photographing unit 90 when the anterior eye photographing optical system 60 does not detect the eye.

1 眼科装置
2 検眼部
4 駆動部
5 基台
6 筐体
70 制御部
71 CPU
72 ROM
73 RAM
90 顔撮影部


DESCRIPTION OF SYMBOLS 1 Ophthalmology apparatus 2 Optometrist part 4 Drive part 5 Base 6 Case 70 Control part 71 CPU
72 ROM
73 RAM
90 Face shooting part


Claims (13)

被検眼を検査する眼科装置であって、
前記被検眼を検査するための検眼手段と、被検者の顔を含む撮影画像を撮影するための顔撮影手段と、を備える検眼部と、
前記被検眼に対して前記検眼部を相対移動させる調整手段と、
前記調整手段によって移動される前記検眼部の位置に基づく関心領域を前記撮影画像に設定し、前記関心領域における画像信号を処理する演算処理手段と、
を備えることを特徴とする眼科装置。
An ophthalmic apparatus for inspecting an eye to be examined,
An optometry unit comprising: an optometry means for examining the eye to be examined; and a face photographing means for photographing a photographed image including the face of the subject;
Adjusting means for moving the optometry part relative to the eye to be examined;
An arithmetic processing unit that sets a region of interest based on the position of the optometry unit moved by the adjusting unit in the captured image and processes an image signal in the region of interest;
An ophthalmologic apparatus comprising:
前記演算処理手段は、被検者の顔の少なくとも一部を検出するために前記関心領域を設定することを特徴とする請求項1の眼科装置。   The ophthalmologic apparatus according to claim 1, wherein the arithmetic processing unit sets the region of interest in order to detect at least a part of the face of the subject. 前記演算処理手段は、前記関心領域における画像信号に基づいて眼科装置を制御することを特徴とする請求項1〜2のいずれかの眼科装置。   The ophthalmologic apparatus according to claim 1, wherein the arithmetic processing unit controls the ophthalmologic apparatus based on an image signal in the region of interest. 前記演算処理手段は、前記関心領域における画像信号に基づいて前記顔撮影手段による撮影条件を制御する請求項3の眼科装置。   The ophthalmologic apparatus according to claim 3, wherein the arithmetic processing unit controls a photographing condition by the face photographing unit based on an image signal in the region of interest. 前記演算処理手段は、前記関心領域における画像信号に基づいて前記調整手段による移動を制御する請求項3〜4のいずれかの眼科装置。   The ophthalmologic apparatus according to claim 3, wherein the arithmetic processing unit controls movement by the adjustment unit based on an image signal in the region of interest. 前記演算処理手段は、前記関心領域における画像信号を処理して被検眼を検出することを特徴とする請求項1〜5のいずれかの眼科装置。   The ophthalmologic apparatus according to claim 1, wherein the arithmetic processing unit detects an eye to be examined by processing an image signal in the region of interest. 前記演算処理手段は、前記関心領域における画像信号を処理して、顔撮影部の撮影条件を制御するための評価値を得ることを特徴とする請求項1〜6のいずれかの眼科装置。   The ophthalmologic apparatus according to claim 1, wherein the arithmetic processing unit processes an image signal in the region of interest to obtain an evaluation value for controlling a photographing condition of the face photographing unit. 前記演算処理手段は、前記検眼部の位置の変化に応じて、前記撮影画像における前記関心領域の位置を変更することを特徴とする請求項1〜7のいずれかの眼科装置。   The ophthalmologic apparatus according to claim 1, wherein the arithmetic processing unit changes the position of the region of interest in the captured image in accordance with a change in the position of the optometry unit. 前記演算処理手段は、前記検眼部の所定位置に対応する関心領域を前記撮影画像に設定することを特徴とする請求項1〜8のいずれかの眼科装置。   The ophthalmologic apparatus according to claim 1, wherein the arithmetic processing unit sets a region of interest corresponding to a predetermined position of the optometry unit in the captured image. 被検眼を検査する眼科装置において実行される眼科装置制御プログラムであって、
前記眼科装置は、
被検眼を検査するための検眼手段と、被検者の顔を含む撮影画像を撮影するための顔撮影手段と、を備える検眼部と、
前記被検眼に対して前記検眼部を相対移動させる調整手段と、を備え、
前記眼科装置制御プログラムは、前記眼科装置のプロセッサによって実行されることで、
前記調整手段によって移動される前記検眼部の位置に基づく関心領域を前記撮影画像に設定し、前記関心領域における画像信号を処理する演算処理ステップを、
前記眼科装置に実行させることを特徴とする眼科装置制御プログラム。
An ophthalmologic apparatus control program executed in an ophthalmologic apparatus for inspecting an eye to be examined,
The ophthalmic device comprises:
An optometric unit comprising: an optometry means for examining the eye to be examined; and a face photographing means for photographing a photographed image including the face of the subject;
Adjusting means for moving the optometry part relative to the eye to be examined,
The ophthalmic apparatus control program is executed by a processor of the ophthalmic apparatus,
An arithmetic processing step for setting a region of interest based on the position of the optometry unit moved by the adjusting means in the captured image and processing an image signal in the region of interest,
An ophthalmologic apparatus control program that is executed by the ophthalmologic apparatus.
被検眼を検査する眼科装置であって、
前記被検眼を検査するための検眼手段と、顔照明光学系と、前記顔照明光学系によって照明された被検者の顔を含む撮影画像を撮影するための顔撮影手段と、を備える検眼部と、
前記被検眼に対して前記検眼部を相対移動させる調整手段と、
前記調整手段によって移動される前記検眼部の位置に基づいて前記顔照明光学系による照明条件を制御する演算処理手段と、を備えることを特徴とする眼科装置。
An ophthalmic apparatus for inspecting an eye to be examined,
An optometry comprising: an optometry means for examining the eye to be examined; a face illumination optical system; and a face photographing means for photographing a photographed image including the face of the subject illuminated by the face illumination optical system. And
Adjusting means for moving the optometry part relative to the eye to be examined;
An ophthalmologic apparatus comprising: arithmetic processing means for controlling an illumination condition by the face illumination optical system based on a position of the optometry unit moved by the adjustment means.
被検眼を検査する眼科装置であって、
前記被検眼を検査するための検眼手段と、被検者の顔を含む撮影画像を撮影するための顔撮影手段と、を備える検眼部と、
前記被検眼に対して前記検眼部を相対移動させる調整手段と、
前記撮影画像における被検者の顔の少なくとも一部に対して関心領域を設定し、前記関心領域における画像信号を処理する演算処理手段と、
を備えることを特徴とする眼科装置。
An ophthalmic apparatus for inspecting an eye to be examined,
An optometry unit comprising: an optometry means for examining the eye to be examined; and a face photographing means for photographing a photographed image including the face of the subject;
Adjusting means for moving the optometry part relative to the eye to be examined;
An arithmetic processing means for setting a region of interest for at least a part of the face of the subject in the captured image and processing an image signal in the region of interest;
An ophthalmologic apparatus comprising:
前記演算処理手段は、前記関心領域における画像信号に基づいて前記顔撮影手段による撮影条件を制御し、撮影条件の制御後に取得された撮影画像を処理して被検眼を検出することを特徴とする請求項12の眼科装置。
The arithmetic processing means controls photographing conditions by the face photographing means based on an image signal in the region of interest, and processes a photographed image obtained after controlling the photographing conditions to detect an eye to be examined. The ophthalmic apparatus according to claim 12.
JP2016112274A 2016-06-03 2016-06-03 Ophthalmic equipment and ophthalmic equipment control program Active JP6843527B2 (en)

Priority Applications (6)

Application Number Priority Date Filing Date Title
JP2016112274A JP6843527B2 (en) 2016-06-03 2016-06-03 Ophthalmic equipment and ophthalmic equipment control program
EP17173945.1A EP3260040B1 (en) 2016-06-03 2017-06-01 Ophthalmic apparatus
US15/610,919 US11039740B2 (en) 2016-06-03 2017-06-01 Ophthalmic apparatus
CN201710409814.4A CN107495919B (en) 2016-06-03 2017-06-02 Ophthalmic device
JP2020137700A JP6927389B2 (en) 2016-06-03 2020-08-18 Ophthalmic equipment
US17/319,308 US20210259538A1 (en) 2016-06-03 2021-05-13 Ophthalmic apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2016112274A JP6843527B2 (en) 2016-06-03 2016-06-03 Ophthalmic equipment and ophthalmic equipment control program

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2020137700A Division JP6927389B2 (en) 2016-06-03 2020-08-18 Ophthalmic equipment

Publications (3)

Publication Number Publication Date
JP2017217119A true JP2017217119A (en) 2017-12-14
JP2017217119A5 JP2017217119A5 (en) 2019-06-13
JP6843527B2 JP6843527B2 (en) 2021-03-17

Family

ID=60656582

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016112274A Active JP6843527B2 (en) 2016-06-03 2016-06-03 Ophthalmic equipment and ophthalmic equipment control program

Country Status (1)

Country Link
JP (1) JP6843527B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023079862A1 (en) * 2021-11-05 2023-05-11 パナソニックIpマネジメント株式会社 Imaging system, processing device, and method executed by computer in imaging system

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10216089A (en) * 1997-02-10 1998-08-18 Nidek Co Ltd Opthalmonogy device
JP2001245847A (en) * 2000-03-03 2001-09-11 Canon Inc Ophthalmological photograph apparatus
JP2003210406A (en) * 2002-01-28 2003-07-29 Canon Inc Ophthalmologic examination device
JP2005205943A (en) * 2004-01-20 2005-08-04 Omron Corp Vehicle control device and telephone usage detection method at telephone usage in driving
JP2008146172A (en) * 2006-12-06 2008-06-26 Aisin Seiki Co Ltd Eye detection device, eye detection method and program
JP2008295972A (en) * 2007-06-04 2008-12-11 Nidek Co Ltd Ophthalmologic apparatus
JP2013003647A (en) * 2011-06-13 2013-01-07 Sony Corp Information processing apparatus and program
JP2014023805A (en) * 2012-07-30 2014-02-06 Canon Inc Ophthalmologic apparatus and alignment method of the same

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10216089A (en) * 1997-02-10 1998-08-18 Nidek Co Ltd Opthalmonogy device
JP2001245847A (en) * 2000-03-03 2001-09-11 Canon Inc Ophthalmological photograph apparatus
JP2003210406A (en) * 2002-01-28 2003-07-29 Canon Inc Ophthalmologic examination device
JP2005205943A (en) * 2004-01-20 2005-08-04 Omron Corp Vehicle control device and telephone usage detection method at telephone usage in driving
JP2008146172A (en) * 2006-12-06 2008-06-26 Aisin Seiki Co Ltd Eye detection device, eye detection method and program
JP2008295972A (en) * 2007-06-04 2008-12-11 Nidek Co Ltd Ophthalmologic apparatus
JP2013003647A (en) * 2011-06-13 2013-01-07 Sony Corp Information processing apparatus and program
JP2014023805A (en) * 2012-07-30 2014-02-06 Canon Inc Ophthalmologic apparatus and alignment method of the same

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
栗田 多喜夫 他: "「顔の位置に関する事前確率の適応的な推定とIsing探索を用いたニュース映像からの顔検出の高速化」", 電子情報通信学会技術研究報告 PRMU パターン認識・メディア理解, vol. 100, no. 312, JPN6020000575, 15 September 2000 (2000-09-15), pages 43 - 50, ISSN: 0004362044 *

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023079862A1 (en) * 2021-11-05 2023-05-11 パナソニックIpマネジメント株式会社 Imaging system, processing device, and method executed by computer in imaging system

Also Published As

Publication number Publication date
JP6843527B2 (en) 2021-03-17

Similar Documents

Publication Publication Date Title
US20210259538A1 (en) Ophthalmic apparatus
JP5955193B2 (en) Ophthalmic apparatus, control method for ophthalmic apparatus, and program
JP6641730B2 (en) Ophthalmic apparatus and ophthalmic apparatus program
JP6899632B2 (en) Ophthalmologic imaging equipment
CN109310316B (en) Ophthalmic device
JP6701987B2 (en) Ophthalmic device and ophthalmic device control program
JP6634765B2 (en) Ophthalmic apparatus and ophthalmic apparatus control program
JP6843527B2 (en) Ophthalmic equipment and ophthalmic equipment control program
JP6701988B2 (en) Ophthalmic equipment
JP6927389B2 (en) Ophthalmic equipment
JP7439688B2 (en) Ophthalmology equipment and ophthalmology equipment control program
JP2022027987A (en) Ophthalmologic apparatus
JP6769091B2 (en) Ophthalmic equipment and ophthalmic equipment control program
JP6769092B2 (en) Ophthalmic equipment
JP6733292B2 (en) Ophthalmic device and ophthalmic device control program
JP2022053081A (en) Fundus camera and control method of the same
JP6862685B2 (en) Ophthalmic equipment and ophthalmic equipment control program
JP2021069415A (en) Ophthalmologic apparatus and control method of the same
JP7187769B2 (en) Ophthalmic device and ophthalmic device control program
WO2020075656A1 (en) Ophthalmic device and ophthalmic device control program
JP6930842B2 (en) Ophthalmic equipment
JP6930841B2 (en) Ophthalmic equipment
JP2023010416A (en) Ophthalmologic measuring device
JP2022034456A (en) Ophthalmologic apparatus and ophthalmologic apparatus control program
JP2022105110A (en) Ophthalmologic apparatus

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190424

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190424

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20191224

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20200114

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200210

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20200519

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200818

C60 Trial request (containing other claim documents, opposition documents)

Free format text: JAPANESE INTERMEDIATE CODE: C60

Effective date: 20200818

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20200826

C21 Notice of transfer of a case for reconsideration by examiners before appeal proceedings

Free format text: JAPANESE INTERMEDIATE CODE: C21

Effective date: 20200901

A912 Re-examination (zenchi) completed and case transferred to appeal board

Free format text: JAPANESE INTERMEDIATE CODE: A912

Effective date: 20201009

C211 Notice of termination of reconsideration by examiners before appeal proceedings

Free format text: JAPANESE INTERMEDIATE CODE: C211

Effective date: 20201013

C22 Notice of designation (change) of administrative judge

Free format text: JAPANESE INTERMEDIATE CODE: C22

Effective date: 20201020

C23 Notice of termination of proceedings

Free format text: JAPANESE INTERMEDIATE CODE: C23

Effective date: 20201215

C03 Trial/appeal decision taken

Free format text: JAPANESE INTERMEDIATE CODE: C03

Effective date: 20210126

C30A Notification sent

Free format text: JAPANESE INTERMEDIATE CODE: C3012

Effective date: 20210126

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20210224

R150 Certificate of patent or registration of utility model

Ref document number: 6843527

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250