JP4260129B2 - Compound eye photographing apparatus and adjustment method thereof - Google Patents

Compound eye photographing apparatus and adjustment method thereof Download PDF

Info

Publication number
JP4260129B2
JP4260129B2 JP2005082625A JP2005082625A JP4260129B2 JP 4260129 B2 JP4260129 B2 JP 4260129B2 JP 2005082625 A JP2005082625 A JP 2005082625A JP 2005082625 A JP2005082625 A JP 2005082625A JP 4260129 B2 JP4260129 B2 JP 4260129B2
Authority
JP
Japan
Prior art keywords
photographing
image
compound eye
subject
photographed
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2005082625A
Other languages
Japanese (ja)
Other versions
JP2006270265A (en
Inventor
徳久 須藤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Priority to JP2005082625A priority Critical patent/JP4260129B2/en
Priority to US11/377,577 priority patent/US7586534B2/en
Publication of JP2006270265A publication Critical patent/JP2006270265A/en
Application granted granted Critical
Publication of JP4260129B2 publication Critical patent/JP4260129B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Description

本発明は、複眼撮影装置及びその調整方法に関するものである。   The present invention relates to a compound eye photographing apparatus and an adjustment method thereof.

2組の撮影光学系を所定の間隔で並べて配置し、視差のある2つの画像をCCDイメージセンサ等で撮影する複眼撮影装置が知られている。このような複眼撮影装置からは、深さ方向すなわち被写体の距離情報を得ることができ、それを基に被写体の凹凸等を考慮した精度の高い画像認識に利用することができる。例えば、左右に一対の撮影光学系を並べた複眼撮影装置を用いて、視差のある2つの顔画像を撮影し、それらの顔画像から個人認証を行うことにより、集合住宅や会社内で入退室等の管理を行うセキュリティ装置として利用することができる。   2. Description of the Related Art There is known a compound eye photographing apparatus in which two sets of photographing optical systems are arranged side by side at a predetermined interval and two images with parallax are photographed with a CCD image sensor or the like. From such a compound eye photographing apparatus, depth information, that is, distance information of the subject can be obtained, and based on the information, it can be used for high-accuracy image recognition in consideration of unevenness of the subject. For example, by using a compound eye imaging device with a pair of imaging optical systems on the left and right, two face images with parallax are photographed, and personal authentication is performed from these face images, thereby entering and leaving the apartment house or company. It can be used as a security device that manages the above.

上記のような複眼撮影装置では、複数の撮影光学系の相互の光軸を精度良く調整する必要がある。例えば上記のようなセキュリティ装置として利用されると複眼撮影装置では、固定された撮影距離の一点で左右の撮影光学系の光軸が合致するように調整される。   In the compound eye photographing apparatus as described above, it is necessary to accurately adjust the optical axes of the plurality of photographing optical systems. For example, when used as a security device as described above, the compound eye photographing device is adjusted so that the optical axes of the left and right photographing optical systems coincide with each other at a fixed photographing distance.

特許文献1に記載された複眼撮影装置(立体撮影装置)では、ズームタイプの撮影レンズを搭載した各撮影光学系のそれぞれについて、焦点距離ごとの光軸のズレ量を予め測定して記憶しておき、撮影時には撮影レンズの焦点距離を検出し、その検出した焦点距離のズレ量に応じて撮影画像の切り出しエリアを制御することで、光軸のずれのない画像を得るようにしている。
特開平8−317424号公報
In the compound eye photographing apparatus (stereoscopic photographing apparatus) described in Patent Document 1, the deviation amount of the optical axis for each focal length is measured and stored in advance for each photographing optical system equipped with a zoom type photographing lens. When photographing, the focal length of the photographing lens is detected, and the cut-out area of the photographed image is controlled in accordance with the detected focal distance deviation, thereby obtaining an image free from optical axis deviation.
JP-A-8-317424

ところで、上記のようなセキュリティ装置等として利用される複眼撮影装置では、固定された撮影距離の一点で各撮影光学系の光軸が合致するように調整するが、例えば被写体として人物の顔を想定した場合には、ピント位置と同様に両目の中心で各光軸が交差するように光軸調整を行う。したがって、やや斜めから撮影される顔の両目の中心が撮影範囲の中心となり、顔の側部の頬や耳などの像が撮影範囲の端によってしまう。そして、最悪の場合にはそれらの部分が撮影範囲からはみ出してしまい、個人認証が行えなくなるといった問題がある。   By the way, in the compound eye photographing device used as the security device as described above, the optical axis of each photographing optical system is adjusted at one point of a fixed photographing distance. For example, a human face is assumed as a subject. In this case, the optical axis adjustment is performed so that the optical axes intersect at the center of both eyes as in the focus position. Therefore, the center of both eyes of the face photographed from a slight angle becomes the center of the photographing range, and an image such as a cheek or ear on the side of the face is caused by the end of the photographing range. In the worst case, these portions protrude from the shooting range, and there is a problem that personal authentication cannot be performed.

上記のような問題は、特許文献1のように画像の切り出しを行って光軸のずれを補正する場合にでも同様に生じる。なお、撮影範囲、画像の切り出し範囲を広く設定しておくことも考えられるが、画像認識処理の対象となる画像以外に余分な画像が増えて認識処理に時間がかかってしまうといった問題や、画像を切り出す範囲が撮影範囲からはみ出してしまうといった問題が生じる。   The problem as described above similarly occurs even when the image is cut out and the optical axis shift is corrected as in Patent Document 1. Although it is conceivable to set a wide shooting range and image clipping range, there may be a problem in that extra images other than the image to be subjected to the image recognition process increase and the recognition process takes time. There arises a problem that the range where the image is cut out from the shooting range.

本発明は上記課題に鑑みてなされたもので、被写体を所定の撮影範囲内に好適に収めることができる複眼撮影装置及びその調整方法を提供することを目的とする。   The present invention has been made in view of the above problems, and an object of the present invention is to provide a compound eye photographing apparatus that can suitably fit a subject within a predetermined photographing range and an adjustment method thereof.

上記目的を達成するために、請求項1記載の発明では、各撮影光学系のそれぞれについて、予め決められた被写体位置よりも撮影対象とする被写体の前後の長さの略1/2だけ遠方にずらした基準点に対応する撮影画面内の位置を中心として予め決めた切出し範囲を記憶した記憶手段と、撮影画像から対応する切出し範囲内の画像を切り出す切出し処理を各撮影光学系で撮影された撮影画像のそれぞれに行う処理手段とを備えたものである。 In order to achieve the above object, according to the first aspect of the present invention, each of the photographing optical systems is located farther from the predetermined subject position by approximately ½ of the length before and after the subject to be photographed. The storage means for storing a predetermined clipping range centered on the position in the shooting screen corresponding to the shifted reference point and the clipping process for cutting out the image within the corresponding clipping range from the shot image were shot with each shooting optical system. And processing means for each of the photographed images.

請求項2記載の発明では、記憶手段が、撮影レンズの光軸を回転中心とする撮影画面の回転方向のズレ量に基づいて回転させた切出し範囲を記憶しているようにしたものである。   According to the second aspect of the present invention, the storage means stores the cutout range rotated based on the shift amount in the rotation direction of the shooting screen about the optical axis of the shooting lens.

請求項3記載の発明では、各撮影光学系のそれぞれについて、予め決められた被写体位置よりも撮影対象とする被写体の前後の長さの略1/2だけ遠方にずらした基準点に対応する撮影画面内の位置を切出し中心として記憶した記憶手段と、撮影光学系で撮影された撮影画像に対して、前記記憶手段に記憶した対応する切出し中心から決まる切出し範囲内の画像を切り出す切出し処理を各撮影光学系から得られる撮影画像のそれぞれに行う処理手段とを備えたものである。 According to a third aspect of the present invention, for each of the photographing optical systems, photographing corresponding to a reference point shifted farther from the predetermined subject position by approximately ½ of the length before and after the subject to be photographed. A storage unit that stores the position in the screen as a cutting center, and a cutting process that cuts out an image within a cutting range determined from the corresponding cutting center stored in the storage unit with respect to a photographed image captured by the photographing optical system. And processing means for each of the photographed images obtained from the photographing optical system.

請求項4記載の発明では、記憶手段は、撮影レンズの光軸を回転中心とする撮影画面の回転方向のズレ量を各撮影光学系について記憶しており、前記画像処理手段は、各撮影光学系で撮影した画像のそれぞれについて、前記記憶手段に記憶した対応するズレ量に応じて撮影画像の切出し範囲を回転させるものである。   According to a fourth aspect of the present invention, the storage means stores, for each photographing optical system, a shift amount in the rotation direction of the photographing screen about the optical axis of the photographing lens, and the image processing means includes each photographing optical system. For each of the images photographed by the system, the cutout range of the photographed image is rotated according to the corresponding shift amount stored in the storage means.

請求項5記載の発明では、各撮影光学系の間隔を調整する機構を備えたものである。請求項6記載の発明では、撮影対象とする被写体を、人物の顔とし、基準点を、人物の顔を撮影するために予め設定される被写体位置よりも人物の顔の前後の長さの略1/2だけ遠方にずらしたものとしたものである。 According to the fifth aspect of the present invention, a mechanism for adjusting the interval between the photographing optical systems is provided. According to the sixth aspect of the present invention, the subject to be photographed is a person's face, and the reference point is an abbreviation of the length before and after the person's face from the subject position set in advance for photographing the person's face. The distance is shifted by 1/2.

請求項記載の発明では、予め決められた被写体位置よりも撮影対象とする被写体の前後の長さの略1/2だけ遠方にずらして配置したターゲットを前記各撮影光学系を用いて撮影し、撮影画面内のターゲットの位置を各撮影光学系について測定し、このターゲットの位置またはターゲット位置を中心とする切出し範囲を決定し複眼撮影装置に設定するようにしたものである。 According to the seventh aspect of the present invention, each target optical system is used to photograph a target that is arranged farther from the predetermined subject position by approximately ½ of the length before and after the subject to be photographed. The position of the target in the photographing screen is measured for each photographing optical system, and the target position or the extraction range centering on the target position is determined and set in the compound eye photographing apparatus.

請求項記載の発明では、撮影されたターゲットの回転量から撮影レンズの光軸を回転
中心とする撮影画面の回転方向のズレ量を各撮影光学系について調べ、このズレ量または
ズレ量に応じた撮影画像の切出し方向を決定し複眼撮影装置に設定するものである。
According to the eighth aspect of the present invention, the shift amount in the rotation direction of the shooting screen with the optical axis of the shooting lens as the center of rotation is checked for each shooting optical system from the rotation amount of the shot target, and according to this shift amount or shift amount. The direction in which the captured image is cut out is determined and set in the compound eye photographing apparatus.

本発明によれば、予め決められた被写体位置よりも遠方にずらした基準点に対応する撮影画面内の位置を切り出しの中心として、各撮影光学系からの撮影画像を切り出すようにしたから、各撮影光学系の光軸のずれを容易に補正できるとともに、余分の画像を少なくしながら顔等の奥行きのある被写体像を適正に所定の範囲内に収めることができる。また、予め求めた撮影レンズの光軸を回転中心とする撮影画面の回転方向のズレ量に応じて撮影画像の切出し範囲を回転させるようにしたから、撮影レンズの光軸を回転中心とする撮影画面の回転方向のズレも容易に補正することができる。   According to the present invention, the shot image from each shooting optical system is cut out with the position in the shooting screen corresponding to the reference point shifted farther than the predetermined subject position as the center of cutting. The optical axis shift of the photographing optical system can be easily corrected, and a subject image having a depth such as a face can be appropriately within a predetermined range while reducing an extra image. In addition, since the cutout range of the photographed image is rotated in accordance with the shift amount in the rotation direction of the photographing screen with the optical axis of the photographing lens obtained in advance as the rotational center, photographing with the optical axis of the photographing lens as the rotational center Deviations in the rotation direction of the screen can be easily corrected.

本発明の第1実施形態について説明する。複眼撮影装置の前面側外観を図1に示す。また、図2に後カバーを外した状態の複眼撮影装置の背面側を示す。複眼撮影装置2は、前カバー3aと後カバー3bとからなる筐体3内に、撮影光学系としての左側光学ユニット4,右側光学ユニット5,各種回路等を内蔵しており、各光学ユニット4,5によって視差のある一対の被写体画像を撮影する。この例では、撮影目的とする被写体は、例えば人物の顔となっている。   A first embodiment of the present invention will be described. The front side appearance of the compound eye photographing apparatus is shown in FIG. FIG. 2 shows the back side of the compound eye photographing apparatus with the rear cover removed. The compound eye photographing apparatus 2 includes a left optical unit 4, a right optical unit 5, various circuits and the like as a photographing optical system in a housing 3 including a front cover 3 a and a rear cover 3 b. , 5 shoot a pair of subject images with parallax. In this example, the subject to be photographed is, for example, a human face.

複眼撮影装置2は、前カバー3aをシャシーとしており、左側光学ユニット4,右側光学ユニット5,各種回路が形成された回路基板6は、前カバー3aに組み付けてある。前カバー3aの前面には、一対の開口7,8を水平(左右)方向に所定の間隔をあけて設けてあり、一方の開口7からは左側光学ユニット4の固定レンズ11を、他方の開口8からは右側光学ユニット5の固定レンズ12を露呈している。   The compound eye photographing apparatus 2 uses the front cover 3a as a chassis, and the left optical unit 4, the right optical unit 5, and the circuit board 6 on which various circuits are formed are assembled to the front cover 3a. A pair of openings 7 and 8 are provided on the front surface of the front cover 3a at a predetermined interval in the horizontal (left and right) direction. From one opening 7, the fixed lens 11 of the left optical unit 4 is provided and the other opening is provided. 8, the fixed lens 12 of the right optical unit 5 is exposed.

各光学ユニット4,5は、内向きに、すなわちそれらの各光軸が前方で交差する向きに適当の角度を持って前カバー3aに組み付けてある。このように各光学ユニット4,5を予め内向きに組み付けると、各光軸を平行となるように組み付ける場合と比べて、複眼撮影装置2に近い位置から対応可能となる。   The optical units 4 and 5 are assembled to the front cover 3a at an appropriate angle inward, that is, in a direction in which their optical axes intersect forward. As described above, when the optical units 4 and 5 are assembled inward in advance, it is possible to cope from a position close to the compound eye photographing apparatus 2 as compared with the case where the optical axes are assembled in parallel.

図3に示すように、左側光学ユニット4は、撮影レンズ14とイメージセンサ15とから構成される。撮影レンズ14は、前述の固定レンズ11と、フォーカスレンズ16とからなり、これらを鏡筒17(図2参照)内に保持してある。フォーカスレンズ16は、光軸PLに沿って移動自在としてあり、図示しない調整機構によってフォーカスレンズ16を移動することにより、所望とする撮影距離の被写体にピントを合致するように調整できる。   As shown in FIG. 3, the left optical unit 4 includes a photographing lens 14 and an image sensor 15. The photographing lens 14 includes the above-described fixed lens 11 and the focus lens 16, and these are held in a lens barrel 17 (see FIG. 2). The focus lens 16 is movable along the optical axis PL. By moving the focus lens 16 with an adjustment mechanism (not shown), the focus lens 16 can be adjusted to focus on a subject at a desired shooting distance.

イメージセンサ15は、保持板18(図2参照)に取り付けられて鏡筒17の後端に組み付けられている。このイメージセンサ15は、撮影レンズ14によって結像される被写体像を光電変換し、被写体像を画像信号として出力する。なお、撮影レンズ14のレンズ構成はどのようなものであってもよい。また、イメージセンサ15としては、CCDイメージセンサやMOS型イメージセンサなどを利用することができる。   The image sensor 15 is attached to the holding plate 18 (see FIG. 2) and assembled to the rear end of the lens barrel 17. The image sensor 15 photoelectrically converts a subject image formed by the photographing lens 14 and outputs the subject image as an image signal. The lens configuration of the taking lens 14 may be any. As the image sensor 15, a CCD image sensor, a MOS image sensor, or the like can be used.

イメージセンサ15からの画像信号は、信号処理部19に送られる。信号処理部19は、相関二重サンプリング(CDS)回路,増幅器,A/D変換器等から構成してあり、入力される画像信号に対してノイズを除去するための相関二重サンプリング処理,増幅処理,画像信号を画像データに変換するデジタル変換を行う。この信号処理部19によって、左側光学ユニット4で撮影された画像(以下、左側撮影画像という)の画像データが出力される。   The image signal from the image sensor 15 is sent to the signal processing unit 19. The signal processing unit 19 includes a correlated double sampling (CDS) circuit, an amplifier, an A / D converter, and the like, and a correlated double sampling process and amplification for removing noise from an input image signal. Processing and digital conversion to convert image signals into image data. The signal processing unit 19 outputs image data of an image captured by the left optical unit 4 (hereinafter referred to as a left captured image).

右側光学ユニット5は、固定レンズ12及び光軸PRに沿って移動自在なフォーカスレンズ26からなる撮影レンズ24と、イメージセンサ25とから構成され、各レンズ12,26は、鏡筒27(図2参照)内に保持してあり、イメージセンサ25は、保持板28(図2参照)に取り付けられて鏡筒27の後端に組み付けてある。この右側光学ユニット5の各部は、光学ユニット12のものと同じである。   The right optical unit 5 includes a photographic lens 24 including a fixed lens 12 and a focus lens 26 movable along the optical axis PR, and an image sensor 25. Each of the lenses 12 and 26 includes a lens barrel 27 (FIG. 2). The image sensor 25 is attached to a holding plate 28 (see FIG. 2) and assembled to the rear end of the lens barrel 27. Each part of the right optical unit 5 is the same as that of the optical unit 12.

信号処理部29は、前述の信号処理部19と同様に画像信号に処理を行い、右側光学ユニット5で撮影された画像(以下、右側撮影画像という)を画像データとして出力する。   The signal processing unit 29 processes the image signal in the same manner as the signal processing unit 19 described above, and outputs an image captured by the right optical unit 5 (hereinafter referred to as a right captured image) as image data.

バス31を介して各信号処理部19,29、CPU32、切出し処理部33、認識処理部34、表示部35、インタフェース回路36が相互に接続されており、これら各部の相互間でデータ授受,CPU32から各部に対する指示の入力が可能になっている。   The signal processing units 19 and 29, the CPU 32, the cut-out processing unit 33, the recognition processing unit 34, the display unit 35, and the interface circuit 36 are connected to each other via the bus 31, and these units exchange data and the CPU 32. It is possible to input instructions to each unit.

CPU32は、複眼撮影装置2の各部を制御する。CPU32には、ROM32a,RAM32b,補正メモリ32cが接続されている。ROM32aには、各種シーケンスを実行するためのプログラムを書き込んであり、このプログラムにしたがってCPU32は各部を制御する。RAM32bは、撮影シーケンスなどを実行する際に必要なデータを一時的に記憶するワークメモリとして利用される。   The CPU 32 controls each part of the compound eye photographing apparatus 2. A ROM 32a, a RAM 32b, and a correction memory 32c are connected to the CPU 32. A program for executing various sequences is written in the ROM 32a, and the CPU 32 controls each unit in accordance with this program. The RAM 32b is used as a work memory that temporarily stores data necessary for executing a shooting sequence or the like.

補正メモリ32cには、光軸のずれを補正するために撮影画像を切り出す範囲を規定した切出し範囲が予め書き込まれている。切出し範囲は、左側用と、右側用とがあり、これらは複眼撮影装置2に接続される調整装置40によって予め決められて補正メモリ32cに書き込まれる。この補正メモリ32cの切出し範囲は、CPU32によって補正メモリ33から読み出されて切出し処理部33にセットされる。補正メモリ32cとしては、データの保持動作が不要であるとともに、データの書き換えが可能な例えばフラッシュメモリを用いている。このようにデータの書き換えを可能とすること、切出し範囲を再設定することができるようにしてある。   In the correction memory 32c, a cutout range that prescribes a cutout range of the shot image for correcting the deviation of the optical axis is written in advance. The cut-out range is for the left side and for the right side, and these are determined in advance by the adjusting device 40 connected to the compound eye photographing device 2 and written in the correction memory 32c. The cutout range of the correction memory 32 c is read from the correction memory 33 by the CPU 32 and set in the cutout processing unit 33. As the correction memory 32c, for example, a flash memory which does not require a data holding operation and can rewrite data is used. In this way, it is possible to rewrite data and to reset the extraction range.

切出し処理部33は、各信号処理部19,29から入力される画像データにデジタル処理を行うことで、撮影画像の一部を切り出す切出し処理を行う。この切出し処理では、左側撮影画像から左側用切出し範囲内の画像を切り出し、右側撮影画像から右側用切出し範囲内の画像を切り出す。これにより、切出し処理部33は、各光学ユニット4,5の光軸のずれを補正した左側切出し画像と右側切出し画像を生成する.   The cut-out processing unit 33 performs cut-out processing to cut out a part of the captured image by performing digital processing on the image data input from the signal processing units 19 and 29. In this cutout process, an image in the left cutout range is cut out from the left shot image, and an image in the right cutout range is cut out from the right shot image. As a result, the cutout processing unit 33 generates a left cutout image and a right cutout image in which the optical axis shifts of the optical units 4 and 5 are corrected.

認識処理部34は、切出し処理部33からの各切出し画像の切出し画像データが入力される。認識処理部34は、これら切出し画像データを用い、撮影された被写体の顔の認識処理を行い、例えば認識された顔が予め登録されているものと一致するか否かを判定する。表示部35は、認識処理部34の判定結果を表示する。   The recognition processing unit 34 receives the cut-out image data of each cut-out image from the cut-out processing unit 33. The recognition processing unit 34 performs recognition processing of the face of the photographed subject using these cut-out image data, and determines, for example, whether or not the recognized face matches that registered in advance. The display unit 35 displays the determination result of the recognition processing unit 34.

インタフェース回路36は、各切出し範囲を複眼撮影装置2に設定する際に、外部の調整装置40が接続される。調整装置40は、後述する調整用ターゲットマークを各光学ユニット4,5でそれぞれ撮影して各信号処理部19,29から得られる左側撮影画像、右側撮影画像をインタフェース回路36を介して取得し、これらを解析することにより左側,右側用切出し範囲をそれぞれ算出する。そして、調整装置40は、算出した各切出し範囲をインタフェース回路36,CPU30を介して補正メモリ32cに書き込む。   The interface circuit 36 is connected to an external adjustment device 40 when setting each clipping range in the compound-eye imaging device 2. The adjusting device 40 shoots an adjustment target mark, which will be described later, with each of the optical units 4 and 5, and obtains a left photographic image and a right photographic image obtained from each signal processing unit 19 and 29 via the interface circuit 36, The left and right cutout ranges are calculated by analyzing these. Then, the adjustment device 40 writes the calculated cutout ranges in the correction memory 32c via the interface circuit 36 and the CPU 30.

図4に一例を示すように、各光学ユニット4,5は、それら自体の組み付けの精度、前カバー3aへの組み付け精度等から無調整状態では各光学ユニット4,5の光軸PL,PRの向きは所定のものとはなっていない。なお、図4(a)は、左右(水平)方向における各光軸の状態を、図4(b)は上下(垂直)方向の各光軸の状態を示してある。   As shown in FIG. 4, the optical units 4 and 5 have their optical axes PL and PR of the optical units 4 and 5 in an unadjusted state because of their accuracy of assembly, accuracy of assembly to the front cover 3a, and the like. The direction is not predetermined. 4A shows the state of each optical axis in the left and right (horizontal) direction, and FIG. 4B shows the state of each optical axis in the up and down (vertical) direction.

切出し範囲を決定する際には、複眼撮影装置2に調整装置40を接続した状態で基準点に置かれた調整用ターゲットマークTgを各光学ユニット4,5で撮影する。調整用ターゲットマークTgは、例えば図5に示すように板部材42に描かれた水平方向のラインTghと垂直方向のラインTgvとからなる十字形状のマークとなっている。なお、調整用ターゲットマークTgは、この例では基準点がわかるのであれば、上記のような形状でなくてもよい。例えば適当な大きさの円形であってもよい。   When the cutout range is determined, the adjustment target mark Tg placed at the reference point is photographed by the optical units 4 and 5 with the adjustment device 40 connected to the compound eye photographing device 2. The adjustment target mark Tg is, for example, a cross-shaped mark composed of a horizontal line Tgh and a vertical line Tgv drawn on the plate member 42 as shown in FIG. Note that the adjustment target mark Tg does not have to have the above-described shape as long as the reference point is known in this example. For example, it may be a circular shape having an appropriate size.

調整用ターゲットマークTgが配される基準点は、図4に示されるように、各光学ユニット4,5のレンズ11,12の中心を結んだ基線Lbと直交する中心軸Lc上で、被写体を撮影すべき位置として予め決められた被写体位置Spよりも少し後方にずらした位置としてある。このようにすることで、余分な背景画像を少なくしながら、顔の画像が切出し範囲にバランスよく収まるようにしている。基準点と被写体位置Spとの距離は、被写体の前後の長さの半分程度とするのがよく、被写体を人物の顔とするこの例では、人物の顔の前後の長さが20cm程度なので、10cm程度としてある。   As shown in FIG. 4, the reference point on which the adjustment target mark Tg is arranged is the object on the central axis Lc perpendicular to the base line Lb connecting the centers of the lenses 11 and 12 of the optical units 4 and 5. The position is shifted slightly backward from the subject position Sp that is predetermined as a position to be photographed. In this way, the face image can be well balanced in the cutout range while reducing the extra background image. The distance between the reference point and the subject position Sp is preferably about half of the length before and after the subject. In this example in which the subject is a person's face, the length before and after the person's face is about 20 cm. About 10 cm.

調整用ターゲットマークTgを撮影した際の撮影画面と切出し範囲の関係を図6に示す。図6(a)に示すように、調整装置40は、左側光学ユニット4の撮影画面45において、調整ターゲットマークTgの像Tgiの十字形状の交差部分を左側切出し中心CLとする。この左側切出し中心CLは、基準点に対応する左側光学ユニット4の撮影画面45内における位置となる。そして、撮影画面45の中心OLを原点として、左側切出し中心CLの座標(ΔXL0,ΔYL0)を左側画像データから算出し、その座標(ΔXL0,ΔYL0)と矩形状の左側用切出し範囲FLの各辺の長さA,Bとに基づいて、左側用切出し範囲FLの各頂点の座標(XL1,YL1),(XL2,YL1),(XL2,YL2),(XL1,YL2)を算出する。   FIG. 6 shows the relationship between the shooting screen and the cutout range when shooting the adjustment target mark Tg. As illustrated in FIG. 6A, the adjustment device 40 sets the cross-shaped intersection of the image Tgi of the adjustment target mark Tg as the left cut-out center CL on the shooting screen 45 of the left optical unit 4. The left cut-out center CL is a position in the shooting screen 45 of the left optical unit 4 corresponding to the reference point. Then, the coordinates (ΔXL0, ΔYL0) of the left extraction center CL are calculated from the left image data with the center OL of the photographing screen 45 as the origin, and each side of the coordinates (ΔXL0, ΔYL0) and the rectangular left extraction range FL is calculated. The coordinates (XL1, YL1), (XL2, YL1), (XL2, YL2), (XL1, YL2) of the vertices of the left cutout range FL are calculated on the basis of the lengths A and B.

一方、右側用切出し範囲については、図6(b)に示すように、光学ユニット5の撮影画面46上において、その中心OLを原点として調整ターゲットマークTgの像Tgiの十字形状の交差部分を右側切出し中心CRとし、その座標(ΔXR0,ΔYR0)と矩形状の切出し範囲FRの各辺の長さA,Bとに基づいて、右側用切出し範囲FRの各頂点の座標(XR1,YR1),(XR2,YR1),(XR2,YR2),(XR1,YR2)を算出する。   On the other hand, as shown in FIG. 6 (b), the right-side cutout range has a cross-shaped intersection of the image Tgi of the adjustment target mark Tg with the center OL as the origin on the photographing screen 46 of the optical unit 5. Based on the coordinates (ΔXR0, ΔYR0) and the lengths A and B of each side of the rectangular cutout area FR, the coordinates (XR1, YR1), ( XR2, YR1), (XR2, YR2), (XR1, YR2) are calculated.

このように求められる各切出し範囲FL,FRは、図4中の符号PLc,PRcを光軸として撮影された一対の画像を切り出すものとなる。なお、撮影画面の中心は、各撮影画像をライン数、1ライン中の画素数(画像データの個数)とから求めることができる。   The cut-out ranges FL and FR obtained in this way cut out a pair of images photographed using the symbols PLc and PRc in FIG. 4 as optical axes. The center of the shooting screen can be obtained from the number of lines of each shot image and the number of pixels in one line (number of image data).

図7に模式的に示すように、補正メモリ32cには、上記のように調整装置40で算出される左側用切出し範囲FLが上記のように調整装置40で算出さ各頂点の座標(XL1,YL1),(XL2,YL1),(XL2,YL2),(XL1,YL2)で、また右側用切出し範囲FRが各頂点の座標(XR1,YR1),(XR2,YR1),(XR2,YR2),(XR1,YR2)で書き込まれる。   As schematically shown in FIG. 7, in the correction memory 32c, the left-side cutout range FL calculated by the adjusting device 40 as described above is calculated by the adjusting device 40 as described above, and the coordinates (XL1, YL1), (XL2, YL1), (XL2, YL2), (XL1, YL2), and the right cutout range FR is the coordinates (XR1, YR1), (XR2, YR1), (XR2, YR2) of each vertex , (XR1, YR2).

次に上記構成の作用について説明する。調整時には、複眼撮影装置2に調整装置40を接続した状態で、複眼撮影装置2で撮影すべき被写体位置Spの少し後方にずらした基準位置に調整用ターゲットマークTgを配し、この調整用ターゲットマークTgを各光学ユニット4,5で撮影する。   Next, the operation of the above configuration will be described. At the time of adjustment, with the adjustment device 40 connected to the compound eye photographing device 2, the adjustment target mark Tg is arranged at a reference position shifted slightly behind the subject position Sp to be photographed by the compound eye photographing device 2, and this adjustment target The mark Tg is photographed by the optical units 4 and 5.

各光学ユニット4.5で撮影された各撮影画像は、インタフェース回路36を介して調整装置40に送られて、それぞれ解析される。これにより、調整対象となっている複眼撮影装置2について、左側用切出し範囲FLの各頂点の座標(XL1,YL1),(XL2,YL1),(XL2,YL2),(XL1,YL2)と、右側切出し範囲FRの各頂点の座標(XR1,YR1),(XR2,YR1),(XR2,YR2),(XR1,YR2)とが算出され、これらの各座標が調整装置40から、インタフェース回路36,CPU30を介して補正メモリ32cに送られて書き込まれる。   Each photographed image photographed by each optical unit 4.5 is sent to the adjustment device 40 via the interface circuit 36 and analyzed. Thereby, for the compound eye photographing apparatus 2 to be adjusted, the coordinates (XL1, YL1), (XL2, YL1), (XL2, YL2), (XL1, YL2) of each vertex of the left cutout range FL, The coordinates (XR1, YR1), (XR2, YR1), (XR2, YR2), (XR1, YR2) of each vertex of the right cutout range FR are calculated, and these coordinates are obtained from the adjustment device 40 from the interface circuit 36. , Sent to the correction memory 32c via the CPU 30 and written therein.

上記のように各切出し範囲が設定されて調整が完了した複眼撮影装置2が所定の場所に設置されて、顔を使った例えば個人認証に用いられる。複眼撮影装置2の電源がオンとされたときに、切出し処理部33に補正メモリ32cから読み出された各切出し範囲FL,FRの各頂点の座標がセットされる。   As described above, the compound eye photographing apparatus 2 in which each cutout range is set and adjustment is completed is installed at a predetermined location, and is used for personal authentication using a face, for example. When the power of the compound eye photographing apparatus 2 is turned on, the coordinates of the vertices of the extraction ranges FL and FR read from the correction memory 32c are set in the extraction processing unit 33.

個人認証を受ける被認証者は、顔を被写体位置Spとなるように姿勢を調整して複眼撮影装置2による撮影を受ける。例えば図示しないセンサ等によって、被写体位置Spに被写体があることを検出すると複眼撮影装置2は、左側光学ユニット4,右側光学ユニット5をそれぞれ駆動して撮影する。   The person to be authenticated who receives the personal authentication adjusts the posture so that the face becomes the subject position Sp, and receives the image taken by the compound eye photographing apparatus 2. For example, when the presence of a subject at the subject position Sp is detected by a sensor (not shown) or the like, the compound eye photographing apparatus 2 drives the left optical unit 4 and the right optical unit 5 to perform photographing.

左側光学ユニット4の撮影で得られる左側撮影画像と、右側光学ユニット5の撮影で得られる右側撮影画像とは、それぞれ信号処理部19,29を介して画像データに変換された後に切出し処理部33に送られる。切出し処理部33では、まず左側撮影画像の画像データのうちから左側用切出し範囲FL内の画像データを取り出すことによって左側撮影画像の切出しを行う。次に、右側撮影画像の画像データのうちから右側用切出し範囲FR内の画像データを取り出すことによって右側撮影画像の切出しを行う。これにより、被写体位置Spよりも後方にずらした基準点で各光学ユニット4,5の光軸が交差するように補正された左側切出し画像と、右側切出し画像とが各撮影画像から切り出される。   The left-side captured image obtained by photographing with the left optical unit 4 and the right-side photographed image obtained by photographing with the right optical unit 5 are converted into image data via the signal processing units 19 and 29, respectively, and then the cut-out processing unit 33. Sent to. In the cutout processing unit 33, the left shot image is cut out by first extracting the image data in the left cutout range FL from the image data of the left shot image. Next, the right photographic image is cut out by extracting image data within the right cutout range FR from the image data of the right photographic image. As a result, the left cut-out image and the right cut-out image corrected so that the optical axes of the optical units 4 and 5 intersect at the reference point shifted backward from the subject position Sp are cut out from each captured image.

上記のように切り出された左側切出し画像と、右側切出し画像の画像データがそれぞれ認識処理部34に送られる。そして、この認識処理部34によって、入力される各切出し画像の切出し画像データを用いて撮影された被認証者の顔の認識処理が行われ、それが予め登録されているものと一致するか否かの判定がされ、表示部35に判定結果が表示される。   Image data of the left cut image and right cut image cut out as described above is sent to the recognition processing unit 34. Then, the recognition processing unit 34 performs recognition processing of the face of the person to be authenticated photographed using the cut-out image data of each input cut-out image, and whether or not it matches the pre-registered one. And the determination result is displayed on the display unit 35.

上記実施形態では、調整装置40によって各切出し範囲を算出し、これを複眼撮影装置に設定したが、例えば図8に示すように、各切出し中心の座標を補正メモリ32cに書き込んでおき、それら座標に基づいて複眼撮影装置2の例えばCPU30によって各切出し範囲を求めるようにしてもよい。   In the above-described embodiment, each cutting range is calculated by the adjustment device 40 and set in the compound eye photographing device. For example, as shown in FIG. 8, the coordinates of each cutting center are written in the correction memory 32c, and these coordinates are set. Each cutout range may be obtained by, for example, the CPU 30 of the compound eye photographing apparatus 2 based on the above.

次に、イメージセンサ(撮影画面)の撮影レンズの光軸まわりの回転についても補正する第2実施形態について説明する。なお、以下に説明する他は、第1実施形態と同じであり、実質的に同じ構成部材には同一の符号を付してその説明を省略する。   Next, a description will be given of a second embodiment in which the rotation around the optical axis of the imaging lens of the image sensor (imaging screen) is also corrected. In addition, except being demonstrated below, it is the same as 1st Embodiment, The same code | symbol is attached | subjected to the substantially same structural member, and the description is abbreviate | omitted.

調整装置40は、図9(a)に示すように、撮影画面45内の調整用ターゲットマークTgを左側光学ユニット4で撮影して得られる左側撮影画像を解析し、調整用ターゲットマークTgの像Tgiの十字形状の交差部分を左側切出し中心CLとし、この左側切出し中心CLの座標(ΔXL0,ΔYL0)を求める。また、調整用ターゲットマークTgの例えば水平方向のラインTghの左側撮影画像上での傾きΔθLを求める。この傾きΔθLが左側光学ユニット4の撮影画面の回転方向のズレ量になる。そして、左側切出し中心CLの座標(ΔXL0,ΔYL0)を中心に、長さA,Bの矩形状で、左側切出し中心CLを中心に傾きΔθLだけ回転させた左側用切出し範囲FLの各頂点の座標(XL1,YL1),(XL2,YL2),(XL3,YL3),(XL4,YL4)を求める。   As shown in FIG. 9A, the adjustment device 40 analyzes the left-side photographed image obtained by photographing the adjustment target mark Tg in the photographing screen 45 with the left optical unit 4, and the image of the adjustment target mark Tg. The crossed portion of Tgi is defined as the left cut-out center CL, and the coordinates (ΔXL0, ΔYL0) of the left cut-out center CL are obtained. Further, the inclination ΔθL of the adjustment target mark Tg on the left-side photographed image, for example, the horizontal line Tgh is obtained. This inclination ΔθL is a shift amount in the rotation direction of the photographing screen of the left optical unit 4. Then, the coordinates of the vertices of the left cutout range FL, which are rectangular in length A and B around the left cutout center CL (ΔXL0, ΔYL0) and rotated by the inclination ΔθL around the left cutout center CL. (XL1, YL1), (XL2, YL2), (XL3, YL3), (XL4, YL4) are obtained.

同様に、図9(b)に示すように、調整用ターゲットマークTgを右側光学ユニット5で撮影した右側撮影画像を解析し、右側切出し中心CRの座標(ΔXR0,ΔYR0)と、右側光学ユニット5の撮影画面の回転方向のズレ量である調整用ターゲットマークTgの水平方向のラインTghの右側撮影画像上での傾きΔθRを求める。そして、右側切出し中心CRの座標(ΔXR0,ΔYR0)を中心に、長さA,Bの矩形状で、右側切出し中心CRを中心に傾きΔθRだけ回転させた右側用切出し範囲FRの各頂点の座標(XR1,YR1),(XR2,YR2),(XR3,YR3),(XR4,YR4)を求める。   Similarly, as shown in FIG. 9 (b), the right-side photographed image obtained by photographing the adjustment target mark Tg with the right optical unit 5 is analyzed, and the coordinates (ΔXR0, ΔYR0) of the right cut-out center CR and the right optical unit 5 are analyzed. The inclination ΔθR of the horizontal line Tgh of the adjustment target mark Tg on the right-side photographed image, which is the amount of shift in the rotational direction of the photographing screen, is obtained. Then, the coordinates of the vertices of the right-side cutout range FR that is a rectangle of lengths A and B around the right-side cutout center CR (ΔXR0, ΔYR0) and rotated by the inclination ΔθR around the right-side cutout center CR. (XR1, YR1), (XR2, YR2), (XR3, YR3), (XR4, YR4) are obtained.

図10に模式的に示すように、補正メモリ32cには、上記のように求められる左側用切出し範囲FLの各頂点を示す座標(XL1,YL1),(XL2,YL2),(XL3,YL3),(XL4,YL4)と、右側用切出し範囲FRの各頂点の座標(XR1,YR1),(XR2,YR2),(XR3,YR3),(XR4,YR4)とが調整装置40によって書き込まれる。   As schematically shown in FIG. 10, the correction memory 32c has coordinates (XL1, YL1), (XL2, YL2), (XL3, YL3) indicating the vertices of the left cutout range FL obtained as described above. , (XL4, YL4) and the coordinates (XR1, YR1), (XR2, YR2), (XR3, YR3), (XR4, YR4) of each vertex of the right cutout range FR are written by the adjusting device 40.

切出し処理部34は、補正メモリ32cに書き込まれている左側用切出し範囲FLの各頂点に囲まれる範囲の画像を左側撮影画像から切り出し、左側切出し画像として出力する。同様に、切出し処理部34は、右側用切出し範囲FLの各頂点に囲まれる範囲の画像を右側撮影画像から切り出し、右側切出し画像として出力する。なお、各切出し画像を出力する際には、切出し画像が傾いていないように回転処理を行う。すなわち、切出し後に、左側切出し画像は、角度「−ΔθL」だけ回転され、右側切出し画像は、角度「−ΔθR」だけ回転される。このような回転処理は、補正メモリ32cに、調整装置40で求めた傾きΔθR,ΔθLを書き込んでおくことで容易に行える。   The cut-out processing unit 34 cuts out an image of a range surrounded by each vertex of the left-side cut-out range FL written in the correction memory 32c from the left-side shot image and outputs it as a left-side cut-out image. Similarly, the cutout processing unit 34 cuts out an image of a range surrounded by each vertex of the right cutout range FL from the right shot image and outputs it as a right cutout image. Note that when outputting each cutout image, a rotation process is performed so that the cutout image is not inclined. That is, after cropping, the left cropped image is rotated by an angle “−ΔθL”, and the right cropped image is rotated by an angle “−ΔθR”. Such rotation processing can be easily performed by writing the inclinations ΔθR and ΔθL obtained by the adjustment device 40 in the correction memory 32c.

この第2実施形態によれば、撮影レンズ14,24の光軸PL,PRを回転軸にしてイメージセンサ15,25が回転して撮影画面が正規の位置からずれていても、その回転を打ち消すように補正することができ、光軸PL,PRを回転軸にイメージセンサ15,25を回転させる機構を不要とすることができる。   According to the second embodiment, even if the image sensors 15 and 25 are rotated around the optical axes PL and PR of the photographing lenses 14 and 24 and the photographing screen is shifted from the normal position, the rotation is canceled. Thus, the mechanism for rotating the image sensors 15 and 25 about the optical axes PL and PR as the rotation axes can be made unnecessary.

上記のように光軸まわりのイメージセンサの回転を補正する場合では、図11に示すように、各切出し中心CL,CRの座標と、傾きΔθR,ΔθLを補正メモリ32cに書き込んでおき、それら座標に基づいて複眼撮影装置2の例えばCPU30によって各切出し範囲を求めるようにしてもよい。   In the case of correcting the rotation of the image sensor around the optical axis as described above, as shown in FIG. 11, the coordinates of the cutting centers CL and CR and the inclinations ΔθR and ΔθL are written in the correction memory 32c, and these coordinates are stored. Each cutout range may be obtained by, for example, the CPU 30 of the compound eye photographing apparatus 2 based on the above.

図12に示す第3実施形態は、各光学ユニット4,5をその光軸PL,PRが平行となるように前カバー3aに組み付けるものである。このように各光学ユニット4,5を組み付けた場合にも、上記各実施形態と同様に各切出し範囲を設定して調整することができる。また、シャシーとして前カバー3aに各光学ユニット4,5を平行に取り付けるため組み立てが簡単であるという利点がある。   In the third embodiment shown in FIG. 12, the optical units 4 and 5 are assembled to the front cover 3a so that their optical axes PL and PR are parallel to each other. Even when the optical units 4 and 5 are assembled in this way, the respective cutout ranges can be set and adjusted as in the above embodiments. Further, since the optical units 4 and 5 are attached in parallel to the front cover 3a as a chassis, there is an advantage that assembly is easy.

図13に示す第4実施形態は、各光学ユニットの間隔を調整する調整機構を複眼撮影装置に設けたものである。左側光学ユニット4は、取付板51に取り付けられ、この取付板51をシャシー53の背面側に取り付けてある。左側光学ユニット4の鏡筒17は、その前部がシャシー53に設けた開口54に挿入され、固定レンズが前方に露呈される。開口54は、鏡筒17の外径よりも水平方向に長くしてある。これにより、左側光学ユニット4を取付板51とともに水平方向に移動自在としてある。同様に、右側光学ユニット5は、シャシー53の背面側に取り付けた取付板61に取り付けられ、その鏡筒が開口64に挿入してあり、取付板61とともに水平方向に移動自在となっている。   In the fourth embodiment shown in FIG. 13, an adjustment mechanism for adjusting the interval between the optical units is provided in the compound eye photographing apparatus. The left optical unit 4 is attached to an attachment plate 51, and this attachment plate 51 is attached to the back side of the chassis 53. The front of the lens barrel 17 of the left optical unit 4 is inserted into an opening 54 provided in the chassis 53, and the fixed lens is exposed forward. The opening 54 is longer in the horizontal direction than the outer diameter of the lens barrel 17. Thereby, the left optical unit 4 can be moved in the horizontal direction together with the mounting plate 51. Similarly, the right optical unit 5 is attached to an attachment plate 61 attached to the rear side of the chassis 53, and its lens barrel is inserted into the opening 64, and is movable in the horizontal direction together with the attachment plate 61.

シャシー53の下部には、水平方向に伸びた調整軸67を回動自在に組み付けてある。この調整軸67は、左側光学ユニット4の下方の部分が外周に雄ヘリコイドを形成した左側ヘリコイド部67aとなっており、右側光学ユニット5の下方の部分が左側ヘリコイド部67aとは逆向きの雄ヘリコイドを形成した右側ヘリコイド部67bとなっている。調整軸67の一端には、外部からの操作で調整軸67を回動するためのツマミ67cを一体に設けてある。   An adjustment shaft 67 extending in the horizontal direction is rotatably attached to the lower portion of the chassis 53. The adjustment shaft 67 is a left helicoid portion 67a in which a lower portion of the left optical unit 4 forms a male helicoid on the outer periphery, and a lower portion of the right optical unit 5 is a male opposite to the left helicoid portion 67a. It is the right side helicoid part 67b which formed the helicoid. One end of the adjustment shaft 67 is integrally provided with a knob 67c for rotating the adjustment shaft 67 by an external operation.

また、シャシー53の下部には、移動部材68,69が水平方向に移動自在に取り付けてあり、移動部材68,69のそれぞれには調整軸67を通す軸孔を設けてある。移動部材68,69の各軸孔の内周面には、それぞれ雌ヘリコイドを設けてあり、移動部材68は、その軸孔が左側ヘリコイド部67aに螺合した状態とされ、移動部材69は、その軸孔が右側ヘリコイド部67bに螺合した状態とされる。上記の取付板51は、その下部の連結片51aを介して移動部材68に、取付板61は、その下部の連結片61aを介して移動部材69にそれぞれ連結にしてある。   Further, below the chassis 53, moving members 68 and 69 are attached so as to be movable in the horizontal direction, and each of the moving members 68 and 69 is provided with a shaft hole through which the adjustment shaft 67 is passed. Female helicoids are provided on the inner peripheral surfaces of the respective shaft holes of the moving members 68 and 69. The moving member 68 is in a state where the shaft hole is screwed into the left helicoid portion 67a. The shaft hole is screwed into the right helicoid portion 67b. The mounting plate 51 is connected to the moving member 68 via the lower connecting piece 51a, and the mounting plate 61 is connected to the moving member 69 via the lower connecting piece 61a.

上記のように構成することにより、ツマミ67cを操作して調整軸67を任意の方向に回転させると、移動部材68,69とともに、取付板51,61に取り付けられた各光学ユニット4,5が水平方向に移動する。この移動の際に、左側ヘリコイド部67aと右側ヘリコイド部67bの雄ヘリコイドの向きを互いに逆にしてあるから、調整軸67の回転方向に応じて、各光学ユニット4,5が互いに近づく方向、あるいは離れる方向に移動する。これにより、各光学ユニット4,5の間隔を調整することができ、被写体までの距離、被写体の大きさ等に応じて、各光学ユニット4,5を最適な間隔、被写体を臨む角度に調整することができる。   With the above configuration, when the knob 67c is operated to rotate the adjustment shaft 67 in an arbitrary direction, the optical units 4, 5 attached to the attachment plates 51, 61 are moved together with the moving members 68, 69. Move horizontally. In this movement, the directions of the male helicoids of the left helicoid portion 67a and the right helicoid portion 67b are reversed from each other, so that the optical units 4 and 5 approach each other according to the rotation direction of the adjustment shaft 67, or Move away. Thereby, the interval between the optical units 4 and 5 can be adjusted, and the optical units 4 and 5 are adjusted to the optimum interval and the angle facing the subject according to the distance to the subject, the size of the subject, and the like. be able to.

なお、第4実施形態では、各光学ユニット4,5を互いに逆向きに移動したが、一方の光学ユニットを固定しておき、他方の光学ユニットだけを移動するようにしてもよい。   In the fourth embodiment, the optical units 4 and 5 are moved in opposite directions, but one optical unit may be fixed and only the other optical unit may be moved.

上記各実施形態では、複眼撮影装置での撮影で人物の顔を認識する例について説明したが、認識対象は人物の顔に限るものではなく、また種々の用途の複眼撮影装置に利用できる。また、上記各実施形態では、調整時に調整装置を複眼撮影装置に接続するようにしているが、調整装置の機能を複眼撮影装置に内蔵して、複眼撮影装置だけで調整を行えるようにすることもできる。さらに、複眼装置の調整は、調整装置を携帯可能にしたり、前述のように内蔵としたりすれば、複眼撮影装置を実際の設置場所に設置した状態で調整することができる。   In each of the above-described embodiments, an example of recognizing a person's face by photographing with a compound eye photographing apparatus has been described. However, the recognition target is not limited to a person's face, and can be used for a compound eye photographing apparatus for various purposes. Further, in each of the above embodiments, the adjustment device is connected to the compound eye photographing device at the time of adjustment, but the function of the adjustment device is built in the compound eye photographing device so that adjustment can be performed only by the compound eye photographing device. You can also. Further, the compound eye apparatus can be adjusted in a state in which the compound eye photographing apparatus is installed at an actual installation location by making the adjustment apparatus portable or built in as described above.

本発明を実施した複眼撮影装置の前面側を示す斜視図である。It is a perspective view which shows the front side of the compound eye imaging device which implemented this invention. 後カバーを外した状態での複眼撮影装置の背面側を示す斜視図である。It is a perspective view which shows the back side of the compound eye imaging device in the state which removed the back cover. 複眼撮影装置の電気的な構成を示すブロック図である。It is a block diagram which shows the electrical structure of a compound eye imaging device. 各光学ユニットの光軸のずれと調整用ターゲットマークの位置を示す説明図である。It is explanatory drawing which shows the shift | offset | difference of the optical axis of each optical unit, and the position of the adjustment target mark. 調整用ターゲットマークの形状の一例を示すものである。An example of the shape of the adjustment target mark is shown. 撮影画面と切出し範囲の関係を示す説明図である。It is explanatory drawing which shows the relationship between an imaging | photography screen and a cutting-out range. 補正メモリの記憶内容を示す説明図である。It is explanatory drawing which shows the memory content of a correction memory. 補正メモリに切出し中心を記憶した例を示す説明図であるIt is explanatory drawing which shows the example which memorize | stored the cutting center in the correction memory. 撮影画面の光軸を中心とする回転を補正する例での撮影画面と切出し範囲の関係を示す説明図である。It is explanatory drawing which shows the relationship between the imaging | photography screen and the cutting-out range in the example which correct | amends the rotation centering on the optical axis of an imaging | photography screen. 撮影画面の光軸を中心とする回転を補正する例での補正メモリの記憶内容を示す説明図である。It is explanatory drawing which shows the memory content of the correction memory in the example which correct | amends the rotation centering on the optical axis of an imaging | photography screen. 補正メモリに切出し中心と撮影画面の光軸を中心とする回転のズレを記憶した例を示すものである。The example which memorize | stored the shift | offset | difference of rotation centering on the optical axis of the cutting center and the imaging | photography screen in the correction memory is shown. 各光学ユニットの光軸を平行となるように組み付ける例を示すものである。An example in which the optical axes of the respective optical units are assembled so as to be parallel is shown. 各光学ユニットの間隔を調整する機構を備えた例を示すものである。The example provided with the mechanism in which the space | interval of each optical unit is adjusted is shown.

符号の説明Explanation of symbols

2 複眼撮影装置
4,5 光学ユニット
14,24 撮影レンズ
15,25 イメージセンサ
32c 補正メモリ
33 切出し処理部
40 調整部
Tg 調整用ターゲットマーク
CL,CR 切出し中心
FL,FR 切出し範囲
2 Compound eye photographing device 4, 5 Optical unit 14, 24 Image taking lens 15, 25 Image sensor 32c Correction memory 33 Cutting processing unit 40 Adjustment unit Tg Adjustment target mark CL, CR Cutting center FL, FR Cutting range

Claims (8)

撮影レンズと撮影レンズによって被写体像が結像されるイメージセンサとを有する複数の撮影光学系を備え、各撮影光学系が所定の間隔で並べて配置された複眼撮影装置において、
各撮影光学系のそれぞれについて、予め決められた被写体位置よりも撮影対象とする被写体の前後の長さの略1/2だけ遠方にずらした基準点に対応する撮影画面内の位置を中心として予め決めた切出し範囲を記憶した記憶手段と、撮影画像から対応する切出し範囲内の画像を切り出す切出し処理を各撮影光学系で撮影された撮影画像のそれぞれに行う処理手段とを備えたことを特徴とする複眼撮影装置。
In a compound eye photographing apparatus that includes a plurality of photographing optical systems each having a photographing lens and an image sensor on which a subject image is formed by the photographing lens, and each photographing optical system is arranged at a predetermined interval.
For each of the photographing optical systems, a position in the photographing screen corresponding to a reference point that is shifted from the predetermined subject position by approximately ½ of the length before and after the subject to be photographed in advance is centered in advance. A storage means for storing the determined cutout range, and a processing means for performing a cutout process for cutting out an image in the corresponding cutout range from the shot image for each shot image taken by each shooting optical system, Compound eye photography device.
前記記憶手段は、撮影レンズの光軸を回転中心とする撮影画面の回転方向のズレ量に基づいて回転させた切出し範囲を記憶していることを特徴とする請求項1記載の複眼撮影装置。   The compound eye photographing apparatus according to claim 1, wherein the storage unit stores a cutout range rotated based on a shift amount in a rotation direction of a photographing screen about the optical axis of the photographing lens. 撮影レンズと撮影レンズによって被写体像が結像されるイメージセンサとを有する複数の撮影光学系を備え、各撮影光学系が所定の間隔で並べて配置された複眼撮影装置において、
各撮影光学系のそれぞれについて、予め決められた被写体位置よりも撮影対象とする被写体の前後の長さの略1/2だけ遠方にずらした基準点に対応する撮影画面内の位置を切出し中心として記憶した記憶手段と、撮影光学系で撮影された撮影画像に対して、前記記憶手段に記憶した対応する切出し中心から決まる切出し範囲内の画像を切り出す切出し処理を各撮影光学系から得られる撮影画像のそれぞれに行う処理手段とを備えたことを特徴とする複眼撮影装置。
In a compound eye photographing apparatus that includes a plurality of photographing optical systems each having a photographing lens and an image sensor on which a subject image is formed by the photographing lens, and each photographing optical system is arranged at a predetermined interval.
For each of the photographic optical systems, the position in the photographic screen corresponding to the reference point shifted from the predetermined subject position by approximately ½ of the length before and after the subject to be photographed is set as the extraction center. Captured images obtained from each photographic optical system for extracting the image within the extraction range determined from the corresponding extraction center stored in the storage means with respect to the stored storage means and the photographic image taken by the photographic optical system And a processing means for each of the above.
前記記憶手段は、撮影レンズの光軸を回転中心とする撮影画面の回転方向のズレ量を各撮影光学系について記憶しており、前記画像処理手段は、各撮影光学系で撮影した画像のそれぞれについて、前記記憶手段に記憶した対応するズレ量に応じて撮影画像の切出し範囲を回転させることを特徴とする請求項3記載の複眼撮影装置。   The storage means stores, for each photographing optical system, a shift amount in the rotation direction of the photographing screen with the optical axis of the photographing lens as the rotation center, and the image processing means each of the images photographed by each photographing optical system 4. The compound eye photographing apparatus according to claim 3, wherein the cutout range of the photographed image is rotated in accordance with a corresponding shift amount stored in the storage unit. 前記各撮影光学系の間隔を調整する機構を備えたことを特徴とする請求項1ないし4のいずれか1項に記載の複眼撮影装置。   5. The compound eye photographing apparatus according to claim 1, further comprising a mechanism for adjusting an interval between the photographing optical systems. 前記撮影対象とする被写体は、人物の顔であり、前記基準点は、人物の顔を撮影するために予め設定される被写体位置よりも人物の顔の前後の長さの略1/2だけ遠方にずらしたものであることを特徴とする請求項1ないし5のいずれか1項に記載の複眼撮影装置。The subject to be photographed is a person's face, and the reference point is far from the subject position set in advance for photographing the person's face by approximately ½ of the length before and after the person's face. The compound eye photographing apparatus according to any one of claims 1 to 5, wherein the compound eye photographing apparatus is deviated. 撮影レンズとイメージセンサによって撮影を行う複数の撮影光学系が所定の間隔で並べて配置された複眼撮影装置の調整方法において、
予め決められた被写体位置よりも撮影対象とする被写体の前後の長さの略1/2だけ遠方にずらして配置したターゲットを前記各撮影光学系を用いて撮影し、撮影画面内のターゲットの位置を各撮影光学系について測定し、このターゲットの位置またはターゲット位置を中心とする切出し範囲を決定し複眼撮影装置に設定することを特徴とする複眼撮影装置の調整方法。
In a method for adjusting a compound eye photographing apparatus in which a plurality of photographing optical systems for photographing with a photographing lens and an image sensor are arranged at predetermined intervals,
A target, which is arranged to be distant from the predetermined subject position by approximately ½ of the length before and after the subject to be photographed, is photographed by using each of the photographing optical systems, and the position of the target in the photographing screen Is measured for each imaging optical system, and the target position or the cut-out range centered on the target position is determined and set in the compound-eye imaging apparatus.
撮影された前記ターゲットの回転量から撮影レンズの光軸を回転中心とする撮影画面の回転方向のズレ量を各撮影光学系について調べ、このズレ量またはズレ量に応じた撮影画像の切出し方向を決定し複眼撮影装置に設定することを特徴とする請求項7記載の複眼撮影装置の調整方法。 The amount of shift in the rotation direction of the shooting screen about the optical axis of the shooting lens is examined for each shooting optical system from the amount of rotation of the target that has been shot, and the amount of shift or the cut-out direction of the shot image corresponding to the amount of shift is determined. 8. The method for adjusting a compound eye photographing apparatus according to claim 7, wherein the method is determined and set in the compound eye photographing apparatus.
JP2005082625A 2005-03-22 2005-03-22 Compound eye photographing apparatus and adjustment method thereof Expired - Fee Related JP4260129B2 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2005082625A JP4260129B2 (en) 2005-03-22 2005-03-22 Compound eye photographing apparatus and adjustment method thereof
US11/377,577 US7586534B2 (en) 2005-03-22 2006-03-17 Multi-eye image pickup device, adjusting method and device therefor, and image-area adjusting system and method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2005082625A JP4260129B2 (en) 2005-03-22 2005-03-22 Compound eye photographing apparatus and adjustment method thereof

Publications (2)

Publication Number Publication Date
JP2006270265A JP2006270265A (en) 2006-10-05
JP4260129B2 true JP4260129B2 (en) 2009-04-30

Family

ID=37205787

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2005082625A Expired - Fee Related JP4260129B2 (en) 2005-03-22 2005-03-22 Compound eye photographing apparatus and adjustment method thereof

Country Status (1)

Country Link
JP (1) JP4260129B2 (en)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4621214B2 (en) * 2007-01-17 2011-01-26 日本放送協会 Stereo image capturing position adjusting device, stereo image capturing position adjusting method and program thereof, and stereo image capturing system
KR100932175B1 (en) * 2008-09-30 2009-12-16 주식회사 하이소닉 Compact photographing apparatus for stereo image
JP4991685B2 (en) * 2008-12-19 2012-08-01 富士フイルム株式会社 Stereoscopic image processing apparatus and stereoscopic image processing method
WO2011036813A1 (en) * 2009-09-28 2011-03-31 株式会社 東芝 Three-dimensional image displaying method and three-dimensional image displaying device
DE102010062496B4 (en) 2010-12-07 2022-01-20 Robert Bosch Gmbh Method and device for processing image information from two sensors of a stereo sensor system suitable for image acquisition
JP5785732B2 (en) * 2011-02-24 2015-09-30 任天堂株式会社 Information processing program, imaging apparatus, imaging method, and imaging system
JP5672112B2 (en) * 2011-03-30 2015-02-18 富士通株式会社 Stereo image calibration method, stereo image calibration apparatus, and computer program for stereo image calibration
WO2017042999A1 (en) * 2015-09-07 2017-03-16 パナソニックIpマネジメント株式会社 In-vehicle stereo camera device and method for correcting same
US11665410B2 (en) * 2020-03-10 2023-05-30 Cognex Corporation Modular vision systems and methods

Also Published As

Publication number Publication date
JP2006270265A (en) 2006-10-05

Similar Documents

Publication Publication Date Title
JP4260129B2 (en) Compound eye photographing apparatus and adjustment method thereof
US11223820B2 (en) Augmented reality displays with active alignment and corresponding methods
US10869024B2 (en) Augmented reality displays with active alignment and corresponding methods
KR100729280B1 (en) Iris Identification System and Method using Mobile Device with Stereo Camera
CN107238996B (en) Projection system and correction method of projection picture
JP5932045B2 (en) Method and apparatus for conditional display of stereoscopic image pairs
JP4858263B2 (en) 3D measuring device
JP6022577B2 (en) Method and apparatus for improved cropping of stereoscopic image pairs
JP2019510234A (en) Depth information acquisition method and apparatus, and image acquisition device
KR20160043995A (en) Stereo yaw correction using autofocus feedback
CN110580718B (en) Correction method for image device, related image device and computing device
JP2009522683A (en) Iris recognition system and iris recognition method using mobile terminal equipped with stereo camera
KR100747733B1 (en) Parallel Axis 3D Camera and Formation Method of 3D Image
JP5857712B2 (en) Stereo image generation apparatus, stereo image generation method, and computer program for stereo image generation
CN103973972A (en) Stereoscopic image pickup apparatus
JP4474312B2 (en) Imaging range adjustment system, stereoscopic imaging device, adjustment device, and imaging range adjustment method
JP6257260B2 (en) Imaging apparatus and control method thereof
WO2018189880A1 (en) Information processing device, information processing system, and image processing method
EP3796673A1 (en) An application for assisting a hearing device wearer
US20230171511A1 (en) Image processing apparatus, imaging apparatus, and image processing method
JP2016020977A (en) Stereoscopic image imaging device
US11949993B2 (en) Electric device, controlling method of controlling electric device, and computer readable storage medium
JP2009070068A (en) Eye image acquisition device
JP2023095038A (en) Processing device, processing method, and program
JP2013229673A (en) Portable imaging apparatus

Legal Events

Date Code Title Description
A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A712

Effective date: 20070111

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20070404

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20080827

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20081016

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20081119

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20081215

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20090121

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20090203

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120220

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120220

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130220

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140220

Year of fee payment: 5

LAPS Cancellation because of no payment of annual fees