JP2010183639A

JP2010183639A - Imaging apparatus and imaging method

Info

Publication number: JP2010183639A
Application number: JP2010097752A
Authority: JP
Inventors: Masayuki Arase; 誠之荒瀬; Takayuki Hatase; 貴之畑瀬
Original assignee: Panasonic Corp
Current assignee: Panasonic Corp
Priority date: 2010-04-21
Filing date: 2010-04-21
Publication date: 2010-08-19
Anticipated expiration: 2020-10-03
Also published as: JP5110116B2

Abstract

<P>PROBLEM TO BE SOLVED: To provide an imaging apparatus and imaging method in which an image capturing time is shortened. <P>SOLUTION: In an imaging apparatus for reading an image of an imaging object by means of a photodetector 20 comprising a plurality of pixels in a lattice-shaped arrangement, based on information of an image capturing area stored in an image capturing area information storage section 28, a storage address is generated for determining a storage region when storing in an image storage section 26 pixel selection information specifying a pixel, that becomes an image output object, and an image signal. Based on the pixel selection information, a pixel to output the image signal is selected, and the image signal to be outputted is written in the image storage section 26 according to the storage address. Thus, only an image signal of a required pixel can be outputted and stored. <P>COPYRIGHT: (C)2010,JPO&INPIT

Description

本発明は、エリアセンサによって撮像対象の画像を読み取る撮像装置および撮像方法に関するものである。 The present invention relates to an imaging apparatus and an imaging method for reading an image to be imaged by an area sensor.

電子部品実装装置などで電子部品の位置認識を行うための撮像手段として、エリアセンサが知られている。このエリアセンサは受光量に応じた電荷を蓄える受光素子を備えた画素を２次元的に格子状に配列したものである。エリアセンサ上に撮像対象の光学画像を結像させると、各画素の受光素子には光学画像に対応する電荷が蓄えられる。この電荷を電気信号（画像信号）として出力させることにより、撮像対象の２次元画像データを得ることができる。 An area sensor is known as an imaging means for performing position recognition of an electronic component by an electronic component mounting apparatus or the like. This area sensor is a two-dimensional array of pixels each having a light receiving element that stores a charge corresponding to the amount of light received. When an optical image to be imaged is formed on the area sensor, a charge corresponding to the optical image is stored in the light receiving element of each pixel. By outputting this electric charge as an electric signal (image signal), two-dimensional image data to be imaged can be obtained.

このエリアセンサとしてＣＣＤ型のエリアセンサが広く使用されている。ＣＣＤ型のエリアセンサは、全ての画素の画像信号が規則的に出力され、これを一旦記憶部に記憶するようになっている。そして記憶部に記憶された画像信号のうち必要な画像信号のみを参照して画像処理や画像認識を行うようになっている。 As this area sensor, a CCD type area sensor is widely used. The CCD type area sensor regularly outputs image signals of all pixels and temporarily stores them in a storage unit. Then, image processing and image recognition are performed with reference to only necessary image signals among the image signals stored in the storage unit.

しかしながら、従来のＣＣＤ型のエリアセンサを用いた撮像装置では、画像信号が規則的に出力されるため、必要な部分の画像信号のみを選択して出力することが困難であった。このため、不要な画像信号を出力するのに無駄な時間が必要となり画像読みとり高速化の妨げとなっていた。 However, in a conventional image pickup apparatus using a CCD area sensor, image signals are regularly output, so that it is difficult to select and output only necessary image signals. For this reason, useless time is required to output an unnecessary image signal, which hinders speeding up of image reading.

そこで本発明は、画像読みとり時間を短縮することができる撮像装置および撮像方法を提供することを目的とする。 SUMMARY An advantage of some aspects of the invention is that it provides an imaging apparatus and an imaging method capable of shortening an image reading time.

請求項１に記載の撮像装置は、格子状に配置された複数の画素を備えた受光部に撮像対象物の光学画像を結像させて画像を読み取る撮像装置であって、前記複数の画素のうち画像信号を出力する１つの画素をランダムに選択可能な画素選択手段と、前記画像信号を記憶する画像記憶部と、撮像視野内に設定された画像取込エリアに関する情報を記憶する画像取込エリア情報記憶部と、前記画像取込エリアに関する情報に基づいて選択すべき画素を特定するための画素選択情報を生成する画素選択情報生成部と、前記画像取込エリアに関する情報に基づいて前記画像記憶部の記憶アドレスを生成する記憶アドレス生成部と、前記画素選択情報に基づいて前記画素選択手段を制御することにより選択した画素の画像信号を出力させる制御部を備え、前記画像記憶部は出力された画像信号を前記記憶アドレスで指定された記憶領域に記憶し、前記画素と前記記憶アドレスが１対１の関係で対応付けされている。 The imaging apparatus according to claim 1 is an imaging apparatus that reads an image by forming an optical image of an imaging target on a light receiving unit including a plurality of pixels arranged in a grid pattern. Among them, pixel selection means that can randomly select one pixel that outputs an image signal, an image storage unit that stores the image signal, and an image capture that stores information about an image capture area set in the imaging field of view An area information storage unit, a pixel selection information generation unit for generating pixel selection information for specifying a pixel to be selected based on information on the image capture area, and the image based on information on the image capture area A storage address generation unit that generates a storage address of the storage unit; and a control unit that outputs an image signal of a pixel selected by controlling the pixel selection unit based on the pixel selection information. The image storage unit stores the image signal output to the storage area specified by the storage address, the memory address and the pixels are mapped in a one-to-one relationship.

請求項２に記載の撮像装置は、格子状に配置された複数の画素を備えた受光部に撮像対象物の光学画像を結像させて画像を読み取る撮像装置であって、前記複数の画素のうち画像信号を出力する１つの画素をランダムに選択可能な画素選択手段と、前記画像信号を記憶する画像記憶部と、撮像視野内に設定された画像取込エリアに関する情報を記憶する画像取込エリア情報記憶部と、前記画像取込エリアに関する情報に基づいて、選択すべき画素を特定するための画素選択情報を生成する画素選択情報生成部と、前記画素選択情報に基づいて前記画像記憶部の記憶アドレスを生成する記憶アドレス生成部と、前記画素選択情報に基づいて前記画素選択手段を制御することにより選択した画素の画像信号を出力させる制御部を備え、前記画像記憶部は出力された画像信号を前記記憶アドレスで指定された記憶領域に記憶し、前記画素と前記記憶アドレスが１対１の関係で対応付けされている。 An imaging apparatus according to claim 2 is an imaging apparatus that reads an image by forming an optical image of an imaging target on a light receiving unit including a plurality of pixels arranged in a grid pattern, and Among them, pixel selection means that can randomly select one pixel that outputs an image signal, an image storage unit that stores the image signal, and an image capture that stores information about an image capture area set in the imaging field of view An area information storage unit; a pixel selection information generation unit that generates pixel selection information for specifying a pixel to be selected based on information about the image capture area; and the image storage unit based on the pixel selection information A storage address generation unit that generates a storage address of the image data, and a control unit that outputs an image signal of the pixel selected by controlling the pixel selection unit based on the pixel selection information. Department stores the image signal output to the storage area specified by the storage address, the memory address and the pixels are mapped in a one-to-one relationship.

請求項３に記載の撮像装置は請求項１又は２に記載の撮像装置であって、前記画像記憶部には受光部の各画素毎に固定された記憶領域が設定されている。 The imaging device according to a third aspect is the imaging device according to the first or second aspect, wherein a storage area fixed for each pixel of the light receiving unit is set in the image storage unit.

請求項４に記載の撮像方法は、格子状に配置された画素を備えた受光部に撮像対象物の光学画像を結像させ、撮像視野内に設定された画像取込エリアに対応する画素から選択的に画像信号を出力させて記憶する撮像方法であって、（１）前記画像取込エリアに関する情報に基づいて画像信号を出力させる画素を特定するための画素選択情報を生成する工程と、（２）前記画像取り込みエリアに関する情報に基づいて画像信号を記憶する画像記憶部の記憶アドレスを生成する工程と、（３）前記画素選択情報で特定される複数の画素から１つの画素を選択してこの画素から画像信号を出力する工程と、（４）前記（３）で出力した画像信号を（２）で生成された記憶アドレスに従って前記画像記憶部に記憶する工程とを含み、前記画素と前記記憶アドレスが１対１の関係で対応付けされている。 The imaging method according to claim 4, wherein an optical image of an imaging target is formed on a light receiving unit including pixels arranged in a grid pattern, and pixels corresponding to an image capturing area set in an imaging field of view are used. An imaging method for selectively outputting and storing an image signal, (1) generating pixel selection information for specifying a pixel for outputting an image signal based on information on the image capture area; (2) generating a storage address of an image storage unit that stores an image signal based on information about the image capture area; and (3) selecting one pixel from a plurality of pixels specified by the pixel selection information. A step of outputting an image signal from the lever pixel; and (4) storing the image signal output in (3) in the image storage unit in accordance with the storage address generated in (2), The above Address is associated in a one-to-one relationship.

請求項５に記載の撮像方法は、格子状に配置された画素を備えた受光部に撮像対象物の光学画像を結像させ、撮像視野内に設定された画像取込エリアに対応する画素から選択的に画像信号を出力させて記憶する撮像方法であって、（１）前記画像取込エリアに関する情報に基づいて画像信号を出力させる画素を特定するための画素選択情報を生成する工程と、（２）前記画素選択情報に基づいて画像信号を記憶する画像記憶部の記憶アドレスを生成する工程と、（３）前記画素選択情報で特定される複数の画素から１つの画素を選択してこの画素から画像信号を出力する工程と、（４）前記（３）で出力した画像信号を（２）で生成された記憶アドレスに従って前記画像記憶部に記憶する工程とを含み、前記画素と前記記憶アドレスが１対１の関係で対応付けされている。 In the imaging method according to claim 5, an optical image of an imaging target is formed on a light receiving unit including pixels arranged in a grid pattern, and pixels corresponding to an image capturing area set in an imaging field of view are used. An imaging method for selectively outputting and storing an image signal, (1) generating pixel selection information for specifying a pixel for outputting an image signal based on information on the image capture area; (2) generating a storage address of an image storage unit that stores an image signal based on the pixel selection information; and (3) selecting one pixel from a plurality of pixels specified by the pixel selection information. Outputting the image signal from the pixel; and (4) storing the image signal output in (3) in the image storage unit according to the storage address generated in (2), the pixel and the storage One to one address It has been associated in the relationship.

請求項６に記載の撮像方法は請求項４又は５に記載の撮像方法であって、前記画像記憶部に、受光部の各画素毎に固定された記憶領域を設定する。 An imaging method according to a sixth aspect is the imaging method according to the fourth or fifth aspect, wherein a storage area fixed for each pixel of the light receiving unit is set in the image storage unit.

本発明によれば、画像の取り込みエリアに関する情報に基づいて、画像を出力させる画素を特定するための画素選択情報および画像信号を記憶する画像記憶部の記憶アドレスを生成し、この記憶アドレスで指定された記憶領域に画像信号を記憶させるようにしたので、画像の読み取り時間を短縮することができる。 According to the present invention, the storage address of the image storage unit for storing the pixel selection information for specifying the pixel for outputting the image and the image signal is generated on the basis of the information about the image capturing area, and the storage address is designated by this storage address. Since the image signal is stored in the storage area, the image reading time can be shortened.

本発明の実施の形態１の電子部品実装装置の構成を示すブロック図The block diagram which shows the structure of the electronic component mounting apparatus of Embodiment 1 of this invention. 本発明の実施の形態１の撮像装置の構成を示すブロック図1 is a block diagram showing the configuration of an imaging apparatus according to Embodiment 1 of the present invention. 本発明の実施の形態１の撮像装置の受光部の構成図1 is a configuration diagram of a light receiving unit of an imaging apparatus according to Embodiment 1 of the present invention. 本発明の実施の形態１の撮像装置の画像取り込みエリアの説明図Explanatory drawing of the image acquisition area of the imaging device of Embodiment 1 of this invention 本発明の実施の形態１の撮像装置の画像記憶部の記憶領域の説明図Explanatory drawing of the memory area of the image memory | storage part of the imaging device of Embodiment 1 of this invention 本発明の実施の形態２の撮像装置の構成を示すブロック図FIG. 2 is a block diagram showing a configuration of an imaging apparatus according to Embodiment 2 of the present invention. 本発明の参考例の撮像装置の構成を示すブロック図The block diagram which shows the structure of the imaging device of the reference example of this invention

（実施の形態１）
図１は本発明の実施の形態１の電子部品実装装置の構成を示すブロック図、図２は本発明の実施の形態１の撮像装置の構成を示すブロック図、図３は本発明の実施の形態１の撮像装置の受光部の構成図、図４は本発明の実施の形態１の撮像装置の画像取り込みエリアの説明図、図５は本発明の実施の形態１の撮像装置の画像記憶部の記憶領域の説明図である。 (Embodiment 1)
FIG. 1 is a block diagram showing a configuration of an electronic component mounting apparatus according to Embodiment 1 of the present invention, FIG. 2 is a block diagram showing a configuration of an imaging apparatus according to Embodiment 1 of the present invention, and FIG. 3 is an embodiment of the present invention. FIG. 4 is an explanatory diagram of an image capturing area of the imaging device according to the first embodiment of the present invention, and FIG. 5 is an image storage unit of the imaging device according to the first embodiment of the present invention. It is explanatory drawing of the storage area of.

まず図１を参照して撮像装置が組み込まれた電子部品実装装置について説明する。図１において、部品供給部１は実装対象の電子部品を供給する。基板位置決めステージ２は、電子部品が実装される基板３を保持し位置決めする。部品供給部１と基板位置決めステージ２の上方には、移載ヘッド５が移載ヘッド移動機構４によって水平移動可能に配設されている。移載ヘッド５は部品供給部１から電子部品６を取り出し、基板位置決めステージ２上まで移送して基板３に実装する。 First, an electronic component mounting apparatus in which an imaging device is incorporated will be described with reference to FIG. In FIG. 1, a component supply unit 1 supplies electronic components to be mounted. The substrate positioning stage 2 holds and positions the substrate 3 on which electronic components are mounted. A transfer head 5 is disposed above the component supply unit 1 and the substrate positioning stage 2 so as to be horizontally movable by the transfer head moving mechanism 4. The transfer head 5 takes out the electronic component 6 from the component supply unit 1, transfers it to the substrate positioning stage 2, and mounts it on the substrate 3.

部品供給部１と基板位置決めステージ２との間の移載ヘッド５の移動経路には撮像装置７が配設されている。撮像装置７はカメラ８および画像認識ユニット７ａを備えており、移載ヘッド５に保持され照明装置９によって照明された状態の電子部品６を下方から撮像し認識する。撮像された画像や認識結果は画像認識ユニット７ａから表示部１０に出力され表示される。 An imaging device 7 is disposed on the movement path of the transfer head 5 between the component supply unit 1 and the substrate positioning stage 2. The imaging device 7 includes a camera 8 and an image recognition unit 7a, and images and recognizes the electronic component 6 held by the transfer head 5 and illuminated by the illumination device 9 from below. The captured image and the recognition result are output from the image recognition unit 7a and displayed on the display unit 10.

画像認識ユニット７ａおよび機構制御部１２は制御装置１１を構成している。機構制御部１２は基板位置決めステージ２および移載ヘッド移動機構４等の機構部分を制御する。操作部１３はキーボードやマウスなどの入力装置であり、ここで入力されたデータはデータ処理されて制御装置１１に入力される。この入力操作により、電子部品実装装置の実装動作や、撮像装置７の撮像・認識動作の設定が行われる。 The image recognition unit 7 a and the mechanism control unit 12 constitute a control device 11. The mechanism control unit 12 controls mechanical parts such as the substrate positioning stage 2 and the transfer head moving mechanism 4. The operation unit 13 is an input device such as a keyboard and a mouse. The data input here is processed and input to the control device 11. By this input operation, the mounting operation of the electronic component mounting apparatus and the imaging / recognition operation of the imaging apparatus 7 are set.

次に図２を参照して撮像に使用されるカメラ８および画像認識ユニット７ａの構成について説明する。図２において、受光部２０には複数の受光素子が格子状に配列されている。この受光部２０上に図示しない光学系によって撮像対象物の光学画像を結像させ、各受光素子に蓄積される電荷を画像信号として出力させることにより、撮像対象の画像を読み取る。 Next, the configuration of the camera 8 and the image recognition unit 7a used for imaging will be described with reference to FIG. In FIG. 2, the light receiving unit 20 has a plurality of light receiving elements arranged in a lattice pattern. An optical image of the object to be imaged is formed on the light receiving unit 20 by an optical system (not shown), and the electric charge accumulated in each light receiving element is output as an image signal, thereby reading the image of the imaged object.

図３に示すように、受光部２０を構成する画素２０ａは、フォトダイオードである受光素子３１と複数のＭＯＳ型トランジスタで構成された増幅器３２を備えている。増幅器３２は受光素子３１で蓄積された電荷を電圧に変換して出力する。画素２０ａの格子状配列（２次元の行列配列）に対応して受光部２０には複数の垂直信号線ＬＶと複数の水平信号線ＬＨが形成されており、各増幅器３２には垂直信号線ＬＶと水平信号線ＬＨとが接続されている。 As shown in FIG. 3, the pixel 20 a configuring the light receiving unit 20 includes a light receiving element 31 that is a photodiode and an amplifier 32 that includes a plurality of MOS transistors. The amplifier 32 converts the charge accumulated in the light receiving element 31 into a voltage and outputs the voltage. A plurality of vertical signal lines LV and a plurality of horizontal signal lines LH are formed in the light receiving unit 20 corresponding to the lattice arrangement (two-dimensional matrix arrangement) of the pixels 20a, and each amplifier 32 has a vertical signal line LV. Are connected to the horizontal signal line LH.

それぞれの増幅器３２に接続される垂直信号線ＬＶと水平信号線ＬＨの組み合わせは全て異なっている。垂直方向画素選択回路２１は垂直信号線ＬＶを介して増幅器３２に接続されており、垂直方向画素選択回路２１により増幅器３２をアクティブ状態、すなわち電圧に変換された画像信号を出力可能な状態にすることができる。増幅器３２の出力は、水平信号線ＬＨおよびスイッチング用のゲート素子３３を介して出力線Ｌ（ｏｕｔ）に接続されている。ゲート素子３３は各水平信号線ＬＨに１個づつ接続されており、水平方向画素選択回路２２によってスイッチング操作される。 The combinations of the vertical signal line LV and the horizontal signal line LH connected to each amplifier 32 are all different. The vertical direction pixel selection circuit 21 is connected to the amplifier 32 via the vertical signal line LV, and the vertical direction pixel selection circuit 21 sets the amplifier 32 in an active state, that is, a state in which an image signal converted into a voltage can be output. be able to. The output of the amplifier 32 is connected to the output line L (out) via the horizontal signal line LH and the switching gate element 33. One gate element 33 is connected to each horizontal signal line LH, and is switched by the horizontal pixel selection circuit 22.

受光部２０上に光学画像を結像させることにより、各受光素子３１は感光して電荷を蓄積する。垂直方向画素選択回路２１、水平方向画素選択回路２２によってそれぞれ増幅器３２とゲート素子３３を同期させてＯＮするスイッチング動作により、受光素子３１に蓄積された電荷は画像信号として出力される。 By forming an optical image on the light receiving unit 20, each light receiving element 31 is exposed to light and accumulates electric charges. The charge accumulated in the light receiving element 31 is output as an image signal by a switching operation in which the vertical pixel selection circuit 21 and the horizontal pixel selection circuit 22 turn on the amplifier 32 and the gate element 33 in synchronization with each other.

すなわち、垂直方向画素選択回路２１によって垂直信号線ＬＶの１つをＯＮすることにより、受光部２０に格子状に配列された画素２０ａの水平方向の１列が選択される。これにより、この垂直信号線ＬＶに接続する増幅器３２が選択されてアクティブ状態となる。また水平方向画素選択回路２２により１つのゲート素子３３が選択されてＯＮすると、アクティブ状態になっている増幅器３２のうち、水平信号線ＬＨを介してこのゲート素子３３と共通に接続されている増幅器３２から画像信号が出力される。このように本実施の形態では、垂直方向画素選択回路２１および水平方向画素選択回路２２によって、複数の画素のうち画像信号を出力する１つの画素をランダムに選択することができる。従って、垂直方向画素選択回路２１および水平方向画素選択回路２２は、複数の画素のうち画像信号を出力する１つの画素をランダムに選択する画像選択手段として機能する。 That is, by turning on one of the vertical signal lines LV by the vertical pixel selection circuit 21, one horizontal column of the pixels 20 a arranged in a grid pattern on the light receiving unit 20 is selected. As a result, the amplifier 32 connected to the vertical signal line LV is selected and becomes active. When one gate element 33 is selected and turned ON by the horizontal pixel selection circuit 22, among the amplifiers 32 in an active state, the amplifier connected in common to the gate element 33 via the horizontal signal line LH. An image signal is output from 32. As described above, in the present embodiment, the vertical pixel selection circuit 21 and the horizontal pixel selection circuit 22 can randomly select one pixel that outputs an image signal from a plurality of pixels. Therefore, the vertical direction pixel selection circuit 21 and the horizontal direction pixel selection circuit 22 function as image selection means for randomly selecting one pixel that outputs an image signal from among a plurality of pixels.

図２において制御部２４は、画素選択情報に基づいて垂直方向画素選択回路２１および水平方向画素選択回路２２を制御することにより、画素選択情報で選択された画素から画像信号を出力させる。画素選択情報生成部２５は、画像取込エリア情報記憶部２８に記憶された画像取り込みエリア情報より、画像信号の出力対象となっている画素を特定するための画素選択情報を出力する。この画素選択情報生成部２５は、タイミング発生回路（図示省略）から送られるタイミング信号に同期して、出力対象となっている画素の画素選択情報を１個づつ出力する。 In FIG. 2, the control unit 24 controls the vertical direction pixel selection circuit 21 and the horizontal direction pixel selection circuit 22 based on the pixel selection information to output an image signal from the pixel selected by the pixel selection information. The pixel selection information generation unit 25 outputs pixel selection information for specifying a pixel that is an output target of an image signal from the image capture area information stored in the image capture area information storage unit 28. The pixel selection information generation unit 25 outputs pixel selection information of pixels to be output one by one in synchronization with a timing signal sent from a timing generation circuit (not shown).

制御部２４は、この画素選択情報に基づき、画素２０ａの垂直方向の位置を特定するための垂直位置信号Ｖと、水平方向の位置を特定するための水平位置信号Ｈを生成する。そして垂直位置信号Ｖと水平位置信号Ｈは、タイミング発生回路（図示省略）が発生するタイミング信号に従って、垂直方向画素選択回路２１および水平方向画素選択回路２２に対してそれぞれ出力される。垂直方向画素選択回路２１は、垂直位置信号Ｖが入力されるとこの垂直位置信号Ｖによって特定される１本の垂直信号線ＬＶに接続する増幅器３２をアクティブ状態にする。水平方向画素選択回路２２は水平位置信号Ｈによって特定される１個のゲート素子３３をＯＮにする。これにより、画素選択情報で特定された１つの画素２０ａから画像信号が出力される。受光部２０から出力された画像信号は、画像信号補正部２３に送られ、ここで黒色レベルや感度レベルなどの補正処理が行われるとともにデジタル変換処理される。 Based on this pixel selection information, the control unit 24 generates a vertical position signal V for specifying the vertical position of the pixel 20a and a horizontal position signal H for specifying the horizontal position. The vertical position signal V and the horizontal position signal H are respectively output to the vertical direction pixel selection circuit 21 and the horizontal direction pixel selection circuit 22 in accordance with a timing signal generated by a timing generation circuit (not shown). When the vertical position signal V is input, the vertical direction pixel selection circuit 21 activates the amplifier 32 connected to one vertical signal line LV specified by the vertical position signal V. The horizontal pixel selection circuit 22 turns on one gate element 33 specified by the horizontal position signal H. Thereby, an image signal is output from one pixel 20a specified by the pixel selection information. The image signal output from the light receiving unit 20 is sent to the image signal correcting unit 23 where correction processing such as black level and sensitivity level is performed and digital conversion processing is performed.

次に画像認識ユニット７ａについて説明する。カメラ８より出力されたデジタルの画像信号は、画像記憶部２６に送られ記憶される。画像処理部２９は画像記憶部２６から読み出された画像信号を画像処理することにより、撮像対象の電子部品を認識する。この認識により電子部品の有無、識別、位置検出などの認識結果が機構制御部１２に出力される。機構制御部１２では、この認識結果を用いて移載ヘッド５や基板位置決めステージ２を制御し、電子部品搭載時の位置合わせを行う。またカメラ８によって撮像された画像データが画像処理部２９から表示部１０に送られ、表示モニタ上に画面表示される。 Next, the image recognition unit 7a will be described. The digital image signal output from the camera 8 is sent to and stored in the image storage unit 26. The image processing unit 29 performs image processing on the image signal read from the image storage unit 26 to recognize an electronic component to be imaged. With this recognition, recognition results such as the presence / absence of electronic components, identification, and position detection are output to the mechanism control unit 12. The mechanism control unit 12 controls the transfer head 5 and the substrate positioning stage 2 using this recognition result, and performs alignment when mounting the electronic component. The image data captured by the camera 8 is sent from the image processing unit 29 to the display unit 10 and displayed on the display monitor.

画像取込エリア情報記憶部２８は、画像取込エリア情報、すなわち撮像視野内での画像取込対象となる特定の領域の位置や大きさ、形状を表す情報を記憶する。画像取込エリア情報は、操作部１３によって操作処理部３０を介して画像取込エリア情報記憶部２８に入力されるほか、外部装置によって予め作成された画像取込エリア情報をコピーしてもよい。前述の画素選択情報は、画像取込エリア情報に基づいて生成される。記憶アドレス生成部２７は、画像取込エリア情報に基づいて画像記憶部２６の画像メモリに書き込まれる画像信号の記憶アドレスを生成する。 The image capture area information storage unit 28 stores image capture area information, that is, information representing the position, size, and shape of a specific region that is an image capture target within the imaging field of view. The image capture area information is input to the image capture area information storage unit 28 by the operation unit 13 via the operation processing unit 30, or image capture area information created in advance by an external device may be copied. . The aforementioned pixel selection information is generated based on the image capture area information. The storage address generation unit 27 generates a storage address of an image signal written to the image memory of the image storage unit 26 based on the image capture area information.

次に図４〜図５を参照して画像取り込みエリア、画素選択情報および記憶アドレスについて説明する。図４（ａ）に示す矩形枠４０はカメラ８の撮像視野を示しており、サイズＬＸ，ＬＹの矩形範囲が撮像可能な最大範囲となっている。この撮像視野内に、電子部品６を認識するための画像データを取り込む対象としての画像取込エリア４１が設定される。この設定は、認識対象の電子部品６のサイズや撮像視野内での位置に基づいて、電子部品を囲む矩形領域を指定することにより行われ、対角位置にある２点Ａ，Ｂの座標（Ｘ１，Ｙ１）、（Ｘ２，Ｙ２）が入力される。 Next, the image capturing area, pixel selection information, and storage address will be described with reference to FIGS. A rectangular frame 40 shown in FIG. 4A shows the imaging field of view of the camera 8, and the rectangular range of the sizes LX and LY is the maximum imageable range. An image capture area 41 as a target for capturing image data for recognizing the electronic component 6 is set within the imaging field of view. This setting is performed by designating a rectangular area surrounding the electronic component based on the size of the electronic component 6 to be recognized and the position in the imaging field of view, and the coordinates of the two points A and B at the diagonal positions ( X1, Y1) and (X2, Y2) are input.

次に画素選択情報生成部２５によって画素選択情報を生成する方法について説明する。図４（ｂ）において４０’は受光部２０において画素２０ａが配列されている範囲を示す画素配列枠であり、図４（ａ）に示す撮像視野４０と対応している。撮像視野４０内に設定された画像取込エリア４１から画像を読み取る際には、受光部２０に設けられた５１２×５１２個の画素のうち、画像取込エリア４１に対応した画素出力対象範囲４１’内の画素からのみ画像信号が出力される。 Next, a method for generating pixel selection information by the pixel selection information generation unit 25 will be described. In FIG. 4B, reference numeral 40 'denotes a pixel arrangement frame indicating a range in which the pixels 20a are arranged in the light receiving unit 20, and corresponds to the imaging field 40 shown in FIG. When reading an image from the image capture area 41 set in the imaging field of view 40, a pixel output target range 41 corresponding to the image capture area 41 among the 512 × 512 pixels provided in the light receiving unit 20. The image signal is output only from the pixels in '.

画素選択情報生成部２５は、画像取込エリア情報記憶部２８より画像取り込みエリアの位置、大きさ、形状に関する情報（画像取り込みエリア情報）を読み取って、この画像取り込みエリアに対応する複数の画素の位置座標を求め、これを画素選択情報として出力する。具体的には、撮像視野４０内の点Ａ、点Ｂに対応する画素ＰＡ，ＰＢの位置座標（ＰＸ１，ＰＹ１）、（ＰＸｍ，ＰＹｎ）を求めてこの２つの位置座標に囲まれた矩形領域内の画素の位置座標を画素選択情報として出力する。この画素選択情報が出力されると前述したように画素ＰＡを先頭とし画素ＰＢを終点とする（ｍ×ｎ）個の画素から画像信号が出力される。すなわち画素選択情報によってＸ方向に配列されたｍ個の画素が、左側から順に出力対象として１個づつ選択され、これをｎ回反復することにより全ての画像出力対象の画素から画像信号が出力される。 The pixel selection information generation unit 25 reads information (image capture area information) on the position, size, and shape of the image capture area from the image capture area information storage unit 28, and sets a plurality of pixels corresponding to the image capture area. The position coordinates are obtained and output as pixel selection information. Specifically, the position coordinates (PX1, PY1) and (PXm, PYn) of the pixels PA and PB corresponding to the points A and B in the imaging field of view 40 are obtained, and a rectangular area surrounded by the two position coordinates. The position coordinates of the pixels are output as pixel selection information. When this pixel selection information is output, an image signal is output from (m × n) pixels having the pixel PA as the head and the pixel PB as the end point as described above. That is, m pixels arranged in the X direction according to the pixel selection information are selected one by one from the left as output targets, and image signals are output from all image output target pixels by repeating this n times. The

次に記憶アドレスについて説明する。記憶アドレスは、上記のようにして設定された画像取込エリアと、この画像取込エリアから読み取られた画像信号が書き込まれる画像記憶部２６のメモリの記憶領域とを対応させる情報である。すなわち、記憶アドレスは画像取込エリアに関する情報に基づいて生成され、この記憶アドレス生成により、画像取込エリアから読み取られた画像信号が書き込まれる画像記憶部２６の記憶領域が特定される。 Next, the storage address will be described. The storage address is information that associates the image capture area set as described above with the storage area of the memory of the image storage unit 26 in which the image signal read from the image capture area is written. That is, the storage address is generated based on the information about the image capture area, and the storage area of the image storage unit 26 to which the image signal read from the image capture area is written is specified by the storage address generation.

図５において、４２は画像信号を記憶するために画像記憶部２６に割り付けられた記憶領域を示しており、４４はデータが書き込まれる個別の記憶領域に付された番地、いわゆる記憶アドレスを示している。図４（ｂ）に示す先頭画素ＰＳにそれぞれ対応する記憶領域４３（Ｓ）から終点画素ＰＥに対応する記憶領域４３（Ｅ）にかけて、５１２×５１２個分の画素の画像信号を記憶するための記憶領域が確保されている。 In FIG. 5, reference numeral 42 denotes a storage area allocated to the image storage unit 26 for storing an image signal, and 44 denotes an address assigned to an individual storage area in which data is written, so-called storage address. Yes. For storing the image signal of 512 × 512 pixels from the storage area 43 (S) corresponding to the first pixel PS shown in FIG. 4B to the storage area 43 (E) corresponding to the end pixel PE, respectively. A storage area is reserved.

次に記憶アドレスについて説明する。本実施の形態では、５１２×５１２個分の画素と１対１の関係で記憶アドレスを対応付けできるようにするために、１８ビットのデータで記憶アドレスを構成している。すなわち、５１２個のデータは２進法で示すと９ビットのデータとなるため、上位９ビットを画素のＹ座標（ＰＹ）とし、下位９ビットをＸ座標（ＰＸ）とすることにより、図５に示すように５１２×５１２個のそれぞれの画素に対して専用の記憶領域を１対１で固定的に設定することができる。図４（ｂ）に示す画素出力対象範囲４１’の各画素から出力される画像信号のうち、第１番目の画素行（Ｙ座標ＰＹ１に属するｍ個の画素）から出力された画像信号は、記憶アドレス４４（１，１）から４４（１，ｍ）までの記憶領域４３（Ｇ１）に連続的に書き込まれる。 Next, the storage address will be described. In the present embodiment, the storage address is composed of 18-bit data so that the storage address can be associated with the 512 × 512 pixels in a one-to-one relationship. That is, since 512 pieces of data are 9-bit data in binary notation, the upper 9 bits are the Y coordinate (PY) of the pixel and the lower 9 bits are the X coordinate (PX). As shown in FIG. 5, a dedicated storage area can be fixedly set on a one-to-one basis for each of 512 × 512 pixels. Among the image signals output from each pixel in the pixel output target range 41 ′ shown in FIG. 4B, the image signal output from the first pixel row (m pixels belonging to the Y coordinate PY1) is: The data is continuously written in the storage area 43 (G1) from the storage address 44 (1, 1) to 44 (1, m).

次いでアドレス領域４４（１，１）に対応する記憶領域４３から５１２画素分だけ隔てた記憶領域４３（Ｇ２）より、第２番目の画素行（Ｙ座標ＰＹ２に属するｍ個の画素）から出力された画像信号が、この記憶領域４３（Ｇ２）に連続的に書き込まれる。以下同様に各画素行について画像領域が設定され、第ｎ行目に対応する記憶領域４３（Ｇｎ）が、当該画素出力対象範囲４１’から出力された画像信号が書き込まれる最終の記憶領域となる。 Next, the data is output from the second pixel row (m pixels belonging to the Y coordinate PY2) from the storage area 43 (G2) separated by 512 pixels from the storage area 43 corresponding to the address area 44 (1, 1). The image signal is continuously written in the storage area 43 (G2). Similarly, an image region is set for each pixel row, and the storage region 43 (Gn) corresponding to the nth row is the final storage region in which the image signal output from the pixel output target range 41 ′ is written. .

このように上述の記憶アドレスにしたがって画像信号が書き込まれた記憶領域４２においては、先頭画素ＰＳ〜終点画素ＰＥに対応する全ての記憶領域のうち、上述の記憶領域４３（Ｇ１）、４３（Ｇ２）、・・・４３（Ｇｎ）以外の領域、換言すれば撮像視野内において画像取込エリアとして設定されなかった範囲と固定的な対応関係にある記憶領域は、画像信号が書き込まれていない空白領域となる。 As described above, in the storage area 42 in which the image signal is written according to the storage address described above, the storage areas 43 (G1) and 43 (G2) described above among all the storage areas corresponding to the first pixel PS to the end pixel PE. ),..., 43 (Gn), in other words, a storage area that has a fixed correspondence with a range that is not set as an image capture area in the imaging field of view is a blank in which no image signal is written. It becomes an area.

上記例で示す記憶アドレス設定によれば、記憶領域４２上に空白領域が生じ記憶領域の有効活用の観点からすれば好ましくはないものの、各画素２０ａと記憶領域４２とは１対１の対応関係にあることから、撮像によって得られる画像信号を記憶させる際に、撮像視野内における正しい位置情報がそのまま保たれるという長所を有している。すなわち、画素の位置と記憶領域の番地を示す記憶アドレスが１対１で対応しているので、記憶アドレスからこの記憶アドレスで示される記憶領域に格納されている画像信号の出力元の画素の座標を容易に特定することができる。このような記憶領域（記憶アドレス）の設定は、取り込んだ画像から撮像対象物の位置や姿勢を画像認識で求めるような場合に有利である。 According to the storage address setting shown in the above example, a blank area is generated on the storage area 42, which is not preferable from the viewpoint of effective use of the storage area, but there is a one-to-one correspondence between each pixel 20a and the storage area 42. Therefore, when storing an image signal obtained by imaging, there is an advantage that correct position information in the imaging field of view is maintained as it is. That is, since the storage address indicating the pixel position and the storage area address has a one-to-one correspondence, the coordinates of the output pixel of the image signal stored in the storage area indicated by the storage address from the storage address Can be easily identified. Such setting of the storage area (storage address) is advantageous when the position and orientation of the object to be imaged are obtained from the captured image by image recognition.

この撮像装置は上記のように構成されており、以下撮像方法について説明する。この撮像方法は、格子状に配置された画素２０ａを備えた受光部２０に撮像対象物である電子部品６の光学画像を結像させ、撮像視野内に設定された画像取込エリアに対応する画素２０ａから選択的に画像信号を出力させるものである。 This imaging apparatus is configured as described above, and an imaging method will be described below. In this imaging method, an optical image of the electronic component 6 that is an imaging object is formed on the light receiving unit 20 including the pixels 20a arranged in a lattice shape, and corresponds to an image capturing area set in the imaging field of view. An image signal is selectively output from the pixel 20a.

（１）まず画像取込エリア情報記憶部２８に予め記憶された画像取込エリア（図４（ａ）参照）に関する情報に基づいて、画像信号を出力させる画素２０ａを特定するための画素選択情報が、画素選択情報生成部２５によって生成される。 (1) First, pixel selection information for specifying a pixel 20a for outputting an image signal based on information relating to an image capture area (see FIG. 4A) stored in advance in the image capture area information storage unit 28. Is generated by the pixel selection information generation unit 25.

（２）次いで、記憶アドレス生成部２７によって画像信号を記憶する画像記憶部２６の記憶アドレスが、画像取込エリアに関する情報に基づいて生成される。画素選択情報を生成する方法と同様な方法を用いることにより、画像取り込みエリアから画像取り込みを行う画素２０ａのＸ座標ＰＸ、Ｙ座標ＰＹは特定できるため、このＸ座標値ＰＸ、Ｙ座標値ＰＹを使用して前述した１８ビットの記憶アドレスを生成する。 (2) Next, the storage address of the image storage unit 26 that stores the image signal is generated by the storage address generation unit 27 based on information about the image capture area. By using a method similar to the method for generating the pixel selection information, the X coordinate PX and the Y coordinate PY of the pixel 20a that captures an image from the image capture area can be specified. Therefore, the X coordinate value PX and the Y coordinate value PY are used. Used to generate the 18-bit storage address described above.

（３）次に制御部２４によって垂直方向画素選択回路２１および水平方向画素選択回路２２を制御することにより、画素選択情報に基づいて特定される複数の画素から１つの画素を選択してこの画素から画像信号を出力させる。そして出力された画像信号は、（２）で生成された記憶アドレスに従って画像記憶部２６の所定の記憶領域に記憶される。この画像信号の出力・記憶は、画素選択情報で特定された全ての画素（図４（ｂ）に示す画素出力対象範囲４１’内の画素２０ａ）に対して行われる。これにより図４（ａ）の画像取込エリア４１に対応する画素出力対象範囲４１’の画素からのみ画像信号が出力され、画像記憶部２６に記憶される。 (3) Next, the control unit 24 controls the vertical pixel selection circuit 21 and the horizontal pixel selection circuit 22 to select one pixel from a plurality of pixels specified based on the pixel selection information. To output an image signal. The output image signal is stored in a predetermined storage area of the image storage unit 26 in accordance with the storage address generated in (2). The image signal is output / stored for all the pixels specified by the pixel selection information (the pixel 20a in the pixel output target range 41 'shown in FIG. 4B). As a result, image signals are output only from the pixels in the pixel output target range 41 ′ corresponding to the image capture area 41 in FIG. 4A and stored in the image storage unit 26.

（実施の形態２）
図６は本発明の実施の形態２の撮像装置の構成を示すブロック図である。図６に示すように、撮像装置は図２に示す構成例と同様の構成要素を備えている。そしてこの実施の形態２では、記憶アドレス生成部２７によって記憶アドレスを生成する際に、画像取込エリア情報を画像取込エリア情報記憶部２８から読み出す替りに、画素選択情報生成部２５によって生成された画素選択情報、すなわち図４（ｂ）に示す画素出力対象範囲４１’内の画素２０ａの位置を示す画素座標を用いて、図５に示す画像記憶部２６の記憶アドレスを生成するようにしている。 (Embodiment 2)
FIG. 6 is a block diagram showing the configuration of the image pickup apparatus according to Embodiment 2 of the present invention. As illustrated in FIG. 6, the imaging apparatus includes the same components as the configuration example illustrated in FIG. 2. In the second embodiment, when the storage address generation unit 27 generates a storage address, the pixel selection information generation unit 25 generates the storage area instead of reading the image capture area information from the image capture area information storage unit 28. The storage address of the image storage unit 26 shown in FIG. 5 is generated using the selected pixel information, that is, the pixel coordinates indicating the position of the pixel 20a in the pixel output target range 41 ′ shown in FIG. 4B. Yes.

（参考例）
図７は本発明の参考例の撮像装置の構成を示すブロック図である。図７において、参考例に示すカメラ８’では、図２に示すカメラ８から画素選択情報生成部２５を除いた構成となっており、制御部２４によって垂直方向画素選択回路２１および水平方向画素選択回路２２に画像信号出力対象の画素を選択させる際に、記憶アドレス生成部２７によって生成された記憶アドレスに基づいて、垂直方向画素選択回路２１および水平方向画素選択回路２２を制御するようにしている。 (Reference example)
FIG. 7 is a block diagram illustrating a configuration of an imaging apparatus according to a reference example of the present invention. 7, the camera 8 ′ shown in the reference example has a configuration in which the pixel selection information generation unit 25 is removed from the camera 8 shown in FIG. 2, and the vertical direction pixel selection circuit 21 and the horizontal direction pixel selection are performed by the control unit 24. When the circuit 22 selects the image signal output target pixel, the vertical direction pixel selection circuit 21 and the horizontal direction pixel selection circuit 22 are controlled based on the storage address generated by the storage address generation unit 27. .

すなわちこの構成においては、図４（ａ）に示す画像取込エリア情報から直接図５に示す記憶アドレスが生成され、画像記憶部２６における記憶領域が設定される。実施の形態１で説明したように、受光部２０の各画素２０ａのＸ座標値とＹ座標値は、このようにして設定された記憶領域、すなわち記憶アドレスと固定的な対応関係にあることから、記憶アドレスを生成することにより、垂直方向画素選択回路２１および水平方向画素選択回路２２を制御する画素選択情報と等価の情報が生成されたことになる。したがって、この等価情報を用いて垂直方向画素選択回路２１および水平方向画素選択回路２２を制御することにより、画像出力対象として特定された画素を選択することができる。 That is, in this configuration, the storage address shown in FIG. 5 is directly generated from the image capture area information shown in FIG. 4A, and the storage area in the image storage unit 26 is set. As described in the first embodiment, the X coordinate value and the Y coordinate value of each pixel 20a of the light receiving unit 20 have a fixed correspondence with the storage area set in this way, that is, the storage address. By generating the storage address, information equivalent to the pixel selection information for controlling the vertical direction pixel selection circuit 21 and the horizontal direction pixel selection circuit 22 is generated. Therefore, by controlling the vertical direction pixel selection circuit 21 and the horizontal direction pixel selection circuit 22 using this equivalent information, it is possible to select a pixel specified as an image output target.

このように上記実施の形態２および参考例においては、画像記憶部２６において受光部２０の各画素２０ａ毎に固定された記憶領域が設定されるような記憶アドレスの形式を用いることにより、各画素２０ａと記憶領域４２との間に１対１の対応関係が成立する。これにより、画像信号を出力させる対象として画素を選択するための情報と、出力された画像信号を書き込む記憶領域を設定するための情報とが等価となり、図６，図７に示すような構成例を採用することが可能となっている。 As described above, in the second embodiment and the reference example, each pixel is obtained by using a storage address format in which a fixed storage area is set for each pixel 20a of the light receiving unit 20 in the image storage unit 26. A one-to-one correspondence is established between 20a and the storage area 42. As a result, information for selecting a pixel as a target for outputting an image signal is equivalent to information for setting a storage area in which the output image signal is written, and a configuration example as shown in FIGS. Can be adopted.

以上説明したように、各実施の形態に示す撮像装置は、格子状に配列された複数の画素２０ａのうち画像信号を出力する画素をランダムに選択可能なカメラ８からの画像信号を、記憶アドレスで設定された記憶領域に書き込むようにしたものである。これにより、カメラ８の撮像視野中の必要範囲からのみ出力された画像信号を、所望の記憶アドレス領域に書き込むことができる。 As described above, the imaging device shown in each embodiment stores an image signal from the camera 8 that can randomly select a pixel that outputs an image signal among a plurality of pixels 20a arranged in a lattice shape, as a storage address. The data is written in the storage area set in. Thereby, an image signal output only from a necessary range in the imaging field of view of the camera 8 can be written in a desired storage address area.

そしてこの撮像装置が組み込まれた電子部品実装装置では、撮像装置７による認識結果に基づいて各電子部品の位置ずれが検出され、移載ヘッド５を基板位置決めステージ２上へ移動させて基板３上に電子部品を実装する際には、位置ずれを補正した上で各電子部品を基板３上に搭載する。この実装動作において、前述のように撮像が効率的に行われることから高速の画像認識が実現され、実装効率を向上させることができる。 In the electronic component mounting apparatus in which the imaging device is incorporated, the positional deviation of each electronic component is detected based on the recognition result by the imaging device 7, the transfer head 5 is moved onto the substrate positioning stage 2, and the substrate 3 is moved. When electronic components are mounted on the substrate, each electronic component is mounted on the substrate 3 after correcting the positional deviation. In this mounting operation, since imaging is efficiently performed as described above, high-speed image recognition is realized, and mounting efficiency can be improved.

なお、本実施の形態では電子部品実装装置を例に説明したが、この撮像装置は電子部品実装装置以外の組立装置や各種検査機等、画像を撮像する全ての装置に対して適用可能である。 In this embodiment, the electronic component mounting apparatus has been described as an example. However, the imaging apparatus can be applied to all apparatuses that capture images, such as an assembly apparatus and various inspection machines other than the electronic component mounting apparatus. .

７認識装置
７ａ画像認識ユニット
８カメラ
２０受光部
２０ａ画素
２１垂直方向画素選択回路
２２水平方向画素選択回路
２４制御部
２５画素選択情報生成部
２６画像記憶部
２７記憶アドレス生成部
２８画像取込エリア情報記憶部 DESCRIPTION OF SYMBOLS 7 Recognition apparatus 7a Image recognition unit 8 Camera 20 Light-receiving part 20a Pixel 21 Vertical direction pixel selection circuit 22 Horizontal direction pixel selection circuit 24 Control part 25 Pixel selection information generation part 26 Image storage part 27 Storage address generation part 28 Image capture area information Storage

Claims

An imaging device that reads an image by forming an optical image of an imaging target on a light receiving unit including a plurality of pixels arranged in a grid pattern, wherein one pixel that outputs an image signal is selected from the plurality of pixels. Randomly selectable pixel selection means, an image storage unit that stores the image signal, an image capture area information storage unit that stores information related to an image capture area set in the imaging field of view, and the image capture A pixel selection information generation unit that generates pixel selection information for specifying a pixel to be selected based on information about an area, and a storage address that generates a storage address of the image storage unit based on information about the image capture area A generation unit; and a control unit that outputs an image signal of a pixel selected by controlling the pixel selection unit based on the pixel selection information, and the image storage unit is output Storing the image signals in the storage area specified by the storage address, the image pickup apparatus, wherein the storage address and the pixels are mapped in a one-to-one relationship.

An imaging device that reads an image by forming an optical image of an imaging target on a light receiving unit including a plurality of pixels arranged in a grid pattern, wherein one pixel that outputs an image signal is selected from the plurality of pixels. Randomly selectable pixel selection means, an image storage unit that stores the image signal, an image capture area information storage unit that stores information related to an image capture area set in the imaging field of view, and the image capture A pixel selection information generation unit that generates pixel selection information for specifying a pixel to be selected based on information on an area, and a storage address generation unit that generates a storage address of the image storage unit based on the pixel selection information And a control unit that outputs an image signal of a pixel selected by controlling the pixel selection unit based on the pixel selection information, and the image storage unit outputs the output image signal in advance. Stored in a specified storage area in the storage address, the image pickup apparatus, wherein the storage address and the pixels are mapped in a one-to-one relationship.

The imaging apparatus according to claim 1, wherein a storage area fixed for each pixel of the light receiving unit is set in the image storage unit.

An optical image of the object to be imaged is formed on a light receiving unit having pixels arranged in a grid, and an image signal is selectively output from the pixel corresponding to the image capturing area set in the imaging field of view and stored. (1) generating pixel selection information for specifying a pixel for outputting an image signal based on information on the image capture area; and (2) information on the image capture area. A step of generating a storage address of an image storage unit for storing an image signal based on the step; and (3) a step of selecting one pixel from a plurality of pixels specified by the pixel selection information and outputting the image signal from the pixel. And (4) storing the image signal output in (3) in the image storage unit according to the storage address generated in (2), wherein the pixel and the storage address have a one-to-one relationship. versus Imaging method characterized in that it is attached.

An optical image of the object to be imaged is formed on a light receiving unit having pixels arranged in a grid, and an image signal is selectively output from the pixel corresponding to the image capturing area set in the imaging field of view and stored. (1) generating pixel selection information for specifying a pixel for outputting an image signal based on information on the image capture area; and (2) based on the pixel selection information. A step of generating a storage address of an image storage unit for storing an image signal, and (3) a step of selecting one pixel from a plurality of pixels specified by the pixel selection information and outputting the image signal from the pixel, (4) storing the image signal output in (3) in the image storage unit according to the storage address generated in (2), wherein the pixel and the storage address are associated with each other in a one-to-one relationship Being done Imaging method comprising.

6. The imaging method according to claim 4, wherein a storage area fixed for each pixel of the light receiving unit is set in the image storage unit.