JP2007122118A - Image connection method - Google Patents

Image connection method Download PDF

Info

Publication number
JP2007122118A
JP2007122118A JP2005309293A JP2005309293A JP2007122118A JP 2007122118 A JP2007122118 A JP 2007122118A JP 2005309293 A JP2005309293 A JP 2005309293A JP 2005309293 A JP2005309293 A JP 2005309293A JP 2007122118 A JP2007122118 A JP 2007122118A
Authority
JP
Japan
Prior art keywords
small
image
small image
images
positioning
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2005309293A
Other languages
Japanese (ja)
Inventor
Hirofumi Matsuzaki
浩文 松▲崎▼
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Holdings Corp
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Priority to JP2005309293A priority Critical patent/JP2007122118A/en
Publication of JP2007122118A publication Critical patent/JP2007122118A/en
Pending legal-status Critical Current

Links

Images

Abstract

<P>PROBLEM TO BE SOLVED: To provide an image connection method preventing displacement in positioning of a small image in image connection. <P>SOLUTION: When dividing an imaging target S into lattice-like small sections and connecting the plurality of imaged small images A11-A75 to form the whole image of the imaging target S, a reference small image A43 is selected from the small images each obtained by imaging one of the small sections except the small sections of edge parts including the small sections of four corners among the small sections divided in a lattice state, and the other small images A11-A75 are positioned on the basis of the reference small image A43 and are connected. Thereby, the other small images are not positioned based on the small images having small image information for matching in the connection of the small images, thereby the displacement of the image connection can be prevented in the early stage to form the whole image having small distortion, and the small displacement or the like. <P>COPYRIGHT: (C)2007,JPO&INPIT

Description

本発明は、撮像対象を格子状の小区画に分割して撮像した複数の小画像を連結して撮像対象の全体画像を形成する画像連結方法に関するものである。   The present invention relates to an image connection method for forming a whole image of an imaging target by connecting a plurality of small images captured by dividing the imaging target into grid-like small sections.

電子顕微鏡を用いて標本等の撮像対象を撮像して拡大画像を作成する場合、撮像対象を格子状の小区画に分割して撮像した後、これらの小区画を撮像した小画像を小区画の配置に対応した配置で連結して撮像対象の全体画像を再構成する画像連結方法が広く用いられている。これらの小画像の縁部には、連結の際に重なり合う重複した画像部分が含まれており、これらの重複部分の画像情報を手掛かりとして隣接する小画像同士のマッチングを行って連結している(例えば特許文献1参照)。
特開平11−95125号公報
When creating an enlarged image by imaging an imaging target such as a specimen using an electron microscope, divide the imaging target into grid-like small sections, and then capture the small images obtained by capturing these small sections. An image connection method for reconstructing an entire image to be imaged by connecting in an arrangement corresponding to the arrangement is widely used. The edge portions of these small images include overlapping image portions that overlap at the time of connection, and the adjacent small images are matched and connected using the image information of these overlapping portions as a clue ( For example, see Patent Document 1).
JP 11-95125 A

従来、撮像された各小画像は、一定の順番で連結されて全体画像に再構成されていた。特に、ラスタスキャン型タイリングと呼ばれる走査線上に一行毎に列方向に連結していく方法が広く用いられている。   Conventionally, each captured small image is connected in a certain order and reconstructed into an entire image. In particular, a method of connecting in the column direction line by line on a scanning line called raster scan type tiling is widely used.

しかしながら、標本が動植物組織等の試料を円形ウェルに採取したものである場合、この円形ウェルを格子状の小区画に分割して撮像すると、四隅の小区画が円形ウェルの外側となって有用な画像情報が記録されない場合がある。この場合に、ラスタスキャン型のタイリングを行うと、これら四隅の小画像の何れかが最初に位置決めされることになるため、隣接する小画像を連結する際に、マッチングに必要な画像情報が不足して位置ずれが生じ易い。画像連結の初期段階でこのような位置ずれが生じると、連鎖的に位置ずれが発生して不正確な全体画像が形成されてしまうおそれがあった。   However, when the specimen is a sample of animal or plant tissue or the like collected in a circular well, if the circular well is divided into grid-like small sections and imaged, the four corner small sections become useful outside the circular well. Image information may not be recorded. In this case, when raster scanning type tiling is performed, one of these four corner small images is positioned first, so that when connecting adjacent small images, image information necessary for matching is obtained. Misalignment tends to occur. If such a misalignment occurs in the initial stage of image connection, misalignment may occur in a chain and an inaccurate whole image may be formed.

そこで本発明は、画像連結の際の小画像の位置決めにずれが生じることのない画像連結方法を提供することを目的とする。   SUMMARY OF THE INVENTION An object of the present invention is to provide an image connection method that does not cause a deviation in positioning of small images during image connection.

請求項1記載の発明は、撮像対象を格子状の小区画に分割して撮像した複数の小画像を、前記小区画の配置に対応した配置で連結して前記撮像対象の全体画像を形成する画像連結方法であって、前記小画像が、横方向に平行な第1の辺及び第2の辺と縦方向に平行な第3の辺及び第4の辺からなる矩形状の画像であり、前記格子状に分割された小区画のうち四隅の小区画を含む縁部の小区画以外の小区画の何れかを撮像した小画像を基準小画像として選択する基準小画像選択工程と、前記選択された基準小画像の第1の辺と第1小画像の第2の辺とのマッチングを行って前記第1小画像を位置決めして連結する第1の連結工程と、前記選択された基準小画像の第2の辺と第2小画像の第1の辺とのマッチングを行って前記第2小画像を位置決めして連結する第2の連結工程と、前記選択された基準小画像の第3の辺と第3小画像の第4の辺とのマッチングを行って前記第3小画像を位置決めして連結する第3の連結工程と、前記選択された基準小画像の第4の辺と第4小画像の第3の辺とのマッチングを行って前記第4小画像を位置決めして連結する第4の連結工程と、前記連結された第1小画像の第3の辺と第5小画像の第4の辺とのマッチングを行うとともに前記連結された第3小画像の第1の辺と前記第5小画像の第2の辺とのマッチングを行って前記第5小画像を位置決めして連結する第5の連結工程と、前記連結された第2小画像の第3の辺と第6小画像の第4の辺とのマッチングを行うとともに前記連結され
た第3小画像の第2の辺と前記第6小画像の第1の辺とのマッチングを行って前記第6小画像を位置決めして連結する第6の連結工程と、前記連結された第1小画像の第4の辺と第7小画像の第3の辺とのマッチングを行うとともに前記連結された第4小画像の第1の辺と前記第7小画像の第2の辺とのマッチングを行って前記第7小画像を位置決めして連結する第7の連結工程と、前記連結された第2小画像の第4の辺と第8小画像の第3の辺とのマッチングを行うとともに前記連結された第4小画像の第2の辺と前記第8小画像の第1の辺とのマッチングを行って前記第8小画像を位置決めして連結する第8の連結工程と、を含む。
According to the first aspect of the present invention, a plurality of small images obtained by dividing the imaging target into grid-like small sections are connected in an arrangement corresponding to the arrangement of the small sections to form the entire image of the imaging target. In the image connection method, the small image is a rectangular image including a first side and a second side parallel to the horizontal direction, and a third side and a fourth side parallel to the vertical direction, A reference small image selection step of selecting, as a reference small image, a small image obtained by imaging any one of the small partitions other than the edge small partitions including the small corners of the four corners among the small partitions divided in the grid pattern; A first connecting step of positioning and connecting the first small image by matching the first side of the reference small image and the second side of the first small image; and the selected reference small image Matching the second side of the image with the first side of the second small image to position the second small image The third small image is positioned and connected by performing matching between the second connecting step of connecting and the third side of the selected reference small image and the fourth side of the third small image. Third connection step, and fourth connection for positioning and connecting the fourth small image by matching the fourth side of the selected reference small image with the third side of the fourth small image Matching the process with the third side of the connected first small image and the fourth side of the fifth small image, and the first side of the connected third small image and the fifth small image A fifth connecting step of positioning and connecting the fifth small image by performing matching with a second side of the image, a third side of the connected second small image, and a sixth side of the sixth small image; 4 and matching between the second side of the connected third small image and the first side of the sixth small image. Performing matching between the fourth side of the connected first small image and the third side of the seventh small image by performing a ching to position and connect the sixth small image And a seventh connecting step of positioning and connecting the seventh small image by matching the first side of the connected fourth small image with the second side of the seventh small image; The fourth side of the connected second small image is matched with the third side of the eighth small image, and the second side of the connected fourth small image and the first side of the eighth small image are matched. And an eighth connecting step of positioning and connecting the eighth small image by performing matching with the side of the image.

請求項2記載の発明は、撮像対象を格子状の小区画に分割して撮像した複数の小画像を、前記小区画の配置に対応した配置で連結して前記撮像対象の全体画像を形成する画像連結方法であって、前記小画像が、横方向に平行な第1の辺及び第2の辺と縦方向に平行な第3の辺及び第4の辺からなる矩形状の画像であり、前記格子状に分割された小区画のうち四隅の小区画を含む縁部の小区画以外の小区画の何れかを撮像した小画像を基準小画像として選択する基準小画像選択工程と、前記選択された基準小画像の第1の辺と第1小画像の第2の辺とのマッチングを行って前記第1小画像の連結位置の位置決めを行う第1の位置決め工程と、前記選択された基準小画像の第2の辺と第2小画像の第1の辺とのマッチングを行って前記第2小画像の連結位置の位置決めを行う第2の位置決め工程と、前記選択された基準小画像の第3の辺と第3小画像の第4の辺とのマッチングを行って前記第3小画像の連結位置の位置決めを行う第3の位置決め工程と、前記選択された基準小画像の第4の辺と第4小画像の第3の辺とのマッチングを行って前記第4小画像の連結位置の位置決めを行う第1の位置決め工程と、前記位置決めされた第1小画像の第3の辺と第5小画像の第4の辺とのマッチングを行うとともに前記位置決めされた第3小画像の第1の辺と前記第5小画像の第2の辺とのマッチングを行って前記第5小画像の連結位置の位置決めを行う第5の位置決め工程と、前記位置決めされた第2小画像の第3の辺と第6小画像の第4の辺とのマッチングを行うとともに前記位置決めされた第3小画像の第2の辺と前記第6小画像の第1の辺とのマッチングを行って前記第6小画像の連結位置の位置決めを行う第6の位置決め工程と、前記位置決めされた第1小画像の第4の辺と第7小画像の第3の辺とのマッチングを行うとともに前記位置決めされた第4小画像の第1の辺と前記第7小画像の第2の辺とのマッチングを行って前記第7小画像の連結位置の位置決めを行う第7の位置決め工程と、前記位置決めされた第2小画像の第4の辺と第8小画像の第3の辺とのマッチングを行うとともに前記位置決めされた第4小画像の第2の辺と前記第8小画像の第1の辺とのマッチングを行って前記第8小画像の連結位置の位置決めを行う第8の位置決め工程と、前記選択された基準小画像と前記位置決めされた第1乃至第8小画像を連結して前記撮像対象の全体画像を形成する画像連結工程と、を含む。   The invention according to claim 2 forms a whole image of the imaging target by connecting a plurality of small images obtained by dividing the imaging target into grid-like small sections in an arrangement corresponding to the arrangement of the small sections. In the image connection method, the small image is a rectangular image including a first side and a second side parallel to the horizontal direction, and a third side and a fourth side parallel to the vertical direction, A reference small image selection step of selecting, as a reference small image, a small image obtained by imaging any one of the small partitions other than the edge small partitions including the small corners of the four corners among the small partitions divided in the grid pattern; A first positioning step of positioning the connection position of the first small image by matching the first side of the reference small image and the second side of the first small image, and the selected reference Matching between the second side of the small image and the first side of the second small image, the second small image The second positioning step for positioning the connection position, and the matching of the third side of the selected reference small image and the fourth side of the third small image are performed to determine the connection position of the third small image. The third positioning step for positioning is performed, and the fourth side of the selected small reference image and the third side of the fourth small image are matched to determine the connection position of the fourth small image. A first positioning step, matching the third side of the positioned first small image and the fourth side of the fifth small image, and the first side of the positioned third small image; A fifth positioning step for performing matching with a second side of the fifth small image to position a connection position of the fifth small image; a third side of the positioned second small image; Matching with the 4th edge of 6 small images and positioning A sixth positioning step for positioning the connection position of the sixth small image by matching the second side of the third small image with the first side of the sixth small image; Matching the fourth side of the first small image with the third side of the seventh small image and the first side of the positioned fourth small image and the second side of the seventh small image And a seventh positioning step for positioning the connection position of the seventh small image by matching, and matching between the fourth side of the positioned second small image and the third side of the eighth small image And an eighth positioning step of performing matching between the second side of the positioned fourth small image and the first side of the eighth small image and positioning the connection position of the eighth small image The selected reference small image and the positioned first to eighth small images Connecting images to form an entire image of the imaging target.

本発明によれば、小画像同士の連結におけるマッチングの際の手掛かりとなる画像情報が少ない小画像を基準として他の小画像の位置決めがなされることがないので、画像連結の初期段階における位置ずれを防止することができる。これにより、連鎖的に発生する小画像の位置ずれを防止することができ、歪みやずれ等の少ない全体画像を形成することができる。   According to the present invention, since the positioning of other small images is not performed with reference to a small image with a small amount of image information that is a clue in matching in the connection between small images, a positional shift in the initial stage of image connection Can be prevented. As a result, it is possible to prevent the positional shift of small images that occur in a chain, and to form an entire image with little distortion or shift.

本発明の一実施の形態について図面を参照して説明する。図1は本発明の一実施の形態における画像処理装置の構成図、図2は本発明の一実施の形態における撮像対象の分割パターンを示す説明図、図3(a)、(b)は本発明の一実施の形態における小画像の位置決め方法の説明図、図4(a)、(b)は本発明の一実施の形態における小画像の位置決め方法の説明図、図5は本発明の一実施の形態における画像連結の基本順序を示した説明図、図6(a)、(b)、図7(a)、(b)、図8は本発明の一実施の形態における全
体画像を形成する際の画像連結の順序を示した説明図である。
An embodiment of the present invention will be described with reference to the drawings. FIG. 1 is a configuration diagram of an image processing apparatus according to an embodiment of the present invention, FIG. 2 is an explanatory diagram illustrating a division pattern of an imaging target according to an embodiment of the present invention, and FIGS. FIGS. 4A and 4B are explanatory diagrams of a small image positioning method according to an embodiment of the present invention, FIGS. 4A and 4B are explanatory diagrams of a small image positioning method according to an embodiment of the present invention, and FIG. FIG. 6 (a), (b), FIG. 7 (a), (b), and FIG. 8 form an entire image according to an embodiment of the present invention. It is explanatory drawing which showed the order of the image connection at the time of doing.

図1において、画像処理装置1には、撮像ステージ2が備えられており、撮像対象となる動植物組織等の試料Sが採取された円形ウェル3が複数並設されている。撮像ステージ2の下方にはハロゲンランプ等からなる光源4が配設されており、撮像ステージ2の円形ウェル3に採取された試料Sを下方から照射する。   In FIG. 1, the image processing apparatus 1 includes an imaging stage 2, and a plurality of circular wells 3 from which samples S such as animal and plant tissues to be imaged are collected are arranged in parallel. A light source 4 composed of a halogen lamp or the like is disposed below the imaging stage 2 and irradiates the sample S collected on the circular well 3 of the imaging stage 2 from below.

撮像ステージ2の上方には、CCDカメラ5等の撮像部が配設されている。CCDカメラ5は、光を電気信号に変換するCCD素子を備えた本体6と、この本体6から下方に向けて装着されたレンズ部7からなり、試料Sを透過した光をCCD素子に集光する。レンズ部7は、本体6に昇降自在に装着されており、対物レンズと円形ウェル3との距離を調節して焦点合わせを行う。CCDカメラ5により変換された電気信号はカメラ制御部8においてデジタル画像データに変換される。   An imaging unit such as a CCD camera 5 is disposed above the imaging stage 2. The CCD camera 5 includes a main body 6 having a CCD element for converting light into an electric signal, and a lens unit 7 mounted downward from the main body 6, and condenses the light transmitted through the sample S on the CCD element. To do. The lens unit 7 is mounted on the main body 6 so as to be movable up and down, and performs focusing by adjusting the distance between the objective lens and the circular well 3. The electrical signal converted by the CCD camera 5 is converted into digital image data by the camera control unit 8.

撮像ステージ2はXYテーブル9に備えられている。XYテーブル9は、ステージ制御部10の指令に基づいてXY方向に水平移動し、撮像ステージ2とCCDカメラ5との位置合わせを行う。   The imaging stage 2 is provided in the XY table 9. The XY table 9 moves horizontally in the XY direction based on a command from the stage control unit 10 and aligns the imaging stage 2 and the CCD camera 5.

画像処理装置1には、処理・制御部11が備えられており、CCDカメラ5及びXYテーブル9の動作を制御するとともに撮像された画像データの処理を行う。マップ情報記憶部12には、円形ウェル3を撮像する際の分割パターンが設定されている。円形ウェル3内に採取された試料Sを撮像するに際しては、図2に示すように、円形ウェル3の全体を包含する矩形領域13を格子状の小区画に分割して撮像する。本実施の形態においては、矩形領域13をX方向に5列、Y方向に7列の計35個の小区画a11〜a75に分割した分割パターンを例示している。各小区画a11〜a75はそれぞれ隣接する小区画と重なり合う重複部分を有しており、例えば、小区画a32とa33はエリアαで重なり合い、小区画a32とa42はエリアβで重なり合い、小区画a42とa43はエリアγで重なり合い、小区画a33とa43はエリアδで重なり合っている。この分割パターンは、マップ情報記憶部12に設定された分割パターンの一例であり、撮像対象のサイズや要求される画像の解像度等により種々の分割パターンを設定することができる。   The image processing apparatus 1 includes a processing / control unit 11 that controls the operations of the CCD camera 5 and the XY table 9 and processes captured image data. In the map information storage unit 12, a division pattern for imaging the circular well 3 is set. When imaging the sample S collected in the circular well 3, as shown in FIG. 2, the rectangular region 13 including the entire circular well 3 is divided into lattice-shaped small sections and imaged. In the present embodiment, a divided pattern is illustrated in which the rectangular region 13 is divided into a total of 35 small sections a11 to a75 with 5 columns in the X direction and 7 columns in the Y direction. Each of the small sections a11 to a75 has an overlapping portion overlapping with an adjacent small section. For example, the small sections a32 and a33 overlap in the area α, the small sections a32 and a42 overlap in the area β, and the small section a42. a43 overlaps in area γ, and small sections a33 and a43 overlap in area δ. This division pattern is an example of the division pattern set in the map information storage unit 12, and various division patterns can be set according to the size of the imaging target, the required image resolution, and the like.

これらの小区画a11〜a75の配置は、分割パターンの行列番号、若しくは行列番号に対応したXY座標値により表され、分割パターンとともにマップ情報記憶部12に記憶されている。この分割パターンの行列番号やXY座標値に基づいてXYテーブル9の移動量が制御され、各小区画a11〜a75とCCDカメラ5との位置合わせが順次行われる。CCDカメラ5により各小区画a11〜a75を撮像した小画像は、マップ情報記憶部12に記憶された各小区画a11〜a75の配置と関連付けられて小画像記憶部14に記憶される。   The arrangement of the small sections a11 to a75 is represented by the matrix number of the division pattern or the XY coordinate value corresponding to the matrix number, and is stored in the map information storage unit 12 together with the division pattern. The movement amount of the XY table 9 is controlled based on the matrix number and XY coordinate value of this division pattern, and the alignment of each of the small sections a11 to a75 and the CCD camera 5 is sequentially performed. Small images obtained by imaging the small sections a11 to a75 by the CCD camera 5 are stored in the small image storage section 14 in association with the arrangement of the small sections a11 to a75 stored in the map information storage section 12.

図1において、処理・制御部11には、画像連結部15が備えられており、小画像記憶部14に記憶された各小区画a11〜a75を撮像した小画像を、各小区画a11〜a75の配置に対応した配置で連結し、試料Sの全体画像を形成する。画像連結部15において連結された画像は連結画像記憶部16に記憶される。小画像記憶部14に記憶された各小画像及び連結画像記憶部16に記憶された連結画像、試料Sの全体画像は、処理・制御部11に備えられた表示処理部17において可視的画像に変換されてモニタ18に表示される。操作・入力部19は、キーボードやドライバ等であり、処理・制御部11に種々の指令を入力して上述した各動作を実行させる。   In FIG. 1, the processing / control unit 11 includes an image linking unit 15, and small images obtained by capturing the small sections a <b> 11 to a <b> 75 stored in the small image storage unit 14 are converted into the small sections a <b> 11 to a <b> 75. The whole image of the sample S is formed by connecting in an arrangement corresponding to the arrangement of The images connected in the image connecting unit 15 are stored in the connected image storage unit 16. Each small image stored in the small image storage unit 14, the connected image stored in the connected image storage unit 16, and the entire image of the sample S are converted into visible images by the display processing unit 17 provided in the processing / control unit 11. It is converted and displayed on the monitor 18. The operation / input unit 19 is a keyboard, a driver, or the like, and inputs various commands to the processing / control unit 11 to execute each operation described above.

次に、画像処理装置1における画像連結方法について説明する。画像連結においては、小画像記憶部14に記憶された各小区画a11〜a75を撮像した小画像を、各小区画a
11〜a75の配置に対応した配置で連結して行われる。上述したように、各小区画a11〜a75は、それぞれ隣接する小区画と重なり合う重複部分を有しているので、こられの小区画a11〜a75を撮像した各小画像にも重複部分が含まれている。これらの重複部分を重ね合わせることにより各小画像の連結が行われる。
Next, an image connection method in the image processing apparatus 1 will be described. In image connection, a small image obtained by capturing the small sections a11 to a75 stored in the small image storage unit 14 is converted into each small section a.
It is performed by connecting in an arrangement corresponding to the arrangement of 11 to a75. As described above, since each of the small sections a11 to a75 has an overlapping portion that overlaps with each adjacent small section, each small image obtained by imaging the small sections a11 to a75 also includes an overlapping portion. ing. The small images are connected by superimposing these overlapping portions.

画像連結方法には2通りあり、一つは、図3に示すように、他の小画像を連結する際の位置決めの基準となる小画像と同じ行又は列に属する小画像を連結する方法であり、一つは、図4に示すように、基準となる小画像と同じ行及び列に属さない他の小画像を連結する方法である。   There are two image connection methods. As shown in FIG. 3, one is a method of connecting small images belonging to the same row or column as a small image serving as a positioning reference when connecting other small images. One is a method of connecting other small images not belonging to the same row and column as the reference small image, as shown in FIG.

図3(a)において、小画像P1は、他の小画像P2を連結する際の位置決めの基準となる小画像である。上述したように、連結される2つの小画像には画像の重複部分が存在する。小画像P1の左辺を含む領域εと小画像P2の右辺を含む領域εは、撮像対象である試料Sの同一部分を撮像した画像情報を含んでいるので、これらの領域ε同士を重ね合わせて画像情報をマッチングすることにより小画像P2が位置決めされる。領域ε同士の重ね合わせにおいては、基準となる小画像P1側の領域ε内にマッチングの際の基準となる照合部分R1を設定し、この照合部分R1と同一の画像情報を含む部分を小画像P2側の領域ε内からサーチして被照合部分R2を検出し、照合部分R1に被照合部分R2が重なり合うように小画像P2が位置決めされて小画像P1に連結される(図3(b)参照)。   In FIG. 3A, a small image P1 is a small image that serves as a positioning reference when connecting other small images P2. As described above, overlapping portions of images exist in two small images to be connected. Since the region ε including the left side of the small image P1 and the region ε including the right side of the small image P2 include image information obtained by imaging the same part of the sample S that is the imaging target, the regions ε are overlapped with each other. The small image P2 is positioned by matching the image information. In the overlapping of the regions ε, a reference portion R1 serving as a reference for matching is set in the region ε on the small image P1 side serving as a reference, and a portion including the same image information as the matching portion R1 is set as a small image. A search is made from within the region ε on the P2 side to detect the collated portion R2, and the small image P2 is positioned so that the collated portion R2 overlaps the collated portion R1 and connected to the small image P1 (FIG. 3B). reference).

なお、図3(a)において、基準となる小画像P1と同じ行の右側に配置される小画像P3や、同じ列の上下に配置される小画像P4、P5を連結する際にも、上記と同様にマッチングを行ってそれぞれ位置決めされて連結されている。また、位置決めされた小画像P2の左側に更に他の小画像P6を連結する際には、小画像P2を基準として小画像P6が位置決めされる。   In FIG. 3A, when the small image P3 arranged on the right side of the same row as the reference small image P1 and the small images P4, P5 arranged above and below the same column are connected, In the same manner as above, matching is performed, and each is positioned and connected. Further, when another small image P6 is connected to the left side of the positioned small image P2, the small image P6 is positioned with reference to the small image P2.

図4(a)において、小画像P1の左側及び上側に、それぞれ小画像P2、P4が連結されている。小画像P7は、小画像P1の左斜め上に配置される小画像であり、小画像P1と同じ行及び列に属さない小画像である。小画像P2及び小画像P4は、小画像P1を基準として上述した連結方法により位置決めがなされている。小画像P7は、斜め方向に配置された小画像P2及び小画像P4の2つの小画像を基準として位置決めされて連結される。すなわち、小画像P2の上辺を含む領域ζ内にマッチングの際の基準となる照合部分R2を設定するとともに、小画像P4の左辺を含む領域η内にマッチングの際の基準となる照合部分R4を設定し、照合部分R2と同一の画像情報を含む部分を小画像P7の下辺を含む領域ζ内からサーチして被照合部分R72を検出するとともに、照合部分R4と同一の画像情報を含む部分を小画像P7の右辺を含む領域η内からサーチして被照合部分R74を検出し、照合部分R2に被照合部分R72が重なり合うとともに照合部分R4に被照合部分R74が重なり合うように小画像P7が位置決めされて連結される(図4(b)参照)。   In FIG. 4A, small images P2 and P4 are connected to the left and upper sides of the small image P1, respectively. The small image P7 is a small image arranged diagonally to the upper left of the small image P1, and is a small image that does not belong to the same row and column as the small image P1. The small image P2 and the small image P4 are positioned by the connection method described above with reference to the small image P1. The small image P7 is positioned and connected with reference to the two small images P2 and P4 arranged in the oblique direction. That is, a matching portion R2 serving as a reference for matching is set in a region ζ including the upper side of the small image P2, and a matching portion R4 serving as a reference for matching is set in a region η including the left side of the small image P4. A part including the same image information as the collation part R2 is searched from the region ζ including the lower side of the small image P7 to detect the collation part R72, and a part including the same image information as the collation part R4 is set. A search is made from within the area η including the right side of the small image P7 to detect the collated portion R74, and the small image P7 is positioned so that the collated portion R72 overlaps the collated portion R2 and the collated portion R4 overlaps the collated portion R74. And connected (see FIG. 4B).

このように、基準となる小画像P1と同じ行及び列に属さない小画像P7を小画像群に連結する際には、小画像P7の離間した2つの照合部分R72、R74を一つの照合部分とみなすとともに、離間した被照合部分R2、R4を既に位置決めされている小画像群(本実施の形態においては、既に位置決めされて連結された3つの小画像P1、P2、P4)の一つの被照合部分とみなし、この一つとみなされた照合部分と被照合部分のマッチングを行って小画像P7が位置決めされる。   As described above, when the small image P7 that does not belong to the same row and column as the reference small image P1 is connected to the small image group, two collation portions R72 and R74 separated from the small image P7 are combined into one collation portion. And, in the present embodiment, one target of one of the small image groups (three small images P1, P2, and P4 that have already been positioned and connected) in which the to-be-checked portions R2 and R4 that have been separated are already positioned. The small image P7 is positioned by considering it as a collation part and matching the collation part regarded as one and the part to be collated.

次に、画像連結におけるタイリングの基本順序、すなわち小画像を所定の位置に配置して連結する基本順序について、図5を参照して説明する。図5において、各小画像は矩形
状の画像であり、横方向に平行な第1の辺及び第2の辺と縦方向に平行な第3の辺及び第4の辺を備えている。
Next, a basic order of tiling in image connection, that is, a basic order in which small images are arranged and connected at predetermined positions will be described with reference to FIG. In FIG. 5, each small image is a rectangular image, and includes a first side and a second side parallel to the horizontal direction, and a third side and a fourth side parallel to the vertical direction.

まず、タイリングする各小画像の位置決めの基準となる基準小画像を小画像記憶部14(図2参照)に記憶された複数の小画像の中から選択する(基準小画像選択工程)。基準小画像は、図2における矩形領域13の四隅の小区画を含む縁部の小区画以外の小区画の何れかを撮像した小画像であればよいが、矩形領域13の中央に配置される小画像を選択するのが好ましい。一般に、円形ウェル3に採取された試料Sは、その中央部に標本としての有用な物質等が含まれていることが多い。従って、このような部分を撮像した小画像を基準とすれば、他の小画像とのマッチングの際の画像情報が豊富であるので、画像連結の初期段階での位置づれ等の不具合が生じにくく、画像の歪み等を極力排した試料Sの全体画像を形成することができる。   First, a reference small image serving as a reference for positioning each small image to be tiled is selected from a plurality of small images stored in the small image storage unit 14 (see FIG. 2) (reference small image selection step). The reference small image may be a small image obtained by imaging any of the small sections other than the small sections at the edge including the small sections at the four corners of the rectangular area 13 in FIG. 2, but is arranged at the center of the rectangular area 13. It is preferable to select a small image. In general, the sample S collected in the circular well 3 often contains a useful substance or the like as a specimen at the center. Therefore, if a small image obtained by capturing such a portion is used as a reference, image information at the time of matching with other small images is abundant, so that problems such as positioning at the initial stage of image connection are less likely to occur. Thus, it is possible to form an entire image of the sample S in which image distortion and the like are eliminated as much as possible.

基準小画像の選択は、矩形領域13の中央に配置される小画像を予め画像連結部15に登録しておき、この小画像を基準小画像として自動的に選択されるようになっている。また、小画像記憶部14に記憶された各小画像をモニタ18に表示させて確認しながら所望の小画像を操作・入力部19により基準小画像として選択するようにしてもよく、このようにすると、試料Sのうち特に観察したい部分を撮像した小画像を基準小画像として選択することができる。   For the selection of the reference small image, a small image arranged in the center of the rectangular area 13 is registered in the image connecting unit 15 in advance, and this small image is automatically selected as the reference small image. Alternatively, a desired small image may be selected as a reference small image by the operation / input unit 19 while displaying each small image stored in the small image storage unit 14 on the monitor 18 and confirming it. Then, the small image which imaged the part to observe especially among the samples S can be selected as a reference | standard small image.

図5中の第1小画像〜第8小画像は、基準小画像の周囲に配置される小画像であり、これらの配置はマップ情報記憶部12に記憶された各小区画の配置と関連付けられて小画像記憶部14に記憶されている。   The first to eighth small images in FIG. 5 are small images arranged around the reference small image, and these arrangements are associated with the arrangement of the small sections stored in the map information storage unit 12. And stored in the small image storage unit 14.

基準小画像が選択されると、基準小画像の第1の辺と、基準小画像の上方に配置される第1小画像の第2の辺とのマッチングを行い、第1小画像の基準小画像に対する相対的な位置を位置決めして連結する(第1の連結工程)。   When the reference small image is selected, matching is performed between the first side of the reference small image and the second side of the first small image disposed above the reference small image, and the reference small image of the first small image is selected. A relative position with respect to the image is positioned and connected (first connecting step).

また、基準小画像の第2の辺と、基準小画像の下方に配置される第2小画像の第1の辺とのマッチングを行い、第2小画像の基準小画像に対する相対的な位置を位置決めして連結する(第2の連結工程)。   Further, matching is performed between the second side of the reference small image and the first side of the second small image disposed below the reference small image, and the relative position of the second small image with respect to the reference small image is determined. Position and connect (second connecting step).

また、基準小画像の第3の辺と、基準小画像の左方に配置される第3小画像の第4の辺とのマッチングを行い、第3小画像の基準小画像に対する相対的な位置を位置決めして連結する(第3の連結工程)。   In addition, the third side of the reference small image is matched with the fourth side of the third small image arranged on the left side of the reference small image, and the relative position of the third small image with respect to the reference small image is determined. Are positioned and connected (third connecting step).

また、基準小画像の第4の辺と、基準小画像の右方に配置される第4小画像の第3の辺とのマッチングを行い、第4小画像の基準小画像に対する相対的な位置を位置決めして連結する(第4の連結工程)。   Further, matching is performed between the fourth side of the reference small image and the third side of the fourth small image arranged on the right side of the reference small image, and the relative position of the fourth small image to the reference small image is determined. Are positioned and connected (fourth connecting step).

そして、第1の連結工程により連結された第1小画像の第3の辺と、第1小画像の左方に配置される第5小画像の第4の辺とのマッチングを行うとともに、第3の連結工程により連結された第3小画像の第1の辺と、第3小画像の上方に配置される第5小画像の第2の辺とのマッチングを行い、第5小画像の第1小画像及び第3小画像に対する相対的な位置を位置決めして連結する(第5の連結工程)。   Then, matching is performed between the third side of the first small image connected in the first connection step and the fourth side of the fifth small image arranged on the left side of the first small image, and Matching the first side of the third small image connected by the connecting step 3 and the second side of the fifth small image arranged above the third small image, A relative position with respect to the first small image and the third small image is positioned and connected (fifth connecting step).

第2の連結工程により連結された第2小画像の第3の辺と、第2小画像の左方に配置される第6小画像の第4の辺とのマッチングを行うとともに、第3の連結工程により連結された第3小画像の第2の辺と、第3小画像の下方に配置される第6小画像の第1の辺とのマッチングを行い、第6小画像の第2小画像及び第3小画像に対する相対的な位置を位置
決めして連結する(第6の連結工程)。
The third side of the second small image connected by the second connection step is matched with the fourth side of the sixth small image arranged on the left side of the second small image, and the third side Matching is performed between the second side of the third small image connected in the connecting step and the first side of the sixth small image arranged below the third small image, and the second small of the sixth small image is performed. A relative position with respect to the image and the third small image is positioned and connected (sixth connecting step).

第1の連結工程により連結された第1小画像の第4の辺と、第2小画像の右方に配置される第7小画像の第3の辺とのマッチングを行うとともに、第4の連結工程により連結された第4小画像の第1の辺と、第4小画像の上方に配置される第7小画像の第2の辺とのマッチングを行い、第7小画像の第1小画像及び第4小画像に対する相対的な位置を位置決めして連結する(第7の連結工程)。   The fourth side of the first small image connected by the first connection step is matched with the third side of the seventh small image arranged on the right side of the second small image, and the fourth side Matching is performed between the first side of the fourth small image connected in the connecting step and the second side of the seventh small image arranged above the fourth small image, and the first small of the seventh small image is performed. A relative position with respect to the image and the fourth small image is positioned and connected (seventh connecting step).

第2の連結工程により連結された第2小画像の第4の辺と、第2小画像の右方に配置される第8小画像の第3の辺とのマッチングを行うとともに、第4の連結工程により連結された第4小画像の第2の辺と、第4小画像の下方に配置される第8小画像の第1の辺とのマッチングを行い、第8小画像の第2小画像及び第4小画像に対する相対的な位置を位置決めして連結する(第8の連結工程)。   The fourth side of the second small image connected by the second connection step is matched with the third side of the eighth small image arranged on the right side of the second small image, and the fourth side Matching is performed between the second side of the fourth small image connected in the connecting step and the first side of the eighth small image arranged below the fourth small image, and the second small of the eighth small image is performed. A relative position with respect to the image and the fourth small image is positioned and connected (eighth connecting step).

以上の第1の連結工程乃至第8の連結工程により、基準小画像の周囲に配置される小画像がタイリングされる。なお、第1の連結工程〜第8の連結工程は、第5の連結工程が第1の連結工程及び第3の連結工程の後工程であり、第6の連結工程が第2の連結工程及び第3の連結工程の後工程であり、第7の連結工程が第1の連結工程及び第4の連結工程の後工程であり、第8の連結工程が第2の連結工程及び第4の連結工程の後工程であれば順不同であり、任意の順序で行ってもよい。また、各小区画の第1の辺〜第4の辺とは、それぞれの辺を含む縁部を示す概念であり、マッチングの際に照合される画像情報を含んでいる。   The small images arranged around the reference small image are tiled by the first to eighth connection steps. In the first connection step to the eighth connection step, the fifth connection step is a subsequent step of the first connection step and the third connection step, and the sixth connection step is the second connection step and It is a post-process of the third connecting step, the seventh connecting step is a post-step of the first connecting step and the fourth connecting step, and the eighth connecting step is the second connecting step and the fourth connecting step. As long as it is a post-process of a process, it is random and you may carry out in arbitrary orders. Further, the first side to the fourth side of each small section is a concept indicating an edge including each side, and includes image information to be collated at the time of matching.

次に、上記のタイリングの基本順序に基づいて、図2に示す小区画a11〜a75を撮像した小画像をタイリングして円形ウェル3に採取された試料Sの全体画像を形成する際の小画像の連結方法について、図6乃至図8を参照して説明する。   Next, based on the basic order of the above tiling, a small image obtained by imaging the small sections a11 to a75 shown in FIG. 2 is tiled to form an entire image of the sample S collected in the circular well 3. A method for connecting small images will be described with reference to FIGS.

図6において、選択される基準小画像は、図2における矩形領域13の四隅の小区画a11、a15、a71、a75を含む縁部の小区画以外の小区画の何れかを撮像した小画像である。すなわち、図2において、第1行及び第7行に配置されている小区画と、第1列及び第5列に配置されている小区画以外の小区画を撮像した小画像が基準小画像として選択される。以下の説明においては、小区画a11〜a75を撮像した小画像をA11〜A75と表し、矩形領域13の中央の小区画a43を撮像した小画像を基準小画像A43としてタイリングを行う方法を説明する。   In FIG. 6, the selected reference small image is a small image obtained by imaging one of the small sections other than the small sections at the edges including the small sections a11, a15, a71, and a75 at the four corners of the rectangular area 13 in FIG. is there. That is, in FIG. 2, a small image obtained by capturing a small section other than the small sections arranged in the first row and the seventh row and the small sections arranged in the first column and the fifth column is used as a reference small image. Selected. In the following description, a small image obtained by capturing the small sections a11 to a75 is represented as A11 to A75, and a method for performing tiling using the small image obtained by capturing the small section a43 at the center of the rectangular area 13 as the reference small image A43 will be described. To do.

図6(a)において、基準小画像A43の上方には、小画像A33、A23、A13が順に連結される(矢印b)。また、基準小画像A43の左方には、小画像A42、A41が順に連結される(矢印c)。小画像A33の連結は第1の連結工程となっており、小画像A42の連結は第3の連結工程となっている。   In FIG. 6A, small images A33, A23, and A13 are sequentially connected above the reference small image A43 (arrow b). Small images A42 and A41 are sequentially connected to the left of the reference small image A43 (arrow c). The small image A33 is connected in the first connecting step, and the small image A42 is connected in the third connecting step.

図6(b)において、小画像A33と小画像A42を基準として小画像A32が位置決めされて連結される。小画像A32の連結は第5の連結工程となっている。次に、小画像A32と小画像A41を基準として小画像A31が位置決めされて連結される(矢印d)。次に、小画像A23と小画像A32を基準として小画像A22が位置決めされて連結される(矢印e)。次に、小画像A13と小画像A22を基準として小画像A12が位置決めされて連結される(矢印f)。次に、小画像A22と小画像A31を基準として小画像A21が位置決めされて連結される(矢印g)。   In FIG. 6B, the small image A32 is positioned and connected based on the small image A33 and the small image A42. The small image A32 is connected in the fifth connection step. Next, the small image A31 is positioned and connected based on the small image A32 and the small image A41 (arrow d). Next, the small image A22 is positioned and connected based on the small image A23 and the small image A32 (arrow e). Next, the small image A12 is positioned and connected based on the small image A13 and the small image A22 (arrow f). Next, the small image A21 is positioned and connected based on the small image A22 and the small image A31 (arrow g).

小画像A32の連結は、小画像A33と小画像A42が連結された後であれば、矢印b、c方向に全ての小画像が連結される以前の段階において行うことができる。また、矢印
d、e、f、gの順に連結される小画像A31、A22、A12、A21は、隣接する2つの小画像を基準として位置決めされて連結されるようにすれば、任意の順序で連結することができる。
The small images A32 can be connected in a stage before all the small images are connected in the directions of the arrows b and c as long as the small images A33 and A42 are connected. Further, the small images A31, A22, A12, and A21 connected in the order of the arrows d, e, f, and g can be arranged in an arbitrary order as long as they are positioned and connected with respect to two adjacent small images. Can be linked.

図7(a)において、基準小画像A43の右方には、小画像A44、A45が順に連結される(矢印h)。小画像A44の連結は第4の連結工程となっている。次に、小画像A33と小画像A44を基準として小画像A34が位置決めされて連結される。小画像A34のタイリングは第7の連結工程となっている。その後、矢印i、j、k、lに沿って、小画像A35、A24、A14、A25が順に連結される。小画像A34の連結は、小画像A33と小画像A44が連結された後であれば、矢印b、h方向に全ての小画像が連結される以前の段階において行うことができる。また、矢印i、j、k、lの順に連結される小画像A35、A24、A14、A25は、隣接する2つの小画像を基準として位置決めされて連結されるようにすれば、任意の順序で連結することができる。   In FIG. 7A, small images A44 and A45 are sequentially connected to the right side of the reference small image A43 (arrow h). The small image A44 is connected in the fourth connection step. Next, the small image A34 is positioned and connected on the basis of the small image A33 and the small image A44. The tiling of the small image A34 is the seventh connecting step. Thereafter, the small images A35, A24, A14, and A25 are sequentially connected along the arrows i, j, k, and l. The small images A34 can be connected in a stage before all the small images are connected in the directions of arrows b and h, after the small images A33 and A44 are connected. Further, the small images A35, A24, A14, and A25 connected in the order of the arrows i, j, k, and l can be arranged in any order as long as they are positioned and connected with respect to two adjacent small images. Can be linked.

図7(b)において、基準小画像A43の下方には、小画像A53、A63、A73が順に連結される(矢印m)。小画像A53の連結は第2の連結工程となっている。次に、小画像A42と小画像A53を基準として小画像A52が位置決めされて連結される。小画像A52の連結は第6の連結工程となっている。その後、矢印n、o、p、qに沿って、小画像A51、A62、A72、A61が順に連結される。小画像A52の連結は、小画像A42と小画像A53が連結された後であれば、矢印c、m方向に全ての小画像が連結される以前の段階において行うことができる。また、矢印n、o、p、qの順に連結される小画像A51、A62、A72、A61は、隣接する2つの小画像を基準として位置決めされて連結されるようにすれば、任意の順序で連結することができる。   In FIG. 7B, small images A53, A63, and A73 are sequentially connected below the reference small image A43 (arrow m). The small image A53 is connected in the second connection step. Next, the small image A52 is positioned and connected on the basis of the small image A42 and the small image A53. The small image A52 is connected in the sixth connection step. Thereafter, the small images A51, A62, A72, and A61 are sequentially connected along the arrows n, o, p, and q. The small images A52 can be connected in a stage before all the small images are connected in the directions of the arrows c and m, after the small images A42 and A53 are connected. Further, the small images A51, A62, A72, and A61 connected in the order of the arrows n, o, p, and q may be arranged in an arbitrary order as long as they are positioned and connected with respect to two adjacent small images. Can be linked.

更に、小画像A44と小画像A53を基準として小画像A54が位置決めされて連結される。小画像A54の連結は第8の連結工程となっている。その後、矢印r、s、t、uに沿って、小画像A55、A64、A74、A65が順に連結される。小画像A54の連結は、小画像A44と小画像A53が連結された後であれば、矢印h、m方向に全ての小画像が連結される以前の段階において行うことができる。また、矢印r、s、t、uの順に連結される小画像A55、A64、A74、A65は、隣接する2つの小画像を基準として位置決めされて連結されるようにすれば、任意の順序で連結することができる。   Further, the small image A54 is positioned and connected based on the small image A44 and the small image A53. The small image A54 is connected in the eighth connection step. Thereafter, the small images A55, A64, A74, and A65 are sequentially connected along the arrows r, s, t, and u. The small image A54 can be connected after the small image A44 and the small image A53 are connected in a stage before all the small images are connected in the directions of the arrows h and m. Further, the small images A55, A64, A74, and A65 connected in the order of the arrows r, s, t, and u can be arranged in an arbitrary order as long as they are positioned and connected with respect to two adjacent small images. Can be linked.

なお、図7(b)に破線で示す、四隅の小画像A11、A15、A71、A75には試料Sの画像データが含まれていないので、本実施の形態においては必ずしも連結する必要はない。   Note that the small corner images A11, A15, A71, and A75 shown by broken lines in FIG. 7B do not necessarily include the image data of the sample S, and therefore need not be connected in the present embodiment.

また、図8に示すように、最初に基準小画像43の上下左右に小画像を連結することもできる(矢印v、w、x、y)。このようにすると、基準小画像A43の左上のエリアB、右上のエリアC、左下のエリアD、右下のエリアEにおけるそれぞれの小画像の連結を同時に行うことができるので、画像連結に要する時間を削減して速やかに全体画像を形成することができる。   In addition, as shown in FIG. 8, first, small images can be connected vertically and horizontally to the reference small image 43 (arrows v, w, x, y). In this way, since the small images in the upper left area B, the upper right area C, the lower left area D, and the lower right area E of the reference small image A43 can be connected simultaneously, the time required for image connection And an entire image can be formed promptly.

このように、全体画像の形成においては、図2における矩形領域13の四隅の小区画a11、a15、a71、a75を含む縁部の小区画以外の小区画の何れかを撮像した小画像を基準小画像として選択するので、円形ウェル3に採取された試料Sを撮像した部分の画像データの割合の少ない小画像が他の小画像の位置決めの際の基準となることがない。すなわち、図7(b)において、円形ウェル3に採取された試料Sを撮像した小画像(小画像A43を中心に左右に3列、上下に5行の計15個の小画像)のうち何れかを基準に他の小画像を位置決めして連結するので、マッチングの際の手掛かりとなる試料Sに関する画像情報が豊富であり、より精確な位置決めが可能となる。これにより、画像連結の初
期段階において画像情報が不足することに起因する連鎖的に発生する小画像の位置ずれを防止することができ、歪みやずれ等の少ない全体画像を形成することができる。
As described above, in forming the entire image, a small image obtained by imaging any one of the small sections other than the small sections at the edges including the small sections a11, a15, a71, and a75 at the four corners of the rectangular region 13 in FIG. Since it is selected as a small image, a small image with a small ratio of image data of a portion obtained by imaging the sample S collected in the circular well 3 does not become a reference when positioning other small images. That is, in FIG. 7B, any one of the small images obtained by imaging the sample S collected in the circular well 3 (a total of 15 small images of 3 rows on the left and right and 5 rows on the top and bottom with respect to the small image A43). Since other small images are positioned and connected on the basis of the above, there is abundant image information on the sample S which is a clue at the time of matching, and more accurate positioning is possible. As a result, it is possible to prevent the positional displacement of small images that occur in a chain due to the lack of image information in the initial stage of image connection, and it is possible to form an entire image with little distortion or displacement.

また、上記のタイリングの基本順序に従う限りにおいては、任意の順序で小画像を連結することができるので、基準小画像を中心として任意のエリアの画像を形成することができる。例えば、図8に示す、エリアB、C、D、Eのうち所望のエリアのみを形成することもでき、また、基準小画像A43を含む周辺のエリアのみを形成することも可能である。   Further, as long as the basic order of tiling is followed, the small images can be connected in an arbitrary order, so that an image of an arbitrary area can be formed around the reference small image. For example, it is possible to form only a desired area among the areas B, C, D, and E shown in FIG. 8, and it is also possible to form only a peripheral area including the reference small image A43.

なお、上記説明においては、位置決めされた小画像A11〜A75を基準小画像A43に順次連結して試料Sの全体画像を形成する連結方法を示しているが、小画像A11〜A75の連結位置を位置決めした後に、基準小画像A43と他の小画像A11〜A75同士を連結して試料Sの全体画像を形成することもできる。この場合は、基準小画像A43の位置に対して、位置決めされた他の小画像の相対的な位置をXY座標値で表わすか、何れの位置も絶対的なXY座標値で表して、連結画像記憶部16に記憶し、画像連結部15においてXY座標値に基づいて各小画像を連結して試料Sの全体画像を形成する。   In the above description, the connection method in which the positioned small images A11 to A75 are sequentially connected to the reference small image A43 to form the entire image of the sample S is shown. However, the connection positions of the small images A11 to A75 are shown. After positioning, the reference small image A43 and the other small images A11 to A75 can be connected to form an entire image of the sample S. In this case, the relative position of the other small images positioned with respect to the position of the reference small image A43 is represented by XY coordinate values, or any position is represented by an absolute XY coordinate value, and the connected image is displayed. The whole image of the sample S is formed by connecting the small images stored in the storage unit 16 and connecting the small images based on the XY coordinate values in the image connecting unit 15.

本発明の画像連結方法によれば、画像連結において連鎖的に発生する小画像の位置ずれを防止することができ、歪みやずれ等の少ない全体画像を形成することができるという効果があるので、動植物等の組織の試料を円形ウェルに採取したものを格子状の小区画に分割して撮像した複数の小画像を連結して試料の全体画像を形成する分野において有用である。   According to the image linking method of the present invention, it is possible to prevent the positional deviation of small images that occur in a chain in the image linking, and it is possible to form an entire image with little distortion, displacement, etc. It is useful in the field of forming a whole image of a sample by connecting a plurality of small images obtained by dividing a sample of tissue such as animals and plants collected in a circular well into grid-like small sections.

本発明の一実施の形態における画像処理装置の構成図1 is a configuration diagram of an image processing apparatus according to an embodiment of the present invention. 本発明の一実施の形態における撮像対象の分割パターンを示す説明図Explanatory drawing which shows the division pattern of the imaging target in one embodiment of this invention (a)、(b)本発明の一実施の形態における小画像の位置決め方法の説明図(A), (b) Explanatory drawing of the positioning method of the small image in one embodiment of this invention (a)、(b)本発明の一実施の形態における小画像の位置決め方法の説明図(A), (b) Explanatory drawing of the positioning method of the small image in one embodiment of this invention 本発明の一実施の形態における画像連結の基本順序を示した説明図Explanatory drawing which showed the basic order of the image connection in one embodiment of this invention (a)、(b)本発明の一実施の形態における全体画像を形成する際の画像連結の順序を示した説明図(A), (b) Explanatory drawing which showed the order of the image connection at the time of forming the whole image in one embodiment of this invention (a)、(b)本発明の一実施の形態における全体画像を形成する際の画像連結の順序を示した説明図(A), (b) Explanatory drawing which showed the order of the image connection at the time of forming the whole image in one embodiment of this invention 本発明の一実施の形態における全体画像を形成する際の画像連結の順序を示した説明図Explanatory drawing which showed the order of the image connection at the time of forming the whole image in one embodiment of this invention

符号の説明Explanation of symbols

a11〜a75 小区画
A11〜A75 小画像
A43 基準小画像
S 試料
a11 to a75 Small section A11 to A75 Small image A43 Standard small image S Sample

Claims (2)

撮像対象を格子状の小区画に分割して撮像した複数の小画像を、前記小区画の配置に対応した配置で連結して前記撮像対象の全体画像を形成する画像連結方法であって、
前記小画像が、横方向に平行な第1の辺及び第2の辺と縦方向に平行な第3の辺及び第4の辺からなる矩形状の画像であり、
前記格子状に分割された小区画のうち四隅の小区画を含む縁部の小区画以外の小区画の何れかを撮像した小画像を基準小画像として選択する基準小画像選択工程と、
前記選択された基準小画像の第1の辺と第1小画像の第2の辺とのマッチングを行って前記第1小画像を位置決めして連結する第1の連結工程と、
前記選択された基準小画像の第2の辺と第2小画像の第1の辺とのマッチングを行って前記第2小画像を位置決めして連結する第2の連結工程と、
前記選択された基準小画像の第3の辺と第3小画像の第4の辺とのマッチングを行って前記第3小画像を位置決めして連結する第3の連結工程と、
前記選択された基準小画像の第4の辺と第4小画像の第3の辺とのマッチングを行って前記第4小画像を位置決めして連結する第4の連結工程と、
前記連結された第1小画像の第3の辺と第5小画像の第4の辺とのマッチングを行うとともに前記連結された第3小画像の第1の辺と前記第5小画像の第2の辺とのマッチングを行って前記第5小画像を位置決めして連結する第5の連結工程と、
前記連結された第2小画像の第3の辺と第6小画像の第4の辺とのマッチングを行うとともに前記連結された第3小画像の第2の辺と前記第6小画像の第1の辺とのマッチングを行って前記第6小画像を位置決めして連結する第6の連結工程と、
前記連結された第1小画像の第4の辺と第7小画像の第3の辺とのマッチングを行うとともに前記連結された第4小画像の第1の辺と前記第7小画像の第2の辺とのマッチングを行って前記第7小画像を位置決めして連結する第7の連結工程と、
前記連結された第2小画像の第4の辺と第8小画像の第3の辺とのマッチングを行うとともに前記連結された第4小画像の第2の辺と前記第8小画像の第1の辺とのマッチングを行って前記第8小画像を位置決めして連結する第8の連結工程と、
を含むことを特徴とする画像連結方法。
An image connection method for forming a whole image of the imaging target by connecting a plurality of small images captured by dividing an imaging target into grid-like small sections in an arrangement corresponding to the arrangement of the small sections,
The small image is a rectangular image composed of a first side and a second side parallel to the horizontal direction and a third side and a fourth side parallel to the vertical direction;
A reference small image selection step of selecting, as a reference small image, a small image obtained by imaging any of the small partitions other than the edge small partitions including the small corners of the four corners among the small partitions divided into the lattice shape;
A first coupling step of positioning and coupling the first small image by matching the first side of the selected reference small image and the second side of the first small image;
A second connecting step of positioning and connecting the second small image by performing matching between the second side of the selected reference small image and the first side of the second small image;
A third connecting step of matching the third side of the selected reference small image with the fourth side of the third small image to position and connect the third small image;
A fourth connecting step of matching the fourth side of the selected reference small image with the third side of the fourth small image to position and connect the fourth small image;
The third side of the connected first small image and the fourth side of the fifth small image are matched, and the first side of the connected third small image and the fifth side of the fifth small image are matched. A fifth connecting step for positioning and connecting the fifth small image by performing matching with two sides;
The third side of the connected second small image and the fourth side of the sixth small image are matched and the second side of the connected third small image and the sixth side of the sixth small image are matched. A sixth connecting step of positioning and connecting the sixth small image by performing matching with one side;
The fourth side of the connected first small image is matched with the third side of the seventh small image, and the first side of the connected fourth small image and the seventh side of the seventh small image are matched. A seventh connecting step of positioning and connecting the seventh small image by performing matching with two sides;
The fourth side of the connected second small image is matched with the third side of the eighth small image, and the second side of the connected fourth small image and the eighth side of the eighth small image are matched. An eighth connecting step of positioning and connecting the eighth small image by performing matching with one side;
A method for connecting images.
撮像対象を格子状の小区画に分割して撮像した複数の小画像を、前記小区画の配置に対応した配置で連結して前記撮像対象の全体画像を形成する画像連結方法であって、
前記小画像が、横方向に平行な第1の辺及び第2の辺と縦方向に平行な第3の辺及び第4の辺からなる矩形状の画像であり、
前記格子状に分割された小区画のうち四隅の小区画を含む縁部の小区画以外の小区画の何れかを撮像した小画像を基準小画像として選択する基準小画像選択工程と、
前記選択された基準小画像の第1の辺と第1小画像の第2の辺とのマッチングを行って前記第1小画像の連結位置の位置決めを行う第1の位置決め工程と、
前記選択された基準小画像の第2の辺と第2小画像の第1の辺とのマッチングを行って前記第2小画像の連結位置の位置決めを行う第2の位置決め工程と、前記選択された基準小画像の第3の辺と第3小画像の第4の辺とのマッチングを行って前記第3小画像の連結位置の位置決めを行う第3の位置決め工程と、
前記選択された基準小画像の第4の辺と第4小画像の第3の辺とのマッチングを行って前記第4小画像の連結位置の位置決めを行う第1の位置決め工程と、
前記位置決めされた第1小画像の第3の辺と第5小画像の第4の辺とのマッチングを行うとともに前記位置決めされた第3小画像の第1の辺と前記第5小画像の第2の辺とのマッチングを行って前記第5小画像の連結位置の位置決めを行う第5の位置決め工程と、
前記位置決めされた第2小画像の第3の辺と第6小画像の第4の辺とのマッチングを行うとともに前記位置決めされた第3小画像の第2の辺と前記第6小画像の第1の辺とのマッチングを行って前記第6小画像の連結位置の位置決めを行う第6の位置決め工程と、
前記位置決めされた第1小画像の第4の辺と第7小画像の第3の辺とのマッチングを行うとともに前記位置決めされた第4小画像の第1の辺と前記第7小画像の第2の辺とのマッチングを行って前記第7小画像の連結位置の位置決めを行う第7の位置決め工程と、
前記位置決めされた第2小画像の第4の辺と第8小画像の第3の辺とのマッチングを行うとともに前記位置決めされた第4小画像の第2の辺と前記第8小画像の第1の辺とのマッチングを行って前記第8小画像の連結位置の位置決めを行う第8の位置決め工程と、
前記選択された基準小画像と前記位置決めされた第1乃至第8小画像を連結して前記撮像対象の全体画像を形成する画像連結工程と、
を含むことを特徴とする画像連結方法。
An image connection method for forming a whole image of the imaging target by connecting a plurality of small images captured by dividing an imaging target into grid-like small sections in an arrangement corresponding to the arrangement of the small sections,
The small image is a rectangular image composed of a first side and a second side parallel to the horizontal direction and a third side and a fourth side parallel to the vertical direction;
A reference small image selection step of selecting, as a reference small image, a small image obtained by imaging any of the small partitions other than the edge small partitions including the small corners of the four corners among the small partitions divided into the lattice shape;
A first positioning step of performing matching between a first side of the selected reference small image and a second side of the first small image to position a connection position of the first small image;
A second positioning step of performing matching between the second side of the selected reference small image and the first side of the second small image to position the connection position of the second small image; and A third positioning step of performing matching between the third side of the reference small image and the fourth side of the third small image to position the connection position of the third small image;
A first positioning step of performing matching between a fourth side of the selected reference small image and a third side of the fourth small image to position a connection position of the fourth small image;
The third side of the positioned first small image is matched with the fourth side of the fifth small image, and the first side of the positioned third small image and the fifth side of the fifth small image are matched. A fifth positioning step for performing matching with the side of 2 and positioning a connection position of the fifth small image;
The third side of the positioned second small image is matched with the fourth side of the sixth small image, and the second side of the positioned third small image and the sixth side of the sixth small image are matched. A sixth positioning step of performing matching with one side to position a connection position of the sixth small image;
The fourth side of the positioned first small image is matched with the third side of the seventh small image, and the first side of the positioned fourth small image and the seventh side of the seventh small image are matched. A seventh positioning step of performing matching with the side of 2 and positioning a connection position of the seventh small image;
The fourth side of the positioned second small image is matched with the third side of the eighth small image, and the second side of the positioned fourth small image and the eighth side of the eighth small image are matched. An eighth positioning step for performing matching with one side to position a connection position of the eighth small image;
An image connecting step of connecting the selected reference small image and the positioned first to eighth small images to form an entire image of the imaging target;
A method for connecting images.
JP2005309293A 2005-10-25 2005-10-25 Image connection method Pending JP2007122118A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2005309293A JP2007122118A (en) 2005-10-25 2005-10-25 Image connection method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2005309293A JP2007122118A (en) 2005-10-25 2005-10-25 Image connection method

Publications (1)

Publication Number Publication Date
JP2007122118A true JP2007122118A (en) 2007-05-17

Family

ID=38145935

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2005309293A Pending JP2007122118A (en) 2005-10-25 2005-10-25 Image connection method

Country Status (1)

Country Link
JP (1) JP2007122118A (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009157543A (en) * 2007-12-26 2009-07-16 Hitachi High-Technologies Corp Method and apparatus for creating image
JP2011221350A (en) * 2010-04-12 2011-11-04 Advantest Corp Mask inspection device and image generation method
JP2012042483A (en) * 2011-10-31 2012-03-01 Hitachi High-Technologies Corp Image generation device

Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05164975A (en) * 1991-12-18 1993-06-29 Nikon Corp Microphotography device
JPH07152895A (en) * 1993-11-29 1995-06-16 Canon Inc Method and device for processing picture
JPH07200778A (en) * 1993-12-28 1995-08-04 Olympus Optical Co Ltd Image handling device
JPH0997326A (en) * 1995-09-29 1997-04-08 Canon Inc Device and method for image composition
JPH09281405A (en) * 1996-04-17 1997-10-31 Olympus Optical Co Ltd Microscopic system
JPH1079878A (en) * 1996-09-05 1998-03-24 Sharp Corp Still image-pickup device
JPH10108003A (en) * 1996-09-30 1998-04-24 Sharp Corp Image compositing device and image compositing method
JPH1195125A (en) * 1997-09-22 1999-04-09 Olympus Optical Co Ltd System and method for photographing microscopic digital image
JPH11102430A (en) * 1997-09-25 1999-04-13 Sharp Corp Image processor
JPH11119108A (en) * 1997-10-20 1999-04-30 Nippon Telegr & Teleph Corp <Ntt> Remote observing system
JPH11213141A (en) * 1997-11-18 1999-08-06 Ricoh Co Ltd Image compositing method, device therefor and information recording medium
JP2003087549A (en) * 2001-09-12 2003-03-20 Sanyo Electric Co Ltd Device and method for compositing image and computer readable recording medium having image composite processing program recorded thereon
JP2004343222A (en) * 2003-05-13 2004-12-02 Olympus Corp Image processing apparatus

Patent Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05164975A (en) * 1991-12-18 1993-06-29 Nikon Corp Microphotography device
JPH07152895A (en) * 1993-11-29 1995-06-16 Canon Inc Method and device for processing picture
JPH07200778A (en) * 1993-12-28 1995-08-04 Olympus Optical Co Ltd Image handling device
JPH0997326A (en) * 1995-09-29 1997-04-08 Canon Inc Device and method for image composition
JPH09281405A (en) * 1996-04-17 1997-10-31 Olympus Optical Co Ltd Microscopic system
JPH1079878A (en) * 1996-09-05 1998-03-24 Sharp Corp Still image-pickup device
JPH10108003A (en) * 1996-09-30 1998-04-24 Sharp Corp Image compositing device and image compositing method
JPH1195125A (en) * 1997-09-22 1999-04-09 Olympus Optical Co Ltd System and method for photographing microscopic digital image
JPH11102430A (en) * 1997-09-25 1999-04-13 Sharp Corp Image processor
JPH11119108A (en) * 1997-10-20 1999-04-30 Nippon Telegr & Teleph Corp <Ntt> Remote observing system
JPH11213141A (en) * 1997-11-18 1999-08-06 Ricoh Co Ltd Image compositing method, device therefor and information recording medium
JP2003087549A (en) * 2001-09-12 2003-03-20 Sanyo Electric Co Ltd Device and method for compositing image and computer readable recording medium having image composite processing program recorded thereon
JP2004343222A (en) * 2003-05-13 2004-12-02 Olympus Corp Image processing apparatus

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009157543A (en) * 2007-12-26 2009-07-16 Hitachi High-Technologies Corp Method and apparatus for creating image
JP2011221350A (en) * 2010-04-12 2011-11-04 Advantest Corp Mask inspection device and image generation method
JP2012042483A (en) * 2011-10-31 2012-03-01 Hitachi High-Technologies Corp Image generation device

Similar Documents

Publication Publication Date Title
US5086477A (en) Automated system for extracting design and layout information from an integrated circuit
JP5537281B2 (en) Microscope device and image acquisition method
JP4917329B2 (en) Image acquisition apparatus, image acquisition method, and image acquisition program
JP2009281836A (en) Apparatus and method for substrate observation, control apparatus, and program
KR101588367B1 (en) Charged particle beam apparatus
JP3515199B2 (en) Defect inspection equipment
JP4951496B2 (en) Image generation method and image generation apparatus
KR20130091287A (en) A system, a method and a computer program product for cad-based registration
KR20130091286A (en) A system, a method and a computer program product for cad-based registration
TWI464394B (en) Defect detection device
US20130063585A1 (en) Information processing apparatus, information processing method, and program
JP2011180136A (en) Substrate inspection apparatus
JP6684684B2 (en) Position detection method for sample container, imaging method using the same, and position detection device for sample container
KR20110030275A (en) Method and apparatus for image generation
JP2008155263A (en) Defect correcting apparatus and defect correcting method
JP2007122118A (en) Image connection method
KR101677822B1 (en) Scanning-electron-microscope image processing device and scanning method
JP5259348B2 (en) Height information acquisition device, height information acquisition method, and program
CN103383745B (en) The method that a kind of quality of welding spot detecting system detection window optimizes layout
JP2005181250A (en) Method and device for inspecting liquid crystal display panel
JP4843413B2 (en) Electron beam inspection apparatus and electron beam inspection method
TW201835853A (en) Image processing method and image processing apparatus
JP2008032555A (en) Inspection device for mounting part
JP2011243587A (en) Electron beam inspection device, storage medium and electron beam inspection method
JP2012156410A (en) Pattern observation apparatus, recipe preparation apparatus, and recipe preparation method

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20070726

RD01 Notification of change of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7421

Effective date: 20091126

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100302

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100415

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20100518