JP5496031B2 - Acoustic wave signal processing apparatus, control method thereof, and control program - Google Patents

Acoustic wave signal processing apparatus, control method thereof, and control program Download PDF

Info

Publication number
JP5496031B2
JP5496031B2 JP2010208975A JP2010208975A JP5496031B2 JP 5496031 B2 JP5496031 B2 JP 5496031B2 JP 2010208975 A JP2010208975 A JP 2010208975A JP 2010208975 A JP2010208975 A JP 2010208975A JP 5496031 B2 JP5496031 B2 JP 5496031B2
Authority
JP
Japan
Prior art keywords
acoustic wave
wave signal
elements
determination
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2010208975A
Other languages
Japanese (ja)
Other versions
JP2012061202A (en
Inventor
浩一郎 椀田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP2010208975A priority Critical patent/JP5496031B2/en
Publication of JP2012061202A publication Critical patent/JP2012061202A/en
Application granted granted Critical
Publication of JP5496031B2 publication Critical patent/JP5496031B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Description

本発明は、音響波信号処理装置ならびにその制御方法および制御プログラムに関する。   The present invention relates to an acoustic wave signal processing apparatus, a control method thereof, and a control program.

レーザーなどの光源から照射した光を用いて生体などの被検体内の情報を得る光画像化装置の研究が医療分野で積極的に進められている。
このような光画像化技術の一つとして、Photoacoustic Tomography(PAT:光音響トモ
グラフィー)がある。光音響トモグラフィーとは、光音響効果により被検体内で伝播・拡散した光のエネルギーを吸収した生体組織から発生した音響波に基づき、被検体内部の光学特性値に関連した情報を可視化する技術である。光学特性値に関連した情報取得の一例としては、音響波を、被検体を取り囲む複数の個所で検出し、得られた信号を数学的に解析処理する方法がある。
Research on an optical imaging apparatus that obtains information in a subject such as a living body by using light emitted from a light source such as a laser is being actively promoted in the medical field.
One such optical imaging technique is photoacoustic tomography (PAT). Photoacoustic tomography is a technology that visualizes information related to optical property values inside a subject based on acoustic waves generated from living tissue that has absorbed the energy of light propagated and diffused within the subject due to the photoacoustic effect. is there. As an example of obtaining information related to the optical characteristic value, there is a method of detecting an acoustic wave at a plurality of locations surrounding the subject and mathematically analyzing the obtained signal.

この技術で得られる、光照射によって生じた初期音圧分布あるいは光エネルギー吸収密度分布などの情報は、新生血管の増殖を伴う悪性腫瘍場所の特定などに利用できる。以降の説明では光エネルギー吸収密度分布の記述を省略するが、初期音圧分布の説明に含まれるものとする。このような初期音圧分布に基づく3次元再構成画像の生成と表示は生体組織の内部の把握に有用であり、医療分野における診断に役立つことが期待されている。ただし、発展途上の技術であるため、よりノイズ、アーチファクトの低減された画像の生成が望まれている。   Information obtained by this technique, such as the initial sound pressure distribution or light energy absorption density distribution generated by light irradiation, can be used to identify the location of a malignant tumor associated with the growth of new blood vessels. In the following description, description of the light energy absorption density distribution is omitted, but is included in the description of the initial sound pressure distribution. Generation and display of such a three-dimensional reconstructed image based on the initial sound pressure distribution is useful for grasping the inside of a living tissue, and is expected to be useful for diagnosis in the medical field. However, since this is a developing technology, it is desired to generate an image with further reduced noise and artifacts.

ここで、光音響効果とは、物体にパルス光を照明すると、被測定物内の吸収係数が高い領域で体積膨張により音響波(疎密波であり、典型的には超音波)が発生する現象である。パルス光を照射することによる体積膨張によって発生した音響波を、本発明において「光音響波」という。   Here, the photoacoustic effect is a phenomenon in which when an object is illuminated with pulsed light, an acoustic wave (dense wave, typically ultrasound) is generated due to volume expansion in a region with a high absorption coefficient in the object to be measured. It is. In the present invention, an acoustic wave generated by volume expansion caused by irradiation with pulsed light is referred to as “photoacoustic wave”.

一般に光音響トモグラフィーでは、被検体全体を取り囲む閉じられた空間表面(特に球面状測定表面)の様々な点で、音響波の時間変化を理想的な音響検出器(広帯域・点検出)で測定すれば、理論的には光照射により生じた初期音圧分布を完全に可視化できる。また、閉じられた空間でなくとも、被検体に対して円柱状あるいは平板状に測定可能であれば、光照射により生じた初期音圧分布をほぼ再現できることが数学的に知られている(非特許文献1参照)。   In general, in photoacoustic tomography, the time variation of an acoustic wave is measured with an ideal acoustic detector (broadband, point detection) at various points on a closed spatial surface (especially a spherical measurement surface) that surrounds the entire subject. In theory, the initial sound pressure distribution generated by light irradiation can be completely visualized. Further, it is mathematically known that the initial sound pressure distribution generated by the light irradiation can be substantially reproduced if it is possible to measure the subject in a columnar shape or a flat shape even if it is not a closed space. Patent Document 1).

下記式(1)は、PATの基本となる偏微分方程式であり、「光音響波動方程式」と言われる。この式を解けば、初期音圧分布からの音波伝播を記述でき、どの場所で音響波がどのように検出できるかを理論的に求めることができる。

Figure 0005496031

ここで、rは位置、tは時間であり、p(r,t)は音圧の時間変化、p0(r)は初期音圧分布、cは音速である。δ(t)は光パルスの形状をあらわすデルタ関数である。 The following equation (1) is a partial differential equation that is the basis of PAT, and is called a “photoacoustic wave equation”. If this equation is solved, the sound wave propagation from the initial sound pressure distribution can be described, and it can be theoretically determined how and where the acoustic wave can be detected.
Figure 0005496031

Here, r is the position, t is the time, p (r, t) is the time change of the sound pressure, p 0 (r) is the initial sound pressure distribution, and c is the sound velocity. δ (t) is a delta function representing the shape of an optical pulse.

一方、PATの画像再構成とは、検出点で得られた音圧pd(rd,t)から初期音圧分布p0(r)を導き出すことであり、数学的には逆問題と呼ばれる。以下にPATの画像再構成手法で代表
的に使われているUniversal Back Projection(UBP)法に関して説明する。式(1)の光音響
波動方程式を周波数空間上で解析することで、p0(r)を求める逆問題を正確に解くことが
できる。その結果を時間空間上で表したのがUBPである。最終的に以下のような式(2)が導かれる。

Figure 0005496031

ここで、Ω0は任意の再構成ボクセル(あるいはフォーカス点)に対する全体の測定エ
リアS0の立体角である。 On the other hand, PAT image reconstruction is to derive the initial sound pressure distribution p 0 (r) from the sound pressure pd (r d , t) obtained at the detection point, which is mathematically called an inverse problem. The Universal Back Projection (UBP) method typically used in the PAT image reconstruction method is described below. By analyzing the photoacoustic wave equation of Equation (1) in the frequency space, the inverse problem for obtaining p 0 (r) can be accurately solved. UBP expresses the result in time and space. Finally, the following equation (2) is derived.
Figure 0005496031

Here, Ω 0 is the solid angle of the entire measurement area S 0 with respect to an arbitrary reconstructed voxel (or focus point).

さらに、式を分かりやすく変形すると、以下の式(3)となる。

Figure 0005496031

ここでb(r0,t)は投影データ、dΩ0は任意の観測点Pに対する検出器dS0の立体角である
。この投影データを式(3)の積分に従って逆投影することで初期音圧分布p0(r)を得ることができる。 Furthermore, the following equation (3) is obtained by modifying the equation in an easily understandable manner.
Figure 0005496031

Here, b (r 0 , t) is projection data, and dΩ 0 is a solid angle of the detector dS 0 with respect to an arbitrary observation point P. The initial sound pressure distribution p 0 (r) can be obtained by back-projecting this projection data according to the integration of equation (3).

なお、b(r0,t)とdΩ0は、以下の式(4)、式(5)で表わされる。

Figure 0005496031

ここで、θは検出器と任意の観測点Pとがなす角度である。 Note that b (r 0 , t) and dΩ 0 are expressed by the following equations (4) and (5).
Figure 0005496031

Here, θ is an angle formed by the detector and an arbitrary observation point P.

音源の大きさに比べて、音源と測定位置の距離が十分大きい場合(遠距離音場近似)、以下の式(6)となる。

Figure 0005496031

このときb(r0,t)は、以下の式(7)となる。
Figure 0005496031
When the distance between the sound source and the measurement position is sufficiently larger than the size of the sound source (far field approximation), the following equation (6) is obtained.
Figure 0005496031

At this time, b (r 0 , t) is expressed by the following equation (7).
Figure 0005496031

このようにPATの画像再構成では、検出器で得られた検出信号p(r0,t)を時間微分することで投影データb(r0,t)を得て、式(3)に従って逆投影することで、初期音圧分布p0(r)が
求まることが知られている(非特許文献1及び2参照)。
Thus, in the PAT image reconstruction, the projection signal b (r 0 , t) is obtained by time differentiation of the detection signal p (r 0 , t) obtained by the detector, and the inverse is performed according to equation (3). It is known that the initial sound pressure distribution p 0 (r) can be obtained by projection (see Non-Patent Documents 1 and 2).

ただし、式(3)を求めるために利用した光音響波動方程式である式(1)は、「音速一定」、「全方位からの測定」、「インパルス的光励起」、「広帯域での音響波検出」、「ポイントでの音響波検出」、「連続的な音響波のサンプリング」を仮定している。現実的には、これらの仮定を満たす装置の実現は容易ではない。   However, the photoacoustic wave equation used to obtain Equation (3) is Equation (1), which is `` constant sound velocity '', `` measurement from all directions '', `` impulse-like optical excitation '', `` acoustic wave detection in a wide band ”,“ Acoustic wave detection at points ”, and“ continuous acoustic wave sampling ”. Realistically, it is not easy to realize a device that satisfies these assumptions.

例えば、現実の被検体では、被検体全体を囲む、閉じた空間表面全体で、音響波検出情報を得ることは困難である。また、音響波の測定領域を大きくするには、音響検出器のサイズや素子数、および各素子の信号処理、制御部を増大させる必要があり、製造コストの増加につながる。このような事情から、PATの技術を用いた実用的な測定装置は、被検体
の特定の方向から、限られた大きさの探触子を用いて音響波を検出する装置として構成されることが多い。
For example, in an actual subject, it is difficult to obtain acoustic wave detection information on the entire closed space surface surrounding the whole subject. Further, in order to increase the acoustic wave measurement area, it is necessary to increase the size and number of elements of the acoustic detector, the signal processing of each element, and the control unit, leading to an increase in manufacturing cost. For this reason, a practical measurement device using the PAT technology is configured as a device that detects acoustic waves from a specific direction of the subject using a probe of a limited size. There are many.

このような装置の一例として、特許文献1で開示されているように、平板型測定系の光音響トモグラフィーが考案されている。この光音響トモグラフィーでは、平板で挟まれた被検体に光を照射し、平板上に配置された音響波検出器で音響波を検出する。ここで、光の照射数と音響波受信の回数は、複数回行われる場合もある。複数回の光の照射と音響波受信を元に、音響波信号、または、音響波信号に基づいて算出された各値を平均化した値を算出して用いることもある。   As an example of such an apparatus, as disclosed in Patent Document 1, a photoacoustic tomography of a flat plate measurement system has been devised. In this photoacoustic tomography, light is irradiated to a subject sandwiched between flat plates, and an acoustic wave is detected by an acoustic wave detector disposed on the flat plate. Here, the number of light irradiations and the number of times of acoustic wave reception may be performed a plurality of times. An acoustic wave signal or a value obtained by averaging each value calculated based on an acoustic wave signal may be calculated and used based on multiple times of light irradiation and acoustic wave reception.

なお、平板の探触子を被検体に密着させて音響波を検出する方法には、ノイズの少ない音響波の検出ができる点や、検出を繰り返す間、被検体や探触子の位置の固定や、探触子の移動の制御等が容易になる、といった利点がある。   In addition, the method of detecting acoustic waves by bringing a flat probe into close contact with the subject allows detection of acoustic waves with less noise, and fixing the position of the subject and the probe during repeated detection. There is an advantage that the movement of the probe can be easily controlled.

さらに、本発明と類似した効果を持ち、タイムドメイン法とフーリエドメイン法による画像再構成方法について、特許文献2の画像再構成方法がある。特許文献2では、2種類の画像再構成方法による2種類の再構成画像から、アーチファクトの低減を図る方法が記載されている。   Furthermore, there is an image reconstruction method disclosed in Patent Document 2 as an image reconstruction method using the time domain method and the Fourier domain method, which has an effect similar to that of the present invention. Patent Document 2 describes a method for reducing artifacts from two types of reconstructed images obtained by two types of image reconstruction methods.

米国特許第5840023号公報US Patent No. 5840023 特願2008−201902号公報Japanese Patent Application No. 2008-201902

PHYSICAL REVIEW E 71, 016706(2005)PHYSICAL REVIEW E 71, 016706 (2005) REVIEW OF SCIENTIFIC INSTRUMENTS, 77, 042201(2006)REVIEW OF SCIENTIFIC INSTRUMENTS, 77, 042201 (2006)

しかしながら、従来の技術のように、理想的ではない条件で検出した音響波に基づく情
報を用いて、解析解による画像再構成処理を行うと、再構成画像には計算上、多数のアーチファクトが生じてしまう問題がある。
However, when the image reconstruction process using the analytical solution is performed using information based on acoustic waves detected under non-ideal conditions as in the prior art, a large number of computational artifacts are generated in the reconstructed image. There is a problem.

このようなアーチファクトは、理想的ではない条件で検出した音響波に基づいて解析解による画像再構成を行うと、必ず生じるものである。理想的でない条件としては、音響波検出器が平板上に配置されるために全方位からの検出にならない点や、理想的な音響波検出器(広帯域・点検出)ではない点等がある。   Such artifacts are always generated when image reconstruction is performed using an analytical solution based on acoustic waves detected under non-ideal conditions. Non-ideal conditions include that the acoustic wave detector is arranged on a flat plate and cannot be detected from all directions, and that it is not an ideal acoustic wave detector (broadband / point detection).

例えば、前述のUBP法の計算過程で得られる投影データb(r0,t)では、計算上、音源の可能性がある正の値と、逆投影時には音源でない値を打ち消す負の値が算出される。全方位からの検出信号を使用する等の理想的な条件で算出された場合には正負の値は相殺され、音源を示す値だけを含む再構成画像が算出される。しかし、全方位の検出信号を使用できない場合には、偏った位置にある一部の投影データのみで逆投影するため、初期音圧分布p0(r)には、実際には音源ではないが、計算上、音源の可能性を否定しきれずに残る値が
ある。
For example, the projection data b (r 0 , t) obtained in the UBP calculation process described above calculates a positive value that may be a sound source and a negative value that cancels out a non-sound source value during back projection. Is done. When calculated under ideal conditions such as using detection signals from all directions, the positive and negative values are canceled out, and a reconstructed image including only the value indicating the sound source is calculated. However, if the omnidirectional detection signal cannot be used, back projection is performed only with a part of the projection data at a biased position, so the initial sound pressure distribution p 0 (r) is not actually a sound source. In the calculation, there is a value that cannot be denied the possibility of the sound source.

再構成画像を表示して視認すると、これらの音源の可能性を否定しきれずに残った値が、検出対象物体に近い位置に近い強度で存在すると、検出対象物体を間延びさせたようなアーチファクトが表示される。また、このような音源の可能性を否定できない値は、計算上、検出対象物体の大きさ、数、位置により、様々な位置に生じうる。そのため、再構成画像全体にノイズのような多数のアーチファクトが表示される。   When the reconstructed image is displayed and visually recognized, if the remaining value without denying the possibility of these sound sources exists at an intensity close to the position close to the detection target object, artifacts such as extending the detection target object may occur. Is displayed. In addition, such a value that cannot be denied the possibility of a sound source can be calculated at various positions depending on the size, number, and position of the detection target object. Therefore, many artifacts such as noise are displayed on the entire reconstructed image.

さらに、画像再構成を行う領域と検出器の位置により、アーチファクトは規則的な像を作りやすい点も再構成画像の視認時には問題となる。これは、解析解による再構成処理において、特定の向きで検出した音響波を用いて、音源の存在を推定するような規則的な計算処理が繰り返されるためである。例えば、UBP法では、検出器の素子の位置を中心とし
た半球面上にあたる位置に音源の存在を推定するような規則的な計算処理が繰り返される。そのため、再構成画像に残るアーチファクトも規則的な位置に生じる傾向があり、ランダムなノイズよりも、判別しづらいアーチファクトとなりやすい。
Furthermore, the fact that artifacts tend to form regular images depending on the area where image reconstruction is performed and the position of the detector also poses a problem when the reconstructed image is viewed. This is because in the reconstruction process based on the analytical solution, a regular calculation process for estimating the presence of a sound source using acoustic waves detected in a specific direction is repeated. For example, in the UBP method, a regular calculation process is repeated in which the existence of a sound source is estimated at a position corresponding to a hemisphere centered on the position of the detector element. For this reason, artifacts remaining in the reconstructed image tend to occur at regular positions, and are more difficult to discriminate than random noise.

このようなアーチファクトを軽減させる方法としては、より理想的な音響波検出器を用いる方法が挙げられる。しかし、人体のような被検体に全方位から光音響波を検出できる音響波検出器は、現実的には存在しない。また、より広範囲な受信面や半球面のような形状の音響波検出器や、複数の音響波検出器を配置するような方法では、生産コストを増大させ、冗長な構成を必要とする。   As a method for reducing such artifacts, a method using a more ideal acoustic wave detector can be given. However, an acoustic wave detector that can detect photoacoustic waves from all directions on a subject such as a human body does not actually exist. In addition, in a method of arranging an acoustic wave detector having a wider range of receiving surface or hemispherical shape or a plurality of acoustic wave detectors, the production cost is increased and a redundant configuration is required.

これらの問題は、解析解による画像再構成処理を行う画像情報取得装置においては、タイムドメイン、フーリエドメイン等の画像再構成処理方法によらず、全般的に生じる問題である。特に、光音響波を用いた再構成画像を取得し、医用画像として診断に役立てようとする光音響トモグラフィーにおいては、よりアーチファクトの少ない再構成画像を得ることが課題となっている。   These problems generally occur in an image information acquisition apparatus that performs an image reconstruction process using an analytical solution, regardless of an image reconstruction process method such as a time domain or a Fourier domain. In particular, in photoacoustic tomography that acquires a reconstructed image using photoacoustic waves and is useful for diagnosis as a medical image, it is a problem to obtain a reconstructed image with fewer artifacts.

本発明は上記の課題に鑑みてなされたものであり、平板上に配置された音響波検出器で、生産コストを増大させることなく、アーチファクトを低減した再構成画像を得ることを目的とする。   The present invention has been made in view of the above-described problems, and an object thereof is to obtain a reconstructed image with reduced artifacts without increasing production cost with an acoustic wave detector arranged on a flat plate.

上記の目的を達成するため、本発明の以下の構成を採用する。すなわち、被検体から放出される音響波を検出する複数の素子を配置した音響波検出器と、前記音響波検出器の複数の素子が検出した音響波に基づく音響波信号から、一部または全部の素子の音響波信号
を選択して音響波信号群を設定する選択部と、前記音響波信号群を用いて、注目点の音響波の音圧に関連する情報を求める算出部と、判定部と、を有し、前記選択部は、素子の組み合わせ又は素子の位置の少なくとも一方が互いに異なる複数の音響波信号群を設定するものであり、前記判定部は、同じ注目点に対して前記複数の音響波信号群ごとに前記算出部が算出した前記音圧に関連する情報のそれぞれについて、音源の存在に基づくものかどうかを判定する第一の判定、および、前記第一の判定の結果により、少なくとも一つの音響波信号群による前記音圧に関連する情報が音源の存在に基づくものではないと判定された注目点は音源が存在しないと判定する第二の判定を行うことを特徴とする音響波信号処理装置である。
In order to achieve the above object, the following configuration of the present invention is adopted. That is, an acoustic wave detector in which a plurality of elements that detect acoustic waves emitted from the subject are arranged, and an acoustic wave signal based on the acoustic waves detected by the plurality of elements of the acoustic wave detector, part or all A selection unit that sets an acoustic wave signal group by selecting an acoustic wave signal of the element; a calculation unit that obtains information related to the sound pressure of the acoustic wave at the point of interest using the acoustic wave signal group; and a determination unit And the selection unit sets a plurality of acoustic wave signal groups in which at least one of the combination of elements or the position of the elements is different from each other, and the determination unit For each of the information related to the sound pressure calculated by the calculation unit for each acoustic wave signal group, a first determination that determines whether the information is based on the presence of a sound source, and a result of the first determination At least one acoustic wave An acoustic wave signal processing apparatus characterized by performing a second determination that determines that a sound source is not present at a point of interest that is determined that information related to the sound pressure by a group of signals is not based on the presence of a sound source is there.

本発明はまた、以下の構成を採用する。すなわち、被検体から放出される音響波を検出する複数の素子を配置した音響波検出器を有する音響波信号処理装置の制御方法であって、前記音響波検出器の複数の素子が検出した音響波に基づく音響波信号から、一部または全部の素子の音響波信号を選択して音響波信号群を設定する選択ステップと、前記音響波信号群を用いて、注目点の音響波の音圧に関連する情報を求める算出ステップと、判定ステップと、を有し、前記選択ステップは、素子の組み合わせ又は素子の位置の少なくとも一方が互いに異なる複数の音響波信号群を設定するものであり、前記判定ステップは、同じ注目点に対して前記複数の音響波信号群ごとに前記算出ステップが算出した前記音圧に関連する情報のそれぞれについて、音源の存在に基づくものかどうかを判定する第一の判定ステップ、および、前記第一の判定ステップの結果、少なくとも一つの音響波信号群による前記音圧に関連する情報が音源の存在に基づくものではないと判定された注目点は音源が存在しないと判定する第二の判定ステップを含むことを特徴とする音響波信号処理装置の制御方法である。   The present invention also employs the following configuration. That is, a control method for an acoustic wave signal processing apparatus having an acoustic wave detector in which a plurality of elements that detect acoustic waves emitted from a subject are arranged, the acoustic waves detected by the plurality of elements of the acoustic wave detector A selection step of setting an acoustic wave signal group by selecting an acoustic wave signal of some or all elements from an acoustic wave signal based on the wave, and using the acoustic wave signal group, the sound pressure of the acoustic wave at the point of interest A calculation step for obtaining information related to the above, and a determination step, wherein the selection step sets a plurality of acoustic wave signal groups in which at least one of a combination of elements or a position of the elements is different from each other, Whether the determination step is based on the presence of a sound source for each of the information related to the sound pressure calculated by the calculation step for each of the plurality of acoustic wave signal groups with respect to the same attention point As a result of the first determination step to be determined and the first determination step, the attention point determined that the information related to the sound pressure by at least one acoustic wave signal group is not based on the presence of a sound source is A control method for an acoustic wave signal processing apparatus, comprising a second determination step for determining that no sound source exists.

本発明はまた、以下の構成を採用する。すなわち、被検体から放出される音響波を検出する複数の素子を配置した音響波検出器を有する音響波信号処理装置に、前記音響波検出器の複数の素子が検出した音響波に基づく音響波信号から、一部または全部の素子の音響波信号を選択して音響波信号群を設定する選択ステップと、前記音響波信号群を用いて、注目点の音響波の音圧に関連する情報を求める算出ステップと、判定ステップと、を実行させる、音響波信号処理装置の制御プログラムであって、前記選択ステップは、素子の組み合わせ又は素子の位置の少なくとも一方が互いに異なる複数の音響波信号群を設定するものであり、前記判定ステップは、同じ注目点に対して前記複数の音響波信号群ごとに前記算出ステップが算出した前記音圧に関連する情報のそれぞれについて、音源の存在に基づくものかどうかを判定する第一の判定ステップ、および、前記第一の判定ステップの結果、少なくとも一つの音響波信号群による前記音圧に関連する情報が音源の存在に基づくものではないと判定された注目点は音源が存在しないと判定する第二の判定ステップを含むことを特徴とする音響波信号処理装置の制御プログラムである。   The present invention also employs the following configuration. That is, an acoustic wave based on an acoustic wave detected by a plurality of elements of the acoustic wave detector is added to an acoustic wave signal processing apparatus having an acoustic wave detector in which a plurality of elements for detecting an acoustic wave emitted from a subject is arranged. A step of selecting an acoustic wave signal of a part or all of the elements from the signal to set an acoustic wave signal group, and using the acoustic wave signal group, information related to the sound pressure of the acoustic wave of the target point A control program for an acoustic wave signal processing device that executes a calculating step and a determining step, wherein the selecting step includes a plurality of acoustic wave signal groups in which at least one of a combination of elements or a position of the elements is different from each other. The determination step is for each piece of information related to the sound pressure calculated by the calculation step for each of the plurality of acoustic wave signal groups with respect to the same point of interest. A first determination step for determining whether or not the sound pressure is based on the presence of a sound source, and information on the sound pressure based on at least one acoustic wave signal group based on the presence of the sound source as a result of the first determination step The attention point determined to be not is a control program for an acoustic wave signal processing device including a second determination step for determining that there is no sound source.

本発明によれば、平板上に配置された音響波検出器で、生産コストを増大させることなく、アーチファクトを低減した再構成画像を得ることが可能になる。   According to the present invention, it is possible to obtain a reconstructed image with reduced artifacts without increasing production costs with an acoustic wave detector arranged on a flat plate.

画像情報取得装置の機能ブロックを示す図。The figure which shows the functional block of an image information acquisition apparatus. 情報処理部をソフトウェアにより実現するコンピュータの構成図。The block diagram of the computer which implement | achieves an information processing part by software. 音響波信号計測部の構成例を示す図。The figure which shows the structural example of an acoustic wave signal measurement part. 中間データの画像再構成を行う手順を示すフローチャート。The flowchart which shows the procedure which performs the image reconstruction of intermediate data. 中間データを元に画像再構成を行う手順を示すフローチャート。The flowchart which shows the procedure which performs image reconstruction based on intermediate data. 1点ごとに画像再構成を行う手順を示すフローチャート。The flowchart which shows the procedure which performs image reconstruction for every point. 注目点に対する有効な素子の概念図。The conceptual diagram of the effective element with respect to an attention point.

以下、添付図面に従って本発明の好ましい実施形態について詳説する。ただし、発明の範囲は図示例に限定されるものではない。   Hereinafter, preferred embodiments of the present invention will be described in detail with reference to the accompanying drawings. However, the scope of the invention is not limited to the illustrated examples.

[実施形態1]
本実施形態では、検出した音響波から初期音圧分布を求めて3次元再構成画像を生成する画像再構成方法について説明する。本実施形態の画像再構成方法を実施する画像情報取得装置は、光音響波診断装置である。ここで、画像再構成に必要な情報は、音響波信号を処理して得られる初期音圧分布などの音圧に関連する情報であるため、本発明を音響波信号処理装置として捉えることもできる。その場合、音響波信号処理により得られた情報を制御装置等で別途画像化して、診断に用いることになる。本発明はまた、音響波信号処理装置の制御方法または制御プログラムとして捉えることもできる。
[Embodiment 1]
In the present embodiment, an image reconstruction method for obtaining an initial sound pressure distribution from a detected acoustic wave and generating a three-dimensional reconstruction image will be described. An image information acquisition apparatus that performs the image reconstruction method of the present embodiment is a photoacoustic wave diagnostic apparatus. Here, since the information necessary for image reconstruction is information related to sound pressure such as an initial sound pressure distribution obtained by processing the acoustic wave signal, the present invention can also be regarded as an acoustic wave signal processing device. . In that case, information obtained by the acoustic wave signal processing is separately imaged by a control device or the like and used for diagnosis. The present invention can also be understood as a control method or control program for an acoustic wave signal processing device.

光音響波診断装置は、光を照射された被検体が放出する音響波を検出し、音響波信号に基づき音圧に関連する情報を3次元再構成画像データとして生成する。本実施形態では、1回の撮影で検出された音響波信号より、検出元の素子の数や位置が異なる複数の音響波信号群を抽出して、複数の3次元再構成画像データを中間データとして生成する。各3次元再構成画像の同一位置(注目点)における3次元画像データ群(つまりボクセルデータ)を判定し、全てのボクセルデータで音源を示す値である場合のみ音源とみなして、再構成画像を生成する。つまり、異なる音響波信号群より生成された、注目点のボクセルデータのうち、1つのボクセルデータが音源を示す値でないと判定された場合、その注目点に対応する被検体内の位置には、音源となる光吸収体は存在しないと判定される。以降の説明においては、「音圧に関連する情報」として、初期音圧を例として説明するが、本発明はこれに限るものではない。本発明において、「音圧に関連する情報」とは、初期音圧や、初期音圧から求められる光エネルギー吸収密度、吸収係数等が含まれる。   The photoacoustic wave diagnostic apparatus detects an acoustic wave emitted from a subject irradiated with light, and generates information related to sound pressure as three-dimensional reconstructed image data based on the acoustic wave signal. In the present embodiment, a plurality of acoustic wave signal groups having different numbers and positions of detection source elements are extracted from the acoustic wave signals detected by one imaging, and a plurality of three-dimensional reconstructed image data is obtained as intermediate data. Generate as A three-dimensional image data group (that is, voxel data) at the same position (attention point) of each three-dimensional reconstructed image is determined, and a reconstructed image is regarded as a sound source only when the value indicates a sound source in all voxel data. Generate. That is, when it is determined that one voxel data among the voxel data of the attention point generated from different acoustic wave signal groups is not a value indicating the sound source, the position in the subject corresponding to the attention point is It is determined that there is no light absorber serving as a sound source. In the following description, the initial sound pressure will be described as an example of “information related to sound pressure”, but the present invention is not limited to this. In the present invention, “information related to sound pressure” includes an initial sound pressure, a light energy absorption density, an absorption coefficient, and the like obtained from the initial sound pressure.

(概略機能ブロック図)
図1は、本実施形態に係る光音響波診断装置の機能構成を示している。図1に示すように、本実施形態に係る光音響波診断装置は、情報処理部1000、音響波信号計測部1100によって構成されている。各機能ブロックを実施するための機器構成の例を図2、図3に示している。図2は、本実施形態に係る光音響波診断装置の情報処理部1000を実施する機器構成の一例である。また、図3は、音響波信号計測部1100を実施する機器構成の一例である。
(Outline functional block diagram)
FIG. 1 shows a functional configuration of the photoacoustic wave diagnostic apparatus according to the present embodiment. As shown in FIG. 1, the photoacoustic wave diagnostic apparatus according to this embodiment includes an information processing unit 1000 and an acoustic wave signal measuring unit 1100. Examples of the device configuration for implementing each functional block are shown in FIGS. FIG. 2 is an example of a device configuration that implements the information processing unit 1000 of the photoacoustic wave diagnostic apparatus according to the present embodiment. FIG. 3 is an example of a device configuration that implements the acoustic wave signal measurement unit 1100.

音響波信号計測部1100は、その内部の音響波検出器1105(図3)の各素子で検出された音響波信号を含む音響波信号情報を情報処理部1000に送信する。
ここで、音響波検出器1105は、例えば、音響波を検出する探触子である。また、音響波信号情報とは、音響波信号や、受信面上に配置された素子の位置や感度、指向性に関する情報のように受信素子の情報が該当する。さらに、音響波取得の撮影パラメータや他の計測情報のような音響波信号取得時の条件に関わる情報も含まれる。光音響波診断装置では、音響波を放出する光の光源の制御や、被検体を圧迫する場合の圧迫に関する情報も、音響波信号取得時の条件として取得する。なお、後述するように、音響波検出器は検出した音響波をアナログ電気信号に変換するものである。制御部1102(図3)がこのアナログ電気信号に少なくとも増幅、デジタル変換処理を加えて、情報処理部に送信する音響波信号となる。
The acoustic wave signal measurement unit 1100 transmits acoustic wave signal information including the acoustic wave signal detected by each element of the internal acoustic wave detector 1105 (FIG. 3) to the information processing unit 1000.
Here, the acoustic wave detector 1105 is, for example, a probe that detects acoustic waves. The acoustic wave signal information corresponds to information on the receiving element such as an acoustic wave signal and information on the position, sensitivity, and directivity of the element disposed on the receiving surface. Furthermore, information related to conditions at the time of acoustic wave signal acquisition such as imaging parameters for acoustic wave acquisition and other measurement information is also included. In the photoacoustic wave diagnostic apparatus, information regarding the control of the light source that emits the acoustic wave and the compression when the subject is compressed is also acquired as a condition when acquiring the acoustic wave signal. As will be described later, the acoustic wave detector converts the detected acoustic wave into an analog electric signal. The control unit 1102 (FIG. 3) adds at least amplification and digital conversion processing to the analog electric signal, and becomes an acoustic wave signal to be transmitted to the information processing unit.

ここで、素子の位置に関する情報とは、被検体や、画像再構成の対象とする再構成領域と素子との位置関係が把握できる情報であれば、どのような情報でもよい。例えば、各素子の数、素子配列のピッチ、受信面上における素子位置等の情報と、音響波検出器の位置
、被検体の位置やサイズ、画像再構成を行う再構成領域の位置やサイズ、それぞれの相対的な位置関係などの情報である。
素子ごとに取得される情報は、音響波検出器1105の素子の識別子と関連付けられた情報として送信される。
Here, the information regarding the position of the element may be any information as long as it is information that allows the positional relationship between the object and the reconstruction region to be image reconstructed and the element to be grasped. For example, information such as the number of each element, the pitch of the element arrangement, the element position on the receiving surface, the position of the acoustic wave detector, the position and size of the subject, the position and size of the reconstruction area for image reconstruction, It is information such as the relative positional relationship of each.
The information acquired for each element is transmitted as information associated with the element identifier of the acoustic wave detector 1105.

音響波信号情報の音響波に関する情報は、音響波信号の情報を送信してもよいし、素子の感度補正、ゲイン補正等の補正を施した後の音響波信号の情報を送信してもよい。また、光音響波診断装置における1回の撮影処理で複数回の光を照射し、それぞれの照射で得られた音響波信号の平均を求め、音響波信号情報として送信してもよい。   As for the information on the acoustic wave of the acoustic wave signal information, information on the acoustic wave signal may be transmitted, or information on the acoustic wave signal after correction such as sensitivity correction and gain correction of the element may be transmitted. . Alternatively, light may be emitted a plurality of times in one imaging process in the photoacoustic wave diagnostic apparatus, an average of acoustic wave signals obtained by each irradiation may be obtained, and transmitted as acoustic wave signal information.

なお、音響波信号情報において、実施形態の構成に応じて静的な定数としても実施に支障のない情報は、情報処理部1000の主メモリ102や、磁気ディスク103(図2)にあらかじめ記憶しておいて、画像再構成処理の実行時に利用してもよい。ただし、撮影の度に動的に定まる情報は音響波信号情報の一部として、音響波信号計測部1100から情報処理部1000に送信する。
例えば、音響波検出器1105の受信面上における素子の位置に関する情報は、素子の識別子が、音響波信号計測部1100から情報処理部1000に送信された後、あらかじめ情報処理部1000に記憶されている位置情報を参照しても良い。
In the acoustic wave signal information, information that does not hinder the implementation even as a static constant according to the configuration of the embodiment is stored in advance in the main memory 102 of the information processing unit 1000 or the magnetic disk 103 (FIG. 2). In this case, it may be used when the image reconstruction process is executed. However, information that is dynamically determined each time an image is taken is transmitted from the acoustic wave signal measuring unit 1100 to the information processing unit 1000 as part of the acoustic wave signal information.
For example, information regarding the position of the element on the receiving surface of the acoustic wave detector 1105 is stored in the information processing unit 1000 in advance after the element identifier is transmitted from the acoustic wave signal measuring unit 1100 to the information processing unit 1000. The position information may be referred to.

情報処理部1000は、音響波信号計測部1100から得られた音響波信号情報を用いて、3次元画像再構成処理を行い、生成された3次元再構成画像から表示用画像を生成して表示する。   The information processing unit 1000 performs a 3D image reconstruction process using the acoustic wave signal information obtained from the acoustic wave signal measurement unit 1100, and generates and displays a display image from the generated 3D reconstruction image. To do.

次に図1の下側における、情報処理部1000の機能ブロックについて説明する。情報処理部1000は、音響波情報取得部1001、画像再構成部1002、表示情報生成部1003、表示部1004によって構成される。   Next, functional blocks of the information processing unit 1000 on the lower side of FIG. 1 will be described. The information processing unit 1000 includes an acoustic wave information acquisition unit 1001, an image reconstruction unit 1002, a display information generation unit 1003, and a display unit 1004.

音響波情報取得部1001は、音響波信号計測部1100から送信された音響波信号情報を取得し、画像再構成部1002に送信したりメモリに保存したりすることで、画像再構成部1002が利用できるようにする。   The acoustic wave information acquisition unit 1001 acquires the acoustic wave signal information transmitted from the acoustic wave signal measurement unit 1100 and transmits the acoustic wave signal information to the image reconstruction unit 1002 or stores it in the memory, so that the image reconstruction unit 1002 Make it available.

画像再構成部1002は、画像再構成を行う領域内の各点ごとに、後述する方法で選択された音響波信号のみを用いて3次元画像再構成を行い、音響波信号情報に基づく3次元再構成画像(ボリュームデータ)を生成する。ここで、画像再構成部1002の画像再構成処理は、解析解による3次元画像再構成であれば、タイムドメイン法であっても、フーリエドメイン法であっても本発明の第1の実施形態を適用することができる。画像再構成部は、後述するように、本発明の選択部、算出部、判定部および決定部の機能を果たす。   The image reconstruction unit 1002 performs a three-dimensional image reconstruction using only an acoustic wave signal selected by a method described later for each point in a region where image reconstruction is performed, and performs a three-dimensional operation based on acoustic wave signal information. A reconstructed image (volume data) is generated. Here, as long as the image reconstruction process of the image reconstruction unit 1002 is a three-dimensional image reconstruction based on an analytical solution, the time domain method or the Fourier domain method is used in the first embodiment of the present invention. Can be applied. As will be described later, the image reconstruction unit serves as a selection unit, a calculation unit, a determination unit, and a determination unit of the present invention.

光音響波診断装置では、被検体内における光の吸収係数分布を示す値を算出し、再構成された3次元画像を生成する。照射する光の波長に応じて、被検体内で光の吸収の度合いが異なることから、被検体内の組成の相違を3次元画像として表示することができる。   In the photoacoustic wave diagnostic apparatus, a value indicating the light absorption coefficient distribution in the subject is calculated, and a reconstructed three-dimensional image is generated. Since the degree of light absorption varies within the subject depending on the wavelength of the light to be irradiated, the difference in composition within the subject can be displayed as a three-dimensional image.

なお、再構成処理で用いる各情報は、音響波信号情報として、音響波計測部1100から送信される情報に含めてもよいし、情報処理部が図2のような構成であれば、あらかじめ、磁気ディスク103に格納されている情報を使用してもよい。さらに、オペレータの指示により入力部106からの操作指示で指定することも可能である。
生成された3次元再構成画像は、画像再構成部1002から表示情報生成部1003に送られる。
Each information used in the reconstruction process may be included in the information transmitted from the acoustic wave measurement unit 1100 as acoustic wave signal information. If the information processing unit is configured as shown in FIG. Information stored in the magnetic disk 103 may be used. Furthermore, it is possible to specify by an operation instruction from the input unit 106 according to an instruction of the operator.
The generated three-dimensional reconstructed image is sent from the image reconstructing unit 1002 to the display information generating unit 1003.

表示情報生成部1003は、生成された3次元再構成画像から、表示部1004で表示
する情報を生成する。表示情報は、3次元画像情報に基づいて生成される表示情報であれば、どのような表示情報でも実施できる。表示情報の例としては、ボリュームレンダリング、多断面変換表示法、最大値投影法などで得られる2次元画像がある。また、3次元画像情報から得られる情報を統計情報などの別の表示情報を生成することもできる。
The display information generation unit 1003 generates information to be displayed on the display unit 1004 from the generated three-dimensional reconstructed image. The display information can be any display information as long as the display information is generated based on the three-dimensional image information. Examples of display information include a two-dimensional image obtained by volume rendering, a multi-section conversion display method, a maximum value projection method, and the like. In addition, other display information such as statistical information can be generated from the information obtained from the three-dimensional image information.

光音響波診断装置では、照射光の波長に応じた被検体内の吸収係数分布値に基づく3次元画像情報を得ることができる。これらの値を、生体組織を構成する物質(グルコース、コラーゲン、酸化・還元ヘモグロビンなど)固有の波長依存性と比較することによって、様々な情報を生成することができる。すなわち、生体を構成する物質の濃度分布を画像化したものや、各値の統計情報を数値、グラフやヒストグラム等で表示するための情報などである。   In the photoacoustic wave diagnostic apparatus, three-dimensional image information based on the absorption coefficient distribution value in the subject according to the wavelength of the irradiation light can be obtained. A variety of information can be generated by comparing these values with the wavelength dependence specific to the substance (glucose, collagen, oxidized / reduced hemoglobin, etc.) constituting the living tissue. That is, it is an image obtained by imaging the concentration distribution of a substance constituting a living body, information for displaying statistical information of each value as a numerical value, a graph, a histogram, or the like.

表示部1004は、表示情報生成部1003で生成した表示情報を表示するためのグラフィックカード、および、液晶ディスプレイやCRTディスプレイのような、表示装置である。   The display unit 1004 is a graphic card for displaying the display information generated by the display information generation unit 1003, and a display device such as a liquid crystal display or a CRT display.

なお、本発明の画像再構成方法を実施する光音響波診断装置の説明では、音響波信号計測部1100と情報処理部1000を分けて説明している。具体的には、デジタルマンモグラフィのような計測装置と制御装置(PCでもよい)のような機器構成が一例として挙げられる。しかし、音響波計測部1100と情報処理部1000を含む1つの画像情報取得装置としても実施可能であることは言うまでもない。例えば、一般的な超音波診断装置のようなモダリティの装置構成で実施することも可能である。   In the description of the photoacoustic wave diagnostic apparatus that implements the image reconstruction method of the present invention, the acoustic wave signal measurement unit 1100 and the information processing unit 1000 are described separately. Specifically, a device configuration such as a measurement device such as digital mammography and a control device (or a PC) may be mentioned as an example. However, it goes without saying that the present invention can also be implemented as one image information acquisition device including the acoustic wave measurement unit 1100 and the information processing unit 1000. For example, it is possible to implement with a modality apparatus configuration such as a general ultrasonic diagnostic apparatus.

図2は、情報処理部1000の各部の機能をソフトウェアで実現するためのコンピュータの基本構成を示す図である。   FIG. 2 is a diagram illustrating a basic configuration of a computer for realizing the functions of the respective units of the information processing unit 1000 by software.

CPU101は、主として情報処理部1000の各構成要素の動作を制御する。主メモリ102は、CPU101が実行する制御プログラムを格納したり、CPU101によるプログラム実行時の作業領域を提供したりする。磁気ディスク103は、オペレーティングシステム(OS)、周辺機器のデバイスドライバ、後述するフローチャートの処理等を行うためのプログラムを含む各種アプリケーションソフト等を格納する。表示メモリ104は、モニタ105のための表示用データを一時記憶する。   The CPU 101 mainly controls the operation of each component of the information processing unit 1000. The main memory 102 stores a control program executed by the CPU 101 and provides a work area when the CPU 101 executes the program. The magnetic disk 103 stores an operating system (OS), device drivers for peripheral devices, various application software including a program for performing processing of a flowchart described later, and the like. The display memory 104 temporarily stores display data for the monitor 105.

モニタ105は、例えばCRTディスプレイや液晶モニタ等であり、表示メモリ1204からのデータに基づいて画像を表示する。入力部106は、マウス、キーボードなどのオペレータによるポインティング入力及び文字等の入力を行う。本発明の実施形態におけるオペレータの操作は入力部106より行われる。   The monitor 105 is a CRT display or a liquid crystal monitor, for example, and displays an image based on data from the display memory 1204. The input unit 106 performs pointing input and character input by an operator such as a mouse and a keyboard. The operation of the operator in the embodiment of the present invention is performed from the input unit 106.

I/F107は、情報処理部1000と外部との間で各種データのやりとりを行うためのものであり、IEEE1394やUSB、イーサネットポート(「イーサネット」は登録商標)等によって構成される。I/F107を介して取得したデータは、主メモリ102に取り込まれる。
音響波信号計測部1100の機能は、I/F107を介して実現される。なお、上記各構成要素は共通バス108により互いに通信可能に接続されている。
The I / F 107 is for exchanging various data between the information processing unit 1000 and the outside, and is configured by IEEE 1394, USB, an Ethernet port (“Ethernet” is a registered trademark), and the like. Data acquired via the I / F 107 is taken into the main memory 102.
The function of the acoustic wave signal measuring unit 1100 is realized via the I / F 107. The above components are connected to each other via a common bus 108 so that they can communicate with each other.

図3は、音響波信号計測部1100の構成の一例である光音響波診断装置を示す図である。
光源1101は、レーザーや発光ダイオード等のような被検体に照射する照射光の光源である。照射光は、被検体を構成する成分のうち特定の成分で吸収の度合いが強いと予想される波長の照射光を用いる。
FIG. 3 is a diagram illustrating a photoacoustic wave diagnostic apparatus which is an example of the configuration of the acoustic wave signal measurement unit 1100.
The light source 1101 is a light source of irradiation light that irradiates a subject such as a laser or a light emitting diode. As the irradiation light, irradiation light having a wavelength expected to be strongly absorbed by a specific component among the components constituting the subject is used.

制御部1102は、光源1101、光学装置1104や音響波検出器1105、位置制御手段1106の制御を行う。制御部1102はまた、音響波検出器1105で得られた光音響波の電気信号を増幅し、アナログ信号からデジタル信号に変換する。また、各種信号処理、各種補正処理を行う。また、不図示のインターフェースを介して、音響波信号計測部1100から、例えば情報処理部1000のような外部機器に音響波信号を送信する。   The control unit 1102 controls the light source 1101, the optical device 1104, the acoustic wave detector 1105, and the position control unit 1106. The control unit 1102 also amplifies the electrical signal of the photoacoustic wave obtained by the acoustic wave detector 1105 and converts it from an analog signal to a digital signal. Various signal processing and various correction processes are performed. Further, an acoustic wave signal is transmitted from the acoustic wave signal measuring unit 1100 to an external device such as the information processing unit 1000 via an interface (not shown).

レーザーの制御の内容としては、レーザー照射のタイミング、波形、強度などの制御がある。音響波検出器の位置制御手段1106の制御については、音響波検出器1105の位置を適切な位置に移動する。   The contents of laser control include control of laser irradiation timing, waveform, intensity, and the like. Regarding the control of the acoustic wave detector position control means 1106, the position of the acoustic wave detector 1105 is moved to an appropriate position.

制御部1102はまた、音響波検出器1105が検出した光音響波の信号をレーザー照射のタイミングと同期をとって計測するための各制御を行う。さらに、複数回のレーザーを照射して得られる素子ごとの音響波信号を加算平均して素子ごとの音響波信号の平均値を算出するような信号処理も行う。   The control unit 1102 also performs various controls for measuring the photoacoustic wave signal detected by the acoustic wave detector 1105 in synchronization with the timing of laser irradiation. Further, signal processing is performed such that the average value of the acoustic wave signals for each element is calculated by averaging the acoustic wave signals for each element obtained by irradiating the laser several times.

光学装置1104は、例えば光を反射するミラーや、光を集光したり拡大したり形状を変化させるレンズなどである。このような光学部品は、光源から発せられた光1103が被検体1107に所望の形状で照射されれば、どのようなものを用いてもかまわない。このような光学部品は、光源から発せられた光1103が被検体1107に所望の形状で照射されれば、どのようなものを用いてもかまわない。光源1101、光学装置1104は、複数用いることも可能である。   The optical device 1104 is, for example, a mirror that reflects light, a lens that collects or enlarges light, or changes its shape. As such an optical component, any optical component may be used as long as the light 1103 emitted from the light source is irradiated on the subject 1107 in a desired shape. As such an optical component, any optical component may be used as long as the light 1103 emitted from the light source is irradiated on the subject 1107 in a desired shape. A plurality of light sources 1101 and optical devices 1104 can be used.

なお、光源1101から照射された光1104は、光導波路などを用いて伝搬させることも可能である。光導波路としては、光ファイバが好ましい。複数の光源があり、かつ、光ファイバを用いる場合は、それぞれの光源に対して複数の光ファイバを使用して、生体表面に光を導くことも可能である。あるいは、複数の光源からの光を一本の光ファイバに導き、一本の光ファイバのみを用いて、すべての光を生体に導いても良い。   Note that the light 1104 emitted from the light source 1101 can be propagated using an optical waveguide or the like. An optical fiber is preferable as the optical waveguide. When there are a plurality of light sources and optical fibers are used, it is also possible to guide light to the surface of the living body by using a plurality of optical fibers for each light source. Alternatively, light from a plurality of light sources may be guided to one optical fiber, and all light may be guided to the living body using only one optical fiber.

このような構成で制御部1102の制御の元、光源1101で発生させた光1103を、光学装置1104を介して被検体1107に照射すると、被検体内の光吸収体1108が光を吸収し、光音響波1109を放出する。この場合、光吸収体1108が音源に該当する。   In such a configuration, when the subject 1107 is irradiated with light 1103 generated by the light source 1101 under the control of the control unit 1102 via the optical device 1104, the light absorber 1108 in the subject absorbs light, A photoacoustic wave 1109 is emitted. In this case, the light absorber 1108 corresponds to the sound source.

音響波検出器1105は、圧電現象を用いたトランスデューサー、光の共振を用いたトランスデューサー、容量の変化を用いたトランスデューサーなどで構成される。音響波を検知できるものであれば、どのような音響波検出器を用いてもよい。音響波検出器1105は、被検体1107に直に接触して音響波を検出してもよいし、平板1110のような板で被検体を圧迫し、平板越しに圧迫された被検体の光音響波1109を検出してもよい。   The acoustic wave detector 1105 includes a transducer using a piezoelectric phenomenon, a transducer using optical resonance, a transducer using a change in capacitance, and the like. Any acoustic wave detector may be used as long as it can detect acoustic waves. The acoustic wave detector 1105 may detect an acoustic wave by directly contacting the subject 1107, or compresses the subject with a plate such as a flat plate 1110, and the photoacoustic of the subject compressed over the flat plate. The wave 1109 may be detected.

本実施形態の音響波検出器は、複数の素子(検出エレメント)が2次元的に配置されたものを前提に説明する。このような2次元配列素子を用いることで、同時に複数の場所で音響波を検出することができ、検出時間を短縮できると共に、被検体の振動などの影響を低減できる。また、音響波検出器1105と被検体との間には、音響波の反射を抑えるための不図示のジェルや水などの音響インピーダンスマッチング剤を使うことが望ましい。   The acoustic wave detector of the present embodiment will be described on the assumption that a plurality of elements (detection elements) are two-dimensionally arranged. By using such a two-dimensional array element, acoustic waves can be detected simultaneously at a plurality of locations, the detection time can be shortened, and influences such as vibration of the subject can be reduced. Moreover, it is desirable to use an acoustic impedance matching agent such as gel or water (not shown) for suppressing reflection of acoustic waves between the acoustic wave detector 1105 and the subject.

ここで、光を被検体に照射する領域や音響波検出器1105は移動可能であってよい。光源から発生した光が被検体上を移動可能となるように光学装置1104を構成すること
ができる。光を被検体に照射する領域を移動させる方法としては、可動式ミラー等を用いる方法、光源自体を機械的に移動させる方法などがある。さらに、音響波検出器1105の位置を移動する位置制御手段1106を設けて、音響波検出器を移動できるように構成する。位置制御手段1106の一例としては、位置センサの情報に基づき平板1110上をモーターで移動する方法がある。
Here, the region where the object is irradiated with light and the acoustic wave detector 1105 may be movable. The optical device 1104 can be configured such that light generated from the light source can move on the subject. As a method for moving a region where light is irradiated onto a subject, there are a method using a movable mirror and the like, a method of mechanically moving a light source itself, and the like. Further, a position control means 1106 for moving the position of the acoustic wave detector 1105 is provided so that the acoustic wave detector can be moved. As an example of the position control means 1106, there is a method of moving on the flat plate 1110 by a motor based on information of the position sensor.

光を照射する領域や音響波検出器1105の位置の制御は制御部1102が行う。また、制御部1102は、光を被検体1107に照射する領域(被検体に照射される光)と、音響波検出器1105とを同期して移動するように制御することもできる。光の照射領域が移動可能であることにより、より広範囲に光を照射し、かつ、照射領域に対して適切な位置にある音響波検出器で光音響波を検出することができるようになる。   The control unit 1102 controls the light irradiation region and the position of the acoustic wave detector 1105. In addition, the control unit 1102 can also control the acoustic wave detector 1105 to move in synchronization with a region (light irradiated to the subject) where the subject 1107 is irradiated with light. Since the light irradiation area is movable, it is possible to irradiate light in a wider range and to detect the photoacoustic wave with an acoustic wave detector at an appropriate position with respect to the irradiation area.

(実施手順)
次に、図4及び図5のフローチャートを用いて、本実施形態における光音響波診断装置が実行する具体的な処理の手順を説明する。
(Implementation procedure)
Next, a specific processing procedure executed by the photoacoustic wave diagnostic apparatus according to the present embodiment will be described with reference to the flowcharts of FIGS. 4 and 5.

図4は、本実施形態における素子数や位置の異なる受信素子群で検出された複数の音響波信号群に基づく3次元再構成画像群を生成する処理の手順を示したフローチャートである。また、図5は、同じ再構成領域を対象に再構成された複数の3次元再構成画像群から、アーチファクトを低減した3次元再構成画像を生成する手順を示したフローチャートである。本実施形態では、素子の組み合わせや素子の位置が異なる受信素子で検出された複数の音響波信号群に基づいて再構成された複数の3次元再構成画像を生成する手順に相当する。本発明において選択部で選択される音響波信号群は、同じ素子群であっても、音響波検出器の移動によりその素子群の位置が異なる場合は、移動前の音響波信号群と、移動後の音響波信号群は異なる音響波信号群として選択することができる。   FIG. 4 is a flowchart showing a procedure of processing for generating a three-dimensional reconstructed image group based on a plurality of acoustic wave signal groups detected by receiving element groups having different numbers and positions in the present embodiment. FIG. 5 is a flowchart showing a procedure for generating a three-dimensional reconstructed image with reduced artifacts from a plurality of three-dimensional reconstructed image groups reconstructed for the same reconstructed region. This embodiment corresponds to a procedure for generating a plurality of three-dimensional reconstructed images reconstructed based on a plurality of acoustic wave signal groups detected by receiving elements having different element combinations and element positions. In the present invention, even if the acoustic wave signal group selected by the selection unit is the same element group, if the position of the element group differs due to the movement of the acoustic wave detector, the acoustic wave signal group before the movement and the movement Subsequent acoustic wave signal groups can be selected as different acoustic wave signal groups.

はじめに、図4のフローチャートを用いて、素子数や位置の異なる複数の音響波信号群に基づく3次元画像群を画像再構成する手順を説明する。
図4のフローチャートは、本発明の画像再構成方法を実施する画像情報取得装置の撮影処理を始めた時点から開始される。
First, a procedure for reconstructing a three-dimensional image group based on a plurality of acoustic wave signal groups having different numbers of elements and positions will be described using the flowchart of FIG.
The flowchart in FIG. 4 is started from the time when the image processing of the image information acquisition apparatus that implements the image reconstruction method of the present invention is started.

ステップS401において、音響波信号計測部1100が光音響波の計測処理を開始すると、制御部1102の制御により、光源1101が、光学装置1104を介して被検体1107にレーザー光を照射する。そして、被検体1107が放出した光音響波を音響波検出器1105で検出する。光音響波を検出すると、制御部1102は、撮影時のパラメータや音響波検出器1105の素子ごとに検出された音響波信号等の音響波信号情報を生成する。   In step S <b> 401, when the acoustic wave signal measurement unit 1100 starts photoacoustic wave measurement processing, the light source 1101 irradiates the subject 1107 with laser light via the optical device 1104 under the control of the control unit 1102. Then, the photoacoustic wave emitted from the subject 1107 is detected by the acoustic wave detector 1105. When the photoacoustic wave is detected, the control unit 1102 generates acoustic wave signal information such as an acoustic wave signal detected for each parameter of the imaging and the acoustic wave detector 1105.

ここで、音響波信号情報には、光音響波の計測に関連する情報ならどのような情報を含めてもよい。また、1回の撮影でレーザー光を複数回照射する場合は、レーザー照射回数や照射時刻等の情報と共に、検出された複数の音響波信号を含めてもよい。または、ノイズを軽減するために、各照射時の音響波信号の平均値を音響波信号情報とするように、信号処理を加えた情報としてもよい。   Here, the acoustic wave signal information may include any information as long as it is information related to photoacoustic wave measurement. Moreover, when irradiating a laser beam several times by one imaging | photography, you may include the detected several acoustic wave signal with information, such as a laser irradiation frequency | count and irradiation time. Or in order to reduce noise, it is good also as information which added signal processing so that the average value of the acoustic wave signal at the time of each irradiation may be used as acoustic wave signal information.

ステップS402において、音響波信号計測部1100は、情報処理部1000の音響波情報取得部に、生成した音響波信号情報を送信する。音響波情報取得部1001は取得した音響波信号情報を主メモリ102、または、磁気ディスク103等の記憶装置に記憶し、画像再構成部1002が利用できるようにする。そして、画像再構成部1002に音響波信号情報、または、記憶したアドレスに関する情報を送信する。   In step S <b> 402, the acoustic wave signal measurement unit 1100 transmits the generated acoustic wave signal information to the acoustic wave information acquisition unit of the information processing unit 1000. The acoustic wave information acquisition unit 1001 stores the acquired acoustic wave signal information in a storage device such as the main memory 102 or the magnetic disk 103 so that the image reconstruction unit 1002 can use it. Then, the acoustic wave signal information or information regarding the stored address is transmitted to the image reconstruction unit 1002.

ステップS403において、画像再構成部1002は、音響波信号計測部1100から送信された音響波信号情報のうち、画像再構成処理にどの素子に関する音響波信号を用いるか選択する。   In step S403, the image reconstruction unit 1002 selects which element the acoustic wave signal is to be used for the image reconstruction process from among the acoustic wave signal information transmitted from the acoustic wave signal measurement unit 1100.

ここで選択される音響波信号とは、例えば、1回の撮影で計測された、全部の素子分の音響波信号群を用いることもあれば、半数の素子で検出された音響波信号群を用いる場合もある。また、同じ素子数で検出された音響波信号群であっても、異なる位置の素子で検出された音響波信号群の場合もある。音響波検出器1105の受信面上に、受信素子が縦M個、横N個で配置された2次元プローブを用いるとすると、このような音響波信号を検出した素子の組み合わせC(m,n)は、次の式(8)で示される。

Figure 0005496031
The acoustic wave signal selected here may be, for example, an acoustic wave signal group of all the elements measured by one imaging, or an acoustic wave signal group detected by half of the elements. Sometimes used. Moreover, even if it is the acoustic wave signal group detected by the same number of elements, it may be the acoustic wave signal group detected by the element of a different position. If a two-dimensional probe in which M reception elements are arranged in the vertical direction and the N horizontal direction on the reception surface of the acoustic wave detector 1105 is used, a combination C (m, n) of elements that detect such an acoustic wave signal is used. ) Is expressed by the following equation (8).
Figure 0005496031

本実施形態では、この組み合わせの中から選択された受信素子の数や位置に関する情報を記録し、再構成された3次元再構成画像に関連付けられるものとする。   In the present embodiment, information on the number and position of receiving elements selected from this combination is recorded and associated with the reconstructed three-dimensional reconstructed image.

ただし、記録される受信素子の数や位置の情報は、画像再構成処理ごとに使用した音響波信号を検出した受信素子群を特定できる情報であれば、どのような記録であってもよい。例えば、音響波検出器1105の素子ごとの識別子と、再構成領域との相対的な位置関係を算出できる素子の位置情報で実施できる。また、音響波検出器1105の受信平面上の領域を示す情報のように、必ずしも素子の情報でなくてもよい。また、前述の組み合わせを識別子と共に管理するテーブルを作成し、その識別子を保存するだけでもよい。   However, the information on the number and position of reception elements to be recorded may be any record as long as the information can identify the reception element group that has detected the acoustic wave signal used for each image reconstruction process. For example, it can be implemented with element position information that can calculate the relative positional relationship between the identifier of each element of the acoustic wave detector 1105 and the reconstruction area. Further, information such as information indicating an area on the reception plane of the acoustic wave detector 1105 is not necessarily element information. It is also possible to create a table for managing the above combinations together with identifiers and store the identifiers.

以上のように、ステップS403では、画像再構成部が、後のステップの画像再構成処理で用いる音響波信号群として、検出した素子の数や位置の組み合わせの種類を選択し、選択した素子の数や位置の情報を記憶する。なお、本実施形態では、1回目の画像再構成処理では、全部の受信素子で検出した音響波信号を用いた画像再構成処理から始める。2回目以降は、同じ素子数で位置の異なる音響波信号群のすべてのケースを使用後、また、素子数を減らして同様に画像再構成処理を繰り返し、全部の組み合わせで実施するものとする。   As described above, in step S403, the image reconstruction unit selects the number of detected elements and the type of position combination as the acoustic wave signal group used in the image reconstruction process in the subsequent step, and selects the selected element. Store number and location information. In the present embodiment, the first image reconstruction process starts with an image reconstruction process using acoustic wave signals detected by all the receiving elements. From the second time on, after using all cases of acoustic wave signal groups with the same number of elements and different positions, the image reconstruction process is repeated in the same manner with the number of elements reduced, and all combinations are performed.

ここで、一般に、音響波信号の画像再構成処理においては、受信素子数の多いプローブで検出した音響波信号を元に画像再構成処理を行う方が、よい初期音圧分布の値が算出できる。そのため、光音響波の音源となる領域に位置する再構成画像についても、よりよい強度値が得られる場合が多い。そのため、本実施形態では、アーチファクトではなく光音響波の音源となる位置の強度値を決める代表値として、すべての受信素子で検出した音響波信号を用いて画像再構成処理を行った値を用いる例として説明する。   Here, in general, in image reconstruction processing of acoustic wave signals, it is possible to calculate a better initial sound pressure distribution value by performing image reconstruction processing based on acoustic wave signals detected by a probe having a large number of receiving elements. . Therefore, a better intensity value is often obtained for a reconstructed image located in a region that is a sound source of photoacoustic waves. For this reason, in this embodiment, a value obtained by performing image reconstruction processing using acoustic wave signals detected by all receiving elements is used as a representative value for determining the intensity value of the position serving as a photoacoustic wave sound source, not an artifact. This will be described as an example.

ただし、光音響波の音源の位置における強度値を決める代表値として、より適した値を算出できる場合は、必ずしも全ての受信素子の音響波信号を用いる必要はない。音響波検出器1105の一部の受信素子の音響波信号情報を元に画像再構成処理を行って算出された値を代表値としてもよい。   However, when a more suitable value can be calculated as a representative value for determining the intensity value of the position of the sound source of the photoacoustic wave, it is not always necessary to use the acoustic wave signals of all the receiving elements. A value calculated by performing image reconstruction processing based on acoustic wave signal information of some of the receiving elements of the acoustic wave detector 1105 may be used as a representative value.

また、本実施形態では、全部の素子で検出された音響波信号から、素子数を減らして繰り返す手順で説明しているが、素子数や素子の位置を変更する順はどのような順であってもよい。あらかじめ、ユーザーの指定により設定された組み合わせに限定された範囲で実施することもできる。   In the present embodiment, the procedure is described in which the number of elements is repeated from the acoustic wave signals detected by all the elements, but the order of changing the number of elements and the positions of the elements is any order. May be. It can also be carried out in a range limited to combinations set in advance by user designation.

ステップS404において、画像再構成の対象となる再構成領域における一点を注目点として抽出する。ここで、再構成領域とは、本発明の画像情報取得装置における計測範囲に相当し、画像再構成を行う3次元の領域である。   In step S404, one point in the reconstruction area that is the target of image reconstruction is extracted as a point of interest. Here, the reconstruction area corresponds to the measurement range in the image information acquisition apparatus of the present invention, and is a three-dimensional area in which image reconstruction is performed.

再構成領域となる装置の計測範囲は、被検体を設置する場所の所定の領域であれば、設定可能である。また、被検体1107の領域を検出して設定する方法や、ユーザーがUIから操作して被検体1107に相当する領域を計測範囲として設定する方法でもよい。さらに、計測範囲を被検体1107の一部の領域に限定する場合には、被検体内1107の内部の領域を3次元座標で指定した領域であってもよい。   The measurement range of the apparatus serving as the reconstruction area can be set as long as it is a predetermined area where the subject is placed. Alternatively, a method of detecting and setting the region of the subject 1107 or a method of setting a region corresponding to the subject 1107 as a measurement range by a user operating from the UI may be used. Furthermore, when the measurement range is limited to a partial area of the subject 1107, the area inside the subject 1107 may be an area designated by three-dimensional coordinates.

以上のような再構成領域をボリュームデータとして定義した場合、ステップS404で抽出する注目点を抽出することは、ボリュームデータ上のボクセルを抽出することに相当する。この場合、光音響波の音響波信号情報に基づいて画像再構成処理で算出された光の吸収係数値は、再構成領域を構成するボクセルのボクセル値として扱うことができる。以降の説明では、3次元再構成画像をボリュームデータとし、注目点は、ボリュームデータを構成するボクセルであるとして説明する。   When the reconstruction area as described above is defined as volume data, extracting the attention point extracted in step S404 corresponds to extracting voxels on the volume data. In this case, the light absorption coefficient value calculated by the image reconstruction process based on the acoustic wave signal information of the photoacoustic wave can be handled as a voxel value of the voxel constituting the reconstruction area. In the following description, it is assumed that the three-dimensional reconstructed image is volume data, and the point of interest is a voxel constituting the volume data.

なお、これらの領域の指定に用いる座標系は、装置上の一点を原点として定義し、更に互いに直交する3軸をそれぞれX軸、Y軸、Z軸として定義した座標系である。また、適切に位置合わせを行う手段を併用して座標変換を行える場合には、別の座標系で指定された値を用いることも可能である。例えば、被検体上の一点を原点として定義し、互いに直交する3軸をそれぞれX軸、Y軸、Z軸として定義した座標系で指定された値を装置上の座標系に座標変換して用いてもよい。   The coordinate system used to designate these areas is a coordinate system in which one point on the apparatus is defined as an origin, and three axes orthogonal to each other are defined as an X axis, a Y axis, and a Z axis, respectively. In addition, when coordinate conversion can be performed using a means for appropriately aligning, it is possible to use a value specified in another coordinate system. For example, a point on the subject is defined as an origin, and values specified in a coordinate system in which three axes orthogonal to each other are defined as an X axis, a Y axis, and a Z axis are used after being transformed into a coordinate system on the apparatus. May be.

さらに、再構成領域は平面として、本実施形態を実施しても構わない。任意の位置姿勢の平面を再構成領域として定義し、平面上の注目点のみを再構成するようにする。再構成処理は、3次元の位置姿勢を考慮した計算であるが、平面上の注目点のみで構成された3次元再構成画像を生成する。このように、2次元画像に相当する領域のみを投影して表示することにより、2次元画像にも対応することができる。   Furthermore, the present embodiment may be implemented with the reconstruction area being a plane. A plane having an arbitrary position and orientation is defined as a reconstruction area, and only a point of interest on the plane is reconstructed. The reconstruction process is a calculation considering a three-dimensional position and orientation, but generates a three-dimensional reconstructed image composed only of attention points on a plane. Thus, by projecting and displaying only the region corresponding to the two-dimensional image, it is possible to deal with the two-dimensional image.

ステップS405において、画像再構成部1002は、ステップS403で選択された受信素子の中からステップS404で抽出された注目点に対して有効な素子で検出された音響波信号を抽出する。   In step S405, the image reconstruction unit 1002 extracts an acoustic wave signal detected by an element effective for the attention point extracted in step S404 from the receiving elements selected in step S403.

ここで注目点に対する有効な素子とは、注目点に光音響波の音源が存在した場合に、素子の指向性の範囲内で音源からの光音響波を検出しうる位置にある受信素子のことである。つまり、素子の指向性の範囲内に音源が収まる必要がある。一般に、探触子の受信平面上に配置された素子は、どの位置であっても、音響波を検出するが、素子の感度により定まる指向性の範囲の外では、実用にそぐわない著しく強度の異なる信号が検出されてしまう場合がある。そのため、素子により定まる指向性の範囲内の音源による音響波信号のみを扱うことにより、実用的な素子の感度で検出された音響波信号を得ることができる。   Here, the effective element for the attention point is a receiving element at a position where the photoacoustic wave from the sound source can be detected within the directivity of the element when the sound source of the photoacoustic wave exists at the attention point. It is. That is, the sound source needs to be within the directivity range of the element. In general, an element arranged on the receiving plane of a probe detects an acoustic wave at any position, but the intensity is not suitable for practical use outside the range of directivity determined by the sensitivity of the element. A signal may be detected. Therefore, it is possible to obtain an acoustic wave signal detected with a practical element sensitivity by handling only an acoustic wave signal from a sound source within a directivity range determined by the element.

図7は、上述の、注目点に対する有効な素子の概念図である。有効素子の決定方法について、図7を用いて説明する。   FIG. 7 is a conceptual diagram of an effective element for the attention point described above. A method for determining effective elements will be described with reference to FIG.

図7の音響波検出器の受信面701は、本実施形態に係る音響波検出器1105の一例である。音響波検出器の受信面701には音響波を受信する素子が受信面上に25個配置されている。注目点702から素子の指向性の範囲に収まる領域を算出すると、音響波検出器の受信面701の受信面に下ろした垂線703の足を中心とした円形の領域が有効素
子領域704となる。すなわち、有効素子領域704は、注目点702を指向性の範囲に含みうる素子の存在範囲を示している。有効素子領域704上に配置されている素子が、音響波検出器の受信面701の受信面上における有効素子705として選択される。
The reception surface 701 of the acoustic wave detector in FIG. 7 is an example of the acoustic wave detector 1105 according to the present embodiment. On the receiving surface 701 of the acoustic wave detector, 25 elements for receiving acoustic waves are arranged on the receiving surface. When a region that falls within the directivity range of the element is calculated from the point of interest 702, a circular region centered on the foot of the perpendicular line 703 that falls on the reception surface of the reception surface 701 of the acoustic wave detector becomes the effective element region 704. In other words, the effective element region 704 indicates the existence range of elements that can include the attention point 702 in the directivity range. The element arranged on the effective element region 704 is selected as the effective element 705 on the reception surface of the reception surface 701 of the acoustic wave detector.

以上のように、ステップS405において、画像再構成部1002は、再構成領域内の注目点の位置を抽出する。そして、ステップS403で決定された受信素子が指向性の範囲に入る位置に存在するような素子を選択する。そして、注目点が素子の指向性の範囲に入る位置の受信素子で検出された音響波信号を抽出する。   As described above, in step S405, the image reconstruction unit 1002 extracts the position of the attention point in the reconstruction area. Then, an element is selected such that the receiving element determined in step S403 is in a position within the directivity range. Then, an acoustic wave signal detected by the receiving element at a position where the point of interest falls within the directivity range of the element is extracted.

ステップS406において、画像再構成部1002は、ステップS405で抽出された、注目点に対して有効な素子による音響波信号群を用いて画像再構成処理を行い、光音響波の初期音圧値を算出する。具体的には再構成領域に相当するボリュームデータのボクセルの1つに注目し、画像再構成処理により算出した値をボクセル値として扱う。   In step S406, the image reconstruction unit 1002 performs an image reconstruction process using the acoustic wave signal group extracted by the element effective for the point of interest extracted in step S405, and calculates the initial sound pressure value of the photoacoustic wave. calculate. Specifically, attention is paid to one of the voxels of the volume data corresponding to the reconstruction area, and the value calculated by the image reconstruction process is handled as the voxel value.

ここで、本実施形態における画像再構成処理は、解析解による再構成処理であってタイムドメイン法に基づく再構成処理であれば、どのような再構成処理でもよい。一例としてはUBP法による再構成処理で実施することができる。   Here, the image reconstruction process in this embodiment may be any reconstruction process as long as it is a reconstruction process based on an analytical solution and is a reconstruction process based on the time domain method. As an example, it can be implemented by reconstruction processing by the UBP method.

ステップS407において、画像再構成部1002は、算出された値が光音響波の音源による初期音圧の値とみなせるか、または、アーチファクトか判定する。   In step S407, the image reconstruction unit 1002 determines whether the calculated value can be regarded as the value of the initial sound pressure by the sound source of the photoacoustic wave or an artifact.

ここで、光音響波の音源とみなせない値とは、再構成領域内の注目点における画像再構成処理の算出値が、光音響波による音響波信号だけでなく、他の音響波やシステムノイズの影響と区別がつかない値のことである。理想的な環境で検出された光音響波をもとに算出される場合は、光音響波の音源のない位置ではゼロが算出される。しかし、実際の計測では、音響波検出器1105の装着された装置のシステム上のノイズが、検出された光音響波の信号情報に含まれる。また、被検体から発せられ、直接受信された音響波以外の音響波等、様々な要因で光の吸収以外の要因による値が含まれうる。   Here, the value that cannot be regarded as a sound source of a photoacoustic wave is that the calculated value of the image reconstruction process at the point of interest in the reconstruction area is not only the acoustic wave signal by the photoacoustic wave, but also other acoustic waves and system noise. This value is indistinguishable from the effect of. When calculating based on the photoacoustic wave detected in an ideal environment, zero is calculated at a position where there is no sound source of the photoacoustic wave. However, in actual measurement, noise on the system of the apparatus to which the acoustic wave detector 1105 is attached is included in the detected photoacoustic wave signal information. In addition, values due to factors other than light absorption may be included due to various factors, such as acoustic waves emitted from the subject and directly received.

そのため、例えば、閾値処理のような方法で、システムの構成により定める所定の数値以上の値を光音響波の音源の可能性がある値として扱い、所定の数値以下の値を光音響波の音源ではないとして判定する。このステップS407の判定処理は、本発明の第一の判定に相当する。   Therefore, for example, in a method such as threshold processing, a value greater than or equal to a predetermined value determined by the system configuration is treated as a value that may be a photoacoustic sound source, and a value less than or equal to the predetermined value is Judge as not. The determination process in step S407 corresponds to the first determination of the present invention.

ステップS407において、光音響波の音源がないと判定された場合は、ステップS408の処理を行う。ステップS408において、画像再構成部1002は、再構成処理の初期音圧値を、光音響波の音源ではないことを示し、光音響波の音源の可能性がある他の算出値と識別できる値(例えばゼロ)に置き換える。   If it is determined in step S407 that there is no photoacoustic sound source, the process of step S408 is performed. In step S <b> 408, the image reconstruction unit 1002 indicates that the initial sound pressure value of the reconstruction process is not a photoacoustic sound source, and can be distinguished from other calculated values that may be photoacoustic sound sources. Replace with (for example, zero).

ここで、本実施形態では、画像再構成処理の初期音圧の算出値を置き換える手順で説明するが、算出値を置き換えない方法であっても構わない。例えば、注目点の位置ごとに光音響波の音源とみなすかどうかを示すフラグを用意する方法でもよい。この場合、本実施形態において算出値がゼロか、ゼロ以外か判別する代わりに注目点の位置ごとのフラグを参照して光音響波の音源の有無を判定するような方法であっても、本実施形態を実施することができる。   Here, in this embodiment, the procedure for replacing the calculated value of the initial sound pressure in the image reconstruction process will be described, but a method that does not replace the calculated value may be used. For example, a method of preparing a flag indicating whether or not to be regarded as a photoacoustic wave sound source for each position of the attention point may be used. In this case, even if the method of determining the presence or absence of the photoacoustic sound source with reference to the flag for each position of the target point instead of determining whether the calculated value is zero or non-zero in this embodiment, Embodiments can be implemented.

ステップS407で光音響波の音響波信号により算出された値として判定された場合は、ステップS409の処理を行う。ステップS409において、画像再構成部1002は、ステップS407の判定後の値を注目点における初期音圧値を示すボクセル値として決定し、一時的に記憶する。記憶する情報は、注目点の3次元座標と関連付けて算出値を記
憶できれば、どのような方法であってもよい。例えば、あらかじめ3次元座標の情報と関連づけられたボクセルであれば、ボクセルの識別子とボクセル値のみを配列で記憶するような方法でもよい。
If it is determined in step S407 that the value is calculated from the photoacoustic wave acoustic wave signal, the process of step S409 is performed. In step S409, the image reconstruction unit 1002 determines the value after the determination in step S407 as a voxel value indicating the initial sound pressure value at the point of interest, and temporarily stores it. The information to be stored may be any method as long as the calculated value can be stored in association with the three-dimensional coordinates of the target point. For example, in the case of a voxel previously associated with information of three-dimensional coordinates, a method may be used in which only voxel identifiers and voxel values are stored in an array.

ステップS410において、画像再構成部1002は、再構成領域内に画像再構成処理が未処理の注目点が存在するかどうか判定する。未処理の注目点がある場合は、ステップS404からステップS410までの処理を繰り返すことにより、再構成領域内のすべての点における初期音圧値を決定する。ステップS410において、未処理の注目点がないと判定された場合は、ステップS411に進む。   In step S410, the image reconstruction unit 1002 determines whether or not there is an attention point that has not been subjected to image reconstruction processing in the reconstruction area. When there is an unprocessed attention point, the initial sound pressure values at all points in the reconstruction area are determined by repeating the processing from step S404 to step S410. If it is determined in step S410 that there is no unprocessed attention point, the process proceeds to step S411.

ステップS411において、画像再構成部1002は、ステップS404からステップS410の処理で決定された初期音圧値群を保存する。このとき、ステップS403で選択した素子数や素子の位置に関する情報と、その音響波信号情報群に基づく3次元再構成画像と関連づける情報も合わせて保存する。   In step S411, the image reconstruction unit 1002 stores the initial sound pressure value group determined in the processing from step S404 to step S410. At this time, information relating to the number of elements and the position of the elements selected in step S403 and information associated with the three-dimensional reconstructed image based on the acoustic wave signal information group are also stored.

ステップS412において、画像再構成部1002は、すでに画像再構成処理を実行済みの素子群の情報を参照し、画像再構成処理を実行前である他の素子群の音響波信号情報を選択して画像再構成を行うかどうか判定する。ここで、他の受信素子群とは、ステップS411において3次元再構成画像の候補を算出済みの受信素子群に対し、素子数、または、同数であっても素子の位置が異なる受信素子群を含む。本実施形態では、全ての素子群の組み合わせを実施するまで繰り返すものとする。   In step S412, the image reconstruction unit 1002 refers to the information of the element group that has already undergone the image reconstruction process, and selects the acoustic wave signal information of another element group that has not been subjected to the image reconstruction process. It is determined whether to perform image reconstruction. Here, the other receiving element group refers to a receiving element group in which the number of elements is different from the receiving element group for which the candidate for the three-dimensional reconstructed image has been calculated in step S411, or the position of the element is different. Including. In the present embodiment, the process is repeated until all element groups are combined.

ここで、本実施形態では、素子数や位置の異なる受信素子の組み合わせを全て網羅するまで繰り返す方法について説明した。しかし、あらかじめ素子群の種類を示すテーブルや識別子を設けて、指定された種類の受信素子群のみ、再構成処理を実施するようにしてもよい。   Here, in the present embodiment, the method of repeating until all the combinations of receiving elements having different numbers and positions of elements are covered has been described. However, a table or identifier indicating the type of element group may be provided in advance, and the reconfiguration process may be performed only for the specified type of receiving element group.

ステップS412において、画像再構成を実施する全ての受信素子群の音響波信号情報による3次元画像の候補が生成されると、素子数や素子の位置の異なる音響波信号群に基づく3次元再構成画像群の生成処理を終了する。   In step S412, when three-dimensional image candidates are generated based on acoustic wave signal information of all receiving element groups that perform image reconstruction, three-dimensional reconstruction is performed based on acoustic wave signal groups having different numbers of elements and positions of elements. The image group generation process ends.

以上、示したような手順により、本実施形態における、素子数や位置の異なる受信素子群で検出された複数の音響波信号に基づく3次元再構成画像群を生成することができる。これらは、本実施形態でアーチファクトを低減した3次元再構成画像のボリュームデータを生成するための中間データとして、以降の手順で使用される。   As described above, a three-dimensional reconstructed image group based on a plurality of acoustic wave signals detected by receiving element groups having different numbers and positions of elements in the present embodiment can be generated by the procedure as shown above. These are used in the following procedure as intermediate data for generating volume data of a three-dimensional reconstructed image with reduced artifacts in this embodiment.

このように、異なる数や位置の素子で検出された音響波信号群の組み合わせを使い分けて画像再構成処理を行うと、再構成画像における光音響波の音源ではないアーチファクトの像は、それぞれ異なる位置に生じる。   In this way, when image reconstruction processing is performed using different combinations of acoustic wave signal groups detected by different numbers and positions of elements, artifact images that are not photoacoustic wave sound sources in the reconstructed images are at different positions. To occur.

一般に、解析解による画像再構成で生成した再構成画像においては、異なる位置で検出された音響波信号の増減が、光音響波の音源の可能性がある領域とない領域の双方に影響する。すなわち、異なる位置の素子で検出された音響波信号ごとに、音源の可能性を否定しきれずにアーチファクトを生じさせる位置と音源の可能性を否定する位置がある。そのため、同一の手法で再構成処理を行ったとしても、用いる音響波信号が異なる位置で検出されたものであれば、再構成画像内の初期音圧値の算出結果を異ならせるという影響を及ぼす。理想的な環境下では、これらの影響は完全に相殺される。しかし、理想的な環境ではない場合、光音響波の音源ではないが、画像再構成処理の計算上、音源の可能性を否定しきれない算出値が残る場合があり、アーチファクトとして再構成画像に残ってしまう。   In general, in a reconstructed image generated by image reconstruction based on an analytical solution, an increase or decrease in an acoustic wave signal detected at a different position affects both a region where there is a possibility of a photoacoustic wave sound source and a region where it is not. That is, for each acoustic wave signal detected by elements at different positions, there is a position where the possibility of the sound source cannot be denied and an artifact is generated, and a position where the possibility of the sound source is denied. Therefore, even if reconstruction processing is performed by the same method, if the acoustic wave signal to be used is detected at a different position, the calculation result of the initial sound pressure value in the reconstruction image is made different. . In an ideal environment, these effects are completely offset. However, if it is not an ideal environment, it is not a photoacoustic wave sound source, but in the calculation of the image reconstruction process, there may be a case where a calculated value that cannot completely deny the possibility of the sound source remains. It will remain.

そこで本実施形態では、上述したように、同一の撮影処理で一度に検出された音響波信号に対して、異なる数や位置の受信素子による音響波信号群に基づいて複数回の画像再構成を行う。これにより、各素子が算出結果に及ぼす影響範囲と相殺される領域が異なる再構成画像群を生成できる。これらは、同じ再構成領域における同じ計測データに基づく再構成処理でありながら、再構成画像ごとに、個々の注目点におけるアーチファクトの存否が異なっている。
一方、いずれの組み合わせの音響波信号情報群を用いても、光音響波の音源の位置については、常に光音響波に基づく値が算出されるため、いずれの再構成画像中からも消えることはない。
Therefore, in the present embodiment, as described above, for the acoustic wave signals detected at the same time in the same imaging process, image reconstruction is performed a plurality of times based on acoustic wave signal groups with different numbers and positions of receiving elements. Do. Thereby, it is possible to generate a reconstructed image group having different areas that are offset from the range of influence of each element on the calculation result. While these are reconstruction processes based on the same measurement data in the same reconstruction area, the presence or absence of artifacts at individual points of interest differs for each reconstructed image.
On the other hand, no matter which combination of acoustic wave signal information groups is used, the photoacoustic sound source position is always calculated based on the photoacoustic wave, so it cannot disappear from any reconstructed image. Absent.

以上の性質を利用して、素子の組み合わせや素子の位置が異なる複数の音響波信号群を設定し、それぞれの音響波信号群から生成された複数の再構成画像群の間で、同一位置の値を判定する。そして、いずれかの再構成画像において音響波の音源ではないと判定された位置は、少なくとも音響波の音源ではないことが判明する。すなわち、全ての再構成画像に音源と推定される値がある位置以外はアーチファクトとみなすことができる。アーチファクトとみなされた位置を除外することによって、単一の音響波信号群による再構成画像よりもアーチファクトを低減した再構成画像を生成できる。   Using the above properties, a plurality of acoustic wave signal groups having different element combinations and element positions are set, and the same position is set between a plurality of reconstructed image groups generated from the respective acoustic wave signal groups. Determine the value. Then, it is found that a position determined as not an acoustic wave sound source in any one of the reconstructed images is not at least an acoustic wave sound source. In other words, all the reconstructed images can be regarded as artifacts except for positions where there is a value estimated as a sound source. By excluding the positions regarded as artifacts, it is possible to generate a reconstructed image with reduced artifacts compared to a reconstructed image based on a single acoustic wave signal group.

次に図5のフローチャートを用いて、素子数や位置の異なる受信素子群で検出された音響波信号に基づく3次元再構成画像群から、アーチファクトを低減した3次元再構成画像を生成する手順について説明する。
図5のフローチャートは、本実施形態における中間データである、3次元再構成画像のボリュームデータ群が生成済みの状況で開始する。
Next, a procedure for generating a three-dimensional reconstructed image with reduced artifacts from a three-dimensional reconstructed image group based on acoustic wave signals detected by receiving element groups having different numbers and positions using the flowchart of FIG. explain.
The flowchart in FIG. 5 starts in a situation where a volume data group of a three-dimensional reconstructed image, which is intermediate data in the present embodiment, has been generated.

ステップS501において、画像再構成部1002は、再構成領域内の一点を注目点として抽出する。たとえば、中間データである3次元再構成画像の各ボリュームデータについて、再構成領域内の同一位置となる未処理のボクセルを1つずつ抽出する。   In step S501, the image reconstruction unit 1002 extracts one point in the reconstruction area as a point of interest. For example, for each volume data of a three-dimensional reconstructed image that is intermediate data, unprocessed voxels at the same position in the reconstruction area are extracted one by one.

ステップS502において、画像再構成部1002は、それぞれの中間データから抽出した同一位置のボクセルについて、全てのボクセル値を参照する。そして、各中間データにおける同一位置のボクセル値のなかで、光音響波の音源ではないことを示す値が含まれているか判定する。   In step S502, the image reconstruction unit 1002 refers to all voxel values for voxels at the same position extracted from the respective intermediate data. Then, it is determined whether a value indicating that it is not a photoacoustic wave sound source is included in the voxel values at the same position in each intermediate data.

ステップS502で光音響波の音源ではないことを示す値が1つでも含まれていた場合はステップS503に進む。ステップS503において、画像再構成部1002は、最終的に算出する再構成画像のボリュームデータにおける判定された位置のボクセル値を光音響波の音源ではないことを示すゼロの値で決定する。   If even one value indicating that it is not a photoacoustic wave sound source is included in step S502, the process proceeds to step S503. In step S503, the image reconstruction unit 1002 determines the voxel value at the determined position in the volume data of the reconstructed image to be finally calculated as a zero value indicating that it is not a photoacoustic wave sound source.

また、ステップS502において、全ての候補データのボクセル値に光音響波の音源の可能性がある値であると判定された場合は、ステップS504に進む。ステップS504において、画像再構成部1002は、代表値として用いる中間データのボクセル値をこの位置のボクセル値として決定する。この処理により、複数種類の音響波信号情報群を用いた3次元再構成処理でありながら、光音響波の音源の位置と推定される位置の初期音圧の値としては、一様であり、同一撮影条件で最も望ましい値を反映させることができる。このステップS502の判定処理は、本発明の第二の判定に相当する。   If it is determined in step S502 that the voxel values of all candidate data are values that can be photoacoustic sound sources, the process proceeds to step S504. In step S504, the image reconstruction unit 1002 determines the voxel value of the intermediate data used as the representative value as the voxel value at this position. As a result of this processing, the initial sound pressure value at the position estimated as the position of the sound source of the photoacoustic wave is uniform, although it is a three-dimensional reconstruction process using a plurality of types of acoustic wave signal information groups. The most desirable value can be reflected under the same shooting conditions. The determination process in step S502 corresponds to the second determination of the present invention.

ステップS503、または、ステップS504で、注目点の位置のボクセル値が決定されると、ステップS505に進む。
ステップS505において、未処理の注目点である他の位置のボクセルが残っているか判定する。他の位置のボクセルが未処理である場合には、ステップS501〜S504ま
での処理を繰り返す。そして、すべての注目点についてボクセル値を決定するとステップS506に進む。
When the voxel value at the point of interest is determined in step S503 or step S504, the process proceeds to step S505.
In step S505, it is determined whether voxels at other positions that are unprocessed attention points remain. If voxels at other positions are unprocessed, the processes from step S501 to S504 are repeated. When the voxel values are determined for all attention points, the process proceeds to step S506.

ステップS506において、画像再構成部1002は、注目点ごとにアーチファクトが除去された3次元再構成画像のボリュームデータを記録(メモリや磁気ディスクに保存)する。   In step S506, the image reconstruction unit 1002 records (stores in a memory or a magnetic disk) volume data of a three-dimensional reconstruction image from which artifacts have been removed for each point of interest.

以上の手順で得られた3次元再構成画像のボリュームデータにより、同一条件の撮影で検出された1種類の受信素子群に関連する音響波信号を用いて画像再構成した場合より、はるかにアーチファクトの少ない3次元再構成画像を得ることができる。アーチファクトを低減させた3次元再構成画像が生成されるとステップS507に進み、表示情報を生成する。   The volume data of the three-dimensional reconstructed image obtained by the above procedure is far more artifact than when reconstructing an image using an acoustic wave signal related to one type of receiving element group detected by photographing under the same conditions. A three-dimensional reconstructed image with a small amount can be obtained. When a three-dimensional reconstructed image with reduced artifacts is generated, the process proceeds to step S507, and display information is generated.

ステップS507において、表示情報生成部1003は、算出された3次元再構成画像のボリュームデータから表示用の情報を生成して、表示部1004に送る。表示用の情報の例としては、撮影した条件や音響波信号計測部の撮影時のパラメータや統計情報、解析情報、表示用の2次元断面画像、ボリュームレンダリングによる表示画像等がある。   In step S507, the display information generation unit 1003 generates display information from the calculated volume data of the three-dimensional reconstructed image, and sends the display information to the display unit 1004. Examples of display information include shooting conditions, shooting parameters of the acoustic wave signal measurement unit, statistical information, analysis information, two-dimensional cross-sectional images for display, display images by volume rendering, and the like.

ステップS508において、表示部1004は、ステップS507で生成された、3次元再構成画像のボリュームデータから生成された表示情報を表示する。
以上のような手順により、アーチファクトの低減された3次元再構成画像をユーザーに提示する。
In step S508, the display unit 1004 displays the display information generated from the volume data of the three-dimensional reconstructed image generated in step S507.
Through the procedure described above, a three-dimensional reconstructed image with reduced artifacts is presented to the user.

以上のような手順で生成された初期音圧分布の値による再構成画像は、音響波の音源の強度により、被検体の音響特性を画像化して提示することができる。特に光音響波診断装置においては、特定の波長を吸収して音響波を発する物質の形状を画像化して表示することができる。本発明の画像再構成方法を用いることにより、アーチファクトの少ないより正確な形状の3次元画像を提示できるようになる。   The reconstructed image based on the value of the initial sound pressure distribution generated by the above procedure can be presented by imaging the acoustic characteristics of the subject based on the intensity of the acoustic wave sound source. In particular, in a photoacoustic wave diagnostic apparatus, the shape of a substance that emits an acoustic wave by absorbing a specific wavelength can be imaged and displayed. By using the image reconstruction method of the present invention, it is possible to present a more accurate three-dimensional image with fewer artifacts.

本実施形態では、表示情報生成部1003、および、表示部1004を用いて、検出された音響波信号を元にアーチファクトを低減した再構成画像を表示する例として説明したが、実施方法はこれに限られない。例えば、表示ではなくファイルの保存、または、通信により他の装置へ送るような手順であっても、本発明の画像再構成方法を適用できることは言うまでもない。   In the present embodiment, the display information generation unit 1003 and the display unit 1004 have been described as an example of displaying a reconstructed image with reduced artifacts based on the detected acoustic wave signal. Not limited. For example, it goes without saying that the image reconstruction method of the present invention can be applied even to a procedure in which a file is saved instead of being displayed, or sent to another device by communication.

また、本実施形態では、タイムドメイン法による画像再構成手法を用いて画像再構成を行い中間データとしての3次元再構成画像群を生成して本発明の画像再構成手法を適用する例として説明した。しかし、フーリエドメイン法による画像再構成手法を用いて本実施形態を実施することも可能である。フーリエドメイン法の場合は、注目点ごとではないが、本実施形態と同様に選択された音響波信号情報ごとに画像再構成手法を行う。生成された素子数や位置の異なる音響波信号情報に基づく3次元再構成画像群を中間データとして用意し、本実施形態における図5のステップS501〜S508の手順を実施すればよい。   Further, in the present embodiment, an example is described in which image reconstruction is performed using an image reconstruction technique based on the time domain method to generate a three-dimensional reconstructed image group as intermediate data and the image reconstruction technique of the present invention is applied. did. However, the present embodiment can also be implemented using an image reconstruction technique based on the Fourier domain method. In the case of the Fourier domain method, an image reconstruction method is performed for each selected acoustic wave signal information, as in the present embodiment, although not for each point of interest. A three-dimensional reconstructed image group based on the generated acoustic wave signal information having different numbers of elements and positions may be prepared as intermediate data, and the steps S501 to S508 in FIG.

さらに、本実施形態では、光を照射する光音響波を検出して初期音圧分布、および、光の吸収エネルギーの3次元再構成画像を例として説明したが、実際はこれに限られない。例えば、検出した音響波信号に基づいた画像再構成処理であれば、光音響波でなく、一般的な音響波に基づく画像再構成方法にも適用することができる。   Furthermore, in the present embodiment, the photoacoustic wave that irradiates light is detected and the initial sound pressure distribution and the three-dimensional reconstructed image of the light absorption energy have been described as examples. However, the present embodiment is not limited to this. For example, an image reconstruction process based on a detected acoustic wave signal can be applied to an image reconstruction method based on a general acoustic wave instead of a photoacoustic wave.

[実施形態2]
上記の実施形態1では、中間データとして3次元再構成画像を生成し、生成した3次元再構成画像群から、アーチファクトを低減した再構成画像を生成していた。
[Embodiment 2]
In the first embodiment, a three-dimensional reconstructed image is generated as intermediate data, and a reconstructed image with reduced artifacts is generated from the generated three-dimensional reconstructed image group.

本実施形態では、検出した音響波から初期音圧分布を求めて3次元再構成画像を生成する画像再構成方法について説明する。本実施形態における画像情報取得装置は、実施形態1と同じ光音響波診断装置である。ただし、本実施形態では、実施形態1と異なり、中間データとして3次元再構成画像の生成を実施しない。   In the present embodiment, an image reconstruction method for obtaining an initial sound pressure distribution from a detected acoustic wave and generating a three-dimensional reconstruction image will be described. The image information acquisition apparatus in the present embodiment is the same photoacoustic wave diagnostic apparatus as that in the first embodiment. However, unlike the first embodiment, this embodiment does not generate a three-dimensional reconstructed image as intermediate data.

本実施形態では、再構成領域における画像再構成する注目点ごとにアーチファクトの判定を行い、冗長な計算処理を省略することにより、実施形態1と同程度のアーチファクト低減効果のある3次元再構成画像を高速に得ることができる。   In the present embodiment, an artifact is determined for each point of interest to be reconstructed in the reconstruction area, and a redundant calculation process is omitted, so that a three-dimensional reconstructed image having the same effect of reducing artifacts as in the first embodiment. Can be obtained at high speed.

(概略機能ブロック図)
本実施形態に係る光音響波診断装置は、実施形態1と同じ構成であるため、説明を省略する。
(Outline functional block diagram)
Since the photoacoustic wave diagnostic apparatus according to the present embodiment has the same configuration as that of the first embodiment, the description thereof is omitted.

(実施手順)
図6は、本実施形態の処理の手順を示したフローチャートである。図6のフローチャートを用いて、本実施形態における光音響波診断装置が実行する具体的な処理の手順を説明する。図6のフローチャートは、本発明の画像再構成方法を実施する画像情報取得装置の撮影処理を始めた時点から開始される。
(Implementation procedure)
FIG. 6 is a flowchart showing a processing procedure of the present embodiment. A specific process procedure executed by the photoacoustic wave diagnostic apparatus according to the present embodiment will be described with reference to the flowchart of FIG. The flowchart of FIG. 6 is started from the time when the image processing of the image information acquisition apparatus that implements the image reconstruction method of the present invention is started.

ステップS601の音響波信号計測部1100の処理と、ステップS602の音響波情報取得部1001の処理は、実施形態1のステップS401、ステップS402と同様の処理であるために詳細な説明を省略する。   The processing of the acoustic wave signal measurement unit 1100 in step S601 and the processing of the acoustic wave information acquisition unit 1001 in step S602 are the same as steps S401 and S402 in the first embodiment, and thus detailed description thereof is omitted.

ステップS603において、画像再構成部1002は、画像再構成の対象となる再構成領域の一点を注目点として抽出する。すなわち再構成領域をボリュームデータとして定義した場合の未処理のボクセルを1つ抽出する。   In step S603, the image reconstruction unit 1002 extracts one point of the reconstruction area that is a target of image reconstruction as a point of interest. That is, one unprocessed voxel is extracted when the reconstruction area is defined as volume data.

ステップS604において、画像再構成部1002は、注目点に対する有効素子を抽出する。すなわち、ステップS603で抽出されたボクセルの位置に音源が存在する場合、素子の指向性の範囲で受信しうる位置にある素子を、実施形態1とは異なり、音響波検出器1105の受信面の全素子から抽出する。   In step S604, the image reconstruction unit 1002 extracts an effective element for the point of interest. That is, when a sound source is present at the position of the voxel extracted in step S603, unlike in the first embodiment, an element at a position that can be received within the directivity range of the element is defined on the reception surface of the acoustic wave detector 1105. Extract from all elements.

ステップS605において、実施形態1のステップS403と同様に、音響波信号計測部1100から送信された音響波信号情報のうち、画像再構成処理にどの素子に関する音響波信号を用いるか選択する。ただし、実施形態1のステップS403では、音響波検出器1105の全素子から選択していたのに対し、本実施形態では、注目点ごとの有効素子で検出された音響波信号群から選択する点が異なる。ただし、注目点によっては、有効素子が全素子となる場合には、実施形態1のステップS403と同様の選択処理となる。   In step S <b> 605, as in step S <b> 403 of the first embodiment, the acoustic wave signal relating to which element is used for image reconstruction processing is selected from the acoustic wave signal information transmitted from the acoustic wave signal measuring unit 1100. However, in step S403 of the first embodiment, all elements of the acoustic wave detector 1105 are selected, whereas in the present embodiment, selection is made from acoustic wave signal groups detected by effective elements for each target point. Is different. However, depending on the point of interest, when the effective elements are all elements, the selection process is the same as step S403 in the first embodiment.

ステップS606において、画像再構成部1002は、ステップS605で選択した素子で検出された音響波信号に基づき、ステップS504で抽出した注目点であるボクセルの画像再構成処理を行う。   In step S606, the image reconstruction unit 1002 performs image reconstruction processing on the voxel that is the target point extracted in step S504, based on the acoustic wave signal detected by the element selected in step S605.

ここで、本実施形態における画像再構成処理は、解析解による再構成処理であってタイムドメイン法に基づく再構成処理であれば、どのような再構成処理でもよい。一例としてはUBP法による再構成処理で実施することができる。   Here, the image reconstruction process in this embodiment may be any reconstruction process as long as it is a reconstruction process based on an analytical solution and is a reconstruction process based on the time domain method. As an example, it can be implemented by reconstruction processing by the UBP method.

ステップS607において、画像再構成部1002は、ステップS606における注目点のボクセルの画像再構成処理によって算出された値が光音響波の音源による初期音圧の値とみなせるか、または、アーチファクトか判定する。
この判定処理は、実施形態1のステップS407の処理と同様の判定処理であるため、説明を省略する。
In step S607, the image reconstruction unit 1002 determines whether the value calculated by the image reconstruction processing of the voxel at the point of interest in step S606 can be regarded as the initial sound pressure value by the sound source of the photoacoustic wave, or is an artifact. .
Since this determination process is the same as the process in step S407 of the first embodiment, a description thereof will be omitted.

ステップS607において、光音響波の音源がないと判定された場合は、ステップS608の処理を行う。ステップS607において、光音響波の音源がないと判定された場合は、同一ボクセルにおける残りの音響波信号群による画像再構成処理を行わずに、次の注目点のボクセルにおける再構成処理に移ることができる。そのため、実施形態1のように、全てのボクセルに対し、設定されたすべての音響波信号群の組み合わせについて計算処理を行う場合よりも3次元再構成画像生成終了までの時間を短縮することができる。   If it is determined in step S607 that there is no photoacoustic sound source, the process of step S608 is performed. If it is determined in step S607 that there is no photoacoustic wave sound source, the image reconstruction process using the remaining acoustic wave signal group in the same voxel is not performed, and the process proceeds to the reconstruction process in the next voxel of interest. Can do. Therefore, as in the first embodiment, the time until the end of the generation of the three-dimensional reconstructed image can be shortened as compared with the case where the calculation processing is performed on all the combinations of the set of acoustic wave signals for all the voxels. .

ステップS608の処理は、実施形態1のステップS408の処理と同様の処理であるため、説明を省略する。   Since the process of step S608 is the same process as the process of step S408 of the first embodiment, a description thereof will be omitted.

ステップS607で光音響波の音響波信号により算出された値として判定された場合は、ステップS609の処理を行う。
ステップS609において、画像再構成部1002は、算出された初期音圧値の候補値を保存する。この候補値の決定方法は、光音響波の音響波信号により算出されたとみなす値であれば、どのように決定しても本実施形態を実施することができる。一例としては、全有効素子で検出された音響波信号に基づく再構成処理の算出値を候補値とする方法がある。ステップS605の選択範囲の中で、光音響波の音源による再構成画像として最も望ましい値が算出できる音響波信号群を候補値として保存すればよい。
When it is determined in step S607 that the value is calculated from the photoacoustic wave acoustic wave signal, the process of step S609 is performed.
In step S609, the image reconstruction unit 1002 stores the calculated initial sound pressure value candidate values. As long as this candidate value is determined to be a value that is considered to have been calculated from the acoustic wave signal of the photoacoustic wave, the present embodiment can be implemented regardless of how it is determined. As an example, there is a method in which a calculated value of reconstruction processing based on acoustic wave signals detected by all effective elements is used as a candidate value. The acoustic wave signal group that can calculate the most desirable value as a reconstructed image by the photoacoustic wave sound source in the selection range in step S605 may be stored as a candidate value.

ステップS610において、画像再構成部1002は、未処理の音響波信号群がある場合には、再度ステップS605の処理に向かう。そして、他の音響波信号群を選択してステップS605〜610の処理を繰り返し実施する。   In step S610, when there is an unprocessed acoustic wave signal group, the image reconstruction unit 1002 proceeds to the process of step S605 again. And another acoustic wave signal group is selected and the process of step S605-610 is repeatedly implemented.

ステップS610において、同一ボクセルにおける全ての音響波信号群の組み合わせについて、全ての音響波信号情報群の画像再構成処理を実施し、光音響波の音源ではないと、一度も判定されなかった場合は、ステップS611に進む。   In step S610, for all combinations of acoustic wave signal groups in the same voxel, image reconstruction processing of all acoustic wave signal information groups is performed, and if it is not determined that the sound source is not a photoacoustic wave source, The process proceeds to step S611.

ステップS611において、画像再構成部1002は、ステップS608により置き換えられた音源ではないと識別できる値、または、ステップS609で候補値として設定された初期音圧値のいずれかで、注目点のボクセル値を決定して保存する。   In step S611, the image reconstructing unit 1002 uses either the value that can be identified as not the sound source replaced in step S608 or the initial sound pressure value set as the candidate value in step S609, and the voxel value of the target point. Determine and save.

1つの注目点についてボクセル値が決定すると、ステップS612において、再構成領域内における未処理の注目点の有無を判定する。未処理の注目点がある場合は、ステップS603〜ステップS611の処理を繰り返し、各注目点におけるボクセル値を決定する。すべてのボクセル値が決定されるとステップS613に進む。   When the voxel value is determined for one attention point, in step S612, it is determined whether or not there is an unprocessed attention point in the reconstruction area. If there is an unprocessed attention point, the processing from step S603 to step S611 is repeated to determine the voxel value at each attention point. When all the voxel values are determined, the process proceeds to step S613.

ステップS613において、表示情報生成部1003の処理は、実施形態1のステップS507と同様の処理であるため、詳細な説明を省略する。   In step S613, the processing of the display information generation unit 1003 is the same processing as step S507 of the first embodiment, and thus detailed description thereof is omitted.

ステップS614において、表示部1004の処理は、実施形態1のステップS508と同様の処理であるため、詳細な説明を省略する。   In step S614, the processing of the display unit 1004 is the same processing as step S508 of the first embodiment, and thus detailed description thereof is omitted.

以上のような手順により、効率的にアーチファクトを低減した再構成画像を生成することが可能であり、実施形態1と同程度の低減効果がありながら、より高速に再構成画像を
生成することができる。
Through the above procedure, it is possible to efficiently generate a reconstructed image with reduced artifacts, and it is possible to generate a reconstructed image at a higher speed while having a reduction effect similar to that of the first embodiment. it can.

なお、本実施形態では、音響波の検出後、直ちに画像再構成を行う手順で説明した。ただし、必ずしも、音響波の検出後、直ちに画像再構成して表示する必要はない。音響波信号情報を保存しておき、再度、表示させたい時に本発明の再構成方法を実施してもよい。また、音響波信号情報で画像再構成可能な領域の一部を再構成しても構わない。例えば、大きな3次元領域で再構成可能な音響波信号情報のうち、表示させたい各断面画像の占める領域のみを再構成領域としてユーザーが指定することで、各断面画像の表示のたびに本発明の画像再構成方法を適用することも可能である。   In the present embodiment, the procedure for performing image reconstruction immediately after detection of acoustic waves has been described. However, it is not always necessary to reconstruct and display an image immediately after detection of an acoustic wave. The acoustic wave signal information may be stored and the reconstruction method of the present invention may be performed when it is desired to display again. Moreover, you may reconfigure | reconstruct a part of area | region which can reconstruct an image with acoustic wave signal information. For example, in the acoustic wave signal information that can be reconstructed in a large three-dimensional region, the user designates only the region occupied by each cross-sectional image to be displayed as the reconstructed region, so that the present invention is provided each time each cross-sectional image is displayed. It is also possible to apply the image reconstruction method.

本実施形態と実施形態1の手順を併用する方法も可能である。例えば、素子数や素子の位置の相違により選択された音響波信号情報に基づいて、フーリエドメイン法の画像再構成手法を用いた3次元再構成画像を生成する。加えて、タイムドメイン法に基づいた本実施形態の手順で再構成された3次元再構成画像を生成する。そして、これらのフーリエドメイン法と本実施形態の再構成方法による3次元再構成画像群を中間データとして、実施形態1における図5のステップS501〜S508の手順を実施する。この場合のアーチファクトの低減効果は、本発明の素子数や素子の位置の異なる音響波信号情報を複数用いたことによる効果と、異なる再構成手法を用いた効果の相乗効果により、さらに増大する。   A method using both the present embodiment and the procedure of the first embodiment is also possible. For example, a three-dimensional reconstructed image using an image reconstruction technique of the Fourier domain method is generated based on acoustic wave signal information selected based on the difference in the number of elements and the position of the elements. In addition, a three-dimensional reconstructed image reconstructed by the procedure of this embodiment based on the time domain method is generated. Then, the steps S501 to S508 in FIG. 5 in the first embodiment are performed using the three-dimensional reconstructed image group obtained by the Fourier domain method and the reconstruction method of the present embodiment as intermediate data. In this case, the artifact reduction effect is further increased by the synergistic effect of the effect of using a plurality of pieces of acoustic wave signal information having different numbers of elements and positions of the element of the present invention and the effect of using different reconstruction methods.

1000:情報処理部,1001:音響波情報取得部,1002:画像再構成部,1100:音響波信号計測部,1105:音響波検出器   1000: Information processing unit, 1001: Acoustic wave information acquisition unit, 1002: Image reconstruction unit, 1100: Acoustic wave signal measurement unit, 1105: Acoustic wave detector

Claims (8)

被検体から放出される音響波を検出する複数の素子を配置した音響波検出器と、
前記音響波検出器の複数の素子が検出した音響波に基づく音響波信号から、一部または全部の素子の音響波信号を選択して音響波信号群を設定する選択部と、
前記音響波信号群を用いて、注目点の音響波の音圧に関連する情報を求める算出部と、
判定部と、
を有し、
前記選択部は、素子の組み合わせ又は素子の位置の少なくとも一方が互いに異なる複数の音響波信号群を設定するものであり、
前記判定部は、同じ注目点に対して前記複数の音響波信号群ごとに前記算出部が算出した前記音圧に関連する情報のそれぞれについて、音源の存在に基づくものかどうかを判定する第一の判定、および、前記第一の判定の結果により、少なくとも一つの音響波信号群による前記音圧に関連する情報が音源の存在に基づくものではないと判定された注目点は音源が存在しないと判定する第二の判定を行う
ことを特徴とする音響波信号処理装置。
An acoustic wave detector in which a plurality of elements that detect acoustic waves emitted from the subject are arranged;
A selection unit that sets an acoustic wave signal group by selecting an acoustic wave signal of some or all elements from an acoustic wave signal based on an acoustic wave detected by a plurality of elements of the acoustic wave detector;
Using the acoustic wave signal group, a calculation unit for obtaining information related to the sound pressure of the acoustic wave at the point of interest;
A determination unit;
Have
The selection unit sets a plurality of acoustic wave signal groups in which at least one of the combination of elements or the position of the elements is different from each other,
The determination unit determines whether each of the information related to the sound pressure calculated by the calculation unit for each of the plurality of acoustic wave signal groups with respect to the same point of interest is based on the presence of a sound source. And the point of interest determined that the information related to the sound pressure based on the at least one acoustic wave signal group is not based on the presence of the sound source based on the result of the determination and the first determination. An acoustic wave signal processing apparatus that performs a second determination.
前記音響波検出器の複数の素子のうち、前記注目点が指向性の範囲に収まるような素子である有効素子を決定する決定部をさらに有し、
前記選択部は、前記有効素子の音響波信号を選択して音響波信号群を設定する
ことを特徴とする請求項1に記載の音響波信号処理装置。
Of the plurality of elements of the acoustic wave detector, further comprising a determination unit that determines an effective element that is an element in which the point of interest falls within a directivity range,
The acoustic wave signal processing apparatus according to claim 1, wherein the selection unit selects an acoustic wave signal of the effective element and sets an acoustic wave signal group.
前記判定部は、前記第一の判定において、前記算出部が算出した前記音圧に関連する情報が所定の閾値より大きい場合に、当該音圧に関連する情報が音源の存在に基づくものであると判定する
ことを特徴とする請求項1または2に記載の音響波信号処理装置。
In the first determination, when the information related to the sound pressure calculated by the calculation unit is larger than a predetermined threshold in the first determination, the information related to the sound pressure is based on the presence of a sound source. The acoustic wave signal processing device according to claim 1, wherein the acoustic wave signal processing device is determined.
前記判定部は、前記第一の判定での結果が、いずれの音響波信号群に対応する音圧に関連する情報も音源の存在に基づくものである場合に、前記第二の判定において、前記注目点の位置に音源が存在すると判定する
ことを特徴とする請求項3に記載の音響波信号処理装置。
In the second determination, the determination unit determines that the result of the first determination is based on the presence of a sound source in the information related to the sound pressure corresponding to any acoustic wave signal group. The acoustic wave signal processing apparatus according to claim 3, wherein it is determined that a sound source exists at the position of the point of interest.
前記選択部は、前記音響波信号群の一つとして、前記有効素子の音響波信号の全てを選択し、
前記判定部により前記注目点の位置に音源が存在すると判定された注目点については、前記算出部が、前記有効素子の音響波信号の全てを用いて算出した音圧をもって、被検体の画像データを生成する際に用いるデータとする
ことを特徴とする請求項2に記載の音響波信号処理装置。
The selection unit selects all of the acoustic wave signals of the effective element as one of the acoustic wave signal groups,
For the attention point determined by the determination unit that the sound source is present at the position of the attention point, the calculation unit has the sound pressure calculated using all of the acoustic wave signals of the effective element and the image data of the subject. The acoustic wave signal processing device according to claim 2, wherein the acoustic wave signal processing device is data used when generating the sound wave.
被検体から放出される前記音響波は、光源からの光を受けた被検体の中の光吸収体が音源となって発生する光音響波である
ことを特徴とする請求項1〜5のいずれか1項に記載の音響波信号処理装置。
6. The acoustic wave emitted from the subject is a photoacoustic wave generated using a light absorber in the subject that has received light from the light source as a sound source. The acoustic wave signal processing apparatus according to claim 1.
被検体から放出される音響波を検出する複数の素子を配置した音響波検出器を有する音響波信号処理装置の制御方法であって、
前記音響波検出器の複数の素子が検出した音響波に基づく音響波信号から、一部または全部の素子の音響波信号を選択して音響波信号群を設定する選択ステップと、
前記音響波信号群を用いて、注目点の音響波の音圧に関連する情報を求める算出ステップと、
判定ステップと、
を有し、
前記選択ステップは、素子の組み合わせ又は素子の位置の少なくとも一方が互いに異なる複数の音響波信号群を設定するものであり、
前記判定ステップは、同じ注目点に対して前記複数の音響波信号群ごとに前記算出ステップが算出した前記音圧に関連する情報のそれぞれについて、音源の存在に基づくものかどうかを判定する第一の判定ステップ、および、前記第一の判定ステップの結果、少なくとも一つの音響波信号群による前記音圧に関連する情報が音源の存在に基づくものではないと判定された注目点は音源が存在しないと判定する第二の判定ステップを含む
ことを特徴とする音響波信号処理装置の制御方法。
A method for controlling an acoustic wave signal processing apparatus having an acoustic wave detector in which a plurality of elements that detect acoustic waves emitted from a subject are arranged,
A selection step of selecting an acoustic wave signal of a part or all of the elements from an acoustic wave signal based on an acoustic wave detected by a plurality of elements of the acoustic wave detector and setting an acoustic wave signal group;
Using the acoustic wave signal group, a calculation step for obtaining information related to the sound pressure of the acoustic wave at the point of interest;
A determination step;
Have
The selection step is to set a plurality of acoustic wave signal groups in which at least one of the combination of elements or the position of the elements is different from each other.
The determination step determines whether each of the information related to the sound pressure calculated by the calculation step for each of the plurality of acoustic wave signal groups with respect to the same attention point is based on the presence of a sound source. As a result of the determination step and the first determination step, the attention point determined that the information related to the sound pressure by the at least one acoustic wave signal group is not based on the presence of the sound source does not exist. The control method of the acoustic wave signal processing apparatus characterized by including the 2nd determination step determined as follows.
被検体から放出される音響波を検出する複数の素子を配置した音響波検出器を有する音響波信号処理装置に、
前記音響波検出器の複数の素子が検出した音響波に基づく音響波信号から、一部または全部の素子の音響波信号を選択して音響波信号群を設定する選択ステップと、
前記音響波信号群を用いて、注目点の音響波の音圧に関連する情報を求める算出ステップと、
判定ステップと、
を実行させる、音響波信号処理装置の制御プログラムであって、
前記選択ステップは、素子の組み合わせ又は素子の位置の少なくとも一方が互いに異なる複数の音響波信号群を設定するものであり、
前記判定ステップは、同じ注目点に対して前記複数の音響波信号群ごとに前記算出ステップが算出した前記音圧に関連する情報のそれぞれについて、音源の存在に基づくものかどうかを判定する第一の判定ステップ、および、前記第一の判定ステップの結果、少なくとも一つの音響波信号群による前記音圧に関連する情報が音源の存在に基づくものではないと判定された注目点は音源が存在しないと判定する第二の判定ステップを含む
ことを特徴とする音響波信号処理装置の制御プログラム。
In an acoustic wave signal processing apparatus having an acoustic wave detector in which a plurality of elements that detect acoustic waves emitted from a subject are arranged,
A selection step of selecting an acoustic wave signal of a part or all of the elements from an acoustic wave signal based on an acoustic wave detected by a plurality of elements of the acoustic wave detector and setting an acoustic wave signal group;
Using the acoustic wave signal group, a calculation step for obtaining information related to the sound pressure of the acoustic wave at the point of interest;
A determination step;
A control program for an acoustic wave signal processing apparatus,
The selection step is to set a plurality of acoustic wave signal groups in which at least one of the combination of elements or the position of the elements is different from each other.
The determination step determines whether each of the information related to the sound pressure calculated by the calculation step for each of the plurality of acoustic wave signal groups with respect to the same attention point is based on the presence of a sound source. As a result of the determination step and the first determination step, the attention point determined that the information related to the sound pressure by the at least one acoustic wave signal group is not based on the presence of the sound source does not exist. A control program for an acoustic wave signal processing device, comprising a second determination step for determining
JP2010208975A 2010-09-17 2010-09-17 Acoustic wave signal processing apparatus, control method thereof, and control program Active JP5496031B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2010208975A JP5496031B2 (en) 2010-09-17 2010-09-17 Acoustic wave signal processing apparatus, control method thereof, and control program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2010208975A JP5496031B2 (en) 2010-09-17 2010-09-17 Acoustic wave signal processing apparatus, control method thereof, and control program

Publications (2)

Publication Number Publication Date
JP2012061202A JP2012061202A (en) 2012-03-29
JP5496031B2 true JP5496031B2 (en) 2014-05-21

Family

ID=46057557

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2010208975A Active JP5496031B2 (en) 2010-09-17 2010-09-17 Acoustic wave signal processing apparatus, control method thereof, and control program

Country Status (1)

Country Link
JP (1) JP5496031B2 (en)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0363836A (en) * 1989-08-02 1991-03-19 Nec Corp Microinstruction execution status tracer
JP5984547B2 (en) 2012-07-17 2016-09-06 キヤノン株式会社 Subject information acquisition apparatus and control method thereof
US20140182383A1 (en) 2012-12-28 2014-07-03 Canon Kabushiki Kaisha Object information obtaining device, display method, and non-transitory computer-readable storage medium
EP2749209A1 (en) * 2012-12-28 2014-07-02 Canon Kabushiki Kaisha Object information acquisition apparatus, display method, and program
JP6108902B2 (en) * 2013-03-26 2017-04-05 キヤノン株式会社 Processing apparatus, photoacoustic apparatus, processing method, and program
JP6362301B2 (en) * 2013-04-30 2018-07-25 キヤノン株式会社 Subject information acquiring apparatus and method of operating subject information acquiring apparatus
JP6234518B2 (en) * 2016-08-02 2017-11-22 キヤノン株式会社 Information processing apparatus and information processing method
JP6882108B2 (en) * 2017-07-13 2021-06-02 キヤノン株式会社 Image generator, image generation method, and program
JP7020954B2 (en) * 2018-02-13 2022-02-16 キヤノン株式会社 Image processing device, image processing method, program

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2831719B2 (en) * 1989-09-13 1998-12-02 株式会社東芝 Ultrasound diagnostic equipment
JP2009090104A (en) * 2007-09-18 2009-04-30 Fujifilm Corp Ultrasonic diagnostic method and apparatus
JP5279435B2 (en) * 2008-10-03 2013-09-04 キヤノン株式会社 SUBJECT INFORMATION ACQUISITION DEVICE AND METHOD FOR CONTROLLING SUBJECT INFORMATION ACQUISITION DEVICE
JP2010194085A (en) * 2009-02-25 2010-09-09 Konica Minolta Medical & Graphic Inc Ultrasonographic apparatus

Also Published As

Publication number Publication date
JP2012061202A (en) 2012-03-29

Similar Documents

Publication Publication Date Title
JP5496031B2 (en) Acoustic wave signal processing apparatus, control method thereof, and control program
JP6192297B2 (en) SUBJECT INFORMATION ACQUISITION DEVICE, DISPLAY CONTROL METHOD, AND PROGRAM
JP6320594B2 (en) Subject information acquisition apparatus and subject information acquisition method
JP5917037B2 (en) Subject information acquisition apparatus and subject information acquisition method
JP5761935B2 (en) Subject information acquisition apparatus, subject information acquisition method, and subject information acquisition program
JP6253323B2 (en) Subject information acquisition apparatus and control method thereof
JP6504826B2 (en) INFORMATION PROCESSING APPARATUS AND INFORMATION PROCESSING METHOD
JP5984547B2 (en) Subject information acquisition apparatus and control method thereof
KR101984824B1 (en) Method and apparatus for analyzing elastography of tissue using ultrasound
JP6071260B2 (en) Subject information acquisition apparatus and information processing method
JP2013215521A (en) Object information acquiring apparatus and method for controlling the same
JP5847454B2 (en) Subject information acquisition apparatus, display control method, and program
JP2017127527A (en) Subject information acquisition apparatus and signal processing method
JP6234518B2 (en) Information processing apparatus and information processing method
JP6072206B2 (en) SUBJECT INFORMATION ACQUISITION DEVICE AND DISPLAY METHOD
JP2017164222A (en) Processing device and processing method
JP2018192309A (en) Information processing device, information processing method, and program
JP2018012027A (en) Structure of recorded data
JP6000609B2 (en) Subject information acquisition apparatus and control method thereof
JP6400068B2 (en) Information processing apparatus and information processing method
JP6625182B2 (en) Information processing apparatus, information processing method and program
WO2023047601A1 (en) Image generation method, image generation program, and image generation apparatus
JP2022034766A (en) Image forming method, image forming program, and image forming device
JP2017086173A (en) Subject information acquisition device and control method thereof

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20130913

TRDD Decision of grant or rejection written
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20140131

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20140204

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20140304

R151 Written notification of patent or utility model registration

Ref document number: 5496031

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151