JP2018143778A - 機能的および解剖学的同時表示マッピングのための二重モダリティ画像処理システム - Google Patents
機能的および解剖学的同時表示マッピングのための二重モダリティ画像処理システム Download PDFInfo
- Publication number
- JP2018143778A JP2018143778A JP2018074832A JP2018074832A JP2018143778A JP 2018143778 A JP2018143778 A JP 2018143778A JP 2018074832 A JP2018074832 A JP 2018074832A JP 2018074832 A JP2018074832 A JP 2018074832A JP 2018143778 A JP2018143778 A JP 2018143778A
- Authority
- JP
- Japan
- Prior art keywords
- light
- image
- tissue
- photoacoustic
- probe
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/0093—Detecting, measuring or recording by applying one single type of energy and measuring its conversion into another type of energy
- A61B5/0095—Detecting, measuring or recording by applying one single type of energy and measuring its conversion into another type of energy by applying light and detecting acoustic waves, i.e. photoacoustic measurements
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/145—Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue
- A61B5/1455—Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue using optical sensors, e.g. spectral photometrical oximeters
- A61B5/14551—Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue using optical sensors, e.g. spectral photometrical oximeters for measuring blood gases
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/08—Detecting organic movements or changes, e.g. tumours, cysts, swellings
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/13—Tomography
- A61B8/14—Echo-tomography
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/52—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/5215—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data
- A61B8/5238—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data for combining image data of patient, e.g. merging several images from different acquisition modes into one image
- A61B8/5261—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data for combining image data of patient, e.g. merging several images from different acquisition modes into one image combining images from different diagnostic modalities, e.g. ultrasound and X-ray
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/17—Systems in which incident light is modified in accordance with the properties of the material investigated
- G01N21/1702—Systems in which incident light is modified in accordance with the properties of the material investigated with opto-acoustic detection, e.g. for gases or analysing solids
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B2562/00—Details of sensors; Constructional details of sensor housings or probes; Accessories for sensors
- A61B2562/02—Details of sensors specially adapted for in-vivo measurements
- A61B2562/0204—Acoustic sensors
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B2562/00—Details of sensors; Constructional details of sensor housings or probes; Accessories for sensors
- A61B2562/02—Details of sensors specially adapted for in-vivo measurements
- A61B2562/0233—Special features of optical sensors or probes classified in A61B5/00
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/43—Detecting, measuring or recording for evaluating the reproductive systems
- A61B5/4306—Detecting, measuring or recording for evaluating the reproductive systems for evaluating the female reproductive systems, e.g. gynaecological evaluations
- A61B5/4312—Breast evaluation or disorder diagnosis
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/08—Detecting organic movements or changes, e.g. tumours, cysts, swellings
- A61B8/0825—Detecting organic movements or changes, e.g. tumours, cysts, swellings for diagnosis of the breast, e.g. mammography
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Physics & Mathematics (AREA)
- General Health & Medical Sciences (AREA)
- Engineering & Computer Science (AREA)
- Pathology (AREA)
- Veterinary Medicine (AREA)
- Biomedical Technology (AREA)
- Biophysics (AREA)
- Heart & Thoracic Surgery (AREA)
- Medical Informatics (AREA)
- Molecular Biology (AREA)
- Surgery (AREA)
- Animal Behavior & Ethology (AREA)
- Public Health (AREA)
- Radiology & Medical Imaging (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Chemical & Material Sciences (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Optics & Photonics (AREA)
- Spectroscopy & Molecular Physics (AREA)
- Analytical Chemistry (AREA)
- Immunology (AREA)
- General Physics & Mathematics (AREA)
- Biochemistry (AREA)
- Acoustics & Sound (AREA)
- Ultra Sonic Daignosis Equipment (AREA)
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
Abstract
【解決手段】超音波および光音響信号を生成させ、検出するために、同じハンドヘルドプローブを適用して同時表示された超音波処理画像および光音響処理画像を提供するリアルタイム画像処理システムが開示される。これらの信号は、血液ヘモグロビン指数および血液酸素化指数の2つの機能パラメータマップを重ね合わせた解剖学的マップを再構築するためにデジタル化され、処理され、使用される。血液ヘモグロビン指数は、バックグラウンド血液濃度に対する診断対象領域の血液ヘモグロビン濃度変化を表す。血液酸素化指数は、血液酸素化のバックグラウンドレベルに対する診断対象領域の血液酸素化の変化を表す。これらの同時表示マップを使って、良性腫瘤および嚢腫から悪性腫瘍を非侵襲的に鑑別できる。
【選択図】図1A
Description
以下の説明および図は、例示のためのものであり、限定するものと解釈されるべきではない。完全な理解を得るために多くの特定の詳細説明が記載される。しかし、特定の例では、記述を曖昧にするのを避けるために、周知のまたは通常の詳細事項は記載されない。本開示の1つのまたは任意の実施形態への言及は、必ずしも同じ実施形態への言及ではなく、このような言及は、少なくとも1つを意味する。
少なくとも一部の実施形態では、本開示は、器官の皮膚表面に沿って走査するためのハンドヘルドプローブを使用する医用診断二重モダリティ超音波/光音響システムに関し、組織の深さでの2つのタイプ:解剖学的(形態学的)および機能的(血液ヘモグロビン指数および血液酸素化指数)2次元マップを提供する。一実施形態では、これらの2つのマップは、診断対象の組織中で起こりうるどのような生理的な変化よりも速く、同じアレイの超音波振動子を使って空間的に同時表示され、また、2つのタイプの画像をリアルタイムで取得することにより時間的に同時表示される。血液ヘモグロビン指数は、診断対象領域中のバックグラウンド血液濃度に対する診断対象の血液ヘモグロビン濃度変化を表す。血液酸素化指数は、診断対象領域中の血液酸素化のバックグラウンドレベルに対する血液酸素化の変化を表す。これらの同時表示マップを使って、良性腫瘤および嚢腫から悪性腫瘍を非侵襲的に鑑別できる。
一実施形態では、レーザーは、2つの(またはさらに多い)異なる切替波長、すなわち、2つの異なるスペクトル帯で、短い、ナノ秒パルスの近赤外線を発光できる。一実施形態では、波長の1つは、血液ヘモグロビンにより優先的に吸収され、その他の波長は、血液中の酸化へモグロビンにより優先的に吸収される。一実施形態では、1つの波長(スペクトル帯)の第1のレーザーパルスで調査対象の器官の照射、および第1の照射から生じた第1の光音響信号プロファイルの検出、続けて、第2の波長帯域の第2のレーザーパルスでの照射、および第2の光音響信号プロファイルの検出、により、(i)血液ヘモグロビン指数および(ii)血液酸素化指数に基づいて、診断対象領域の機能マップ生成に使うことができる2枚の同時表示断層撮影画像の再構築に使用可能なデータを得ることができる。
一実施形態では、光伝送システムは、光ファイバーバンドルを含む。一実施形態では、光ファイバーバンドルの入力部は、入射レーザービームに合わせるために環状であり、一方、ファイバーバンドルの出力部は、超音波振動子アレイのサイズと形状に合わせるために矩形である。一実施形態では、各ファイバーは、バンドルに優れた柔軟性を付与するために小さい直径である(例えば、50ミクロンまで小さくされる)。一実施形態では、ファイバーバンドルの入力チップを溶融し、バンドルを六角形の形状にして、バンドル中のファイバー間の空隙を除去し、それにより、レーザーエネルギー伝送の20%もの改良が行われる。一実施形態では、ファイバーバンドルの出力チップが、完全に無作為化され、それにより、入力部で相互に接近して現れたファイバーが、出力部で、または二股のファイバーバンドルの異なる分岐部でも、相互に離れて現れるようになる。
プローブは、光音響および超音波画像に高コントラストおよび高解像度を与えるように設計される。一実施形態では、プローブは、超音波/光音響振動子アレイを有するハンドヘルドプローブであり、これは、1次元、1.5次元、または2次元となるように設計できる。一実施形態では、振動子は、超広帯域の超音波周波数内の音波を検出し、超広帯域は、診断対象組織により放出される光音響信号のスペクトルに合うような形状にされる。また、一実施形態では、振動子は、短いリングダウン時間および徐々に大きさが減少する最小限の反響を有する短パルス幅の超音波として、音波を放出するように設計される。
<光照射およびプローブ設計>
音響レンズは、典型的な例では、超音波ビームの焦点を合わせるために、光音響プローブ内の振動子上に置かれる。プローブは、音響レンズがなくても提供できるが、レンズがない場合は、超音波振動子は、直接光に曝露され、このような光を吸収する可能性があり、このような光がパルス出力される場合は特に、これにより、非常に大きなアーチファクトの超音波信号が生ずる場合がある。超音波プローブ上へのレンズの光照射は、画像アーチファクトに繋がる非常に強い過渡的音波を生じる。50%以下の近赤外線が、皮膚色に応じて、皮膚によって拡散的に散乱される可能性がある。振動子素子のレンズ間の音響インピーダンスのミスマッチは、長いリングダウン時間をもつ反響を起こす可能性がある。従って、プローブ設計の実施形態は、強散乱白色不透明レンズを含む。各振動子要素の湾曲形状によりこのようなレンズが必要でない場合は、白色強散乱前面整合層を採用して、近赤外光から振動子素子を保護する必要がある。
一実施形態では、本開示は、光音響および超音波の両モードで動作し、これらのモード間を急速に切り替えることができる電子データ取得システムを有する光音響画像処理システムに関する。一実施形態では、これは、電子データ取得システムの主マイクロプロセッサであるフィールドプログラマブルゲートアレー(FPGA)の機能を制御するファームウェアを使って実現される。一実施形態では、再プログラム可能FPGAにより、光音響および超音波操作モード間をリアルタイムに切り替えることができ、その結果、超音波および光音響画像の同時表示を可能とし、この同時表示画像は、機能的および解剖学的マップに基づく画像診断に使用できる。一実施形態では、FPGAの機能には、リアルタイム画像再構築および処理のために、光音響および/または超音波データ、信号処理および伝達データを制御すること、取得すること、および保存することが含まれる。また、一実施形態では、FPGAは、超音波ビーム形成および画像再構築するために採用されてもよい。
信号処理
種々の実施形態では、画像診断手順の目的は、画像上に表示された組織の各ボクセルで最初に生成された信号を正しく再現する明るさで各ピクセルを表示することである。他方、組織内の光パルスにより生成される固有の圧力信号は、組織を通る伝搬の過程、および特に、超音波振動子および電子機器サブシステムによる検出と記録の過程で、大きく変えられる場合がある。
種々の実施形態では、画像再構築は、典型的な例では、処理された、および、フィルタリングされた信号の画像面への放射逆投影を使用する。しかし、小さいハンドヘルドプローブから利用出来る限定された視野のために、不完全なデータセットのみ、得ることができる。結果として、2D光音響画像は、画像上に表示される対象の形状および明るさを歪ませるアーチファクトを含む可能性がある。一実施形態では、開口積分正規化放射逆投影(aperture integrated normalized radial back projection)を使って、制限された開口による光音響断層撮影で観察される一部の再構築アーチファクトが補正される。
一実施形態では、光音響画像パレットは、組織内の光分布の影響を減少させるために同一にされる。このような同等化は、浅い対象、および深い対象の両方をより良く可視化するために、光音響画像のダイナミックレンジを変える。
機能的画像診断の原理は、腫瘍病態生理学に基づくことが可能である。例えば、悪性腫瘍では、総ヘモグロビン濃度が高められ、血液ヘモグロビン中の酸素飽和度レベルが低減される。一実施形態では、光音響画像は、再処理され、特に、(i)総ヘモグロビン[tHb]および(ii)ヘモグロビンの酸素飽和度[SO2]の画像に変換できる。図18は、2つの乳房腫瘍の例を示す。
一部の実施形態は、十分に機能するコンピュータおよびコンピュータシステムに実装可能であるが、種々の実施形態は、コンピュータ製品として種々の形態で配布可能であり、実際の配布に使用される特定のタイプのマシンまたはコンピュータ可読メディアに関わらず、適用可能である。
Claims (50)
- 少なくとも身体の一部の組織の深さまで切片を可視化するための画像処理システムであって、
光放出部および超音波振動子アレイを含むハンドヘルド画像処理プローブ;および
前記ハンドヘルド画像処理プローブ由来のデータを受け取り、前記データの少なくとも一部に基づいて少なくとも3枚の独立した画像を処理するように構成された処理システム、
を含み、
前記3枚の独立した画像が、
総ヘモグロビン濃度分布を反映する第1の機能的画像;
血液酸素飽和度分布を反映する第2の機能的画像;および
組織構造の形態学的画像;
を一緒に含み、
前記処理システムが、前記第1の機能的画像、前記第2の機能的画像、および前記形態学的画像を時間的、空間的に実質的に同時表示し、実質的に同時表示された画像を出力するようにさらに構成された、
システム。 - 前記ハンドヘルド画像処理プローブ中の前記光放出部および前記超音波振動子アレイが、概ね平坦直線形状に配列された請求項1に記載のシステム。
- 前記ハンドヘルド画像処理プローブ中の前記光放出部および前記超音波振動子アレイが、湾曲凹円弧形状に配列された請求項1に記載のシステム。
- 前記ハンドヘルド画像処理プローブが、前記超音波振動子アレイのそれぞれの側に位置する少なくとも2本の光ビームを生成し、それにより、前記超音波振動子アレイの下で、皮膚の厚さ以内の距離で、前記光ビームが1本のビームにマージされる程度の前記光ビーム間の角度と距離で光エネルギーを皮膚表面に伝送するように構成される請求項1に記載のシステム。
- 1つまたは複数の二波長短パルス幅レーザーをさらに含む請求項1に記載のシステム。
- 複数の単一波長短パルス幅レーザーをさらに含む請求項1に記載のシステム。
- 光ファイバー光伝送システムをさらに含む請求項1に記載のシステム。
- あるビデオフレームレートで動作させることにより、実質的にリアルタイムで画像を提示するように構成される請求項1に記載のシステム。
- 前記ハンドヘルド光音響プローブが、前記振動子アレイ面の下またはその側面のいずれかから光エネルギーを伝送するように構成される請求項1に記載のシステム。
- 前記ハンドヘルド画像処理プローブが、音響レンズを含む請求項1に記載のシステム。
- 前記音響レンズが、光反射材料を含む請求項10に記載のシステム。
- 前記光反射材料が、前記音響レンズとの光相互作用に関連する画像アーチファクトを除去する高光反射金属薄層を含む請求項11に記載のシステム。
- 前記音響レンズが、白色不透明材料から形成される請求項12に記載のシステム。
- 前記高光反射金属薄層が、アルミニウム、金、または銀を含む請求項12に記載のシステム。
- 前記ハンドヘルド画像処理プローブが、複数のサブバンドルを含む出力ファイバーバンドルを含む請求項1に記載のシステム。
- 前記複数のサブバンドルが、前記画像面に均一の照射および滑らかな照射端部を提供し、それにより、端部関連光音響アーチファクトを減らすような形状にされる請求項15に記載のシステム。
- 前記超音波振動子アレイが、中心周波数から200%までの帯域の超広帯域の超音波周波数帯感度を有する超音波振動子を含む請求項1に記載のシステム。
- 前記ハンドヘルド画像処理プローブが、入射レーザービームに適合する環状形状である入力ファイバーバンドルを含む請求項1に記載のシステム。
- 前記ハンドヘルド画像処理プローブが、ファイバー間の空隙を通る光の損失を避けるように前記バンドル中の実質的に全ファイバーを再成形した熱融合ファイバーバンドルチップを有する入力ファイバーバンドルを含む請求項1に記載のシステム。
- 前記ハンドヘルド画像処理プローブが、少なくとも2つのサブバンドルに分割され、各サブバンドル中のファイバーが無作為化され、それにより、入力時の2つの隣接ファイバーが前記出力ファイバーバンドルの異なるサブバンドル中に現れるファイバーバンドルを含む請求項1に記載のシステム。
- 前記ハンドヘルド画像処理プローブが、少なくとも2つのサブバンドルに分割され、ファイバーバンドルパドルを形成し、少なくとも2つのパドルが前記超音波振動子アレイの両側に置かれ、次に、各パドルがさらに小さいサブバンドルに分割され、それぞれのさらに小さいサブバンドルが前記パドルの溝の中に存在し、それにより、光ビームの制御されたプロファイルを提供するファイバーバンドルを含む請求項1に記載のシステム。
- 前記ハンドヘルド画像処理プローブが、ファイバーバンドルを含み、このバンドルが、前記超音波振動子アレイのサイズおよび形状を補完する形状にされている光ビームを生成する請求項1に記載のシステム。
- 前記ハンドヘルド画像処理プローブが、三角の形状の端部を有し、それにより、光ディフューザを通過後に出力ビームが滑らかな端部の光フルエンスを有することができる出力ファイバーバンドルを含む請求項1に記載のシステム。
- 前記ハンドヘルド画像処理プローブが複数の光学的窓を含み、それぞれが画像化対象組織に整合する超音波インピーダンスを有する1つまたは複数の反射防止コートプレートを含む請求項1に記載のシステム。
- 前記反射防止コートプレートが、ガラス、ポリマーまたはその他の光学的に透明な固体材料を含む請求項24に記載のシステム。
- 前記ハンドヘルド画像処理プローブが、
第1および第2の光ディフューザ;
第1および第2の光学的窓;
少なくとも2つの出力ファイバーバンドルであって、少なくとも2つの出力ファイバーバンドルからそれぞれ出現する光ビームは、前記それぞれの光ディフューザを通過して、次に、前記それぞれの光学的窓を通過して、その後、少なくとも部分的にマージされるように、配置された少なくとも2つの出力ファイバーバンドル、
を含む請求項1に記載のシステム。 - 前記ハンドヘルドプローブの位置を制御し、それにより、少なくとも前記身体の一部の表面に沿って前記ハンドヘルドプローブを走査することにより取得された深さの組織から作られた2次元切片から前記身体の3次元画像の構築を可能とするように構成された3次元位置決めシステムをさらに含む請求項1に記載のシステム。
- 前記ハンドヘルド画像処理プローブが、実質的に吸収されない照射部品からの光を反射および散乱することを可能にする材料であって、光学的に不透明である材料から形成された音響レンズをさらに含む請求項1に記載のシステム。
- 前記音響レンズが、シリコンゴムから形成される請求項28に記載のシステム。
- 前記シリコンゴムに、二酸化チタンが充填される請求項29に記載のシステム。
- 前記シリコンゴムに、硫酸バリウム粉末が充填される請求項29に記載のシステム。
- 前記ハンドヘルド画像処理プローブが、前記プローブの低エコー封入を提供する筺体をさらに含む請求項1に記載のシステム。
- 前記筺体の内部または外部が、近赤外レーザー光を吸収しない材料を含む請求項32に記載のシステム。
- 前記筺体の内部または外部が、レーザー光吸収後、超音波を発生しないように低熱膨張特性を有する材料を含む請求項33に記載のシステム。
- 前記超音波振動子アレイのアセンブリが、低エコー材料で作られる請求項1に記載のシステム。
- 前記超音波振動子アレイのアセンブリと光ファイバーアセンブリとの間に低エコー材料層をさらに含み、光と前記超音波振動子アレイのアセンブリとの間の相互作用時に超音波の発生を回避する請求項1に記載のシステム。
- 少なくとも身体の一部の組織の機能的および解剖学的同時表示マッピングのための画像処理方法であって、
a)超音波パルスを前記組織に伝送する工程、および身体形態に関連する構造組織境界から反射された後方散乱超音波信号を検出する工程;
b)前記組織に異なる電磁エネルギースペクトル帯を有する少なくとも2つの光パルスを順次伝送する工程、および組織に含まれる血液のヘモグロビンおよび酸化へモグロビンでの前記少なくとも2つのそれぞれの光パルスの選択的吸収から生じる過渡的超音波信号を検出する工程;
c)ノイズを除去し、組織および前記検出システム部品を通る信号伝搬過程での信号の変化を元に戻し、さらに、元の信号の一時的形状および超音波スペクトルを復元するために検出超音波信号を処理する工程;
d)総ヘモグロビン濃度および血液酸素飽和度を反映している部分的に透過性の機能的画像と共に同時表示され、重ねられた組織構造の形態学的画像を生成するために画像再構築を行い、さらに処理する工程;および、
e)組織機能的および形態学的変化を、実質的にその発生時にリアルタイム画像が表示するように、工程a)〜工程d)をあるビデオフレームレートで反復する工程、
を含む方法。 - それぞれの異なる電磁照射スペクトル帯を有する3つ以上の光パルスが前記組織に順次伝送され、それにより、重要な組織の分子発色団を反映している改善された正確さの機能的画像が生成される請求項37に記載の方法。
- 前記組織の分子発色団が、水を含む請求項38に記載の方法。
- 前記組織の分子発色団が、脂質を含む請求項38に記載の方法。
- それぞれの異なる電磁照射スペクトル帯を有する4つの光パルスが、前記組織に順次伝送される請求項38に記載の方法。
- 前記2つの光パルスのスペクトル帯が、それらの内の1つが757nm近傍のヘモグロビン吸収の局所的極大ピークに整合し、もう一つがヘモグロビンの光吸収に対する酸化へモグロビンの光吸収の最大比率に対応する1064nm近傍のスペクトル範囲に整合するように選択される請求項37に記載の方法。
- 第1および第2の波長で測定された前記腫瘍の吸収係数に少なくとも一部基づいて、腫瘍識別を示す工程をさらに含む請求項37に記載の方法。
- 前記第1の波長が、757ナノメータを含む請求項43に記載の方法。
- 前記第2の波長が、1064ナノメータを含む請求項43に記載の方法。
- 前記腫瘍識別を示す工程が、
a.良性腫瘍を示すために、前記総ヘモグロビンの濃度の比較的低い上昇および正常な血液酸素飽和度と重ね合わされた比較的滑らかな形状の腫瘍、または腫瘍の周辺の組織、または
b.悪性腫瘍を示すために、前記総ヘモグロビンの濃度の高い上昇および低い血液酸素飽和度と重ね合わされた粗形状の腫瘍、または前記腫瘍の周辺の組織、
のいずれかを表示することを含む請求項43に記載の方法。 - 前記組織の表面に対応する画像ピクセルの相対的明るさを低減させ、それにより、組織のより大きい深度に対応するピクセルの相対的明るさを強調することにより画像表示パレットを再正規化し、より大きい深度に位置する対象をより高いコントラストで可視化する工程をさらに含む請求項37に記載の方法。
- 前記検出超音波信号を処理して信号の変化を元に戻す工程が、このような前記検出超音波信号の固有の光音響振幅およびプロファイル、並びに前記身体の光吸収係数の分布を取得するためのハードウェア転送関数のデコンヴォルーションを含む請求項37に記載の方法。
- 前記画像化対象身体の一部中の組織形態の可視化、および機能情報のコントラストを強調するために、光音響および超音波造影剤を使用する工程をさらに含む請求項37に記載の方法。
- 前記身体中の所定のタイプの分子、細胞または組織の分布の特徴付けを強調するために、光音響および超音波造影剤を使用する工程をさらに含む請求項37に記載の方法。
Applications Claiming Priority (10)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US13/287,759 US20130109950A1 (en) | 2011-11-02 | 2011-11-02 | Handheld optoacoustic probe |
US13/287,759 | 2011-11-02 | ||
US13/341,950 US8686335B2 (en) | 2011-12-31 | 2011-12-31 | System and method for adjusting the light output of an optoacoustic imaging system |
US13/341,950 | 2011-12-31 | ||
US13/507,217 | 2012-06-13 | ||
US13/507,217 US9289191B2 (en) | 2011-10-12 | 2012-06-13 | System and method for acquiring optoacoustic data and producing parametric maps thereof |
US13/667,808 | 2012-11-02 | ||
US13/667,808 US20130289381A1 (en) | 2011-11-02 | 2012-11-02 | Dual modality imaging system for coregistered functional and anatomical mapping |
US13/667,830 US9757092B2 (en) | 2011-11-02 | 2012-11-02 | Method for dual modality optoacoustic imaging |
US13/667,830 | 2012-11-02 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014540150A Division JP6322578B2 (ja) | 2011-11-02 | 2012-11-02 | 機能的および解剖学的同時表示マッピングのための二重モダリティ画像処理システム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2018143778A true JP2018143778A (ja) | 2018-09-20 |
JP6732830B2 JP6732830B2 (ja) | 2020-07-29 |
Family
ID=48192850
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014540150A Active JP6322578B2 (ja) | 2011-11-02 | 2012-11-02 | 機能的および解剖学的同時表示マッピングのための二重モダリティ画像処理システム |
JP2018074832A Active JP6732830B2 (ja) | 2011-11-02 | 2018-04-09 | 機能的および解剖学的同時表示マッピングのための二重モダリティ画像処理システム |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014540150A Active JP6322578B2 (ja) | 2011-11-02 | 2012-11-02 | 機能的および解剖学的同時表示マッピングのための二重モダリティ画像処理システム |
Country Status (8)
Country | Link |
---|---|
JP (2) | JP6322578B2 (ja) |
KR (1) | KR102117132B1 (ja) |
AU (2) | AU2012332233B2 (ja) |
CA (1) | CA2861089C (ja) |
IL (1) | IL232414A0 (ja) |
MX (1) | MX2014005408A (ja) |
SG (1) | SG11201401986WA (ja) |
WO (1) | WO2013067419A1 (ja) |
Families Citing this family (32)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20090156932A1 (en) | 2007-12-13 | 2009-06-18 | Board Of Trustees Of The University Of Arkansas | Device and method for in vivo flow cytometry using the detection of photoacoustic waves |
US9144383B2 (en) | 2007-12-13 | 2015-09-29 | The Board Of Trustees Of The University Of Arkansas | Device and method for in vivo noninvasive magnetic manipulation of circulating objects in bioflows |
US9451884B2 (en) | 2007-12-13 | 2016-09-27 | Board Of Trustees Of The University Of Arkansas | Device and method for in vivo detection of clots within circulatory vessels |
US8686335B2 (en) | 2011-12-31 | 2014-04-01 | Seno Medical Instruments, Inc. | System and method for adjusting the light output of an optoacoustic imaging system |
US10433732B2 (en) | 2011-11-02 | 2019-10-08 | Seno Medical Instruments, Inc. | Optoacoustic imaging system having handheld probe utilizing optically reflective material |
US20140005544A1 (en) | 2011-11-02 | 2014-01-02 | Seno Medical Instruments, Inc. | System and method for providing selective channel sensitivity in an optoacoustic imaging system |
US20130116538A1 (en) | 2011-11-02 | 2013-05-09 | Seno Medical Instruments, Inc. | Optoacoustic imaging systems and methods with enhanced safety |
US9445786B2 (en) | 2011-11-02 | 2016-09-20 | Seno Medical Instruments, Inc. | Interframe energy normalization in an optoacoustic imaging system |
US11191435B2 (en) | 2013-01-22 | 2021-12-07 | Seno Medical Instruments, Inc. | Probe with optoacoustic isolator |
US20130289381A1 (en) | 2011-11-02 | 2013-10-31 | Seno Medical Instruments, Inc. | Dual modality imaging system for coregistered functional and anatomical mapping |
US9814394B2 (en) | 2011-11-02 | 2017-11-14 | Seno Medical Instruments, Inc. | Noise suppression in an optoacoustic system |
WO2013134772A2 (en) | 2012-03-09 | 2013-09-12 | Seno Medical Instruments, Inc. | Statistical mapping in an optoacoustic imaging system |
JP6061571B2 (ja) * | 2012-09-04 | 2017-01-18 | キヤノン株式会社 | 被検体情報取得装置 |
CA2884954A1 (en) | 2012-09-25 | 2014-04-03 | Mark S. Smeltzer | Device and method for in vivo photoacoustic diagnosis and photothermal purging of infected blood |
JP6472437B2 (ja) * | 2013-09-04 | 2019-02-20 | キヤノン株式会社 | 光音響装置、及び音響波受信装置 |
CN103512960B (zh) * | 2013-09-27 | 2016-01-06 | 中国科学院声学研究所 | 一种超声阵列成像方法 |
WO2015054688A2 (en) | 2013-10-11 | 2015-04-16 | Seno Medical Instruments, Inc. | Systems and methods for component separation in medical imaging |
CN104739453A (zh) * | 2013-12-31 | 2015-07-01 | 深圳市鹏瑞智能技术应用研究院 | 超声信号断层扫描成像系统及方法 |
JP6049209B2 (ja) * | 2014-01-28 | 2016-12-21 | 富士フイルム株式会社 | 光音響計測用プローブおよびそれを備えた光音響計測装置 |
WO2016109831A1 (en) | 2014-12-31 | 2016-07-07 | Board Of Trustees Of The University Of Arkansas | Devices and methods for fractionated photoacoustic flow cytometry |
US11771399B2 (en) * | 2018-02-07 | 2023-10-03 | Atherosys, Inc. | Apparatus and method to guide ultrasound acquisition of the peripheral arteries in the transverse plane |
CN112272540B (zh) * | 2018-04-04 | 2024-08-06 | 特姆威(苏州)医学影像有限公司 | 定量成像系统和其用途 |
EP3843632A4 (en) * | 2018-08-29 | 2021-11-24 | Tel Hashomer Medical Research Infrastructure And Services Ltd. | SYSTEM AND METHOD FOR DETERMINING THE OXYGENATED BLOOD CONTENT OF A BIOLOGICAL TISSUE |
US11832872B2 (en) | 2019-04-01 | 2023-12-05 | Anya L. Getman | Resonating probe with optional sensor, emitter, and/or injection capability |
JP7301676B2 (ja) * | 2019-08-28 | 2023-07-03 | キヤノンメディカルシステムズ株式会社 | 超音波診断装置、信号処理方法、及び信号処理プログラム |
WO2021149127A1 (ja) * | 2020-01-21 | 2021-07-29 | オリンパス株式会社 | 赤血球分化モニタリング装置および赤血球分化モニタリング方法 |
CN111671436A (zh) * | 2020-05-21 | 2020-09-18 | 东南大学 | 一种温度补偿的光声无创血红蛋白检测装置及检测方法 |
CN111839730B (zh) * | 2020-07-07 | 2022-02-11 | 厦门大学附属翔安医院 | 一种用于引导肿瘤切除的光声成像手术导航平台 |
US12109006B2 (en) * | 2021-09-10 | 2024-10-08 | Rockley Photonics Limited | Optical speckle receiver |
CN116138805B (zh) * | 2022-12-30 | 2023-09-08 | 深圳开立生物医疗科技股份有限公司 | 光声超声多模态成像设备及方法、电子设备及存储介质 |
CN115868956A (zh) * | 2023-03-01 | 2023-03-31 | 暨南大学附属第一医院(广州华侨医院) | 一种用于光磁声成像的激励源抗干扰方法 |
CN118356211B (zh) * | 2024-06-19 | 2024-09-10 | 杭州励影光电成像有限责任公司 | 一种超高速多模态融合成像系统及方法 |
Citations (19)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH07284090A (ja) * | 1994-04-08 | 1995-10-27 | Olympus Optical Co Ltd | 画像分類装置 |
JPH0961359A (ja) * | 1995-08-29 | 1997-03-07 | Hamamatsu Photonics Kk | 濃度測定装置 |
JPH1176232A (ja) * | 1997-09-11 | 1999-03-23 | Hitachi Medical Corp | 超音波診断装置 |
JP2005218684A (ja) * | 2004-02-06 | 2005-08-18 | Toshiba Corp | 非侵襲生体情報映像装置及び非侵襲生体情報映像方法 |
JP2005536309A (ja) * | 2002-08-21 | 2005-12-02 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | 改善されたハーモニックイメージングのためのシステム及び方法 |
JP2007267837A (ja) * | 2006-03-30 | 2007-10-18 | Toshiba Corp | 生体光計測装置 |
JP2009512500A (ja) * | 2005-10-20 | 2009-03-26 | スペクトロス コーポレイション | 体内腫瘍のスクリーニングのための超高特定性装置及び方法 |
JP2009082469A (ja) * | 2007-09-28 | 2009-04-23 | Toshiba Corp | 超音波診断装置及びプログラム |
JP2010509977A (ja) * | 2006-11-21 | 2010-04-02 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | 解剖構造における組織の生体イメージングのためのシステム、装置、方法、コンピュータ読取可能媒体及び使用 |
JP2010125260A (ja) * | 2008-12-01 | 2010-06-10 | Canon Inc | 生体検査装置 |
JP2010136887A (ja) * | 2008-12-11 | 2010-06-24 | Canon Inc | 光音響イメージング装置および光音響イメージング方法 |
JP2010167167A (ja) * | 2009-01-26 | 2010-08-05 | Fujifilm Corp | 光超音波断層画像化装置および光超音波断層画像化方法 |
JP2010200926A (ja) * | 2009-03-03 | 2010-09-16 | Canon Inc | 超音波装置 |
WO2010127199A2 (en) * | 2009-05-01 | 2010-11-04 | Visualsonics Inc. | System for photoacoustic imaging and related methods |
JP2011083531A (ja) * | 2009-10-19 | 2011-04-28 | Canon Inc | 音響波測定装置、音響波画像化装置および音響波測定装置の制御方法 |
JP2011519281A (ja) * | 2007-10-25 | 2011-07-07 | ワシントン・ユニバーシティ | 光学的方位分解能を備えた共焦点光音響顕微鏡検査 |
US20110201914A1 (en) * | 2008-10-23 | 2011-08-18 | Washington University In St. Louis | Reflection-Mode Photoacoustic Tomography Using A Flexibly-Supported Cantilever Beam |
JP2011177496A (ja) * | 2010-02-04 | 2011-09-15 | Canon Inc | 機能情報取得装置、機能情報取得方法、及びプログラム |
JP2011193914A (ja) * | 2010-03-17 | 2011-10-06 | Canon Inc | 生体情報処理装置、生体情報処理方法および生体情報処理プログラム |
Family Cites Families (20)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5830146A (en) * | 1997-03-17 | 1998-11-03 | Polartechnics Limited | Sheathed probes for tissue type recognition |
JP4406226B2 (ja) * | 2003-07-02 | 2010-01-27 | 株式会社東芝 | 生体情報映像装置 |
IL166408A0 (en) * | 2005-01-20 | 2006-01-15 | Ultraview Ltd | Combined 2d pulse-echo ultrasound and optoacousticsignal for glaucoma treatment |
WO2006090298A1 (en) * | 2005-02-23 | 2006-08-31 | Philips Intellectual Property & Standards Gmbh | Imaging an object of interest |
JP4745743B2 (ja) * | 2005-07-14 | 2011-08-10 | Hoya株式会社 | 蛍光観察内視鏡システム |
US20070093702A1 (en) * | 2005-10-26 | 2007-04-26 | Skyline Biomedical, Inc. | Apparatus and method for non-invasive and minimally-invasive sensing of parameters relating to blood |
JP5432708B2 (ja) * | 2006-06-23 | 2014-03-05 | コーニンクレッカ フィリップス エヌ ヴェ | 光音響及び超音波合成撮像器のタイミング制御装置 |
US8070682B2 (en) * | 2006-07-19 | 2011-12-06 | The University Of Connecticut | Method and apparatus for medical imaging using combined near-infrared optical tomography, fluorescent tomography and ultrasound |
JP4820239B2 (ja) * | 2006-08-28 | 2011-11-24 | 公立大学法人大阪府立大学 | 光トモグラフィ装置用プローブ |
US8302480B2 (en) * | 2007-02-05 | 2012-11-06 | Brown University | Enhanced ultra-high resolution acoustic microscope |
JP2010179085A (ja) * | 2008-07-11 | 2010-08-19 | Canon Inc | 生体情報取得装置 |
WO2010009412A2 (en) * | 2008-07-18 | 2010-01-21 | University Of Rochester Medical Center | Low-cost device for c-scan photoacoustic imaging |
CA2731409C (en) * | 2008-07-25 | 2016-01-05 | Daniel Razansky | Quantitative multi-spectral opto-acoustic tomography (msot) of tissue biomarkers |
JP4900979B2 (ja) * | 2008-08-27 | 2012-03-21 | キヤノン株式会社 | 光音響装置および光音響波を受信するための探触子 |
US20100094134A1 (en) * | 2008-10-14 | 2010-04-15 | The University Of Connecticut | Method and apparatus for medical imaging using near-infrared optical tomography combined with photoacoustic and ultrasound guidance |
JP4621781B2 (ja) * | 2009-03-06 | 2011-01-26 | 株式会社東芝 | レーザ超音波検査装置 |
JP2011072702A (ja) * | 2009-10-01 | 2011-04-14 | Konica Minolta Medical & Graphic Inc | 超音波探触子用音響レンズおよび超音波探触子 |
EP2957232A1 (en) * | 2009-10-29 | 2015-12-23 | Canon Kabushiki Kaisha | Photoacoustic apparatus |
US8879352B2 (en) * | 2010-01-25 | 2014-11-04 | The Arizona Board Of Regents On Behalf Of The University Of Arizona | Ultrasonic/photoacoustic imaging devices and methods |
JP5448918B2 (ja) * | 2010-02-24 | 2014-03-19 | キヤノン株式会社 | 生体情報処理装置 |
-
2012
- 2012-11-02 KR KR1020147014671A patent/KR102117132B1/ko active IP Right Grant
- 2012-11-02 CA CA2861089A patent/CA2861089C/en active Active
- 2012-11-02 AU AU2012332233A patent/AU2012332233B2/en not_active Ceased
- 2012-11-02 JP JP2014540150A patent/JP6322578B2/ja active Active
- 2012-11-02 SG SG11201401986WA patent/SG11201401986WA/en unknown
- 2012-11-02 MX MX2014005408A patent/MX2014005408A/es unknown
- 2012-11-02 WO PCT/US2012/063409 patent/WO2013067419A1/en active Application Filing
-
2014
- 2014-05-01 IL IL232414A patent/IL232414A0/en unknown
-
2017
- 2017-11-28 AU AU2017268522A patent/AU2017268522A1/en not_active Abandoned
-
2018
- 2018-04-09 JP JP2018074832A patent/JP6732830B2/ja active Active
Patent Citations (19)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH07284090A (ja) * | 1994-04-08 | 1995-10-27 | Olympus Optical Co Ltd | 画像分類装置 |
JPH0961359A (ja) * | 1995-08-29 | 1997-03-07 | Hamamatsu Photonics Kk | 濃度測定装置 |
JPH1176232A (ja) * | 1997-09-11 | 1999-03-23 | Hitachi Medical Corp | 超音波診断装置 |
JP2005536309A (ja) * | 2002-08-21 | 2005-12-02 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | 改善されたハーモニックイメージングのためのシステム及び方法 |
JP2005218684A (ja) * | 2004-02-06 | 2005-08-18 | Toshiba Corp | 非侵襲生体情報映像装置及び非侵襲生体情報映像方法 |
JP2009512500A (ja) * | 2005-10-20 | 2009-03-26 | スペクトロス コーポレイション | 体内腫瘍のスクリーニングのための超高特定性装置及び方法 |
JP2007267837A (ja) * | 2006-03-30 | 2007-10-18 | Toshiba Corp | 生体光計測装置 |
JP2010509977A (ja) * | 2006-11-21 | 2010-04-02 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | 解剖構造における組織の生体イメージングのためのシステム、装置、方法、コンピュータ読取可能媒体及び使用 |
JP2009082469A (ja) * | 2007-09-28 | 2009-04-23 | Toshiba Corp | 超音波診断装置及びプログラム |
JP2011519281A (ja) * | 2007-10-25 | 2011-07-07 | ワシントン・ユニバーシティ | 光学的方位分解能を備えた共焦点光音響顕微鏡検査 |
US20110201914A1 (en) * | 2008-10-23 | 2011-08-18 | Washington University In St. Louis | Reflection-Mode Photoacoustic Tomography Using A Flexibly-Supported Cantilever Beam |
JP2010125260A (ja) * | 2008-12-01 | 2010-06-10 | Canon Inc | 生体検査装置 |
JP2010136887A (ja) * | 2008-12-11 | 2010-06-24 | Canon Inc | 光音響イメージング装置および光音響イメージング方法 |
JP2010167167A (ja) * | 2009-01-26 | 2010-08-05 | Fujifilm Corp | 光超音波断層画像化装置および光超音波断層画像化方法 |
JP2010200926A (ja) * | 2009-03-03 | 2010-09-16 | Canon Inc | 超音波装置 |
WO2010127199A2 (en) * | 2009-05-01 | 2010-11-04 | Visualsonics Inc. | System for photoacoustic imaging and related methods |
JP2011083531A (ja) * | 2009-10-19 | 2011-04-28 | Canon Inc | 音響波測定装置、音響波画像化装置および音響波測定装置の制御方法 |
JP2011177496A (ja) * | 2010-02-04 | 2011-09-15 | Canon Inc | 機能情報取得装置、機能情報取得方法、及びプログラム |
JP2011193914A (ja) * | 2010-03-17 | 2011-10-06 | Canon Inc | 生体情報処理装置、生体情報処理方法および生体情報処理プログラム |
Also Published As
Publication number | Publication date |
---|---|
AU2012332233B2 (en) | 2017-08-31 |
CA2861089A1 (en) | 2013-05-10 |
JP6322578B2 (ja) | 2018-05-09 |
JP6732830B2 (ja) | 2020-07-29 |
AU2012332233A1 (en) | 2014-05-22 |
KR20140103932A (ko) | 2014-08-27 |
SG11201401986WA (en) | 2014-08-28 |
WO2013067419A1 (en) | 2013-05-10 |
KR102117132B1 (ko) | 2020-05-29 |
CA2861089C (en) | 2021-01-12 |
AU2017268522A1 (en) | 2017-12-14 |
MX2014005408A (es) | 2015-02-12 |
IL232414A0 (en) | 2014-06-30 |
JP2015501194A (ja) | 2015-01-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6732830B2 (ja) | 機能的および解剖学的同時表示マッピングのための二重モダリティ画像処理システム | |
US10709419B2 (en) | Dual modality imaging system for coregistered functional and anatomical mapping | |
US9757092B2 (en) | Method for dual modality optoacoustic imaging | |
US10433732B2 (en) | Optoacoustic imaging system having handheld probe utilizing optically reflective material | |
JP7279957B2 (ja) | 定量的撮像システムおよびその使用 | |
US6979292B2 (en) | Method and apparatus for forming an image that shows information about a subject | |
KR100686409B1 (ko) | 비침습적 생체정보 영상화 방법 및 장치 | |
JP5751769B2 (ja) | 画像情報取得装置及びその制御方法 | |
JP6132466B2 (ja) | 被検体情報取得装置及び被検体情報取得方法 | |
JP2017047177A (ja) | 被検体情報取得装置および被検体情報取得装置の制御方法 | |
JP2017029610A (ja) | 光音響装置、信頼度取得方法、プログラム | |
JP6486056B2 (ja) | 光音響装置および光音響装置の処理方法 | |
JP5882687B2 (ja) | 音響波取得装置 | |
EP2773267B1 (en) | Dual modality imaging system for coregistered functional and anatomical mapping | |
RU2787527C2 (ru) | Система количественного формирования изображений и ее применение | |
JP2019136520A (ja) | 処理装置、光音響画像の表示方法、及びプログラム | |
Reyman et al. | Two-dimensional optoacoustic tomography of large-scale phantoms | |
JP2017124264A (ja) | 処理装置、被検体情報取得装置、光音響画像の表示方法、及びプログラム | |
JP2017131334A (ja) | 被検体情報取得装置および被検体情報取得方法 | |
JP2015186576A (ja) | 画像情報取得装置及び画像情報取得方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180416 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20180416 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20190125 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20190305 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190524 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20191101 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200121 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200609 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200708 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6732830 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |