JP2018504943A - 医療用x線画像における信号補償のための装置および方法 - Google Patents

医療用x線画像における信号補償のための装置および方法 Download PDF

Info

Publication number
JP2018504943A
JP2018504943A JP2017529056A JP2017529056A JP2018504943A JP 2018504943 A JP2018504943 A JP 2018504943A JP 2017529056 A JP2017529056 A JP 2017529056A JP 2017529056 A JP2017529056 A JP 2017529056A JP 2018504943 A JP2018504943 A JP 2018504943A
Authority
JP
Japan
Prior art keywords
ray
image
exposure
scaling
ghost
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2017529056A
Other languages
English (en)
Other versions
JP6779207B2 (ja
Inventor
メントループ,デトレフ
マーク,ハンス−インゴ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Koninklijke Philips NV
Original Assignee
Koninklijke Philips NV
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Koninklijke Philips NV filed Critical Koninklijke Philips NV
Publication of JP2018504943A publication Critical patent/JP2018504943A/ja
Application granted granted Critical
Publication of JP6779207B2 publication Critical patent/JP6779207B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/52Devices using data or image processing specially adapted for radiation diagnosis
    • A61B6/5258Devices using data or image processing specially adapted for radiation diagnosis involving detection or reduction of artifacts or noise
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/60Noise processing, e.g. detecting, correcting, reducing or removing noise
    • H04N25/62Detection or reduction of noise due to excess charges produced by the exposure, e.g. smear, blooming, ghost image, crosstalk or leakage between pixels
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/30Transforming light or analogous information into electric information
    • H04N5/32Transforming X-rays

Landscapes

  • Engineering & Computer Science (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Pathology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • High Energy & Nuclear Physics (AREA)
  • Physics & Mathematics (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Optics & Photonics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Radiology & Medical Imaging (AREA)
  • Biomedical Technology (AREA)
  • Biophysics (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • General Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Apparatus For Radiation Diagnosis (AREA)
  • Measurement Of Radiation (AREA)

Abstract

本発明は、医療用X線画像における信号補償のための装置(100)に関する。装置100は、複数のX線露光の最後のX線露光の後のX線検出器読み出しに基づき、X線ゴースト画像を生成するように較正された生成モジュール(10)と、X線ゴースト画像をスケーリングして、スケーリングされたX線ゴースト画像にするスケーリングモジュール(20)と、複数のX線露光の後のそれぞれのX線露光の間に記録されたX線画像から、スケーリングされたX線ゴースト画像を減算するように構成された減算モジュール(30)とを有する。

Description

本発明は、フラットパネルX線検出器によって生じる信号の医療用X線画像における補償に関する。特に、本発明は、そのような信号補償のための装置および方法に関する。
特許文献1には、X線画像と暗い画像とを別々に提供する暗い画像を用いて画像の遅れを補償する、X線検出器およびX線検出器を制御する方法が記載されている。イメージ・遅延補償の精度を高めることにより、X線走査の待機時間を短縮することができる。
特許文献2は、X線画像におけるゴースト画像アーティファクトを抑制する方法を記載している。時系列的には、入射X線放射に応答して可視画像を生成するため、少なくとも1つの固体検出器を介在させて、1つ以上の対象物の複数のX線画像が生成される。生成された各X線画像から、以前に確認された補正画像が電子的に差し引かれる。
特許文献3は、シンチレーションスクリーンおよび電荷結合素子(CCD)が選択された組織を画像化するために使用される身体組織のX線透視イメージングのためのシステムを記載する。X線源は、被検体の領域を通過するX線を発生し、シンチレーションスクリーンに到達するX線画像を形成する。
特許文献4は、複数の暗画像を使用する画像ステッチング手順中のゴースト画像アーティファクトを抑制するように構成された放射線撮影システムを開示している。
特許文献5は、複数のダーク画像を用いるゴースト画像アーティファクトを抑制する方法を開示している。
フラットパネル検出器を用いて放射線イメージングを行う場合、高いX線線量とX線露光間の短い時間は、メモリアーティファクト(「遅延(lag)」または「ゴースト(ghosting)」)の可視性をもたらすことがある。既知のオフセット補正方法の性能が貧弱だからである。残差信号の視認性、すなわち高線量X線露光後のゴーストは、フラットパネルX線検出器の周知の問題である。従来の方法は、X線曝露後にX線検出器読み出しによって得られたオフセット画像を患者の画像から差し引くことによってゴーストを補償することを示唆している。
US2012/0138808A1 US7,277,568B2 US6,895,077B2 米国特許出願公開第2010/0006767A1号 米国特許出願公開第2007/0291900A1号
フラットパネルX線検出器によって生じる信号の医療用X線またはラジオグラフィック画像における補償を改善する必要があり得る。
これらの必要性は独立項に記載した主題により満たすことができる。さらに別の実施形態は従属項と以下の説明から明らかになる。
本発明の一態様は、医療用X線画像における信号補償のための装置に関する。この装置は、複数のX線露光の最後のX線露光の後のX線検出器読み出しに基づき、X線ゴースト画像を生成するように較正された生成モジュールと、X線ゴースト画像をスケーリングして、スケーリングされたX線ゴースト画像にするスケーリングモジュールと、複数のX線露光の後のそれぞれのX線露光の間に記録されたX線画像から、スケーリングされたX線ゴースト画像を減算するように構成された減算モジュールとを有する。
本発明で使用される「後続のX線露光」という用語は、最初のX線露光の後に行われる複数のX線露光のうち、前記複数のX線露光のうち最後のX線露光を含み、それまでのX線露光を指す。
本発明で使用される「後続のX線画像」という用語は、最初のX線画像の後に記録される複数のX線画像のうち、前記複数のX線画像のうちの最後のX線画像を含み(含むが越えない)、それまでのX線画像を指す。
本発明によって使用される「X線ゴースト画像(X−ray ghosting image)」という用語は、最初の(または、より一般的にはそれ以前の)X線画像の任意の複製であって、画像センサメモリ効果によって第2の(またはより一般的には後続の)X線画像の上にスーパーインポーズされた複製を指す。例えば、半導体画像センサ上に落ちる高輝度レベルのX線画像の電気的痕跡(electrical signatures)は、その後に取得された画像のその後に読み出される電気的痕跡に埋め込まれたまま残り得る。イメージセンサに残っている以前に感知されたイメージの電気的な痕跡は、「ゴーストアーティファクト」または「ゴースト画像」またはメモリ効果と呼ばれることがある。
本発明によって使用される「X線ゴースト画像のスケーリング」という用語は、信号または画像データの形態のX線ゴースト画像の、1つまたは複数のファクターによるスケーリングを指してもよい。そのようなファクターは、X線検出器の前および後の読出し間の時間間隔に依存してもよく、または連続するX線露光の時点によって確立された時間間隔に依存してもよい。あるいは、ファクターは、画像分散の最小化の基準、または両方の任意の組み合わせを使用することによって決定されてもよい。
本発明は、残差信号の時間依存減衰に依存して補償を行うことを有利に提案する。本発明は、有利にも、オフセット画像よりもむしろX線ゴースト画像を生成し、ゴースト画像をスケーリングし、スケーリングされたX線ゴースト画像を患者の画像から差し引くことを提案する。本発明は、結果的に、有利にも、(i)露光画像のX線検出器読み出し時のオフセット値又は遅延値と、(ii)暗画像またはオフセット画像のX線検出器読み出し時のオフセット値又は遅延値との間の不一致を回避する。
本発明のさらに別の実施形態を従属項に記載した。本装置の例示的な一実施形態では、生成モジュールは、さらに、複数のX線露光の最初のX線露光の前のX線検出器読み出しに基づき、X線ゴースト画像を生成するように構成される。この実施形態により、有利にも、X線露光後に行われた検出器読み出しから、X線露光前に行われた検出器読み出しを差し引くことによって、そのようなX線ゴースト画像が得られる。この減算は、露光後の読み出しが行われる時点における残差信号を正確に生じる。
本装置の別の例示的な一実施形態では、減算モジュールはさらに、前記最初のX線露光中に記録された最初のX線画像から、および/またはその後の任意のX線画像から、前記最初のX線露光の前のX線検出器読み出しを減算するように構成される。この実施形態は、有利にも、そのような最初のX線画像および任意のそのような後続のX線画像が、X線ゴースト画像と同様のオフセットに対して補正されることを可能にする。
本発明の別の例示的な一実施形態は、X線ゴースト画像に適用されて、アーティファクトを最適に、特に連続するX線画像の記録間の時間に関して除去する手順を示唆する。アーティファクトは測定され、最適にスケーリングされ、その結果得られる画像はアーティファクトの最小残差(minimum residual)を含む。
本装置の別の例示的な一実施形態では、前記スケーリングモジュールは、(i)前記最後のX線露光及び前記最初のX線露光の後のX線検出器読み出しと、(ii)前記最初のX線露光及び任意の後続のX線露光との間の時間に基づくスケーリングを使用するように構成される。例えば、実際の時間は、5秒までの時間、30秒までの時間、または120秒までの時間であってもよい。これにより、有利にも、画像取得の個々のタイミングに依存して、アーティファクト補正を最適に適合させることができる。
本装置の別の例示的な一実施形態では、前記スケーリングモジュールは、(i)前記最後のX線露光及び前記最初のX線露光の後のX線検出器読み出しと、(ii)前記最初のX線露光及び第2のX線露光との間の時間に基づくスケーリングを使用するように構成される。
本装置の別の例示的な一実施形態では、前記スケーリングモジュールは、少なくとも1つの(すなわち、一以上の)後続のX線画像の計算された画像分散の最小化に基づくスケーリングを使用して、X線ゴースト画像をスケーリングするように構成される。ここで、用語「画像分散」は、例えば特定の位置または特定の画素を囲む画素の正方形の配列内の、隣接する画素内の分散を指してもよい。これにより、有利にも、患者のX線画像上のアーティファクトおよび信号の遅れ(lags)を低減するための安全で信頼性の高い方法が可能になる。
本発明のさらなる例示的な実施形態では、スケーリングモジュールは、後続の各X線画像に異なるスケーリングを使用して、X線ゴースト画像をスケーリングするように構成される。この実施形態は、有利にも、後続の各X線画像に対して調整されたスケーリングを可能にする。
本発明のさらなる例示的な実施形態では、このようなX線ゴースト画像は、後続の画像においてメモリ効果を引き起こす高線量の領域を、先行画像において検出することによって得られる。この検出は、例えば、先行画像の画素値を閾値処理することによって実行されてもよい。本発明は、フラットパネルX線検出器を用いたラジオグラフィック画像の記録または取得中に有利に使用され、高線量が使用され、例えば5秒未満、30秒未満または120秒未満の短い時間が、2つの画像のX線露光間に与えられる。X線露光により、遅延(lag)とも呼ばれるメモリアーティファクトの視認性が生じる。既知のオフセット補正方法ではこれらのアーティファクトを減ずることができないからである。
遅延信号が時間とともに急速に減衰するため、露光画像の読み出し時のオフセット値と、最後のX線露光に続くX線検出器読み出し時のオフセット値との間に不一致がある。遅延信号の減衰は、5秒または30秒または120秒の時間スケールであってもよいし、同等の大きさのオーダーであってもよい。減衰は、指数減衰関数、双曲線減衰関数、または多項式関数によって記述することができる。遅延信号は、時間に反比例するかまたは準逆比例(quasi−inversely proportional)する。
本発明の一実施形態によると、減算モジュールは、可動フラットパネルX線検出器で引き続き取得される任意の後続のX線画像から、スケーリングされたX線ゴースト画像を減算するように構成される。
本発明の一実施形態によると、減算モジュールは、少なくとも1つのスケーリングファクタを使用することによって、任意の後続のX線画像から、スケーリングされたX線ゴースト画像を減算するように構成される。
本発明の別の第2の態様によると、フラットパネルX線検出器と、最初の態様による装置、または本発明の最初の態様の任意の実装形態による装置とを備える医療用イメージングシステムが提供される。
本発明の一実施形態によると、フラットパネルX線検出器は可動フラットパネルX線検出器である。
本発明の一実施形態によると、医療用イメージングシステムは、重なり合う視野を有する複数の画像を組み合わせて画像ステッチングを行い、結合画像を生成するように構成される。
本発明の別の第3の態様によると、医療用X線画像を信号補償する方法が提供される。該方法は、生成モジュールが、複数のX線露光の最後のX線露光の後のX線検出器読み出しに基づき、X線ゴースト画像を生成するステップと、スケーリングモジュールが、X線ゴースト画像をスケーリングして、スケーリングされたX線ゴースト画像にするステップと、減算モジュールが、複数のX線露光のその後のそれぞれのX線露光中に記録された任意のX線画像から、スケーリングされたX線ゴースト画像を減算するステップとを含む。
本発明のさらに別の実施形態を従属項に記載した。
本装置の別の例示的な一実施形態では、生成するステップは、さらに、複数のX線露光の最初のX線露光の前のX線検出器読み出しに基づき、X線ゴースト画像を生成するように構成される。
本発明のさらなる例示的な実施形態は、さらに、減算モジュールが、前記最初のX線露光中に記録された最初のX線画像から、および/またはその後の任意のX線画像から、前記最初のX線露光の前のX線検出器読み出しを減算するステップを含む。
本装置の別の例示的な一実施形態では、スケーリングするステップは、少なくとも1つの(すなわち一以上の)後続のX線画像の、計算された画像分散の最小化に基づくスケーリングを使用して実行される。
本発明の方法を実行するコンピュータプログラムは、コンピュータ可読媒体に格納することができる。コンピュータ読み取り可能媒体は、フロッピーディスク、ハードディスク、CD、DVD、USB(Universal Serial Bus)記憶デバイス、RAM(Random Access Memory)、ROM(Read Only Memory)、EPROM(Erasable Programmable Read Only Memory)であり得る。コンピュータ可読媒体は、プログラムコードをダウンロードすることを可能にするデータ通信ネットワーク、例えばインターネットであってもよい。
本明細書で説明される方法、システムおよびデバイスは、デジタル信号プロセッサ、DSP、マイクロコントローラ、または他の任意のサイドプロセッサ内のソフトウェアとして、または特定用途向け集積回路(ASIC)内のハードウェア回路として実装されてもよい。
本発明は、デジタル電子回路において、またはコンピュータハードウェア、ファームウェア、ソフトウェア、またはそれらの組み合わせにおいて、例えば、医療機器の利用可能なハードウェアにおいて、または本明細書に記載の方法を処理するため専用の新しいハードウェアにおいて、実装することができる。
本発明およびその利点のより完全な理解は、縮尺通りではない以下の概略図を参照することによってより明確に理解されるであろう。
本発明を説明する、臨床的にステッチングされた側方脊椎X線露光における遅延視認性を示す概略図である。 ステッチングされたX線画像を示し、その最初のものは現状維持法で記録され、第2のものは本発明による方法で記録されている。 本発明の例示的な実施形態による信号補償装置を示す概略図である。 本発明の例示的な実施形態による医療用イメージングシステムを示す概略図である。 本発明のさらに別の例示的な実施形態による信号補償方法を示す概略的なフローチャートである。 本発明を説明する、画像が記録される時点を示すタイミング図である。 本発明の例示的な実施形態による画像処理プロセスを示す概略的なフローチャートである。 本発明の例示的な他の実施形態による画像処理プロセスを示す概略的なフローチャートである。 本発明の例示的な実施形態による、画像分散(image variance)対スケーリングファクタを示す概略図である。 本発明を説明する、高線量被曝によって生じる遅延信号の時間的減衰を示すグラフである。
図面の図は、単に模式的なものであり、スケーリング関係またはサイズ情報を提供するものではない。別の図面においても、同様または同一の要素には同じ参照数字を付した。一般に、同一の部分、ユニット、実体(enntities)またはステップは、明細書中に同じ参照符号を付してある。
図1は、本発明を説明する、臨床的にステッチングされた側方脊椎X線曝露における遅延視認性を示す2つの概略図である。図1は臨床例を示す。図1の右の画像の上部には、以下に示すようなアーティファクトにつながる体の輪郭があり、アーティファクトは画像のステッチング(stitching)が行われるために生じる。図1の左の画像に示すように、画像の記録により上部の高X線線量の直接放射に曝された領域は、X線画像の下部の画像部分ISにアーティファクトAFをもたらす。この下側部分は続いて記録されるものである。すなわち、肩の輪郭は、図1の右の画像により強調して示すように、X線ゴースト画像またはアーティファクトAFとして画像の腹部に現れる。
図2は、本発明を説明する異なる方法で記録されたステッチングされたX線画像を示す。図2は、ステッチングされたX線画像に対する本発明の効果を示す。図2の左側の画像は、医療用画像システムの現状を示している。最初の画像には、鮮明な線量遷移が存在し、第2の画像の画像部分IS内にゴーストアーティファクトAFが生じる。アーティファクトAFは、位置マーカPMによって引き起こされる鮮明なコントラスト変化によるものである。図2の右側の画像は、左側の画像と同じシーンを示しているが、本発明によって提供されるようなスケーリングされたゴースト補正を使用して補正され、縮小または消失したアーティファクトを示す。
図3は、本発明の例示的な実施形態による信号補償装置を示す概略図である。信号補償のための装置100は、生成モジュール10、スケーリングモジュール20、および減算モジュール30を備えることができる。生成モジュール10は、X線露光の前の検出器読み出しに基づいて、および/またはX線露光の後の検出器読み出しに基づいて、X線ゴースト画像(X−ray ghosting image)を生成するように構成されてもよい。スケーリングモジュール20は、X線ゴースト画像を、スケーリングされたゴースト画像にスケーリングするように構成されてもよい。減算モジュール30は、X線露光の間に記録された患者のX線画像から、スケーリングされたX線ゴースト画像を減算するように構成されてもよい。
図4は、本発明の例示的な一実施形態による医療用イメージングシステムを示す概略図である。医療用イメージングシステム200は、フラットパネルX線検出器150と、信号補償のための装置100とを備えることができる。医療用イメージングシステム200は、デジタルラジオグラフィシステムであってもよい。デジタルラジオグラフィは、フラットパネルX線検出器とも呼ばれるデジタルX線検出器を使用する。医療用イメージングシステム200のデジタルX線検出器は、約100μGyより大きく被曝した領域に有意な遅延信号を典型的に示すことができ、このレベルの被曝はステッチング露光で頻繁に生じる。
本発明は、有利にも、中程度及びローエンド検出器のハードウェアが可能な限り単純に保たれ、これは、遅れを低減するハードウェア装置が省略されることを意味する。したがって、本発明は、遅延視認性(lag visibility)を低減するために、強力な画像処理アルゴリズムを有利に適用する。ここで提案される遅延信号のスケーリングは、大幅な改善につながる。
図5は、本発明のさらに別の例示的な一実施形態による信号補償方法を示す概略的なフローチャートである。この方法の最初のステップとして、モジュール10により、X線露光の前の検出器読み出しに基づいて、および/またはX線露光の後の検出器読み出しに基づいて、X線ゴースト画像を生成するステップS1が実行される。この方法の第2のステップとして、スケーリングモジュール20によって、X線ゴースト画像をスケーリングして、スケーリングされたX線ゴースト画像にするステップS2が実行されてもよい。この方法の第3のステップとして、減算モジュール30によって、患者の、記録されたX線画像からスケール化されたX線ゴースト画像を差し引くステップS3が実行されてもよい。
信号補償の方法は、アーティファクトの境界領域における画像の分散を最小にすることによってゴーストアーティファクトを補正することを可能にする。アーティファクトは画像内の追加的構造であるため、アーティファクトが消えれば、画像の分散は最小になる。これは、検出器の材料特性の較正をせずに、前の直接放射領域のコントラストの最適な最小化を保証する。
図6は、3つの連続するX線画像に対する次の時点を示すタイミング図を示す。ここで、tは、X線露光前に検出器読み出しが記録された時点を示し、tは、最初のX線露光(遅延アーティファクトを引き起こす高線量画像)が記録されて第1のgX線画像を生成する時点を指し、tは、(遅延アーティファクトを含む)第2のX線画像を生成するために第2のX線露光が記録される時点を指し、tは、第3のX線露光が記録されて(遅延アーティファクトを含むが、一般的にはそれよりも小さい)第3のX線画像が生成される時点を指し、tは、(安定した)オフセット基準信号(X線検出器によるもの)及び減衰された遅延アーティファクトを含む、X線露光の後の検出器読み出しが記録される時点を指す。この例示的な実施形態のX線露光は、当業者にそれ自体公知のX線源を使用して生成することができる。第1、第2及び第3のX線露光は、それぞれ第1、第2及び第3のステッチング(stitching)X線露光であってもよい。結果として、第1、第2及び第3のX線画像は、それぞれ第1、第2及び第3のステッチングX線画像であってもよく、ステッチングされて、重なり合う視野に基づいて結合(joined)されてもよい。図6では、t<t<t<t<tである。
例示的な実施形態によれば、図6を参照すると、第2の(ステッチング)X線画像に関するスケーリング係数は、
Figure 2018504943
のように計算されてもよい。ここで、λ(λ>0)は、測定によって決定可能なX線検出器のモデル特有のパラメータである。同様に、第3の(ステッチング)X線画像に関するスケーリング係数は、
Figure 2018504943
のように計算されてもよい。
図7は、本発明の例示的な実施形態による画像処理のための方法を示す概略的なフローチャートであり、この方法は、本発明の例示的な実施形態によるデバイスによる実行が可能である。
図7の例示的な実施形態は、ステッチングアプリケーションにおいて非常に効果的な適用を可能にする。本発明の例示的な実施形態は、部分的に重なり合う視野を有する同一の患者からの2つの連続するX線画像のステッチングに関する。この2つのX線画像は、可動フラットパネルX線検出器(「FPD」)で続けて取得される。2つのX線画像は、画像処理によって、結合されたX線画像に「ステッチング(stitched together)」、可動FPDの寸法を超える身体部分の描写(depiction)を可能にする。注目すべき例は、結合されたX線画像内に背骨全体を描写することにある。
本発明の例示的な実施形態によれば、第1および第2のステッチングX線露光は、患者の動きの影響を最小限に抑えるために、露光間を最短時間として実行する必要がある。第1のステッチングX線露光は、第2のステッチングX線露光によって生成された第2のステッチングX線画像において画像のずれを生じる。この画像のずれは、既知のすべての方法によってうまく補正されない。
あるいは、図7に示される例示的な実施形態は、ステッチング以外の用途においても同様に効果的な使用を可能にする。したがって、図7に示す実施形態の以下の説明では、「(ステッチング)」の各出現は、ステッチングアプリケーションの任意的な使用を示す。
この例示的な実施形態のX線露光は、当業者にそれ自体公知のX線源を使用して生成することができる。図7を参照すると、この例では、ステップS002において、t=tにおいて、遅延のないオフセット画像を取得するために、X線露光前のX線検出器の読み取り値が記録される。これは、後の時点で記録された遅延信号(lag signal)を、乱れのないオフセット信号(undisturbed offset signal)から分離する働きをする。一般的には、X線イメージングシステムの始動段階は、ステップS002を実行することを可能にする。この例では、ステップS004およびS006において、第1および第2の(ステッチング)X線露光に応じて、それぞれt=tおよびt=tで、第1および第2の(ステッチング)X線画像が取得される。
この例では、ステップS008において、t=tにおいて、第2の(ステッチング)X線露光に続いて、X線検出器読み出し(オフセット基準信号および減衰された遅延アーティファクトを含むもの)が記録される。ここで、t<t<t<tである。
この例では、ステップS4において、ステップS002において取得された検出器読み出しを、第2の(ステッチング)X線画像から減算することによって、オフセット補正された第2の(ステッチング)X線画像が生成される。
ステップS1は、生成モジュール10によって実行され得るが、X線ゴースト画像を生成するステップを含む。この例では、その目的のため、ステップS1は、ステップS002において取得されたX線検出器読み出しから、ステップS008において取得されたX線検出器読み出しを減算するステップS102を含む。言い換えれば、ステップS102において、遅延アーティファクト(lag artifact)がオフセット補正されている。
ステップS2において、これはスケーリングモジュール20によって実行され得るが、スケーリングされたX線ゴースト画像が生成される。この例では、その目的のため、ステップS2は、ステップS1で生成されたX線ゴースト画像にスケーリング(scaling)を乗算するステップS202を含む。任意的に、ステップS202は最適スケーリングを決定することを含む。例えば、ステップS202は、(i)N通りのスケーリングf、...、fの範囲に対して、補正後の第2の(ステッチング)X線画像についてそれぞれ得られる分散を計算すること、及び(ii)続いて、上記の分散が最小になるようにスケーリングファクタfを選択することを含む。撮像時間t、t、及びtから最適なスケーリングの近似値を算出してもよい。遅れ信号の典型的な時間的減衰は、検出器の較正(qualification)の間に測定されるからである。例えば、N個のスケーリングファクタf、...、fの範囲は、式1を用いて導き出すことができる。
ステップS3において、これは減算モジュール30によって実行され得るが、ステップS4で得られたオフセット補正された第2の(ステッチング)X線画像から、ステップS2で生成されたスケーリングされたX線ゴースト画像(ステップS202において画像が最適にスケーリングされてもよい)を減算することにより、第2の(ステッチング)X線画像中のゴーストを減少させる。ステップS3の結果は、X線検出器オフセットおよび遅延信号に対して補正された第2の(ステッチング)X線画像であり、この画像は、その後、第1の(ステッチング)X線画像とステッチングされ、結合されたX線画像にされてもよい。
図8は、本発明の例示的な実施形態による画像処理のための方法を示す概略的なフローチャートであり、この方法は、本発明の例示的な実施形態によるデバイスによる実行が可能である。
図8の例示的な実施形態は、ステッチングアプリケーションにおいて非常に効果的な適用を可能にする。あるいは、図8に示される例示的な実施形態は、ステッチング以外の用途においても同様に効果的な使用を可能にする。したがって、図8に示す実施形態の以下の説明では、「(ステッチング)」の各出現は、ステッチングアプリケーションの任意的な使用を示す。この例示的な実施形態のX線露光は、当業者にそれ自体公知のX線源を使用して生成することができる。図4に示す例示的な実施形態に加えて、この例示的な実施形態は、ステップS007を含む。ステップS007では、t=tでの第3の(ステッチング)X線露光に応じて、第3の(ステッチング)X線画像が取得される。ここで、t<t<t<t<tである。さらに、図5に示される実施形態では、ステップS4は、ステップS002の間に取得された検出器読み出し値を第3の(ステッチング)X線画像から減算することによって、オフセット補正された第3の(ステッチング)X線画像を取得することを含む。
ステップS2において、これはスケーリングモジュール20によって実行され得るが、スケーリングされたX線ゴースト画像が生成される。その目的のため、ステップS2は、ステップS1で生成されたX線ゴースト画像にスケーリング(scaling)を乗算するステップS202を含む。任意的に、ステップS202は最適スケーリングを決定することを含む。例えば、ステップS202は、(i)N通りのスケーリングファクタf、...、fの範囲に対して、補正後にそれぞれ第2および第3の(ステッチング)X線画像で得られる分散を計算すること、及びそれに続いて(ii)(a)第2の(ステッチング)X線画像の分散が最小になるようにスケーリングファクタfを選択し、(b)第3の(ステッチング)X線画像の分散が最小になるように、スケーリングファクタfを選択することを含む。ここでは、一般に、f≠fである。より具体的には、遅れ信号は時間と共に減衰するので、一般的にはf>fである。撮像時間t、t、及びtから最適なスケーリングfの近似値を算出してもよい。遅れ信号の典型的な時間的減衰は、検出器の較正(qualification)の間に測定されるからである。同様に、最適スケーリングfの近似値は、取得時間t、t及びtから計算されてもよい。例えば、N個のスケーリングファクタf、...、fの範囲は、式1と式2を用いて導き出すことができる。
減算モジュール30によって実行され得るステップS3において、第2と第3の(ステッチング)X線画像のゴーストが低減される。ステップS4で得られたオフセット補正された第2の(ステッチング)X線画像から、ステップS2で生成されたスケーリングされたX線ゴースト画像(これは、ステップS202において第2の(ステッチング)X線画像に対して任意的にスケーリングされてもよい)を減じることによって、第2の(ステッチング)X線画像におけるゴーストが削減される。同様に、ステップS4で得られたオフセット補正された第3の(ステッチング)X線画像から、ステップS2で生成されたスケーリングされたX線ゴースト画像(これは、ステップS202において第2の(ステッチング)X線画像に対して任意的にスケーリングされてもよい)を減じることによって、第3の(ステッチング)X線画像におけるゴーストが削減される。
ステップS3の結果は、第2および第3の(ステッチング)X線画像であり、両方ともX線検出器のオフセットおよび遅延信号について(任意的に最適に)補正される。これらの画像は、続いて、第1の(ステッチング)X線画像とステッチング(stitched)されて、結合したX線画像になってもよい。図8に示された例示的な実施形態は、3つより多いX線画像をカバー(ステッチング)するように拡張されてもよい。
図9は、本発明の例示的な一実施形態によるスケーリングの関数として画像分散の表示を示す概略図である。水平軸上に示すように、N個のスケーリングファクタf、...、fの異なる値に対して、画像の分散が計算され、垂直軸に沿って表示される。最適なスケーリング係数は画像の分散を最小限に抑える。
図10は、高線量X線露光によって生じる遅延信号の、時間tによる減衰を概略的に示す。ここで、y軸は、信号S(t)の強度、すなわちメモリ信号を示す。ここで、「LSB」は「最下位ビット」の略である。x軸は、時間tを表すために使用される。図10において、データポイントは、ダーク画像またはX線露光に応じて、画像読み出しに接続される。時間的に最も早く生じるデータポイントは、t=t、すなわち第2のX線露光(X−ray exposure)の時間である。
図6に示すタイミング図を参照すると、本発明の例示的な実施形態によれば、遅れ(またはゴースト)信号の時間依存の減衰は、
Figure 2018504943
によってモデル化することができる。ここで、S(t)は、ある時刻t>tにおける画像読み出し(暗画像またはX線露光に応じたもののいずれか)に存在するある時点tにおける遅れ信号を示す。指数λは、所与のX線検出器に固有のモデルパラメータであり、これは以前の測定によって決定される必要があるかもしれない。このモデルを使用して、最後のX線露光に続く検出器の読出しに存在する遅延信号を使用して、
Figure 2018504943
のように、第2のX線画像に存在する遅延信号を逆外挿(back−extrapolate)することが可能である。
第2のX線画像からのこの後方外挿された遅延信号の減算により、遅延信号のずっと良好な補正をすることができる。このような改良された補正は、非常に短いサイクル時間でのラジオグラフィイメージングに不可欠であり得る。X線露光の後の検出器読み出しから、X線露光の前の検出器読み出しを減算することにより、遅れS(t=t)のみを含む画像(より具体的には暗画像)を決定することができる。その後、式4を用いて、例えば、第2の(ステッチング)X線露光に応じて読み出されたX線画像に存在する遅延画像S2を、S(t=t)から後方外挿(back−extrapolate)してもよい。
同様に、このモデルを使用して、
Figure 2018504943
により、第3のX線画像に存在する遅延信号を後方外挿することが可能である。
留意すべき点として、本発明の実施形態を、異なる主題を参照して説明する。具体的に、一部の実施形態を方法の請求項を参照して説明し、他の一部の実施形態を装置の請求項を参照して説明する。
しかし、本技術分野の当業者は、上記の説明から、特に断らないかぎり、一種類の主題に属する特徴の任意の組み合わせに加えて、異なる複数の主題に関係する特徴の間の任意の組み合わせも本出願で開示されていると考えられることが分かるであろう。しかし、すべての特徴は組み合わせて、特徴の単なる和以上のシナジー効果を提供することができる。
本発明を、図面と上記の説明に詳しく示し説明したが、かかる例示と説明は例であり限定ではなく、本発明は開示した実施形態には限定されない。示されているように、本発明は、特に、ステッチング手順において成功裡に適用することを可能にするが、後続のX線画像が互いにステッチングされない手順において成功裡に適用することを可能にする。請求項に記載した発明を実施する際、図面、本開示、及び添付した特許請求の範囲を研究して、開示した実施形態のその他のバリエーションを、当業者は理解して実施することができるであろう。
請求項において、「有する(comprising)」という用語は他の要素やステップを排除するものではなく、「1つの(”a” or ”an”)」という表現は複数ある場合を排除するものではない。単一のプロセッサ又はコントローラ又はその他のアイテムが請求項に記載した複数のユニットの機能を満たすこともできる。相異なる従属クレームに手段が記載されているからといって、その手段を組み合わせて有利に使用することができないということではない。請求項に含まれる参照符号は、その請求項の範囲を限定するものと解してはならない。
本発明の一態様は、医療用X線画像における信号補償のための装置に関する。この装置は、複数のX線露光の最後のX線露光の後のX線検出器読み出しに基づき、X線ゴースト画像を生成するように較正された生成モジュールと、ゴースト画像の時間依存の減衰に応じてスケーリングすることによって、その後の各X線画像に対して異なるスケーリングを用いて、X線ゴースト画像をスケーリングして、スケーリングされたX線ゴースト画像にするスケーリングモジュールと、複数のX線露光の後のそれぞれのX線露光の間に記録された対応する後続の各X線画像から、そのようにスケーリングされたX線ゴースト画像の各々を減算するように構成された減算モジュールとを有する。
本発明によれば、スケーリングモジュールは、後続の各X線画像に異なるスケーリングを使用して、X線ゴースト画像をスケーリングするように構成される。これは、有利にも、後続の各X線画像に対して調整されたスケーリングを可能にする。
本発明の別の第3の態様によると、医療用X線画像を信号補償する方法が提供される。該方法は、生成モジュールが、複数のX線露光の最後のX線露光の後のX線検出器読み出しに基づき、X線ゴースト画像を生成するステップと、スケーリングモジュールが、X線ゴースト画像をスケーリングして、スケーリングされたX線ゴースト画像にし、前記ゴースト画像の時間依存の減衰に応じてスケーリングをすることにより後続の各X線画像に対して異なるスケーリングを使用するステップと、減算モジュールが、複数のX線露光のその後のそれぞれのX線露光中に記録された対応するX線画像の各々から、そのようにスケーリングされたX線ゴースト画像の各々を減算するステップとを含む。

Claims (14)

  1. 医療用X線画像における信号補償をする装置であって、
    複数のX線露光の最後のX線露光の後のX線検出器読み出しに基づき、X線ゴースト画像を生成するように構成された生成モジュールと、
    その後の各X線画像に対して異なるスケーリングを用いて、X線ゴースト画像をスケーリングして、スケーリングされたX線ゴースト画像にするように構成されたスケーリングモジュールと、
    複数のX線露光の後のそれぞれのX線露光の間に記録されたX線画像から、スケーリングされたX線ゴースト画像を減算するように構成された減算モジュールとを有する装置。
  2. 生成モジュールは、さらに、複数のX線露光の最初のX線露光の前のX線検出器読み出しに基づき、X線ゴースト画像を生成するように構成される、
    請求項1に記載の装置。
  3. 減算モジュールはさらに、最初のX線露光中に記録された最初のX線画像から、および/またはその後の任意のX線画像から、前記最初のX線露光の前のX線検出器読み出しを減算するように構成された、請求項1に記載の装置。
  4. 前記スケーリングモジュールは、(i)前記最後のX線露光と、最初のX線露光の後のX線検出器読み出しの間の時間に比例し、前記最初のX線露光と、その後の任意のX線露光との間の時間に反比例するスケーリングを使用するように構成される、
    請求項1ないし3いずれか一項に記載の装置。
  5. 前記スケーリングモジュールは、(i)前記最後のX線露光及び最初のX線露光の後のX線検出器読み出しと、(ii)前記最初のX線露光及び第2のX線露光との間の時間に基づくスケーリングを使用するように構成される、
    請求項1ないし4いずれか一項に記載の装置。
  6. 前記スケーリングモジュールは、少なくとも1つの後続のX線画像の計算された画像分散の最小化に基づくスケーリングを使用して、X線ゴースト画像をスケーリングするように構成される、請求項1ないし5いずれか一項に記載の装置。
  7. フラットパネルX線検出器と、
    請求項1ないし6いずれか一項に記載の装置とを有する、
    医療用イメージングシステム。
  8. 部分的に重なり合う視野を有する複数のX線画像を合成して、画像ステッチングを行い、結合されたX線画像を生成するように構成される、
    請求項7に記載の医療用イメージングシステム。
  9. 医療用X線画像を信号補償する方法であって、
    生成モジュールが、複数のX線露光の最後のX線露光の後のX線検出器読み出しに基づき、X線ゴースト画像を生成するステップ(S1)と、
    スケーリングモジュールが、X線ゴースト画像をスケーリングして、スケーリングされたX線ゴースト画像にするステップ(S2)と、
    減算モジュールが、複数のX線露光のその後のそれぞれのX線露光中に記録された任意のX線画像から、スケーリングされたX線ゴースト画像を減算するステップ(S3)とを含む、
    方法。
  10. ステップS1は、さらに、複数のX線露光の最初のX線露光の前のX線検出器読み出しに基づき、X線ゴースト画像を生成するように構成される、
    請求項9に記載の方法。
  11. 減算モジュールが、最初のX線露光中に記録された最初のX線画像から、および/またはその後の任意のX線画像から、前記最初のX線露光の前のX線検出器読み出しを減算するステップ(S4)をさらに含む、請求項9または10に記載の方法。
  12. ステップ(S2)は、少なくとも1つの後続のX線画像の計算された画像分散の最小化に基づくスケーリングを使用して実行される、
    請求項9ないし11いずれか一項に記載の方法。
  13. 請求項1ないし6いずれか1項に記載の装置、または請求項7または8に記載の医療用イメージングシステムを制御するコンピュータプログラム要素であって、処理ユニットによって実行されるとき、請求項9ないし12いずれか一項に記載の方法を実行するように適合されている、コンピュータプログラム要素。
  14. 請求項13に記載のプログラム要素を記憶したコンピュータ読み取り可能媒体。
JP2017529056A 2014-12-03 2015-11-23 医療用x線画像における信号補償のための装置および方法 Active JP6779207B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
EP14196077 2014-12-03
EP14196077.3 2014-12-03
PCT/EP2015/077322 WO2016087242A1 (en) 2014-12-03 2015-11-23 Device and method for signal compensation in medical x-ray images

Publications (2)

Publication Number Publication Date
JP2018504943A true JP2018504943A (ja) 2018-02-22
JP6779207B2 JP6779207B2 (ja) 2020-11-04

Family

ID=52103041

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017529056A Active JP6779207B2 (ja) 2014-12-03 2015-11-23 医療用x線画像における信号補償のための装置および方法

Country Status (5)

Country Link
US (1) US10470735B2 (ja)
EP (1) EP3228074B1 (ja)
JP (1) JP6779207B2 (ja)
CN (1) CN106999132B (ja)
WO (1) WO2016087242A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7455620B2 (ja) 2020-03-11 2024-03-26 三星電子株式会社 動画像処理装置及び動画像処理方法

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6739060B2 (ja) * 2017-01-24 2020-08-12 パナソニックIpマネジメント株式会社 画像生成装置及び画像生成方法
JP6976699B2 (ja) * 2017-03-15 2021-12-08 キヤノンメディカルシステムズ株式会社 X線診断装置
US10438896B2 (en) * 2017-04-11 2019-10-08 Apple Inc. Interconnecting dies by stitch routing

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010017376A (ja) * 2008-07-11 2010-01-28 Fujifilm Corp 放射線画像撮影装置
JP2010131223A (ja) * 2008-12-05 2010-06-17 Fujifilm Corp 画像処理装置及び画像処理方法
JP2011212434A (ja) * 2010-03-18 2011-10-27 Fujifilm Corp 放射線画像撮影方法および装置
WO2012032801A1 (ja) * 2010-09-09 2012-03-15 コニカミノルタエムジー株式会社 放射線画像撮影装置および放射線画像撮影システム

Family Cites Families (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5920070A (en) * 1996-11-27 1999-07-06 General Electric Company Solid state area x-ray detector with adjustable bias
JP2000156799A (ja) * 1998-11-20 2000-06-06 Victor Co Of Japan Ltd ゴースト除去装置
US6751289B2 (en) * 2000-10-10 2004-06-15 Kabushiki Kaisha Toshiba X-ray diagnostic apparatus
US6895077B2 (en) 2001-11-21 2005-05-17 University Of Massachusetts Medical Center System and method for x-ray fluoroscopic imaging
DE10213564A1 (de) * 2002-03-26 2003-10-16 Siemens Ag Verfahren zur Unterdrückung von Geistbildartefakten bei Röntgenbildern und Röntgenvorrichtung zur Durchführung dieses Verfahrens
US7227983B1 (en) * 2002-05-30 2007-06-05 The Regents Of The University Of California Automated macromolecular crystal detection system and method
DE10361397A1 (de) * 2003-12-29 2005-07-28 Siemens Ag Bildaufnahmevorrichtung
CN101977329B (zh) * 2004-07-29 2012-10-03 微软公司 使用线光值和其它图像处理改进的图像处理
JP4965931B2 (ja) * 2005-08-17 2012-07-04 キヤノン株式会社 放射線撮像装置、放射線撮像システム、その制御方法、及び制御プログラム
EP1948020B1 (en) * 2005-11-09 2017-05-31 Koninklijke Philips N.V. Method for reducing 3d ghost artefacts in an x-ray detector
DE102006021047A1 (de) 2006-05-05 2007-09-06 Siemens Ag Verfahren zum Erzeugen zumindest eines offsetkorrigierten Röntgenbildes
US7580620B2 (en) * 2006-05-08 2009-08-25 Mitsubishi Electric Research Laboratories, Inc. Method for deblurring images using optimized temporal coding patterns
EP2055092A1 (en) * 2006-08-16 2009-05-06 Koninklijke Philips Electronics N.V. Image gamut mapping
CN101518056B (zh) * 2006-09-25 2012-11-14 皇家飞利浦电子股份有限公司 基于直接x射线转换用于积分探测器的泄漏电流和残差信号补偿
JP4945249B2 (ja) * 2007-01-10 2012-06-06 株式会社東芝 X線透過像表示システム
US7832928B2 (en) * 2008-07-24 2010-11-16 Carestream Health, Inc. Dark correction for digital X-ray detector
DE102010018045A1 (de) * 2010-04-23 2011-10-27 Siemens Aktiengesellschaft Verfahren zur Aufnahme eines Röntgenbildes und Röntgensystem
KR101753895B1 (ko) 2010-12-03 2017-07-05 삼성디스플레이 주식회사 엑스레이 검출기 및 그 구동방법
WO2014024085A2 (en) * 2012-08-08 2014-02-13 Koninklijke Philips N.V. Multiple shot magnetic resonance imaging with ghosting stability correction
US9814435B2 (en) * 2014-08-28 2017-11-14 Samsung Electronics Co., Ltd. Medical imaging apparatus and method of operating same
US9579790B2 (en) * 2014-09-17 2017-02-28 Brain Corporation Apparatus and methods for removal of learned behaviors in robots
US9860077B2 (en) * 2014-09-17 2018-01-02 Brain Corporation Home animation apparatus and methods

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010017376A (ja) * 2008-07-11 2010-01-28 Fujifilm Corp 放射線画像撮影装置
JP2010131223A (ja) * 2008-12-05 2010-06-17 Fujifilm Corp 画像処理装置及び画像処理方法
JP2011212434A (ja) * 2010-03-18 2011-10-27 Fujifilm Corp 放射線画像撮影方法および装置
WO2012032801A1 (ja) * 2010-09-09 2012-03-15 コニカミノルタエムジー株式会社 放射線画像撮影装置および放射線画像撮影システム

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7455620B2 (ja) 2020-03-11 2024-03-26 三星電子株式会社 動画像処理装置及び動画像処理方法

Also Published As

Publication number Publication date
EP3228074B1 (en) 2020-04-29
US10470735B2 (en) 2019-11-12
CN106999132A (zh) 2017-08-01
EP3228074A1 (en) 2017-10-11
JP6779207B2 (ja) 2020-11-04
CN106999132B (zh) 2021-07-06
US20170325774A1 (en) 2017-11-16
WO2016087242A1 (en) 2016-06-09

Similar Documents

Publication Publication Date Title
JP6169626B2 (ja) 放射線画像処理装置、方法およびプログラム
JP6779207B2 (ja) 医療用x線画像における信号補償のための装置および方法
JP6156847B2 (ja) 放射線画像処理装置および方法並びにプログラム
JP2010042150A (ja) 放射線画像撮影装置
JP2013255606A5 (ja)
JP2015089429A5 (ja)
JP2010131223A (ja) 画像処理装置及び画像処理方法
US20200205755A1 (en) Image processing apparatus, image processing method, and program
JP6491545B2 (ja) 画像処理装置、放射線撮影装置、画像処理方法、プログラム、および記憶媒体
JP7161297B2 (ja) 放射線撮影システム、画像処理装置、撮影制御装置及びその作動方法、プログラム
JP5627275B2 (ja) 画像処理装置、画像処理方法及びプログラム
JP2009201552A (ja) 放射線画像撮影装置
US20150279066A1 (en) Method for Processing Images to Remove Bright-Burn Artifacts and X-Ray Device
JP6643038B2 (ja) 放射線撮影システム、画像処理装置及び画像処理方法
JP6879376B2 (ja) 放射線撮影装置
JP2018141636A (ja) 線量評価装置、線量測定装置、照射時間評価装置、線量評価方法および線量評価プログラム
JP2009201587A (ja) 放射線画像撮影装置
JP2016201634A (ja) 撮像装置、撮像方法及びプログラム
JP2019068915A (ja) 放射線撮影システム及び放射線撮影方法
JP7404846B2 (ja) 画像処理方法、画像処理装置及びプログラム
JP2013059511A (ja) 画像処理装置
WO2015059886A1 (ja) 放射線撮影装置およびその制御方法、放射線画像処理装置および方法、並びに、プログラムおよびコンピュータ可読記憶媒体
JP6510729B2 (ja) 放射線画像撮影システム、画像処理装置、放射線画像撮影装置、画像処理方法、及び画像処理プログラム
JP7192921B2 (ja) 放射線画像処理装置、散乱線補正方法及びプログラム
JP2019084158A (ja) 画像処理装置、画像処理方法、放射線撮影装置、放射線撮影装置の制御方法、およびプログラム

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20170606

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20181122

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20191011

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20191119

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20200206

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200515

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20200915

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20201013

R150 Certificate of patent or registration of utility model

Ref document number: 6779207

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250