JP2014151114A - Medical image diagnostic apparatus, medical image processor and medical image processing method - Google Patents

Medical image diagnostic apparatus, medical image processor and medical image processing method Download PDF

Info

Publication number
JP2014151114A
JP2014151114A JP2013025739A JP2013025739A JP2014151114A JP 2014151114 A JP2014151114 A JP 2014151114A JP 2013025739 A JP2013025739 A JP 2013025739A JP 2013025739 A JP2013025739 A JP 2013025739A JP 2014151114 A JP2014151114 A JP 2014151114A
Authority
JP
Japan
Prior art keywords
image
image processing
axis
medical image
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2013025739A
Other languages
Japanese (ja)
Other versions
JP6068177B2 (en
Inventor
Masatoshi Seki
将俊 関
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toshiba Corp
Canon Medical Systems Corp
Original Assignee
Toshiba Corp
Toshiba Medical Systems Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toshiba Corp, Toshiba Medical Systems Corp filed Critical Toshiba Corp
Priority to JP2013025739A priority Critical patent/JP6068177B2/en
Publication of JP2014151114A publication Critical patent/JP2014151114A/en
Application granted granted Critical
Publication of JP6068177B2 publication Critical patent/JP6068177B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Apparatus For Radiation Diagnosis (AREA)

Abstract

PROBLEM TO BE SOLVED: To provide a medical image diagnostic apparatus which allows a user to observe the same position of an organ by matching the position and orientation of the organ.SOLUTION: The medical image diagnostic apparatus includes: an imaging section for detecting radiation rays passing through an analyte to collect projection data; a detection section for detecting biological information periodically changing which is emitted from the analyte; a scanning control section for controlling the imaging section synchronously with the biological information; an image processing section for extracting at least two feature points from each piece of volume data acquired by processing the projection data, detecting an axis line connecting the two feature points and a direction vector starting from the axis line, converting coordinates of multiple pieces of volume data which continue with time so that reference coordinates of a portion of interest set on the axis line and the direction vector match each other and generating a cross sectional image passing through the reference coordinates of each piece of volume data; and a display section for displaying an image processed by the image processing section.

Description

本発明の実施形態は、X線CT装置等の医用画像診断装置に係り、特に心臓等の周期的に変化する臓器の撮影を行い、4D画像を表示して観察することができる医用画像診断装置、医用画像処理装置及び医用画像処理方法に関する。   Embodiments described herein relate generally to a medical image diagnostic apparatus such as an X-ray CT apparatus, and more particularly to a medical image diagnostic apparatus capable of imaging a periodically changing organ such as a heart and displaying and observing a 4D image. The present invention relates to a medical image processing apparatus and a medical image processing method.

従来、心臓等の動きのある臓器を撮影して4D画像(動画)を表示して観察する場合、患者座標は寝台に対して固定であるため、臓器は少しずつ動いて見える。つまり、臓器が時相・位相毎に位置や向きが少しずつ変化するため、動画として連続表示する場合は、各ボリュームについて臓器の見え方が同じになるように位置や角度を調整する必要がある。   Conventionally, when a moving organ such as the heart is imaged and a 4D image (moving image) is displayed and observed, since the patient coordinates are fixed with respect to the bed, the organ appears to move little by little. In other words, because the position and orientation of the organ changes little by time and phase, it is necessary to adjust the position and angle so that the volume of the organ looks the same for each volume when displaying it continuously as a movie. .

しかしながら、各ボリュームについて表示位置や角度を調整するのは面倒である。また人手による調整であるため、後日同様な表示をしたい場合に再現することが困難であるという不具合があった。   However, it is troublesome to adjust the display position and angle for each volume. In addition, since the adjustment is performed manually, there is a problem that it is difficult to reproduce when a similar display is desired at a later date.

特開2012−55392号公報JP 2012-55392 A 特開平3−251237号公報JP-A-3-251237

発明が解決しようとする課題は、自動的に臓器の位置や向きを一致させ、臓器の同じ位置を観察できるようにした医用画像診断装置、医用画像処理装置及び医用画像処理方法を提供することにある。   The problem to be solved by the invention is to provide a medical image diagnostic apparatus, a medical image processing apparatus, and a medical image processing method that automatically match the positions and orientations of organs so that the same positions of the organs can be observed. is there.

実施形態に係る医用画像診断装置は、被検体を透過した放射線を検出して投影データを収集する撮影部と、前記被検体が発する周期的に変化する生体情報を検出する検出部と、前記検出部からの前記生体情報に同期して前記撮影部を制御するスキャン制御部と、前記投影データを処理して得たボリュームデータから少なくとも2つの特徴点を抽出して、前記2つの特徴点を結ぶ軸線と前記軸線を起点とする方向ベクトルを検出し、前記軸線上に設定した注目部位の基準座標と前記方向ベクトルが一致するように、時間的に連続する複数のボリュームデータの座標を変換し、それぞれのボリュームデータの前記基準座標を通る断面画像を生成する画像処理部と、前記画像処理部で処理した画像を表示する表示部と、を備える。   A medical image diagnostic apparatus according to an embodiment includes an imaging unit that detects radiation transmitted through a subject and collects projection data, a detection unit that detects biological information that changes periodically from the subject, and the detection A scan control unit that controls the imaging unit in synchronization with the biological information from the unit, and extracts at least two feature points from the volume data obtained by processing the projection data, and connects the two feature points Detecting an axis and a direction vector starting from the axis, and converting the coordinates of a plurality of time-sequential volume data so that the direction vector matches the reference coordinate of the target region set on the axis, An image processing unit that generates a cross-sectional image that passes through the reference coordinates of each volume data, and a display unit that displays an image processed by the image processing unit.

一実施形態に係る医用画像診断装置を示すブロック図。1 is a block diagram showing a medical image diagnostic apparatus according to an embodiment. 一実施形態における心電波形の一例を示す説明図。Explanatory drawing which shows an example of the electrocardiogram waveform in one Embodiment. 心臓の構造を概略的に示す説明図。Explanatory drawing which shows the structure of the heart roughly. 一実施形態における心臓画像の処理を説明するフローチャート。The flowchart explaining the process of the heart image in one Embodiment. 一実施形態において生成した心臓の3D画像の一例を示す説明図。Explanatory drawing which shows an example of the 3D image of the heart produced | generated in one Embodiment. 一実施形態においてボリュームに設定した基準座標を示す説明図。Explanatory drawing which shows the reference | standard coordinate set to the volume in one Embodiment. 一実施形態において断面位置を基準座標に一致させた心臓の3D画像と断面画像と連続画像の一例を示す説明図。Explanatory drawing which shows an example of the 3D image of the heart which made the cross-sectional position correspond to the reference coordinates in one embodiment, a cross-sectional image, and a continuous image. 断面位置を固定したときの心臓の断面画像と3D画像の連続画像の一例を示す説明図。Explanatory drawing which shows an example of the continuous image of the cross-sectional image and 3D image of the heart when a cross-sectional position is fixed. 第2の実施形態に係る医用画像診断装置を示すブロック図。The block diagram which shows the medical image diagnostic apparatus which concerns on 2nd Embodiment. 第2の実施形態において肺を撮影したときの特徴点を示す説明図。Explanatory drawing which shows the feature point when the lung is image | photographed in 2nd Embodiment.

以下、発明を実施するための実施形態について、図面を参照して説明する。尚、各図において同一箇所については同一の符号を付す。   Embodiments for carrying out the invention will be described below with reference to the drawings. In addition, in each figure, the same code | symbol is attached | subjected about the same location.

(第1の実施形態)
図1は、一実施形態に係る医用画像診断装置を示すブロック図であり、一例としてX線CT装置(X線コンピュータ断層撮影装置)を示している。図1において、X線CT装置100は、ガントリ(架台)10を有し、このガントリ10内には回転フレーム11が設けられ、図示しない回転機構によって回転する。回転フレーム11内には、X線管12とX線検出器13が対向して配置されており、回転フレーム11の中心部分は開口しており、開口部には、寝台の天板14に載置された被検体200が挿入される。以下の説明では、被検体200を患者と呼ぶ場合もある。
(First embodiment)
FIG. 1 is a block diagram showing a medical image diagnostic apparatus according to an embodiment, and shows an X-ray CT apparatus (X-ray computed tomography apparatus) as an example. In FIG. 1, an X-ray CT apparatus 100 has a gantry 10, and a rotating frame 11 is provided in the gantry 10 and is rotated by a rotating mechanism (not shown). An X-ray tube 12 and an X-ray detector 13 are disposed in the rotating frame 11 so as to face each other. The central portion of the rotating frame 11 is open, and the opening is mounted on the top plate 14 of the bed. The placed subject 200 is inserted. In the following description, the subject 200 may be called a patient.

X線管12からのX線は、被検体200に照射され、被検体200を透過したX線はX線検出器13で電気信号に変換され、DAS(data acquisition system)と呼ばれるデータ収集部15で増幅され、デジタルデータに変換される。デジタルデータは、データ伝送部を介して投影データとして操作コンソール20(後述)に伝送される。X線検出器13は、多数のX線検出素子が被検体200の体軸方向(スライス方向)及び体幅方向(チャンネル方向)にマトリクス状に配列されており、スライス方向に配列された検出器列毎に投影データを収集する。X線管12、X線検出器13及びデータ収集部15は撮影部を構成する。  X-rays from the X-ray tube 12 are irradiated onto the subject 200, and the X-rays transmitted through the subject 200 are converted into electrical signals by the X-ray detector 13, and a data acquisition unit 15 called a DAS (data acquisition system). Are amplified and converted into digital data. The digital data is transmitted to the operation console 20 (described later) as projection data via the data transmission unit. The X-ray detector 13 has a large number of X-ray detection elements arranged in a matrix in the body axis direction (slice direction) and body width direction (channel direction) of the subject 200, and the detector arranged in the slice direction. Collect projection data for each column. The X-ray tube 12, the X-ray detector 13, and the data collection unit 15 constitute an imaging unit.

また、ガントリ10には架台・寝台制御部16及びスリップリング17を設けている。天板14は、寝台18に設けた寝台駆動部19によって架台10の開口部に進退可能であり、寝台駆動部19には架台・寝台制御部16から駆動信号が供給される。寝台18は架台・寝台制御部16に対して寝台の位置情報を送る。  The gantry 10 is provided with a gantry / bed control section 16 and a slip ring 17. The couchtop 14 can be moved back and forth to the opening of the gantry 10 by a couch driving unit 19 provided on the couch 18, and a driving signal is supplied to the couch driving unit 19 from the gantry / couch control unit 16. The couch 18 sends couch position information to the gantry / couch controller 16.

操作コンソール20は、コンピュータシステムを構成する。操作コンソール20は前処理部21を有し、データ収集部15からのデジタルデータがデータ伝送部を介して前処理部21に送られる。前処理部21では、信号強度の補正や信号欠落の補正等の処理を行い、投影データをバスライン201に出力する。  The operation console 20 constitutes a computer system. The operation console 20 includes a preprocessing unit 21, and digital data from the data collection unit 15 is sent to the preprocessing unit 21 via the data transmission unit. The preprocessing unit 21 performs processing such as correction of signal intensity and correction of signal loss, and outputs projection data to the bus line 201.

バスライン201には、システム制御部22が接続されている。システム制御部22には、スキャン制御部23が接続され、またバスライン201を介して画像処理部24、画像データ記憶部25等が接続されている。スキャン制御部23は、高電圧発生部26、架台・寝台制御部16に接続している。またシステム制御部22には、操作部を有する入力部27、及び表示部28が接続されている。  The system control unit 22 is connected to the bus line 201. A scan control unit 23 is connected to the system control unit 22, and an image processing unit 24, an image data storage unit 25, and the like are connected via a bus line 201. The scan control unit 23 is connected to the high voltage generation unit 26 and the gantry / bed control unit 16. Further, an input unit 27 having an operation unit and a display unit 28 are connected to the system control unit 22.

システム制御部22は、ホストコントローラとして機能し、操作コンソール20の各部の動作を制御する。またスキャン制御部23は、架台・寝台制御部16及び高電圧発生部26を制御し、被検体200をスキャンする際のX線の照射量や曝射のタイミングを制御する。  The system control unit 22 functions as a host controller and controls the operation of each unit of the operation console 20. The scan control unit 23 also controls the gantry / bed control unit 16 and the high voltage generation unit 26 to control the X-ray irradiation amount and exposure timing when the subject 200 is scanned.

画像処理部24は、システム制御部22の制御のもとに動作し、ボリュームデータから関心領域或いは関心臓器を抽出し、3D(三次元)画像データ等を再構成する。また画像処理部24は、例えば心電同期再構成法により複数心拍にわたる心臓の投影データを収集し、各心拍位相のデータを切り出して再構成し、4D画像を生成する。画像データ記憶部25は、断層画像等のデータを記憶する。  The image processing unit 24 operates under the control of the system control unit 22, extracts a region of interest or an organ of interest from the volume data, and reconstructs 3D (three-dimensional) image data or the like. Further, the image processing unit 24 collects cardiac projection data over a plurality of heartbeats by, for example, an electrocardiographic reconstruction method, cuts out and reconstructs data of each heartbeat phase, and generates a 4D image. The image data storage unit 25 stores data such as tomographic images.

入力部27はシステム制御部22に接続され、操作者(医師、検査技師等)によって操作可能であり、データ処理する上で各種の設定を行う。また、患者の状態や検査方法等の各種情報を入力する。また操作者によって基準座標(後述)を設定する際に入力部27を操作する。表示部28は、画像処理部24によって得られた画像、又は画像データ記憶部25に記憶された画像データを表示する。  The input unit 27 is connected to the system control unit 22 and can be operated by an operator (doctor, laboratory technician, etc.), and performs various settings for data processing. In addition, various information such as the patient's condition and examination method is input. Further, the input unit 27 is operated when setting the reference coordinates (described later) by the operator. The display unit 28 displays the image obtained by the image processing unit 24 or the image data stored in the image data storage unit 25.

高電圧発生部26は、スリップリング17を介してX線管12に電力を供給し、X線の曝射に必要な電力(管電圧、管電流)を与える。X線管12は、被検体200の体軸方向に平行なスライス方向と、それに直交するチャンネル方向の2方向に広がるビームX線を発生する。  The high voltage generator 26 supplies electric power to the X-ray tube 12 via the slip ring 17 and supplies electric power (tube voltage and tube current) necessary for X-ray exposure. The X-ray tube 12 generates beam X-rays that spread in two directions: a slice direction parallel to the body axis direction of the subject 200 and a channel direction perpendicular thereto.

またX線CT装置100には、被検体200が発する周期的に変化する生体情報を検出するために、例えば心電計(ECG)30を設けている。心電計30は、被検体200が発する生体情報(心電波形)を検出する検出部を構成する。心電計30で検出した心電波形データは、スキャン制御部23に供給する。心電計30は、X線CT装置の構成要素として組み込んでもよいし、外部機器として構成してもよい。   The X-ray CT apparatus 100 is provided with, for example, an electrocardiograph (ECG) 30 in order to detect periodically changing biological information emitted from the subject 200. The electrocardiograph 30 constitutes a detection unit that detects biological information (electrocardiographic waveform) emitted from the subject 200. The electrocardiographic waveform data detected by the electrocardiograph 30 is supplied to the scan control unit 23. The electrocardiograph 30 may be incorporated as a component of the X-ray CT apparatus or may be configured as an external device.

例えば、X線CT装置における心臓検査では、図2に示すような心電波形に同期して指定した心拍位相のスキャンを行い、目的とする心拍位相での画像を再構成する。図2は、心電波形の一例を示している。心電波形は、一心拍周期の期間にP波、Q波、R波、S波、T波、U波が現れ、心臓が最も動いている期間にR波が現れ、動きの比較的緩やかな期間にU波が現れる。したがって、一般的には、R波の発生期間を避け動きの比較的緩やかな期間にスキャン(心電同期スキャン)を行うようにしている。     For example, in a cardiac examination in an X-ray CT apparatus, a specified heartbeat phase is scanned in synchronization with an electrocardiogram waveform as shown in FIG. 2 to reconstruct an image at the target heartbeat phase. FIG. 2 shows an example of an electrocardiogram waveform. As for the electrocardiogram waveform, P wave, Q wave, R wave, S wave, T wave, U wave appear in the period of one heartbeat period, R wave appears in the period when the heart is moving most, and the movement is relatively slow. U wave appears in the period. Therefore, in general, scanning (electrocardiographic synchronization scanning) is performed during a period of relatively slow movement while avoiding the R wave generation period.

次に、実施形態に係る医用画像診断装置における画像処理方法について説明する。以下の説明では、臓器の撮影として心臓を撮影し、4D画像を表示する例を説明する。   Next, an image processing method in the medical image diagnostic apparatus according to the embodiment will be described. In the following description, an example in which the heart is imaged as an organ image and a 4D image is displayed will be described.

図3は、心臓の構造を概略的に示す説明図である。心臓は、右心房、左心房、右心室、左心室から成り、血液の逆流を防止するため4つの弁(三尖弁、肺動脈弁、僧帽弁、大動脈弁)を有している。また心臓は、上部の太く大きな血管がある部分を「心底」、下部の尖った部分を「心尖」と呼んでいる。図3での矢印は、血液の流れ方向を示している。   FIG. 3 is an explanatory diagram schematically showing the structure of the heart. The heart is composed of a right atrium, a left atrium, a right ventricle, and a left ventricle, and has four valves (a tricuspid valve, a pulmonary valve, a mitral valve, and an aortic valve) to prevent blood backflow. In addition, the upper part of the heart is called “the heart” and the lower part is called “the apex”. The arrows in FIG. 3 indicate the direction of blood flow.

一実施形態では臓器の特徴点、例えば心臓では、僧帽弁と心尖を結ぶ軸線Yを検出するとともに、上記軸線Yの一点を起点として4室(右心房、左心房、右心室、左心室)を通る断面で右心室の方向を示す軸線X(方向ベクトル)を検出する。また観察したい注目部位の位置を示す基準座標を設定し、全てのボリュームについて、観察したい位置の基準座標と方向ベクトルXが一致するように表示位置、方向を調整して表示する。   In one embodiment, an organ characteristic point, for example, in the heart, an axis Y connecting the mitral valve and the apex is detected, and four chambers (right atrium, left atrium, right ventricle, left ventricle) start from one point of the axis Y. An axis X (direction vector) indicating the direction of the right ventricle is detected in a cross section passing through. Further, reference coordinates indicating the position of the target region to be observed are set, and the display position and direction are adjusted and displayed for all volumes so that the reference coordinates of the position to be observed and the direction vector X coincide.

以下、図4のフローチャートを参照して画像処理の方法を説明する。図4は心臓を撮影したときの心臓画像の処理を説明するフローチャートである。   The image processing method will be described below with reference to the flowchart of FIG. FIG. 4 is a flowchart for explaining processing of a heart image when a heart is imaged.

先ず、ステップS1では被検体200に造影剤を注入し、次のステップS2において、スキャン制御部23は架台・寝台制御部16を制御して、心電同期スキャンを行う。心電同期スキャンでは、心電計30からの心電波形(図2)を用いてスキャンする。   First, in step S1, a contrast medium is injected into the subject 200, and in the next step S2, the scan control unit 23 controls the gantry / bed control unit 16 to perform an electrocardiographic synchronization scan. In the electrocardiogram synchronous scan, scanning is performed using an electrocardiogram waveform (FIG. 2) from the electrocardiograph 30.

次のステップS3で画像処理部24は、複数の心拍位相での画像を再構成する。ステップS4では、画像処理部24は、再構成した複数の心拍位相の画像を全て取り込み、ボリュームデータを表示部28に表示する。図5は、心臓のボリュームデータに基づく3D画像30の一例を示す。図5では、説明を分かり易くするため、心臓を簡略化して示し、僧帽弁から心尖までの画像を模式化し、右心室31と左心室32の画像を示している。   In the next step S3, the image processing unit 24 reconstructs images at a plurality of heartbeat phases. In step S <b> 4, the image processing unit 24 captures all the reconstructed images of a plurality of heartbeat phases, and displays the volume data on the display unit 28. FIG. 5 shows an example of a 3D image 30 based on heart volume data. In FIG. 5, for easy understanding, the heart is shown in a simplified manner, images from the mitral valve to the apex are schematically shown, and images of the right ventricle 31 and the left ventricle 32 are shown.

次に、画像処理部24は、ステップS5で、特徴点である僧帽弁の位置を検出し、ステップS6では、もう1つの特徴点である心尖の位置を検出する。またステップS7では、僧帽弁と心尖を結ぶ軸線である心軸Y(図5参照)を決定し、次のステップS8では短軸像を作成する。短軸像は軸線Yに直交する方向から切断した断面の画像である。   Next, the image processing unit 24 detects the position of the mitral valve, which is a feature point, in step S5, and detects the position of the apex, which is another feature point, in step S6. In step S7, a cardiac axis Y (see FIG. 5) that is an axis connecting the mitral valve and the apex is determined, and in the next step S8, a short-axis image is created. The short axis image is an image of a cross section cut from a direction orthogonal to the axis Y.

また画像処理部24は、ステップS9で短軸像をもとに右心室の方向ベクトルXを検出する。方向ベクトルXは、心軸Yの一点から4室(右心房、左心房、右心室、左心室)を通る断面で右心室の方向を示す軸線である。方向ベクトルXは、心臓の向きを規定するものであり、ベクトルXが示す方向が右であることを示す。   In step S9, the image processing unit 24 detects the right ventricular direction vector X based on the short-axis image. The direction vector X is an axis indicating the direction of the right ventricle in a cross section passing from one point of the cardiac axis Y to four chambers (right atrium, left atrium, right ventricle, left ventricle). The direction vector X defines the direction of the heart and indicates that the direction indicated by the vector X is right.

さらに画像処理部24は、ステップS10で任意断面像、例えば4室表示断面像や2室表示断面像を作成する。4室表示断面像は、心軸Yに直交し、4室(右心房、左心房、右心室、左心室)を横断する断面像である。2室表示断面像は、心軸Yと平行な方向に左心室と左心房の部分を縦方向に切断した断面図である。左心室は大動脈に血液を送り出す部分であるため、2室表示断面像は診断上重要な画像となる。4室表示断面像又は2室表示断面像の作成指示は、操作者が入力部27を操作して行う。またステップS11では、操作者の入力部27の操作に応答して、断面位置を決めるために基準座標を設定する。例えば、梗塞がある部分、或いは梗塞がありそうな部分に基準座標を設定する。図6は、ボリュームに設定した基準座標を示す説明図である。   Further, in step S10, the image processing unit 24 creates an arbitrary cross-sectional image, for example, a four-chamber display cross-sectional image or a two-chamber display cross-sectional image. The four-chamber display cross-sectional image is a cross-sectional image orthogonal to the cardiac axis Y and crossing the four chambers (right atrium, left atrium, right ventricle, left ventricle). The two-chamber display cross-sectional image is a cross-sectional view in which the left ventricle and the left atrium are cut in the vertical direction in a direction parallel to the cardiac axis Y. Since the left ventricle is a part that pumps blood to the aorta, the two-chamber display cross-sectional image is an important image for diagnosis. An instruction to create the four-chamber display cross-sectional image or the two-chamber display cross-sectional image is made by the operator operating the input unit 27. In step S11, in response to the operator's operation of the input unit 27, reference coordinates are set in order to determine the cross-sectional position. For example, the reference coordinates are set in a portion where there is an infarction or a portion where there is a possibility of infarction. FIG. 6 is an explanatory diagram showing the reference coordinates set for the volume.

図6は、例えば心電同期スキャンにより得た先頭のボリュームを示し、心軸Yと右心室の方向ベクトルXは、図5に対応する。例えば心臓の心軸Y上に梗塞があり、僧帽弁と心尖間の距離をL1とし、梗塞の位置が僧帽弁から距離L1の30%の位置にあるとき、その断面位置(α・L1)に基準座標Pを設定する。   FIG. 6 shows the head volume obtained by, for example, an electrocardiogram synchronous scan, and the cardiac axis Y and the right ventricular direction vector X correspond to FIG. For example, when there is an infarction on the heart axis Y of the heart, the distance between the mitral valve and the apex is L1, and the position of the infarction is 30% of the distance L1 from the mitral valve, the cross-sectional position (α · L1 ) To set the reference coordinate P.

比率αは、(0<α<1)であり、梗塞の位置が僧帽弁から距離L1の30%の位置にあるときα=0.3となる。特徴点である僧帽弁の位置から距離α・L1の位置(ポイントP)が動画表示の基準座標となる。図6では、基準座標Pを横切り、方向ベクトルXと平行の断面位置をAで示している。   The ratio α is (0 <α <1), and α = 0.3 when the position of the infarct is 30% of the distance L1 from the mitral valve. The position (point P) at a distance α · L1 from the position of the mitral valve, which is a feature point, is the reference coordinate for moving image display. In FIG. 6, a cross-sectional position that crosses the reference coordinate P and is parallel to the direction vector X is indicated by A.

また画像処理部24は、ステップS5〜S9により、他の全てのボリュームデータについても同様に、特徴点(僧帽弁と心尖)をもとにそれぞれ心軸Yを決定し、方向ベクトルXを検出する。   The image processing unit 24 determines the heart axis Y based on the feature points (mitral valve and apex) for all other volume data in the same manner in steps S5 to S9, and detects the direction vector X. To do.

次に、ステップS12において、画像処理部24は、入力部27からの操作者の指示に従って3D画像を時系列的に連続表示し動画を表示する。このとき、画像処理部24は、それぞれのボリュームデータをステップS11で設定した基準座標とベクトルXが一致するように移動・回転して調整し、調整した複数のボリュームデータによる3D画像を連続して表示部28に表示し、4D画像(動画)を表示する。   Next, in step S <b> 12, the image processing unit 24 continuously displays a 3D image in time series in accordance with an operator instruction from the input unit 27 and displays a moving image. At this time, the image processing unit 24 adjusts each volume data by moving / rotating the vector coordinates so that the reference coordinates set in step S11 coincide with the vector X, and successively 3D images based on the plurality of adjusted volume data. A 4D image (moving image) is displayed on the display unit 28.

つまり、いずれか一つ(たとえば先頭)のボリュームをもとに基準座標Pを設定する。また他の全てのボリュームおける軸線Y上の特徴点間の距離に、先に求めた比率αを適用して、全てのボリュームについて基準座標を設定し、それぞれの基準座標と方向ベクトルが一致するように全てのボリュームの座標を変換する。   That is, the reference coordinate P is set based on any one (for example, the head) volume. In addition, by applying the ratio α obtained previously to the distance between the feature points on the axis Y in all other volumes, the reference coordinates are set for all the volumes so that the respective reference coordinates and direction vectors coincide. Convert all volume coordinates to.

図7(a)は、時間T1〜T5で変化する心臓の3D画像を連続的に示した図である。また図7(b)は、図7(a)の各3D画像の基準座標Pに断面位置Aを一致させ、それぞれの断面位置Aで切断した断面画像の連続画像を示す。図7(b)の断面位置Aは、図6の断面位置Aに対応する。   FIG. 7A is a diagram continuously showing 3D images of the heart that change at times T1 to T5. FIG. 7B shows a continuous image of the cross-sectional images obtained by matching the cross-sectional position A with the reference coordinates P of each 3D image of FIG. 7A and cutting at each cross-sectional position A. The cross-sectional position A in FIG. 7B corresponds to the cross-sectional position A in FIG.

図7(a)に示すように、心臓は心室の収縮と拡張によって血液の循環を行うため心周期で拍動する。したがって臓器(心臓)の位置や向きが時相・位相毎に少しずつ変化する場合であっても、各ボリュームの基準座標Pと方向ベクトルXを一致させることにより、図7(b)の断面画像には梗塞部が常に表示されるため、診断を容易にすることができる。   As shown in FIG. 7A, the heart pulsates in the cardiac cycle to circulate blood by contraction and expansion of the ventricles. Therefore, even if the position and orientation of the organ (heart) change little by little for each time phase / phase, the cross-sectional image of FIG. 7B can be obtained by matching the reference coordinates P of each volume with the direction vector X. Since the infarcted part is always displayed on the display, the diagnosis can be facilitated.

図8は、心臓の3D画像において断面位置を固定したときの断面画像の連続画像の一例を示す。図8(a)は、時間T1〜T5で変化する心臓の3D画像を連続的に示し、図8(b)は、図8(a)の各3D画像の固定位置に断面位置Bを設定したときの断面画像の連続画像を示す。   FIG. 8 shows an example of a continuous image of cross-sectional images when the cross-sectional position is fixed in the 3D image of the heart. FIG. 8 (a) continuously shows 3D images of the heart changing from time T1 to T5, and FIG. 8 (b) sets the cross-sectional position B to the fixed position of each 3D image in FIG. 8 (a). The continuous image of a cross-sectional image is shown.

図8(b)に示すように、断面位置Bが固定されていると、臓器(心臓)の位置や向きが時相・位相毎に変化した場合に、断面画像に梗塞部が表示されないことがあり、診断に時間がかかる。   As shown in FIG. 8B, when the cross-sectional position B is fixed, the infarct portion may not be displayed in the cross-sectional image when the position or orientation of the organ (heart) changes for each time phase / phase. Yes, it takes time to diagnose.

上述したように、一実施形態では、4Dデータのそれぞれのボリュームについて、基準座標Pを設定して断面画像を表示することにより、注目部位(例えば梗塞部)の画像を常に表示することができる。   As described above, in one embodiment, for each volume of 4D data, by setting the reference coordinate P and displaying a cross-sectional image, it is possible to always display an image of a site of interest (for example, an infarct portion).

(第2の実施形態)
次に第2の実施形態に係る医用画像診断装置について説明する。第2の実施形態では、呼吸同期によるスキャンを実行し、臓器(例えば肺)の撮影画像を処理するものである。
(Second Embodiment)
Next, a medical image diagnostic apparatus according to the second embodiment will be described. In the second embodiment, a respiratory synchronization scan is executed to process a captured image of an organ (eg, lung).

図9は、第2の実施形態のブロック図である。図9では、図1の心電計30に代えて呼吸検出器40を設け、患者の呼吸に合わせてスキャンを行うものである。呼吸検出器40は、被検体200が発する周期的に変化する生体情報(呼吸データ)を検出する検出部を構成する。他の構成については図1と同じであるため、説明は省略する。   FIG. 9 is a block diagram of the second embodiment. In FIG. 9, a respiratory detector 40 is provided instead of the electrocardiograph 30 in FIG. 1, and scanning is performed in accordance with the patient's breathing. The respiration detector 40 constitutes a detection unit that detects biological information (breathing data) that changes periodically from the subject 200. Since other configurations are the same as those in FIG. 1, description thereof is omitted.

即ち、呼吸検出器40は被検体200が発する呼吸データを生成し、患者が息を吸ったとき又は吐き出したタイミングを検出する。検出方法としては、例えば患者が呼吸運動をしたときの胸部の膨らみ(胸の厚さ)を測定する方法がある。或いは呼吸の流量や流速を測定してもよい。呼吸検出器40からの呼吸データは、スキャン制御部23に供給され、例えば胸部の検査等において、呼吸同期でスキャンを行う。   In other words, the respiration detector 40 generates respiration data generated by the subject 200 and detects when the patient inhales or exhales. As a detection method, for example, there is a method of measuring the swelling of the chest (chest thickness) when the patient exercises a breathing exercise. Or you may measure the flow volume and flow velocity of respiration. The respiration data from the respiration detector 40 is supplied to the scan control unit 23, and for example, in the examination of the chest, the scan is performed in respiration synchronization.

図10は、胸部の検査のために肺を撮影するときの特徴点を示す説明図である。肺を撮影した場合、いずれか一つ(たとえば先頭)のボリュームをもとに特徴点を検出する。特徴点として、例えば肺の頂部(P1)と横隔膜の頂部(P2)を検出し、特徴点P1とP2を結ぶ軸線Yを決定する。また軸線Yと直交する方向の短軸像(断面画像)を作成し、肺の方向ベクトルを検出する。   FIG. 10 is an explanatory diagram showing feature points when a lung is imaged for a chest examination. When the lungs are imaged, feature points are detected based on one of the volumes (for example, the head). As feature points, for example, the top (P1) of the lung and the top (P2) of the diaphragm are detected, and an axis Y connecting the feature points P1 and P2 is determined. A short axis image (cross-sectional image) in a direction orthogonal to the axis Y is created, and a lung direction vector is detected.

そして、任意断面画像を作成し、その画像から注目部位(例えば結節Cが有る部分)を判別し、基準座標を設定する。例えば、特徴点P1とP2間の距離をL2としたとき、結節の位置が特徴点P1から距離L2の30%の位置にあるとき、その断面位置(α・L2)に基準座標Pを設定する。つまり、特徴点P1の位置から距離α・L2の位置が動画表示の基準座標Pとなる。   Then, an arbitrary cross-sectional image is created, a region of interest (for example, a portion having a nodule C) is determined from the image, and reference coordinates are set. For example, when the distance between the feature points P1 and P2 is L2, and the position of the nodule is 30% of the distance L2 from the feature point P1, the reference coordinate P is set to the cross-sectional position (α · L2). . That is, the position of the distance α · L2 from the position of the feature point P1 becomes the reference coordinate P for moving image display.

また他の全てのボリュームにおける軸線Y上の特徴点間の距離に、先に求めた比率αを適用し、全てのボリュームについて基準座標と方向ベクトルが一致するように座標を変換する。   Further, the ratio α previously obtained is applied to the distance between the feature points on the axis Y in all other volumes, and the coordinates are converted so that the reference coordinates and the direction vectors coincide for all the volumes.

第2の実施形態においても、断面位置を基準座標に一致させることにより、3D画像を連続的に表示したときに、臓器(肺)の大きさが患者の呼吸によって変化する場合であっても、断面画像の注目部位(結節部)が常に表示されるため、診断を容易にすることができる。   Also in the second embodiment, by matching the cross-sectional position to the reference coordinates, even when the 3D image is continuously displayed, even when the size of the organ (lung) changes due to the patient's breathing, Since the attention site (nodule) of the cross-sectional image is always displayed, diagnosis can be facilitated.

また肺以外に、呼吸などによって変化する臓器としては、例えば声帯があるが、このような臓器でも、特徴点及び軸線を求めて基準座標を設定することにより、注目部位の画像を表示することができる。   In addition to the lung, examples of organs that change due to breathing include, for example, vocal cords. Even in such organs, it is possible to display an image of a site of interest by obtaining feature points and axis lines and setting reference coordinates. it can.

以上述べた少なくとも一つの実施形態によれば、ボリュームの特徴点を求めて基準座標を作成し、各ボリュームの基準座標を一致させることにより、ぞれぞれの時相・位相間で臓器の同じ位置を観察することができる。したがって、診断が容易になる。また同じ画像セットはいつも同じように調整されて表示することができ、後日同様な表示をしたい場合でも、再現することが可能になる。   According to at least one embodiment described above, the reference point is created by obtaining the feature point of the volume, and the same reference point of each volume is made to coincide, so that the same organ in each time phase / phase is obtained. The position can be observed. Therefore, diagnosis becomes easy. The same image set can always be adjusted and displayed in the same way, and can be reproduced even if it is desired to display the same image at a later date.

尚、本発明のいくつかの実施形態を述べたが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これらの実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これらの実施形態やその変形は、発明の範囲や要旨に含まれると同様に、特許請求の範囲に記載された発明とその均等の範囲に含まれるものである。   In addition, although several embodiment of this invention was described, these embodiment is shown as an example and is not intending limiting the range of invention. These embodiments can be implemented in various other forms, and various omissions, replacements, and changes can be made without departing from the scope of the invention. These embodiments and modifications thereof are included in the invention described in the claims and equivalents thereof as well as included in the scope and gist of the invention.

100…医用画像診断装置(X線CT装置)
10…ガントリ
11…回転プレート
12…X線管
13…X線検出器
14…天板
15…データ収集部
16…架台・寝台制御部
18…寝台
20…操作コンソール
21…前処理部
22…システム制御部
23…スキャン制御部
24…画像処理部
25…画像データ記憶部
26…高圧発生部
27…入力部
28…表示部
30…心電計
40…呼吸検出器
P…基準座標
100: Medical diagnostic imaging apparatus (X-ray CT apparatus)
DESCRIPTION OF SYMBOLS 10 ... Gantry 11 ... Rotating plate 12 ... X-ray tube 13 ... X-ray detector 14 ... Top plate 15 ... Data collection part 16 ... Base and bed control part 18 ... Bed 20 ... Operation console 21 ... Pre-processing part 22 ... System control Unit 23 ... Scan control unit 24 ... Image processing unit 25 ... Image data storage unit 26 ... High pressure generation unit 27 ... Input unit 28 ... Display unit 30 ... Electrocardiograph 40 ... Respiration detector P ... Reference coordinates

Claims (14)

被検体を透過した放射線を検出して投影データを収集する撮影部と、
前記被検体が発する周期的に変化する生体情報を検出する検出部と、
前記検出部からの前記生体情報に同期して前記撮影部を制御するスキャン制御部と、
前記投影データを処理して得たボリュームデータから少なくとも2つの特徴点を抽出して、前記2つの特徴点を結ぶ軸線と前記軸線を起点とする方向ベクトルを検出し、前記軸線上に設定した注目部位の基準座標と前記方向ベクトルが一致するように、時間的に連続する複数のボリュームデータの座標を変換し、それぞれのボリュームデータの前記基準座標を通る断面画像を生成する画像処理部と、
前記画像処理部で処理した画像を表示する表示部と、
を備える医用画像診断装置。
An imaging unit that detects radiation transmitted through the subject and collects projection data; and
A detection unit for detecting periodically changing biological information emitted by the subject;
A scan control unit that controls the imaging unit in synchronization with the biological information from the detection unit;
At least two feature points are extracted from the volume data obtained by processing the projection data, an axis connecting the two feature points and a direction vector starting from the axis are detected, and the attention set on the axis An image processing unit that converts the coordinates of a plurality of volume data that are temporally continuous so that the reference coordinates of a part and the direction vector match, and generates a cross-sectional image that passes through the reference coordinates of each volume data;
A display unit for displaying an image processed by the image processing unit;
A medical image diagnostic apparatus comprising:
前記画像処理部は、前記注目部位の基準座標の設定のために前記ボリュームの任意断面像を作成し、前記表示部に表示する請求項1記載の医用画像診断装置。   The medical image diagnostic apparatus according to claim 1, wherein the image processing unit creates an arbitrary cross-sectional image of the volume for setting the reference coordinates of the site of interest and displays the image on the display unit. 前記画像処理部は、前記ボリュームデータの前記軸線を横切る短軸像を作成して前記方向ベクトルを検出する請求項1記載の医用画像診断装置。   The medical image diagnostic apparatus according to claim 1, wherein the image processing unit detects the direction vector by creating a short-axis image across the axis of the volume data. 前記画像処理部は、時間的に連続する複数のボリュームをもとに連続した3次元画像を作成し、前記基準座標を通る断面画像とともに前記表示部に出力して表示する請求項1記載の医用画像診断装置。   The medical image processing apparatus according to claim 1, wherein the image processing unit creates a continuous three-dimensional image based on a plurality of temporally continuous volumes, and outputs and displays the cross-sectional image passing through the reference coordinates on the display unit. Diagnostic imaging device. 前記検出部は、前記被検体の心臓の動きを検出する心電計を含み、前記スキャン制御部は、前記心電計の出力をもとに心電同期スキャンにより心臓を撮影するように制御する請求項1記載の医用画像診断装置。   The detection unit includes an electrocardiograph that detects a motion of the heart of the subject, and the scan control unit performs control so that the heart is imaged by an electrocardiographic synchronization scan based on an output of the electrocardiograph. The medical image diagnostic apparatus according to claim 1. 前記検出部は、前記被検体の呼吸状態を検出する呼吸検出器を含み、前記スキャン制御部は、前記被検体の呼吸データをもとに呼吸同期スキャンにより臓器を撮影するように制御する請求項1記載の医用画像診断装置。   The detection unit includes a respiration detector that detects a respiration state of the subject, and the scan control unit controls to capture an organ by a respiration synchronization scan based on the respiration data of the subject. The medical image diagnostic apparatus according to 1. 撮影部によって撮影した被検体の投影データを取得し、前記投影データを処理して得たボリュームデータから少なくとも2つの特徴点を抽出して、前記2つの特徴点を結ぶ軸線と前記軸線を起点とする方向ベクトルを検出し、前記軸線上に設定した注目部位の基準座標と前記方向ベクトルが一致するように、時間的に連続する複数のボリュームデータの座標を変換し、それぞれのボリュームデータの前記基準座標を通る断面画像を生成する画像処理部と、
前記画像処理部で処理した画像を表示する表示部と、
を備える医用画像処理装置。
Obtaining projection data of the subject imaged by the imaging unit, extracting at least two feature points from the volume data obtained by processing the projection data, and starting from the axis line connecting the two feature points and the axis line Detecting the direction vector, and converting the coordinates of a plurality of temporally continuous volume data so that the direction vector matches the reference coordinate of the target region set on the axis, and the reference of each volume data An image processing unit for generating a cross-sectional image passing through the coordinates;
A display unit for displaying an image processed by the image processing unit;
A medical image processing apparatus comprising:
前記画像処理部は、前記注目部位の基準座標の設定のために前記ボリュームの任意断面像を作成し、前記表示部に表示する請求項7記載の医用画像処理装置。   The medical image processing apparatus according to claim 7, wherein the image processing unit creates an arbitrary cross-sectional image of the volume for setting reference coordinates of the site of interest and displays the image on the display unit. 前記画像処理部は、前記ボリュームデータの前記軸線を横切る短軸像を作成して前記方向ベクトルを検出する請求項7記載の医用画像処理装置。   The medical image processing apparatus according to claim 7, wherein the image processing unit detects the direction vector by creating a short-axis image across the axis of the volume data. 前記画像処理部は、時間的に連続する複数のボリュームをもとに連続した3次元画像を作成し、前記基準座標を通る断面画像とともに前記表示部に出力して表示する請求項7記載の医用画像処理装置。   The medical image processing apparatus according to claim 7, wherein the image processing unit creates a continuous three-dimensional image based on a plurality of temporally continuous volumes, and outputs and displays the cross-sectional image passing through the reference coordinates on the display unit. Image processing device. 撮影部によって撮影した被検体の投影データを取得し、
前記投影データを処理して得たボリュームデータの、少なくとも2つの特徴点を抽出して、前記2つの特徴点を結ぶ軸線と前記軸線を起点とする方向ベクトルを検出し、
前記軸線上に設定した注目部位の基準座標と前記方向ベクトルが一致するように、時間的に連続する複数のボリュームデータの座標を変換し、
それぞれのボリュームデータの前記基準座標を通る断面画像を生成し、
前記生成した断面画像を表示部に表示する、医用画像処理方法。
Obtain the projection data of the subject imaged by the imaging unit,
Extracting at least two feature points of the volume data obtained by processing the projection data, detecting an axis connecting the two feature points and a direction vector starting from the axis;
The coordinates of a plurality of volume data that are temporally continuous are converted so that the direction vector coincides with the reference coordinates of the region of interest set on the axis,
A cross-sectional image passing through the reference coordinates of each volume data is generated,
A medical image processing method for displaying the generated cross-sectional image on a display unit.
前記注目部位の基準座標の設定のために前記ボリュームの任意断面像を作成し、前記表示部に表示する請求項11記載の医用画像処理方法。   The medical image processing method according to claim 11, wherein an arbitrary cross-sectional image of the volume is created and set on the display unit for setting the reference coordinates of the attention site. 前記ボリュームデータの前記軸線を横切る短軸像を作成して前記方向ベクトルを検出する請求項11記載の医用画像処理方法。   The medical image processing method according to claim 11, wherein the direction vector is detected by creating a short-axis image crossing the axis of the volume data. 時間的に連続する複数のボリュームをもとに連続した3次元画像を作成し、前記基準座標を通る断面画像とともに前記表示部に出力して表示する請求項11記載の医用画像処理方法。   The medical image processing method according to claim 11, wherein a continuous three-dimensional image is created based on a plurality of temporally continuous volumes, and is output and displayed on the display unit together with a cross-sectional image passing through the reference coordinates.
JP2013025739A 2013-02-13 2013-02-13 Medical image diagnostic apparatus, medical image processing apparatus, and medical image processing method Expired - Fee Related JP6068177B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2013025739A JP6068177B2 (en) 2013-02-13 2013-02-13 Medical image diagnostic apparatus, medical image processing apparatus, and medical image processing method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2013025739A JP6068177B2 (en) 2013-02-13 2013-02-13 Medical image diagnostic apparatus, medical image processing apparatus, and medical image processing method

Publications (2)

Publication Number Publication Date
JP2014151114A true JP2014151114A (en) 2014-08-25
JP6068177B2 JP6068177B2 (en) 2017-01-25

Family

ID=51573573

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2013025739A Expired - Fee Related JP6068177B2 (en) 2013-02-13 2013-02-13 Medical image diagnostic apparatus, medical image processing apparatus, and medical image processing method

Country Status (1)

Country Link
JP (1) JP6068177B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10874365B2 (en) 2017-12-28 2020-12-29 Canon Medical Systems Corporation Medical image diagnosis apparatus and medical image processing method

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008188417A (en) * 2007-01-11 2008-08-21 Toshiba Corp Three-dimensional image diagnosis system
JP2012130789A (en) * 2012-04-09 2012-07-12 Toshiba Corp Ultrasonic diagnostic apparatus, ultrasonic image processor, and ultrasonic image processing program
WO2012153539A1 (en) * 2011-05-11 2012-11-15 株式会社 東芝 Medical image processing device and method for same

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008188417A (en) * 2007-01-11 2008-08-21 Toshiba Corp Three-dimensional image diagnosis system
WO2012153539A1 (en) * 2011-05-11 2012-11-15 株式会社 東芝 Medical image processing device and method for same
JP2012130789A (en) * 2012-04-09 2012-07-12 Toshiba Corp Ultrasonic diagnostic apparatus, ultrasonic image processor, and ultrasonic image processing program

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10874365B2 (en) 2017-12-28 2020-12-29 Canon Medical Systems Corporation Medical image diagnosis apparatus and medical image processing method

Also Published As

Publication number Publication date
JP6068177B2 (en) 2017-01-25

Similar Documents

Publication Publication Date Title
JP5390132B2 (en) X-ray CT system
JP5643218B2 (en) X-ray CT apparatus and image display method using X-ray CT apparatus
JP5897273B2 (en) Medical image display apparatus and X-ray computed tomography apparatus
US8351565B2 (en) X-ray CT apparatus
WO2015194545A1 (en) X-ray ct device and image reconfiguration method
JP2014087635A (en) Image processor and x-ray ct device
JP2013198747A (en) X-ray ct apparatus
JP2017511239A (en) Imaging method
US11160523B2 (en) Systems and methods for cardiac imaging
JP2017196410A (en) Medical image processing apparatus and medical image diagnostic apparatus
JP6929695B2 (en) Medical diagnostic imaging equipment and management equipment
US12070348B2 (en) Methods and systems for computed tomography
JP2003204961A (en) X-ray ct apparatus
JP2013172792A (en) Medical image diagnostic apparatus
WO2004071301A1 (en) X-ray ct device
JP2011056167A (en) Radiographic imaging system and radiographic imaging method
JP5963163B2 (en) Medical diagnostic imaging equipment
JP2017217460A (en) Medical information processor, x-ray ct apparatus, and medical information processing program
JP2018175374A (en) Medical image processing apparatus and x-ray ct apparatus
JP4303947B2 (en) X-ray CT apparatus and image processing apparatus
JP6068177B2 (en) Medical image diagnostic apparatus, medical image processing apparatus, and medical image processing method
JP2000262513A (en) X-ray computed tomograph
JP7086628B2 (en) X-ray diagnostic device
JP6073558B2 (en) Medical diagnostic imaging equipment
JP2017217137A (en) X-ray CT apparatus

Legal Events

Date Code Title Description
A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A712

Effective date: 20150615

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20151204

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A711

Effective date: 20160428

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20161014

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20161122

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20161222

R150 Certificate of patent or registration of utility model

Ref document number: 6068177

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

S533 Written request for registration of change of name

Free format text: JAPANESE INTERMEDIATE CODE: R313533

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

LAPS Cancellation because of no payment of annual fees