JP2018507738A - 単一自由度の心腔セグメント化による心臓性能の超音波診断 - Google Patents

単一自由度の心腔セグメント化による心臓性能の超音波診断 Download PDF

Info

Publication number
JP2018507738A
JP2018507738A JP2017547114A JP2017547114A JP2018507738A JP 2018507738 A JP2018507738 A JP 2018507738A JP 2017547114 A JP2017547114 A JP 2017547114A JP 2017547114 A JP2017547114 A JP 2017547114A JP 2018507738 A JP2018507738 A JP 2018507738A
Authority
JP
Japan
Prior art keywords
boundary
user
imaging system
diagnostic imaging
cardiac
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2017547114A
Other languages
English (en)
Other versions
JP2018507738A5 (ja
Inventor
ロバート ジョセフ シュナイダー
ロバート ジョセフ シュナイダー
デイヴィッド プラター
デイヴィッド プラター
スコット ホランド セトルマイアー
スコット ホランド セトルマイアー
マイケル ダニエル カーディナル
マイケル ダニエル カーディナル
メアリー ケイ ビアンキ
メアリー ケイ ビアンキ
リディア リヴェラ
リディア リヴェラ
イヴァン サルゴ
イヴァン サルゴ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Koninklijke Philips NV
Original Assignee
Koninklijke Philips NV
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Koninklijke Philips NV filed Critical Koninklijke Philips NV
Publication of JP2018507738A publication Critical patent/JP2018507738A/ja
Publication of JP2018507738A5 publication Critical patent/JP2018507738A5/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/46Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient
    • A61B8/461Displaying means of special interest
    • A61B8/465Displaying means of special interest adapted to display user selection data, e.g. icons or menus
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/08Detecting organic movements or changes, e.g. tumours, cysts, swellings
    • A61B8/0883Detecting organic movements or changes, e.g. tumours, cysts, swellings for diagnosis of the heart
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/46Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient
    • A61B8/461Displaying means of special interest
    • A61B8/463Displaying means of special interest characterised by displaying multiple images or images and diagnostic data on one display
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/52Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/5215Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data
    • A61B8/5223Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data for extracting a diagnostic or physiological parameter from medical diagnostic data
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0012Biomedical image inspection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0012Biomedical image inspection
    • G06T7/0014Biomedical image inspection using an image reference approach
    • G06T7/0016Biomedical image inspection using an image reference approach involving temporal comparison
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/12Edge-based segmentation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/149Segmentation; Edge detection involving deformable models, e.g. active contour models
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/30ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for calculating health indices; for individual health risk assessment
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/48Diagnostic techniques
    • A61B8/483Diagnostic techniques involving the acquisition of a 3D volume of data
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/54Control of the diagnostic device
    • A61B8/543Control of the diagnostic device involving acquisition triggered by a physiological signal
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10016Video; Image sequence
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10132Ultrasound image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10132Ultrasound image
    • G06T2207/101363D ultrasound image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20112Image segmentation details
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30004Biomedical image processing
    • G06T2207/30048Heart; Cardiac

Abstract

超音波診断イメージングシステムは、ユーザ制御器を有し、ユーザ制御器によって、ユーザは、マシン描画された2つの心腔トレーシングに対し、心腔境界のユーザ選択を位置付ける。ユーザ選択された境界は、ユーザ決定される1つの値の関数として境界を位置付ける単一自由度制御器によって位置付けられる。これは、マシン描画される境界のばらつき及び臨床医によるそれらの受け入れを克服し、臨床医は、繰り返し描画される境界を生成することができ、同じ結果を得るために他人による使用のために制御値を交換することができる。

Description

本発明は、医療超音波診断システムに関し、特に、単一自由度の心腔セグメント化の使用に関する。
超音波イメージングは、例えば駆出率及び心拍出量のようなパラメータの測定によって心臓性能を診断するために日常的に使用されている。このような測定は、心臓サイクルのさまざまな位相における心腔の血液のボリュームが、心腔の2又は3次元画像において輪郭描出されることを必要とする。一般に、例えば左心室のような心腔のボリュームの測定は、ユーザの手で心腔の心内膜境界をトレースすることによって生成されている。このようなトレーシングは、個々の異なるユーザがどこにトレーシングを位置付けるべきかを判断する際に利用する基準の違いにより、大きなばらつきを受ける。この境界トレーシングを自動化することを試みる自動の方法が開発されており、例えば米国特許第6,491,636号(Chenal他)公報に記述される自動化された境界トレーシング手順のような方法がある。
この技法において、僧帽弁平面のコーナー及び心室の心尖部を含む心腔の解剖学的ランドマークが位置付けられる。専門家により検証された複数の標準の心内膜形状のうちの1つが、これらのランドマークにフィットされる。自動的に描かれる境界は、ラバーバンディングによって手動で調整されることができ、それによって、ユーザは、心内膜上でその最終位置を調整するために境界上で制御ポイントを移動させる。この処理は、収縮末期及び拡張末期の心臓位相で取得される画像に関して行われる。2つの境界は、駆出率又は心臓出力を算出するために比較され又は減算されることができる。例えば、米国特許第2009/0136109号公報には、識別された心内膜境界(心筋の内側表面を規定する)及び識別された心外膜境界(心筋の外側表面を規定する)を比較することによって、心筋厚さボリュームを生成することが開示されている。米国特許第2009/0136109号公報の心筋厚さボリュームは、中空であり、中空の空間の内部には、心腔のボリュームである。同様のアプローチが、欧州特許出願公開第2434454A2号公報に記述されており、左心室(LV)のボリュームが、検出されたLV境界に基づいて計算される。欧州特許出願公開第2434454A2号公報のシステムは、心臓壁を位置特定する及び追跡するためにさまざまな機械学習を使用する。これらの訓練技法は、訓練データセットに基づき、訓練データセットは、機械学習のために収集される知られている事例のデータベースを使用する。駆出率は、心臓の各々の収縮によって駆出される腔ボリュームの割合を測定するために、自動化されたシンプソンのアルゴリズム(rule of disks、ディスク規則)のような確立した方法によって良好に算出されることができる。
しかしながら、自動化された画像解析は、必ずしもすべてのユーザに受け入れ可能な心腔の輪郭描出を与えない。このような成功の欠如は、自動の方法では、境界が配置されるべきであると任意の所与のユーザが考える境界を、一貫性をもって位置特定することができないことが主な理由である。この貧弱な性能のほとんどは、真の境界が位置する場所を指定する解剖学的ランドマークが何であるかについての、個々の異なるユーザ間のバリエーションに起因する。
本発明の目的は、受け入れ可能な心腔境界のロケーションを輪郭描出するための、簡単な自動化されたツールをユーザに提供することである。本発明の他の目的は、このような輪郭描出が標準化され、比較が可能であり、それぞれ異なるユーザの間の反復可能な結果の生成が可能なことである。このような結果は、1人の臨床医の単一の値へのアプローチを可能にし、かかる単一の値は、同じツールを有する他の臨床医によって理解され他の臨床医に伝達されることができる。
本発明の原理によれば、心臓性能を診断する超音波診断法システム及び方法が記述される。心腔の画像が取得され、画像は、心筋の内側境界及び外側境界を輪郭描出するようにセグメント化され、又は、代替として、心筋のいくつかの(3+)境界を輪郭描出するようにセグメント化される。好適には、これは、心臓モデルデータを使用するような、自動化された画像解析プロセッサによって行われる。セグメント化境界の一方、両方、又はいくつかに対し、ユーザが好む心腔境界ロケーションをユーザが規定することを可能にするための、ユーザ制御(器)が提供される。ユーザ制御は、例えばセグメント化された境界に対する距離のパーセンテージのような、単一自由度の単一の値を提供し、ユーザは、単一の値を、真の心腔境界を位置付けるために変更する。単一の値は、同じツールの他のユーザと共有されることができ、他のユーザが他の画像に関して同じ結果を得、ゆえに心室境界アイデンティフィケーションの標準化を得ることを可能にする。
本発明の原理により構成される超音波診断イメージングシステムを示すブロック図。 本発明の原理による図1のQLQBプロセッサの境界検出の詳細を示すブロック図。 境界検出に有用である左心室のランドマークを示す図。 境界検出に有用である左心室のランドマークを示す図。 自動化された境界検出のために使用される、専門家により導出された心内膜境界形状を示す図。 自動化された境界検出のために使用される、専門家により導出された心内膜境界形状を示す図。 自動化された境界検出のために使用される、専門家により導出された心内膜境界形状を示す図。 左心室の画像における心外膜境界及び心内膜境界の輪郭描出を示す図。 左心室の画像における心外膜境界及び心内膜境界の輪郭描出を示す図。 本発明により心臓境界を見つけるために変形可能な心臓モデルの動作のフローチャート。 心内膜境界及び肉柱化心筋と緻密化心筋との間のインタフェースがトレースされている、拡張末期及び収縮末期における左心室の心臓画像を示す図。 心内膜境界及び肉柱化心筋と緻密化心筋との間のインタフェースがトレースされている、拡張末期及び収縮末期における左心室の心臓画像を示す図。 図7bの収縮末期の超音波画像を示し、ユーザ規定される境界が、図7bにおいて輪郭描出された2つの心臓境界の間の距離の0%のところに位置付けられている図。 図7bの収縮末期の超音波画像を示し、ユーザ規定される境界が、図7bにおいて輪郭描出された2つの心臓境界の間の距離の100%のところに位置付けられている図。 心臓画像を示し、ユーザ規定される境界が、心内膜トレーシングから緻密化心筋インタフェースへ向かう距離の40%のところに位置する図。 本発明の実施形態による単一自由度のユーザ制御を示しており、ユーザ規定される境界が、心筋のいくつかの境界に対し位置付けられる図。 ディスク規則を使用してボリュメトリックに測定されるバイプレーン画像からユーザ規定された心腔を示す図。 ボリュメトリック測定前に、3D超音波画像からユーザ規定された心腔ワイヤフレームモデルを示す図。
図1を最初に参照して、本発明の原理により構成される超音波診断イメージングシステム10が、ブロック図の形で示されている。超音波プローブ12は、超音波パルスを送信し及び受信する超音波トランスデューサのアレイ14を有する。アレイは、2次元イメージング用の1次元の線形アレイ又はカーブしたアレイでありえ、又は3次元の電子ビームステアリング用のトランスデューサ素子の2次元マトリクスでありうる。アレイ14の超音波トランスデューサは、超音波エネルギーを送信し、この送信に応じて戻ってくるエコーを受信する。送信周波数制御回路20は、アレイ14の超音波トランスデューサに結合される送信/受信(「T/R」)スイッチ22を通じて、所望の周波数又は周波数の帯域での超音波エネルギーの送信を制御する。トランスデューサアレイが信号を送信するために活性化される時間は、内部システムクロック(図示せず)に同期されることができ、又は例えば心臓サイクルのような身体の機能に同期されることができ、心臓サイクル波形は、ECGデバイス26によって提供される。心拍が、ECGデバイス26によって提供される波形によって決定される、そのサイクルの所望の位相にあるとき、プローブは、超音波画像を取得するよう命令される。例えば、これは、拡張末期及び収縮末期の心臓位相での取得を可能にする。送信周波数制御回路20によって生成される超音波エネルギーの周波数及び帯域幅は、中央コントローラ28によって生成される制御信号ftrによって制御される。
送信された超音波エネルギーからのエコーは、アレイ14のトランスデューサによって受信され、トランスデューサは、エコー信号を生成し、エコー信号は、システムがデジタルビームフォーマを使用する場合、T/Rスイッチ22を通じてアナログデジタル(「A/D」)コンバータ30に結合され、A/Dコンバータ30によってデジタル化される。アナログビームフォーマが更に使用されることができる。A/Dコンバータ30は、中央コントローラ28によって生成される信号fによって制御されるサンプリング周波数で、受信エコー信号をサンプリングする。サンプリング理論によって指図される所望のサンプリングレートは、受信される通過帯域の最大周波数の少なくとも2倍であり、30−40MHzのオーダーでありうる。最小限の要求よりも高いサンプリングレートが更に望ましい。
アレイ14の個別のトランスデューサからのエコー信号サンプルは、コヒーレントなエコー信号を形成するために、ビームフォーマ32によって遅延され合計される。2次元アレイを用いる3Dイメージングの場合、米国特許第6,013,032号公報(Savord)及び米国特許第6,375,617号公報(Fraser)に記述されるように、プローブに位置するマイクロビームフォーマとシステムメインフレームの主ビームフォーマとの間でビームフォーマを区分することが好ましい。デジタルのコヒーレントエコー信号が、デジタルフィルタ34によってフィルタリングされる。図示される超音波システムにおいて、送信周波数及び受信器周波数は、ビームフォーマ32は、高調波帯域のような送信帯域とは異なる周波数の帯域を受信することができるように、個別に制御される。デジタルフィルタ34は、信号をバンドパスフィルタし、更に、より低い又はベースバンドの周波数レンジに周波数帯域をシフトすることができる。デジタルフィルタは、例えば、米国特許第5,833,613号公報に開示されるタイプのフィルタでありうる。組織からのフィルタされたエコー信号は、従来のBモード画像処理の場合、デジタルフィルタ34からBモードプロセッサ36に結合される。
造影剤(例えばマイクロバブル)のフィルタされたエコー信号は、造影剤信号プロセッサ38に結合される。造影剤は、しばしば、心腔の血液プール内の造影剤に対して心内膜壁を一層明確に輪郭描出するために使用され、又は例えば米国特許第6,692,438号に記述されるように心筋の微小血管系の灌流スタディを実施するために使用される。造影剤信号プロセッサ38は、好適には、パルス反転技法によって高調波造影剤から戻ってきたエコーを分離し、複数の異なる態様で変調されたパルスの画像ロケーションへの送信から生じているエコーは、基本信号成分をキャンセルし及び高調波信号成分を強調するために、合成される。例えば、好適なパルス反転技法は、米国特許第6,186,950号公報に記述される。
デジタルフィルタ34からのフィルタされたエコー信号は更に、速度及びパワードップラ信号を生成するために、従来のドップラ処理のためのドップラープロセッサ40に結合される。これらのプロセッサから出力信号は、プラナー画像として表示されることができ、更に、3次元画像をレンダリングする3D画像プロセッサ42に結合され、3次元画像は、3D画像メモリ44に記憶される。3次元レンダリングは、米国特許第5,720,291号公報、米国特許第5,474,073号公報及び米国特許第5,485,842号公報に記述されるように、実施されることができ、これらの内容はすべて参照によってここに盛り込まれる。
造影剤信号プロセッサ38、Bモードプロセッサ36及びドップラプロセッサ40からの信号、並びに3D画像メモリ44からの3次元画像信号は、多数の超音波画像の各々について画像データを記憶するシネループメモリ48に結合される。画像データは、好適には、シネループメモリ48に複数の組で記憶され、画像データの各組は、個々の時間に取得された画像に対応する。或るグループの中の画像データは、心拍の間の個々の時間における組織灌流を示すパラメトリック画像を表示するために使用されることができる。シネループメモリ48に記憶される画像データのグループは更に、例えばのちの解析のために、ディスクドライブ又はデジタルビデオレコーダのような永続的なメモリ装置に記憶されることができる。この実施形態において、画像は更に、QLABプロセッサ50に結合され、QLABプロセッサ50において、画像は、心臓の境界を自動的に輪郭描出するために解析され、それにより、ユーザが心臓の内腔の真の境界を最も正確に示すと確信するとき、ユーザが境界を位置付けることを可能にする。QLABプロセッサは更に、画像内の解剖学的構造のさまざまな見地の定量化された測定を行い、米国特許出願公開第2005/0075567号公報及び国際公開第2005/054898号公報に記述されるように、自動化された境界トレーシングによって、組織境界及び辺縁を輪郭描出する。QLABプロセッサによって生成されるデータ及び画像は、ディスプレイ52に表示される。
図2は、本発明の原理に従って、ユーザ規定される心腔境界を輪郭描出するためのQLABプロセッサの動作の更なる詳細を示す。心臓超音波画像は、心臓画像データ60のソースによって提供され、ソースは、図1のシネループメモリ48、3D画像メモリ44又は画像プロセッサ36、38又は40のうちの1つでありうる。心臓画像は、自動境界検出(ABD)プロセッサ62に送信される。ABDプロセッサは、心臓画像内で心腔の境界を輪郭描出する完全自動又は半自動の(ユーザ支援される)画像プロセッサでありえ、それらのいくつかが以下に記述される。典型的な半自動のABDシステムにおいて、ユーザは、超音波システム制御パネル70上に通常は位置するマウス又はトラックボールのようなポインティングデバイスにより、又は画像にわたってカーソルを操作するワークステーションキーボードにより、心臓画像内に第1のランドマークを指定する。図3aの例において、例えば、指定される第1のランドマークは、図示されるビューにおいて左心室(LV)の底部の内側僧帽弁環(medial mitral annulus、MMA)である。ユーザが画像内でMMAをクリックすると、図中の数字「1」によって示される白い制御ポイントのようなグラフィックマーカが現れる。その後、ユーザは、第2のランドマークを、この例では、外側僧帽弁環(lateral mitral annulus、LMA)を、指定し、第2のランドマークが、図3bの数字「2」によって示される第2の白い制御ポイントによってマークされる。その後、ABDプロセッサによって生成されるラインが、2つの制御ポイントを自動的に接続し、ラインは、左心室のこの長手方向のビューの場合、僧帽弁平面を示す。ユーザはポインタを心内膜心尖部へ移動させ、これは、左心室のキャビティの中の一番上のポイントである。ユーザが、画像内においてこの第3のランドマークにポインタを移動させる場合、左心室の心内腔のテンプレート形状は、図5aに示すようにユーザ操作されるポインタがLV腔の心尖部をさがすに従って、歪んだり拡張しながら、カーソルを動的にたどる。図5aにおいて白いラインとして示されるこのテンプレートは、第1及び第2の制御ポイント1及び2によってアンカー(固定)され、第3の制御ポイントを通り、かかる第3の制御ポイントは、ユーザが心尖部においてポインタをクリックして第3の制御ポイント3を位置付けるとき、心尖部に位置付けられる。典型的なLV腔境界テンプレートが、図4a、図4b及び図4cに示される。これらのテンプレートは、多くの患者のLV心内膜境界の多くの専門家トレーシングから決定される。図4aのテンプレート80は、多くの正常患者に特有の細長のテンプレートである。図4bのテンプレート82は、形状が一層ふくらんでおり、これは、多くの鬱血性心不全患者に特徴的である。テンプレート84は、第3の可能性であり、より一層の涙形(teardrop)である。ユーザによって識別される3つの解剖学的ランドマークをベストフィットさせるテンプレートは、ABDプロセッサ62によって選択され、3つのユーザ規定されるランドマークをフィットさせるように歪められる。図5aに示すように、心内腔テンプレート80、82又は84は、それらがランドマークに位置付けられフィットされるとき、LVの心内膜の近似のトレーシングを提供する。図5aの例において、左心室を二分する黒いラインは、ポインタが心尖部に近づくとき、ポインタに追従し、心尖部を示す。この黒いラインは、僧帽弁平面を示すラインの中心と左心室の心尖部との間にアンカーされて、僧帽弁の中心とキャビティの心尖部との間の中心線を本質的に示す。
ABDプロセッサ62は、LVの心内膜ライニングを見出すと、次に心外膜境界を見つけることを試みる。これは図5bに示され、ユーザは、カーソルを移動させ、画像内の暗色の心筋の外側の心尖部4をクリックした。図5の画像は、造影剤強調高調波画像であり、LV腔は造影剤でいっぱいであるが、造影剤は、心筋にまだ完全には潅流しておらず、そういう理由で、この画像において、より暗い周囲心筋に対して、LV腔が非常に明るく見える。ユーザが心外膜心尖部をクリックすると、ABDプロセッサは、上述したのと同様に、図4のテンプレートと同様に外側の又は心外膜テンプレートを選択し、図5bに示されるように、それを心外膜にフィットさせる。心臓画像は、現在、血液プール−心筋インタフェースであるその心内膜境界(マーカ1、3及び2を接続するライン)と、心臓の最も外側の表面であるその心外膜境界(マーカ1、4及び2を接続するライン)と、の両方を有する。
これら心内膜境界及び心外膜境界は、グラフィクス生成器66によって生成されるトレーシングによって、画像内において輪郭描出される。
ユーザインタラクションを必要とする半自動の動作に代わって、上述した米国特許第6,491,636号公報に記述されるように、ABDプロセッサは、LVの境界を完全に自動的に輪郭描出することができる。それに関して説明されるように、画像プロセッサは、僧帽弁コーナー及び心尖部を自動的に見つけ、テンプレートを、自動的に位置特定されたランドマークにフィットさせるように構成されることができる。しかしながら、図6に示されるように、心筋境界を自動的に輪郭描出するための好適な技法は、心臓モデルである。心臓モデルは、典型的な心臓の組織構造を表す、空間的に規定される数学的記述である。
心臓が診断画像に現れる場合、心臓モデルは、心臓にフィットされることができ、それによって、イメージングされた心臓の特定の解剖学的構造を規定する。図6のプロセスは、90において、心臓画像の取得から開始される。心臓の位置は、92において、一般化ハフ変換により画像データを処理することによって、心臓画像内において場所を突き止められる。ここで、心臓の姿勢は、規定されておらず、94において、画像データにおける心臓の並進、回転及びスケーリングのミスアライメントが、心臓モデル全体の1つの相似変換を使用することによって、補正される。96において、モデルは変形され、アフィン変換が、心臓の特定の領域に割り当てられる。変形に関する制約は、98において、心臓モデルが区分的アフィン変換(piecewise affine transformation)に関して変形することを可能にすることによって、緩和され、形状制約付き変形可能なモデルは、大きさを変更され、変形され、モデルの各部分は、心臓サイクルの取得された位相において、画像に示すように実際の患者の解剖学的構造をフィットさせる。こうして、モデルは、心臓画像に示される器官境界に正確に適応され、それによって、心内膜ライニング、肉柱化(trabeculaeted)した心筋と緻密化した心筋との間のインタフェース、及び心外膜境界を含む個々の境界を規定する。このような心臓モデルの好適な実現例において、肉柱化した心筋と緻密化した心筋との間のインタフェースが最初に見つけられ、これは、超音波画像において明るく照明された領域と穏やかに照明された領域との間の良好に規定される勾配のようにみえる。心内膜境界は、それが超音波画像に現れる場合にあまり良好に規定されない内皮ライニングの可変のロケーションを見つけることを可能にしたいという要望のため、心臓モデルにおいて、概してあまり良好に規定されない。図5a及び図5bの造影剤強調心臓画像と異なり、非増強超音波画像は、概して、心筋を囲む相対的に高強度のエコー組織と、中程度の強度の心筋との間に、相対的に強い強度勾配を示し、心筋と低強度の内腔の血液プールのとの間では相対的により小さい勾配を示す。これは、造影剤無しの状態で画像を診断する場合に、最初に外側の心筋境界を識別し、次に内側の心内膜境界を識別することを要する。境界の座標が見つけられると、それらはグラフィクス生成器66に伝送され、グラフィクス生成器66は、計算された位置において画像上に置かれるトレースを生成する。
図7は、2つの超音波画像を示し、第1の画像は、拡張末期において、輪郭を描かれた心筋の両方の境界を有し(図7a)、第2の画像は、収縮末期において、トレースされた両方の心筋境界を有する(図7b)。緻密化した心筋境界は、黒でトレースされ、心内膜境界は、これらの画像において白でトレースされている。こうして両方の境界が描かれ、ユーザは、真の腔境界が位置するとユーザが考える2つのトレーシングの間のロケーションを示すために、制御パネル70上のユーザ制御器により、心腔境界描出器64を制御する。1つの実現例において、ユーザは、一変数制御器を操作し、ユーザは、かかる制御器によって、すでに描かれた心内膜境界と、肉柱化した心筋及び緻密化した心筋の間ですでに描かれたインタフェースと、の間の距離の選択されたパーセンテージだけ変位されるロケーションに、真の心内膜境界を位置付けることができる。図8aは、一変数制御器が0%に設定される場合の図7bの収縮末期画像を示し、図8bは、ユーザ制御により100%に設定された同じ画像を示し、この場合、白いライン境界が心筋の外側に位置している。ユーザ規定される境界の視覚的なトレーシングが更に、超音波画像上のオーバレイのために、図1のシステムのグラフィクス生成器66によって生成される。ユーザ設定される境界は、心内膜トレーシングと直交して測定される望まれるロケーションであって、2つの境界の間の距離の望まれるパーセンテージのところに、位置づけられる。これらの例において、2つの心筋境界トレーシングは、説明の簡略化のために図示されていないが、1つの可能性のある実現例であり、所望の場合、自動的に描かれるトレーシングが図示されることもできる。
図8cは、境界が心内膜トレーシングから緻密化心筋インタフェースの方へ40%の距離のところにあるように、ユーザにより位置付けられる境界(白いラインとして図示される)をユーザが調整した状況を示す。これは、スライダ100をそのスロット102において左又は右に移動させることによって行われる。スライダが、ユーザによって操作されるに従って、ユーザ制御される境界トレーシング110が、心筋の2つの境界の間で行ったり来たり移動される。図8cの例において、スライダ100は、マウス又は他のユーザインタフェース制御器によって操作される表示スクリーン上のソフトキー制御器として図示されているが、代替として、スライドは、物理的なスライダ、ノブ、又はスイッチ、又は従来の超音波システムコントロールパネル上のトラックボールでありうる。ユーザ制御器は、ロッカー制御器、トグルボタン、リストボックス又は数値入力ボックスとして実現されることもできる。ユーザは、多くのケースで好適なパーセンテージを有する場合、これは、デフォルト値として保存されることができる。図8cの例において、数値パーセンテージは、スクリーン上に表示され、スライダ100が移動されるに従って変化する。更に、識別された心筋境界の部分の拡大ビュー104が、図8dに示されている。ユーザは、画像の心筋のポイントで左にクリックし、心筋の当該部分が、拡大ビュー104に現れ、ユーザ操作される境界110が、心筋境界106(外側境界線)と108(内側境界線)の間に示される。ユーザが、スライダ100を操作するに従って、境界110は、システムにより描かれた2つの境界106及び108の間で移動される。
ユーザ操作される境界110は更に、拡大ビュー104'に示すように、100%以上のレンジを使用して、位置付けられることができる。ユーザ規定される位置A(110'A)は、緻密化心筋境界106'を越えて位置付けられ、100%以上のレンジで表現され、ユーザ規定される位置C(110'C)が心内膜トレーシング108'の範囲内に位置付けられ、負のパーセンテージレンジで表現される。心内膜及び緻密化した心筋境界との間に位置付けられるユーザ規定される位置B(110'B)は、0%と100%の間のレンジで表現されることができる。
代替として、ユーザ便宜のために、ユーザ操作される(規定される)境界は、図8d(右下のビュー104')に示すように、3つの輪郭に対して移動されることができ、ここで、3つの輪郭は、上述の例と同じパーセンテージ100%及び0%にそれぞれ対応する緻密化心筋境界106'及び心内膜境界108'、並びに200%のパーセンテージ値に対応する付加の境界109'、であり、付加の境界109'は、心外膜境界に位置する。図示される例において、スライダ100は、緻密化心筋境界106'及び心外膜境界109'の間のユーザ規定される境界110'位置に対応する150%の値のところに調整される。第3の境界の代替例は、緻密化心筋境界(106')を超えたところに(付加の境界として本例で示されている)心外膜境界である別の境界があるということに対処し、この心外膜境界は、超音波画像内で目立つ検出可能な勾配によって特徴付けられることもでき、それは単一自由度スライダを抑制するために使用されることができる。この心外膜境界は、境界画像プロセッサによって更に識別されることができる。スライダは、単一自由度の制御器である。ユーザは、スライダによって制御される単一の値を単にセットすることによって、腔の周囲全体に境界110の位置をセットする。値は、他のユーザに伝えられることができ、他のユーザは、同一の数値を用いて同じ結果を得ることができる。
図9及び図10は、本発明のユーザ規定される心腔境界が、パラメータ(例えば心拍出量及び駆出率)を測定するためにどのように使用されることができるかを説明する。図9の斜視図において、LVの同時に取得されたバイプレーン画像のユーザ規定された2つの境界210及び212が、僧帽弁平面を表す基底220上に示されている。2つの境界の心尖部マーカは、230に示されている。本例において、2つのバイプレーン画像境界の画像平面は互いに直交する。2つの境界210及び212内のボリュームは、基底平面220と平行である間隔を置かれた複数の平面222に、数学的に分割される。これらの平面は、a、aに示すように境界210の左側と交差し、c、cに示すように境界210の右側と交差する。平面は、b,bに示すようにトレーシング212の手前側と交差する。
楕円が、図9に示すように各平面222の4つの交差ポイントa、b、c、dに数学的にフィットされる。円弧及び不規則な形状を含む、楕円以外の曲線又はスプラインが使用されることができるが、楕円は、楕円によって実施される場合にシンプソンの公式が臨床的に有効と認められている利点を提供する。平面222及び楕円によって規定されるディスクのボリュームは、LVのボリュームを算出するために、ディスク規則によって計算されることができる。
図10は、3次元心腔画像のユーザ規定された境界で構成されるワイヤフレームモデルを示す。ワイヤフレームの水平セクション232、234、236は、交差ポイントa、b、c及びdで垂直境界セクション210、212と交差する境界線である。水平セクションは、僧帽弁平面基底部220と平行である。ワイヤフレーム内のボリュームは、修正されたディスク規則の計算又は他のボリュメトリック算出技法によって決定されることができる。図9又は図10に示される収縮末期の位相画像について計算されたボリュームが、拡張末期の画像について計算されたボリュームから減算され、同じ拡張末期ボリュームで除算されるとき、その結果は、駆出率の算出値である。
上述の他の変更例が、当業者に容易に思いつくであろう。パーセンテージ定量化の代わりに、ユーザ規定される境界は、手動又は自動でトレースされた境界からインクリメントされた距離のところに位置付けられることができる。例えば、ユーザ規定される境界の位置が、基準境界から、ユーザ決定されるミリメートル単位の距離だけオフセットされるように、スライダが距離を較正されることができる。トレースされる2つの境界を使用することに代わって、ユーザ規定される境界は、単一の境界トレーシングに対して位置付けられることができ、又は2つの境界から、補間されたオフセットのところに位置付けられうる。ユーザ規定される境界は、100%以上のレンジを使用して位置付けられることもでき、ユーザ規定される境界は、心内膜トレーシングの範囲内に、又は、心外膜又は緻密化心筋境界を超えて位置付けられることができる。

Claims (15)

  1. 超音波画像において心臓の内腔の境界を決定する超音波診断イメージングシステムであって、
    心臓画像データのソースと、
    前記心臓画像データに応答する境界検出プロセッサであって、前記心臓画像データにおいて心筋の少なくとも内側境界及び外側境界を識別する境界検出プロセッサと、
    ユーザが、前記内側境界及び前記外側境界に対しユーザ規定される心腔境界を示すことを可能にするユーザ制御器と、
    前記ユーザ制御器及び前記境界検出プロセッサに結合される心腔境界描出器であって、前記心臓画像データにおいて、前記境界検出プロセッサによって識別された前記内側境界及び前記外側境界の少なくとも一方に対し、前記ユーザ規定される心腔境界を位置付ける、心腔境界描出器と、
    を有する、超音波診断イメージングシステム。
  2. 前記ユーザ制御器は更に、前記ユーザ規定される前記心腔境界のロケーションについて可変である単一自由度を調整するよう構成される、請求項1に記載の超音波診断イメージングシステム。
  3. 前記内側境界が、心内膜、又は心筋−血液プールのインタフェースを更に有し、
    前記外側境界が、心外膜、又は肉柱化した心筋と緻密化した心筋との間のインタフェース、を更に有する、請求項2に記載の超音波診断イメージングシステム。
  4. 前記ユーザ制御器が、スライダ、ノブ、スイッチ、トラックボール、ロッカー制御、トグルボタン、リストボックス又は数値入力ボックスを更に有する、請求項2に記載の超音波診断イメージングシステム。
  5. 前記ユーザ制御器は、ソフトキー制御又は物理的な制御を更に有する、請求項4に記載の超音波診断イメージングシステム。
  6. 前記可変の単一自由度は、パーセンテージ又はミリメートルの一方で較正され、前記パーセンテージは、前記内側境界及び前記外側境界に対する距離に関連する、請求項2に記載の超音波診断イメージングシステム。
  7. 前記心臓画像データのソースが、2次元心臓画像をもつメモリ装置を更に有する、請求項1に記載の超音波診断イメージングシステム。
  8. 前記心臓画像データが左心室のビューを含む、請求項7に記載の超音波診断イメージングシステム。
  9. 前記境界検出プロセッサが、半自動の心臓境界画像プロセッサを更に有する、請求項1に記載の超音波診断イメージングシステム。
  10. 前記半自動の心臓境界画像プロセッサが、前記ユーザ制御器に結合され、更に、心臓画像におけるランドマークを規定するユーザ入力に応答する、請求項9に記載の超音波診断イメージングシステム。
  11. 前記境界検出プロセッサは更に、自動の心臓境界画像プロセッサを更に有する、請求項1に記載の超音波診断イメージングシステム。
  12. 前記自動の心臓境界画像プロセッサは、ユーザ入力なしで、前記心臓画像データにおける心筋の境界を識別するよう動作可能である、請求項1に記載の超音波診断イメージングシステム。
  13. 前記境界検出プロセッサに結合され、内側及び外側の心筋境界の表示トレースを生成するグラフィクス生成器と、
    前記心臓画像データの前記ソースに及び前記グラフィクス生成器に結合され、前記内側及び外側の心筋境界の前記生成された表示トレースと共に心臓画像を表示するディスプレイと、
    を更に有する、請求項1に記載の超音波診断イメージングシステム。
  14. 前記心腔境界描出器に結合され、ユーザ規定される心腔境界の表示トレースを生成するグラフィクス生成器と、
    前記心臓画像データの前記ソースに及び前記グラフィクス生成器に結合され、前記心腔境界の表示トレースと共に心臓画像を表示するディスプレイと、
    を更に有する、請求項1に記載の超音波診断イメージングシステム。
  15. 単一自由度のパーセンテージのレンジが、0%より小さいか、100%より大きいか、それら両方である、請求項6に記載の超音波診断イメージングシステム。
JP2017547114A 2015-03-10 2016-02-25 単一自由度の心腔セグメント化による心臓性能の超音波診断 Pending JP2018507738A (ja)

Applications Claiming Priority (7)

Application Number Priority Date Filing Date Title
US201562130805P 2015-03-10 2015-03-10
US201562130787P 2015-03-10 2015-03-10
US62/130,787 2015-03-10
US62/130,805 2015-03-10
EP15161565 2015-03-30
EP15161565.5 2015-03-30
PCT/EP2016/054001 WO2016142183A1 (en) 2015-03-10 2016-02-25 Ultrasonic diagnosis of cardiac performance by single degree of freedom chamber segmentation

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2020200685A Division JP7132996B2 (ja) 2015-03-10 2020-12-03 単一自由度の心腔セグメント化による心臓性能の超音波診断

Publications (2)

Publication Number Publication Date
JP2018507738A true JP2018507738A (ja) 2018-03-22
JP2018507738A5 JP2018507738A5 (ja) 2019-04-11

Family

ID=52875503

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017547114A Pending JP2018507738A (ja) 2015-03-10 2016-02-25 単一自由度の心腔セグメント化による心臓性能の超音波診断

Country Status (6)

Country Link
US (1) US20180049718A1 (ja)
EP (2) EP3267896B1 (ja)
JP (1) JP2018507738A (ja)
CN (2) CN117122349A (ja)
RU (1) RU2708317C2 (ja)
WO (1) WO2016142183A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021199962A1 (ja) * 2020-03-30 2021-10-07 テルモ株式会社 プログラム、情報処理方法および情報処理装置

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11900524B2 (en) 2022-03-03 2024-02-13 Biosense Webster (Israel) Ltd. Constructing topography of lumen wall in 4D ultrasound image with virtual ellipsoid or polyhedron

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009530008A (ja) * 2006-03-20 2009-08-27 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 心筋の性能の定量化による超音波診断
JP2010259656A (ja) * 2009-05-08 2010-11-18 Toshiba Corp 医用画像処理装置、超音波診断装置および医用画像診断装置

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5601084A (en) * 1993-06-23 1997-02-11 University Of Washington Determining cardiac wall thickness and motion by imaging and three-dimensional modeling
US5474073A (en) 1994-11-22 1995-12-12 Advanced Technology Laboratories, Inc. Ultrasonic diagnostic scanning for three dimensional display
US5485842A (en) 1994-11-30 1996-01-23 Advanced Technology Laboratories, Inc. Ultrasonic diagnostic scan conversion for three dimensional display processing
US5833613A (en) 1996-09-27 1998-11-10 Advanced Technology Laboratories, Inc. Ultrasonic diagnostic imaging with contrast agents
US5720291A (en) 1996-03-22 1998-02-24 Advanced Technology Laboratories, Inc. Three dimensional medical ultrasonic diagnostic image of tissue texture and vasculature
US6013032A (en) 1998-03-13 2000-01-11 Hewlett-Packard Company Beamforming methods and apparatus for three-dimensional ultrasound imaging using two-dimensional transducer array
US6186950B1 (en) 1999-11-04 2001-02-13 Atl Ultrasound Ultrasonic pulse inversion harmonic separation with reduced motional effects
US6468216B1 (en) 2000-08-24 2002-10-22 Kininklijke Philips Electronics N.V. Ultrasonic diagnostic imaging of the coronary arteries
US6491636B2 (en) 2000-12-07 2002-12-10 Koninklijke Philips Electronics N.V. Automated border detection in ultrasonic diagnostic images
US20050075567A1 (en) 2001-12-18 2005-04-07 Koninklijke Philips Electronics N.V. Ultrasonic diagnostic imaging system with assisted border tracing
US6692438B2 (en) 2001-12-18 2004-02-17 Koninklijke Philips Electronics Nv Ultrasonic imaging system and method for displaying tissue perfusion and other parameters varying with time
US7347821B2 (en) * 2003-06-26 2008-03-25 Koninklijke Philips Electronics N.V. Adaptive processing of contrast enhanced ultrasonic diagnostic images
JP4682149B2 (ja) 2003-12-03 2011-05-11 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 血流及び潅流パラメータを同時に表示するための超音波イメージングシステムおよび方法
JP5764058B2 (ja) * 2008-07-10 2015-08-12 コーニンクレッカ フィリップス エヌ ヴェ 心臓の同時性及び生存能力の超音波評価
US10321892B2 (en) 2010-09-27 2019-06-18 Siemens Medical Solutions Usa, Inc. Computerized characterization of cardiac motion in medical diagnostic ultrasound
RU2525510C1 (ru) * 2013-02-21 2014-08-20 Федеральное государственное бюджетное учреждение "Научно-исследовательский институт кардиологии" Сибирского отделения Российской академии медицинских наук Способ диагностики ишемической болезни сердца методом стресс-эхокардиографии с комбинированной изометрической и психоэмоциональной нагрузкой
US9589379B2 (en) * 2014-06-24 2017-03-07 Siemens Healthcare Gmbh System and method for visualization of cardiac changes under various pacing conditions

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009530008A (ja) * 2006-03-20 2009-08-27 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 心筋の性能の定量化による超音波診断
JP2010259656A (ja) * 2009-05-08 2010-11-18 Toshiba Corp 医用画像処理装置、超音波診断装置および医用画像診断装置

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021199962A1 (ja) * 2020-03-30 2021-10-07 テルモ株式会社 プログラム、情報処理方法および情報処理装置

Also Published As

Publication number Publication date
RU2017131509A (ru) 2019-04-10
EP3267896B1 (en) 2024-04-10
US20180049718A1 (en) 2018-02-22
RU2017131509A3 (ja) 2019-07-17
WO2016142183A1 (en) 2016-09-15
CN117122349A (zh) 2023-11-28
EP3267896A1 (en) 2018-01-17
EP4309585A1 (en) 2024-01-24
CN107427282A (zh) 2017-12-01
RU2708317C2 (ru) 2019-12-05

Similar Documents

Publication Publication Date Title
JP6987207B2 (ja) ユーザ制御による心臓モデル心室セグメンテーションを用いた心臓機能の超音波診断
JP4719680B2 (ja) 超音波による心臓ボリューム数量化方法
US8144956B2 (en) Ultrasonic diagnosis by quantification of myocardial performance
US6491636B2 (en) Automated border detection in ultrasonic diagnostic images
US7450746B2 (en) System and method for cardiac imaging
US20060058675A1 (en) Three dimensional atrium-ventricle plane detection
JP5670324B2 (ja) 医用画像診断装置
US20040249282A1 (en) System and method for extracting information based on ultrasound-located landmarks
WO2010116965A1 (ja) 医用画像診断装置、関心領域設定方法、医用画像処理装置、及び関心領域設定プログラム
JPH1142227A (ja) 組織の動き追尾方法及び超音波画像処理装置
JP7375140B2 (ja) 超音波診断装置、医用画像診断装置、医用画像処理装置及び医用画像処理プログラム
US20170265843A1 (en) Ultrasonic diagnostic apparatus, image processing apparatus, and image processing method
WO2017006236A1 (en) Ultrasound systems and methods for automatic determination of heart chamber characteristics
EP3267896B1 (en) Ultrasonic diagnosis of cardiac performance by single degree of freedom chamber segmentation
JP7132996B2 (ja) 単一自由度の心腔セグメント化による心臓性能の超音波診断

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190222

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190222

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20191217

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20191218

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20200309

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20200804

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20201203

C60 Trial request (containing other claim documents, opposition documents)

Free format text: JAPANESE INTERMEDIATE CODE: C60

Effective date: 20201203

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20201211

C21 Notice of transfer of a case for reconsideration by examiners before appeal proceedings

Free format text: JAPANESE INTERMEDIATE CODE: C21

Effective date: 20201215

A912 Re-examination (zenchi) completed and case transferred to appeal board

Free format text: JAPANESE INTERMEDIATE CODE: A912

Effective date: 20210129

C211 Notice of termination of reconsideration by examiners before appeal proceedings

Free format text: JAPANESE INTERMEDIATE CODE: C211

Effective date: 20210202

C22 Notice of designation (change) of administrative judge

Free format text: JAPANESE INTERMEDIATE CODE: C22

Effective date: 20210218

C23 Notice of termination of proceedings

Free format text: JAPANESE INTERMEDIATE CODE: C23

Effective date: 20210629

C22 Notice of designation (change) of administrative judge

Free format text: JAPANESE INTERMEDIATE CODE: C22

Effective date: 20210706

C03 Trial/appeal decision taken

Free format text: JAPANESE INTERMEDIATE CODE: C03

Effective date: 20210729

C30A Notification sent

Free format text: JAPANESE INTERMEDIATE CODE: C3012

Effective date: 20210729