JP2019005558A - 手術決定支援用のインコンテキストフォトリアリスティック三次元視覚化 - Google Patents
手術決定支援用のインコンテキストフォトリアリスティック三次元視覚化 Download PDFInfo
- Publication number
- JP2019005558A JP2019005558A JP2018094673A JP2018094673A JP2019005558A JP 2019005558 A JP2019005558 A JP 2019005558A JP 2018094673 A JP2018094673 A JP 2018094673A JP 2018094673 A JP2018094673 A JP 2018094673A JP 2019005558 A JP2019005558 A JP 2019005558A
- Authority
- JP
- Japan
- Prior art keywords
- sub
- region
- parameters
- data set
- image data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012800 visualization Methods 0.000 title claims abstract description 62
- 238000001356 surgical procedure Methods 0.000 title description 3
- 238000000034 method Methods 0.000 claims abstract description 68
- 238000009877 rendering Methods 0.000 claims abstract description 27
- 238000005266 casting Methods 0.000 claims abstract description 11
- 238000005070 sampling Methods 0.000 claims description 42
- 239000000463 material Substances 0.000 claims description 8
- 238000004590 computer program Methods 0.000 claims description 6
- 238000002360 preparation method Methods 0.000 claims description 3
- 210000000056 organ Anatomy 0.000 description 18
- 206010028980 Neoplasm Diseases 0.000 description 15
- 210000004204 blood vessel Anatomy 0.000 description 13
- 210000004185 liver Anatomy 0.000 description 8
- 238000002591 computed tomography Methods 0.000 description 7
- 230000006870 function Effects 0.000 description 4
- 238000005286 illumination Methods 0.000 description 4
- 239000007943 implant Substances 0.000 description 4
- 238000004458 analytical method Methods 0.000 description 3
- 210000003484 anatomy Anatomy 0.000 description 3
- 230000000694 effects Effects 0.000 description 3
- 238000007794 visualization technique Methods 0.000 description 3
- 206010019695 Hepatic neoplasm Diseases 0.000 description 2
- 238000013459 approach Methods 0.000 description 2
- 210000001367 artery Anatomy 0.000 description 2
- 238000009792 diffusion process Methods 0.000 description 2
- 201000010099 disease Diseases 0.000 description 2
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 description 2
- 238000003384 imaging method Methods 0.000 description 2
- 208000014018 liver neoplasm Diseases 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 230000011218 segmentation Effects 0.000 description 2
- 230000009466 transformation Effects 0.000 description 2
- 238000002834 transmittance Methods 0.000 description 2
- 210000005166 vasculature Anatomy 0.000 description 2
- 238000012935 Averaging Methods 0.000 description 1
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 description 1
- 238000000342 Monte Carlo simulation Methods 0.000 description 1
- 238000002679 ablation Methods 0.000 description 1
- 230000002159 abnormal effect Effects 0.000 description 1
- 238000013528 artificial neural network Methods 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000002301 combined effect Effects 0.000 description 1
- 238000005520 cutting process Methods 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 238000003709 image segmentation Methods 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 210000004088 microvessel Anatomy 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 239000012466 permeate Substances 0.000 description 1
- 210000003240 portal vein Anatomy 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 238000012549 training Methods 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 230000001228 trophic effect Effects 0.000 description 1
- 210000003462 vein Anatomy 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T15/00—3D [Three Dimensional] image rendering
- G06T15/08—Volume rendering
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/46—Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient
- A61B8/461—Displaying means of special interest
- A61B8/466—Displaying means of special interest adapted to display 3D data
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/48—Diagnostic techniques
- A61B8/483—Diagnostic techniques involving the acquisition of a 3D volume of data
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/52—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/5215—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data
- A61B8/523—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data for generating planar views from image data in a user selectable plane not corresponding to the acquisition plane
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T15/00—3D [Three Dimensional] image rendering
- G06T15/06—Ray-tracing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T15/00—3D [Three Dimensional] image rendering
- G06T15/10—Geometric effects
- G06T15/30—Clipping
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/003—Navigation within 3D models or images
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2210/00—Indexing scheme for image generation or computer graphics
- G06T2210/41—Medical
Abstract
Description
第1組のパラメータ(即ち、参照組のパラメータ)を第1のオブジェクトに割り当てるステップと、
第2組のパラメータ(即ち、インコンテキスト組の分類パラメータ)を第2のオブジェクトに割り当てるステップと、
医用画像データセットを、第1のサブ領域(即ち、参照サブ領域)と第2のサブ領域(即ち、インコンテキストサブ領域、詳細には関心領域)に分割するステップと、
三次元構成の視覚化をボリュームレンダリング法(VRM)によって、詳細には、レイキャスティング法又はボリュームパストレーシング法によって提供するステップとを含み、第1組のパラメータが、第1のオブジェクトを視覚化するための第1のサブ領域に適用され、第2組のパラメータが、第2のオブジェクトを視覚化するための第2のサブ領域に適用される。
第1組のパラメータを第1のサブ領域内にあるサンプリング点に割り当てるステップ、及び/又は、
第2組のパラメータを第2のサブボリューム内にあるサンプリング点に割り当てるステップを含むボリュームレンダリング法が提供される。そのようなボリュームレンダリング法は、パストレーシングボリュームレンダリング法としても知られ、レイパスをボリューム内に進めてレイパスに沿って各交差サンプリング点をサンプリングし、レイパスは、ボリューム内の構造物ではね返るか透過するか反射し、最終的に光に遭遇したときに見えるようになる。
サンプリング点が第2のサブ領域内にあり、かつ詳細には非コンテキストモードが選択されている場合に、レイパスに沿ったサンプリング点を無視するステップと、
第1のサブ領域内のサンプリング点に第1組の分類パラメータを適用するステップと、
詳細にはインコンテキストモードが選択された場合に、第2組の分類パラメータを第2のサブ領域内のサンプリング点に適用するステップとを含む。
第1組の分類パラメータを第1のオブジェクトに割り当て、
第2組の分類パラメータを第2のオブジェクトに割り当て、
表示可能なボリュームを第1のサブ領域と第2のサブ領域に分割し、
ボリュームレンダリング法(詳細には、パストレーシング法)によって三次元構成の視覚化を提供するよう構成された装置を含んでおり、第1組の分類パラメータが第1のサブ領域に適用され、第2組の分類パラメータが第2のサブ領域に適用される。システムは、プロセッサ、画面などの表示装置、及び/又は人間機械インタフェースとしての入力装置を含むことが好ましい。
第1組のパラメータp_1を第1のオブジェクト1(例えば、臓器)に割り当てるステップ21と、
第2組のパラメータp_2を第2のオブジェクト2(例えば、血管又は埋没物)に割り当てるステップ21と、
第1のサブ領域11と第2のサブ領域12内の画像データセットを、好ましくはクリッピング要素10によって分割するステップ22と、
ボリュームレンダリング法(VRM)によって(詳細には、レイキャスティング法によって)三次元構成の視覚化を提供するステップとを含み、第1組のパラメータp_1が、第1のオブジェクト1を視覚化するための第1のサブ領域11に適用され、第2組のパラメータp_2が、第2のオブジェクト2を視覚化するための第2のサブ領域12に適用される方法が提供される。この方法は、第1のオブジェクトの視覚化部分が、第1のサブ領域11に対応する第1の視覚化サブ領域11’内に表され、第2のオブジェクト2の視覚化部分が、第2のサブ領域12に対応する第2の視覚化サブ領域12’内に表されることが好ましい。
画像データセットを第1のサブ領域11と第2のサブ領域12に分割するステップ22の後で、表示ボリュームのサンプリング点が、クリッピング要素10及び/又は更に他のクリッピング要素によって切り抜かれるかを確認するステップ、
クリッピング要素及び/又は更に他のクリッピング要素の識別(ID)をサンプリング点に割り当てるステップ、及び/又は、
第1組の分類パラメータ又は第2組の分類パラメータをサンプリング点に割り当てるステップが提供されることが好ましい。
サンプリング点が、クリッピング要素10及び/又は更に他のクリッピング要素によって切り抜かれ、かつ非コンテキストモードが選択された場合に、サンプリング点を無視するステップ27と、
インコンテキストモードが選択された場合に、第1組の分類パラメータp_1を、第1のサブ領域12内のサンプリング点に適用するステップ25と、
インコンテキストモードが選択された場合に、第2組の分類パラメータp_2を第2のサブ領域12内のサンプリング点に適用するステップ25とを含む。
10 クリッピング要素
11,12 サブ領域
Claims (14)
- 画像データセット(詳細には、医用画像データセット)を視覚化する方法であって、前記視覚化データセットが、少なくとも第1のオブジェクトと第2のオブジェクトとを有する三次元構成を表示し、
前記第1のオブジェクト(1)に第1組のパラメータ(p_1)を割り当てるステップ(21)と、
前記第2のオブジェクト(2)に第2組のパラメータ(p_2)を割り当てるステップ(21)と、
前記医用画像データセットを第1のサブ領域(11)と第2のサブ領域(12)に分割するステップ(22)と、
ボリュームレンダリング法(VRM)によって、詳細にはレイキャスティング法又はフォトリアリスティックボリュームパストレーシングによって、前記三次元構成の視覚化を提供するステップとを含み、
前記第1組のパラメータ(p_1)が、前記第1のオブジェクト(1)を視覚化するための前記第1のサブ領域(11)に適用され、前記第2組のパラメータ(p_2)が、前記第2のオブジェクト(2)を視覚化するための前記第2のサブ領域(12)に適用される方法。 - 前記第1組のパラメータ(p_1)及び前記第2組のパラメータ(p_2)の少なくとも一方のパラメータが、材料パラメータである、請求項1に記載の方法。
- 同じ組の基本分類色テンプレートが、速度とメモリを最適化しかつ色統一性を保存するために前記第1及び第2のサブ領域に適用可能であり、前記第1のサブ領域と前記第2のサブ領域のそれぞれ不透明度と材料分類だけが変更される、請求項2に記載の方法。
- 前記画像データセットが、クリッピング要素(10)(詳細には、クリッピング面)によって前記第1のサブ領域(11)と前記第2のサブ領域(12)に分割される、請求項1から3のいずれかに記載の方法。
- パスレイに沿ったサンプリング点が前記第2のサブ領域(12)内にある場合に、前記サンプリング点を無視するステップ(27)と、
前記第1組の分類パラメータを前記第1のサブ領域内の前記サンプリング点に適用するステップ(25)と、
前記第2組の分類パラメータを前記第2のサブ領域(12)内の前記サンプリング点に適用するステップ(25)とを含む、請求項1から4のいずれかに記載の方法。 - MPRモード(25)が提供され、前記MPRモードで、前記クリッピング要素上に多断面変換(MPR)が付加的に示され、好ましくは、選択的不透過値が、MPRモード描写ステップ中である、請求項5に記載の方法。
- 前記クリッピング要素(10)が移動可能であり、好ましくは、前記クリッピング要素(10)の移動中にサンプリング量が減少される、請求項1から6のいずれかに記載の方法。
- 前記クリッピング要素(10)上にあるサンプリング点のサンプリング繰り返しが、前記第2のサブ領域(12)内及び前記第1のサブ領域(11)内の少なくとも一方にあるサンプリング点のサンプリング繰り返しよりも多い、請求項5から7のいずれかに記載の方法。
- 準備ステップで、データセットが選択され、前記データセットが、画像データセットとメタデータ情報を含む、請求項1から8のいずれかに記載の方法。
- 前記第1組のパラメータ(p_1)と前記第2組のパラメータ(p_2)を割り当てるステップが、例えば前記メタデータ情報に基づいて自動的に実行される、請求項1から9のいずれかに記載の方法。
- 前記画像データセットが、前記第1のサブ領域(11)と前記第2のサブ領域(12)に自動的に分割される、請求項1から10のいずれかに記載の方法。
- 前記分類パラメータが、前記メタデータ情報に基づくかワークフローによって選択される、請求項1から11のいずれかに記載の方法。
- 画像データセット(詳細には、医用画像データセット)を視覚化するためのシステムであって、前記視覚化データセットが、少なくとも第1のオブジェクトと第2のオブジェクトがある三次元構成を表示し、
第1組の分類パラメータを前記第1のオブジェクト(1)に割り当て、
第2組の分類パラメータを前記第2のオブジェクト(2)に割り当て、
前記表示可能なボリュームを第1のサブ領域(11)と第2のサブ領域(12)に分割し、
ボリュームレンダリング法(詳細には、レイキャスティング法)によって前記三次元構成の前記視覚化を提供し、前記第1組の分類パラメータが、前記第1のサブ領域(11)に適用され、前記第2組の分類パラメータが、前記第2のサブ領域(12)に適用されるように構成された装置を含むシステム。 - コンピュータプログラム製品が、プログラマブル装置のメモリにロードされる、請求項1から13のいずれかに記載の方法のステップを実行するためのコンピュータプログラム製品。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US15/610,804 US10692273B2 (en) | 2017-06-01 | 2017-06-01 | In-context photorealistic 3D visualization for surgical decision support |
US15/610,804 | 2017-06-01 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2019005558A true JP2019005558A (ja) | 2019-01-17 |
JP6981726B2 JP6981726B2 (ja) | 2021-12-17 |
Family
ID=62116745
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018094673A Active JP6981726B2 (ja) | 2017-06-01 | 2018-05-16 | 手術決定支援用のインコンテキストフォトリアリスティック三次元視覚化 |
Country Status (4)
Country | Link |
---|---|
US (1) | US10692273B2 (ja) |
EP (1) | EP3410403B1 (ja) |
JP (1) | JP6981726B2 (ja) |
CN (1) | CN108986196B (ja) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2019045144A1 (ko) | 2017-08-31 | 2019-03-07 | (주)레벨소프트 | 의료용 항법 장치를 위한 의료 영상 처리 장치 및 의료 영상 처리 방법 |
CN109978000A (zh) * | 2019-02-19 | 2019-07-05 | 深圳点猫科技有限公司 | 一种基于图形化编程工具的分类ai实现方法及电子设备 |
CN111612792B (zh) * | 2019-02-22 | 2024-03-08 | 曹生 | 基于VRDS 4D医学影像的静脉的Ai内镜分析方法及产品 |
WO2020202612A1 (ja) * | 2019-03-29 | 2020-10-08 | 富士フイルム株式会社 | 画像処理装置、方法およびプログラム |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002503855A (ja) * | 1998-02-17 | 2002-02-05 | サン・マイクロシステムズ・インコーポレーテッド | 可変解像度スーパーサンプリングによるグラフィックス・システム |
US20070229500A1 (en) * | 2006-03-30 | 2007-10-04 | Siemens Corporate Research, Inc. | System and method for in-context mpr visualization using virtual incision volume visualization |
JP2011200625A (ja) * | 2010-03-05 | 2011-10-13 | Fujifilm Corp | 画像診断支援装置、方法およびプログラム |
JP2015114775A (ja) * | 2013-12-10 | 2015-06-22 | キヤノン株式会社 | 画像処理装置および画像処理方法 |
JP2016202247A (ja) * | 2015-04-15 | 2016-12-08 | 東芝メディカルシステムズ株式会社 | 画像処理装置及びx線診断装置 |
Family Cites Families (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3836097B2 (ja) * | 2003-09-19 | 2006-10-18 | ザイオソフト株式会社 | 医用画像生成装置および方法、ならびに、プログラム |
US8466916B2 (en) * | 2006-02-21 | 2013-06-18 | Siemens Aktiengesellschaft | System and method for in-context volume visualization using virtual incision |
US9058679B2 (en) * | 2007-09-26 | 2015-06-16 | Koninklijke Philips N.V. | Visualization of anatomical data |
DE602007006811D1 (de) * | 2007-10-09 | 2010-07-08 | Agfa Healthcare Nv | Verfahren und Vorrichtung zur Volumendarstellung medizinischer Datensätze |
EP2144199B1 (en) * | 2008-07-11 | 2018-12-26 | Agfa HealthCare NV | Method and apparatus for multimodal visualization of volume data sets |
JP5545971B2 (ja) | 2010-03-26 | 2014-07-09 | 株式会社不動テトラ | 土壌浄化方法 |
US9076247B2 (en) * | 2012-08-10 | 2015-07-07 | Ppg Industries Ohio, Inc. | System and method for visualizing an object in a simulated environment |
US9536342B2 (en) * | 2014-08-15 | 2017-01-03 | Intel Corporation | Automatic partitioning techniques for multi-phase pixel shading |
EP3270770A1 (en) * | 2015-03-18 | 2018-01-24 | Canfield Scientific, Incorporated | Methods and apparatus for identifying skin features of interest |
CN106652012A (zh) * | 2016-12-09 | 2017-05-10 | 江西中科九峰智慧医疗科技有限公司 | 医学图像体绘制的方法及系统 |
-
2017
- 2017-06-01 US US15/610,804 patent/US10692273B2/en active Active
-
2018
- 2018-05-04 EP EP18170874.4A patent/EP3410403B1/en active Active
- 2018-05-16 JP JP2018094673A patent/JP6981726B2/ja active Active
- 2018-06-01 CN CN201810562281.8A patent/CN108986196B/zh active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002503855A (ja) * | 1998-02-17 | 2002-02-05 | サン・マイクロシステムズ・インコーポレーテッド | 可変解像度スーパーサンプリングによるグラフィックス・システム |
US20070229500A1 (en) * | 2006-03-30 | 2007-10-04 | Siemens Corporate Research, Inc. | System and method for in-context mpr visualization using virtual incision volume visualization |
JP2011200625A (ja) * | 2010-03-05 | 2011-10-13 | Fujifilm Corp | 画像診断支援装置、方法およびプログラム |
JP2015114775A (ja) * | 2013-12-10 | 2015-06-22 | キヤノン株式会社 | 画像処理装置および画像処理方法 |
JP2016202247A (ja) * | 2015-04-15 | 2016-12-08 | 東芝メディカルシステムズ株式会社 | 画像処理装置及びx線診断装置 |
Also Published As
Publication number | Publication date |
---|---|
EP3410403A3 (en) | 2019-02-06 |
CN108986196A (zh) | 2018-12-11 |
EP3410403B1 (en) | 2023-08-30 |
JP6981726B2 (ja) | 2021-12-17 |
US20180350129A1 (en) | 2018-12-06 |
US10692273B2 (en) | 2020-06-23 |
EP3410403A2 (en) | 2018-12-05 |
CN108986196B (zh) | 2024-03-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9330485B2 (en) | Volume rendering of medical images | |
CN107924580B (zh) | 在医学成像中的表面体积混合模块的可视化 | |
JP6981726B2 (ja) | 手術決定支援用のインコンテキストフォトリアリスティック三次元視覚化 | |
CN109584349B (zh) | 用于渲染材料属性的方法和设备 | |
US7924279B2 (en) | Protocol-based volume visualization | |
CN108701370A (zh) | 基于机器学习的基于内容的医学成像渲染 | |
JP2016193196A (ja) | 医用画像処理装置 | |
JP4105176B2 (ja) | 画像処理方法および画像処理プログラム | |
JP2020506452A (ja) | Hmdsに基づく医学画像形成装置 | |
US11810243B2 (en) | Method of rendering a volume and a surface embedded in the volume | |
US9224236B2 (en) | Interactive changing of the depiction of an object displayed using volume rendering | |
US20130135306A1 (en) | Method and device for efficiently editing a three-dimensional volume using ray casting | |
Bozorgi et al. | GPU-based multi-volume ray casting within VTK for medical applications | |
Jainek et al. | Illustrative hybrid visualization and exploration of anatomical and functional brain data | |
Manssour et al. | Visualizing inner structures in multimodal volume data | |
WO2006067714A2 (en) | Transparency change of view-obscuring objects | |
CN114387380A (zh) | 用于生成3d医学图像数据的基于计算机的可视化的方法 | |
Fiorentino et al. | Cinematic rendering technique in adult congenital heart disease | |
CN110998668A (zh) | 利用依赖于对象的聚焦参数使图像数据集可视化 | |
CA2365062A1 (en) | Fast review of scanned baggage, and visualization and extraction of 3d objects of interest from the scanned baggage 3d dataset | |
Sharifi | Enhancing Visual Perception in Interactive Direct Volume Rendering of Medical Images | |
Ajani et al. | Volumetric Clipping Surface: Un-occluded visualization of structures preserving depth cues into surrounding organs | |
Monclús Lahoya | Advanced interaction techniques for medical models | |
JP2022138098A (ja) | 医用画像処理装置および方法 | |
CN111724388A (zh) | 医学图像数据的可视化 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180803 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20180803 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20190419 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20190521 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20190820 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20191018 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20200121 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200515 |
|
C60 | Trial request (containing other claim documents, opposition documents) |
Free format text: JAPANESE INTERMEDIATE CODE: C60 Effective date: 20200515 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20200601 |
|
C21 | Notice of transfer of a case for reconsideration by examiners before appeal proceedings |
Free format text: JAPANESE INTERMEDIATE CODE: C21 Effective date: 20200602 |
|
A912 | Re-examination (zenchi) completed and case transferred to appeal board |
Free format text: JAPANESE INTERMEDIATE CODE: A912 Effective date: 20200612 |
|
C211 | Notice of termination of reconsideration by examiners before appeal proceedings |
Free format text: JAPANESE INTERMEDIATE CODE: C211 Effective date: 20200616 |
|
C22 | Notice of designation (change) of administrative judge |
Free format text: JAPANESE INTERMEDIATE CODE: C22 Effective date: 20200707 |
|
C22 | Notice of designation (change) of administrative judge |
Free format text: JAPANESE INTERMEDIATE CODE: C22 Effective date: 20201117 |
|
C13 | Notice of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: C13 Effective date: 20201201 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20210224 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20210329 |
|
C22 | Notice of designation (change) of administrative judge |
Free format text: JAPANESE INTERMEDIATE CODE: C22 Effective date: 20210413 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20210426 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210521 |
|
C22 | Notice of designation (change) of administrative judge |
Free format text: JAPANESE INTERMEDIATE CODE: C22 Effective date: 20210706 |
|
C23 | Notice of termination of proceedings |
Free format text: JAPANESE INTERMEDIATE CODE: C23 Effective date: 20210914 |
|
C03 | Trial/appeal decision taken |
Free format text: JAPANESE INTERMEDIATE CODE: C03 Effective date: 20211019 |
|
C30A | Notification sent |
Free format text: JAPANESE INTERMEDIATE CODE: C3012 Effective date: 20211019 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20211116 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6981726 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |