JPWO2021153797A5 - コンピュータプログラム、学習モデルの生成方法、及び画像処理装置 - Google Patents

コンピュータプログラム、学習モデルの生成方法、及び画像処理装置 Download PDF

Info

Publication number
JPWO2021153797A5
JPWO2021153797A5 JP2021574738A JP2021574738A JPWO2021153797A5 JP WO2021153797 A5 JPWO2021153797 A5 JP WO2021153797A5 JP 2021574738 A JP2021574738 A JP 2021574738A JP 2021574738 A JP2021574738 A JP 2021574738A JP WO2021153797 A5 JPWO2021153797 A5 JP WO2021153797A5
Authority
JP
Japan
Prior art keywords
learning model
connective tissue
field image
information
computer program
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2021574738A
Other languages
English (en)
Other versions
JP7153974B2 (ja
JPWO2021153797A1 (ja
Filing date
Publication date
Priority claimed from PCT/JP2020/003481 external-priority patent/WO2021152784A1/ja
Application filed filed Critical
Publication of JPWO2021153797A1 publication Critical patent/JPWO2021153797A1/ja
Publication of JPWO2021153797A5 publication Critical patent/JPWO2021153797A5/ja
Application granted granted Critical
Publication of JP7153974B2 publication Critical patent/JP7153974B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Description

本発明は、コンピュータプログラム、学習モデルの生成方法、及び画像処理装置に関する。

Claims (15)

  1. コンピュータに、
    鏡視下手術の術野を撮像して得られる術野画像を取得し、
    術野画像を入力した場合、温存臓器と切除臓器との間の結合組織に関する情報を出力するように学習された学習モデルに、取得した術野画像を入力して、該術野画像に含まれる結合組織に関する情報を取得し、
    前記学習モデルから取得した情報に基づき、温存臓器と切除臓器との間の結合組織を処理する際のナビゲーション情報を出力する
    処理を実行させるためのコンピュータプログラム。
  2. 前記学習モデルは、術野画像を入力した場合、温存臓器と切除臓器との間の結合組織の認識結果を出力するよう学習してある
    請求項1に記載のコンピュータプログラム。
  3. 前記コンピュータに、
    前記学習モデルから出力される認識結果に基づき、前記結合組織の露出面積を算出し、
    算出した露出面積に基づき、前記結合組織の切断タイミングを決定し、
    決定した切断タイミングに関する情報を前記ナビゲーション情報として出力する
    処理を実行させるための請求項2に記載のコンピュータプログラム。
  4. 前記コンピュータに、
    前記学習モデルから出力される認識結果に基づき、前記結合組織の露出面積を算出し、
    算出した露出面積の多少を示すインジケータを前記ナビゲーション情報として出力する
    処理を実行させるための請求項2に記載のコンピュータプログラム。
  5. 前記コンピュータに、
    前記学習モデルから出力される認識結果に基づき、前記結合組織を展開又は切断する際の術具の操作方向を決定し、
    決定した操作方向に関する情報を前記ナビゲーション情報として出力する
    処理を実行させるための請求項2から請求項4の何れか1つに記載のコンピュータプログラム。
  6. 前記学習モデルは、術野画像を入力した場合、緊張状態にある結合組織を認識するよう学習してあり、
    前記学習モデルから出力される認識結果に基づき、結合組織の切断の適否を判断し、
    前記結合組織の切断の適否に関する情報をナビゲーション情報として出力する
    処理を実行させるための請求項2に記載のコンピュータプログラム。
  7. 前記学習モデルは、術野画像を入力した場合、温存臓器と切除臓器との間の結合組織の切断タイミングに関する情報を出力するよう学習してあり、
    前記学習モデルより得られる切断タイミングに関する情報を前記ナビゲーション情報として出力する
    処理を実行させるための請求項1に記載のコンピュータプログラム。
  8. 前記学習モデルは、術野画像を入力した場合、温存臓器と切除臓器との間の結合組織における切断部位に関する情報を出力するよう学習してあり、
    前記学習モデルより得られる切断部位に関する情報を前記ナビゲーション情報として出力する
    処理を実行させるための請求項1に記載のコンピュータプログラム。
  9. 前記学習モデルは、術野画像を入力した場合、解剖状態に関するスコアを出力するよう学習してある
    請求項1に記載のコンピュータプログラム。
  10. 前記学習モデルは、前記結合組織の露出面積、前記結合組織の緊張状態、前記結合組織の周囲に存在する構造物の多少、及び前記温存臓器の損傷度合いの少なくとも1つに応じて、前記スコアが変動するよう学習してある
    請求項9に記載のコンピュータプログラム。
  11. 前記学習モデルに入力した術野画像と、該術野画像を前記学習モデルに入力することによって得られたスコアとを関連付けて記憶装置に記憶させる
    処理を実行させるための請求項9又は請求項10に記載のコンピュータプログラム。
  12. 前記学習モデルは、処理対象領域の状態に応じて、前記スコアが変動するよう学習してあり、
    前記学習モデルから出力されるスコアに基づき、前記鏡視下手術を補助する補助者への指示を出力する
    処理を実行させるための請求項9から請求項11の何れか1つに記載のコンピュータプログラム。
  13. 術野画像を入力した場合、解剖状態の予測画像を生成するように学習された画像生成モデルに、取得した術野画像を入力して、前記術野画像に対する予測画像を取得し、
    取得した予測画像を前記ナビゲーション情報として出力する
    処理を実行させるための請求項1から請求項12の何れか1つに記載のコンピュータプログラム。
  14. コンピュータを用いて、
    鏡視下手術の術野を撮像して得られる術野画像と、該術野画像に含まれる温存臓器と切除臓器との間の結合組織に関する情報とを含む訓練データを取得し、
    取得した訓練データのセットに基づき、術野画像を入力した場合、温存臓器と切除臓器との間の結合組織に関する情報を出力する学習モデルを生成する
    学習モデルの生成方法。
  15. 鏡視下手術の術野を撮像して得られる術野画像を取得する第1取得部と、
    術野画像を入力した場合、温存臓器と切除臓器との間の結合組織に関する情報を出力するように学習された学習モデルに、取得した術野画像を入力して、該術野画像に含まれる結合組織に関する情報を取得する第2取得部と、
    前記学習モデルから取得した情報に基づき、温存臓器と切除臓器との間の結合組織を処理する際のナビゲーション情報を出力する出力部と
    を備える画像処理装置。
JP2021574738A 2020-01-30 2021-02-01 コンピュータプログラム、学習モデルの生成方法、及び画像処理装置 Active JP7153974B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JPPCT/JP2020/003481 2020-01-30
PCT/JP2020/003481 WO2021152784A1 (ja) 2020-01-30 2020-01-30 手術支援システム
PCT/JP2021/003489 WO2021153797A1 (ja) 2020-01-30 2021-02-01 コンピュータプログラム、学習モデルの生成方法、画像処理装置、及び手術支援システム

Publications (3)

Publication Number Publication Date
JPWO2021153797A1 JPWO2021153797A1 (ja) 2021-08-05
JPWO2021153797A5 true JPWO2021153797A5 (ja) 2022-07-22
JP7153974B2 JP7153974B2 (ja) 2022-10-17

Family

ID=77078283

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2021574738A Active JP7153974B2 (ja) 2020-01-30 2021-02-01 コンピュータプログラム、学習モデルの生成方法、及び画像処理装置

Country Status (4)

Country Link
US (1) US20230098859A1 (ja)
JP (1) JP7153974B2 (ja)
CN (1) CN115023193A (ja)
WO (2) WO2021152784A1 (ja)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20230281968A1 (en) * 2020-07-30 2023-09-07 Anaut Inc. Recording Medium, Method for Generating Learning Model, Surgical Support Device and Information Processing Method
JP7413216B2 (ja) * 2020-09-15 2024-01-15 富士フイルム株式会社 学習装置、方法およびプログラム、学習済みモデル、並びに放射線画像処理装置、方法およびプログラム
CN117956939A (zh) * 2021-11-04 2024-04-30 阿瑙特株式会社 计算机程序、学习模型的生成方法、以及信息处理装置

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8594841B2 (en) * 2008-12-31 2013-11-26 Intuitive Surgical Operations, Inc. Visual force feedback in a minimally invasive surgical procedure
JP5797124B2 (ja) * 2012-01-31 2015-10-21 富士フイルム株式会社 手術支援装置、手術支援方法および手術支援プログラム
WO2017109912A1 (ja) * 2015-12-24 2017-06-29 オリンパス株式会社 医療用マニピュレータシステムとその画像表示方法
CN109414151B (zh) * 2016-05-18 2022-11-25 国立大学法人三重大学 癌症检测装置、癌症检测方法和用于癌症检测的染色剂
US10610302B2 (en) * 2016-09-20 2020-04-07 Siemens Healthcare Gmbh Liver disease assessment in medical imaging
JP6890184B2 (ja) * 2017-09-15 2021-06-18 富士フイルム株式会社 医療画像処理装置及び医療画像処理プログラム
JP6749020B2 (ja) * 2017-11-29 2020-09-02 水野 裕子 内視鏡ナビゲーション装置
JP2019162339A (ja) 2018-03-20 2019-09-26 ソニー株式会社 手術支援システムおよび表示方法
JP7127785B2 (ja) 2018-11-30 2022-08-30 オリンパス株式会社 情報処理システム、内視鏡システム、学習済みモデル、情報記憶媒体及び情報処理方法

Similar Documents

Publication Publication Date Title
JPWO2021153797A5 (ja) コンピュータプログラム、学習モデルの生成方法、及び画像処理装置
US20220125519A1 (en) Augmented reality assisted joint arthroplasty
JP2022145863A (ja) インジケータシステム
CN109074665A (zh) 用于在基于医学成像的程序中导航到目标解剖对象的系统和方法
Katić et al. Knowledge-driven formalization of laparoscopic surgeries for rule-based intraoperative context-aware assistance
KR102536732B1 (ko) 외과 수술들의 컴퓨터-지원 시뮬레이션을 위한 디바이스 및 방법
US20210244481A1 (en) Multi-level positional tracking
US20210244474A1 (en) Mixed-reality endoscope and surgical tools with haptic feedback for integrated virtual-reality visual and haptic surgical simulation
JP2020089710A5 (ja)
US11810360B2 (en) Methods for arthroscopic surgery video segmentation and devices therefor
JP2019521829A (ja) 画像セレクタを有する超音波イメージング装置
US11250726B2 (en) System for simulation of soft bodies
WO2021153797A8 (ja) コンピュータプログラム、学習モデルの生成方法、画像処理装置、及び手術支援システム
TW202038867A (zh) 用於醫療用具的光學追蹤系統及訓練系統
US11810356B2 (en) Methods for arthroscopic video analysis and devices therefor
Tai et al. A high-immersive medical training platform using direct intraoperative data
US20230245753A1 (en) Systems and methods for ai-assisted surgery
WO2021166208A1 (ja) 画像処理システム、内視鏡システム及び画像処理方法
CN115944388B (zh) 手术内窥镜位置引导方法、装置、计算机设备及存储介质
Kil et al. Surgical suturing with depth constraints: Image-based metrics to assess skill
CN114025701A (zh) 手术工具尖端和朝向确定
US11830189B2 (en) Systems and methods to process ultrasound images for musculoskeletal conditions
CN114945990A (zh) 用于基于操作情境提供外科手术辅助的系统和方法
EP3930584A1 (en) Methods of measuring force using a tracking system
WO2023162479A1 (ja) 情報処理装置、情報処理方法、及びプログラム