JP2021122487A - 教師画像生成装置、方法およびプログラム、学習装置、方法およびプログラム、判別器、並びに放射線画像処理装置、方法およびプログラム - Google Patents

教師画像生成装置、方法およびプログラム、学習装置、方法およびプログラム、判別器、並びに放射線画像処理装置、方法およびプログラム Download PDF

Info

Publication number
JP2021122487A
JP2021122487A JP2020017709A JP2020017709A JP2021122487A JP 2021122487 A JP2021122487 A JP 2021122487A JP 2020017709 A JP2020017709 A JP 2020017709A JP 2020017709 A JP2020017709 A JP 2020017709A JP 2021122487 A JP2021122487 A JP 2021122487A
Authority
JP
Japan
Prior art keywords
image
surgical tool
teacher
discriminator
radiation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2020017709A
Other languages
English (en)
Other versions
JP7394645B2 (ja
Inventor
紳 浜渦
Shin Hamauzu
紳 浜渦
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Priority to JP2020017709A priority Critical patent/JP7394645B2/ja
Priority to US17/160,910 priority patent/US11978549B2/en
Publication of JP2021122487A publication Critical patent/JP2021122487A/ja
Application granted granted Critical
Publication of JP7394645B2 publication Critical patent/JP7394645B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00—ICT specially adapted for the handling or processing of medical images
    • G16H30/40—ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/12—Arrangements for detecting or locating foreign bodies
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/52—Devices using data or image processing specially adapted for radiation diagnosis
    • A61B6/5211—Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data
    • A61B6/5229—Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data combining image data of a patient, e.g. combining a functional image with an anatomical image
    • A61B6/5247—Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data combining image data of a patient, e.g. combining a functional image with an anatomical image combining images from an ionising-radiation diagnostic technique and a non-ionising radiation diagnostic technique, e.g. X-ray and ultrasound
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/52—Devices using data or image processing specially adapted for radiation diagnosis
    • A61B6/5258—Devices using data or image processing specially adapted for radiation diagnosis involving detection or reduction of artifacts or noise
    • A61B6/5282—Devices using data or image processing specially adapted for radiation diagnosis involving detection or reduction of artifacts or noise due to scatter
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61F—FILTERS IMPLANTABLE INTO BLOOD VESSELS; PROSTHESES; DEVICES PROVIDING PATENCY TO, OR PREVENTING COLLAPSING OF, TUBULAR STRUCTURES OF THE BODY, e.g. STENTS; ORTHOPAEDIC, NURSING OR CONTRACEPTIVE DEVICES; FOMENTATION; TREATMENT OR PROTECTION OF EYES OR EARS; BANDAGES, DRESSINGS OR ABSORBENT PADS; FIRST-AID KITS
    • A61F13/00—Bandages or dressings; Absorbent pads
    • A61F13/15—Absorbent pads, e.g. sanitary towels, swabs or tampons for external or internal application to the body; Supporting or fastening means therefor; Tampon applicators
    • A61F13/44—Absorbent pads, e.g. sanitary towels, swabs or tampons for external or internal application to the body; Supporting or fastening means therefor; Tampon applicators with radio-opaque material or signalling means for residual material
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/21—Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
    • G06F18/214—Generating training patterns; Bootstrap methods, e.g. bagging or boosting
    • G06F18/2148—Generating training patterns; Bootstrap methods, e.g. bagging or boosting characterised by the process organisation or structure, e.g. boosting cascade
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/24—Classification techniques
    • G06F18/241—Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches
    • G06F18/2413—Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches based on distances to training or reference patterns
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/25—Fusion techniques
    • G06F18/251—Fusion techniques of input or preprocessed data
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00—Computing arrangements based on biological models
    • G06N3/02—Neural networks
    • G06N3/08—Learning methods
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/77—Retouching; Inpainting; Scratch removal
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/764—Arrangements for image or video recognition or understanding using pattern recognition or machine learning using classification, e.g. of video objects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/77—Processing image or video features in feature spaces; using data integration or data reduction, e.g. principal component analysis [PCA] or independent component analysis [ICA] or self-organising maps [SOM]; Blind source separation
    • G06V10/774—Generating sets of training patterns; Bootstrap methods, e.g. bagging or boosting
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/82—Arrangements for image or video recognition or understanding using pattern recognition or machine learning using neural networks
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H20/00—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance
    • G16H20/40—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance relating to mechanical, radiation or invasive therapies, e.g. surgery, laser therapy, dialysis or acupuncture
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H40/00—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
    • G16H40/60—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices
    • G16H40/63—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices for local operation
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2576/00—Medical imaging apparatus involving image processing or analysis
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10116—X-ray image
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20081—Training; Learning
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20084—Artificial neural networks [ANN]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20092—Interactive image processing based on input by user
    • G06T2207/20104—Interactive definition of region of interest [ROI]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20212—Image combination
    • G06T2207/20221—Image fusion; Image merging
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30004—Biomedical image processing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V2201/00—Indexing scheme relating to image or video recognition or understanding
    • G06V2201/03—Recognition of patterns in medical or anatomical images
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V2201/00—Indexing scheme relating to image or video recognition or understanding
    • G06V2201/03—Recognition of patterns in medical or anatomical images
    • G06V2201/034—Recognition of patterns in medical or anatomical images of medical instruments

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Theoretical Computer Science (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Medical Informatics (AREA)
  • General Health & Medical Sciences (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Evolutionary Computation (AREA)
  • Biomedical Technology (AREA)
  • Public Health (AREA)
  • Artificial Intelligence (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Surgery (AREA)
  • Data Mining & Analysis (AREA)
  • Molecular Biology (AREA)
  • Software Systems (AREA)
  • Computing Systems (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Veterinary Medicine (AREA)
  • Animal Behavior & Ethology (AREA)
  • Radiology & Medical Imaging (AREA)
  • Biophysics (AREA)
  • Epidemiology (AREA)
  • Databases & Information Systems (AREA)
  • Multimedia (AREA)
  • General Engineering & Computer Science (AREA)
  • Pathology (AREA)
  • Primary Health Care (AREA)
  • High Energy & Nuclear Physics (AREA)
  • Optics & Photonics (AREA)
  • Evolutionary Biology (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Computational Linguistics (AREA)
  • Mathematical Physics (AREA)
  • Robotics (AREA)
  • Business, Economics & Management (AREA)
  • General Business, Economics & Management (AREA)

Abstract

【課題】教師画像生成装置、方法およびプログラム、学習装置、方法およびプログラム、判別器、並びに放射線画像処理装置、方法およびプログラムにおいて、手術後における手術用具の患者体内の残存を確実に防止できるようにする。
【解決手段】プロセッサは、人体を含む放射線画像、および放射線撮影以外の手法により取得された、手術用具を表す手術用具画像を取得する。プロセッサは、放射線画像に手術用具画像を合成することにより、対象画像が入力されると対象画像における手術用具の領域を判別する判別器を学習するための教師画像を生成する。
【選択図】図２

Description

本開示は、教師画像生成装置、方法およびプログラム、学習装置、方法およびプログラム、判別器、並びに放射線画像処理装置、方法およびプログラムに関するものである。
患者の外科的手術を行う際には、出血を抑えるためのガーゼ、傷口または切開部分を縫うための糸と縫合針、切開のためのメスおよび鋏、血液を排出するためのドレイン、並びに切開部分を開くための鉗子等の様々な手術用具が使用される。このような手術用具は、手術後に患者の体内に残存していると、重篤な合併症を発生する恐れがある。このため、手術後は患者の体内に手術用具が残存していないことを確認する必要がある。
このため、ガーゼ画像の特徴を学習した判別器を用意し、手術野をカメラにより撮影することにより取得した画像を判別器に入力して、ガーゼの有無を判別する手法が提案されている（特許文献１参照）。
特開２０１８−０６８８６３号公報
しかしながら、ガーゼは血に染まるため、カメラにより取得した画像ではガーゼを発見することは判別器を用いたとしても困難である。また、縫合針のように小さな手術用具は、内臓の間に入り込んでしまう可能性があるため、カメラにより取得した画像では、判別器を用いたとしても発見することは困難である。一方、術後に患者の放射線画像を取得し、放射線画像を観察することにより、患者の体内に手術用具が残存しているか否かを確認することが考えられる。しかしながら、長時間の手術の後では、術者も看護師も疲労しているため、手術用具の残存を見逃してしまう可能性がある。また、判別器の学習に必要なガーゼ等の手術器具が残存した放射線画像は極めて稀であるため、判別器の学習のために大量に収集することは困難である。
本開示は上記事情に鑑みなされたものであり、手術後における手術用具の患者体内の残存を確実に防止できるようにすることを目的とする。
本開示による教師画像生成装置は、少なくとも１つのプロセッサを備え、
プロセッサは、
人体を含む放射線画像、および放射線撮影以外の手法により取得された、手術用具を表す手術用具画像を取得し、
放射線画像に手術用具画像を合成することにより、対象画像が入力されると対象画像における手術用具の領域を判別する判別器を学習するための教師画像を生成するように構成される。
「放射線撮影以外の手法」とは、手術用具に放射線を照射し、手術用具を透過した放射線を検出することにより画像を取得する以外の手法を意味する。具体的には、コンピュータグラフィックスによる生成、および写真撮影の手法等が挙げられる。
なお、本開示による教師画像生成装置においては、プロセッサは、手術用具の特性に応じた合成パラメータによって放射線画像および手術用具画像を合成することにより、教師画像を生成するように構成されるものであってもよい。
また、本開示による教師画像生成装置においては、プロセッサは、手術用具の放射線吸収率、放射線画像における放射線散乱の程度、放射線画像におけるビームハードニング、および放射線画像の撮影条件に応じたノイズの少なくとも１つに応じて合成パラメータを設定するように構成されるものであってもよい。
また、本開示による教師画像生成装置においては、手術用具は、ガーゼ、メス、鋏、ドレイン、縫合針、糸、鉗子およびステントグラフトの少なくとも１つを含むものであってもよい。
この場合、ガーゼは、放射線吸収糸を少なくとも一部に含むものであってもよい。
本開示による学習装置は、少なくとも１つのプロセッサを備え、
プロセッサは、
本開示による教師画像生成装置により生成された教師画像と、教師画像における手術用具の領域を表す正解データとからなる多数の教師データにより、入力された放射線画像における手術用具の領域を判別する判別器を学習するように構成される。
本開示による判別器は、本開示による学習装置により学習がなされてなる。
本開示による放射線画像処理装置は、少なくとも１つのプロセッサを備え、
プロセッサは、
本開示による判別器により、入力された放射線画像における手術用具の領域を判別することにより、手術用具の領域を検出するように構成される。
なお、本開示による放射線画像処理装置においては、プロセッサは、手術用具の領域の検出結果を表示画面に表示するように構成されるものであってもよい。
本開示による教師データは、本開示による教師画像生成装置により生成された教師画像と、教師画像における手術用具の領域を表す正解データとからなり、入力された放射線画像における手術用具の領域を判別する判別器を学習するためのものである。
本開示による教師画像生成方法は、人体を含む放射線画像、および放射線撮影以外の手法により取得された、手術用具を表す手術用具画像を取得し、
放射線画像に手術用具画像を合成することにより、対象画像が入力されると対象画像における手術用具の領域を判別する判別器を学習するための教師画像を生成する。
本開示による学習方法は、本開示による教師画像生成装置により生成された教師画像と、教師画像における手術用具の領域を表す正解データとからなる多数の教師データにより、入力された放射線画像における手術用具の領域を判別する判別器を学習する。
本開示による放射線画像処理方法は、本開示による判別器により、入力された放射線画像における手術用具の領域を判別することにより、手術用具の領域を検出する。
なお、本開示による教師画像生成方法、学習方法および放射線画像処理方法をコンピュータに実行させるためのプログラムとして提供してもよい。
本開示によれば、手術後における手術用具の患者体内の残存を確実に防止できる。
本開示の実施形態による放射線画像処理装置を適用した放射線画像撮影システムの構成を示す概略ブロック図 本実施形態による放射線画像処理装置の概略構成を示す図 本実施形態による放射線画像処理装置の機能的な構成を示す図 教師画像を生成するための放射線画像を示す図 手術用具としての縫合針の画像を示す図 教師画像を示す図 教師データを模式的に示す図 放射線画像の表示画面を示す図 本実施形態における教師画像生成処理のフローチャート 本実施形態における学習処理のフローチャート 本実施形態における検出処理のフローチャート ガーゼを示す図 手術用具としてのガーゼの画像を示す図
以下、図面を参照して本開示の実施形態について説明する。図１は、本開示の実施形態による放射線画像処理装置を適用した放射線画像撮影システムの構成を示す概略ブロック図である。図１に示すように、本実施形態による放射線画像撮影システム１００は、外科的手術を行った後の、患者である被写体の放射線画像を取得して、放射線画像に含まれる手術用具を検出するためのものである。本実施形態による放射線画像撮影システム１００は、撮影装置１、コンソール２、画像保存システム６および放射線画像処理装置７を備える。
撮影装置１は、Ｘ線源等の放射線源４から発せられ、被写体Ｈを透過した放射線を放射線検出器５に照射することにより、手術台３に仰臥した被写体Ｈの放射線画像Ｇ０を取得するための撮影装置である。放射線画像Ｇ０はコンソール２に入力される。
また、放射線検出器５は、可搬型の放射線検出器であり、手術台３に設けられた取付部３Ａにより手術台３に取り付けられている。なお、放射線検出器５は、手術台３に固定されたものであってもよい。
コンソール２は、無線通信ＬＡＮ（Local Area Network）等のネットワークを介して、不図示のＲＩＳ（Radiology Information System）等から取得した撮影オーダおよび各種情報と、技師等により直接行われた指示等とを用いて、撮影装置１の制御を行う機能を有している。一例として、本実施形態では、サーバコンピュータをコンソール２として用いている。
画像保存システム６は、撮影装置１により撮影された放射線画像の画像データを保存するシステムである。画像保存システム６は、保存している放射線画像から、コンソール２および放射線画像処理装置７等からの要求に応じた画像を取り出して、要求元の装置に送信する。画像保存システム６の具体例としては、ＰＡＣＳ（Picture Archiving and Communication Systems）が挙げられる。
次に、本実施形態に係る放射線画像処理装置について説明する。なお、本実施形態に係る放射線画像処理装置７は、本開示による教師データ生成装置、学習装置を内包するものであるが、以降の説明においては、放射線画像処理装置にて代表させるものとする。
まず、図２を参照して、本実施形態に係る放射線画像処理装置のハードウェア構成を説明する。図２に示すように、放射線画像処理装置７は、ワークステーション、サーバコンピュータおよびパーソナルコンピュータ等のコンピュータであり、ＣＰＵ（Central Processing Unit）１１、不揮発性のストレージ１３、および一時記憶領域としてのメモリ１６を備える。また、放射線画像処理装置７は、液晶ディスプレイ等のディスプレイ１４、キーボードおよびマウス等の入力デバイス１５、並びにネットワーク１０に接続されるネットワークＩ／Ｆ（InterFace）１７を備える。ＣＰＵ１１、ストレージ１３、ディスプレイ１４、入力デバイス１５、メモリ１６およびネットワークＩ／Ｆ１７は、バス１８に接続される。なお、ＣＰＵ１１は、本開示におけるプロセッサの一例である。
ストレージ１３は、ＨＤＤ（Hard Disk Drive）、ＳＳＤ（Solid State Drive）、およびフラッシュメモリ等によって実現される。記憶媒体としてのストレージ１３には、放射線画像処理装置７にインストールされた教師画像生成プログラム２１、学習プログラム２２および放射線画像処理プログラム２３が記憶される。ＣＰＵ１１は、ストレージ１３から教師画像生成プログラム２１、学習プログラム２２および放射線画像処理プログラム２３を読み出してからメモリ１６に展開し、展開した教師画像生成プログラム２１、学習プログラム２２および放射線画像処理プログラム２３を実行する。
なお、教師画像生成プログラム２１、学習プログラム２２および放射線画像処理プログラム２３は、ネットワークに接続されたサーバコンピュータの記憶装置、あるいはネットワークストレージに、外部からアクセス可能な状態で記憶され、要求に応じて放射線画像処理装置７を構成するコンピュータにダウンロードされ、インストールされる。または、ＤＶＤ（Digital Versatile Disc）、ＣＤ−ＲＯＭ（Compact Disc Read Only Memory）等の記録媒体に記録されて配布され、その記録媒体から放射線画像処理装置７を構成するコンピュータにインストールされる。
次いで、本実施形態による放射線画像処理装置の機能的な構成を説明する。図３は、本実施形態による放射線画像処理装置の機能的な構成を示す図である。図３に示すように，放射線画像処理装置（教師画像生成装置および学習装置）７は、画像取得部３１、合成部３２、学習部３３、検出部３４および表示制御部３５を備える。そして、ＣＰＵ１１が、教師画像生成プログラム２１、学習プログラム２２および放射線画像処理プログラム２３を実行することにより、画像取得部３１、合成部３２、学習部３３、検出部３４および表示制御部３５として機能する。
なお、画像取得部３１および合成部３２が，本実施形態による教師画像生成装置を構成する。画像取得部３１および学習部３３が、本実施形態による学習装置を構成する。画像取得部３１、検出部３４および表示制御部３５が、本実施形態による放射線画像処理装置７を構成する。
画像取得部３１は、後述する教師画像Ｔ０を生成するために、画像保存システム６からネットワークＩ／Ｆ１７を介して任意の被写体Ｈを含む放射線画像Ｇ０を取得する。図４は放射線画像Ｇ０を示す図である。なお、図４は人体の胸部の放射線画像を示すが、放射線画像Ｇ０に含まれる被写体はこれに限定されるものではない。
また、画像取得部３１は、教師画像Ｔ０を生成するために、手術用具を表す手術用具画像Ｍ０も画像保存システム６から取得する。手術用具画像Ｍ０は、放射線撮影以外の手法により取得された画像である。例えば手術用具画像Ｍ０は、コンピュータグラフィックス等により作成された手術用具を表す３次元的な画像である。なお、本実施形態においては、手術用具として、傷口または切開部分を縫うための縫合針を用いるものとする。図５は手術用具としての縫合針の画像を示す図である。なお、図５においては、縫合針の手術用具画像Ｍ０を２次元で示しているが、３次元的に回転させたり、移動させたりすることが可能であるものとする。なお、手術用具画像Ｍ０は手術用具の写真画像であってもよい。
また、画像取得部３１は、放射線源４を駆動して手術後の被写体Ｈに放射線を照射し、被写体Ｈを透過した放射線を放射線検出器５により検出して、手術用具の検出対象となる放射線画像Ｇ１を取得する。この際、画像取得部３１は、放射線源４において使用するターゲットおよびフィルタの種類、撮影線量、管電圧およびＳＩＤ等の撮影条件を設定する。
合成部３２は、放射線画像Ｇ０に手術用具画像Ｍ０を合成することにより、対象となる放射線画像Ｇ１が入力されると放射線画像Ｇ１における手術用具の領域を判別する判別器を学習するための教師画像Ｔ０を生成する。合成部３２は、手術用具（本実施形態においては縫合針）の特性に応じた合成パラメータによって放射線画像Ｇ０および手術用具画像Ｍ０を合成して教師画像Ｔ０を生成する。合成部３２は、手術用具（本実施形態においては縫合針）の放射線吸収率、手術用具による放射線散乱の程度、放射線画像Ｇ０におけるビームハードニング、および放射線画像Ｇ０の撮影条件に応じたノイズの少なくとも１つにより、合成パラメータを設定する。
なお、放射線画像Ｇ０における手術用具画像Ｍ０の位置および手術用具画像Ｍ０の向きは、放射線画像Ｇ０をディスプレイ１４に表示し、操作者による入力デバイス１５からの指示により指定すればよい。
本実施形態においては、例えば、下記の式（１）により教師画像Ｔ０を生成するものとする。すなわち、放射線画像Ｇ０における手術用具画像Ｍ０を合成する領域の画素（ｘ，ｙ）において、放射線画像Ｇ０の画素値Ｇ０（ｘ，ｙ）から、重み係数ｗ１により重み付けた手術用具画像Ｍ０の画素値Ｍ０（ｘ，ｙ）を減算することにより、教師画像Ｔ０の画素値Ｔ０（ｘ，ｙ）を導出する。なお、重み係数ｗ１は０以上１以下の値をとる。重み係数ｗ１は本実施形態の合成パラメータに含まれる。図６は教師画像を示す図である。図６に示すように、教師画像Ｔ０においては、被写体の右肺に縫合針４０が含まれたものとなる。
Ｔ０（ｘ，ｙ）＝Ｇ０（ｘ，ｙ）−ｗ１・Ｍ０（ｘ，ｙ） （１）
ここで、手術用具の放射線吸収率が高ければ、手術用具を放射線撮影することにより取得される放射線画像においては、手術用具のコントラストが高くなる。例えば、手術用具が縫合針、鋏およびメスのような金属の場合、手術用具の放射線画像はコントラストが高くなる。このため、教師画像Ｔ０においては手術用具のコントラストが高くなりすぎないように、放射線画像Ｇ０と手術用具画像Ｍ０との重み付け減算を行う際に、手術用具画像Ｍ０の重み係数ｗ１を大きくする。
また、放射線の散乱により、放射線画像におけるコントラストが低下する。放射線の散乱は、被写体Ｈの体厚が大きいほどその影響が大きくなる。また、被写体Ｈの体厚が大きいほど放射線画像Ｇ０に含まれる被写体領域の濃度は小さくなる。このため、合成部３２は、放射線画像Ｇ０に含まれる被写体領域の濃度の平均値を導出し、平均値が小さいほど、すなわち被写体Ｈの体厚が大きいほど、放射線画像Ｇ０と手術用具画像Ｍ０との濃度差が小さくなるように、重み係数ｗ１を小さくして教師画像Ｔ０を生成する。
ここで、放射線源４に印加される管電圧が高く、放射線が高エネルギーであるほど、放射線が被写体Ｈを透過する過程において、放射線の低エネルギー成分が被写体Ｈに吸収され、放射線が高エネルギー化するビームハードニングが生じる。ビームハードニングが生じると、放射線画像におけるコントラストが低下する。また、ビームハードニングによる放射線の高エネルギー化は、被写体Ｈの体厚が大きいほど大きくなる。また、被写体Ｈの体厚が大きいほど放射線画像Ｇ０に含まれる被写体領域の濃度は小さくなる。このため、合成部３２は、放射線画像Ｇ０に含まれる被写体領域の濃度の平均値を導出し、平均値が小さいほど、すなわち被写体Ｈの体厚が大きいほど、放射線画像Ｇ０と手術用具画像Ｍ０との濃度差が小さくなるように、重み係数ｗ１を小さくして教師画像Ｔ０を生成する。
また、撮影条件における放射線量が小さいと、放射線画像Ｇ０に含まれるノイズが多くなる。このため、合成部３２は、放射線量が小さい場合、下記の式（２）に示すように、式（１）に対して放射線量に応じたノイズＮ（ｘ，ｙ）を加算することにより教師画像Ｔ０を生成する。この場合、重み係数ｗ１は予め定められた値としてもよく、上記の手術用号の放射線吸収率、放射線散乱の程度およびビームハードニングの少なくとも１つに応じて設定してもよい。また、ノイズＮ（ｘ，ｙ）は予め定められたシミュレーションにより導出して、ストレージ１３に記憶しておけばよい。なお、ノイズＮ（ｘ，ｙ）も合成パラメータに含まれる。
Ｔ０（ｘ，ｙ）＝Ｇ０（ｘ，ｙ）−ｗ１・Ｍ０（ｘ，ｙ）＋Ｎ（ｘ，ｙ） （２）
本実施形態においては、合成部３２は、後述する判別器の学習のために、放射線画像Ｇ０における手術用具画像Ｍ０の合成位置を変更したり、合成パラメータを変更したりして、複数の教師画像Ｔ０を生成する。これにより、手術用具画像Ｍ０が放射線撮影されたような態様にて放射線画像Ｇ０に合成された教師画像Ｔ０が生成されることとなる。なお、被写体Ｈが異なる複数の放射線画像Ｇ０を用いて教師画像Ｔ０を生成してもよい。
学習部３３は、教師画像Ｔ０および教師画像Ｔ０における手術用具の領域が特定された正解データを含む教師データ、並びに手術用具を含まない放射線画像からなる教師データを用いて、入力された放射線画像における手術用具の領域を判別するように検出部３４が有する判別器３４Ａを学習する。教師データは複数用意される。なお、正解データは、教師画像Ｔ０を生成した際の手術用具画像Ｍ０の領域をマスクしたマスク画像を用いればよい。
判別器３４Ａとしては、機械学習モデルを用いることができる。機械学習モデルの一例として、ニューラルネットワークモデルが挙げられる。ニューラルネットワークモデルとしては、単純パーセプトロン、多層パーセプトロン、ディープニューラルネットワーク、畳み込みニューラルネットワーク、ディープビリーフネットワーク、リカレントニューラルネットワーク、および確率的ニューラルネットワーク等が挙げられる。本実施形態においては、判別器３４Ａとして畳み込みニューラルネットワークを用いるものとする。
図７は、教師画像Ｔ０および教師画像Ｔ０における手術用具の領域が特定された正解データを含む教師データを模式的に示す図である。図７に示すように、教師データ４５は、手術用具を含む教師画像Ｔ０および手術用具の領域が特定された正解データＣ０を含む。
判別器３４Ａは、教師データに含まれる教師画像Ｔ０が入力されると、教師画像Ｔ０の各画素が手術用具の領域であることの確率を出力するように学習がなされる。判別器３４Ａが出力した、確率が予め定められたしきい値以上となる画素からなる領域が手術用具の領域となる。学習部３３は、教師画像Ｔ０を判別器３４Ａに入力し、手術用具の領域となる確率を出力させる。そして、判別器３４Ａが出力した予め定められたしきい値以上となる確率となる画素からなる領域と、教師データに含まれる正解データにより表される領域との相違を損失として導出する。そして、損失に基づいて判別器３４Ａを学習する。具体的には、損失を小さくするように、畳み込みニューラルネットワークにおけるカーネルの係数およびニューラルネットワークの結合の重み等を導出する。学習部３３は、損失が予め定められたしきい値以下となるまで学習を繰り返す。これによって、入力された放射線画像に含まれる手術用具の領域について、予め定められたしきい値以上の高い確率を出力することにより、入力された放射線画像に含まれる手術用具の領域を抽出するように、判別器３４Ａの学習がなされる。
検出部３４は、学習済みの判別器３４Ａが適用されてなる。検出部３４に対象の放射線画像Ｇ１が入力されると、検出部３４は、検出対象となる放射線画像Ｇ１に含まれる手術用具の領域を判別器３４Ａに抽出させることにより、手術用具の領域を検出する。
表示制御部３５は、検出部３４が検出対象となる放射線画像Ｇ１から検出した手術用具の領域を強調して、放射線画像Ｇ１をディスプレイ１４に表示する。図８は放射線画像の表示画面を示す図である。図８に示すように、表示画面５０には放射線画像Ｇ１が表示されており、放射線画像Ｇ１に含まれる手術用具の領域５１を矩形領域５２で囲むことにより、手術用具の領域５１が強調されている。なお、図８においては矩形領域５２は白抜きにて示しているが、色を付与してもよい。なお、矩形領域５２の付与に代えて、手術用具の領域付近に矢印および星印等のマークを付与することにより、手術用具の領域を強調してもよい。
次いで、本実施形態において行われる処理について説明する。図９は本実施形態において行われる教師画像生成処理のフローチャートである。まず、画像取得部３１が、教師画像Ｔ０を生成するための放射線画像Ｇ０および手術用具画像Ｍ０を取得する（ステップＳＴ１）。次いで、合成部３２が放射線画像Ｇ０と手術用具画像Ｍ０との合成パラメータを設定し（ステップＳＴ２）、合成パラメータに応じて放射線画像Ｇ０と手術用具画像Ｍ０とを合成して教師画像Ｔ０を生成し（ステップＳＴ３）、処理を終了する。
次いで、本実施形態における学習処理について説明する。図１０は本実施形態において行われる学習処理のフローチャートである。学習部３３が、教師画像Ｔ０および正解データからなる教師データおよび手術用具を含まない放射線画像からなる教師データを取得し（ステップＳＴ１１）、判別器３４Ａに教師データを入力して手術用具の領域の抽出結果を取得し、正解データとの相違に基づく損失を用いて判別器３４Ａを学習し（ステップＳＴ１２）、ステップＳＴ１１にリターンする。そして、学習部３３は、損失が予め定められたしきい値となるまで、ステップＳＴ１１，ＳＴ１２の処理を繰り返し、学習を終了する。なお、学習部３３は、予め定められた回数学習を繰り返すことにより、学習を終了するものであってもよい。
次いで、本実施形態における手術用具の領域の検出処理について説明する。図１１は本実施形態において行われる検出処理のフローチャートである。画像取得部３１が、検出対象となる放射線画像Ｇ１を取得し（ステップＳＴ２１）、検出部３４が、放射線画像Ｇ１から手術用具の領域を検出する（ステップＳＴ２２）。そして、表示制御部３５が、手術用具の領域を強調した放射線画像Ｇ１をディスプレイ１４に表示し（ステップＳＴ２３）、処理を終了する。
このように、本実施形態においては、放射線画像Ｇ０および手術用具を表す手術用具画像Ｍ０を合成することにより生成した教師画像Ｔ０、およびこの教師画像Ｔ０における手術用具の領域を表す正解データからなる教師データにより、入力された放射線画像から手術用具の領域を判別するように学習がなされた判別器３４Ａを検出部３４が備えるものとした。そして、判別器３４Ａによって、入力された放射線画像Ｇ０における手術用具の領域を判別することにより、手術用具の領域を検出するようにした。このため、本実施形態によれば、検出結果を参照することにより、患者の体内に手術用具が残存していないかを確実に確認することができる。したがって、本実施形態によれば、手術後における手術用具の患者体内の残存を確実に防止できる。
一方、判別器３４Ａの学習に必要な、手術器具が残存した放射線画像は極めて稀であるため、判別器３４Ａの学習のために大量に収集することは困難であった。本実施形態においては、放射線画像Ｇ０および放射線撮影以外の手法により取得された手術用具を表す手術用具画像Ｍ０を合成することにより生成した教師画像Ｔ０を用いて、判別器３４Ａを学習している。このため、十分な数の教師画像Ｔ０を用意することができ、その結果、手術器具の検出精度が高い判別器３４Ａを構築することができる。
また、合成パラメータによって放射線画像Ｇ０および手術用具画像Ｍ０を合成することにより教師画像Ｔ０を生成しているため、放射線撮影以外の手法により取得された手術用具画像Ｍ０を、放射線撮影したかのような態様で放射線画像Ｇ０と合成された教師画像Ｔ０を生成することができる。このため、手術用具画像Ｍ０を用意するために、手術用具を放射線撮影する必要がなくなる。
なお、上記実施形態においては、手術用具として縫合針を検出の対象としているが、これに限定されるものではない。ガーゼ、メス、鋏、ドレイン、糸、鉗子およびステントグラフト等の手術の際に使用する任意の手術用具を検出の対象とすることができる。この場合、教師画像Ｔ０を生成するための、手術用具を含む手術用具画像Ｍ０は、対象となる手術用具を撮影することにより取得すればよい。また、判別器３４Ａは対象となる手術用具を判別するように学習すればよい。なお、判別器３４Ａを複数チャンネルの検出を行うように学習することにより、１種類の手術用具のみならず、複数種類の手術用具を判別するように、判別器３４Ａを構築することも可能である。
ここで、手術用具として使用するガーゼについて説明する。図１２はガーゼを示す図である。図１２に示すように、ガーゼ６０は綿糸が平織りされてなる生地であり、その一部に放射線吸収糸６１が織り込まれている。綿糸は放射線を透過するが、放射線吸収糸６１は放射線を吸収する。このため、ガーゼ６０の放射線画像には、線状の放射線吸収糸６１のみが含まれる。ここで、手術の際には、出血を吸収するために、ガーゼ６０は丸められて人体内に挿入される。このため、教師画像Ｔ０を生成するために放射線画像Ｇ０と合成する手術用具画像Ｍ０としては、図１３に示すように、放射線吸収糸６１が丸まった状態を表すものを使用する。
また、上記実施形態においては、放射線は、とくに限定されるものではなく、Ｘ線の他、α線またはγ線等を適用することができる。
また、上記実施形態において、例えば、画像取得部３１、合成部３２、学習部３３、検出部３４および表示制御部３５といった各種の処理を実行する処理部（Processing Unit）のハードウェア的な構造としては、次に示す各種のプロセッサ（Processor）を用いることができる。上記各種のプロセッサには、上述したように、ソフトウェア（プログラム）を実行して各種の処理部として機能する汎用的なプロセッサであるＣＰＵに加えて、ＦＰＧＡ（Field Programmable Gate Array）等の製造後に回路構成を変更可能なプロセッサであるプログラマブルロジックデバイス（Programmable Logic Device :PLD）、ＡＳＩＣ（Application Specific Integrated Circuit）等の特定の処理を実行させるために専用に設計された回路構成を有するプロセッサである専用電気回路等が含まれる。
１つの処理部は、これらの各種のプロセッサのうちの１つで構成されてもよいし、同種または異種の２つ以上のプロセッサの組み合わせ（例えば、複数のＦＰＧＡの組み合わせまたはＣＰＵとＦＰＧＡとの組み合わせ）で構成されてもよい。また、複数の処理部を１つのプロセッサで構成してもよい。
複数の処理部を１つのプロセッサで構成する例としては、第１に、クライアントおよびサーバ等のコンピュータに代表されるように、１つ以上のＣＰＵとソフトウェアとの組み合わせで１つのプロセッサを構成し、このプロセッサが複数の処理部として機能する形態がある。第２に、システムオンチップ（System On Chip:SoC）等に代表されるように、複数の処理部を含むシステム全体の機能を１つのＩＣ（Integrated Circuit）チップで実現するプロセッサを使用する形態がある。このように、各種の処理部は、ハードウェア的な構造として、上記各種のプロセッサの１つ以上を用いて構成される。
さらに、これらの各種のプロセッサのハードウェア的な構造としては、より具体的には、半導体素子等の回路素子を組み合わせた電気回路（Circuitry）を用いることができる。
１ 撮影装置
２ コンソール
３ 手術台
３Ａ 取付部
４ 放射線源
５ 放射線検出器
６ 画像保存システム
７ 放射線画像処理装置
１１ ＣＰＵ
１３ ストレージ
１４ ディスプレイ
１５ 入力デバイス
１６ メモリ
１７ ネットワークＩ／Ｆ
１８ バス
２１ 教師画像生成プログラム
２２ 学習プログラム
２３ 放射線画像処理プログラム
３１ 画像取得部
３２ 合成部
３３ 学習部
３４ 検出部
３４Ａ 判別器
３５ 表示制御部
４０ 縫合針
４５ 教師データ
５０ 表示画面
５１ 手術用具の領域
５２ 矩形領域
６０ ガーゼ
６１ 放射線吸収糸
１００ 放射線画像撮影システム
Ｃ０ 正解データ
Ｇ０、Ｇ１ 放射線画像
Ｈ 被写体
Ｍ０ 手術用具画像

Claims (16)

  1. 少なくとも１つのプロセッサを備え、
    前記プロセッサは、
    人体を含む放射線画像、および放射線撮影以外の手法により取得された、手術用具を表す手術用具画像を取得し、
    前記放射線画像に前記手術用具画像を合成することにより、対象画像が入力されると該対象画像における前記手術用具の領域を判別する判別器を学習するための教師画像を生成するように構成される教師画像生成装置。
  2. 前記プロセッサは、前記手術用具の特性に応じた合成パラメータによって前記放射線画像および前記手術用具画像を合成することにより、前記教師画像を生成するように構成される請求項１に記載の教師画像生成装置。
  3. 前記プロセッサは、前記手術用具の放射線吸収率、前記放射線画像における放射線散乱の程度、前記放射線画像におけるビームハードニング、および前記放射線画像の撮影条件に応じたノイズの少なくとも１つに応じて前記合成パラメータを設定するように構成される請求項２に記載の教師画像生成装置。
  4. 前記手術用具は、ガーゼ、メス、鋏、ドレイン、縫合針、糸、鉗子およびステントグラフトの少なくとも１つを含む請求項１から３のいずれか１項に記載の教師画像生成装置。
  5. 前記ガーゼは、放射線吸収糸を少なくとも一部に含む請求項４に記載の教師画像生成装置。
  6. 少なくとも１つのプロセッサを備え、
    前記プロセッサは、
    請求項１から５のいずれか１項に記載の教師画像生成装置により生成された教師画像と、前記教師画像における前記手術用具の領域を表す正解データとからなる多数の教師データにより、入力された放射線画像における手術用具の領域を判別する判別器を学習するように構成される学習装置。
  7. 請求項６に記載の学習装置により学習がなされた判別器。
  8. 少なくとも１つのプロセッサを備え、
    前記プロセッサは、
    請求項７に記載の判別器により、前記入力された放射線画像における前記手術用具の領域を判別することにより、前記手術用具の領域を検出するように構成される放射線画像処理装置。
  9. 前記プロセッサは、前記手術用具の領域の検出結果を表示画面に表示するように構成される請求項８に記載の放射線画像処理装置。
  10. 請求項１から５のいずれか１項に記載の教師画像生成装置により生成された教師画像と、前記教師画像における前記手術用具の領域を表す正解データとからなり、入力された放射線画像における前記手術用具の領域を判別する判別器を学習するための教師データ。
  11. 人体を含む放射線画像、および放射線撮影以外の手法により取得された、手術用具を表す手術用具画像を取得し、
    前記放射線画像に前記手術用具画像を合成することにより、対象画像が入力されると該対象画像における前記手術用具の領域を判別する判別器を学習するための教師画像を生成する教師画像生成方法。
  12. 請求項１から５のいずれか１項に記載の教師画像生成装置により生成された教師画像と、前記教師画像における前記手術用具の領域を表す正解データとからなる多数の教師データにより、入力された放射線画像における手術用具の領域を判別する判別器を学習する学習方法。
  13. 請求項７に記載の判別器により、前記入力された放射線画像における前記手術用具の領域を判別することにより、該手術用具の領域を検出する放射線画像処理方法。
  14. 人体を含む放射線画像、および放射線撮影以外の手法により取得された、手術用具を表す手術用具画像を取得する手順と、
    前記放射線画像に前記手術用具画像を合成することにより、対象画像が入力されると該対象画像における前記手術用具の領域を判別する判別器を学習するための教師画像を生成する手順とをコンピュータに実行させる教師画像生成プログラム。
  15. 請求項１から５のいずれか１項に記載の教師画像生成装置により生成された教師画像と、前記教師画像における前記手術用具の領域を表す正解データとからなる多数の教師データにより、入力された放射線画像における手術用具の領域を判別する判別器を学習する手順をコンピュータに実行させる学習プログラム。
  16. 請求項７に記載の判別器により、前記入力された放射線画像における前記手術用具の領域を判別することにより、該手術用具の領域を検出する手順をコンピュータに実行させる放射線画像処理プログラム。
JP2020017709A 2020-02-05 2020-02-05 教師画像生成装置、方法およびプログラム、学習装置、方法およびプログラム、判別器、並びに放射線画像処理装置、方法およびプログラム Active JP7394645B2 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2020017709A JP7394645B2 (ja) 2020-02-05 2020-02-05 教師画像生成装置、方法およびプログラム、学習装置、方法およびプログラム、判別器、並びに放射線画像処理装置、方法およびプログラム
US17/160,910 US11978549B2 (en) 2020-02-05 2021-01-28 Training image generation device, training image generation method, training image generation program, learning device, learning method, learning program, discriminator, radiographic image processing device, radiographic image processing method, and radiographic image processing program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2020017709A JP7394645B2 (ja) 2020-02-05 2020-02-05 教師画像生成装置、方法およびプログラム、学習装置、方法およびプログラム、判別器、並びに放射線画像処理装置、方法およびプログラム

Publications (2)

Publication Number Publication Date
JP2021122487A true JP2021122487A (ja) 2021-08-30
JP7394645B2 JP7394645B2 (ja) 2023-12-08

Family

ID=77410805

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2020017709A Active JP7394645B2 (ja) 2020-02-05 2020-02-05 教師画像生成装置、方法およびプログラム、学習装置、方法およびプログラム、判別器、並びに放射線画像処理装置、方法およびプログラム

Country Status (2)

Country Link
US (1) US11978549B2 (ja)
JP (1) JP7394645B2 (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7413216B2 (ja) * 2020-09-15 2024-01-15 富士フイルム株式会社 学習装置、方法およびプログラム、学習済みモデル、並びに放射線画像処理装置、方法およびプログラム

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006506117A (ja) * 2002-11-13 2006-02-23 コーニンクレッカ　フィリップス　エレクトロニクス　エヌ　ヴィ 境界構造を検出するための医用ビューイングシステム及び方法
JP2017185007A (ja) * 2016-04-05 2017-10-12 株式会社島津製作所 放射線撮影装置、放射線画像の対象物検出プログラムおよび放射線画像における対象物検出方法
JP2018502646A (ja) * 2015-01-22 2018-02-01 コーニンクレッカ フィリップス エヌ ヴェＫｏｎｉｎｋｌｉｊｋｅ Ｐｈｉｌｉｐｓ Ｎ．Ｖ． 光学形状検出によるエンドグラフトの視覚化
WO2018159775A1 (ja) * 2017-03-03 2018-09-07 国立大学法人筑波大学 対象追跡装置
WO2019138438A1 (ja) * 2018-01-09 2019-07-18 株式会社島津製作所 画像作成装置

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070219516A1 (en) * 2006-03-14 2007-09-20 Tyco Healthcare Group Lp X-ray detectable element for association with surgical absorbent substrates and method of making
CN108670190A (zh) * 2013-05-03 2018-10-19 眼泪科学公司 用于对睑板腺进行成像以供睑板腺分析的眼睑照明系统和方法
RU2687883C2 (ru) * 2013-12-19 2019-05-16 Конинклейке Филипс Н.В. Устройство слежения за объектом
US9947090B2 (en) * 2014-09-06 2018-04-17 RaPID Medical Technologies, LLC Medical image dectection system and method
GB201504360D0 (en) * 2015-03-16 2015-04-29 Univ Leuven Kath Automated quality control and selection system
US9792682B2 (en) * 2015-09-07 2017-10-17 Rapid Platforms Llc Training system for detection and classification of artificial objects in X-ray images
JP6809869B2 (ja) 2016-11-02 2021-01-06 Eizo株式会社 ガーゼ検出システム

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006506117A (ja) * 2002-11-13 2006-02-23 コーニンクレッカ　フィリップス　エレクトロニクス　エヌ　ヴィ 境界構造を検出するための医用ビューイングシステム及び方法
JP2018502646A (ja) * 2015-01-22 2018-02-01 コーニンクレッカ フィリップス エヌ ヴェＫｏｎｉｎｋｌｉｊｋｅ Ｐｈｉｌｉｐｓ Ｎ．Ｖ． 光学形状検出によるエンドグラフトの視覚化
JP2017185007A (ja) * 2016-04-05 2017-10-12 株式会社島津製作所 放射線撮影装置、放射線画像の対象物検出プログラムおよび放射線画像における対象物検出方法
WO2018159775A1 (ja) * 2017-03-03 2018-09-07 国立大学法人筑波大学 対象追跡装置
WO2019138438A1 (ja) * 2018-01-09 2019-07-18 株式会社島津製作所 画像作成装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
I. KOMPATSIARIS ET AL.: ""Deformable boundary detection of stents in angiographic images"", IEEE TRANSACTIONS ON MEDICAL IMAGING, vol. 19, no. 6, JPN6023003793, June 2000 (2000-06-01), pages 652 - 662, XP001148120, ISSN: 0005098299, DOI: 10.1109/42.870673 *

Also Published As

Publication number Publication date
JP7394645B2 (ja) 2023-12-08
US11978549B2 (en) 2024-05-07
US20210241039A1 (en) 2021-08-05

Similar Documents

Publication Publication Date Title
JP7209595B2 (ja) 放射線画像処理装置、方法およびプログラム
US9070181B2 (en) System and method for extracting features of interest from an image
JP5269298B2 (ja) Ｘ線診断装置
CN103156629A (zh) 图像处理设备和图像处理方法
JP2018532454A (ja) 再置換術計画に用いる医療移植片を有する患者の医療画像のためのシステムと方法
US12026927B2 (en) Learning device, learning method, learning program, trained model, radiographic image processing device, radiographic image processing method, and radiographic image processing program
JP7266543B2 (ja) 放射線画像処理装置、方法およびプログラム
US11972559B2 (en) Radiographic image processing device, radiographic image processing method, and radiographic image processing program
US20110002444A1 (en) Model based self-positioning patient table for x-ray systems
JP2021142146A (ja) 医用画像処理装置、医用装置、治療システム、医用画像処理方法、およびプログラム
JP7394645B2 (ja) 教師画像生成装置、方法およびプログラム、学習装置、方法およびプログラム、判別器、並びに放射線画像処理装置、方法およびプログラム
EP4119055A1 (en) Image generation device and program, learning device and program, and image processing device and program
JP7152375B2 (ja) 放射線画像処理装置、方法およびプログラム
JP7413216B2 (ja) 学習装置、方法およびプログラム、学習済みモデル、並びに放射線画像処理装置、方法およびプログラム
JP6071805B2 (ja) 画像領域指定装置および方法、並びに放射線画像処理装置および方法
JP2007244737A (ja) 医用画像システム
JP2021052957A (ja) 放射線画像処理装置、方法およびプログラム
JP6956514B2 (ja) Ｘ線ｃｔ装置及び医用情報管理装置
JP2021126501A (ja) 放射線画像処理装置、方法およびプログラム
CN115474952A (zh) 动态品质管理装置、计算机可读取的存储介质以及动态品质管理方法
JP2015019996A (ja) 放射線画像処理装置および方法
Boswell et al. Dual-energy, dual-exposure PA and lateral chest radiograph: not your father’s chest X-ray
ROMMAN Computer, Physics, and Clinical Applications of Spectral Computed Tomography
RU2200469C2 (ru) Способ вычислительной субтракционной рентгенографии
CN118414630A (zh) 身体部分x射线成像中的附加视图的生成

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220124

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20221223

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230207

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230330

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20230704

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230920

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20231002

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20231107

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20231128

R150 Certificate of patent or registration of utility model

Ref document number: 7394645

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150