JP7239363B2 - 医療用画像処理装置、医療用観察装置、医療用観察システム、医療用画像処理装置の作動方法および医療用画像処理プログラム - Google Patents

医療用画像処理装置、医療用観察装置、医療用観察システム、医療用画像処理装置の作動方法および医療用画像処理プログラム Download PDF

Info

Publication number
JP7239363B2
JP7239363B2 JP2019055723A JP2019055723A JP7239363B2 JP 7239363 B2 JP7239363 B2 JP 7239363B2 JP 2019055723 A JP2019055723 A JP 2019055723A JP 2019055723 A JP2019055723 A JP 2019055723A JP 7239363 B2 JP7239363 B2 JP 7239363B2
Authority
JP
Japan
Prior art keywords
observation image
pathological diagnosis
data
information
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2019055723A
Other languages
English (en)
Other versions
JP2020151404A (ja
Inventor
健 本田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Olympus Medical Solutions Inc
Original Assignee
Sony Olympus Medical Solutions Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Olympus Medical Solutions Inc filed Critical Sony Olympus Medical Solutions Inc
Priority to JP2019055723A priority Critical patent/JP7239363B2/ja
Priority to US16/776,534 priority patent/US11182897B2/en
Publication of JP2020151404A publication Critical patent/JP2020151404A/ja
Application granted granted Critical
Publication of JP7239363B2 publication Critical patent/JP7239363B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/0002—Inspection of images, e.g. flaw detection
    • G06T7/0012—Biomedical image inspection
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B10/00—Other methods or instruments for diagnosis, e.g. instruments for taking a cell sample, for biopsy, for vaccination diagnosis; Sex determination; Ovulation-period determination; Throat striking implements
    • A61B10/02—Instruments for taking cell samples or for biopsy
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/0033—Features or image-related aspects of imaging apparatus classified in A61B5/00, e.g. for MRI, optical tomography or impedance tomography apparatus; arrangements of imaging apparatus in a room
    • A61B5/0035—Features or image-related aspects of imaging apparatus classified in A61B5/00, e.g. for MRI, optical tomography or impedance tomography apparatus; arrangements of imaging apparatus in a room adapted for acquisition of images from more than one imaging mode, e.g. combining MRI and optical tomography
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36—Image-producing devices or illumination devices not otherwise provided for
    • A61B90/361—Image-producing devices, e.g. surgical cameras
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B21/00—Microscopes
    • G02B21/0004—Microscopes specially adapted for specific applications
    • G02B21/0012—Surgical microscopes
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B21/00—Microscopes
    • G02B21/36—Microscopes arranged for photographic purposes or projection purposes or digital imaging or video purposes including associated control and data processing arrangements
    • G02B21/365—Control or image processing arrangements for digital or video microscopes
    • G02B21/367—Control or image processing arrangements for digital or video microscopes providing an output produced by processing a plurality of individual source images, e.g. image tiling, montage, composite images, depth sectioning, image comparison
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046—Tracking techniques
    • A61B2034/2055—Optical tracking systems
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046—Tracking techniques
    • A61B2034/2059—Mechanical position encoders
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/30—Devices for illuminating a surgical field, the devices having an interrelation with other surgical devices or with a surgical procedure
    • A61B2090/309—Devices for illuminating a surgical field, the devices having an interrelation with other surgical devices or with a surgical procedure using white LEDs
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36—Image-producing devices or illumination devices not otherwise provided for
    • A61B2090/364—Correlation of different images or relation of image positions in respect to the body
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36—Image-producing devices or illumination devices not otherwise provided for
    • A61B90/37—Surgical systems with images on a monitor during operation
    • A61B2090/373—Surgical systems with images on a monitor during operation using light, e.g. by using optical scanners
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2576/00—Medical imaging apparatus involving image processing or analysis
    • A61B2576/02—Medical imaging apparatus involving image processing or analysis specially adapted for a particular organ or body part
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0071—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence by measuring fluorescence emission
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0077—Devices for viewing the surface of the body, e.g. camera, magnifying lens
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0082—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence adapted for particular medical purposes
    • A61B5/0091—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence adapted for particular medical purposes for mammography
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/05—Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves 
    • A61B5/055—Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves  involving electronic [EMR] or nuclear [NMR] magnetic resonance, e.g. magnetic resonance imaging
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/20—Surgical microscopes characterised by non-optical aspects
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/20—Surgical microscopes characterised by non-optical aspects
    • A61B90/25—Supports therefor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10048—Infrared image
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10056—Microscopic image
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10068—Endoscopic image
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30004—Biomedical image processing
    • G06T2207/30096—Tumor; Lesion

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • General Physics & Mathematics (AREA)
  • Surgery (AREA)
  • Medical Informatics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Biomedical Technology (AREA)
  • Animal Behavior & Ethology (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Molecular Biology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Pathology (AREA)
  • Theoretical Computer Science (AREA)
  • Analytical Chemistry (AREA)
  • Optics & Photonics (AREA)
  • Chemical & Material Sciences (AREA)
  • Multimedia (AREA)
  • Radiology & Medical Imaging (AREA)
  • Quality & Reliability (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Biophysics (AREA)
  • Endoscopes (AREA)
  • Microscoopes, Condenser (AREA)

Description

本開示は、医療用画像処理装置、医療用観察装置、医療用観察システム、医療用画像処理装置の作動方法および医療用画像処理プログラムに関する。
外科手術のうち、病変部の切離、摘出を目的とするものは、再発のリスクを最小化するため、マージンを含む病変部をできうる限り切離、摘出することが求められる。一方、合併症リスクの最小化および、機能温存のためには切離、摘出は必要最小限に止める必要があり、正確な切離ラインの同定が求められる。
例えば、脳神経外科における顕微鏡手術では、５－ＡＬＡやフルオレセインなどの薬剤を用いた蛍光観察によって腫瘍を識別し、切離ラインの見極めを行う技術が知られている（例えば、特許文献１を参照）。
特開２０１６－２０２７２６号公報
しかしながら、上述した技術では、観察結果を別モニタで表示するため、手術中の医師が観察画像内で病変位置と領域を容易に識別することができるとは言い難かった。
本開示は、上記に鑑みてなされたものであって、手術中の医師が観察画像内で病変位置と領域を容易に識別することを可能にする医療用画像処理装置、医療用観察装置、医療用観察システム、医療用画像処理装置の作動方法および医療用画像処理プログラムを提供することを目的とする。
上述した課題を解決し、目的を達成するために、本開示に係る医療用画像処理装置は、撮像装置が撮像した被観察体の観察画像のデータおよび前記被観察体の病理診断情報を用いて前記観察画像における前記被観察体の病理診断位置の相対的な位置関係を含む相対情報を算出する算出部と、前記相対情報に基づいて前記観察画像のデータに前記病理診断情報を加えた表示用観察画像のデータを生成する表示用観察画像生成部と、を備える。
本開示に係る医療用画像処理装置は、上記開示において、前記算出部は、前記観察画像のデータおよび倍率情報と、前記被観察体を病理診断する病理診断装置が生成した前記被観察体の病変領域を示す病変領域画像のデータおよび倍率情報と、物体の３次元的な位置を測定する位置測定装置がそれぞれ測定した前記撮像装置および前記病理診断装置の位置情報とを用いることにより、前記観察画像に対する前記病変領域の前記相対情報を算出し、前記表示用観察画像生成部は、前記相対情報に基づいて前記病変領域画像を変換し、変換後の前記病変領域画像を前記観察画像に重畳することによって前記表示用観察画像のデータを生成する。
本開示に係る医療用画像処理装置は、上記開示において、前記算出部は、前記観察画像のデータおよび倍率情報と、前記被観察体を病理診断する病理診断装置が生成した前記被観察体の病変領域に関する病変領域情報および倍率情報と、物体の３次元的な位置を測定する位置測定装置がそれぞれ測定した前記撮像装置および前記病理診断装置の位置情報とを用いることにより、前記観察画像に対する前記病変領域の前記相対情報を算出し、前記表示用観察画像生成部は、前記相対情報に基づいて前記観察画像における病変領域を特定し、特定した病変領域に対して他の領域と異なる画像処理を施すことにより、前記表示用観察画像のデータを生成する。
本開示に係る医療用画像処理装置は、上記開示において、前記表示用観察画像生成部は、前記表示用観察画像のデータを生成する際、病変領域の境界を示す病変領域画像のデータを生成し、前記観察画像に重畳する。
本開示に係る医療用画像処理装置は、上記開示において、前記病理診断情報は、前記被観察体から標本を採取する標本採取装置が採取した標本を用いた病理診断結果を含み、前記病理診断位置は、前記標本の採取位置であり、前記表示用観察画像生成部は、前記表示用観察画像のデータを生成する際、前記観察画像のデータに前記標本の採取位置および前記病理診断結果を重畳する。
本開示に係る医療用観察装置は、上記開示に記載の医療用画像処理装置と、前記観察画像のデータを生成する撮像装置と、を備える。
本開示に係る医療用観察システムは、上記開示に記載の医療用観察装置と、前記撮像装置の３次元的な位置を測定する位置測定装置と、を備える。
本開示に係る医療用観察システムは、上記開示において、前記被観察体を撮像して病理診断用の画像データを生成する撮像部と、前記病理診断用の画像データを解析して病理診断を行う解析部と、を有する病理診断装置をさらに備える。
本開示に係る医療用画像処理装置の作動方法は、算出部が、撮像装置が撮像した被観察体の観察画像のデータおよび前記被観察体の病理診断情報を用いて前記観察画像における前記被観察体の病理診断位置の相対的な位置関係を含む相対情報を算出し、表示用画像生成部が、前記相対情報に基づいて前記観察画像のデータに前記病理診断情報を加えた表示用観察画像のデータを生成する。
本開示に係る医療用画像処理プログラムは、撮像装置が撮像した被観察体の観察画像のデータおよび前記被観察体の病理診断情報を用いて前記観察画像における前記被観察体の病理診断位置の相対的な位置関係を含む相対情報を算出し、表示用画像生成部が、前記相対情報に基づいて前記観察画像のデータに前記病理診断情報を加えた表示用観察画像のデータを生成すること、をコンピュータに実行させる。
本開示によれば、手術中の医師が観察画像内で病変位置と領域を容易に識別することが可能となる。
図１は、本開示の実施の形態１に係る医療用観察システムを模式的に示す図である。 図２は、本開示の実施の形態１に係る医療用観察システムの機能構成を示すブロック図である。 図３は、本開示の実施の形態１に係る医療用画像処理装置が行う処理の概要を示すフローチャートである。 図４は、変換前後の病変領域画像を示す図である。 図５は、本開示の実施の形態１において、表示装置が表示する表示用観察画像の表示例を示す図である。 図６は、本開示の実施の形態２に係る医療用画像処理装置が行う処理の概要を示すフローチャートである。 図７は、本開示の実施の形態３に係る医療用観察システムの機能構成を示すブロック図である。 図８は、本開示の実施の形態３に係る医療用画像処理装置が行う処理の概要を示すフローチャートである。 図９は、本開示の実施の形態３において、表示装置が表示する表示用観察画像の表示例を示す図である。 図１０は、本開示の他の実施の形態に係る医療用観察システムの機能構成を示すブロック図である。
以下、添付図面を参照して、本開示を実施するための形態（以下、「実施の形態」という）を説明する。
（実施の形態１）
図１は、本開示の実施の形態１に係る医療用観察システムを模式的に示す図である。同図に示す医療用観察システム１は、医療用観察装置２と、病理診断装置３と、位置測定装置４と、表示装置５とを備える。医療用観察装置２は手術用顕微鏡であり、撮像装置としての顕微鏡装置６と、医療用画像装置としての制御装置７とを備える。
顕微鏡装置６の外観構成を説明する。顕微鏡装置６は、被観察体の微細構造を拡大して撮像する顕微鏡部６ａと、顕微鏡部６ａを支持する支持部６ｂと、支持部６ｂの基端を保持するとともに制御装置７を内蔵するベース部６ｃとを有する。
顕微鏡部６ａは、円柱状をなす筒状部を有する。本体部の下端部の開口面にはカバーガラスが設けられている（図示せず）。筒状部は、ユーザによって把持可能であり、ユーザが顕微鏡部６ａの撮像視野を変更する際に把持しながら移動させることが可能な大きさを有している。なお、筒状部の形状は円筒状に限られるわけではなく、多角筒状をなしていてもよい。
支持部６ｂは、複数のアームを有し、隣接するアーム同士が関節部を介して回動可能に連結されている。支持部６ｂの内部に形成された中空部には、顕微鏡部６ａと制御装置７との間で各種信号を伝送する伝送ケーブルおよび制御装置７が発生する照明光を顕微鏡部６ａに伝送するライトガイドが通っている。
病理診断装置３は、病理診断用の画像を取得する装置である。病理診断装置３は、被観察体を撮像するカメラ部３ａと、カメラ部３ａが撮像した画像のデータを取得して病理診断を行う機器が内蔵されたベース部３ｂとを有する。
位置測定装置４は、顕微鏡部６ａおよびカメラ部３ａの３次元的な位置を測定する装置である。位置測定装置４は、顕微鏡部６ａおよびカメラ部３ａから照射される赤外線を撮像する赤外線カメラ部４ａと、赤外線カメラ部４ａが撮影した赤外線をもとに顕微鏡部６ａおよびカメラ部３ａの３次元位置をそれぞれ測定する機器が内蔵されたベース部４ｂと、赤外線カメラ部４ａとベース部４ｂとを連結し、伝送ケーブルが設けられた連結部４ｃと、を有する。
図２は、医療用観察システム１の機能構成を示すブロック図である。図２を参照して、医療用観察装置２、病理診断装置３、位置測定装置４、および表示装置５の機能構成を説明する。
＜顕微鏡装置６＞
顕微鏡装置６は、撮像部６１と、入力部６２と、ブレーキ部６３と、発光部６４と、制御部６５とを有する。
撮像部６１は、フォーカスおよびズーム機能を有する光学系と、光学系によって結像された被観察体の像を受光して光電変換を行うことによって画像信号を生成する撮像素子と、を有する。光学系および撮像素子は、顕微鏡部６ａの筒状部の内部に設けられている。撮像素子は、ＣＣＤ（Charge Coupled Device）またはＣＭＯＳ（Complementary Metal Oxide Semiconductor）などのイメージセンサを用いて構成される。撮像部６１が生成する観察画像のデータを含む信号は、伝送ケーブルを介して制御装置７に伝送される。なお、撮像部６１が、各々の視野に所定の視差を設けた２つの撮像素子を有し、３次元観察画像のデータを生成するようにしてもよい。
入力部６２は、撮像部６１の操作信号やブレーキ部６３の操作信号等の入力を受け付ける。入力部６２は、顕微鏡部６ａの筒状部の側面のうち、ユーザが顕微鏡部６ａを把持した状態で操作可能な位置に設けられている。なお、ユーザが足で操作可能なフットスイッチをさらに用いて入力部６２を構成してもよい。
ブレーキ部６３は、支持部６ｂが有する複数の関節部にそれぞれ設けられる複数の電磁ブレーキを有する。電磁ブレーキは、入力部６２が解除指示の入力を受け付けた場合に解除される。電磁ブレーキが解除されると、その電磁ブレーキによって動きを規制していた２つのアームにおいて、一方の他方に対する回動が可能となる。なお、アームの動きをアシストするアクチュエータを関節部にさらに設けてもよい。
発光部６４は、顕微鏡部６ａの側面の所定位置に固定され、赤外線をそれぞれ発光する３つのＬＥＤ（Light Emitting Diode）を用いて構成される。発光部６４が発光する赤外線は、位置測定装置４が顕微鏡装置６の３次元位置を測定する際に使用される。図２に示す破線の矢印は、発光部６４が発光する赤外線を模式的に示している。
制御部６５は、制御装置７の制御部７６と連携して顕微鏡装置６の動作を制御する。制御部６５は、ＣＰＵ（Central Processing Unit）、ＦＰＧＡ（Field Programmable Gate Array）、およびＡＳＩＣ（Application Specific Integrated Circuit）等の少なくともいずれか一つのプロセッサを用いて構成される。
＜制御装置７＞
制御装置７は、取得部７１と、入力部７２と、光源部７３と、算出部７４と、表示用観察画像生成部７５と、制御部７６と、記憶部７７と、を備える。制御装置７は、実施の形態１に係る医療用画像処理装置の機能を有する。
取得部７１は、顕微鏡装置６が撮像し、伝送ケーブルによって伝送される画像データを取得する。画像データには、撮像時のフォーカス位置、ズーム、露光時間、撮像時間等の撮像に関する情報も含まれる。
入力部７２は、画像の明るさレベルを変化させる指示信号を含む各種情報の入力を受け付ける。入力部７２は、キーボード、マウス、タッチパネル、フットスイッチ等のユーザインタフェースを用いて構成される。なお、入力部７２に顕微鏡装置６の入力部６２の少なくとも一部の機能を兼備させてもよい。
光源部７３は、ライトガイドを介して顕微鏡装置６に供給する照明光を発生する。光源部７３は、キセノンランプやメタルハライドランプ等の放電ランプ、ＬＥＤ（Light Emitting Diode）やＬＤ（Laser Diode）等の固体発光素子、レーザ光源またはハロゲンランプ等の発光部材等を用いて構成される。
算出部７４は、顕微鏡装置６が生成した被観察体の観察画像のデータおよび撮像時の倍率情報、病理診断装置３が生成した前記被観察体の病変領域の境界を示す病変領域画像のデータおよび撮像時の倍率情報、ならびに位置測定装置４が測定した顕微鏡装置６の位置情報および病理診断装置３の位置情報を用いて、観察画像に対する病変領域の相対位置および相対倍率を含む相対情報を算出する。
表示用観察画像生成部７５は、算出部７４が算出した相対情報に基づいて、病変領域画像を観察画像内において適合する位置、形状およびサイズとなるように変換し、変換後の病変領域画像を観察画像に重畳することによって表示用観察画像のデータを生成する。
制御部７６は、制御装置７の動作を制御するとともに、顕微鏡装置６の制御部６５と連携して医療用観察装置２の動作を統括して制御する。制御部７６は、算出部７４、表示用観察画像生成部７５とともに、ＣＰＵ、ＦＰＧＡ、およびＡＳＩＣ等の一つまたは複数のプロセッサを用いて構成される。
記憶部７７は、制御装置７が実行する医療用画像処理プログラムを含む各種プログラムを記憶するとともに、制御装置７が演算処理中のデータを一時的に記憶する。記憶部７７は、ＲＯＭ（Read Only Memory）やＲＡＭ（Random Access Memory）等を用いて構成される。なお、医療用画像処理プログラムは、ハードディスク、フラッシュメモリ、ＣＤ－ＲＯＭ、ＤＶＤ－ＲＯＭ、フレキシブルディスク等のコンピュータ読み取り可能な記録媒体に記録して広く流通させることも可能である。
＜病理診断装置３＞
病理診断装置３は、撮像部３１と、入力部３２と、発光部３３と、解析部３４と、病変領域情報生成部３５と、制御部３６と、記憶部３７とを備える。
撮像部３１は、フォーカスおよびズーム機能を有する光学系と、ＣＣＤまたはＣＭＯＳ等のイメージセンサを用いて構成される撮像素子と、を有する。撮像部３１は、カメラ部３ａの内部に設けられている。
入力部３２は、撮像部３１の操作信号等の入力を受け付ける。
発光部３３は、赤外線をそれぞれ発光する３つのＬＥＤを用いて構成され、カメラ部３ａの所定位置に固定される。発光部３３が発光する赤外線は、位置測定装置４が病理診断装置３の３次元位置を測定する際に使用される。
解析部３４は、撮像部３１が生成した病理観察画像のデータをもとに病理診断を行うことによって、病変部を特定する。
病変領域情報生成部３５は、解析部３４の解析結果に基づいて病変部の領域に関する病変領域情報として、病変領域の形状および範囲を示す病変領域画像のデータを生成する。
制御部３６は、病理診断装置３の動作を制御する。制御部３６は、解析部３４、病変領域情報生成部３５とともに、ＣＰＵ、ＦＰＧＡ、およびＡＳＩＣ等の一つまたは複数のプロセッサを用いて構成される。
記憶部３７は、病理診断装置３が実行する各種プログラムを記憶するとともに、病理診断装置３が演算処理中のデータを一時的に記憶する。記憶部３７は、ＲＯＭやＲＡＭ等を用いて構成される。
＜位置測定装置４＞
位置測定装置４は、撮像部４１と、測定部４２と、制御部４３と、記憶部４４とを備える。
撮像部４１は、ＣＣＤまたはＣＭＯＳ等のイメージセンサを用いて構成され、顕微鏡装置６の発光部６４によって照射される赤外線を検知するとともに、病理診断装置３の発光部３３によって照射される赤外線を撮像する。撮像部４１は、赤外線カメラ部４ａの内部に設けられている。
測定部４２は、撮像部４１が取得した赤外線を用いて、顕微鏡装置６の顕微鏡部６ａの３次元的な位置を測定するとともに、病理診断装置３のカメラ部３ａの３次元的な位置を測定する。
制御部４３は、位置測定装置４の動作を制御する。制御部４３は、測定部４２とともに、ＣＰＵ、ＦＰＧＡ、およびＡＳＩＣ等の一つまたは複数のプロセッサを用いて構成される。
記憶部４４は、位置測定装置４が実行する各種プログラムを記憶するとともに、位置測定装置４が演算処理中のデータを一時的に記憶する。記憶部４４は、ＲＯＭやＲＡＭ等を用いて構成される。
＜表示装置５＞
表示装置５は、制御装置７が生成した表示用の画像信号を制御装置７から受信し、該画像信号に対応する画像を表示する。表示装置５は、液晶または有機ＥＬ（Electro Luminescence）からなる表示パネルを有する。
図３は、制御装置７が行う処理の概要を示すフローチャートである。
まず、まず、算出部７４は、顕微鏡装置６から取得した観察画像のデータおよび倍率情報、病理診断装置３から取得した病変領域画像のデータおよび倍率情報、ならびに位置測定装置４からそれぞれ取得した顕微鏡装置６の位置情報および病理診断装置３の位置情報を用いて、観察画像に対する病変領域画像の相対情報を算出する（ステップＳ１）。この算出部７４の処理により、もとの病変領域画像を観察画像で見たときの病変領域画像に変換する演算が求まる。
続いて、表示用観察画像生成部７５は、算出部７４が算出した相対情報を用いて病変領域画像を変換する（ステップＳ２）。この変換により、図４に示すように、病変領域画像は、病変領域情報生成部３５が生成した病変領域Ｒ１が変形して、観察画像の視野で見たときの形状に相当する病変領域Ｒ２となる。
この後、表示用観察画像生成部７５は、変換した病変領域画像のデータを観察画像のデータに対して位置合わせして重畳することにより、表示用観察画像のデータを生成する（ステップＳ３）。
続いて、制御部７６は、表示用観察画像のデータを表示装置５に出力して表示装置５に表示させる制御を行う（ステップＳ４）。図５は、表示装置５が表示する表示用観察画像の表示例を示す図である。同図に示す表示用観察画像１０１には、病変領域が重畳して表示されている。
以上説明した本開示の実施の形態１によれば、観察画像のデータおよび倍率情報と、病理診断装置が生成した病変領域画像のデータおよび倍率情報と、位置測定装置がそれぞれ測定した顕微鏡装置および病理診断装置の位置情報とを用いることによって算出した相対情報に基づいて病変領域画像を変換し、変換後の病変領域画像を観察画像に重畳して表示用観察画像のデータを生成するため、手術中の医師が観察画像内で病変位置と領域を容易に識別することが可能となる。
また、本実施の形態１によれば、病理診断結果を、手術用ビデオ顕微鏡の観察画像に、位置合わせをして一つの画像として表示することにより、より正確な切除範囲を決定することが可能となり、術成績（摘出率の向上と合併症率低減）の向上が見込める。さらに、単独の観察画像によってのみ手術を完遂することが可能となり、術効率（術時間の短縮）の改善が見込める。
また、本実施の形態１によれば、術中に標本を採取することなく、in situで細胞レベルの病理診断をリアルタイムで行うため、低侵襲で術時間を短縮することができる。
（実施の形態２）
本開示の実施の形態２に係る医療用観察システムは、実施の形態１で説明した医療用観察システム１と同様の構成を有する。以下、本実施の形態２に係る医療用観察システムの構成要素には、対応する医療用観察システム１の構成要素と同じ符号を付して説明する。
本実施の形態２では、病理診断装置３の病変領域情報生成部３５が病変領域の位置を示す座標値等の数値データを生成して病変領域情報として制御装置７に出力し、制御装置７は数値データをもとに観察画像において特定した病変領域に対して他の領域と異なる画像処理を施すことにより、表示用観察画像のデータを生成する。
図６は、本開示の実施の形態２に係る制御装置７が行う処理の概要を示すフローチャートである。まず、算出部７４は、顕微鏡装置６から取得した観察画像のデータおよび倍率情報、病理診断装置３から取得した病変領域情報および倍率情報、ならびに位置測定装置４からそれぞれ取得した顕微鏡装置６の位置情報および病理診断装置３の位置情報を用いて、観察画像に対する病変領域画像の相対情報を算出する（ステップＳ１１）。
続いて、表示用観察画像生成部７５は、算出部７４が算出した相対情報に基づいて病変領域情報を変換し、観察画像における病変領域を特定する（ステップＳ１２）。
この後、表示用観察画像生成部７５は、特定した病変領域に対して他の領域と異なる画像処理を施すことによって表示用観察画像のデータを生成する（ステップＳ１３）。例えば、表示用観察画像生成部７５は、病変領域に相当する部分におけるコントラストや明るさ等の画質パラメータを変更することにより、病変領域を強調して表示する表示用観察画像のデータを生成する。これにより生成された表示用観察画像は、病変領域の視認性を向上させることができる。
続いて、制御部７６は、表示用観察画像のデータを表示装置５に出力して表示装置５に表示させる制御を行う（ステップＳ１４）。
なお、本実施の形態２において、表示用観察画像生成部７５は、病理診断装置３から取得した数値データを用いて病変領域画像のデータを生成し、観察画像に対してさらに病変領域画像を重畳して表示用観察画像のデータを生成してもよい。
以上説明した本開示の実施の形態２によれば、観察画像のデータおよび倍率情報と、病理診断装置が生成した病変領域情報および倍率情報と、位置測定装置がそれぞれ測定した顕微鏡装置および病理診断装置の位置情報とを用いることによって算出した観察画像に対する病変領域の相対情報に基づいて観察画像における病変領域を特定し、特定した病変領域に対して他の領域と異なる画像処理を施すことにより、表示用観察画像のデータを生成するため、実施の形態１と同様、手術中の医師が観察画像内で病変位置と領域を容易に識別することが可能となる。
また、本実施の形態２によれば、病変領域の画像処理を他の領域と帰るだけであるため、装置全体の構成を単純化することができる。
（実施の形態３）
図７は、本開示の実施の形態３に係る医療用観察システムの機能構成を示すブロック図である。同図に示す医療用観察システム８は、医療用観察装置２と、位置測定装置４と、表示装置５と、標本採取装置９とを備える。
標本採取装置９は、病理診断を行うために被観察体から標本を採取する装置である。標本採取装置９は、標本を採取する処置具を有する。処置具の所定位置には、位置検出用の赤外線を発光する発光部９１が設けられている。発光部９１は、上述した発光部６４等と同様に、３つのＬＥＤを有する、
標本採取装置９が採取した標本は、病理室に搬送された後、担当の医師によって病理診断される。病理診断結果は手術室に送られ、制御装置７の入力部７２が入力を受け付ける。病理診断結果としては、例えば標本中の病変領域をグレードにより分類した結果を挙げることができる。
図８は、本開示の実施の形態３に係る制御装置７が行う処理の概要を示すフローチャートである。まず、算出部７４は、顕微鏡装置６から取得した観察画像のデータおよび倍率情報と、位置測定装置４からそれぞれ取得した顕微鏡装置６の位置情報および標本採取装置９の位置情報とを用いて、観察画像における病理診断位置である被観察体からの標本の採取位置を算出する（ステップＳ２１）。
続いて、表示用観察画像生成部７５は、算出部７４が算出した観察画像における標本の採取位置を示す情報および入力部７２が受け付けた病理診断結果を観察画像に重畳することによって表示用観察画像のデータを生成する（ステップＳ２２）。
続いて、制御部７６は、表示用観察画像のデータを表示装置５に出力して表示装置５に表示させる制御を行う（ステップＳ２３）。図９は、表示装置５が表示する表示用観察画像の表示例を示す図である。同図に示す表示用観察画像１０２には、標本の採取位置が「＋」で表示されるとともに、診断結果としてグレード数「３」が表示されている。
以上説明した本開示の実施の形態３によれば、被観察体から標本を採取する標本採取装置が採取した標本を用いた病理診断結果を含む病理診断情報を用いて、観察画像のデータに前記標本の採取位置および前記病理診断結果を重畳することによって表示用観察画像のデータを生成するため、実施の形態１と同様、手術中の医師が観察画像内で病変位置と領域を容易に識別することが可能となる。
また、本実施の形態３によれば、従来の病理診断環境においても、顕微鏡視野内で病理診断結果を参照することが可能となり、正確な切離範囲の決定が可能となる。
（その他の実施の形態）
ここまで、本開示を実施するための形態を説明してきたが、本開示は、上述した実施の形態１～３によってのみ限定されるべきものではない。例えば、図１０のブロック図に示す医療用観察システム１０のように、実施の形態１または２に実施の形態３を追加し、顕微鏡装置６が生成した観察画像に対して、病理診断装置３が生成した病変領域情報と、病理標本の診断結果とを重畳することにより、表示用観察画像のデータを生成してもよい。
また、病理診断装置３の解析部３４および病変領域情報生成部３５の少なくとも１つの機能を制御装置７が具備してもよい。
また、位置測定装置が上述した光学式の３次元計測方法を適用する代わりに、磁気式の３次元計測方法を適用してもよい。これらは、外科手術向けのナビゲーションシステムを援用してもよい。
また、顕微鏡装置６の支持部６ｂのアーム間の関節部にエンコーダを設置し、隣接するアーム間の角度情報をもとに顕微鏡部６ａの３次元位置を測定してもよい。なお、病理診断装置３のカメラ部３ａを複数のアームを有する支持部によって支持する構成とすれば、顕微鏡装置６と同様にアーム間の関節部にエンコーダを設置することにより、カメラ部３ａの３次元位置を測定することができる。このような構成によれば、位置測定装置を別に設ける必要がなくなり、省スペース化を実現することができる。
また、顕微鏡装置６が３次元画像データを生成する機能を有している場合には、３次元画像データを用いて病理診断装置３または標本採取装置９の位置を測定するようにしてもよい。この場合にも、位置測定装置を別に設ける必要がなくなり、省スペース化を実現することができる。
また、医療用観察装置として、被観察体に挿入されて被観察体の内部を撮像する医療用内視鏡を適用してもよい。
また、特許文献１に記載された光線力学診断装置のうち、蛍光撮像装置を病理診断装置として適用してもよい。
１、８、１０ 医療用観察システム
２ 医療用観察装置
３ 病理診断装置
３ａ カメラ部
３ｂ、４ｂ、６ｃ ベース部
４ 位置測定装置
４ａ 赤外線カメラ部
４ｃ 連結部
５ 表示装置
６ 顕微鏡装置
６ａ 顕微鏡部
６ｂ 支持部
７ 制御装置
９ 標本採取装置
３１、４１、６１ 撮像部
３２、６２、７２ 入力部
３３、６４、９１ 発光部
３４ 解析部
３５ 病変領域情報生成部
３６、４３、６５、７６ 制御部
３７、４４、７７ 記憶部
４２ 測定部
６３ ブレーキ部
７１ 取得部
７３ 光源部
７４ 算出部
７５ 表示用観察画像生成部
１０１、１０２ 表示用観察画像
Ｒ１、Ｒ２ 病変領域

Claims (9)

  1. 撮像装置が撮像した被観察体の観察画像のデータおよび前記被観察体の病理診断情報を用いて前記観察画像における前記被観察体の病理診断位置の相対的な位置関係を含む相対情報を算出する算出部と、
    前記相対情報に基づいて前記観察画像のデータに前記病理診断情報を加えた表示用観察画像のデータを生成する表示用観察画像生成部と、
    を備え、
    前記病理診断情報は、前記被観察体から標本を採取する標本採取装置が採取した標本中の病変領域をグレードにより分類した病理診断結果を含み、
    前記病理診断位置は、前記標本の採取位置であり、
    前記表示用観察画像生成部は、
    前記表示用観察画像のデータを生成する際、前記観察画像のデータに前記標本の採取位置および前記病理診断結果を重畳する医療用画像処理装置。
  2. 前記算出部は、
    前記観察画像のデータおよび倍率情報と、前記被観察体を病理診断する病理診断装置が生成した前記被観察体の病変領域を示す病変領域画像のデータおよび倍率情報と、物体の３次元的な位置を測定する位置測定装置がそれぞれ測定した前記撮像装置および前記病理診断装置の位置情報とを用いることにより、前記観察画像に対する前記病変領域の前記相対情報を算出し、
    前記表示用観察画像生成部は、
    前記相対情報に基づいて前記病変領域画像を変換し、変換後の前記病変領域画像を前記観察画像に重畳することによって前記表示用観察画像のデータを生成する請求項１に記載の医療用画像処理装置。
  3. 前記算出部は、
    前記観察画像のデータおよび倍率情報と、前記被観察体を病理診断する病理診断装置が生成した前記被観察体の病変領域に関する病変領域情報および倍率情報と、物体の３次元的な位置を測定する位置測定装置がそれぞれ測定した前記撮像装置および前記病理診断装置の位置情報とを用いることにより、前記観察画像に対する前記病変領域の前記相対情報を算出し、
    前記表示用観察画像生成部は、
    前記相対情報に基づいて前記観察画像における病変領域を特定し、特定した病変領域に対して他の領域と異なる画像処理を施すことにより、前記表示用観察画像のデータを生成する請求項１に記載の医療用画像処理装置。
  4. 前記表示用観察画像生成部は、
    前記表示用観察画像のデータを生成する際、病変領域の境界を示す病変領域画像のデータを生成し、前記観察画像に重畳する請求項３に記載の医療用画像処理装置。
  5. 請求項１～４のいずれか一項に記載の医療用画像処理装置と、
    前記観察画像のデータを生成する撮像装置と、
    を備える医療用観察装置。
  6. 請求項５に記載の医療用観察装置と、
    前記撮像装置の３次元的な位置を測定する位置測定装置と、
    を備える医療用観察システム。
  7. 前記被観察体を撮像して病理診断用の画像データを生成する撮像部と、前記病理診断用の画像データを解析して病理診断を行う解析部と、を有する病理診断装置
    をさらに備える請求項６に記載の医療用観察システム。
  8. 算出部が、撮像装置が撮像した被観察体の観察画像のデータおよび前記被観察体の病理診断情報を用いて前記観察画像における前記被観察体の病理診断位置の相対的な位置関係を含む相対情報を算出し、
    表示用観察画像生成部が、前記相対情報に基づいて前記観察画像のデータに前記病理診断情報を加えた表示用観察画像のデータを生成し、
    前記病理診断情報は、前記被観察体から標本を採取する標本採取装置が採取した標本中の病変領域をグレードにより分類した病理診断結果を含み、
    前記病理診断位置は、前記標本の採取位置であり、
    前記表示用観察画像生成部が、前記表示用観察画像のデータを生成する際、前記観察画像のデータに前記標本の採取位置および前記病理診断結果を重畳する
    医療用画像処理装置の作動方法。
  9. 撮像装置が撮像した被観察体の観察画像のデータおよび前記被観察体の病理診断情報を用いて前記観察画像における前記被観察体の病理診断位置の相対的な位置関係を含む相対情報を算出し、
    前記相対情報に基づいて前記観察画像のデータに前記病理診断情報を加えた表示用観察画像のデータを生成すること、
    をコンピュータに実行させ、
    前記病理診断情報は、前記被観察体から標本を採取する標本採取装置が採取した標本中の病変領域をグレードにより分類した病理診断結果を含み、
    前記病理診断位置は、前記標本の採取位置であり、
    前記表示用観察画像のデータを生成する際、前記観察画像のデータに前記標本の採取位置および前記病理診断結果を重畳する医療用画像処理プログラム。
JP2019055723A 2019-03-22 2019-03-22 医療用画像処理装置、医療用観察装置、医療用観察システム、医療用画像処理装置の作動方法および医療用画像処理プログラム Active JP7239363B2 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2019055723A JP7239363B2 (ja) 2019-03-22 2019-03-22 医療用画像処理装置、医療用観察装置、医療用観察システム、医療用画像処理装置の作動方法および医療用画像処理プログラム
US16/776,534 US11182897B2 (en) 2019-03-22 2020-01-30 Medical image processing device, medical observation device, medical observation system, operation method in medical image processing device, and computer-readable recording medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2019055723A JP7239363B2 (ja) 2019-03-22 2019-03-22 医療用画像処理装置、医療用観察装置、医療用観察システム、医療用画像処理装置の作動方法および医療用画像処理プログラム

Publications (2)

Publication Number Publication Date
JP2020151404A JP2020151404A (ja) 2020-09-24
JP7239363B2 true JP7239363B2 (ja) 2023-03-14

Family

ID=72514762

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019055723A Active JP7239363B2 (ja) 2019-03-22 2019-03-22 医療用画像処理装置、医療用観察装置、医療用観察システム、医療用画像処理装置の作動方法および医療用画像処理プログラム

Country Status (2)

Country Link
US (1) US11182897B2 (ja)
JP (1) JP7239363B2 (ja)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001515383A (ja) 1997-03-07 2001-09-18 ライカ ミクロスコピー ジステーメ アクチエンゲゼルシャフト 手術領域内の少なくとも１つの場所を記録および再発見する方法と装置
JP2003116874A (ja) 2001-10-10 2003-04-22 Olympus Optical Co Ltd 手術用顕微鏡装置
JP2003126017A (ja) 2001-10-25 2003-05-07 Olympus Optical Co Ltd 手術用顕微鏡システム
JP2005205184A5 (ja) 2004-12-01 2008-12-25
JP2010274044A (ja) 2009-06-01 2010-12-09 Olympus Corp 手術支援装置、手術支援方法及び手術支援プログラム
JP2016111533A (ja) 2014-12-08 2016-06-20 ソニー・オリンパスメディカルソリューションズ株式会社 医療用立体観察装置、医療用立体観察方法、及びプログラム

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005205184A (ja) 2003-12-22 2005-08-04 Pentax Corp 診断支援装置
US8396269B2 (en) * 2010-04-08 2013-03-12 Digital Pathco LLC Image quality assessment including comparison of overlapped margins
US9058647B2 (en) * 2012-01-16 2015-06-16 Canon Kabushiki Kaisha Information processing apparatus, information processing method, and storage medium
JP5995449B2 (ja) * 2012-01-24 2016-09-21 キヤノン株式会社 情報処理装置及びその制御方法
JP2014127011A (ja) * 2012-12-26 2014-07-07 Sony Corp 情報処理装置、情報処理方法、およびプログラム
US9990712B2 (en) * 2015-04-08 2018-06-05 Algotec Systems Ltd. Organ detection and segmentation
JP2016202726A (ja) 2015-04-27 2016-12-08 ソニー株式会社 光線力学診断装置及び光線力学診断方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001515383A (ja) 1997-03-07 2001-09-18 ライカ ミクロスコピー ジステーメ アクチエンゲゼルシャフト 手術領域内の少なくとも１つの場所を記録および再発見する方法と装置
JP2003116874A (ja) 2001-10-10 2003-04-22 Olympus Optical Co Ltd 手術用顕微鏡装置
JP2003126017A (ja) 2001-10-25 2003-05-07 Olympus Optical Co Ltd 手術用顕微鏡システム
JP2005205184A5 (ja) 2004-12-01 2008-12-25
JP2010274044A (ja) 2009-06-01 2010-12-09 Olympus Corp 手術支援装置、手術支援方法及び手術支援プログラム
JP2016111533A (ja) 2014-12-08 2016-06-20 ソニー・オリンパスメディカルソリューションズ株式会社 医療用立体観察装置、医療用立体観察方法、及びプログラム

Also Published As

Publication number Publication date
JP2020151404A (ja) 2020-09-24
US20200302599A1 (en) 2020-09-24
US11182897B2 (en) 2021-11-23

Similar Documents

Publication Publication Date Title
JP4113591B2 (ja) 画像誘導手術システム
JP6371729B2 (ja) 内視鏡検査支援装置、内視鏡検査支援装置の作動方法および内視鏡支援プログラム
JP2020171716A (ja) 出血検出ユニットを有する手術用のシステム及び方法
JP6883222B2 (ja) 画像処理装置、画像処理方法、プログラム及び手術用ナビゲーションシステム
JP5073564B2 (ja) 計測用内視鏡装置およびプログラム
JP2017164007A (ja) 医療用画像処理装置、医療用画像処理方法、プログラム
JP6254053B2 (ja) 内視鏡画像診断支援装置、システムおよびプログラム、並びに内視鏡画像診断支援装置の作動方法
US10302932B2 (en) Microscope system and microscopy method using digital markers
US20110178395A1 (en) Imaging method and system
MX2014010163A (es) Sistema de video endoscopico.
WO2019087790A1 (ja) 検査支援装置、内視鏡装置、検査支援方法、及び検査支援プログラム
JP2017508529A (ja) 内視鏡測定システム及び方法
JP2004202221A (ja) 検査システムおよび検査方法
JP2011027912A (ja) 内視鏡装置、計測方法、およびプログラム
JP6323184B2 (ja) 画像処理装置、画像処理方法、並びにプログラム
JPWO2018168261A1 (ja) 制御装置、制御方法、及びプログラム
JP2018515159A (ja) 人間又は動物の体内の関心構造を照射する装置、システム、及び方法
JP7239363B2 (ja) 医療用画像処理装置、医療用観察装置、医療用観察システム、医療用画像処理装置の作動方法および医療用画像処理プログラム
JP2021182950A (ja) 情報処理装置および方法
KR102393661B1 (ko) 다중 영상 내시경 시스템, 그 영상 제공 방법, 및 상기 방법을 실행시키기 위한 컴퓨터 판독 가능한 프로그램을 기록한 기록 매체
US11348234B2 (en) Medical image processing device, medical observation system, image processing method, and computer readable medium for analyzing blood flow of observation object before and after surgical restoration
KR102141541B1 (ko) 뎁스 맵을 이용한 병변 부피 측정용 내시경 기기 및 이를 이용한 병변 부피 측정 방법
US20240164706A1 (en) In-vivo observation system, observation system, in-vivo observation method, and in-vivo observation device
CN112969402A (zh) 内窥镜系统以及用于内窥镜系统的图像处理装置和图像处理方法
US20230032791A1 (en) Measuring method and a measuring device

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220125

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20221021

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20221025

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20221214

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230207

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230302

R151 Written notification of patent or utility model registration

Ref document number: 7239363

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151