JPWO2017010157A1 - 医療用観察装置及び医療用観察方法 - Google Patents

医療用観察装置及び医療用観察方法 Download PDF

Info

Publication number
JPWO2017010157A1
JPWO2017010157A1 JP2017528310A JP2017528310A JPWO2017010157A1 JP WO2017010157 A1 JPWO2017010157 A1 JP WO2017010157A1 JP 2017528310 A JP2017528310 A JP 2017528310A JP 2017528310 A JP2017528310 A JP 2017528310A JP WO2017010157 A1 JPWO2017010157 A1 JP WO2017010157A1
Authority
JP
Japan
Prior art keywords
imaging
signal
optical system
evaluation value
medical observation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2017528310A
Other languages
English (en)
Other versions
JP6983067B2 (ja
Inventor
栄 岡崎
栄 岡崎
俊郎 片山
俊郎 片山
弘高 平野
弘高 平野
敬裕 山元
敬裕 山元
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Sony Olympus Medical Solutions Inc
Original Assignee
Sony Corp
Sony Olympus Medical Solutions Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp, Sony Olympus Medical Solutions Inc filed Critical Sony Corp
Publication of JPWO2017010157A1 publication Critical patent/JPWO2017010157A1/ja
Application granted granted Critical
Publication of JP6983067B2 publication Critical patent/JP6983067B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00163—Optical arrangements
    • A61B1/00188—Optical arrangements with focusing or zooming features
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002—Operational features of endoscopes
    • A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
    • A61B1/00009—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
    • A61B1/000095—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope for image enhancement
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00064—Constructional details of the endoscope body
    • A61B1/00071—Insertion part of the endoscope body
    • A61B1/0008—Insertion part of the endoscope body characterised by distal tip features
    • A61B1/00096—Optical elements
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
    • A61B1/042—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances characterised by a proximal camera, e.g. a CCD camera
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
    • A61B1/043—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances for fluorescence imaging
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/0638—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements providing two or more wavelengths
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36—Image-producing devices or illumination devices not otherwise provided for
    • A61B90/361—Image-producing devices, e.g. surgical cameras
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36—Image-producing devices or illumination devices not otherwise provided for
    • A61B90/37—Surgical systems with images on a monitor during operation
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/40—Optical focusing aids
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B7/00—Mountings, adjusting means, or light-tight connections, for optical elements
    • G02B7/28—Systems for automatic generation of focusing signals
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B7/00—Mountings, adjusting means, or light-tight connections, for optical elements
    • G02B7/28—Systems for automatic generation of focusing signals
    • G02B7/36—Systems for automatic generation of focusing signals using image sharpness techniques, e.g. image processing techniques for generating autofocus signals
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B15/00—Special procedures for taking photographs; Apparatus therefor
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002—Operational features of endoscopes
    • A61B1/00043—Operational features of endoscopes provided with output arrangements
    • A61B1/00045—Display arrangement
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/46—Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient
    • A61B8/461—Displaying means of special interest
    • A61B8/466—Displaying means of special interest adapted to display 3D data
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/52—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/5207—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of raw data to produce diagnostic data, e.g. for generating an image

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Surgery (AREA)
  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Optics & Photonics (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Veterinary Medicine (AREA)
  • Pathology (AREA)
  • Biomedical Technology (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Animal Behavior & Ethology (AREA)
  • General Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Radiology & Medical Imaging (AREA)
  • Biophysics (AREA)
  • General Physics & Mathematics (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Signal Processing (AREA)
  • Gynecology & Obstetrics (AREA)
  • Endoscopes (AREA)
  • Automatic Focus Adjustment (AREA)
  • Studio Devices (AREA)
  • Focusing (AREA)

Abstract

【課題】観察の対象となる帯域に応じて、より好適な態様で光学系の焦点位置を制御する。【解決手段】撮像素子による生体内の被写体からの観察対象光の受光結果に基づく、互いに異なる複数の分光成分それぞれに対応する撮像信号に対して、前記観察対象光の帯域のうち観察の対象とする帯域に応じた前記複数の分光成分間の重みを適用し、前記重みが適用された当該撮像信号に基づき、合焦の度合いを示す評価値を算出する算出部と、前記被写体からの観察対象光を前記撮像素子に結像する光学系のうち少なくとも１つの光学部材の位置を、前記評価値に基づき制御することで当該光学系の焦点位置を制御する制御部と、を備える、医療用観察装置。【選択図】図４

Description

本開示は、医療用観察装置及び医療用観察方法に関する。
近年では、手術手法、手術器具の発達により、内視鏡や手術用顕微鏡等のような医療用の観察装置により患部を観察しながら、各種処置を施す手術（所謂、マイクロサージャリー）が頻繁に行われるようになってきている。また、このような医療用の観察装置の中には、患部を光学的に観察可能とする装置に限らず、撮像部（カメラ）等により撮像された患部の画像を、モニタなどの表示部に電子画像として表示させる装置もある。
また、上記のような撮像部においては、被写体に対して自動的に焦点合わせを行うオートフォーカス（ＡＦ）機能が備えられたものがある。例えば、特許文献１には、オートフォーカス機能を備えた内視鏡装置の一例が開示されている。
特開２０１２−１１０４８１号公報
内視鏡や手術用顕微鏡等のような医療用の観察装置による患部の観察には、狭帯域光観察（ＮＢＩ：Narrow Band Imaging）、蛍光観察（ＡＦＩ：Auto Fluorescence Imaging）、赤外光観察（ＩＲＩ：Infra Red Imaging）等のように通常光（白色光）とは異なる帯域の光を観察の対象とした、所謂特殊光観察が知られている。
一方で、このような特殊光観察において、観察の対象となる帯域に応じて、合焦する光学系の位置（以降では、「合焦位置」と称する場合がある）にずれが生じ、鮮明な被写体像を得ることが困難となる場合がある。このような現象は、特に色収差の大きい光学系（レンズ等）を使用する場合において、より顕在化しやすい傾向にあることがわかっている。
そこで、本開示では、観察の対象となる帯域に応じて、より好適な態様で光学系の焦点位置を制御することが可能な、医療用観察装置及び医療用観察方法を提案する。
本開示によれば、撮像素子による生体内の被写体からの観察対象光の受光結果に基づく、互いに異なる複数の分光成分それぞれに対応する撮像信号に対して、前記観察対象光の帯域のうち観察の対象とする帯域に応じた前記複数の分光成分間の重みを適用し、前記重みが適用された当該撮像信号に基づき、合焦の度合いを示す評価値を算出する算出部と、前記被写体からの観察対象光を前記撮像素子に結像する光学系のうち少なくとも１つの光学部材の位置を、前記評価値に基づき制御することで当該光学系の焦点位置を制御する制御部と、を備える、医療用観察装置が提供される。
また、本開示によれば、プロセッサが、撮像素子による生体内の被写体からの観察対象光の受光結果に基づく、互いに異なる複数の分光成分それぞれに対応する撮像信号に対して、前記観察対象光の帯域のうち観察の対象とする帯域に応じた前記複数の分光成分間の重みを適用し、前記重みが適用された当該撮像信号に基づき、合焦の度合いを示す評価値を算出することと、前記被写体からの観察対象光を前記撮像素子に結像する光学系のうち少なくとも１つの光学部材の位置を、前記評価値に基づき制御することで当該光学系の焦点位置を制御することと、を含む、医療用観察方法が提供される。
以上説明したように本開示によれば、観察の対象となる帯域に応じて、より好適な態様で光学系の焦点位置を制御することが可能な、医療用観察装置及び医療用観察方法が提供される。
なお、上記の効果は必ずしも限定的なものではなく、上記の効果とともに、または上記の効果に代えて、本明細書に示されたいずれかの効果、または本明細書から把握され得る他の効果が奏されてもよい。
本開示の一実施形態に係る医療用観察装置を適用したシステムの概略的な構成の一例について説明するための説明図である。 コントラスト方式におけるＡＦ動作の概念について説明するための説明図である。 色収差により合焦位置のずれが生じる原理について説明するための説明図である。 同実施形態に係る医療用観察装置の機能構成の一例について示したブロック図である。 ＡＦ検波部の機能構成の一例を示したブロック図である。 同実施形態に係る医療用観察装置の一連の処理の流れの一例を示したフローチャートである。 同実施形態に係る医療用観察装置の一適用例について説明するための説明図である。 同実施形態に係る医療用観察装置として構成される情報処理装置のハードウェア構成の一構成例を示す機能ブロック図である。
以下に添付図面を参照しながら、本開示の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。
なお、説明は以下の順序で行うものとする。
１．システム構成
２．焦点位置の制御に関する検討
３．機能構成
４．処理
５．変形例
６．適用例
７．ハードウェア構成
８．まとめ
＜１．システム構成＞
まず、図１を参照して、本実施形態に係る医療用観察装置を適用したシステムの構成の一例について説明する。図１は、本実施形態に係る医療用観察装置を適用したシステムの概略的な構成の一例について説明するための説明図である。
例えば、図１は、医療現場において従来の開腹手術に代わって行われる、腹部の内視鏡外科手術において用いられる内視鏡手術システムの一例を示している。図１に示すように、腹部の内視鏡外科手術では、従来のように腹壁を切って開腹する代わりに、トロッカ２５ａ、２５ｂと称される開孔器具が腹壁に数か所取り付けられ、トロッカ２５ａ、２５ｂに設けられている孔から腹腔鏡（以下、内視鏡とも称する）１１、エネルギ処置具２２や鉗子２３等が体内に挿入される。そして、内視鏡１１によってビデオ撮像された患部（腫瘍等）Ｕの画像をリアルタイムに見ながら、エネルギ処置具２２等によって患部Ｕを切除するなどの処置が行われる。なお、内視鏡１１、エネルギ処置具２２や鉗子２３は、術者、助手、スコピスト、またはロボット等により保持される。
このような内視鏡下手術を行う手術室内には、内視鏡下手術のための装置類を搭載するカート３１、患者が横たわる患者ベッド３３、フットスイッチ３５等が配置される。また、カート３１には、医療機器として、例えば、カメラコントロールユニット(ＣＣＵ)１３、光源装置１７、処置具用装置２１、気腹装置２４、表示装置１５、レコーダ２６及びプリンタ２７等の装置類が載置される。
内視鏡１１の観察光学系を通じて撮像された患部Ｕの画像信号は、カメラケーブルを介してＣＣＵ１３に伝送される。なお、ＣＣＵ１３は、カメラケーブルを介して内視鏡１１に接続される他、無線の通信経路を介して内視鏡１１に接続されてもよい。ＣＣＵ１３は、内視鏡１１から出力される画像信号に対して信号処理を施し、信号処理後の当該画像信号を表示装置１５に出力する。このような構成により、患部Ｕの内視鏡画像が表示装置１５に表示される。
なお、ＣＣＵ１３は、信号処理後の画像信号をレコーダ２６に出力することで、当該レコーダ２６に、患部Ｕの内視鏡画像を画像データ（例えば、動画像のデータ）として記録させてもよい。また、ＣＣＵ１３は、信号処理後の画像信号をプリンタ２７に出力することで、当該プリンタ２７に、患部Ｕの内視鏡画像を印刷させてもよい。
光源装置１７は、ライトガイドケーブルを介して内視鏡１１に接続され、患部Ｕに対してさまざまな波長の光を切り替えて照射することが可能である。なお、光源装置１７から照射される光は、例えば、補助光として用いられる場合もある。
処置具用装置２１は、例えば、電気熱を用いて患部Ｕを切断するエネルギ処置具２２に対して高周波電流を出力する高周波出力装置に相当する。
また、気腹装置２４は、送気、吸気手段を備え、患者体内の例えば腹部領域に空気を送気するものである。
フットスイッチ３５は、術者や助手等のフット操作をトリガ信号として、ＣＣＵ１３や処置具用装置２１等を制御するようになっている。
以上、図１を参照して、本開示の一実施形態に係る医療用観察装置を適用したシステム構成として、所謂、内視鏡手術システム１の概略的なシステム構成の一例について説明した。
＜２．焦点位置の制御に関する検討＞
次に、本開示の一実施形態に係る医療用観察装置の特徴をよりわかりやすくするために、内視鏡１１等に含まれる撮像部による焦点位置の制御に関する動作の概要を説明し、次いで、本実施形態に係る医療用観察装置の課題について整理する。
内視鏡１１等に含まれる撮像部は、被写体に対して自動的に焦点を合わせる所謂オートフォーカス（ＡＦ）機能が備えられている場合がある。
一般的に、ＡＦの方式は、アクティブ方式とパッシブ方式の２種類に大きく分類される。アクティブ方式は、例えば近赤外光等を被写体に対して照射してその反射光を受光することにより被写体との距離を測定し、測定された距離に基づいて当該被写体に焦点が合うように光学系を構成する光学部材を移動させることにより、合焦動作を行う方式である。一方、パッシブ方式は、測距用の光等を自ら発することなく、撮影された被写体像から得られる情報に基づいて被写体に焦点が合うように光学系を構成する光学部材を移動させることにより、合焦動作を行う方式である。
また、ＡＦの方式としては、例えば、コントラスト方式、位相差方式、デプスマップ（ＤｅｐｔｈＭａｐ）方式、三角測距方式と呼称されている方式が一般的に知られている。これらの方式は、いずれも、撮影された被写体像から得られる情報に基づいて合焦動作を行うものであり、特に、パッシブ方式のＡＦの方式として適用され得る。
例えば、図２は、コントラスト方式におけるＡＦ動作の概念について説明するための説明図である。図２において、横軸は、撮像部の光学系のうち焦点位置を制御するための光学部材（即ち、フォーカスレンズ）の光軸方向に沿った位置（以降では、「フォーカスレンズ位置」と称する場合がある）を模式的に示している。また、縦軸は、撮像部が、焦点位置を制御するために参照するＡＦ評価値示している。なお、コントラスト方式においては、被写体像のコントラストが、当該ＡＦ評価値に相当する。即ち、図２において、参照符号ｇ１１は、フォーカスレンズ位置に応じた、被写体像のコントラストの変化の一例を模式的に示している。また、参照符号ｐ１１は、コントラストが最大となるフォーカスレンズ位置、即ち、合焦位置を示している。
撮像部は、例えば、フォーカスレンズの位置を移動させながら、被写体像から算出されるＡＦ評価値（コントラスト）を評価し、当該ＡＦ評価値が最大となるフォーカスレンズ位置（即ち、合焦位置）を探索する。そして、撮像部は、探索された合焦位置にフォーカスレンズを移動させることで、被写体への合焦を行う。
なお、他の方式については、ＡＦ評価値として使用するパラメータや、当該ＡＦ評価値の評価方法が異なるものの、被写体像からＡＦ評価値を算出し、当該ＡＦ評価値に基づき合焦位置を特定するという基本的な考え方については、コントラスト方式と同様である。上記を踏まえ、以降の説明においては、焦点位置の制御に関する説明においては、ＡＦの方式としてコントラスト方式を適用した場合を例に説明するものとする。
一方で、内視鏡システムや手術用顕微鏡等のような医療用観察装置による患部の観察には、通常光（白色光）とは異なる帯域の成分を観察対象とした、所謂特殊光観察が知られている。例えば、特殊光観察の一例として、狭帯域光観察（ＮＢＩ：Narrow Band Imaging）が挙げられる。
狭帯域光観察では、例えば、被写体に対して青色及び緑色の帯域にそれぞれ含まれる狭帯域の光を補助光として照射し、被写体からの反射光のうち、緑色成分の光（緑色光）と青色成分の光（青色光）とに基づき、当該被写体の画像を生成する。特に、青色光及び緑色光は、血液中のヘモグロビンに吸収されやすい。そのため、狭帯域光観察では、このような特性を利用することで、例えば、色素等による染色を伴わずに、血管などをより鮮明に撮像することが可能となる。
また、特殊光観察の他の一例として、生体または非生体資料からの蛍光・燐光現象を観察することによって対象を観察する蛍光観察（ＡＦＩ：Auto Fluorescence Imaging）や、赤外光を観察の対象とする赤外光観察（ＩＲＩ：Infra Red Imaging）等が挙げられる。なお、これらの観察方法については、一般的に知られているため、詳細な説明は省略する。
このような特殊光観察においては、観察の対象となる帯域に応じて合焦位置にずれが生じ、鮮明な被写体像を得ることが困難となる場合がある。このような現象は、特に色収差の大きい光学系（レンズ等）を使用する場合において、より顕在化しやすい傾向にあることがわかっている。
例えば、図３は、色収差により合焦位置のずれが生じる原理について説明するための説明図である。特に、図３に示す例では、説明をよりわかりやすくするために、色収差の大きい光学系（レンズ）を使用した場合の一例について概略的に示している。
図３に示すように、光線を透過し屈折させる物質（即ち、レンズ等の光学系）において、屈折率は一定ではなく、光線の波長（周波数）によって異なる。具体的には、図３に示すように、光線の波長が短いほど（光線の周波数が高いほど）屈折率が高くなる。そのため、図３に示すように、例えば、波長の比較的短い紫外光に比べて、当該紫外光よりも波長の長い白色光や赤外光の方が、光学系に対してより遠い位置で焦点を結ぶこととなる。
このような特性から、例えば、赤外光を観察の対象とする場合において、通常光（白色光）を観察する場合と同様に、当該通常光の検出結果を基に算出されたＡＦ評価値に基づきフォーカスレンズ位置を制御したとしても、より鮮明な被写体像が得られるとは限らない。このような現象は、色収差の大きい光学系ほど、より顕在化しやすい傾向にあることは、前述した通りである。
そこで、本実施形態に係る医療用観察装置は、色収差の比較的大きい光学系を使用した場合においても、観察の対象となる帯域に応じて、より好適な態様で当該光学系の焦点位置を制御することが可能な仕組みを提供する。なお、以降では、本実施形態に係る医療用観察装置についてさらに詳しく説明する。
＜３．機能構成＞
まず、図４を参照して、本実施形態に係る医療用観察装置の機能構成の一例について説明する。図４は、本実施形態に係る医療用観察装置の機能構成の一例について示したブロック図であり、特に、観察対象（被検体）の画像を撮像し、当該画像を表示する処理に着目した機能構成の一例を示している。
図４に示すように、本実施形態に係る医療用観察装置１００は、撮像部１１０（例えば、カメラヘッド）と、制御部１３０とを含む。また、医療用観察装置１００は、光源部１７０を含んでもよい。図４に示した医療用観察装置１００は、例えば、図１に示した内視鏡手術システム１として構成され得る。即ち、図４に示した、撮像部１１０、制御部１３０、及び光源部１７０は、例えば、図１に示した内視鏡手術システム１における、内視鏡１１、ＣＣＵ１３、光源装置１７にそれぞれ対応している。また、図４では、図示していないが、医療用観察装置１００は、図１に示した内視鏡手術システム１における表示装置１５に相当する、ディスプレイ等の表示部を含んでもよい。
撮像部１１０は、所謂カメラ等のような動画像や静止画像等の画像を撮像する構成に相当する。具体的には、例えば、撮像部１１０は、撮像光学系（例えば、一連のレンズ群）１１１と、撮像素子１１４とを含む。また、撮像部１１０は、ズームレンズ駆動部１１５と、フォーカスレンズ駆動部１１６と、駆動系制御部１１７と、撮像素子駆動部１１８とを含む。
撮像光学系１１１は、被写体の光学像を撮像素子１１４の撮像面に結像させる。撮像光学系１１１は、例えば、ズームレンズ１１２と、フォーカスレンズ１１３とを含む。なお、図４に示す例では、代表的にズームレンズ１１２及びフォーカスレンズ１１３のみを図示しているが、撮像光学系１１１は、他のレンズやフィルター等、各種の光学部材を含んでもよい。撮像光学系１１１を構成する光学部材の種類や数、各光学部材の光学特性等は、当該撮像光学系１１１によって撮像素子１１４の撮像面上に被写体の光学像が結像されるように、適宜調整されている。
ズームレンズ１１２は、撮像光学系１１１の倍率を調整するためのレンズである。ズームレンズ１１２は光軸上を移動可能に構成されており、ズームレンズ１１２の光軸上での位置が制御されることにより、撮像光学系１１１の倍率が調整される。なお、ズームレンズ１１２は、撮像光学系１１１の倍率を調整するための光学部材の一例である。即ち、撮像光学系１１１に含まれる少なくとも１つの光学部材の光軸上での位置が調整されることにより当該撮像光学系１１１の倍率が調整されればよく、倍率の調整のために移動可能に構成される光学部材の数及び種類は特に限定されない。
フォーカスレンズ１１３は、撮像光学系１１１の焦点距離を調整するためのレンズである。フォーカスレンズ１１３は光軸上を移動可能に構成されており、フォーカスレンズ１１３の光軸上での位置（即ち、フォーカスレンズ位置）が制御されることにより、撮像光学系１１１の焦点距離（換言すると、焦点位置）が調整される。なお、フォーカスレンズ１１３は、撮像光学系１１１の焦点距離を調整するための光学部材の一例である。即ち、撮像光学系１１１に含まれる少なくとも１つの光学部材の光軸上での位置が調整されることにより当該撮像光学系１１１の焦点距離が調整されればよく、焦点距離の調整のために移動可能に構成される光学部材の数及び種類は特に限定されない。
撮像素子１１４としては、例えば、ＣＭＯＳイメージセンサやＣＣＤイメージセンサ等が適用され得る。撮像素子１１４は、撮像面に結像した光学像を光電変換によって電気信号（以降では、「撮像信号」と称する場合がある）に変換する。具体的には、本実施形態に係る撮像素子１１４は、例えば、Ｒ、Ｇ、Ｂそれぞれの光（分光成分）を受光する受光素子（画素）を備え、被写体からの光を、Ｒ、Ｇ、Ｂの分光成分ごとに光電変換によって撮像信号に変換する。なお、以降の説明では、撮像素子１１４により受光される被写体からの光を、「観察対象光」と称する場合がある。例えば、通常光（白色光）を観察、狭帯域光観察、及び赤外光観察においては、被写体からの反射光が観察対象光の一例に相当する。また、蛍光観察においては、被写体（生体または非生体資料）から放出される蛍光が、観察対象光の一例に相当する。また、以降の説明では、Ｒ、Ｇ、Ｂの分光成分ごとの撮像信号を、それぞれ「Ｒ信号」、「Ｇ信号」、「Ｂ信号」と称し、これらを総じて「ＲＧＢ信号」と称する場合がある。また、本実施形態に係る撮像素子１１４は、被写体からの観察対象光を複数の分光成分ごとに光電変換によって撮像信号に変換できれば、当該分光成分は必ずしもＲ、Ｇ、Ｂには限定されず、例えば、Ｙ（イエロー）、Ｍ（マゼンダ）、Ｃ（シアン）等であってもよい。また、撮像素子１１４の動作（例えば、シャッタースピードやゲイン）は、例えば、後述する撮像素子駆動部１１８により制御される。
そして、撮像素子１１４は、光電変換によって生成した分光成分ごとの撮像信号（例えば、ＲＧＢ信号）を制御部１３０に出力する。これにより、撮像素子１１４により受光された分光成分それぞれの明るさに応じた撮像信号（即ち、被写体像の輝度に応じた分光成分ごとの撮像信号）が制御部１３０に出力される。
ズームレンズ駆動部１１５は、例えばモータ、及び当該モータに対して駆動電流を供給するドライバ回路等によって構成され、ズームレンズ１１２を光軸に沿って移動させる。ズームレンズ駆動部１１５の動作は、後述する駆動系制御部１１７によって制御される。
フォーカスレンズ駆動部１１６は、例えばモータ、及び当該モータに対して駆動電流を供給するドライバ回路等によって構成され、フォーカスレンズ１１３を光軸に沿って移動させる。フォーカスレンズ駆動部１１６の動作は、後述する駆動系制御部１１７によって制御される。
駆動系制御部１１７は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）やＤＳＰ（Ｄｉｇｉｔａｌ Ｓｉｇｎａｌ Ｐｒｏｃｅｓｓｏｒ）等の各種のプロセッサ、又はプロセッサとメモリ等の記憶素子とがともに搭載されてなるマイコン等によって構成され、ズームレンズ駆動部１１５及びフォーカスレンズ駆動部１１６の動作を制御する。駆動系制御部１１７は、ＦＰＧＡ（Ｆｉｅｌｄ−Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙ）、ドライバＩＣ（Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ）、及び／又は専用のＬＳＩ（Ｌａｒｇｅ−Ｓｃａｌｅ Ｉｎｔｅｇｒａｔｉｏｎ）（すなわちＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ Ｓｐｅｃｉｆｉｃ Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ））等の各種の集積回路によって構成されてもよい。駆動系制御部１１７の機能は、当該駆動系制御部１１７を構成するプロセッサが所定のプログラムに従って演算処理を実行することにより実現され得る。
具体的な一例として、駆動系制御部１１７は、後述する制御部１３０の光学系制御部１３４から送信される、ズームレンズ１１２の移動方向や移動量を示す情報に基づき、ズームレンズ駆動部１１５の駆動を制御する。これにより、当該移動方向に当該移動量の分だけズームレンズ１１２が移動し、撮像光学系１１１の倍率が調整される。なお、撮像光学系１１１の倍率の調整のために、ズームレンズ１１２以外の他の光学部材も移動可能に構成されている場合には、駆動系制御部１１７からの制御に基づき、ズームレンズ駆動部１１５によって、当該他の光学部材の位置が制御されてもよい。
また、他の一例として、駆動系制御部１１７は、光学系制御部１３４から送信される、フォーカスレンズ１１３の移動方向や移動量を示す情報に基づき、フォーカスレンズ駆動部１１６の駆動を制御する。これにより、当該移動方向に当該移動量の分だけフォーカスレンズ１１３が移動し、撮像光学系１１１の焦点距離が調整される。なお、撮像光学系１１１の焦点距離の調整のためにフォーカスレンズ１１３以外の他の光学部材も移動可能に構成されている場合には、駆動系制御部１１７からの制御に基づき、フォーカスレンズ駆動部１１６によって、当該他の光学部材の位置が制御されてもよい。
なお、図４に示す例では、駆動系制御部１１７が撮像部１１０に設けられているが、当該駆動系制御部１１７は、撮像部１１０の外部（例えば、制御部１３０）に設けられていてもよい。
撮像素子駆動部１１８は、撮像素子１１４を駆動するためのドライバに対応する。撮像素子駆動部１１８は、所定のタイミングで撮像素子１１４に対して駆動信号を供給することにより、撮像素子１１４に、撮影動作、リセット動作等の動作を所定のタイミングで実行させ、被写体像に対応する撮像信号を取得させる。これにより、撮像素子１１４のシャッタースピードが制御される。また、撮像素子駆動部１１８は、撮像素子１１４において、撮像された撮像信号に対して適用されるゲインを制御してもよい。
なお、図示は省略するが、撮像素子駆動部１１８の動作を制御する撮像素子駆動制御部が、撮像部１１０または制御部１３０に設けられ得る。撮像素子駆動制御部は、ＣＰＵやＤＳＰ等の各種のプロセッサ、又はマイコン等によって構成され、上述した駆動信号を撮像素子１１４に供給するタイミングを撮像素子駆動部１１８に対して指示することにより、撮像素子駆動部１１８を介して、撮像素子１１４の駆動を制御する。また、撮像素子駆動制御部は、撮像素子１１４が撮像信号に対して適用するゲインを撮像素子駆動部１１８に対して指示することにより、撮像素子駆動部１１８を介して、撮像素子１１４の動作を制御してもよい。なお、当該撮像素子駆動制御部の機能は、当該撮像素子駆動制御部を構成するプロセッサが所定のプログラムに従って演算処理を実行することにより実現され得る。
制御部１３０は、撮像信号処理部１３１と、検波枠ゲート１３２と、ＡＦ検波部１３３と、光学系制御部１３４とを含む。制御部１３０は、ＣＰＵやＤＳＰ等の各種のプロセッサ、又はマイコン等によって構成され得る。
撮像信号処理部１３１は、撮像素子１１４において光電変換によって生成された分光成分ごとの撮像信号（例えば、ＲＧＢ信号）に対して、例えば、リニアマトリクス処理、ホワイトバランス処理、γ補正処理等の各種信号処理を実行する。また、撮像信号処理部１３１は、各種信号処理が施された当該撮像信号に対して、色調補正、輝度補正等の各種補正処理、ビデオ信号の生成、あるいはエンコード処理等、目的に応じた画像処理を施す。以上のような制御により、撮像信号処理部１３１は、取得された撮像信号に対して、被写体像の明るさの調整、ホワイトバランスの調整、及び、色再現等の所謂現像処理を実行し、映像信号を生成する。
具体的な一例として、ホワイトバランスを調整するための処理の一例について以下に説明する。例えば、ホワイトバランスの調整の対象となるＲＧＢ信号（例えば、撮像素子１１４から出力される撮像信号）それぞれの輝度成分をＲ、Ｇ、Ｂとし、ホワイトバランスを調整するためにＲＧＢ信号それぞれに適用する補正係数をｍ３０、ｍ４０、及びｍ５０とする。ここで、ホワイトバランス調整後のＲＧＢ信号それぞれの輝度成分をＲ１、Ｇ１、Ｂ１とすると、撮像信号処理部１３１は、Ｒ１、Ｇ１、Ｂ１を以下に（式１）〜（式３）として示す計算式に基づき算出する。なお、補正係数ｍ３０、ｍ４０、及びｍ５０は、例えば、選択されたホワイトバランスの調整のためのモード（換言すると、色温度）に応じてあらかじめ設定されている。
Figure 2017010157
また、他の一例として、色再現のための処理の一例について以下に説明する。撮像信号処理部１３１は、ＲＧＢ信号それぞれの輝度成分Ｒ、Ｇ、Ｂに対して、色再現のためにあらかじめ設定されたパラメータ（以降では、「色再現マトリックス」と称する場合がある）に基づく補正処理を施すことで、色再現処理を実行する。ここで、色再現処理後のＲＧＢ信号それぞれの輝度成分をＲ２、Ｇ２、Ｂ２とし、色再現マトリックスをＭ１すると、撮像信号処理部１３１は、Ｒ２、Ｇ２、Ｂ２を以下に（式４）として示す計算式に基づき算出する。なお、色再現マトリックスＭ１における各補正係数ｍ００〜ｍ０２、ｍ１０〜ｍ１２、及びｍ２０〜２２は、色再現処理の内容に応じてあらかじめ設定されている。
Figure 2017010157
また、撮像信号処理部１３１は、色再現処理により、当該色再現処理の対象となる分光成分ごとの撮像信号を、他の色空間に基づく撮像信号に変換してもよい。具体的な一例として、撮像信号処理部１３１は、ＲＧＢ信号を、輝度成分Ｙと色差成分Ｃｂ、Ｃｒとに基づく、ＹＣｂＣｒ空間の成分に変換してもよい。この場合には、ＲＧＢ信号をＹＣｂＣｒ空間の成分に変換するための色再現マトリックスをＭ２としたとき、撮像信号処理部１３１は、ＹＣｂＣｒ空間における輝度成分Ｙと色差成分Ｃｂ、Ｃｒとを、以下に（式５）として示す計算式に基づき算出する。
Figure 2017010157
また、撮像信号処理部１３１は、撮像素子１１４から出力される分光成分ごとの撮像信号（例えば、ＲＧＢ信号）に対して、上記に説明したホワイトバランスの調整や色再現処理のうち、複数の処理を適用してもよい。具体的な一例として、撮像信号処理部１３１は、撮像素子１１４から出力されるＲＧＢ信号に対して、ホワイトバランスの調整に係る処理を適用し、ホワイトバランス調整後のＲＧＢ信号の輝度成分（Ｒ１，Ｇ１，Ｂ１）に対して、色再現マトリックスＭ１に基づき色再現処理を施してもよい。また、他の一例として、撮像信号処理部１３１は、撮像素子１１４から出力されるＲＧＢ信号に対して、色再現マトリックスＭ１に基づき色再現処理を施し、色再現処理後のＲＧＢ信号の輝度成分（Ｒ２，Ｇ２，Ｂ２）を、色再現マトリックスＭ２に基づきＹＣｂＣｒ空間の成分に変換してもよい。
なお、本実施形態に係る医療用観察装置１００は、例えば、通常光（白色光）に基づき被写体像の観察に加えて、狭帯域光観察、蛍光観察、及び赤外光観察等のような各種特殊光観察を選択的に切り替えて実行可能に構成されていてもよい。この場合には、例えば、撮像信号処理部１３１は、選択された観察方式に対応するモード（以降では、「観察モード」と称する場合がある）に応じた現像処理（即ち、各種信号処理や各種画像処理）を、撮像信号に対して施してもよい。
具体的には、撮像信号処理部１３１には、例えば、術者（ユーザ）により、ボタン、タッチパネル、またはスイッチ等の、医療用観察装置１００に設けられる図示しない各種の入力部を介して選択された観察モードを示す観察モード選択信号が、当該入力部から入力されてもよい。この場合には、撮像信号処理部１３１は、入力された観察モード選択信号に基づき、術者により選択された観察モードを識別し、観察モードの識別結果に応じた現像処理を撮像信号に対して施すことで映像信号を生成してもよい。
より具体的な一例として、撮像信号処理部１３１は、取得した撮像信号（例えば、ＲＧＢ信号）に対して、選択された観察モードに応じたフィルター（例えば、バンドパスフィルタ）を適用することで、当該観察モードにおいて観察の対象となる帯域の成分を、当該撮像信号から抽出してもよい。
また、撮像信号処理部１３１は、上記に説明したホワイトバランスの調整や色再現処理の内容を、選択された観察モードに応じて切り替えてもよい。この場合は、例えば、撮像信号処理部１３１は、適用する補正係数をｍ３０、ｍ４０、及びｍ５０や、色再現マトリックスＭ１またはＭ２を、選択された観察モードに応じて切り替えてもよい。
そして、撮像信号処理部１３１は、生成した映像信号は、例えば、ディスプレイ等のような表示部に出力する。これにより、当該表示部に、当該映像信号に基づく被写体の映像が表示され、術者（ユーザ）は、被写体である患部の映像を観察することが可能となる。
また、撮像信号処理部１３１は、撮像素子１１４から出力される分光成分ごとの撮像撮像信号（例えば、ＲＧＢ信号）を、検波枠ゲート１３２を介して、ＡＦ検波部１３３に出力する。
検波枠ゲート１３２は、撮像信号処理部１３１から分光成分ごとの撮像信号（例えば、ＲＧＢ信号）を受けて、撮像素子１１４中の所定の領域（以降では、「ＡＦ検波枠」と称する場合がある）の受光素子（画素）に対応する当該分光成分ごとの撮像信号を、後段に位置するＡＦ検波部１３３に出力する。
ＡＦ検波部１３３は、検波枠ゲート１３２から分光成分ごとの撮像信号を取得する。ＡＦ検波部１３３は、取得した当該撮像信号に基づき、ＡＦ機能を実現するためのＡＦ評価値を算出し、算出したＡＦ評価値を後述する光学系制御部１３４に出力する。なお、本実施形態に係るＡＦ検波部１３３は、例えば、色収差の比較的大きい撮像光学系１１１を使用した場合においても、観察の対象となる帯域に応じて、より好適な態様で当該撮像光学系１１１の焦点位置を制御することが可能となるように、当該観察対象の帯域に応じてＡＦ評価値を算出する。そこで、以下に、図５を参照して、ＡＦ検波部１３３について詳細に説明する。図５は、ＡＦ検波部１３３の機能構成の一例を示したブロック図である。
図５に示すように、ＡＦ検波部１３３は、ＡＦ評価信号算出部１３５と、ＡＦ評価値算出部１３６とを含む。
ＡＦ評価信号算出部１３５は、例えば、術者（ユーザ）により選択された観察モードを示す観察モード選択信号を入力部から取得し、取得した観察モード選択信号に基づき、観察の対象となる帯域を認識する。
ＡＦ評価信号算出部１３５は、検波枠ゲート１３２から分光成分ごとの撮像信号を取得し、取得した当該撮像信号に対して、観察の対象となる帯域に応じて分光成分間で重み付けを行う。例えば、ＲＧＢ信号を対象として、ＲＧＢ信号それぞれの輝度成分をＲ、Ｇ、Ｂとし、観察の対象となる帯域に応じたＲＧＢ間の重みに基づく係数をｒ、ｇ、ｂとする。このとき、ＡＦ評価信号算出部１３５は、ＡＦ評価値を算出するための撮像信号Ｌ（以降では、「ＡＦ評価信号」と称する場合がある）を以下に（式６）として示す計算式に基づき算出する。
Figure 2017010157
なお、（式６）に示したｒ、ｇ、ｂのような分光成分間で重み付けを行うための係数（以降では、「ＡＦ用評価信号係数」と称する場合がある）は、例えば、観察モードごとに算出しておき、ＡＦ評価信号算出部１３５が読み出し可能な記憶領域にあらかじめ記憶させておくとよい。これにより、ＡＦ評価信号算出部１３５は、選択された観察モードに応じたＡＦ用評価信号係数を当該記憶領域から読み出し、読み出したＡＦ用評価信号係数を、取得した分光成分ごとの撮像信号に対して適用することで、ＡＦ評価信号を生成すればよい。
より具体的な一例として、被写体からの観察対象光のうち赤外光を観察対象とした赤外光観察が選択された場合には、赤外光がより強調されるように、当該赤外光観察に対応するＡＦ用評価信号係数ｒ、ｇ、ｂが設定されているとよい。同様に、被写体からの観察対象光のうち緑色光及び青色光を観察対象とした狭帯域光観察が選択された場合には、Ｇ信号及びＢ信号がより強調されるように、当該狭帯域光観察に対応するＡＦ用評価信号係数ｒ、ｇ、ｂが設定されているとよい。なお、観察モードに応じたＡＦ用評価信号係数は、例えば、当該観察モードにおいて観察の対象となる帯域の成分がより強調されるように、事前の実験等に基づきあらかじめ算出すればよい。
また、他の一例として、ＡＦ評価信号算出部１３５は、被写体の撮像が行われる手術の術式に応じてＡＦ用評価信号係数を決定してもよい。この場合には、例えば、当該術式ごとに、当該術式において観察の対象となる帯域の成分がより強調されるようにＡＦ用評価信号係数を算出しておき、所定の記憶領域にあらかじめ記憶させておくとよい。また、ＡＦ評価信号算出部１３５は、例えば、術者（ユーザ）により選択された手術の術式を示す選択信号を入力部から取得し、取得した選択信号に基づき、選択された術式を識別する。そして、ＡＦ評価信号算出部１３５は、識別した術式に応じたＡＦ用評価信号係数を、所定の記憶領域から読み出せばよい。もちろん、上記に示した例はあくまで一例であり、ＡＦ用評価信号係数の管理単位は、医療用観察装置１００の運用方法に応じて適宜変更してもよい。具体的な一例として、ＡＦ評価信号算出部１３５は、医療用観察装置１００を利用して被写体の撮像が行われる診療科に応じてＡＦ用評価信号係数を決定してもよい。
また、ＡＦ評価信号算出部１３５は、撮像信号処理部１３１が撮像信号に対して適用した現像処理の内容に応じて、ＡＦ用評価信号係数を算出してもよい。なお、本動作の詳細については、変形例として別途後述する。
そして、ＡＦ評価信号算出部１３５は、算出したＡＦ評価信号をＡＦ評価値算出部１３６に出力する。
ＡＦ評価値算出部１３６は、ＡＦ評価信号算出部１３５からＡＦ評価信号を取得し、取得したＡＦ評価信号に基づきＡＦ評価値を算出する。具体的な一例として、ＡＦの方式がコントラスト方式の場合には、ＡＦ評価値算出部１３６は、取得したＡＦ評価信号に基づきコントラストを算出する。より具体的には、ＡＦ評価値算出部１３６は、ＡＦ検波枠内のすべての画素（受光素子）についての和として、輝度信号を用いた２次微分（ラプラシアン）よって、ＡＦ評価値（コントラスト）を算出する。なお、一般的には、合焦している場合には、合焦していない場合に比べて隣接する画素間の輝度信号の差分が大きくなり、コントラストが大きくなる。
なお、上記に示すＡＦ評価値の算出方法はあくまで一例であり、ＡＦの方式に応じて当該ＡＦ評価値の算出方法が異なることは前述した通りである。
そして、ＡＦ評価値算出部１３６は、算出したＡＦ評価値を、光学系制御部１３４（図４参照）に出力する。
ここで、改めて図４を参照する。光学系制御部１３４は、撮像部１１０の撮像光学系１１１を構成する各光学部材（例えば、ズームレンズ１１２やフォーカスレンズ１１３）の位置を制御することで、当該撮像部１１０の合焦動作やズーム動作を制御する。
例えば、光学系制御部１３４は、術者（ユーザ）によって、ズーム動作を行う旨の指示信号（ズーム指示信号）が入力され得る。当該ズーム指示信号は、例えばスイッチ等、医療用観察装置１００に設けられる図示しない各種の入力部を介して入力される。ズーム指示信号には、倍率についての指示も含まれており、光学系制御部１３４は、ズーム指示信号に基づいて、指示された倍率を実現し得るズームレンズ１１２の移動方向や移動量を決定し、当該移動方向や当該移動量を示す情報を駆動系制御部１１７に出力する。当該情報を受けて、駆動系制御部１１７は、ズームレンズ駆動部１１５を介して、決定された移動方向に向けて、決定された移動量の分だけズームレンズ１１２を移動させる。これにより、術者の指示に従って撮像光学系１１１の倍率が調整される。なお、撮像光学系１１１の倍率の調整のためにズームレンズ１１２以外の他の光学部材も移動可能に構成される場合には、光学系制御部１３４は、当該他の光学部材の光軸上での移動方向や移動量を併せて決定してもよい。
また、他の一例として、光学系制御部１３４は、撮像部１１０が撮像光学系１１１の焦点距離を制御する（例えば、合焦動作を行う）ためのフォーカスレンズ１１３の移動方向や移動量を算出してもよい。
具体的な一例として、光学系制御部１３４は、術者（ユーザ）からの指示に基づき焦点距離を制御するマニュアルフォーカス（ＭＦ）機能と、被写体に対して自動的に焦点合わせを行うオートフォーカス（ＡＦ）機能とを選択的に切り替え可能に構成されていてもよい。この場合には、光学系制御部１３４は、術者（ユーザ）によって、ＭＦ機能とＡＦ機能とを選択的に切り替えるための指示信号（マニュアル／オートフォーカス切替え信号）が入力され得る。当該マニュアル／オートフォーカス切替え信号は、例えばスイッチ等、医療用観察装置１００に設けられる図示しない各種の入力部を介して入力される。光学系制御部１３４は、マニュアル／オートフォーカス切替え信号に基づいて、フォーカスレンズ１１３の移動方向や移動量の決定方法を切り替える。
例えば、ＭＦ機能が選択された場合には、光学系制御部１３４は、術者（ユーザ）によって、撮像光学系１１１の焦点距離を制御するための指示信号（フォーカス指示信号）が入力され得る。当該フォーカス指示信号は、例えばスイッチ等、医療用観察装置１００に設けられる図示しない各種の入力部を介して入力される。フォーカス指示信号には、例えば、焦点距離についての指示も含まれており、光学系制御部１３４は、フォーカス指示信号に基づいて、指示された焦点距離を実現し得るフォーカスレンズ１１３の移動方向や移動量を決定し、当該移動方向や当該移動量を示す情報を駆動系制御部１１７に出力する。当該情報を受けて、駆動系制御部１１７は、フォーカスレンズ駆動部１１６を介して、決定された移動方向に向けて、決定された移動量の分だけフォーカスレンズ１１３を移動させる。これにより、術者の指示に従って撮像光学系１１１の焦点距離が調整される。なお、撮像光学系１１１の焦点距離の調整のためにフォーカスレンズ１１３以外の他の光学部材も移動可能に構成される場合には、光学系制御部１３４は、当該他の光学部材の光軸上での移動量を併せて決定してもよい。
また、ＡＦ機能が選択された場合には、光学系制御部１３４は、ＡＦ検波部１３３から出力されるＡＦ評価値（例えば、コントラスト）に基づき、フォーカスレンズ１１３の移動方向や移動量を決定する。具体的には、光学系制御部１３４は、駆動系制御部１１７を介してフォーカスレンズ１１３の位置を制御しながら、ＡＦ検波部１３３から出力されるＡＦ評価値を、フォーカスレンズ１１３の移動前後で比較する。そして、光学系制御部１３４は、ＡＦ評価値の比較結果に基づき、当該ＡＦ評価値がより大きくなる方向にフォーカスレンズ１１３が光軸上を移動するように、当該フォーカスレンズ１１３の移動方向や移動量を決定する。なお、最初にフォーカスレンズ１１３を移動させる際には（即ち、比較対象となる移動前のＡＦ評価値が存在しない場合には）、あらかじめ設定される所定の方向に所定の距離だけフォーカスレンズ１１３を移動させるように、当該フォーカスレンズ１１３の移動方向や移動量が決定されればよい。
そして、光学系制御部１３４は、ＡＦ評価値の比較結果に基づき決定した、フォーカスレンズ１１３の移動方向や移動量を示す情報を駆動系制御部１１７に出力する。当該情報を受けて、駆動系制御部１１７は、フォーカスレンズ駆動部１１６を介して、決定された移動方向に向けて、決定された移動量の分だけフォーカスレンズ１１３を移動させる。
以下、上記に説明した一連の処理（即ち、ＡＦ評価値の比較結果に基づく移動方向や移動量の決定に係る処理、及び、当該移動方向及び当該移動量に応じたフォーカスレンズ１１３の移動に係る処理）が繰り返し実行されることにより、ＡＦ動作が実行される。即ち、フォーカスレンズ１１３の移動後に撮像素子１１４によって得られた撮像信号に基づいて、ＡＦ検波部１３３がＡＦ評価値を再度算出し、算出された当該ＡＦ評価値に基づき光学系制御部１３４がフォーカスレンズ１１３の移動方向や移動量を決定する。そして、決定された移動方向や移動量に基づき、駆動系制御部１１７が、フォーカスレンズ１１３を移動させる。これらの処理が繰り返し実行されることで、最終的に、ＡＦ評価値（例えば、被写体像のコントラスト）が最大になる位置にフォーカスレンズ１１３が移動され、被写体に対して合焦し、一連のＡＦ動作に係る処理が終了する。
なお、撮像光学系１１１の焦点距離の調整のためにフォーカスレンズ１１３以外の他の光学部材も移動可能に構成される場合には、光学系制御部１３４は、当該他の光学部材の光軸上での移動量を併せて決定してもよい点は、ＭＦ機能が選択された場合と同様である。
なお、上記に説明したＡＦ動作に係る処理はあくまで一例であり、ＡＦ評価値に基づきＡＦ動作を実現することが可能であれば、ＡＦ評価値として使用されるパラメータの種別や、ＡＦ動作に係る処理の内容は特に限定されない。
光源部１７０は、例えば、出射光の帯域が互いに異なる複数の光源を備え、当該光源を選択的に切り替え可能に構成されている。例えば、光源部１７０には、ボタン、タッチパネル、またはスイッチ等の、医療用観察装置１００に設けられる図示しない各種の入力部を介して選択された観察モードを示す、観察モード選択信号が、当該入力部から入力される。光源部１７０は、入力された観察モード選択信号に基づき、選択された観察モードに対応する光源に補助光を照射させる。このような構成により、選択された観察モードに応じた補助光が、対応する光源から被写体に向けて照射される。
また、他の一例として、光源部１７０は、観察モードに応じた光源を着脱可能に構成されていてもよい。この場合には、例えば、光源部１７０は、装着された光源に対応する観察モードが選択されたことを示す観察モード選択信号が入力された場合に、当該光源に補助光を照射させればよい。
以上、図４及び図５を参照して、本実施形態に係る医療用観察装置の機能構成の一例について説明した。
＜４．処理＞
次に、図６を参照して、本実施形態に係る医療用観察装置の一連の処理の流れの一例について、特に、ＡＦ動作に係る処理に着目して説明する。図６は、本実施形態に係る医療用観察装置の一連の処理の流れの一例を示したフローチャートであり、特に、制御部１３０によるＡＦ動作に係る処理の流れの一例について示している。
（ステップＳ１０１）
制御部１３０のＡＦ評価信号算出部１３５は、術者（ユーザ）により選択された観察モードを示す観察モード選択信号を入力部から取得し、当該観察モード選択信号に応じたＡＦ用評価信号係数を、所定の記憶領域から読み出す。また、他の一例として、ＡＦ評価信号算出部１３５は、撮像信号処理部１３１が撮像信号に対して適用した現像処理の内容に応じて、ＡＦ用評価信号係数を算出してもよい。以上のようにして、ＡＦ評価信号算出部１３５は、適用するＡＦ用評価信号係数を決定する。
（ステップＳ１０３）
次いで、ＡＦ評価信号算出部１３５は、検波枠ゲート１３２を介して撮像信号処理部１３１から分光成分ごとの撮像信号を取得し、取得した当該撮像信号に対して決定したＡＦ用評価信号係数を適用することで、分光成分間で重み付けを行い、ＡＦ評価信号を生成する。そして、ＡＦ評価信号算出部１３５は、算出したＡＦ評価信号をＡＦ評価値算出部１３６に出力する。
（ステップＳ１０５）
ＡＦ評価値算出部１３６は、ＡＦ評価信号算出部１３５からＡＦ評価信号を取得し、取得したＡＦ評価信号に基づきＡＦ評価値を算出する。例えば、ＡＦの方式がコントラスト方式の場合には、ＡＦ評価値算出部１３６は、取得したＡＦ評価信号に基づきコントラストをＡＦ評価値として算出する。ＡＦ評価値算出部１３６は、算出したＡＦ評価値を、光学系制御部１３４に出力する。
（ステップＳ１０７）
光学系制御部１３４は、ＡＦ検波部１３３から出力されるＡＦ評価値に基づき、フォーカスレンズ１１３の移動方向や移動量を決定する。例えば、光学系制御部１３４は、駆動系制御部１１７を介してフォーカスレンズ１１３の位置を制御しながら、ＡＦ検波部１３３から出力されるＡＦ評価値を、フォーカスレンズ１１３の移動前後で比較する。光学系制御部１３４は、ＡＦ評価値の比較結果に基づき、当該ＡＦ評価値がより大きくなる方向にフォーカスレンズ１１３が光軸上を移動するように、当該フォーカスレンズ１１３の移動方向や移動量を決定する。
そして、光学系制御部１３４は、ＡＦ評価値の比較結果に基づき決定した、フォーカスレンズ１１３の移動方向や移動量を示す情報を駆動系制御部１１７に出力する。当該情報を受けて、駆動系制御部１１７は、フォーカスレンズ駆動部１１６を介して、決定された移動方向に向けて、決定された移動量の分だけフォーカスレンズ１１３を移動させる。
（ステップＳ１０９）
制御部１３０は、上記に説明した一連の処理を、ＡＦ評価値が最大になる位置にフォーカスレンズ１１３が移動する（即ち、合焦位置に移動する）まで継続する（Ｓ１０９、ＮＯ）。
（ステップＳ１１１）
そして、制御部１３０は、フォーカスレンズ１１３が合焦位置に移動すると（Ｓ１０９、ＹＥＳ）、当該フォーカスレンズ１１３の移動を停止し、ＡＦ動作を終了する。
以上、図６を参照して、本実施形態に係る医療用観察装置１００の一連の処理の流れの一例について、特に、ＡＦ動作に係る処理に着目して説明した。以上のように、本実施形態に係る医療用観察装置１００は、被写体からの観察対象光のうち観察の対象となる帯域に応じたＡＦ用評価信号係数と、撮像素子１１４からの撮像信号とに基づきＡＦ評価値を算出し、算出した当該ＡＦ評価値に基づき合焦動作（ＡＦ動作）を行う。このような構成により、本実施形態に係る医療用観察装置１００は、色収差の比較的大きい光学系を使用した場合においても、観察の対象となる帯域に応じて、被写体に対して合焦するように、撮像光学系１１１の焦点位置を制御することが可能となる。
＜５．変形例＞
次に、本実施形態に係る医療用観察装置の変形例について説明する。
（現像内容に応じたＡＦ用評価信号係数の決定）
前述した実施形態に係る医療用観察装置は、術者（ユーザ）により選択された観察モードに応じて、ＡＦ用評価信号係数を決定し、当該ＡＦ用評価信号係数に基づきＡＦ用評価信号を生成していた。これに対して変形例に係る医療用観察装置は、撮像信号に対して適用した現像処理の内容（例えば、ホワイトバランスの調整や色再現処理のために適用した現像パラメータ）に応じて、ＡＦ用評価信号係数を動的に算出する。
具体的な一例として、医療用観察装置１００が、（式４）として前述したように、色再現マトリックスＭ１に基づき、撮像素子１１４から出力される撮像信号に対して現像処理（色再現処理）を施すことで、映像信号を生成するものとする。この場合には、変形例に係る医療用観察装置１００は、現像処理に用いた当該色再現マトリックスＭ１に基づき、ＡＦ用評価信号係数を算出する。例えば、以下に（式７）として示す計算式は、現像処理に用いた色再現マトリックスＭ１に基づくＡＦ用評価信号係数の算出式の一例である。
Figure 2017010157
上記に示した（式７）において、Ａ＝（ｋｒ，ｋｇ，ｋｂ）は、現像処理のために適用された現像パラメータをＡＦ用評価信号係数に変換するための変換式であり、例えば、観察の対象となる帯域に応じた分光成分間の重みに応じて決定される。具体的な一例として、医療用観察装置１００は、各種の入力部を介して術者（ユーザ）により選択された観察モードに応じて、適用する変換式Ａを特定してもよい。例えば、被写体からの観察対象光のうち緑色光及び青色光を観察対象とした狭帯域光観察が選択された場合には、医療用観察装置１００は、例えば、係数ｋｒに比べて、係数ｋｇ及びｋｂがより大きくなるように設定された変換式Ａを選択すればよい。なお、観察モードに応じた変換式Ａ中の各係数ｋｒ、ｋｇ、ｋｂは、例えば、当該観察モードにおいて観察の対象となる帯域の成分がより強調されるように、事前の実験等に基づきあらかじめ算出されているとよい。
また、上述した例では、医療用観察装置１００が、現像処理として適用したＡＦ用評価信号係数を算出する例について説明したが、適用された現像処理の内容に応じて、ＡＦ用評価信号係数の算出に適用する現像パラメータを適宜変更してもよいことは言うまでもない。例えば、現像処理としてＲＧＢ信号からＹＣｂＣｒ空間の成分に変換するための色再現マトリックスＭ２を適用した場合には、医療用観察装置１００は、選択された観察モードに応じた変換式Ａに対して、当該色再現マトリックスＭ２を適用することで、ＡＦ用評価信号係数を算出してもよい。
また、現像処理として複数の現像パラメータを適用した場合には、医療用観察装置１００は、適用した現像パラメータを選択した変換式Ａに順次乗じることで、ＡＦ用評価信号係数を算出してもよい。具体的な一例として、医療用観察装置１００は、現像パラメータとして色再現マトリックスＭ１及びＭ２を適用した場合には、以下に（式８）として示す計算式に基づき、ＡＦ用評価信号係数を算出してもよい。
Figure 2017010157
なお、上記に示す例はあくまで一例であり、変換式Ａの管理単位は、医療用観察装置１００の運用方法に応じて適宜変更してもよい。具体的な一例として、医療用観察装置１００は、被写体の撮像が行われる手術の術式に応じて変換式Ａを決定してもよい。また、他の一例として、医療用観察装置１００は、被写体の撮像が行われる診療科に応じて変換式Ａを決定してもよい。
以上のような構成により、変形例に係る医療用観察装置１００は、撮像信号に対して適用した現像処理の内容に応じて、より好適な態様で被写体に対して合焦するように、撮像光学系１１１の焦点位置を制御することが可能となる。
（撮像光学系に応じたＡＦ用評価信号係数の決定）
また、医療用観察装置１００は、撮像光学系１１１（または、撮像部１１０自体）が着脱可能に構成されていてもよい。このような場合には、医療用観察装置１００に対して、光学特性が異なる撮像光学系１１１が装着される場合が想定され、装着される撮像光学系１１１の光学特性に応じて合焦位置が異なる場合も想定され得る。特に、被写体からの観察対象光のうち複数の帯域（例えば、互いに近傍に位置する帯域）を観察対象とする状況下で、各帯域に対応する被写体像それぞれに合焦するように撮像光学系１１１の焦点位置を制御する場合には、好適な合焦位置が撮像光学系１１１の光学特性に応じて異なる場合がある。このような状況を鑑みて、医療用観察装置１００は、装着された撮像光学系１１１の光学特性（特に、色収差）に応じて、ＡＦ用評価信号係数を算出してもよい。
具体的な一例として、前述したＡＦ用評価信号係数を算出するための変換式Ａ＝（ｋｒ，ｋｇ，ｋｂ）を、撮像光学系１１１ごとに、事前の実験等に基づき当該撮像光学系１１１の光学特性に応じて算出し、所定の記憶領域にあらかじめ記憶させておくとよい。医療用観察装置１００は、例えば、装着された撮像光学系１１１を識別し、識別結果に基づき、当該撮像光学系１１１に対応する変換式Ａを所定の記憶領域から読み出す。そして、医療用観察装置１００は、読み出した変換式Ａに基づき、ＡＦ用評価信号係数を算出してもよい。
なお、医療用観察装置１００が、自身に装着された撮像光学系１１１を識別できれば、その方法は特に限定されない。具体的な一例として、撮像光学系１１１の所定の記憶領域に当該撮像光学系１１１を識別するための識別情報をあらかじめ記憶させておき、医療用観察装置１００は、接続された撮像光学系１１１の当該記憶領域から当該識別情報を読み出すことで、当該撮像光学系１１１を識別してもよい。
また、変換式Ａについては、観察対象となる帯域ごと（換言すると、観察モードごと）に設定されていてもよいことは、前述した例と同様である。この場合には、例えば、観察対象となる帯域（換言すると、選択される観察モード）と、接続される撮像光学系１１１との組み合わせごとに変換式Ａがあらかじめ算出され、所定の記録領域に記憶されていてもよい。
また、他の一例として、観察対象となる帯域と、接続される撮像光学系１１１との組み合わせごとにＡＦ用評価信号係数があらかじめ算出され、所定の記憶領域に記憶されていてもよい。この場合には、医療用観察装置１００は、例えば、術者（ユーザ）により選択された観察モードと、接続された撮像光学系１１１の識別結果とに応じて、対応するＡＦ用評価信号係数を所定の領域から読み出せばよい。
以上のような構成により、医療用観察装置１００は、撮像光学系１１１が着脱可能に構成されている場合においても、装着される撮像光学系１１１の光学特性に応じて、より好適な態様で被写体に対して合焦するように、当該撮像光学系１１１の焦点位置を制御することが可能となる。
＜６．適用例＞
次に、図７を参照して、本実施形態に係る医療用観察装置の他の適用例として、アームを備えた手術用ビデオ顕微鏡装置が用いられる場合の一例について説明する。図７は、本実施形態に係る医療用観察装置の一適用例について説明するための説明図である。
図７は、手術用ビデオ顕微鏡装置を用いた施術の様子を模式的に表している。具体的には、図７を参照すると、施術者（ユーザ）５２０である医師が、例えばメス、鑷子、鉗子等の手術用の器具５２１を使用して、施術台５３０上の施術対象（患者）５４０に対して手術を行っている様子が図示されている。なお、以下の説明においては、施術とは、手術や検査等、ユーザ５２０である医師が施術対象５４０である患者に対して行う各種の医療的な処置の総称であるものとする。また、図７に示す例では、施術の一例として手術の様子を図示しているが、手術用ビデオ顕微鏡装置５１０が用いられる施術は手術に限定されず、他の各種の施術であってもよい。
施術台５３０の脇には本実施形態に係る手術用ビデオ顕微鏡装置５１０が設けられる。手術用ビデオ顕微鏡装置５１０は、基台であるベース部５１１と、ベース部５１１から延伸するアーム部５１２と、アーム部５１２の先端に先端ユニットとして接続される撮像ユニット５１５とを備える。アーム部５１２は、複数の関節部５１３ａ、５１３ｂ、５１３ｃと、関節部５１３ａ、５１３ｂによって連結される複数のリンク５１４ａ、５１４ｂと、アーム部５１２の先端に設けられる撮像ユニット５１５を有する。図７に示す例では、簡単のため、アーム部５１２は３つの関節部５１３ａ〜５１３ｃ及び２つのリンク５１４ａ、５１４ｂを有しているが、実際には、アーム部５１２及び撮像ユニット５１５の位置及び姿勢の自由度を考慮して、所望の自由度を実現するように関節部５１３ａ〜５１３ｃ及びリンク５１４ａ、５１４ｂの数や形状、関節部５１３ａ〜５１３ｃの駆動軸の方向等が適宜設定されてもよい。
関節部５１３ａ〜５１３ｃは、リンク５１４ａ、５１４ｂを互いに回動可能に連結する機能を有し、関節部５１３ａ〜５１３ｃの回転が駆動されることにより、アーム部５１２の駆動が制御される。
アーム部５１２の先端には、先端ユニットとして撮像ユニット５１５が接続されている。撮像ユニット５１５は、撮像対象の画像を取得するユニットであり、例えば動画や静止画を撮像できるカメラ等である。図７に示すように、アーム部５１２の先端に設けられた撮像ユニット５１５が施術対象５４０の施術部位の様子を撮像するように、手術用ビデオ顕微鏡装置５１０によってアーム部５１２及び撮像ユニット５１５の姿勢や位置が制御される。なお、アーム部５１２の先端に先端ユニットとして接続される撮像ユニット５１５の構成は特に限定されず、例えば、撮像ユニット５１５は、内視鏡や顕微鏡として構成されていてもよい。また、撮像ユニット５１５は、当該アーム部５１２に対して着脱可能に構成されていてもよい。このような構成により、例えば、利用用途に応じた撮像ユニット５１５が、アーム部５１２の先端に先端ユニットとして適宜接続されてもよい。なお、本説明では、先端ユニットとして撮像ユニット５１５が適用されている場合に着目して説明するが、アーム部５１２の先端に接続される先端ユニットは、必ずしも撮像ユニット５１５に限定されないことは言うまでもない。
また、ユーザ５２０と対向する位置には、モニタやディスプレイ等の表示装置５５０が設置される。撮像ユニット５１５により取得された施術部位の画像は、例えば、手術用ビデオ顕微鏡装置５１０に内蔵または外付けされた画像処理装置（図示は省略する）により、各種画像処理が施されたうえで、表示装置５５０の表示画面に電子画像として表示される。このような構成により、ユーザ５２０は、表示装置５５０の表示画面に表示される施術部位の電子画像を見ながら各種の処置（例えば、手術等）を行うことが可能となる。
なお、図７に示す例では、撮像ユニット５１５が、例えば、図４を参照して前述した撮像部１１０を含む。また、撮像ユニット５１５により取得された施術部位の画像に対して、各種画像処理を施す画像処理装置が、図４を参照して前述した制御部１３０の一例に相当する。また、表示装置５５０が、当該制御部１３０からの映像信号の出力先の一例に相当し得る。
以上、図７を参照して、本実施形態に係る医療用観察装置の他の適用例として、アームを備えた手術用ビデオ顕微鏡装置が用いられる場合の一例について説明した。
＜７．ハードウェア構成＞
次に、図８を参照しながら、本実施形態に係る医療用観察装置として構成される情報処理装置９００のハードウェア構成の一例について、詳細に説明する。図８は、本開示の一実施形態に係る医療用観察装置として構成される情報処理装置９００のハードウェア構成の一構成例を示す機能ブロック図である。
図８に示すように、情報処理装置９００は、主に、ＣＰＵ９０１と、ＲＯＭ９０３と、ＲＡＭ９０５と、を備える。また、情報処理装置９００は、更に、ホストバス９０７と、ブリッジ９０９と、外部バス９１１と、インターフェース９１３と、入力装置９１５と、出力装置９１７と、ストレージ装置９１９とを備える。また、情報処理装置９００は、ドライブ９２１と、接続ポート９２３と、通信装置９２５とを備えてもよい。
ＣＰＵ９０１は、演算処理装置及び制御装置として機能し、ＲＯＭ９０３、ＲＡＭ９０５、ストレージ装置９１９又はリムーバブル記録媒体９２７に記録された各種プログラムに従って、情報処理装置９００内の動作全般又はその一部を制御する。ＲＯＭ９０３は、ＣＰＵ９０１が使用するプログラムや演算パラメータ等を記憶する。ＲＡＭ９０５は、ＣＰＵ９０１が使用するプログラムや、プログラムの実行において適宜変化するパラメータ等を一次記憶する。これらはＣＰＵバス等の内部バスにより構成されるホストバス９０７により相互に接続されている。なお、図４を参照して前述した、制御部１３０の各構成は、例えば、ＣＰＵ９０１により実現され得る。
ホストバス９０７は、ブリッジ９０９を介して、ＰＣＩ（Ｐｅｒｉｐｈｅｒａｌ Ｃｏｍｐｏｎｅｎｔ Ｉｎｔｅｒｃｏｎｎｅｃｔ／Ｉｎｔｅｒｆａｃｅ）バスなどの外部バス９１１に接続されている。また、外部バス９１１には、インターフェース９１３を介して、入力装置９１５、出力装置９１７、ストレージ装置９１９、ドライブ９２１、接続ポート９２３及び通信装置９２５が接続される。
入力装置９１５は、例えば、マウス、キーボード、タッチパネル、ボタン、スイッチ、レバー及びペダル等、ユーザが操作する操作手段である。また、入力装置９１５は、例えば、赤外線やその他の電波を利用したリモートコントロール手段（いわゆる、リモコン）であってもよいし、情報処理装置９００の操作に対応した携帯電話やＰＤＡ等の外部接続機器９２９であってもよい。さらに、入力装置９１５は、例えば、上記の操作手段を用いてユーザにより入力された情報に基づいて入力信号を生成し、ＣＰＵ９０１に出力する入力制御回路などから構成されている。情報処理装置９００のユーザは、この入力装置９１５を操作することにより、情報処理装置９００に対して各種のデータを入力したり処理動作を指示したりすることができる。
出力装置９１７は、取得した情報をユーザに対して視覚的又は聴覚的に通知することが可能な装置で構成される。このような装置として、ＣＲＴディスプレイ装置、液晶ディスプレイ装置、プラズマディスプレイ装置、ＥＬディスプレイ装置及びランプ等の表示装置や、スピーカ及びヘッドホン等の音声出力装置や、プリンタ装置等がある。出力装置９１７は、例えば、情報処理装置９００が行った各種処理により得られた結果を出力する。具体的には、表示装置は、情報処理装置９００が行った各種処理により得られた結果を、テキスト又はイメージで表示する。他方、音声出力装置は、再生された音声データや音響データ等からなるオーディオ信号をアナログ信号に変換して出力する。例えば、図４を参照して前述した撮像信号処理部１３１からの映像信号の出力先としては、表示装置として構成された出力装置９１７が想定され得る。
ストレージ装置９１９は、情報処理装置９００の記憶部の一例として構成されたデータ格納用の装置である。ストレージ装置９１９は、例えば、ＨＤＤ（Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ）等の磁気記憶部デバイス、半導体記憶デバイス、光記憶デバイス又は光磁気記憶デバイス等により構成される。このストレージ装置９１９は、ＣＰＵ９０１が実行するプログラムや各種データ等を格納する。
ドライブ９２１は、記録媒体用リーダライタであり、情報処理装置９００に内蔵、あるいは外付けされる。ドライブ９２１は、装着されている磁気ディスク、光ディスク、光磁気ディスク又は半導体メモリ等のリムーバブル記録媒体９２７に記録されている情報を読み出して、ＲＡＭ９０５に出力する。また、ドライブ９２１は、装着されている磁気ディスク、光ディスク、光磁気ディスク又は半導体メモリ等のリムーバブル記録媒体９２７に記録を書き込むことも可能である。リムーバブル記録媒体９２７は、例えば、ＤＶＤメディア、ＨＤ−ＤＶＤメディア又はＢｌｕ−ｒａｙ（登録商標）メディア等である。また、リムーバブル記録媒体９２７は、コンパクトフラッシュ（登録商標）（ＣＦ：ＣｏｍｐａｃｔＦｌａｓｈ）、フラッシュメモリ又はＳＤメモリカード（Ｓｅｃｕｒｅ Ｄｉｇｉｔａｌ ｍｅｍｏｒｙ ｃａｒｄ）等であってもよい。また、リムーバブル記録媒体９２７は、例えば、非接触型ＩＣチップを搭載したＩＣカード（Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ ｃａｒｄ）又は電子機器等であってもよい。
接続ポート９２３は、情報処理装置９００に直接接続するためのポートである。接続ポート９２３の一例として、ＵＳＢ（Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ）ポート、ＩＥＥＥ１３９４ポート、ＳＣＳＩ（Ｓｍａｌｌ Ｃｏｍｐｕｔｅｒ Ｓｙｓｔｅｍ Ｉｎｔｅｒｆａｃｅ）ポート等がある。接続ポート９２３の別の例として、ＲＳ−２３２Ｃポート、光オーディオ端子、ＨＤＭＩ（登録商標）（Ｈｉｇｈ−Ｄｅｆｉｎｉｔｉｏｎ Ｍｕｌｔｉｍｅｄｉａ Ｉｎｔｅｒｆａｃｅ）ポート等がある。この接続ポート９２３に外部接続機器９２９を接続することで、情報処理装置９００は、外部接続機器９２９から直接各種のデータを取得したり、外部接続機器９２９に各種のデータを提供したりする。
通信装置９２５は、例えば、通信網（ネットワーク）９３１に接続するための通信デバイス等で構成された通信インターフェースである。通信装置９２５は、例えば、有線若しくは無線ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）、Ｂｌｕｅｔｏｏｔｈ（登録商標）又はＷＵＳＢ（Ｗｉｒｅｌｅｓｓ ＵＳＢ）用の通信カード等である。また、通信装置９２５は、光通信用のルータ、ＡＤＳＬ（Ａｓｙｍｍｅｔｒｉｃ Ｄｉｇｉｔａｌ Ｓｕｂｓｃｒｉｂｅｒ Ｌｉｎｅ）用のルータ又は各種通信用のモデム等であってもよい。この通信装置９２５は、例えば、インターネットや他の通信機器との間で、例えばＴＣＰ／ＩＰ等の所定のプロトコルに則して信号等を送受信することができる。また、通信装置９２５に接続される通信網９３１は、有線又は無線によって接続されたネットワーク等により構成され、例えば、インターネット、家庭内ＬＡＮ、赤外線通信、ラジオ波通信又は衛星通信等であってもよい。
以上、本開示の実施形態に係る医療用立体観察システムを構成する情報処理装置９００の機能を実現可能なハードウェア構成の一例を示した。上記の各構成要素は、汎用的な部材を用いて構成されていてもよいし、各構成要素の機能に特化したハードウェアにより構成されていてもよい。従って、本実施形態を実施する時々の技術レベルに応じて、適宜、利用するハードウェア構成を変更することが可能である。なお、図８では図示しないが、例えば、前述した医療用観察装置に対応する各種の構成を当然備える。
なお、上述のような本実施形態に係る医療用立体観察システムを構成する情報処理装置９００の各機能を実現するためのコンピュータプログラムを作製し、パーソナルコンピュータ等に実装することが可能である。また、このようなコンピュータプログラムが格納された、コンピュータで読み取り可能な記録媒体も提供することができる。記録媒体は、例えば、磁気ディスク、光ディスク、光磁気ディスク、フラッシュメモリなどである。また、上記のコンピュータプログラムは、記録媒体を用いずに、例えばネットワークを介して配信してもよい。
＜８．まとめ＞
以上、説明したように、本実施形態に係る医療用観察装置１００は、被写体からの観察対象光のうち観察の対象となる帯域に応じたＡＦ用評価信号係数と、撮像素子１１４からの撮像信号とに基づきＡＦ評価値を算出し、算出した当該ＡＦ評価値に基づき合焦動作（ＡＦ動作）を行う。このような構成により、本実施形態に係る医療用観察装置１００は、色収差の比較的大きい光学系を使用した場合においても、観察の対象となる帯域に応じて、被写体に対して合焦するように、撮像光学系１１１の焦点位置を制御することが可能となる。即ち、本実施形態に係る医療用観察装置１００に依れば、術者（ユーザ）は、所謂特殊光観察においても、観察の対象となる帯域に応じた、より鮮明な被写体像を観察することが可能となる。
特に、本実施形態に係る医療用観察装置１００は、例えば、撮像素子１１４からの撮像信号に対して適用される現像処理の特性に応じたＡＦ用評価信号係数に基づきＡＦ用評価信号を生成し、当該ＡＦ用評価信号に基づきＡＦ評価値を算出することが可能である。このような構成により、医療用観察装置１００は、互いに異なる複数の帯域それぞれに注目した現像を行うような状況下でも、当該複数の帯域それぞれについて、被写体に対して合焦するように、撮像光学系１１１の焦点距離を制御することが可能となる。
より具体的な一例として、医療用観察装置１００が、被写体に対して光源から複数の異なる帯域の補助光を照射し、当該被写体からの反射光の受光結果に基づく撮像信号に対して、当該複数の帯域それぞれについて、帯域ごとに異なる現像処理を施す場合に着目する。この場合には、例えば、医療用観察装置１００は、複数の帯域それぞれに着目した現像処理ごとのＡＦ用評価信号係数に基づき、当該現像処理ごとにＡＦ用評価信号を生成し、当該ＡＦ用評価信号に基づきＡＦ評価値を算出する。そして、医療用観察装置１００は、現像処理ごとに、当該現像処理に対応したＡＦ評価値に基づき、撮像光学系１１１の焦点位置を制御してもよい。このような制御により、医療用観察装置１００は、例えば、患部表面や患部奥等のように、生体内の異なる位置それぞれに対して合焦した画像（即ち、患部がより鮮明に提示された画像）を出力することが可能となる。
また、他の一例として、複数の帯域の蛍光を放出する蛍光体を観察する場合において、医療用観察装置１００が、当該蛍光の受光結果に基づく撮像信号に対して、当該複数の帯域それぞれについて、帯域ごとに異なる現像処理を施す場合に着目する。この場合においても、例えば、医療用観察装置１００は、複数の帯域それぞれに着目した現像処理ごとのＡＦ用評価信号係数に基づきＡＦ評価値を算出し、現像処理ごとに、当該現像処理に対応したＡＦ評価値に基づき、撮像光学系１１１の焦点位置を制御してもよい。このような制御により、医療用観察装置１００は、例えば、血管や腫瘍部位のように、生体内の異なる部位（換言すると、互いに異なる蛍光を放出する部分）それぞれに対して合焦した画像（即ち、各部位がより鮮明に提示された画像）を出力することが可能となる。
以上、添付図面を参照しながら本開示の好適な実施形態について詳細に説明したが、本開示の技術的範囲はかかる例に限定されない。本開示の技術分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本開示の技術的範囲に属するものと了解される。
また、本明細書に記載された効果は、あくまで説明的または例示的なものであって限定的ではない。つまり、本開示に係る技術は、上記の効果とともに、または上記の効果に代えて、本明細書の記載から当業者には明らかな他の効果を奏しうる。
なお、以下のような構成も本開示の技術的範囲に属する。
（１）
撮像素子による生体内の被写体からの観察対象光の受光結果に基づく、互いに異なる複数の分光成分それぞれに対応する撮像信号に対して、前記観察対象光の帯域のうち観察の対象とする帯域に応じた前記複数の分光成分間の重みを適用し、前記重みが適用された当該撮像信号に基づき、合焦の度合いを示す評価値を算出する算出部と、
前記被写体からの観察対象光を前記撮像素子に結像する光学系のうち少なくとも１つの光学部材の位置を、前記評価値に基づき制御することで当該光学系の焦点位置を制御する制御部と、
を備える、医療用観察装置。
（２）
前記算出部は、前記複数の分光成分に基づき前記観察の対象とする帯域の成分に基づく画像データを生成するための補正パラメータに応じた前記重みに基づき、前記評価値を算出する、前記（１）に記載の医療用観察装置。
（３）
前記算出部は、前記観察の対象とする帯域ごとにあらかじめ設定された前記重みに基づき、前記評価値を算出する、前記（１）に記載の医療用観察装置。
（４）
前記算出部は、前記観察対象光の帯域のうち少なくとも一部の帯域を観察対象とする複数のモードそれぞれについてあらかじめ設定された前記重みのうち、選択された前記モードに対応する前記重みを取得し、取得した当該重みに基づき、前記評価値を算出する、前記（３）に記載の医療用観察装置。
（５）
前記複数のモードには、狭帯域光観察、蛍光観察、及び赤外光観察のうち少なくともいずれかに対応するモードが含まれる、前記（４）に記載の医療用観察装置。
（６）
前記算出部は、前記被写体の撮像が行われる手術の術式に応じて設定される前記重みに基づき、前記評価値を算出する、前記（１）に記載の医療用観察装置。
（７）
前記算出部は、前記被写体の撮像が行われる診療科に応じて設定される前記重みに基づき、前記評価値を算出する、前記（１）に記載の医療用観察装置。
（８）
前記算出部は、前記光学系の光学特性に応じて設定される前記重みに基づき、前記評価値を算出する、前記（１）〜（７）のいずれか一項に記載の医療用観察装置。
（９）
前記複数の分光成分に対応する前記撮像信号は、ＲＧＢ信号であり、
Ｒ信号、Ｇ信号、及びＢ信号の輝度成分をそれぞれＲ、Ｇ、及びＢとし、前記重みに基づく、前記Ｒ信号、前記Ｇ信号、及び前記Ｂ信号それぞれに対応する係数をｒ、ｇ、及びｂとしたとき、前記評価値を算出するための評価信号Ｌは、以下に示す計算式に基づき算出される、前記（１）〜（８）のいずれか一項に記載の医療用観察装置。
Figure 2017010157
 （１０）
前記制御部は、前記評価値を基に算出される被写体像のコントラストに基づき、前記光学系の焦点位置を制御する、前記（１）〜（９）のいずれか一項に記載の医療用観察装置。
（１１）
前記撮像素子を含む撮像部を備える、前記（１）〜（１０）のいずれか一項に記載の医療用観察装置。
（１２）
前記撮像部は、患者の体腔内に挿入される内視鏡である、
前記（１１）に記載の医療用観察装置。
（１３）
前記撮像部は、前記被写体の光学像を取得する前記光学系を含む顕微鏡部であって、
前記顕微鏡部を支持する支持部、
をさらに備える、
前記（１１）に記載の医療用観察装置。
（１４）
プロセッサが、
撮像素子による生体内の被写体からの観察対象光の受光結果に基づく、互いに異なる複数の分光成分それぞれに対応する撮像信号に対して、前記観察対象光の帯域のうち観察の対象とする帯域に応じた前記複数の分光成分間の重みを適用し、前記重みが適用された当該撮像信号に基づき、合焦の度合いを示す評価値を算出することと、
前記被写体からの観察対象光を前記撮像素子に結像する光学系のうち少なくとも１つの光学部材の位置を、前記評価値に基づき制御することで当該光学系の焦点位置を制御することと、
を含む、医療用観察方法。
１ 内視鏡手術システム
１１ 内視鏡
１３ ＣＣＵ
１５ 表示装置
１７ 光源装置
２１ 処置具用装置
２２ エネルギ処置具
２３ 鉗子
２４ 気腹装置
２５ａ、２５ｂ トロッカ
２６ レコーダ
２７ プリンタ
３１ カート
３３ 患者ベッド
３５ フットスイッチ
１００ 医療用観察装置
１１０ 撮像部
１１１ 撮像光学系
１１２ ズームレンズ
１１３ フォーカスレンズ
１１４ 撮像素子
１１５ ズームレンズ駆動部
１１６ フォーカスレンズ駆動部
１１７ 駆動系制御部
１１８ 撮像素子駆動部
１３０ 制御部
１３１ 撮像信号処理部
１３２ 検波枠ゲート
１３３ 検波部
１３４ 光学系制御部
１３５ 評価信号算出部
１３６ 評価値算出部
１７０ 光源部

Claims (14)

  1. 撮像素子による生体内の被写体からの観察対象光の受光結果に基づく、互いに異なる複数の分光成分それぞれに対応する撮像信号に対して、前記観察対象光の帯域のうち観察の対象とする帯域に応じた前記複数の分光成分間の重みを適用し、前記重みが適用された当該撮像信号に基づき、合焦の度合いを示す評価値を算出する算出部と、
    前記被写体からの観察対象光を前記撮像素子に結像する光学系のうち少なくとも１つの光学部材の位置を、前記評価値に基づき制御することで当該光学系の焦点位置を制御する制御部と、
    を備える、医療用観察装置。
  2. 前記算出部は、前記複数の分光成分に基づき前記観察の対象とする帯域の成分に基づく画像データを生成するための補正パラメータに応じた前記重みに基づき、前記評価値を算出する、請求項１に記載の医療用観察装置。
  3. 前記算出部は、前記観察の対象とする帯域ごとにあらかじめ設定された前記重みに基づき、前記評価値を算出する、請求項１に記載の医療用観察装置。
  4. 前記算出部は、前記観察対象光の帯域のうち少なくとも一部の帯域を観察対象とする複数のモードそれぞれについてあらかじめ設定された前記重みのうち、選択された前記モードに対応する前記重みを取得し、取得した当該重みに基づき、前記評価値を算出する、請求項３に記載の医療用観察装置。
  5. 前記複数のモードには、狭帯域光観察、蛍光観察、及び赤外光観察のうち少なくともいずれかに対応するモードが含まれる、請求項４に記載の医療用観察装置。
  6. 前記算出部は、前記被写体の撮像が行われる手術の術式に応じて設定される前記重みに基づき、前記評価値を算出する、請求項１に記載の医療用観察装置。
  7. 前記算出部は、前記被写体の撮像が行われる診療科に応じて設定される前記重みに基づき、前記評価値を算出する、請求項１に記載の医療用観察装置。
  8. 前記算出部は、前記光学系の光学特性に応じて設定される前記重みに基づき、前記評価値を算出する、請求項１に記載の医療用観察装置。
  9. 前記複数の分光成分に対応する前記撮像信号は、ＲＧＢ信号であり、
    Ｒ信号、Ｇ信号、及びＢ信号の輝度成分をそれぞれＲ、Ｇ、及びＢとし、前記重みに基づく、前記Ｒ信号、前記Ｇ信号、及び前記Ｂ信号それぞれに対応する係数をｒ、ｇ、及びｂとしたとき、前記評価値を算出するための評価信号Ｌは、以下に示す計算式に基づき算出される、請求項１に記載の医療用観察装置。
    Figure 2017010157
  10. 前記制御部は、前記評価値を基に算出される被写体像のコントラストに基づき、前記光学系の焦点位置を制御する、請求項１に記載の医療用観察装置。
  11. 前記撮像素子を含む撮像部を備える、請求項１に記載の医療用観察装置。
  12. 前記撮像部は、患者の体腔内に挿入される内視鏡である、
    請求項１１に記載の医療用観察装置。
  13. 前記撮像部は、前記被写体の光学像を取得する前記光学系を含む顕微鏡部であって、
    前記顕微鏡部を支持する支持部、
    をさらに備える、
    請求項１１に記載の医療用観察装置。
  14. プロセッサが、
    撮像素子による生体内の被写体からの観察対象光の受光結果に基づく、互いに異なる複数の分光成分それぞれに対応する撮像信号に対して、前記観察対象光の帯域のうち観察の対象とする帯域に応じた前記複数の分光成分間の重みを適用し、前記重みが適用された当該撮像信号に基づき、合焦の度合いを示す評価値を算出することと、
    前記被写体からの観察対象光を前記撮像素子に結像する光学系のうち少なくとも１つの光学部材の位置を、前記評価値に基づき制御することで当該光学系の焦点位置を制御することと、
    を含む、医療用観察方法。
JP2017528310A 2015-07-15 2016-05-12 医療用観察装置及び医療用観察方法 Active JP6983067B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2015141225 2015-07-15
JP2015141225 2015-07-15
PCT/JP2016/064126 WO2017010157A1 (ja) 2015-07-15 2016-05-12 医療用観察装置及び医療用観察方法

Publications (2)

Publication Number Publication Date
JPWO2017010157A1 true JPWO2017010157A1 (ja) 2018-05-24
JP6983067B2 JP6983067B2 (ja) 2021-12-17

Family

ID=57757199

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017528310A Active JP6983067B2 (ja) 2015-07-15 2016-05-12 医療用観察装置及び医療用観察方法

Country Status (5)

Country Link
US (1) US10568492B2 (ja)
EP (1) EP3300650B1 (ja)
JP (1) JP6983067B2 (ja)
CN (1) CN107847107B (ja)
WO (1) WO2017010157A1 (ja)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6581952B2 (ja) * 2016-09-30 2019-09-25 富士フイルム株式会社 内視鏡システム及びその作動方法
JP7039938B2 (ja) * 2017-06-27 2022-03-23 ソニーグループ株式会社 情報処理装置および方法、並びに、情報処理システム
EP3514600A1 (en) * 2018-01-19 2019-07-24 Leica Instruments (Singapore) Pte. Ltd. Method for fluorescence intensity normalization
US20210345856A1 (en) * 2018-10-18 2021-11-11 Sony Corporation Medical observation system, medical observation apparatus, and medical observation method
JP7286948B2 (ja) * 2018-11-07 2023-06-06 ソニーグループ株式会社 医療用観察システム、信号処理装置及び医療用観察方法
WO2020121906A1 (ja) * 2018-12-13 2020-06-18 ソニー株式会社 医療支援システム、医療支援装置及び医療支援方法
JP7247702B2 (ja) 2019-03-27 2023-03-29 ソニーグループ株式会社 内視鏡システム、内視鏡制御方法、及び、撮像制御装置
US11712155B2 (en) * 2019-06-20 2023-08-01 Cilag GmbH Intenational Fluorescence videostroboscopy of vocal cords

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003153850A (ja) * 2001-11-22 2003-05-27 Olympus Optical Co Ltd 内視鏡用撮像装置
JP2004272039A (ja) * 2003-03-11 2004-09-30 Pentax Corp 自動焦点調節装置
JP2004272037A (ja) * 2003-03-11 2004-09-30 Pentax Corp 自動焦点調節装置及び自動焦点調節方法
JP2012110481A (ja) * 2010-11-24 2012-06-14 Olympus Corp 内視鏡装置、フォーカス制御方法及びプログラム
JP2013230289A (ja) * 2012-05-01 2013-11-14 Olympus Corp 内視鏡装置及び内視鏡装置のフォーカス制御方法
WO2015012096A1 (ja) * 2013-07-22 2015-01-29 オリンパスメディカルシステムズ株式会社 医療用観察装置

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09253041A (ja) * 1996-03-26 1997-09-30 Olympus Optical Co Ltd 内視鏡装置
JP4772235B2 (ja) * 2001-09-13 2011-09-14 オリンパス株式会社 内視鏡装置
JP2005250401A (ja) * 2004-03-08 2005-09-15 Kodak Digital Product Center Japan Ltd 焦点距離検出方法及び合焦装置
EP2417897A4 (en) * 2009-04-09 2012-11-07 Olympus Medical Systems Corp ENDOSCOPIC DEVICE
JP5597942B2 (ja) * 2009-06-10 2014-10-01 株式会社ニコン 電子カメラ
JP5346856B2 (ja) * 2010-03-18 2013-11-20 オリンパス株式会社 内視鏡システム、内視鏡システムの作動方法及び撮像装置
JP5466182B2 (ja) * 2011-01-11 2014-04-09 富士フイルム株式会社 内視鏡システムおよび内視鏡システムの作動方法
JP5940306B2 (ja) * 2012-01-13 2016-06-29 オリンパス株式会社 内視鏡装置及び内視鏡装置の作動方法
JP5953373B2 (ja) * 2012-05-31 2016-07-20 オリンパス株式会社 内視鏡装置
US9451876B2 (en) * 2013-10-21 2016-09-27 Olympus Corporation Endoscope system and focus control method for endoscope system
CN109640781A (zh) * 2016-09-06 2019-04-16 奥林巴斯株式会社 内窥镜系统

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003153850A (ja) * 2001-11-22 2003-05-27 Olympus Optical Co Ltd 内視鏡用撮像装置
JP2004272039A (ja) * 2003-03-11 2004-09-30 Pentax Corp 自動焦点調節装置
JP2004272037A (ja) * 2003-03-11 2004-09-30 Pentax Corp 自動焦点調節装置及び自動焦点調節方法
JP2012110481A (ja) * 2010-11-24 2012-06-14 Olympus Corp 内視鏡装置、フォーカス制御方法及びプログラム
JP2013230289A (ja) * 2012-05-01 2013-11-14 Olympus Corp 内視鏡装置及び内視鏡装置のフォーカス制御方法
WO2015012096A1 (ja) * 2013-07-22 2015-01-29 オリンパスメディカルシステムズ株式会社 医療用観察装置

Also Published As

Publication number Publication date
EP3300650A4 (en) 2019-02-06
US20180146844A1 (en) 2018-05-31
JP6983067B2 (ja) 2021-12-17
CN107847107A (zh) 2018-03-27
EP3300650B1 (en) 2023-08-23
EP3300650A1 (en) 2018-04-04
WO2017010157A1 (ja) 2017-01-19
CN107847107B (zh) 2021-09-24
US10568492B2 (en) 2020-02-25

Similar Documents

Publication Publication Date Title
JP6983067B2 (ja) 医療用観察装置及び医療用観察方法
US11788966B2 (en) Imaging system
US11642004B2 (en) Image processing device, image processing method and recording medium
JP7095693B2 (ja) 医療用観察システム
US20210019921A1 (en) Image processing device, image processing method, and program
WO2017010156A1 (ja) 医療用観察装置及び医療用観察方法
WO2018173605A1 (ja) 手術用制御装置、制御方法、手術システム、およびプログラム
US20230047294A1 (en) Medical image generation apparatus, medical image generation method, and medical image generation program
WO2020009127A1 (ja) 医療用観察システム、医療用観察装置、及び医療用観察装置の駆動方法
JP7452177B2 (ja) 医療用観察システム、制御装置、制御方法、および撮像装置
WO2023145480A1 (ja) 医療撮像システム、制御方法、及びプログラム
JP7456385B2 (ja) 画像処理装置、および画像処理方法、並びにプログラム
JP7480779B2 (ja) 医療用画像処理装置、医療用画像処理装置の駆動方法、医療用撮像システム、及び医療用信号取得システム
JP2020134538A (ja) 画像取得装置及び画像取得方法

Legal Events

Date Code Title Description
RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20190208

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20190214

RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20190215

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20190222

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190426

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190426

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20190426

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20190522

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20200519

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200714

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20201006

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210104

C60 Trial request (containing other claim documents, opposition documents)

Free format text: JAPANESE INTERMEDIATE CODE: C60

Effective date: 20210104

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20210113

C21 Notice of transfer of a case for reconsideration by examiners before appeal proceedings

Free format text: JAPANESE INTERMEDIATE CODE: C21

Effective date: 20210119

A912 Re-examination (zenchi) completed and case transferred to appeal board

Free format text: JAPANESE INTERMEDIATE CODE: A912

Effective date: 20210226

C211 Notice of termination of reconsideration by examiners before appeal proceedings

Free format text: JAPANESE INTERMEDIATE CODE: C211

Effective date: 20210302

C22 Notice of designation (change) of administrative judge

Free format text: JAPANESE INTERMEDIATE CODE: C22

Effective date: 20210413

C13 Notice of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: C13

Effective date: 20210629

C22 Notice of designation (change) of administrative judge

Free format text: JAPANESE INTERMEDIATE CODE: C22

Effective date: 20210706

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210721

C23 Notice of termination of proceedings

Free format text: JAPANESE INTERMEDIATE CODE: C23

Effective date: 20211012

C03 Trial/appeal decision taken

Free format text: JAPANESE INTERMEDIATE CODE: C03

Effective date: 20211109

C30A Notification sent

Free format text: JAPANESE INTERMEDIATE CODE: C3012

Effective date: 20211109

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20211122

R150 Certificate of patent or registration of utility model

Ref document number: 6983067

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150