WO2020045014A1 - 医療システム、情報処理装置及び情報処理方法 - Google Patents

医療システム、情報処理装置及び情報処理方法 Download PDF

Info

Publication number
WO2020045014A1
WO2020045014A1 PCT/JP2019/031245 JP2019031245W WO2020045014A1 WO 2020045014 A1 WO2020045014 A1 WO 2020045014A1 JP 2019031245 W JP2019031245 W JP 2019031245W WO 2020045014 A1 WO2020045014 A1 WO 2020045014A1
Authority
WO
WIPO (PCT)
Prior art keywords
image
speckle
unit
motion
contrast value
Prior art date
Application number
PCT/JP2019/031245
Other languages
English (en)
French (fr)
Inventor
健太郎 深沢
菊地　大介
Original Assignee
ソニー株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ソニー株式会社 filed Critical ソニー株式会社
Priority to US17/250,669 priority Critical patent/US20210235968A1/en
Priority to DE112019004308.0T priority patent/DE112019004308T5/de
Priority to JP2020540216A priority patent/JPWO2020045014A1/ja
Publication of WO2020045014A1 publication Critical patent/WO2020045014A1/ja

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00147—Holding or positioning arrangements
    • A61B1/00149—Holding or positioning arrangements using articulated arms
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002—Operational features of endoscopes
    • A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
    • A61B1/00009—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
    • A61B1/000095—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope for image enhancement
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00147—Holding or positioning arrangements
    • A61B1/0016—Holding or positioning arrangements using motor drive units
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/063—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements for monochromatic or narrow-band illumination
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/0638—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements providing two or more wavelengths
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/0655—Control therefor
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/0661—Endoscope light sources
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0077—Devices for viewing the surface of the body, e.g. camera, magnifying lens
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0082—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence adapted for particular medical purposes
    • A61B5/0084—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence adapted for particular medical purposes for introduction into the body, e.g. by catheters
    • A61B5/0086—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence adapted for particular medical purposes for introduction into the body, e.g. by catheters using infrared radiation
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/48—Other medical applications
    • A61B5/4887—Locating particular structures in or on the body
    • A61B5/489—Blood vessels
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B21/00—Microscopes
    • G02B21/0004—Microscopes specially adapted for specific applications
    • G02B21/0012—Surgical microscopes
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/48—Laser speckle optics
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B7/00—Mountings, adjusting means, or light-tight connections, for optical elements
    • G02B7/001—Counterbalanced structures, e.g. surgical microscopes
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2576/00—Medical imaging apparatus involving image processing or analysis
    • A61B2576/02—Medical imaging apparatus involving image processing or analysis specially adapted for a particular organ or body part

Abstract

医療システム（１）において、スペックルコントラスト算出手段（１３１３、１３１４）は、第１の露光時間による第１のスペックル画像に基く画素ごとの第１のスペックルコントラスト値、および／または、第１の露光時間よりも短い第２の露光時間による第２のスペックル画像に基く画素ごとの第２のスペックルコントラスト値を算出する。また、スペックル画像生成手段（１３１５）は、動き検出手段（１３１２）による撮像対象の動きの検出結果によって、第１のスペックルコントラスト値、および／または、第２のスペックルコントラスト値に基いてスペックルコントラスト画像を生成する。

Description

医療システム、情報処理装置及び情報処理方法
　本開示は、医療システム、情報処理装置及び情報処理方法に関する。
　例えば、医療システムの分野で、血流やリンパ流の常時観察が可能なスペックルイメージング技術の開発が進められている。ここで、スペックルとは、例えば、照射されたコヒーレント光が対象物表面の微小な凹凸等によって反射、干渉することによって斑点状のパターンが生じる現象である。このスペックルの現象に基いて、例えば、対象物である生体における血流部と非血流部を識別することができる。
　具体的には、次の通りである。露光時間をある程度長くとると、血流部ではコヒーレント光を反射する赤血球等が動くことによりスペックルコントラスト値が小さくなるのに対し、非血流部では全体が静止していてスペックルコントラスト値が大きくなる。したがって、各画素のスペックルコントラスト値を用いて生成されたスペックルコントラスト画像に基いて、血流部と非血流部を識別することができる。
特開２０１６－１９３０６６号公報
　しかしながら、スペックルイメージング技術を用いる場合、対象物である生体が体動や拍動などによって動いたり、撮像装置が何らかの原因により振動してしまったりすることがある。その場合、撮像画像中で撮像対象の全体または一部が動いてしまうことで、非血流部のスペックルコントラスト値が大きく下がってしまい、血流部と非血流部の識別精度が低下してしまうことがある。また、露光時間を短くすると、撮像対象が動いた場合の非血流部のスペックルコントラスト値の低下を小さくすることはできるが、一方で、光量減少によりＳ／Ｎ(Signal-Noise　ratio)が悪化してしまい、血流部と非血流部の識別精度が低下してしまう。
　そこで、本開示では、スペックルイメージング技術において、撮像画像中で撮像対象が動いた場合でも良好なスペックルコントラスト画像を生成することができる医療システム、情報処理装置及び情報処理方法を提案する。
　上記の課題を解決するために、本開示に係る一形態の医療システムは、コヒーレント光を撮像対象に照射する光照射手段と、前記コヒーレント光が照射された前記撮像対象による散乱光から得られるスペックル画像を撮像する撮像手段と、第１の露光時間による第１のスペックル画像を取得し、前記第１の露光時間よりも短い第２の露光時間による第２のスペックル画像を取得する取得手段と、前記第１のスペックル画像に基く画素ごとの第１のスペックルコントラスト値、および／または、前記第２のスペックル画像に基く画素ごとの第２のスペックルコントラスト値を算出するスペックルコントラスト算出手段と、前記撮像対象の動きを検出する動き検出手段と、前記動き検出手段による前記撮像対象の動きの検出結果によって、前記第１のスペックルコントラスト値、および／または、前記第２のスペックルコントラスト値に基いてスペックルコントラスト画像を生成するスペックル画像生成手段と、を備える。
本開示の第１の実施形態に係る医療システムの構成例を示す図である。 本開示の第１の実施形態に係る情報処理装置の構成例を示す図である。 本開示の第１の実施形態における空間分割二段階露光を用いた手法の説明図である。 本開示の第１の実施形態における時間分割二段階露光を用いた手法の説明図である。 本開示の第１の実施形態における光線分割二段階露光を用いた手法の説明図である。 本開示の第１の実施形態における高フレームレート撮影を用いた手法の説明図である。 本開示の第１の実施形態のＳＣ使用の第２方法における第１ＳＣと第２ＳＣの混合比率の関係の説明図である。 本開示の第１の実施形態に係る情報処理装置による第１のＳＣ画像生成処理を示すフローチャートである。 本開示の第１の実施形態に係る情報処理装置による第２のＳＣ画像生成処理を示すフローチャートである。 本開示の第２の実施形態に係る情報処理装置の構成例を示す図である。 本開示の第２の実施形態における流体部と非流体部それぞれの長時間露光時のＳＣと短時間露光時のＳＣを示すグラフである。 本開示の第２の実施形態に係る情報処理装置による第３のＳＣ画像生成処理を示すフローチャートである。 本開示の第２の実施形態に係る情報処理装置による第４のＳＣ画像生成処理を示すフローチャートである。 本開示の第３の実施形態に係る情報処理装置の構成例を示す図である。 本開示の第３の実施形態における空間分割二段階露光と時間分割二段階露光を用いた手法の説明図である。 本開示の応用例１に係る内視鏡手術システムの概略的な構成の一例を示す図である。 図１６に示すカメラヘッド及びＣＣＵの機能構成の一例を示すブロック図である。 本開示の応用例２に係る顕微鏡手術システムの概略的な構成の一例を示す図である。 図１８に示す顕微鏡手術システムを用いた手術の様子を示す図である。 本開示の第１の実施形態における流体部と非流体部それぞれの長時間露光時のＳＣと短時間露光時のＳＣを示すグラフである。 本開示の第１の実施形態における疑似血管のＳＣ画像例を示す図である。
　以下に、本開示の実施形態について図面に基づいて詳細に説明する。なお、以下の各実施形態において、同一の部位には同一の符号を付することにより重複する説明を適宜省略する。
　脳神経外科手術や心臓外科手術などにおいて、手術時の血流観察のためにＩＣＧ（Indocyanine　Green）を用いた蛍光観察が一般的に行われている。これはＩＣＧが生体内で血漿蛋白と結合し、近赤外の励起光により蛍光を発する特徴を利用して、血管やリンパ管の走行を低侵襲に観察する手法である。
　ＩＣＧ蛍光観察法では観察するタイミングに合わせて事前に適量のＩＣＧを生体に投与する必要があり、繰り返し観察をする場合にはＩＣＧが排出されるまで待機しなければならない。そして、その観察の待機のために迅速な処置ができず、手術の遅延を招く可能性がある。更に、ＩＣＧ観察では血管やリンパ管の存在を把握することは可能であるが、血液やリンパ液の流れの有無や速さを観察することはできない。
　そこで、上記のような状況に対して、薬剤の投与が不要で、血流やリンパ流の常時観察が可能なスペックルイメージング技術の開発が進められている。具体的な適用例として、脳動脈瘤クリッピング手術における動脈瘤の閉塞評価が挙げられる。ＩＣＧ観察を用いた脳動脈瘤クリッピング手術では、クリッピング後にＩＣＧを注入して動脈瘤の閉塞の有無を判断する。しかしながら、閉塞が充分でない場合にＩＣＧを注入すると、瘤内にＩＣＧが流入してしまうため、再度クリッピングを行った際に残留しているＩＣＧによって閉塞評価を正しく行えないことがある。一方で、スペックルに基く血流観察を用いた脳動脈瘤クリッピング手術では、薬剤を用いることなく、繰り返して動脈瘤の閉塞の有無を高精度で判断することができる。
　そして、以下では、スペックルイメージング技術において、撮像画像中で撮像対象が動いた場合でも良好なスペックルコントラスト画像を生成することができる医療システム、情報処理装置及び情報処理方法について説明する。
（第１の実施形態）
［第１の実施形態に係る医療システムの構成］
　図１は、本開示の第１の実施形態に係る医療システム１の構成例を示す図である。第１の実施形態に係る医療システム１は、大別して、光源１１（光照射手段）、撮像装置１２、情報処理装置１３を少なくとも備える。また、必要に応じて、表示装置１４等をさらに備えることも可能である。以下、各部について詳細に説明する。
（１）光源
　光源１１は、スペックル画像撮像用のコヒーレント光を撮像対象に照射する第１光源を含む。コヒーレント光とは、光束内の任意の二点における光波の位相関係が時間的に不変で一定であり、任意の方法で光束を分割した後、大きな光路差を与えて再び重ねあわせても完全な干渉性を示す光をいう。本開示に係る第１光源から出力されるコヒーレント光の波長は、例えば８３０ｎｍであることが好ましい。波長が８３０ｎｍであれば、ＩＣＧ観察と光学系を併用できるからである。つまり、ＩＣＧ観察を行う場合は波長が８３０ｎｍの近赤外光を使うのが一般的であるため、スペックル観察にも同波長の近赤外光を使うようにすれば、ＩＣＧ観察を実施可能な顕微鏡の光学系を変更することなく、スペックル観察が可能となるからである。
　なお、第１光源が照射するコヒーレント光の波長はこれに限定されず、ほかに、例えば、５５０～７００ｎｍであってもよいし、あるいは、さらに他の波長であってもよい。以下では、コヒーレント光として波長が８３０ｎｍの近赤外光を使用する場合を例にとる。
　また、コヒーレント光を照射する第１光源の種類は、本技術の効果を損なわない限り特に限定されない。レーザー光を発する第１光源としては、例えば、アルゴンイオン（Ａｒ）レーザー、ヘリウム－ネオン（Ｈｅ－Ｎｅ）レーザー、ダイ（ｄｙｅ）レーザー、クリプトン（Ｃｒ）レーザー、半導体レーザー、半導体レーザーと波長変換光学素子を組み合わせた固体レーザー等を、単独で、または、組み合わせて、用いることができる。
　また、光源１１は、可視光画像撮像用の可視光（例えば、インコヒーレント光の白色光）を撮像対象２に照射する第２光源を含んでもよい。その場合、撮像対象２に対して、コヒーレント光と可視光とが同時に照射される。すなわち、第２光源は、第１光源と同時に光の照射を行う。ここで、インコヒーレント光とは、物体光（物体波）のように干渉性を殆ど示さない光をいう。第２光源の種類は、本技術の効果を損なわない限り特に限定されない。一例としては、発光ダイオード等を挙げることができる。また、他の光源としては、キセノンランプ、メタルハライドランプ、高圧水銀ランプ等も挙げられる。
（２）撮像対象
　撮像対象２は、様々なものでありえるが、例えば、流体を含むものが好適である。スペックルの性質上、流体からはスペックルが発生しにくいという性質がある。そのため、本開示に係る医療システム１を用いて流体を含む撮像対象２をイメージングとすると、流体部と非流体部の境界や流体部の流速等を、求めることができる。
　より具体的には、例えば、撮像対象２を、流体が血液である生体とすることができる。例えば、本開示に係る医療システム１を顕微鏡手術や内視鏡手術などで用いることで、血管の位置を確認しながら手術を行うことが可能である。そのため、より安全で高精度な手術を行うことができ、医療技術の更なる発展にも貢献することができる。
（３）撮像装置
　撮像装置１２は、コヒーレント光が照射された撮像対象２による散乱光（反射光を含んでもよい。）から得られるスペックル画像を撮像するスペックル画像撮像部（撮像手段）を含む。スペックル画像撮像部は、例えば、スペックル観察用のＩＲ（Infrared）イメージャである。
　また、撮像装置１２は、可視光画像撮像部を備えていてもよい。可視光画像撮像部は、例えば、可視光観察用のＲＧＢ（Red　Green　Blue）イメージャである。その場合、撮像装置１２は、例えば、主な構成として、スペックル画像撮像部と可視光画像撮像部のほかに、ダイクロイックミラーを備える。また、光源１１からは近赤外光と可視光が照射される。ダイクロイックミラーは、受光した近赤外光（散乱光、反射光）と可視光（散乱光、反射光）を分離する。可視光画像撮像部は、ダイクロイックミラーによって分離された可視光から得られる可視光画像を撮像する。このような構成の撮像装置１２とすれば、近赤外光を用いたスペックル観察と可視光を用いた可視光観察を同時に行うことが可能となる。なお、スペックル画像と可視光画像を別々の撮像装置によって撮像してもよい。
　（４）情報処理装置
　次に、図２を参照して、情報処理装置１３について説明する。図２は、本開示の第１の実施形態に係る情報処理装置１３の構成例を示す図である。情報処理装置１３は、画像処理装置であり、主な構成として、処理部１３１と記憶部１３２とを備える。なお、以下において、「ＳＣ」は、スペックルコントラスト（値）を意味する。
　処理部１３１は、例えば、ＣＰＵ（Central　Processing　Unit）により実現され、取得部１３１１（取得手段）、動き検出部１３１２（動き検出手段）、第１ＳＣ算出部１３１３（スペックルコントラスト算出手段）、第２ＳＣ算出部１３１４（スペックルコントラスト算出手段）、ＳＣ画像生成部１３１５（スペックル画像生成手段）、および、表示制御部１３１６を備える。
　取得部１３１１は、第１の露光時間による第１のスペックル画像を取得し、また、第１の露光時間よりも短い第２の露光時間による第２のスペックル画像を取得する(詳細は後述)。
　動き検出部１３１２は、撮像対象２の動きを検出する。動き検出部１３１２は、例えば、スペックル画像または可視光画像に基いて、現フレームと１つ前のフレームの差分をもとに動きベクトルを算出し、その動きベクトルの絶対値が所定の差分閾値以上であれば、撮像対象２の動きがあると判定する。この動き検出は、画素ごとでもよいし、ブロックごとでもよいし、全画面でもよい。また、動いているか否かの判定ではなく、動き量（０画素、１画素、２画素、・・・）を検出してもよい。また、動き検出部１３１２は、動きベクトルによる検出以外に、例えば、撮像対象２の動きがあるとスペックルの形状が動き方向に伸びた形状となるという性質を利用して撮像対象２の動きや動き量を検出してもよい。
　第１ＳＣ算出部１３１３は、第１のスペックル画像に基いて画素ごとの第１のスペックルコントラスト値を算出する。ここで、例えば、ｉ番目の画素のスペックルコントラスト値は、以下の式（１）で表すことができる。
　ｉ番目の画素のスペックルコントラスト値＝
　　（ｉ番目の画素と周囲の画素の強度の標準偏差）／
　　　　（ｉ番目の画素と周囲の画素の強度の平均）　　　・・・式（１）
　第２ＳＣ算出部１３１４は、第２のスペックル画像に基いて画素ごとの第２のスペックルコントラスト値を算出する。算出方法は第１ＳＣ算出部１３１３と同様である。
　ＳＣ画像生成部１３１５は、動き検出部１３１２による撮像対象２の動きの検出結果によって、第１のスペックルコントラスト値、および／または、第２のスペックルコントラスト値に基いてスペックルコントラスト画像を生成する(詳細は後述)。ここで、図２１を参照して、ＳＣ画像例について説明する。　図２１は、本開示の第１の実施形態における疑似血管のＳＣ画像例を示す図である。図２１のＳＣ画像例に示す通り、非血流部に多くのスペックルが観察され、血流部にはスペックルがほとんど観察されない。
　図２に戻って、ＳＣ画像生成部１３１５は、ＳＣ画像に基いて流体部（例えば血流部）と非流体部（例えば非血流部）を識別する。より具体的には、ＳＣ画像生成部１３１５は、ＳＣ画像に基いて、スペックルコントラスト値が所定のＳＣ閾値以上か否かを判定することによって、血流部と非血流部を識別する。
　表示制御部１３１６は、ＳＣ画像生成部１３１５によって生成されたＳＣ画像に基いて、表示装置１４に、ＳＣ画像を、血流部と非血流部を識別可能に表示させる制御を行う。
　記憶部１３２は、取得部１３１１によって取得されたスペックル画像、可視光画像、処理部１３１の各部による演算結果等の各種情報を記憶する。なお、この記憶部１３２の代わりに、医療システム１の外部の記憶装置を用いてもよい。
　（５）表示装置
　表示装置１４は、表示制御部１３１６から制御されることによって、取得部１３１１によって取得されたスペックル画像、可視光画像、処理部１３１の各部による演算結果等の各種情報を表示する。なお、この表示装置１４の代わりに、医療システム１の外部の表示装置を用いてもよい。
　次に、図２０を参照して、流体部と非流体部それぞれの長時間露光時のＳＣと短時間露光時のＳＣについて説明する。図２０は、本開示の第１の実施形態における流体部と非流体部それぞれの長時間露光時のＳＣと短時間露光時のＳＣを示すグラフである。なお、ここでは、流体として血液を想定する（図１１も同様）。そして、血液は静止状態では赤血球等が沈殿するので、静止状態では流体部のＳＣと非流体部のＳＣは同様となる。
　図２０からわかるように、まず、流体部の場合、長時間露光と短時間露光のいずれにおいても、動き量が小さいとき、ＳＣは大きい。また、動き量が大きくなるにつれて、長時間露光のＳＣ、短時間露光のＳＣともに小さくなる。そして、動き量が大きくて同じ場合、長時間露光のＳＣよりも短時間露光のＳＣのほうが大きいが、両者の差は小さい。
　一方、非流体部の場合、長時間露光と短時間露光のいずれにおいても、動き量が小さいとき、ＳＣは大きい。また、動き量が大きくなるにつれて、長時間露光のＳＣ、短時間露光のＳＣともに小さくなる。そして、動き量が大きくて同じ場合、長時間露光のＳＣよりも短時間露光のＳＣのほうが大きく、また、両者の差は大きい。
　つまり、長時間露光の場合、光量が多いのでＳ／Ｎは良好であるが、撮像対象２に動きがあると、非流体部のＳＣが大きく低下してしまい、流体部のＳＣと非流体部のＳＣとの差が小さくなってしまう。一方、短時間露光の場合、撮像対象２に動きがあっても非流体部のＳＣの低下量を小さく抑え、流体部のＳＣと非流体部のＳＣとの差を大きくすることができるが、光量が少ないのでＳ／Ｎは良くない。そして、本開示では、長時間露光と短時間露光のそれぞれの長所を組み合わせる手法について説明する。
　次に、２種類の露光時間（第１の露光時間と、第１の露光時間よりも短い第２の露光時間）による２つのスペックル画像（第１の露光時間による第１のスペックル画像、第２の露光時間による第２のスペックル画像）に基いて２種類のＳＣを算出する具体的な手法について説明する。以下では、図３を参照して空間分割二段階露光（空間分割多段階露光の一例）を用いた手法について説明する。また、図４を参照して時間分割二段階露光（時間分割多段階露光の一例）を用いた手法について説明する。また、図５を参照して光線分割二段階露光（光線分割多段階露光の一例）を用いた手法について説明する。また、図６を参照して高フレームレート撮影を用いた手法について説明する。
　図３は、本開示の第１の実施形態における空間分割二段階露光を用いた手法の説明図である。この手法では、撮像装置１２によって、例えば、図３に示す混合画像を撮像する。この混合画像は、１フレーム中に、第１のスペックル画像の画素（以下、「第１Ｓ画素」）と第２のスペックル画像の画素（以下、「第２Ｓ画素」）を縦方向と横方向の両方向について交互に含んでいる。図３の混合画像では、色の薄いほうの画素が第１Ｓ画素で、色の濃いほうの画素が第２Ｓ画素である。取得部１３１１は、このような混合画素を撮像装置１２から取得する。
　また、第１ＳＣ算出部１３１３は、混合画像における第１Ｓ画素に基いて画素ごとの第１のスペックルコントラスト値（以下、「第１ＳＣ」）を算出する。また、第２ＳＣ算出部１３１４は、混合画像における第２Ｓ画素に基いて画素ごとの第２のスペックルコントラスト値（以下、「第２ＳＣ」）を算出する。このようにして、２種類のＳＣ（第１ＳＣ、第２ＳＣ）を算出することができる。
　次に、図４は、本開示の第１の実施形態における時間分割二段階露光を用いた手法の説明図である。この手法では、取得部１３１１は、時系列に交互に、第１のスペックル画像（フレーム：２Ｎ）と第２のスペックル画像（フレーム：２Ｎ＋１）を取得する。このために、例えば、単一の撮像装置１２で第１のスペックル画像の撮像と第２のスペックル画像の撮像を切り替える。
　また、第１ＳＣ算出部１３１３は、第１のスペックル画像に基いて画素ごとの第１ＳＣを算出する。また、第２ＳＣ算出部１３１４は、第２のスペックル画像に基いて画素ごとの第２ＳＣを算出する。このようにして、２種類のＳＣ（第１ＳＣ、第２ＳＣ）を算出することができる。
　なお、この手法では、１組の第１ＳＣと第２ＳＣを算出するのに２フレームのスペックル画像が必要となる。そこで、第１ＳＣと第２ＳＣを用いて作成するＳＣ画像のフレームレートは、以下のいずれでもよい。例えば、ＳＣ画像のフレームレートを、スペックル画像の撮像フレームレートの１／２とする。あるいは、同じＳＣ画像を２フレーム連続で出力することで、スペックル画像の撮像フレームレートと同じにしてもよい。さらに、前後のＳＣ画像から補間して間のＳＣ画像を生成することで、スペックル画像の撮像フレームレートと同じにしてもよい。
　次に、図５は、本開示の第１の実施形態における光線分割二段階露光を用いた手法の説明図である。この手法では、入射光を光学的に分岐し、露光時間の異なる２つの撮像装置１２（例えば、第１撮像装置と、第１撮像装置よりも露光時間が短い第２撮像装置）によって第１のスペックル画像と第２のスペックル画像を撮像する。そして、取得部１３１１は、それらの２つの撮像装置から、第１のスペックル画像（フレーム：Ｎ）と第２のスペックル画像（フレーム：Ｎ）を取得する。
　また、第１ＳＣ算出部１３１３は、第１のスペックル画像に基いて画素ごとの第１ＳＣを算出する。また、第２ＳＣ算出部１３１４は、第２のスペックル画像に基いて画素ごとの第２ＳＣを算出する。このようにして、２種類のＳＣ（第１ＳＣ、第２ＳＣ）を算出することができる。
　次に、図６は、本開示の第１の実施形態における高フレームレート撮影を用いた手法の説明図である。この手法では、例えば、スペックル画像の撮像を通常の４倍速で行う。図６において、時間Ｄ１が通常の撮影の単位時間であり、時間Ｄ２が高フレームレート撮影の単位時間である。取得部１３１１は、撮像装置１２から高フレームレートのスペックル画像を取得する。
　また、第１ＳＣ算出部１３１３は、高フレームレートのスペックル画像の複数フレーム分（ここでは４フレーム分）を用いて、第１ＳＣを算出する。例えば、第１ＳＣ算出部１３１３は、高フレームレートのスペックル画像の４フレーム分を加算して、通常のフレームレートのときと比べて露光時間の観点で等価の状態にしてから第１ＳＣを算出する。
　また、第２ＳＣ算出部１３１４は、高フレームレートのスペックル画像の１フレーム分を用いて、第２ＳＣを算出する。例えば、第２ＳＣ算出部１３１４は、高フレームレートのスペックル画像の４フレーム分それぞれでＳＣを算出し、加重平均を演算することで第２ＳＣを算出する。このようにして、２種類のＳＣ（第１ＳＣ、第２ＳＣ）を算出することができる。
　次に、ＳＣ画像生成部１３１５における第１ＳＣと第２ＳＣの使用方法について説明する。例えば、ＳＣ使用の第１方法において、ＳＣ画像生成部１３１５は、動き検出部１３１２で撮像対象２の動きが検出されなかった場合は第１ＳＣを用いてＳＣ画像を生成し、動き検出部１３１２で撮像対象２の動きが検出された場合は第２ＳＣを用いてＳＣ画像を生成する。
　次に、ＳＣ使用の第２方法では、ＳＣ画像生成部１３１５は、動き検出部１３１２によって検出された撮像対象２の動き量に基いて、第１ＳＣおよび第２ＳＣを重み付け加算して合成したＳＣ（以下、「合成ＳＣ」ともいう。）を用いてＳＣ画像を生成する。これについて、図７を参照して説明する。図７は、本開示の第１の実施形態のＳＣ使用の第２方法における第１ＳＣと第２ＳＣの混合比率の関係の説明図である。撮像対象２の動き量に応じた係数ｗ（混合比率）を図７に示すように設定しておく。図７のグラフにおいて、縦軸はｗの値、横軸は撮像対象２の動き量である。そして、ＳＣ画像生成部１３１５は、合成ＳＣを以下の式(２)によって算出する。
　合成ＳＣ＝ｗ×第１ＳＣ＋（１－ｗ）×第２ＳＣ　・・・式（２）
　このように、撮像対象２の動き量が小さいときは第１ＳＣの比率を高くし、撮像対象２の動き量が大きいときは第２ＳＣの比率を高くすることで、合成ＳＣが適正なものとなる。
［第１の実施形態に係るＳＣ画像生成処理］
　次に、図８を参照して、情報処理装置１３による第１のＳＣ画像生成処理について説明する。図８は、本開示の第１の実施形態に係る情報処理装置１３による第１のＳＣ画像生成処理を示すフローチャートである。
　まず、ステップＳ１において、取得部１３１１は画像データを取得する。例えば、空間分割二段階露光を用いた手法の場合、混合画像を取得する（図３）。また、時間分割二段階露光を用いた手法の場合、第１のスペックル画像と第２のスペックル画像を取得する（図４）。また、光線分割二段階露光を用いた手法の場合、第１のスペックル画像と第２のスペックル画像を取得する（図５）。また、高フレームレート撮影を用いた手法の場合、高フレームレートのスペックル画像を取得する（図６）。
　次に、ステップＳ２において、動き検出部１３１２は、撮像対象２の動きを検出する。
　次に、ステップＳ３において、第１ＳＣ算出部１３１３は、第１のスペックル画像に基いて画素ごとの第１ＳＣを算出する。
　次に、ステップＳ４において、第１ＳＣ算出部１３１３は、第２のスペックル画像に基いて画素ごとの第２ＳＣを算出する。なお、ステップＳ３、Ｓ４における４つの各手法における具体的な処理については図３～図６を参照してすでに説明した通りである。
　次に、ステップＳ５において、ＳＣ画像生成部１３１５は、ステップＳ２における撮像対象２の動きの検出結果によって、第１ＳＣと第２ＳＣに基いてスペックルコントラスト画像を生成する。具体的には、例えば、上述のＳＣ使用の第１方法やＳＣ使用の第２方法によって、ＳＣ画像生成部１３１５は、撮像対象２の動きの有無や動き量に基いて第１ＳＣ、第２ＳＣを用いてＳＣ画像を生成する。
　また、ステップＳ５において、ＳＣ画像生成部１３１５は、例えば、ＳＣ画像に基いて血流部と非血流部を識別する。
　次に、ステップＳ６において、表示制御部１３１６は、ステップＳ５で生成されたＳＣ画像に基いて、表示装置１４に、ＳＣ画像を、血流部と非血流部を識別可能に表示させる制御を行う。ステップＳ６の後、処理を終了する。
　このように、第１の実施形態の情報処理装置１３による第１のＳＣ画像生成処理によれば、撮像画像中で撮像対象２が動いた場合でも良好なスペックルコントラスト画像を生成することができる。具体的には、例えば、上述のＳＣ使用の第１方法によって、撮像対象２の動きが検出されなかった場合は第１ＳＣを用いてＳＣ画像を生成し、動き検出部１３１２で撮像対象２の動きが検出された場合は第２ＳＣを用いてＳＣ画像を生成する。また、例えば、上述のＳＣ使用の第２方法によって、撮像対象２の動き量に基いて、第１ＳＣおよび第２ＳＣを重み付け加算して合成したＳＣを用いてＳＣ画像を生成する。これにより、撮像対象２が動いた場合でも、非血流部のＳＣの低下を小さくすることができる。また、撮像対象２が動かない場合は、露光時間の短縮によるＳ／Ｎの悪化を回避できる。
　なお、撮像対象２の動き検出、動きの速さ算出、それらに伴うＳＣ算出は、撮像した画面全体に対して行ってもよいし、あるいは、例えば、あらかじめ可視光画像の色情報や形態情報を解析して血管部と非血管部を識別してから、領域別に行ってもよい。
　また、撮像対象２の動きの検出と動きの速さの算出は、例えば、時系列で複数の可視光画像に基いて特徴点の動きベクトルを演算することによって、容易に実現することができる。
　また、撮像対象２の動きの検出と動きの速さの算出は、例えば、スペックル画像に基いてスペックルの形状の変化を認識することによって、容易に実現することができる。
　なお、従来技術において、露光時間を短縮することで撮像対象の動きによるスペックルパターンの変化による影響を軽減する手法がある。しかし、この手法では、照明部と撮像部を同期制御するために煩雑な制御機構が必要であり、かつ低露光条件で観察するために高出力のレーザ光源が必要であるため実現が困難であるという短所があった。一方、本開示によれば、そのような煩雑な制御機構や高出力のレーザ光源は不要である。
　また、空間分割二段階露光を用いた手法（図３）によれば、第１Ｓ画素と第２Ｓ画素を含む１つの混合画像から、２種類のＳＣ（第１ＳＣ、第２ＳＣ）を算出することができる。
　次に、時間分割二段階露光を用いた手法（図４）によれば、単一の撮像装置１２で第１のスペックル画像の撮像と第２のスペックル画像の撮像を切り替えることで、２種類のＳＣ（第１ＳＣ、第２ＳＣ）を算出することができる。
　また、光線分割二段階露光を用いた手法（図５）によれば、同時刻の第１のスペックル画像と第２のスペックル画像を取得できることで、２種類のＳＣ（第１ＳＣ、第２ＳＣ）を算出する頻度を低下させずに済む。
　次に、高フレームレート撮影を用いた手法（図６）によれば、１つの高フレームレートのスペックル画像に基いて、２種類のＳＣ（第１ＳＣ、第２ＳＣ）を算出することができる。
　なお、医療分野でスペックル観察を行う場合、光源から照射する光の光量は、強くするにも上限がある。光量が強すぎると、患部を傷めたり、術者の目を傷めたりするからである。第１の実施形態の医療システム１によれば、光量を強くする必要が無い。つまり、光源１１による光量は、撮像装置１２による第１のスペックル画像の撮像時と第２のスペックル画像の撮像時で同じでよい。
　ただし、支障のない範囲で、露光時間が短いほうの第２のスペックル画像の撮像時の光量を、第１のスペックル画像の撮像時の光量よりも大きくしてもよい。そうすれば、第２のスペックル画像の撮像時に、露光時間が短いことによるＳ／Ｎの悪化を抑制することができる。
　また、図８におけるステップＳ２、ステップＳ３、ステップＳ４はこの順に限定されず、任意の入れ替えが可能である。
　次に、図９を参照して、情報処理装置１３による第２のＳＣ画像生成処理について説明する。図９は、本開示の第１の実施形態に係る情報処理装置１３による第２のＳＣ画像生成処理を示すフローチャートである。図８と同様の事項については、説明を適宜省略する。
　まず、ステップＳ１において、取得部１３１１は画像データを取得する。
　次に、ステップＳ２において、動き検出部１３１２は、撮像対象２の動きを検出するための動作を行う。
　次に、ステップＳ７において、動き検出部１３１２は、撮像対象２の動きがあったか否かを判定し、Ｙｅｓの場合はステップＳ４に進み、Ｎｏの場合はステップＳ３に進む。
　次に、ステップＳ３において、第１ＳＣ算出部１３１３は、第１のスペックル画像に基いて画素ごとの第１ＳＣを算出する。その後、ステップＳ５において、ＳＣ画像生成部１３１５は、ステップＳ３で算出した第１ＳＣに基いてＳＣ画像を生成する。
　次に、ステップＳ４において、第１ＳＣ算出部１３１３は、第２のスペックル画像に基いて画素ごとの第２ＳＣを算出する。その後、ステップＳ５において、ＳＣ画像生成部１３１５は、ステップＳ４で算出した第２ＳＣに基いてＳＣ画像を生成する。
　また、ステップＳ５において、ＳＣ画像生成部１３１５は、例えば、ＳＣ画像に基いて血流部と非血流部を識別する。
　次に、ステップＳ６において、表示制御部１３１６は、ステップＳ５で生成されたＳＣ画像に基いて、表示装置１４に、ＳＣ画像を、血流部と非血流部を識別可能に表示させる制御を行う。ステップＳ６の後、処理を終了する。
　このように、第１の実施形態の情報処理装置１３による第２のＳＣ画像生成処理によれば、撮像対象２の動きの有無に応じて、第１ＳＣと第２ＳＣの片方だけを算出してＳＣ画像を生成することができ、処理が簡潔になる。
（第２の実施形態）
　次に、第２の実施形態について説明する。第１の実施形態と同様の事項については、説明を適宜省略する。図１０は、本開示の第２の実施形態に係る情報処理装置１３の構成例を示す図である。第２の実施形態に係る情報処理装置１３において、動き検出部１３１２は、第２ＳＣから第１ＳＣを減算した値に基いて撮像対象２の動きを検出する。
　ここで、図１１は、本開示の第２の実施形態における流体部と非流体部それぞれの長時間露光時のＳＣと短時間露光時のＳＣを示すグラフである。図１１からわかるように、流体部の場合、撮像対象２の動き量が大きいときに、第２ＳＣ（短時間露光）から第１ＳＣ（長時間露光）を減算した値は小さい。一方、非流体部の場合、撮像対象２の動き量が大きいときに、第２ＳＣ（短時間露光）から第１ＳＣ（長時間露光）を減算した値（以下、「ＳＣ差分」ともいう。）は大きくなる。
　したがって、動き検出部１３１２は、ＳＣ差分が所定のＳＣ差分閾値以上のときは非流体部に動きがあったと判定することができる。なお、この動き検出は、画素ごとでもよいし、ブロックごとでもよいし、全画面でもよい。また、動きの有無を判定するだけでなく、ＳＣ差分に基いて撮像対象２の動き量を算出してもよい。
　ここで、図１２は、本開示の第２の実施形態に係る情報処理装置１３による第３のＳＣ画像生成処理を示すフローチャートである。図８のフローチャートと同様の事項については説明を適宜省略する。
　まず、ステップＳ１において、取得部１３１１は画像データを取得する。次に、ステップＳ３において、第１ＳＣ算出部１３１３は、第１のスペックル画像に基いて画素ごとの第１ＳＣを算出する。次に、ステップＳ４において、第１ＳＣ算出部１３１３は、第２のスペックル画像に基いて画素ごとの第２ＳＣを算出する。
　次に、ステップＳ１１において、動き検出部１３１２は、ＳＣ差分として、第２ＳＣから第１ＳＣを減算した値を算出する。
　次に、ステップＳ１２において、動き検出部１３１２は、ステップＳ１１で算出したＳＣ差分に基いて撮像対象２の動きを検出する。具体的には、動き検出部１３１２は、ＳＣ差分が所定のＳＣ差分閾値以上のときは撮像対象２（非流体部）に動きがあったと判定することができる。
　次に、ステップＳ５において、ＳＣ画像生成部１３１５は、ステップＳ１２における撮像対象２の動きの検出結果によって、第１ＳＣと第２ＳＣに基いてＳＣ画像を生成する。具体的には、例えば、上述のＳＣ使用の第１方法やＳＣ使用の第２方法によって、ＳＣ画像生成部１３１５は、撮像対象２の動きの有無や動き量に基いて第１ＳＣ、第２ＳＣを用いてＳＣ画像を生成する。また、ステップＳ５において、ＳＣ画像生成部１３１５は、例えば、ＳＣ画像に基いて血流部と非血流部を識別する。
　次に、ステップＳ６において、表示制御部１３１６は、ステップＳ５で生成されたＳＣ画像に基いて、表示装置１４に、ＳＣ画像を、血流部と非血流部を識別可能に表示させる制御を行う。ステップＳ６の後、処理を終了する。
　このように、第２の実施形態の情報処理装置１３による第３のＳＣ画像生成処理によれば、ＳＣ差分に基いて撮像対象２の動きを検出し、その検出結果によって、第１ＳＣと第２ＳＣに基いて良好なスペックルコントラスト画像を生成することができる。なお、図１２におけるステップＳ３、ステップＳ４はこの順に限定されず、逆順であってもよい。
　次に、図１３は、本開示の第２の実施形態に係る情報処理装置による第４のＳＣ画像生成処理を示すフローチャートである。図１２と同様の事項については、説明を適宜省略する。
　まず、ステップＳ１において、取得部１３１１は画像データを取得する。次に、ステップＳ３において、第１ＳＣ算出部１３１３は、第１のスペックル画像に基いて画素ごとの第１ＳＣを算出する。次に、ステップＳ４において、第１ＳＣ算出部１３１３は、第２のスペックル画像に基いて画素ごとの第２ＳＣを算出する。
　次に、ステップＳ１１において、動き検出部１３１２は、ＳＣ差分として、第２ＳＣから第１ＳＣを減算した値を算出する。
　次に、ステップＳ１３において、動き検出部１３１２は、ステップＳ１１で算出したＳＣ差分が所定のＳＣ差分閾値以上か否かを判定し、Ｙｅｓの場合はステップＳ１５に進み、Ｎｏの場合はステップＳ１４に進む。
　ステップＳ１４において、ＳＣ画像生成部１３１５は、第１ＳＣに基いてスペックルコントラスト画像を生成する。また、ステップＳ１４において、ＳＣ画像生成部１３１５は、例えば、ＳＣ画像に基いて血流部と非血流部を識別する。
　また、ステップＳ１５において、ＳＣ画像生成部１３１５は、第２ＳＣに基いてスペックルコントラスト画像を生成する。また、ステップＳ１５において、ＳＣ画像生成部１３１５は、例えば、ＳＣ画像に基いて血流部と非血流部を識別する。
　ステップＳ１４、Ｓ１５の後、ステップＳ６において、表示制御部１３１６は、生成されたＳＣ画像に基いて、表示装置１４に、ＳＣ画像を、血流部と非血流部を識別可能に表示させる制御を行う。ステップＳ６の後、処理を終了する。
　このように、第２の実施形態の情報処理装置１３による第４のＳＣ画像生成処理によれば、ＳＣ差分が所定のＳＣ差分閾値以上か否かによって、第１ＳＣと第２ＳＣの片方だけを算出してＳＣ画像を生成することができ、処理が簡潔になる。
（第３の実施形態）
　次に、第３の実施形態について説明する。第１の実施形態と同様の事項については、説明を適宜省略する。
　図１４は、本開示の第３の実施形態に係る情報処理装置１３の構成例を示す図である。図１４の情報処理装置１３は、図２の情報処理装置１３と比べて、処理部１３１に露光制御部１３１７が追加されている点で異なっている。
　露光制御部１３１７は、動き検出部１３１２によって検出された撮像対象２の動きに基いて、撮像装置１２の露光時間を制御する。
　ここで、図１５は、本開示の第３の実施形態における空間分割二段階露光と時間分割二段階露光の説明図である。まず、空間分割二段階露光を用いた手法の場合、動き検出部１３１２によって撮像対象２の動きが検出されたとき、露光制御部１３１７は、撮像装置１２を制御して混合画像（図３）を撮像させる。これにより、第１ＳＣ算出部１３１３は混合画像における第１Ｓ画素に基いて画素ごとの第１ＳＣを算出し、第２ＳＣ算出部１３１４は混合画像における第２Ｓ画素に基いて画素ごとの第２ＳＣを算出することができる。
　また、動き検出部１３１２によって撮像対象２の動きが検出されないとき、露光制御部１３１７は、撮像装置１２を制御して第１のスペックル画像（図４）を撮像させる。これにより、第１ＳＣ算出部１３１３は第１のスペックル画像に基いて画素ごとの第１ＳＣを算出することができる。
　また、時間分割二段階露光を用いた手法の場合、動き検出部１３１２によって撮像対象２の動きが検出されたとき、露光制御部１３１７は、撮像装置１２を制御して第１のスペックル画像（フレームＦＲ１、ＦＲ３、ＦＲ５）と第２のスペックル画像（フレームＦＲ２、ＦＲ４、ＦＲ６）を交互に撮像させる。これにより、第１ＳＣ算出部１３１３は第１のスペックル画像に基いて画素ごとの第１ＳＣを算出し、第２ＳＣ算出部１３１４は第２のスペックル画像に基いて画素ごとの第２ＳＣを算出することができる。
　また、動き検出部１３１２によって撮像対象２の動きが検出されないとき、露光制御部１３１７は、撮像装置１２を制御して第１のスペックル画像（フレームＦＲ１～ＦＲ６）だけを撮像させる。これにより、第１ＳＣ算出部１３１３は第１のスペックル画像に基いて画素ごとの第１ＳＣを算出することができる。
　このようにして、第３の実施形態に係る情報処理装置１３によれば、全時間の大部分を占める可能性の高い撮像対象２の動きがない場合は長時間露光だけを採用し、撮像対象２の動きがある場合だけ長時間露光と短時間露光を併用することで、動作や処理が簡潔になる。
　また、例えば、時間分割二段階露光を用いた手法の場合、撮像対象２の動き量に応じて、短時間露光における露光時間の長さを可変としてもよい。例えば、撮像対象２の動き量が小さいときは、短時間露光における露光時間を長時間露光における露光時間の１／２にし、撮像対象２の動き量が大きいときは、短時間露光における露光時間を長時間露光における露光時間の１／１６にすればよい。また、１／２、１／１６に限定されず、１／４、１／８等であってもよい。露光時間を短くするほど、非流体部のＳＣの低下を小さく抑えることができるが、一方でＳ／Ｎは悪くなるので、撮像対象２の動き量に応じた適切な露光時間を決定すればよい。
　また、空間分割二段階露光を用いた手法の場合、撮像対象２の動きがある場合は、混合画像ではなく、全画素が第２Ｓ画素の画像としてもよい。
　また、図１５に示す動きありのときと動きなしのときの切り替えは、ブロック単位、画面単位のいすれでもよい。
　また、光線分割二段階露光を用いた手法の場合、撮像対象２の動き量に応じて、露光制御部１３１７は、２つの撮像装置１２の露光時間の長さや長さの比を変更すればよい。
（応用例１）
　本開示に係る技術は、様々な製品へ応用することができる。例えば、本開示に係る技術は、内視鏡手術システムに適用されてもよい。
　図１６は、本開示に係る技術が適用され得る内視鏡手術システム５０００の概略的な構成の一例を示す図である。図１６では、術者（医師）５０６７が、内視鏡手術システム５０００を用いて、患者ベッド５０６９上の患者５０７１に手術を行っている様子が図示されている。図示するように、内視鏡手術システム５０００は、内視鏡５００１と、その他の術具５０１７と、内視鏡５００１を支持する支持アーム装置５０２７と、内視鏡下手術のための各種の装置が搭載されたカート５０３７と、から構成される。
　内視鏡手術では、腹壁を切って開腹する代わりに、トロッカ５０２５ａ～５０２５ｄと呼ばれる筒状の開孔器具が腹壁に複数穿刺される。そして、トロッカ５０２５ａ～５０２５ｄから、内視鏡５００１の鏡筒５００３や、その他の術具５０１７が患者５０７１の体腔内に挿入される。図示する例では、その他の術具５０１７として、気腹チューブ５０１９、エネルギー処置具５０２１及び鉗子５０２３が、患者５０７１の体腔内に挿入されている。また、エネルギー処置具５０２１は、高周波電流や超音波振動により、組織の切開及び剥離、又は血管の封止等を行う処置具である。ただし、図示する術具５０１７はあくまで一例であり、術具５０１７としては、例えば攝子、レトラクタ等、一般的に内視鏡下手術において用いられる各種の術具が用いられてよい。
　内視鏡５００１によって撮影された患者５０７１の体腔内の術部の画像が、表示装置５０４１に表示される。術者５０６７は、表示装置５０４１に表示された術部の画像をリアルタイムで見ながら、エネルギー処置具５０２１や鉗子５０２３を用いて、例えば患部を切除する等の処置を行う。なお、図示は省略しているが、気腹チューブ５０１９、エネルギー処置具５０２１及び鉗子５０２３は、手術中に、術者５０６７又は助手等によって支持される。
（支持アーム装置）
　支持アーム装置５０２７は、ベース部５０２９から延伸するアーム部５０３１を備える。図示する例では、アーム部５０３１は、関節部５０３３ａ、５０３３ｂ、５０３３ｃ、及びリンク５０３５ａ、５０３５ｂから構成されており、アーム制御装置５０４５からの制御により駆動される。アーム部５０３１によって内視鏡５００１が支持され、その位置及び姿勢が制御される。これにより、内視鏡５００１の安定的な位置の固定が実現され得る。
（内視鏡）
　内視鏡５００１は、先端から所定の長さの領域が患者５０７１の体腔内に挿入される鏡筒５００３と、鏡筒５００３の基端に接続されるカメラヘッド５００５と、から構成される。図示する例では、硬性の鏡筒５００３を有するいわゆる硬性鏡として構成される内視鏡５００１を図示しているが、内視鏡５００１は、軟性の鏡筒５００３を有するいわゆる軟性鏡として構成されてもよい。
　鏡筒５００３の先端には、対物レンズが嵌め込まれた開口部が設けられている。内視鏡５００１には光源装置５０４３が接続されており、当該光源装置５０４３によって生成された光が、鏡筒５００３の内部に延設されるライトガイドによって当該鏡筒の先端まで導光され、対物レンズを介して患者５０７１の体腔内の観察対象に向かって照射される。なお、内視鏡５００１は、直視鏡であってもよいし、斜視鏡又は側視鏡であってもよい。
　カメラヘッド５００５の内部には光学系及び撮像素子が設けられており、観察対象からの反射光（観察光）は当該光学系によって当該撮像素子に集光される。当該撮像素子によって観察光が光電変換され、観察光に対応する電気信号、すなわち観察像に対応する画像信号が生成される。当該画像信号は、ＲＡＷデータとしてカメラコントロールユニット（ＣＣＵ：Camera　Control　Unit）５０３９に送信される。なお、カメラヘッド５００５には、その光学系を適宜駆動させることにより、倍率及び焦点距離を調整する機能が搭載される。
　なお、例えば立体視（３Ｄ表示）等に対応するために、カメラヘッド５００５には撮像素子が複数設けられてもよい。この場合、鏡筒５００３の内部には、当該複数の撮像素子のそれぞれに観察光を導光するために、リレー光学系が複数系統設けられる。
（カートに搭載される各種の装置）
　ＣＣＵ５０３９は、ＣＰＵ（Central　Processing　Unit）やＧＰＵ（Graphics　Processing　Unit）等によって構成され、内視鏡５００１及び表示装置５０４１の動作を統括的に制御する。具体的には、ＣＣＵ５０３９は、カメラヘッド５００５から受け取った画像信号に対して、例えば現像処理（デモザイク処理）等の、当該画像信号に基づく画像を表示するための各種の画像処理を施す。ＣＣＵ５０３９は、当該画像処理を施した画像信号を表示装置５０４１に提供する。また、ＣＣＵ５０３９は、カメラヘッド５００５に対して制御信号を送信し、その駆動を制御する。当該制御信号には、倍率や焦点距離等、撮像条件に関する情報が含まれ得る。
　表示装置５０４１は、ＣＣＵ５０３９からの制御により、当該ＣＣＵ５０３９によって画像処理が施された画像信号に基づく画像を表示する。内視鏡５００１が例えば４Ｋ（水平画素数３８４０×垂直画素数２１６０）又は８Ｋ（水平画素数７６８０×垂直画素数４３２０）等の高解像度の撮影に対応したものである場合、及び／又は３Ｄ表示に対応したものである場合には、表示装置５０４１としては、それぞれに対応して、高解像度の表示が可能なもの、及び／又は３Ｄ表示可能なものが用いられ得る。４Ｋ又は８Ｋ等の高解像度の撮影に対応したものである場合、表示装置５０４１として５５インチ以上のサイズのものを用いることで一層の没入感が得られる。また、用途に応じて、解像度、サイズが異なる複数の表示装置５０４１が設けられてもよい。
　光源装置５０４３は、例えばＬＥＤ（Light　Emitting　Diode）等の光源から構成され、術部を撮影する際の照射光を内視鏡５００１に供給する。
　アーム制御装置５０４５は、例えばＣＰＵ等のプロセッサによって構成され、所定のプログラムに従って動作することにより、所定の制御方式に従って支持アーム装置５０２７のアーム部５０３１の駆動を制御する。
　入力装置５０４７は、内視鏡手術システム５０００に対する入力インタフェースである。ユーザは、入力装置５０４７を介して、内視鏡手術システム５０００に対して各種の情報の入力や指示入力を行うことができる。例えば、ユーザは、入力装置５０４７を介して、患者の身体情報や、手術の術式についての情報等、手術に関する各種の情報を入力する。また、例えば、ユーザは、入力装置５０４７を介して、アーム部５０３１を駆動させる旨の指示や、内視鏡５００１による撮像条件（照射光の種類、倍率及び焦点距離等）を変更する旨の指示、エネルギー処置具５０２１を駆動させる旨の指示等を入力する。
　入力装置５０４７の種類は限定されず、入力装置５０４７は各種の公知の入力装置であってよい。入力装置５０４７としては、例えば、マウス、キーボード、タッチパネル、スイッチ、フットスイッチ５０５７及び／又はレバー等が適用され得る。入力装置５０４７としてタッチパネルが用いられる場合には、当該タッチパネルは表示装置５０４１の表示面上に設けられてもよい。
　あるいは、入力装置５０４７は、例えばメガネ型のウェアラブルデバイスやＨＭＤ（HeadMounted　Display）等の、ユーザによって装着されるデバイスであり、これらのデバイスによって検出されるユーザのジェスチャや視線に応じて各種の入力が行われる。また、入力装置５０４７は、ユーザの動きを検出可能なカメラを含み、当該カメラによって撮像された映像から検出されるユーザのジェスチャや視線に応じて各種の入力が行われる。更に、入力装置５０４７は、ユーザの声を収音可能なマイクロフォンを含み、当該マイクロフォンを介して音声によって各種の入力が行われる。このように、入力装置５０４７が非接触で各種の情報を入力可能に構成されることにより、特に清潔域に属するユーザ（例えば術者５０６７）が、不潔域に属する機器を非接触で操作することが可能となる。また、ユーザは、所持している術具から手を離すことなく機器を操作することが可能となるため、ユーザの利便性が向上する。
　処置具制御装置５０４９は、組織の焼灼、切開又は血管の封止等のためのエネルギー処置具５０２１の駆動を制御する。気腹装置５０５１は、内視鏡５００１による視野の確保及び術者の作業空間の確保の目的で、患者５０７１の体腔を膨らめるために、気腹チューブ５０１９を介して当該体腔内にガスを送り込む。レコーダ５０５３は、手術に関する各種の情報を記録可能な装置である。プリンタ５０５５は、手術に関する各種の情報を、テキスト、画像又はグラフ等各種の形式で印刷可能な装置である。
　以下、内視鏡手術システム５０００において特に特徴的な構成について、更に詳細に説明する。
（支持アーム装置）
　支持アーム装置５０２７は、基台であるベース部５０２９と、ベース部５０２９から延伸するアーム部５０３１と、を備える。図示する例では、アーム部５０３１は、複数の関節部５０３３ａ、５０３３ｂ、５０３３ｃと、関節部５０３３ｂによって連結される複数のリンク５０３５ａ、５０３５ｂと、から構成されているが、図１６では、簡単のため、アーム部５０３１の構成を簡略化して図示している。実際には、アーム部５０３１が所望の自由度を有するように、関節部５０３３ａ～５０３３ｃ及びリンク５０３５ａ、５０３５ｂの形状、数及び配置、並びに関節部５０３３ａ～５０３３ｃの回転軸の方向等が適宜設定され得る。例えば、アーム部５０３１は、好適に、６自由度以上の自由度を有するように構成され得る。これにより、アーム部５０３１の可動範囲内において内視鏡５００１を自由に移動させることが可能になるため、所望の方向から内視鏡５００１の鏡筒５００３を患者５０７１の体腔内に挿入することが可能になる。
　関節部５０３３ａ～５０３３ｃにはアクチュエータが設けられており、関節部５０３３ａ～５０３３ｃは当該アクチュエータの駆動により所定の回転軸まわりに回転可能に構成されている。当該アクチュエータの駆動がアーム制御装置５０４５によって制御されることにより、各関節部５０３３ａ～５０３３ｃの回転角度が制御され、アーム部５０３１の駆動が制御される。これにより、内視鏡５００１の位置及び姿勢の制御が実現され得る。この際、アーム制御装置５０４５は、力制御又は位置制御等、各種の公知の制御方式によってアーム部５０３１の駆動を制御することができる。
　例えば、術者５０６７が、入力装置５０４７（フットスイッチ５０５７を含む）を介して適宜操作入力を行うことにより、当該操作入力に応じてアーム制御装置５０４５によってアーム部５０３１の駆動が適宜制御され、内視鏡５００１の位置及び姿勢が制御されてよい。当該制御により、アーム部５０３１の先端の内視鏡５００１を任意の位置から任意の位置まで移動させた後、その移動後の位置で固定的に支持することができる。なお、アーム部５０３１は、いわゆるマスタースレイブ方式で操作されてもよい。この場合、アーム部５０３１は、手術室から離れた場所に設置される入力装置５０４７を介してユーザによって遠隔操作され得る。
　また、力制御が適用される場合には、アーム制御装置５０４５は、ユーザからの外力を受け、その外力にならってスムーズにアーム部５０３１が移動するように、各関節部５０３３ａ～５０３３ｃのアクチュエータを駆動させる、いわゆるパワーアシスト制御を行ってもよい。これにより、ユーザが直接アーム部５０３１に触れながらアーム部５０３１を移動させる際に、比較的軽い力で当該アーム部５０３１を移動させることができる。従って、より直感的に、より簡易な操作で内視鏡５００１を移動させることが可能となり、ユーザの利便性を向上させることができる。
　ここで、一般的に、内視鏡下手術では、スコピストと呼ばれる医師によって内視鏡５００１が支持されていた。これに対して、支持アーム装置５０２７を用いることにより、人手によらずに内視鏡５００１の位置をより確実に固定することが可能になるため、術部の画像を安定的に得ることができ、手術を円滑に行うことが可能になる。
　なお、アーム制御装置５０４５は必ずしもカート５０３７に設けられなくてもよい。また、アーム制御装置５０４５は必ずしも１つの装置でなくてもよい。例えば、アーム制御装置５０４５は、支持アーム装置５０２７のアーム部５０３１の各関節部５０３３ａ～５０３３ｃにそれぞれ設けられてもよく、複数のアーム制御装置５０４５が互いに協働することにより、アーム部５０３１の駆動制御が実現されてもよい。
（光源装置）
　光源装置５０４３は、内視鏡５００１に術部を撮影する際の照射光を供給する。光源装置５０４３は、例えばＬＥＤ、レーザ光源又はこれらの組み合わせによって構成される白色光源から構成される。このとき、ＲＧＢレーザ光源の組み合わせにより白色光源が構成される場合には、各色（各波長）の出力強度及び出力タイミングを高精度に制御することができるため、光源装置５０４３において撮像画像のホワイトバランスの調整を行うことができる。また、この場合には、ＲＧＢレーザ光源それぞれからのレーザ光を時分割で観察対象に照射し、その照射タイミングに同期してカメラヘッド５００５の撮像素子の駆動を制御することにより、ＲＧＢそれぞれに対応した画像を時分割で撮像することも可能である。当該方法によれば、当該撮像素子にカラーフィルタを設けなくても、カラー画像を得ることができる。
　また、光源装置５０４３は、出力する光の強度を所定の時間ごとに変更するようにその駆動が制御されてもよい。その光の強度の変更のタイミングに同期してカメラヘッド５００５の撮像素子の駆動を制御して時分割で画像を取得し、その画像を合成することにより、いわゆる黒つぶれ及び白とびのない高ダイナミックレンジの画像を生成することができる。
　また、光源装置５０４３は、特殊光観察に対応した所定の波長帯域の光を供給可能に構成されてもよい。特殊光観察では、例えば、体組織における光の吸収の波長依存性を利用して、通常の観察時における照射光（すなわち、白色光）に比べて狭帯域の光を照射することにより、粘膜表層の血管等の所定の組織を高コントラストで撮影する、いわゆる狭帯域光観察（Narrow　Band　Imaging）が行われる。あるいは、特殊光観察では、励起光を照射することにより発生する蛍光により画像を得る蛍光観察が行われてもよい。蛍光観察では、体組織に励起光を照射し当該体組織からの蛍光を観察するもの（自家蛍光観察）、又はインドシアニングリーン（ICG）等の試薬を体組織に局注するとともに当該体組織にその試薬の蛍光波長に対応した励起光を照射し蛍光像を得るもの等が行われ得る。光源装置５０４３は、このような特殊光観察に対応した狭帯域光及び／又は励起光を供給可能に構成され得る。
（カメラヘッド及びＣＣＵ）
　図１７を参照して、内視鏡５００１のカメラヘッド５００５及びＣＣＵ５０３９の機能についてより詳細に説明する。図１７は、図１６に示すカメラヘッド５００５及びＣＣＵ５０３９の機能構成の一例を示すブロック図である。
　図１７を参照すると、カメラヘッド５００５は、その機能として、レンズユニット５００７と、撮像部５００９と、駆動部５０１１と、通信部５０１３と、カメラヘッド制御部５０１５と、を有する。また、ＣＣＵ５０３９は、その機能として、通信部５０５９と、画像処理部５０６１と、制御部５０６３と、を有する。カメラヘッド５００５とＣＣＵ５０３９とは、伝送ケーブル５０６５によって双方向に通信可能に接続されている。
　まず、カメラヘッド５００５の機能構成について説明する。レンズユニット５００７は、鏡筒５００３との接続部に設けられる光学系である。鏡筒５００３の先端から取り込まれた観察光は、カメラヘッド５００５まで導光され、当該レンズユニット５００７に入射する。レンズユニット５００７は、ズームレンズ及びフォーカスレンズを含む複数のレンズが組み合わされて構成される。レンズユニット５００７は、撮像部５００９の撮像素子の受光面上に観察光を集光するように、その光学特性が調整されている。また、ズームレンズ及びフォーカスレンズは、撮像画像の倍率及び焦点の調整のため、その光軸上の位置が移動可能に構成される。
　撮像部５００９は撮像素子によって構成され、レンズユニット５００７の後段に配置される。レンズユニット５００７を通過した観察光は、当該撮像素子の受光面に集光され、光電変換によって、観察像に対応した画像信号が生成される。撮像部５００９によって生成された画像信号は、通信部５０１３に提供される。
　撮像部５００９を構成する撮像素子としては、例えばＣＭＯＳ（Complementary　MetalOxide　Semiconductor）タイプのイメージセンサであり、Ｂａｙｅｒ配列を有するカラー撮影可能なものが用いられる。なお、当該撮像素子としては、例えば４Ｋ以上の高解像度の画像の撮影に対応可能なものが用いられてもよい。術部の画像が高解像度で得られることにより、術者５０６７は、当該術部の様子をより詳細に把握することができ、手術をより円滑に進行することが可能となる。
　また、撮像部５００９を構成する撮像素子は、３Ｄ表示に対応する右目用及び左目用の画像信号をそれぞれ取得するための１対の撮像素子を有するように構成される。３Ｄ表示が行われることにより、術者５０６７は術部における生体組織の奥行きをより正確に把握することが可能になる。なお、撮像部５００９が多板式で構成される場合には、各撮像素子に対応して、レンズユニット５００７も複数系統設けられる。
　また、撮像部５００９は、必ずしもカメラヘッド５００５に設けられなくてもよい。例えば、撮像部５００９は、鏡筒５００３の内部に、対物レンズの直後に設けられてもよい。
　駆動部５０１１は、アクチュエータによって構成され、カメラヘッド制御部５０１５からの制御により、レンズユニット５００７のズームレンズ及びフォーカスレンズを光軸に沿って所定の距離だけ移動させる。これにより、撮像部５００９による撮像画像の倍率及び焦点が適宜調整され得る。
　通信部５０１３は、ＣＣＵ５０３９との間で各種の情報を送受信するための通信装置によって構成される。通信部５０１３は、撮像部５００９から得た画像信号をＲＡＷデータとして伝送ケーブル５０６５を介してＣＣＵ５０３９に送信する。この際、術部の撮像画像を低レイテンシで表示するために、当該画像信号は光通信によって送信されることが好ましい。手術の際には、術者５０６７が撮像画像によって患部の状態を観察しながら手術を行うため、より安全で確実な手術のためには、術部の動画像が可能な限りリアルタイムに表示されることが求められるからである。光通信が行われる場合には、通信部５０１３には、電気信号を光信号に変換する光電変換モジュールが設けられる。画像信号は当該光電変換モジュールによって光信号に変換された後、伝送ケーブル５０６５を介してＣＣＵ５０３９に送信される。
　また、通信部５０１３は、ＣＣＵ５０３９から、カメラヘッド５００５の駆動を制御するための制御信号を受信する。当該制御信号には、例えば、撮像画像のフレームレートを指定する旨の情報、撮像時の露出値を指定する旨の情報、並びに／又は撮像画像の倍率及び焦点を指定する旨の情報等、撮像条件に関する情報が含まれる。通信部５０１３は、受信した制御信号をカメラヘッド制御部５０１５に提供する。なお、ＣＣＵ５０３９からの制御信号も、光通信によって伝送されてもよい。この場合、通信部５０１３には、光信号を電気信号に変換する光電変換モジュールが設けられ、制御信号は当該光電変換モジュールによって電気信号に変換された後、カメラヘッド制御部５０１５に提供される。
　なお、上記のフレームレートや露出値、倍率、焦点等の撮像条件は、取得された画像信号に基づいてＣＣＵ５０３９の制御部５０６３によって自動的に設定される。つまり、いわゆるＡＥ（Auto　Exposure）機能、ＡＦ（Auto　Focus）機能及びＡＷＢ（Auto　WhiteBalance）機能が内視鏡５００１に搭載される。
　カメラヘッド制御部５０１５は、通信部５０１３を介して受信したＣＣＵ５０３９からの制御信号に基づいて、カメラヘッド５００５の駆動を制御する。例えば、カメラヘッド制御部５０１５は、撮像画像のフレームレートを指定する旨の情報及び／又は撮像時の露光を指定する旨の情報に基づいて、撮像部５００９の撮像素子の駆動を制御する。また、例えば、カメラヘッド制御部５０１５は、撮像画像の倍率及び焦点を指定する旨の情報に基づいて、駆動部５０１１を介してレンズユニット５００７のズームレンズ及びフォーカスレンズを適宜移動させる。カメラヘッド制御部５０１５は、更に、鏡筒５００３やカメラヘッド５００５を識別するための情報を記憶する機能を備えてもよい。
　なお、レンズユニット５００７や撮像部５００９等の構成を、気密性及び防水性が高い密閉構造内に配置することで、カメラヘッド５００５について、オートクレーブ滅菌処理に対する耐性を持たせることができる。
　次に、ＣＣＵ５０３９の機能構成について説明する。通信部５０５９は、カメラヘッド５００５との間で各種の情報を送受信するための通信装置によって構成される。通信部５０５９は、カメラヘッド５００５から、伝送ケーブル５０６５を介して送信される画像信号を受信する。この際、上記のように、当該画像信号は好適に光通信によって送信され得る。この場合、光通信に対応して、通信部５０５９には、光信号を電気信号に変換する光電変換モジュールが設けられる。通信部５０５９は、電気信号に変換した画像信号を画像処理部５０６１に提供する。
　また、通信部５０５９は、カメラヘッド５００５に対して、カメラヘッド５００５の駆動を制御するための制御信号を送信する。当該制御信号も光通信によって送信されてよい。
　画像処理部５０６１は、カメラヘッド５００５から送信されたＲＡＷデータである画像信号に対して各種の画像処理を施す。当該画像処理としては、例えば現像処理、高画質化処理（帯域強調処理、超解像処理、ＮＲ（Noise　Reduction）処理及び／又は手ブレ補正処理等）、並びに／又は拡大処理（電子ズーム処理）等、各種の公知の信号処理が含まれる。また、画像処理部５０６１は、ＡＥ、ＡＦ及びＡＷＢを行うための、画像信号に対する検波処理を行う。
　画像処理部５０６１は、ＣＰＵやＧＰＵ等のプロセッサによって構成され、当該プロセッサが所定のプログラムに従って動作することにより、上述した画像処理や検波処理が行われ得る。なお、画像処理部５０６１が複数のＧＰＵによって構成される場合には、画像処理部５０６１は、画像信号に係る情報を適宜分割し、これら複数のＧＰＵによって並列的に画像処理を行う。
　制御部５０６３は、内視鏡５００１による術部の撮像、及びその撮像画像の表示に関する各種の制御を行う。例えば、制御部５０６３は、カメラヘッド５００５の駆動を制御するための制御信号を生成する。この際、撮像条件がユーザによって入力されている場合には、制御部５０６３は、当該ユーザによる入力に基づいて制御信号を生成する。あるいは、内視鏡５００１にＡＥ機能、ＡＦ機能及びＡＷＢ機能が搭載されている場合には、制御部５０６３は、画像処理部５０６１による検波処理の結果に応じて、最適な露出値、焦点距離及びホワイトバランスを適宜算出し、制御信号を生成する。
　また、制御部５０６３は、画像処理部５０６１によって画像処理が施された画像信号に基づいて、術部の画像を表示装置５０４１に表示させる。この際、制御部５０６３は、各種の画像認識技術を用いて術部画像内における各種の物体を認識する。例えば、制御部５０６３は、術部画像に含まれる物体のエッジの形状や色等を検出することにより、鉗子等の術具、特定の生体部位、出血、エネルギー処置具５０２１使用時のミスト等を認識することができる。制御部５０６３は、表示装置５０４１に術部の画像を表示させる際に、その認識結果を用いて、各種の手術支援情報を当該術部の画像に重畳表示させる。手術支援情報が重畳表示され、術者５０６７に提示されることにより、より安全かつ確実に手術を進めることが可能になる。
　カメラヘッド５００５及びＣＣＵ５０３９を接続する伝送ケーブル５０６５は、電気信号の通信に対応した電気信号ケーブル、光通信に対応した光ファイバ、又はこれらの複合ケーブルである。
　ここで、図示する例では、伝送ケーブル５０６５を用いて有線で通信が行われていたが、カメラヘッド５００５とＣＣＵ５０３９との間の通信は無線で行われてもよい。両者の間の通信が無線で行われる場合には、伝送ケーブル５０６５を手術室内に敷設する必要がなくなるため、手術室内における医療スタッフの移動が当該伝送ケーブル５０６５によって妨げられる事態が解消され得る。
　以上、本開示に係る技術が適用され得る内視鏡手術システム５０００の一例について説明した。なお、ここでは、一例として内視鏡手術システム５０００について説明したが、本開示に係る技術が適用され得るシステムはかかる例に限定されない。例えば、本開示に係る技術は、検査用軟性内視鏡手術システムや、以下に応用例２で説明する顕微鏡手術システムに適用されてもよい。
　本開示に係る技術は、以上説明した構成のうち、内視鏡５００１に好適に適用され得る。具体的には、内視鏡５００１によって撮影された患者５０７１の体腔内の術部の画像における血流部と非血流部を容易に視認可能に表示装置５０４１に表示する場合に、本開示に係る技術を適用できる。内視鏡５００１に本開示に係る技術を適用することにより、撮像画像が動いた場合でも血流部と非血流部が正確に識別された良好なＳＣ画像を生成することができる。これにより、術者５０６７は、血流部と非血流部が正確に識別された術部の画像を表示装置５０４１においてリアルタイムで見ることができ、手術をより安全に行うことができる。
（応用例２）
　また、本開示に係る技術は、患者の微細部位を拡大観察しながら行う、いわゆるマイクロサージェリーに用いられる顕微鏡手術システムに適用されてもよい。
　図１８は、本開示に係る技術が適用され得る顕微鏡手術システム５３００の概略的な構成の一例を示す図である。図１８を参照すると、顕微鏡手術システム５３００は、顕微鏡装置５３０１と、制御装置５３１７と、表示装置５３１９と、から構成される。なお、以下の顕微鏡手術システム５３００についての説明において、「ユーザ」とは、術者及び助手等、顕微鏡手術システム５３００を使用する任意の医療スタッフのことを意味する。
　顕微鏡装置５３０１は、観察対象（患者の術部）を拡大観察するための顕微鏡部５３０３と、顕微鏡部５３０３を先端で支持するアーム部５３０９と、アーム部５３０９の基端を支持するベース部５３１５と、を有する。
　顕微鏡部５３０３は、略円筒形状の筒状部５３０５と、当該筒状部５３０５の内部に設けられる撮像部（図示せず）と、筒状部５３０５の外周の一部領域に設けられる操作部５３０７と、から構成される。顕微鏡部５３０３は、撮像部によって電子的に撮像画像を撮像する、電子撮像式の顕微鏡部（いわゆるビデオ式の顕微鏡部）である。
　筒状部５３０５の下端の開口面には、内部の撮像部を保護するカバーガラスが設けられる。観察対象からの光（以下、観察光ともいう）は、当該カバーガラスを通過して、筒状部５３０５の内部の撮像部に入射する。なお、筒状部５３０５の内部には例えばＬＥＤ（Light　Emitting　Diode）等からなる光源が設けられてもよく、撮像時には、当該カバーガラスを介して、当該光源から観察対象に対して光が照射されてもよい。
　撮像部は、観察光を集光する光学系と、当該光学系が集光した観察光を受光する撮像素子と、から構成される。当該光学系は、ズームレンズ及びフォーカスレンズを含む複数のレンズが組み合わされて構成され、その光学特性は、観察光を撮像素子の受光面上に結像するように調整されている。当該撮像素子は、観察光を受光して光電変換することにより、観察光に対応した信号、すなわち観察像に対応した画像信号を生成する。当該撮像素子としては、例えばＢａｙｅｒ配列を有するカラー撮影可能なものが用いられる。当該撮像素子は、ＣＭＯＳ（Complementary　Metal　Oxide　Semiconductor）イメージセンサ又はＣＣＤ（Charge　Coupled　Device）イメージセンサ等、各種の公知の撮像素子であってよい。撮像素子によって生成された画像信号は、ＲＡＷデータとして制御装置５３１７に送信される。ここで、この画像信号の送信は、好適に光通信によって行われてもよい。手術現場では、術者が撮像画像によって患部の状態を観察しながら手術を行うため、より安全で確実な手術のためには、術部の動画像が可能な限りリアルタイムに表示されることが求められるからである。光通信で画像信号が送信されることにより、低レイテンシで撮像画像を表示することが可能となる。
　なお、撮像部は、その光学系のズームレンズ及びフォーカスレンズを光軸に沿って移動させる駆動機構を有してもよい。当該駆動機構によってズームレンズ及びフォーカスレンズが適宜移動されることにより、撮像画像の拡大倍率及び撮像時の焦点距離が調整され得る。また、撮像部には、ＡＥ（Auto　Exposure）機能やＡＦ（Auto　Focus）機能等、一般的に電子撮像式の顕微鏡部に備えられ得る各種の機能が搭載されてもよい。
　また、撮像部は、１つの撮像素子を有するいわゆる単板式の撮像部として構成されてもよいし、複数の撮像素子を有するいわゆる多板式の撮像部として構成されてもよい。撮像部が多板式で構成される場合には、例えば各撮像素子によってＲＧＢそれぞれに対応する画像信号が生成され、それらが合成されることによりカラー画像が得られてもよい。あるいは、当該撮像部は、立体視（３Ｄ表示）に対応する右目用及び左目用の画像信号をそれぞれ取得するための１対の撮像素子を有するように構成されてもよい。３Ｄ表示が行われることにより、術者は術部における生体組織の奥行きをより正確に把握することが可能になる。なお、当該撮像部が多板式で構成される場合には、各撮像素子に対応して、光学系も複数系統が設けられ得る。
　操作部５３０７は、例えば十字レバー又はスイッチ等によって構成され、ユーザの操作入力を受け付ける入力手段である。例えば、ユーザは、操作部５３０７を介して、観察像の拡大倍率及び観察対象までの焦点距離を変更する旨の指示を入力することができる。当該指示に従って撮像部の駆動機構がズームレンズ及びフォーカスレンズを適宜移動させることにより、拡大倍率及び焦点距離が調整され得る。また、例えば、ユーザは、操作部５３０７を介して、アーム部５３０９の動作モード（後述するオールフリーモード及び固定モード）を切り替える旨の指示を入力することができる。なお、ユーザが顕微鏡部５３０３を移動させようとする場合には、当該ユーザは筒状部５３０５を握るように把持した状態で当該顕微鏡部５３０３を移動させる様態が想定される。従って、操作部５３０７は、ユーザが筒状部５３０５を移動させている間でも操作可能なように、ユーザが筒状部５３０５を握った状態で指によって容易に操作しやすい位置に設けられることが好ましい。
　アーム部５３０９は、複数のリンク（第１リンク５３１３ａ～第６リンク５３１３ｆ）が、複数の関節部（第１関節部５３１１ａ～第６関節部５３１１ｆ）によって互いに回動可能に連結されることによって構成される。
　第１関節部５３１１ａは、略円柱形状を有し、その先端（下端）で、顕微鏡部５３０３の筒状部５３０５の上端を、当該筒状部５３０５の中心軸と平行な回転軸（第１軸Ｏ１）まわりに回動可能に支持する。ここで、第１関節部５３１１ａは、第１軸Ｏ１が顕微鏡部５３０３の撮像部の光軸と一致するように構成され得る。これにより、第１軸Ｏ１まわりに顕微鏡部５３０３を回動させることにより、撮像画像を回転させるように視野を変更することが可能になる。
　第１リンク５３１３ａは、先端で第１関節部５３１１ａを固定的に支持する。具体的には、第１リンク５３１３ａは略Ｌ字形状を有する棒状の部材であり、その先端側の一辺が第１軸Ｏ１と直交する方向に延伸しつつ、当該一辺の端部が第１関節部５３１１ａの外周の上端部に当接するように、第１関節部５３１１ａに接続される。第１リンク５３１３ａの略Ｌ字形状の基端側の他辺の端部に第２関節部５３１１ｂが接続される。
　第２関節部５３１１ｂは、略円柱形状を有し、その先端で、第１リンク５３１３ａの基端を、第１軸Ｏ１と直交する回転軸（第２軸Ｏ２）まわりに回動可能に支持する。第２関節部５３１１ｂの基端には、第２リンク５３１３ｂの先端が固定的に接続される。
　第２リンク５３１３ｂは、略Ｌ字形状を有する棒状の部材であり、その先端側の一辺が第２軸Ｏ２と直交する方向に延伸しつつ、当該一辺の端部が第２関節部５３１１ｂの基端に固定的に接続される。第２リンク５３１３ｂの略Ｌ字形状の基端側の他辺には、第３関節部５３１１ｃが接続される。
　第３関節部５３１１ｃは、略円柱形状を有し、その先端で、第２リンク５３１３ｂの基端を、第１軸Ｏ１及び第２軸Ｏ２と互いに直交する回転軸（第３軸Ｏ３）まわりに回動可能に支持する。第３関節部５３１１ｃの基端には、第３リンク５３１３ｃの先端が固定的に接続される。第２軸Ｏ２及び第３軸Ｏ３まわりに顕微鏡部５３０３を含む先端側の構成を回動させることにより、水平面内での顕微鏡部５３０３の位置を変更するように、当該顕微鏡部５３０３を移動させることができる。つまり、第２軸Ｏ２及び第３軸Ｏ３まわりの回転を制御することにより、撮像画像の視野を平面内で移動させることが可能になる。
　第３リンク５３１３ｃは、その先端側が略円柱形状を有するように構成されており、当該円柱形状の先端に、第３関節部５３１１ｃの基端が、両者が略同一の中心軸を有するように、固定的に接続される。第３リンク５３１３ｃの基端側は角柱形状を有し、その端部に第４関節部５３１１ｄが接続される。
　第４関節部５３１１ｄは、略円柱形状を有し、その先端で、第３リンク５３１３ｃの基端を、第３軸Ｏ３と直交する回転軸（第４軸Ｏ４）まわりに回動可能に支持する。第４関節部５３１１ｄの基端には、第４リンク５３１３ｄの先端が固定的に接続される。
　第４リンク５３１３ｄは、略直線状に延伸する棒状の部材であり、第４軸Ｏ４と直交するように延伸しつつ、その先端の端部が第４関節部５３１１ｄの略円柱形状の側面に当接するように、第４関節部５３１１ｄに固定的に接続される。第４リンク５３１３ｄの基端には、第５関節部５３１１ｅが接続される。
　第５関節部５３１１ｅは、略円柱形状を有し、その先端側で、第４リンク５３１３ｄの基端を、第４軸Ｏ４と平行な回転軸（第５軸Ｏ５）まわりに回動可能に支持する。第５関節部５３１１ｅの基端には、第５リンク５３１３ｅの先端が固定的に接続される。第４軸Ｏ４及び第５軸Ｏ５は、顕微鏡部５３０３を上下方向に移動させ得る回転軸である。第４軸Ｏ４及び第５軸Ｏ５まわりに顕微鏡部５３０３を含む先端側の構成を回動させることにより、顕微鏡部５３０３の高さ、すなわち顕微鏡部５３０３と観察対象との距離を調整することができる。
　第５リンク５３１３ｅは、一辺が鉛直方向に延伸するとともに他辺が水平方向に延伸する略Ｌ字形状を有する第１の部材と、当該第１の部材の水平方向に延伸する部位から鉛直下向きに延伸する棒状の第２の部材と、が組み合わされて構成される。第５リンク５３１３ｅの第１の部材の鉛直方向に延伸する部位の上端近傍に、第５関節部５３１１ｅの基端が固定的に接続される。第５リンク５３１３ｅの第２の部材の基端（下端）には、第６関節部５３１１ｆが接続される。
　第６関節部５３１１ｆは、略円柱形状を有し、その先端側で、第５リンク５３１３ｅの基端を、鉛直方向と平行な回転軸（第６軸Ｏ６）まわりに回動可能に支持する。第６関節部５３１１ｆの基端には、第６リンク５３１３ｆの先端が固定的に接続される。
　第６リンク５３１３ｆは鉛直方向に延伸する棒状の部材であり、その基端はベース部５３１５の上面に固定的に接続される。
　第１関節部５３１１ａ～第６関節部５３１１ｆの回転可能範囲は、顕微鏡部５３０３が所望の動きを可能であるように適宜設定されている。これにより、以上説明した構成を有するアーム部５３０９においては、顕微鏡部５３０３の動きに関して、並進３自由度及び回転３自由度の計６自由度の動きが実現され得る。このように、顕微鏡部５３０３の動きに関して６自由度が実現されるようにアーム部５３０９を構成することにより、アーム部５３０９の可動範囲内において顕微鏡部５３０３の位置及び姿勢を自由に制御することが可能になる。従って、あらゆる角度から術部を観察することが可能となり、手術をより円滑に実行することができる。
　なお、図示するアーム部５３０９の構成はあくまで一例であり、アーム部５３０９を構成するリンクの数及び形状（長さ）、並びに関節部の数、配置位置及び回転軸の方向等は、所望の自由度が実現され得るように適宜設計されてよい。例えば、上述したように、顕微鏡部５３０３を自由に動かすためには、アーム部５３０９は６自由度を有するように構成されることが好ましいが、アーム部５３０９はより大きな自由度（すなわち、冗長自由度）を有するように構成されてもよい。冗長自由度が存在する場合には、アーム部５３０９においては、顕微鏡部５３０３の位置及び姿勢が固定された状態で、アーム部５３０９の姿勢を変更することが可能となる。従って、例えば表示装置５３１９を見る術者の視界にアーム部５３０９が干渉しないように当該アーム部５３０９の姿勢を制御する等、術者にとってより利便性の高い制御が実現され得る。
　ここで、第１関節部５３１１ａ～第６関節部５３１１ｆには、モータ等の駆動機構、及び各関節部における回転角度を検出するエンコーダ等が搭載されたアクチュエータが設けられ得る。そして、第１関節部５３１１ａ～第６関節部５３１１ｆに設けられる各アクチュエータの駆動が制御装置５３１７によって適宜制御されることにより、アーム部５３０９の姿勢、すなわち顕微鏡部５３０３の位置及び姿勢が制御され得る。具体的には、制御装置５３１７は、エンコーダによって検出された各関節部の回転角度についての情報に基づいて、アーム部５３０９の現在の姿勢、並びに顕微鏡部５３０３の現在の位置及び姿勢を把握することができる。制御装置５３１７は、把握したこれらの情報を用いて、ユーザからの操作入力に応じた顕微鏡部５３０３の移動を実現するような各関節部に対する制御値（例えば、回転角度又は発生トルク等）を算出し、当該制御値に応じて各関節部の駆動機構を駆動させる。なお、この際、制御装置５３１７によるアーム部５３０９の制御方式は限定されず、力制御又は位置制御等、各種の公知の制御方式が適用されてよい。
　例えば、術者が、図示しない入力装置を介して適宜操作入力を行うことにより、当該操作入力に応じて制御装置５３１７によってアーム部５３０９の駆動が適宜制御され、顕微鏡部５３０３の位置及び姿勢が制御されてよい。当該制御により、顕微鏡部５３０３を任意の位置から任意の位置まで移動させた後、その移動後の位置で固定的に支持することができる。なお、当該入力装置としては、術者の利便性を考慮して、例えばフットスイッチ等、術者が手に術具を有していても操作可能なものが適用されることが好ましい。また、ウェアラブルデバイスや手術室内に設けられるカメラを用いたジェスチャ検出や視線検出に基づいて、非接触で操作入力が行われてもよい。これにより、清潔域に属するユーザであっても、不潔域に属する機器をより自由度高く操作することが可能になる。あるいは、アーム部５３０９は、いわゆるマスタースレイブ方式で操作されてもよい。この場合、アーム部５３０９は、手術室から離れた場所に設置される入力装置を介してユーザによって遠隔操作され得る。
　また、力制御が適用される場合には、ユーザからの外力を受け、その外力にならってスムーズにアーム部５３０９が移動するように第１関節部５３１１ａ～第６関節部５３１１ｆのアクチュエータが駆動される、いわゆるパワーアシスト制御が行われてもよい。これにより、ユーザが、顕微鏡部５３０３を把持して直接その位置を移動させようとする際に、比較的軽い力で顕微鏡部５３０３を移動させることができる。従って、より直感的に、より簡易な操作で顕微鏡部５３０３を移動させることが可能となり、ユーザの利便性を向上させることができる。
　また、アーム部５３０９は、ピボット動作をするようにその駆動が制御されてもよい。ここで、ピボット動作とは、顕微鏡部５３０３の光軸が空間上の所定の点（以下、ピボット点という）を常に向くように、顕微鏡部５３０３を移動させる動作である。ピボット動作によれば、同一の観察位置を様々な方向から観察することが可能となるため、より詳細な患部の観察が可能となる。なお、顕微鏡部５３０３が、その焦点距離を調整不可能に構成される場合には、顕微鏡部５３０３とピボット点との距離が固定された状態でピボット動作が行われることが好ましい。この場合には、顕微鏡部５３０３とピボット点との距離を、顕微鏡部５３０３の固定的な焦点距離に調整しておけばよい。これにより、顕微鏡部５３０３は、ピボット点を中心とする焦点距離に対応する半径を有する半球面（図１８に概略的に図示する）上を移動することとなり、観察方向を変更しても鮮明な撮像画像が得られることとなる。一方、顕微鏡部５３０３が、その焦点距離を調整可能に構成される場合には、顕微鏡部５３０３とピボット点との距離が可変な状態でピボット動作が行われてもよい。この場合には、例えば、制御装置５３１７は、エンコーダによって検出された各関節部の回転角度についての情報に基づいて、顕微鏡部５３０３とピボット点との距離を算出し、その算出結果に基づいて顕微鏡部５３０３の焦点距離を自動で調整してもよい。あるいは、顕微鏡部５３０３にＡＦ機能が設けられる場合であれば、ピボット動作によって顕微鏡部５３０３とピボット点との距離が変化するごとに、当該ＡＦ機能によって自動で焦点距離の調整が行われてもよい。
　また、第１関節部５３１１ａ～第６関節部５３１１ｆには、その回転を拘束するブレーキが設けられてもよい。当該ブレーキの動作は、制御装置５３１７によって制御され得る。例えば、顕微鏡部５３０３の位置及び姿勢を固定したい場合には、制御装置５３１７は各関節部のブレーキを作動させる。これにより、アクチュエータを駆動させなくてもアーム部５３０９の姿勢、すなわち顕微鏡部５３０３の位置及び姿勢が固定され得るため、消費電力を低減することができる。顕微鏡部５３０３の位置及び姿勢を移動したい場合には、制御装置５３１７は、各関節部のブレーキを解除し、所定の制御方式に従ってアクチュエータを駆動させればよい。
　このようなブレーキの動作は、上述した操作部５３０７を介したユーザによる操作入力に応じて行われ得る。ユーザは、顕微鏡部５３０３の位置及び姿勢を移動したい場合には、操作部５３０７を操作し、各関節部のブレーキを解除させる。これにより、アーム部５３０９の動作モードが、各関節部における回転を自由に行えるモード（オールフリーモード）に移行する。また、ユーザは、顕微鏡部５３０３の位置及び姿勢を固定したい場合には、操作部５３０７を操作し、各関節部のブレーキを作動させる。これにより、アーム部５３０９の動作モードが、各関節部における回転が拘束されたモード（固定モード）に移行する。
　制御装置５３１７は、顕微鏡装置５３０１及び表示装置５３１９の動作を制御することにより、顕微鏡手術システム５３００の動作を統括的に制御する。例えば、制御装置５３１７は、所定の制御方式に従って第１関節部５３１１ａ～第６関節部５３１１ｆのアクチュエータを動作させることにより、アーム部５３０９の駆動を制御する。また、例えば、制御装置５３１７は、第１関節部５３１１ａ～第６関節部５３１１ｆのブレーキの動作を制御することにより、アーム部５３０９の動作モードを変更する。また、例えば、制御装置５３１７は、顕微鏡装置５３０１の顕微鏡部５３０３の撮像部によって取得された画像信号に各種の信号処理を施すことにより、表示用の画像データを生成するとともに、当該画像データを表示装置５３１９に表示させる。当該信号処理では、例えば現像処理（デモザイク処理）、高画質化処理（帯域強調処理、超解像処理、ＮＲ（Noise　Reduction）処理及び／又は手ブレ補正処理等）及び／又は拡大処理（すなわち、電子ズーム処理）等、各種の公知の信号処理が行われてよい。
　なお、制御装置５３１７と顕微鏡部５３０３との通信、及び制御装置５３１７と第１関節部５３１１ａ～第６関節部５３１１ｆとの通信は、有線通信であってもよいし無線通信であってもよい。有線通信の場合には、電気信号による通信が行われてもよいし、光通信が行われてもよい。この場合、有線通信に用いられる伝送用のケーブルは、その通信方式に応じて電気信号ケーブル、光ファイバ、又はこれらの複合ケーブルとして構成され得る。一方、無線通信の場合には、手術室内に伝送ケーブルを敷設する必要がなくなるため、当該伝送ケーブルによって医療スタッフの手術室内の移動が妨げられる事態が解消され得る。
　制御装置５３１７は、ＣＰＵ（Central　Processing　Unit）、ＧＰＵ（Graphics　Processing　Unit）等のプロセッサ、又はプロセッサとメモリ等の記憶素子が混載されたマイコン若しくは制御基板等であり得る。制御装置５３１７のプロセッサが所定のプログラムに従って動作することにより、上述した各種の機能が実現され得る。なお、図示する例では、制御装置５３１７は、顕微鏡装置５３０１と別個の装置として設けられているが、制御装置５３１７は、顕微鏡装置５３０１のベース部５３１５の内部に設置され、顕微鏡装置５３０１と一体的に構成されてもよい。あるいは、制御装置５３１７は、複数の装置によって構成されてもよい。例えば、顕微鏡部５３０３や、アーム部５３０９の第１関節部５３１１ａ～第６関節部５３１１ｆにそれぞれマイコンや制御基板等が配設され、これらが互いに通信可能に接続されることにより、制御装置５３１７と同様の機能が実現されてもよい。
　表示装置５３１９は、手術室内に設けられ、制御装置５３１７からの制御により、当該制御装置５３１７によって生成された画像データに対応する画像を表示する。つまり、表示装置５３１９には、顕微鏡部５３０３によって撮影された術部の画像が表示される。なお、表示装置５３１９は、術部の画像に代えて、又は術部の画像とともに、例えば患者の身体情報や手術の術式についての情報等、手術に関する各種の情報を表示してもよい。この場合、表示装置５３１９の表示は、ユーザによる操作によって適宜切り替えられてよい。あるいは、表示装置５３１９は複数設けられてもよく、複数の表示装置５３１９のそれぞれに、術部の画像や手術に関する各種の情報が、それぞれ表示されてもよい。なお、表示装置５３１９としては、液晶ディスプレイ装置又はＥＬ（Electro　Luminescence）ディスプレイ装置等、各種の公知の表示装置が適用されてよい。
　図１９は、図１８に示す顕微鏡手術システム５３００を用いた手術の様子を示す図である。図１９では、術者５３２１が、顕微鏡手術システム５３００を用いて、患者ベッド５３２３上の患者５３２５に対して手術を行っている様子を概略的に示している。なお、図１９では、簡単のため、顕微鏡手術システム５３００の構成のうち制御装置５３１７の図示を省略するとともに、顕微鏡装置５３０１を簡略化して図示している。
　図２Ｃに示すように、手術時には、顕微鏡手術システム５３００を用いて、顕微鏡装置５３０１によって撮影された術部の画像が、手術室の壁面に設置される表示装置５３１９に拡大表示される。表示装置５３１９は、術者５３２１と対向する位置に設置されており、術者５３２１は、表示装置５３１９に映し出された映像によって術部の様子を観察しながら、例えば患部の切除等、当該術部に対して各種の処置を行う。
　以上、本開示に係る技術が適用され得る顕微鏡手術システム５３００の一例について説明した。なお、ここでは、一例として顕微鏡手術システム５３００について説明したが、本開示に係る技術が適用され得るシステムはかかる例に限定されない。例えば、顕微鏡装置５３０１は、その先端に顕微鏡部５３０３に代えて他の観察装置や他の術具を支持する、支持アーム装置としても機能し得る。当該他の観察装置としては、例えば内視鏡が適用され得る。また、当該他の術具としては、鉗子、攝子、気腹のための気腹チューブ、又は焼灼によって組織の切開や血管の封止を行うエネルギー処置具等が適用され得る。これらの観察装置や術具を支持アーム装置によって支持することにより、医療スタッフが人手で支持する場合に比べて、より安定的に位置を固定することが可能となるとともに、医療スタッフの負担を軽減することが可能となる。本開示に係る技術は、このような顕微鏡部以外の構成を支持する支持アーム装置に適用されてもよい。
　本開示に係る技術は、以上説明した構成のうち、制御装置５３１７に好適に適用され得る。具体的には、顕微鏡部５３０３の撮像部によって撮影された患者５３２５の術部の画像における血流部と非血流部を容易に視認可能に表示装置５３１９に表示する場合に、本開示に係る技術を適用できる。制御装置５３１７に本開示に係る技術を適用することにより、撮像画像が動いた場合でも血流部と非血流部が正確に識別された良好なＳＣ画像を生成することができる。これにより、術者５３２１は、血流部と非血流部が正確に識別された術部の画像を表示装置５３１９においてリアルタイムで見ることができ、手術をより安全に行うことができる。
　なお、本技術は以下のような構成も取ることができる。
（１）
　コヒーレント光を撮像対象に照射する光照射手段と、
　前記コヒーレント光が照射された前記撮像対象による散乱光から得られるスペックル画像を撮像する撮像手段と、
　第１の露光時間による第１のスペックル画像を取得し、前記第１の露光時間よりも短い第２の露光時間による第２のスペックル画像を取得する取得手段と、
　前記第１のスペックル画像に基く画素ごとの第１のスペックルコントラスト値、および／または、前記第２のスペックル画像に基く画素ごとの第２のスペックルコントラスト値を算出するスペックルコントラスト算出手段と、
　前記撮像対象の動きを検出する動き検出手段と、
　前記動き検出手段による前記撮像対象の動きの検出結果によって、前記第１のスペックルコントラスト値、および／または、前記第２のスペックルコントラスト値に基いてスペックルコントラスト画像を生成するスペックル画像生成手段と、を備える医療システム。
（２）
　前記医療システムは、顕微鏡手術システム、または、内視鏡手術システムである、前記（１）に記載の医療システム。
（３）
　コヒーレント光が照射された撮像対象による散乱光から得られるスペックル画像として、第１の露光時間による第１のスペックル画像を取得し、前記第１の露光時間よりも短い第２の露光時間による第２のスペックル画像を取得する取得手段と、
　前記撮像対象の動きを検出する動き検出手段と、
　前記第１のスペックル画像に基く画素ごとの第１のスペックルコントラスト値、および／または、前記第２のスペックル画像に基く画素ごとの第２のスペックルコントラスト値を算出するスペックルコントラスト算出手段と、
　前記動き検出手段による前記撮像対象の動きの検出結果によって、前記第１のスペックルコントラスト値、および／または、前記第２のスペックルコントラスト値に基いてスペックルコントラスト画像を生成するスペックル画像生成手段と、を備える情報処理装置。
（４）
　前記取得手段は、１フレーム中に前記第１のスペックル画像の画素と前記第２のスペックル画像の画素を含む混合画像を取得し、
　前記スペックルコントラスト算出手段は、前記混合画像における前記第１のスペックル画像の画素に基いて画素ごとの前記第１のスペックルコントラスト値を算出し、前記混合画像における前記第２のスペックル画像の画素に基いて画素ごとの前記第２のスペックルコントラスト値を算出する、前記（３）に記載の情報処理装置。
（５）
　前記取得手段は、時系列に交互に、前記第１のスペックル画像と前記第２のスペックル画像を取得する、前記（３）に記載の情報処理装置。
（６）
　前記取得手段は、露光時間の異なる２つの撮像手段それぞれから、前記第１のスペックル画像と前記第２のスペックル画像を取得する、前記（３）に記載の情報処理装置。
（７）
　前記取得手段は、高フレームレートのスペックル画像を取得し、
　前記スペックルコントラスト算出手段は、前記高フレームレートのスペックル画像の複数フレーム分を前記第１のスペックル画像として用いて、前記第１のスペックルコントラスト値を算出し、
　前記高フレームレートのスペックル画像の１フレーム分を前記第２のスペックル画像として用いて、前記第２のスペックルコントラスト値を算出する、前記（３）に記載の情報処理装置。
（８）
　前記スペックル画像生成手段は、
　前記動き検出手段によって前記撮像対象の動きが検出されない場合は、前記第１のスペックルコントラスト値に基いて前記スペックルコントラスト画像を生成し、
　前記動き検出手段によって前記撮像対象の動きが検出された場合は、前記第２のスペックルコントラスト値に基いて前記スペックルコントラスト画像を生成する、前記（３）から前記（７）のいずれかに記載の情報処理装置。
（９）
　前記スペックル画像生成手段は、
　前記動き検出手段によって検出された前記撮像対象の動き量に基いて、前記第１のスペックルコントラスト値および前記第２のスペックルコントラスト値を重み付け加算して合成したスペックルコントラスト値を用いて前記スペックルコントラスト画像を生成する、前記（３）から前記（７）のいずれかに記載の情報処理装置。
（１０）
　前記動き検出手段は、
　前記第２のスペックルコントラスト値から前記第１のスペックルコントラスト値を減算した値に基いて前記撮像対象の動きを検出する、前記（３）から前記（９）のいずれかに記載の情報処理装置。
（１１）
　前記動き検出手段によって検出された前記撮像対象の動きに基いて、前記スペックル画像を撮像する撮像手段の露光時間を制御する露光制御手段を、さらに備える、前記（３）から前記（１０）のいずれかに記載の情報処理装置。
（１２）
　コヒーレント光が照射された撮像対象による散乱光から得られるスペックル画像として、第１の露光時間による第１のスペックル画像を取得し、前記第１の露光時間よりも短い第２の露光時間による第２のスペックル画像を取得する取得工程と、
　前記撮像対象の動きを検出する動き検出工程と、
　前記第１のスペックル画像に基く画素ごとの第１のスペックルコントラスト値、および／または、前記第２のスペックル画像に基く画素ごとの第２のスペックルコントラスト値を算出するスペックルコントラスト算出工程と、
　前記動き検出工程による前記撮像対象の動きの検出結果によって、前記第１のスペックルコントラスト値、および／または、前記第２のスペックルコントラスト値に基いてスペックルコントラスト画像を生成するスペックル画像生成工程と、を含む情報処理方法。
　以上、本開示の実施形態、変形例について説明したが、本開示の技術的範囲は、上述の実施形態、変形例そのままに限定されるものではなく、本開示の要旨を逸脱しない範囲において種々の変更が可能である。また、異なる実施形態、変形例にわたる構成要素を適宜組み合わせてもよい。
　例えば、第１の実施形態の情報処理装置１３に対して露光制御部１３１７を追加して第３の実施形態の情報処理装置１３としたのと同様に、第２の実施形態の情報処理装置１３に対して露光制御部１３１７を追加してもよい。
　なお、本明細書に記載された各実施形態、変形例における効果はあくまで例示であって限定されるものでは無く、他の効果があってもよい。
　１　　　　医療システム
　１１　　　光源
　１２　　　撮像装置
　１３　　　情報処理装置
　１４　　　表示装置
　１３１　　処理部
　１３２　　記憶部
　１３１１　取得部
　１３１２　動き検出部
　１３１３　第１ＳＣ算出部
　１３１４　第２ＳＣ算出部
　１３１５　ＳＣ画像生成部
　１３１６　表示制御部
　１３１７　露光制御部

Claims (12)

  1. 　コヒーレント光を撮像対象に照射する光照射手段と、
    　前記コヒーレント光が照射された前記撮像対象による散乱光から得られるスペックル画像を撮像する撮像手段と、
    　第１の露光時間による第１のスペックル画像を取得し、前記第１の露光時間よりも短い第２の露光時間による第２のスペックル画像を取得する取得手段と、
    　前記第１のスペックル画像に基く画素ごとの第１のスペックルコントラスト値、および／または、前記第２のスペックル画像に基く画素ごとの第２のスペックルコントラスト値を算出するスペックルコントラスト算出手段と、
    　前記撮像対象の動きを検出する動き検出手段と、
    　前記動き検出手段による前記撮像対象の動きの検出結果によって、前記第１のスペックルコントラスト値、および／または、前記第２のスペックルコントラスト値に基いてスペックルコントラスト画像を生成するスペックル画像生成手段と、を備える医療システム。
  2. 　前記医療システムは、顕微鏡手術システム、または、内視鏡手術システムである、請求項１に記載の医療システム。
  3. 　コヒーレント光が照射された撮像対象による散乱光から得られるスペックル画像として、第１の露光時間による第１のスペックル画像を取得し、前記第１の露光時間よりも短い第２の露光時間による第２のスペックル画像を取得する取得手段と、
    　前記撮像対象の動きを検出する動き検出手段と、
    　前記第１のスペックル画像に基く画素ごとの第１のスペックルコントラスト値、および／または、前記第２のスペックル画像に基く画素ごとの第２のスペックルコントラスト値を算出するスペックルコントラスト算出手段と、
    　前記動き検出手段による前記撮像対象の動きの検出結果によって、前記第１のスペックルコントラスト値、および／または、前記第２のスペックルコントラスト値に基いてスペックルコントラスト画像を生成するスペックル画像生成手段と、を備える情報処理装置。
  4. 　前記取得手段は、１フレーム中に前記第１のスペックル画像の画素と前記第２のスペックル画像の画素を含む混合画像を取得し、
    　前記スペックルコントラスト算出手段は、前記混合画像における前記第１のスペックル画像の画素に基いて画素ごとの前記第１のスペックルコントラスト値を算出し、前記混合画像における前記第２のスペックル画像の画素に基いて画素ごとの前記第２のスペックルコントラスト値を算出する、請求項３に記載の情報処理装置。
  5. 　前記取得手段は、時系列に交互に、前記第１のスペックル画像と前記第２のスペックル画像を取得する、請求項３に記載の情報処理装置。
  6. 　前記取得手段は、露光時間の異なる２つの撮像手段それぞれから、前記第１のスペックル画像と前記第２のスペックル画像を取得する、請求項３に記載の情報処理装置。
  7. 　前記取得手段は、高フレームレートのスペックル画像を取得し、
    　前記スペックルコントラスト算出手段は、前記高フレームレートのスペックル画像の複数フレーム分を前記第１のスペックル画像として用いて、前記第１のスペックルコントラスト値を算出し、
    　前記高フレームレートのスペックル画像の１フレーム分を前記第２のスペックル画像として用いて、前記第２のスペックルコントラスト値を算出する、請求項３に記載の情報処理装置。
  8. 　前記スペックル画像生成手段は、
    　前記動き検出手段によって前記撮像対象の動きが検出されない場合は、前記第１のスペックルコントラスト値に基いて前記スペックルコントラスト画像を生成し、
    　前記動き検出手段によって前記撮像対象の動きが検出された場合は、前記第２のスペックルコントラスト値に基いて前記スペックルコントラスト画像を生成する、請求項３に記載の情報処理装置。
  9. 　前記スペックル画像生成手段は、
    　前記動き検出手段によって検出された前記撮像対象の動き量に基いて、前記第１のスペックルコントラスト値および前記第２のスペックルコントラスト値を重み付け加算して合成したスペックルコントラスト値を用いて前記スペックルコントラスト画像を生成する、請求項３に記載の情報処理装置。
  10. 　前記動き検出手段は、
    　前記第２のスペックルコントラスト値から前記第１のスペックルコントラスト値を減算した値に基いて前記撮像対象の動きを検出する、請求項３に記載の情報処理装置。
  11. 　前記動き検出手段によって検出された前記撮像対象の動きに基いて、前記スペックル画像を撮像する撮像手段の露光時間を制御する露光制御手段を、さらに備える、請求項３に記載の情報処理装置。
  12. 　コヒーレント光が照射された撮像対象による散乱光から得られるスペックル画像として、第１の露光時間による第１のスペックル画像を取得し、前記第１の露光時間よりも短い第２の露光時間による第２のスペックル画像を取得する取得工程と、
    　前記撮像対象の動きを検出する動き検出工程と、
    　前記第１のスペックル画像に基く画素ごとの第１のスペックルコントラスト値、および／または、前記第２のスペックル画像に基く画素ごとの第２のスペックルコントラスト値を算出するスペックルコントラスト算出工程と、
    　前記動き検出工程による前記撮像対象の動きの検出結果によって、前記第１のスペックルコントラスト値、および／または、前記第２のスペックルコントラスト値に基いてスペックルコントラスト画像を生成するスペックル画像生成工程と、を含む情報処理方法。
PCT/JP2019/031245 2018-08-28 2019-08-07 医療システム、情報処理装置及び情報処理方法 WO2020045014A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
US17/250,669 US20210235968A1 (en) 2018-08-28 2019-08-07 Medical system, information processing apparatus, and information processing method
DE112019004308.0T DE112019004308T5 (de) 2018-08-28 2019-08-07 Medizinisches system, informationsverarbeitungsvorrichtung und informationsverarbeitungsverfahren
JP2020540216A JPWO2020045014A1 (ja) 2018-08-28 2019-08-07 医療システム、情報処理装置及び情報処理方法

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2018-159676 2018-08-28
JP2018159676 2018-08-28

Publications (1)

Publication Number Publication Date
WO2020045014A1 true WO2020045014A1 (ja) 2020-03-05

Family

ID=69643573

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2019/031245 WO2020045014A1 (ja) 2018-08-28 2019-08-07 医療システム、情報処理装置及び情報処理方法

Country Status (4)

Country Link
US (1) US20210235968A1 (ja)
JP (1) JPWO2020045014A1 (ja)
DE (1) DE112019004308T5 (ja)
WO (1) WO2020045014A1 (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11612306B2 (en) * 2017-11-01 2023-03-28 Sony Corporation Surgical arm system and surgical arm control system

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009136454A (ja) * 2007-12-05 2009-06-25 Olympus Corp 内視鏡システム
US20170017858A1 (en) * 2015-07-15 2017-01-19 Samsung Electronics Co., Ltd. Laser speckle contrast imaging system, laser speckle contrast imaging method, and apparatus including the laser speckle contrast imaging system
JP2017116982A (ja) * 2015-12-21 2017-06-29 ソニー株式会社 画像解析装置、画像解析方法及び画像解析システム
WO2017138210A1 (ja) * 2016-02-12 2017-08-17 ソニー株式会社 撮像装置、撮像方法及び撮像システム
JP2017170064A (ja) * 2016-03-25 2017-09-28 ソニー株式会社 画像解析装置、画像解析方法

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010532699A (ja) * 2007-07-06 2010-10-14 インダストリアル リサーチ リミテッド レーザスペックル画像化システム及び方法
US9832390B2 (en) * 2014-02-20 2017-11-28 Sharp Kabushiki Kaisha Image capturing device
KR102149453B1 (ko) * 2014-02-21 2020-08-28 삼성전자주식회사 이미지를 획득하기 위한 전자 장치 및 방법
KR102149187B1 (ko) * 2014-02-21 2020-08-28 삼성전자주식회사 전자 장치와, 그의 제어 방법
WO2016147315A1 (ja) * 2015-03-17 2016-09-22 浜松ホトニクス株式会社 蛍光画像生成装置及び蛍光画像生成方法
JP6394462B2 (ja) * 2015-03-30 2018-09-26 ソニー株式会社 情報処理装置、情報処理方法、及び、プログラム
JP6927046B2 (ja) * 2015-12-04 2021-08-25 ソニーグループ株式会社 情報処理装置、スペックルイメージングシステム、及び情報処理方法
JP7000861B2 (ja) * 2016-02-16 2022-02-04 ソニーグループ株式会社 画像処理装置、医療機器の作動方法及びプログラム
JP6900953B2 (ja) * 2016-07-26 2021-07-14 ソニーグループ株式会社 画像処理装置および方法、内視鏡システム、並びにプログラム
GB201809229D0 (en) * 2018-06-05 2018-07-25 Moor Instruments Ltd Optical coherence imager
JP2021164494A (ja) * 2018-07-02 2021-10-14 ソニーグループ株式会社 医療用観察システム、医療用観察装置、及び医療用観察装置の駆動方法
DE112019004340T5 (de) * 2018-08-28 2021-05-12 Sony Corporation Medizinisches system, informationsverarbeitungsvorrichtung und informationsverarbeitungsverfahren
JP2020163037A (ja) * 2019-03-29 2020-10-08 ソニー株式会社 医療システム、情報処理装置及び情報処理方法
KR102351785B1 (ko) * 2020-02-06 2022-01-18 주식회사 루트로닉 조직의 기능적 영상 획득 장치 및 이의 생성 방법

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009136454A (ja) * 2007-12-05 2009-06-25 Olympus Corp 内視鏡システム
US20170017858A1 (en) * 2015-07-15 2017-01-19 Samsung Electronics Co., Ltd. Laser speckle contrast imaging system, laser speckle contrast imaging method, and apparatus including the laser speckle contrast imaging system
JP2017116982A (ja) * 2015-12-21 2017-06-29 ソニー株式会社 画像解析装置、画像解析方法及び画像解析システム
WO2017138210A1 (ja) * 2016-02-12 2017-08-17 ソニー株式会社 撮像装置、撮像方法及び撮像システム
JP2017170064A (ja) * 2016-03-25 2017-09-28 ソニー株式会社 画像解析装置、画像解析方法

Also Published As

Publication number Publication date
JPWO2020045014A1 (ja) 2021-08-12
DE112019004308T5 (de) 2021-05-27
US20210235968A1 (en) 2021-08-05

Similar Documents

Publication Publication Date Title
US11788966B2 (en) Imaging system
WO2020045015A1 (ja) 医療システム、情報処理装置及び情報処理方法
US11463629B2 (en) Medical system, medical apparatus, and control method
US11653824B2 (en) Medical observation system and medical observation device
WO2018088105A1 (ja) 医療用支持アーム及び医療用システム
WO2019239942A1 (ja) 手術用観察装置、手術用観察方法、手術用光源装置、及び手術用の光照射方法
US20200168325A1 (en) Surgical support system, information processing method, and information processing apparatus
CN113905652A (zh) 医学观察系统、控制装置和控制方法
US11699215B2 (en) Imaging device, method and program for producing images of a scene having an extended depth of field with good contrast
WO2020045014A1 (ja) 医療システム、情報処理装置及び情報処理方法
JP2021040988A (ja) 医療用支持アーム、及び医療用システム
US20230222740A1 (en) Medical image processing system, surgical image control device, and surgical image control method
US20200085287A1 (en) Medical imaging device and endoscope
WO2020203225A1 (ja) 医療システム、情報処理装置及び情報処理方法
WO2017221491A1 (ja) 制御装置、制御システム、および制御方法
US20220022728A1 (en) Medical system, information processing device, and information processing method
WO2020009127A1 (ja) 医療用観察システム、医療用観察装置、及び医療用観察装置の駆動方法
WO2018043205A1 (ja) 医療用画像処理装置、医療用画像処理方法、プログラム
WO2020050187A1 (ja) 医療システム、情報処理装置及び情報処理方法
WO2020084917A1 (ja) 医療システム及び情報処理方法
WO2023176133A1 (ja) 内視鏡用保持装置、内視鏡手術システム、及び制御方法
WO2019202860A1 (ja) 医療用システム、接続構造、及び接続方法
JP2020525055A (ja) 医療撮影システム、方法及びコンピュータプログラム

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 19853751

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2020540216

Country of ref document: JP

Kind code of ref document: A

122 Ep: pct application non-entry in european phase

Ref document number: 19853751

Country of ref document: EP

Kind code of ref document: A1