JP2018175790A - 情報処理装置、情報処理方法及びプログラム - Google Patents

Abstract

【課題】ユーザの要望に沿う断層画像を取得するための適切なパラメータを設定することができる技術を提供すること。【解決手段】本技術に係る情報処理装置は、制御部を具備する。前記制御部は、施術対象である眼を撮像することによって得られる画像に写っている被写体の時系列変化を検出し、前記被写体の時系列変化に応じて、前記眼の断層画像を取得するためのパラメータを変更する。【選択図】図４

Description

本技術は、眼の施術時において表示される眼の断層画像に関する処理を実行する情報処理装置等の技術に関する。

近年、眼に対する施術において、手術顕微鏡装置が広く用いられるようになってきている。この手術顕微鏡装置は、顕微鏡を介して取得された眼の画像や、ＯＣＴ（Optical Coherence Tomography：光干渉断層計）等によって取得された眼の断層画像を表示させ、ユーザは、これらの画像を参照しながら、眼の施術を行う。これにより、施術ミスの発生が防止され、また、施術の精度が向上される。

ＯＣＴは、眼に対して近赤外線を照射し、眼の各組織による反射光を再構成して像を生成する技術であり、特定の断層面における眼の断層画像を得ることができる。例えば、下記特許文献１には、ＯＣＴによって取得された眼の断層画像をユーザに提示する眼科解析装置が開示されている。

特開２０１４−１４０４９０号公報

ＯＣＴ等による断層画像の取得においては、ユーザは、自己の要望に沿う断層画像を得るために、多数のパラメータを調整する必要がある。一方、これらのパラメータを適切な値に設定するといった作業は、ユーザにとっては時間と経験を要する作業であり、ユーザにとっては負担が大きい。

以上のような事情に鑑み、本技術の目的は、ユーザの要望に沿う断層画像を取得するための適切なパラメータを設定することができる技術を提供することにある。

上記目的を達成するため、本技術に係る情報処理装置は、制御部を具備する。前記制御部は、施術対象である眼を撮像することによって得られる画像に写っている被写体の時系列変化を検出し、前記被写体の時系列変化に応じて、前記眼の断層画像を取得するためのパラメータを変更する。

このように、被写体の時系列変化に応じて、眼の断層画像を取得するためのパラメータを変更することで、ユーザの要望に沿った断層画像を取得するための適切なパラメータを設定することができる。

上記情報処理装置において、前記制御部は、前記被写体の時系列変化として、術具の位置の変化を検出し、前記術具の位置の変化に応じて、前記パラメータを変更してもよい。

これにより、ユーザの要望に沿った断層画像を取得するための適切なパラメータを設定することができる。

上記情報処理装置において、前記制御部は、前記被写体の時系列変化として、前記眼の状態の変化を検出し、前記眼の状態の変化に応じて、前記パラメータを変更してもよい。

これにより、ユーザの要望に沿った断層画像を取得するための適切なパラメータを設定することができる。

上記情報処理装置において、前記制御部は、前記被写体の時系列変化に応じて、前記断層画像における画質よりもフレームレートが優先されるように前記パラメータが設定される第１のモードと、前記断層画像におけるフレームレートよりも画質が優先されるように前記パラメータが設定される第２のモードとを切り替えてもよい。

これにより、ユーザの要望に沿うように、２つのモードを適切に切り替えることができる。

上記情報処理装置において、前記制御部は、前記被写体の時系列変化における変化の速さを検出し、前記変化の速さに応じて、前記第１のモードと、前記第２のモードとを切り替えてもよい。

これにより、ユーザの要望に沿うように、２つのモードを適切に切り替えることができる。

上記情報処理装置において、前記制御部は、前記変化の速さが所定の閾値以上であるかどうかを判定し、前記変化の速さが所定の閾値以上である場合、前記第１のモードを設定し、前記変化の速さが所定の閾値未満である場合、前記第２のモードを設定してもよい。

これにより、ユーザの要望に沿うように、２つのモードを適切に切り替えることができる。

上記情報処理装置において、前記制御部は、前記断層画像を得るためのスキャンが行われる計測領域内において、前記被写体の時系列変化に応じて、第１の領域を設定し、前記第１の領域と、前記計測領域内における前記第１の領域以外の領域である第２の領域との間で、前記パラメータを変更してもよい。

これにより、ユーザの要望に沿うように、第１の領域と、第２の領域との間で、断層画像を取得するためのパラメータを適切に変更することができる。

上記情報処理装置において、前記制御部は、前記第１の領域と、前記第２の領域との間で、前記パラメータとして、前記スキャンにおけるスキャン密度を変更してもよい。

これにより、ユーザの要望に沿うように、第１の領域と、第２の領域との間で、断層画像を取得するためのパラメータ（スキャン密度）を適切に変更することができる。

上記情報処理装置において、前記制御部は、前記第１の領域におけるスキャン密度が、前記第２の領域のスキャン密度よりも高くなるように、前記スキャンにおける前記スキャン密度を変更してもよい。

これにより、ユーザの要望に沿うように、第１の領域と、第２の領域との間で、断層画像を取得するためのパラメータ（スキャン密度）を適切に変更することができる。

上記情報処理装置において、前記制御部は、前記第１の領域と、前記第２の領域との間で、前記パラメータとして、前記断層画像におけるフレームレートを変更してもよい。

これにより、ユーザの要望に沿うように、第１の領域と、第２の領域との間で、断層画像を取得するためのパラメータ（フレームレート）を適切に変更することができる。

上記情報処理装置において、前記制御部は、前記第１の領域におけるフレームレートが、前記第２の領域におけるフレームレートよりも高くなるように、前記断層画像におけるフレームレートを変更してもよい。

これにより、ユーザの要望に沿うように、第１の領域と、第２の領域との間で、断層画像を取得するためのパラメータ（フレームレート）を適切に変更することができる。

上記情報処理装置において、前記制御部は、前記被写体の時系列変化に基づいて、前記パラメータとして、前記断層画像を取得するための断層面を変更してもよい。

これにより、断層面を適切な位置に設定することができる。

上記情報処理装置において、前記制御部は、前記被写体の時系列変化に応じて、現在時刻から所定時間後の前記被写体の変化を予測し、予測結果に応じて、前記断層面を変更してもよい。

これにより、断層面を適切な位置に設定することができる。

本技術に係る情報処理方法は、施術対象である眼を撮像することによって得られる画像に写っている被写体の時系列変化を検出し、前記被写体の時系列変化に応じて、前記眼の断層画像を取得するためのパラメータを変更する。

本技術に係るプログラムは、施術対象である眼を撮像することによって得られる画像に写っている被写体の時系列変化を検出するステップと、前記被写体の時系列変化に応じて、前記眼の断層画像を取得するためのパラメータを変更するステップとをコンピュータに実行させる。

以上のように、本技術によれば、ユーザの要望に沿う断層画像を取得するための適切なパラメータを設定することができる技術を提供することができる。

第１実施形態に係る手術顕微鏡装置の構成を示すブロック図である。 白内障手術のプロセスを示す模式図である。 白内障手術のプロセスを示す模式図である。 制御部の処理を示すフローチャートである。 正面画像取得部によって取得された正面画像の一例を示す図である。 断層画像取得部によって取得された断層画像の一例を示す図である。 第２実施形態に係る処理を示すフローチャートである。 現在時刻よりも所定時間前から、現在時刻までの間における術具の先端の動きの軌跡の一例を示す図である。 術具の先端の動きに基づいて、注目領域を設定するときの様子を示す図である。 術具の先端の動きに基づいて、注目領域を設定するときの様子を示す図である。 計測領域内において、注目領域が設定されたときの様子を示す図である。 断層画像を取得するためのスキャンパターンを示す図である。 注目領域のフレームレートと、非注目領域のフレームレートを異ならせる場合の処理を示すフローチャートである。 眼の状態の変化に基づいて、注目領域を設定するときの様子を示す図である。 眼の状態の変化に基づいて、注目領域を設定するときの様子を示す図である。 第３実施系形態に係る処理を示すフローチャートである。 現在時刻から所定時間後における術具の先端の位置が予測されるときの様子を示す図である。 予測結果に基づいて決定された断層面の一例を示す図である。 予測結果に基づいて決定された断層面の一例を示す図である。

以下、本技術に係る実施形態を、図面を参照しながら説明する。

≪第１実施形態≫
＜全体構成及び各部の構成＞
図１は、第１実施形態に係る手術顕微鏡装置１０の構成を示すブロック図である。図１に示すように、手術顕微鏡装置１０（情報処理装置）は、制御部１と、正面画像取得部２と、断層画像取得部３と、記憶部４と、表示部５と、入力部６とを備えている。

なお、本実施形態の説明において、眼の奥行き方向をＺ軸方向、眼の平面方向における任意の方向をＸ軸方向、Ｙ軸方向とする（後述の図２、図３等を参照）。

正面画像取得部２は、例えば、カメラ付き顕微鏡装置、ステレオカメラ付き顕微鏡装置等によって構成される。正面画像取得部２は、施術対象としての眼を正面から撮像して、正面画像を取得し、制御部１へと出力する。

断層画像取得部３は、本実施形態では、ＯＣＴによって構成される。なお、断層画像取得部３は、シャインプルーフカメラによって構成されてもよい。断層画像取得部３は、眼に対して、近赤外線を照射し、眼からの反射光と、参照光との光干渉を利用して、眼の奥行き方向（Ｚ軸方向）のスキャンを実行する。

断層画像は、奥行き方向に非常に細長い矩形の画像（以下、矩形画像）が、平面方向（ＸＹ方向）における任意の方向に沿って並べられることによって構成される。従って、断層画像取得部３は、奥行き方向のスキャンだけでなく、少なくとも平面方向における任意の１つの方向へスキャン可能に構成されている。

断層画像取得部３は、各種のパラメータに基づいて、断層画像を取得する。ここで、各種のパラメータとは、計測位置、計測領域１３（後述の図１１参照）、スキャン密度、平均処理回数、断層面などである。

計測位置は、ＯＣＴによる計測が行われる位置であり、計測領域１３は、ＯＣＴによる計測が行われる平面方向の領域（平面方向においてスキャンが行われる領域）である。

ここで、計測領域１３は、眼を上方（Ｚ軸方向）から見たときに線状（スキャンライン）に設定されていてもよく、眼を上方から見たときに面状に設定されていてもよい。計測領域１３が面状に設定されている場合、眼のボリュームデータ（３次元データ）を得ることができる。

計測領域１３は、本実施形態では、固定とされている。なお、計測領域１３は、ユーザの指示に応じて設定されてもよい。スキャン密度は、平面方向におけるスキャンの密度（平面方向において、どの程度の間隔でＯＣＴによる計測が行われるかを示す値）である。

平均処理回数は、同じ位置で連続的に画像を取得して各画素値を平均することで、ランダムノイズを取り除く処理における、画像の連続取得回数である。また、断層面は、断層画像を生成するときの基準となる面である。つまり、矩形画像が、断層面を基準として、断層面に方向に沿うように並べられて断層画像が生成される。断層面は、ユーザによって指定されてもよいし、術具７（図２、３参照）の位置に基づいて決定されてもよい。

なお、計測領域１３が線状（スキャンライン）に設定されている場合、断層面の方向は、線状の計測領域１３に一致する。この場合、取得された矩形画像を単純に並べるだけで、断層画像が生成される。一方、計測領域１３が面状に設定されている場合、面状の計測領域１３において取得された矩形画像のうち、断層面に沿う方向に位置する矩形画像がピックアップされ、ピックアップされた矩形画像が並べられて断層画像が生成される。

表示部５は、液晶ディスプレイ、有機ＥＬディスプレイ（ＥＬ：Electro Luminescence）等によって構成される。表示部５は、正面画像取得部２によって取得された眼の正面画像や、断層画像取得部３によって取得された眼の断層画像を画面上に表示させる。

入力部６は、例えば、キーボードや、マウス、表示部５の画面上に設けられたタッチセンサ等によって構成される。入力部６は、ユーザによる操作信号を入力し、制御部１へと出力する。

制御部１は、ＣＰＵ（Central Processing Unit）等により構成されている。制御部１は、記憶部４２に記憶された各種のプログラムに基づき種々の演算を実行し、手術顕微鏡装置１０の各部を統括的に制御する。なお、制御部１の処理については、動作説明の欄において後に詳述する。

記憶部４２は、制御部１の処理に必要な各種のプログラムや、各種のデータが記憶される不揮発性のメモリと、制御部１の作業領域として用いられる揮発性のメモリとを含む。なお、記憶部４２に記憶される各種のプログラムは、光ディスク、半導体メモリなどの可搬性の記録媒体から読み取られてもよいし、ネットワーク上のサーバ装置からダウンロードされてもよい。

＜眼科手術の概要＞
次に、手術顕微鏡装置１０の利用が可能な白内障手術の概要について説明する。図２、図３は、白内障手術のプロセスを示す模式図である。これらの図に示すように、眼球は、角膜２０、虹彩２１、水晶体２３及び強膜２４等の組織で構成されている。水晶体２３における前方側の表面には、前嚢２５が形成されており、水晶体２３の後方側の表面には後嚢２６が形成されている。水晶体２３よりも奥側には、硝子体（不図示）が位置している。また、水晶体２３の表面において虹彩２１の間が瞳孔２２である。

図２に示すように、白内障手術においては、ナイフ等の術具７によって角膜２０に創口３０が形成される。次に、創口３０から術具７が挿入されて、水晶体２３における前嚢２５が術具７によって切開された後、図３に示すように、吸引用の術具７によって、水晶体２３の内部（核や皮質）が吸引、除去される。その後、水晶体２３を除去した位置に眼内レンズが挿入され、手術が完了する。

なお、ここに示した白内障手術は、手術顕微鏡装置１０の利用が可能な眼科手術の例であり、手術顕微鏡装置１０は各種の眼科手術において利用することが可能である。

＜動作説明＞
次に、本実施形態に係る制御部処理について説明する。図４は、制御部１の処理を示すフローチャートである。図４に示すように、まず、制御部１は、正面画像取得部２を制御して、眼の正面画像を撮像し、撮像された眼の正面画像を正面画像取得部２から取得する（ステップ１０１）。

図５は、正面画像取得部２によって取得された正面画像の一例を示す図である。図５に示す正面画像では、白内障手術において、吸引用の術具７によって水晶体２３の内部が吸引、除去されているときの様子が示されている。

なお、制御部１は、正面画像が取得される度に、取得された正面画像を記憶部４に記憶させる。また、制御部１は、取得された正面画像を表示部５の画面上に表示させる。

次に、制御部１は、記憶部４に記憶された過去の正面画像と、取得された現在の正面画像とにおいて、画像認識処理を実行し、正面画像内に写っている術具７の動き（被写体の時系列変化：被写体の位置の変化）を検出する（ステップ１０２）。

画像認識処理に用いられる方法としては、例えば、フレーム間差分法、テンプレートマッチング法、特徴点抽出／追跡法等が挙げられる。なお、術具７の動きは、術具７の先端部や、把持部等に設けられた光学式、磁気式のマーカに基づいて検出されてもよい。また、検出される術具７の動きは、術具７の全体の動きであってもよいし、術具７の先端の動きであってもよい。

次に、制御部１は、検出された術具７の動きに基づいて、術具７の動きの速さ（位置の変化の速さ）を検出する（ステップ１０３）。術具７の動きの速さは、術具７全体の動きの速さであってもよいし、術具７の先端の動きの速さであってもよい。

次に、制御部１は、術具７の動きの速さが所定の閾値以上であるかを判定する（ステップ１０４）。術具７の動きの速さが所定の閾値以上である場合（ステップ１０４のＹＥＳ）、制御部１は、断層画像におけるモードを、フレームレート優先モード（第１のモード）に設定する（ステップ１０５）。フレームレート優先モードは、断層画像において、画質よりもフレームレート（リフレッシュレート：単位時間あたりの断層画像の更新回数）を優先させるモードである。

フレームレート優先モードでは、制御部１は、断層画像におけるパラメータにおいて、例えば、スキャン密度を低い値に設定して平均処理回数を減らし、フレームレートを高くする。フレームレート優先モードでは、画質が低くなる（低分解能）ものの、フレームレートを高くすることができる。なお、フレームレート優先モードにおける各種パラメータは予め設定されており、この各種パラメータを使用して断層画像が取得される。

ここで、術具７の動きが速いということは、施術対象としての眼の状態の変化も速いと考えられる。このような場合、ユーザからすれば、高画質の断層画像から眼の状態を詳細に観察したいといった要望よりも、高頻度で更新される断層画像から眼の状態の変化を素早く察知したいといった要望の方が強いと考えられる。このため、本実施形態では、術具７の動きが速い場合に、画質よりもフレームレートを優先するフレームレート優先モードを設定することとしている。

一方、ステップ１０４において、術具７の動きの速さが所定の閾値未満である場合（ステップ１０４のＮＯ）、制御部１は、断層画像におけるモードを、画質優先モード（第２のモード）に設定する（ステップ１０６）。画質優先モードは、断層画像において、フレームレートよりも画質を優先させるモードである。

画質優先モードでは、制御部１は、断層画像におけるパラメータにおいて、例えば、スキャン密度を高い値に設定して平均処理回数を増やし、画質を高くする。画質優先モードでは、フレームレートが低くなるものの、画質を高く（高分解能）することができる。なお、画質優先モードにおける各種パラメータは予め設定されており、この各種パラメータを使用して断層画像が取得される。

なお、術具７は常に正面画像内に写っているとは限らない。制御部１は、正面画像内に術具７が写っていないと判断した場合、術具７の動きの速さが所定の閾値未満である場合と同様に、断層画像におけるモードを、画質優先モードに設定する。

ここで、術具７の動きが遅いということは、施術対象としての眼の状態の変化も遅いと考えられる。また、術具７が正面画像内に写っていないということは、施術開始前であったり、施術中において一旦施術を中断していたり、施術後であったりする場合があり、この場合も、同様に、施術対象としての眼の状態の変化も遅いと考えられる。

このような場合、ユーザからすれば、高頻度で更新される断層画像から眼の状態の変化を素早く察知したいといった要望よりも、高画質の断層画像から（施術前、施術中、施術後の）眼の状態を詳細に観察したいといった要望の方が強いと考えられる。このため、本実施形態では、術具７の動きが遅い場合（あるいは、術具７が正面画像内に写っていない場合）に、フレームレートよりも画質を優先する画質優先モードを設定することとしている。

制御部１は、モードを設定すると、設定されたモードに応じたパラメータに基づいて、断層画像取得部３により断層画像を取得させる（ステップ１０７）。断層画像が取得されると、制御部１は、取得された断層画像を表示部５の画面上に表示させる。

図６は、断層画像取得部３によって取得された断層画像の一例を示す図である。図６に示す断層画像では、白内障手術において、吸引用の術具７によって水晶体２３の内部が吸引、除去されているときの様子が示されている。なお、図５に示すような正面画像、及び図６に示すような断層画像は、同じ表示部５上に表示されてもよいし、別々の表示部５上に表示されてもよい。

＜作用等＞
ここで、比較として、断層画像におけるパラメータをユーザが自己で設定して画質や、フレームレートをコントロールする場合を想定する。断層画像におけるパラメータとしては、上述のように様々なパラメータがあり、これらのパラメータが画質や、フレームレートと複雑に関連している。従って、自己の要望に沿う画質及びフレームレートを両立させるために、各種のパラメータを適切な値に設定するといった作業は、ユーザにとっては時間と経験を要する作業であり、ユーザにとっては負担が大きい。

さらに、施術中においては、施術の進行に応じて、眼の状態が変化したり、ユーザの断層画像に対する要望が変化したりするので、より頻繁なパラメータの調整が必要となる。施術中における頻繁なパラメータの調整は、施術が頻繁に遮られる原因となり、また、ユーザの集中力、作業効率を低下させたり、施術時間の遅延を招いたりする原因となる。また、適切なパラメータを設定できない場合には、断層画像を表示したことによる効果を十分に発揮することができない。

一方、本実施形態では、正面画像内における術具７の動き（つまり、被写体の位置の変化）に基づいて、断層画像を取得するためのパラメータが変更される。つまり、本実施形態では、術具７の動き（速さ）と、断層画像に対するユーザの要望との相関関係が考慮され、ユーザの要望に沿うように、術具７の動きに応じて、断層画像のパラメータが変更される。

従って、本実施形態では、術具７の動きに応じて、ユーザの要望に沿った断層画像を取得するための適切なパラメータを設定することができる。特に、本実施形態では、施術における進行状況（例えば、施術前、施術中、施術後等）において、断層画像におけるユーザの要望が変化した場合でも、この要望に応じてパラメータを適切に変化させることができる（術具７の動きと、要望との関係を利用しているため）。

また、本実施形態では、制御部１により、断層画像を取得するためのパラメータが自動的に変更されるので、ユーザによるパラメータの変更における負担を低減することができる。特に、本実施形態では、施術中においても、自動的にパラメータが変更されるので、施術中において、施術が遮られたり、ユーザの集中力、作業効率を低下させたり、施術時間の遅延を招いたりすることを防止することができる。

また、本実施形態では、術具７の動きの速さが所定の閾値以上である場合に、フレームレート優先モードが設定され、術具７の動きの速さが所定の閾値未満である場合に画質優先モードが設定される。これにより、本実施形態では、ユーザの要望に沿うように、２つのモードを適切に切り替えることができる。

＜第１実施形態変形例＞
以上の説明では、術具７の動きに応じて、断層画像を取得するためのパラメータが変更される場合について説明した。一方、正面画像内に写っている眼の状態の変化に応じて、断層画像を取得するためのパラメータが変更されてもよい。

上述のように、施術対象としての眼の状態の変化が速い場合、ユーザからすれば、高画質の断層画像から眼の状態を詳細に観察したいといった要望よりも、高頻度で更新される断層画像から眼の状態の変化を素早く察知したいといった要望の方が強いと考えられる。

また、上述のように、施術対象としての眼の状態の変化が遅い場合、ユーザからすれば、高頻度で更新される断層画像から眼の状態の変化を素早く察知したいといった要望よりも、高画質の断層画像から（施術前、施術中、施術後の）眼の状態を詳細に観察したいといった要望の方が強いと考えられる。

つまり、眼の状態の変化と、ユーザの要望との間にも相関関係があり、この関係が利用される。眼の状態の変化としては、例えば、角膜２０に創口３０が形成されるときの変化、水晶体２３における前嚢２５の切開における変化、水晶体２３の内部（核や皮質）が吸引、除去されるときの変化等が挙げられる。なお、眼の状態の変化は、施術前後、施術中を問わず、眼の状態に関する変化であれば、どのような変化であってもよい。

ここでの例では、眼の状態の変化と、断層画像に対するユーザの要望との相関関係が考慮され、ユーザの要望に沿うように、眼の状態の変化に応じて、断層画像のパラメータが変更される。具体的には、上述の画像認識処理により、正面画像内に写っている眼の状態の変化が検出され、この変化の速さが判定される。

そして、眼の状態の変化の速さが所定の閾値以上である場合に、フレームレート優先モードが設定され、眼の状態の変化の速さが所定の閾値未満である場合に画質優先モードが設定される。ここでの例においても、上述の第１実施形態における作用効果と同様の作用効果を奏する。

なお、術具７の動き（速さ）と、眼の状態の変化（速さ）との両方が用いられて、断層画像を取得するためのパラメータが変更されてもよい。

≪第２実施形態≫
次に、本技術の第２実施形態について説明する。図７は、第２実施形態に係る処理を示すフローチャートである。

図７に示すように、まず、制御部１は、正面画像取得部２を制御して、眼の正面画像を撮像し、撮像された眼の正面画像を正面画像取得部２から取得する（ステップ２０１）。

なお、制御部１は、正面画像が取得される度に、取得された正面画像を記憶部４に記憶させ、また、制御部１は、取得された正面画像を表示部５の画面上に表示させる。

次に、制御部１は、記憶部４に記憶された過去の正面画像と、取得された現在の正面画像とにおいて、画像認識処理（第１実施形態と同様）を実行し、正面画像内に写っている術具７の先端の動きを検出する（ステップ１０２）。

術具７の先端の動きを検出すると、制御部１は、術具７の先端の動きに基づいて、現在時刻ｔよりも所定時間ｔ１前（例えば、数秒〜数十秒程度）から、現在時刻ｔまでの間における術具７の先端の動きの軌跡を検出する（ステップ２０３）。

図８は、現在時刻ｔよりも所定時間ｔ１前から、現在時刻ｔまでの間における術具７の先端の動きの軌跡の一例を示す図である。制御部１は、ステップ２０３において、図８に示すような、術具７の先端の動きの軌跡を検出する。

術具７の先端の動きを検出すると、制御部１は、術具７の先端の動きの軌跡に基づいて、注目領域１１（第１の領域）を設定する（ステップ２０４）。図９及び図１０は、術具７の先端の動きに基づいて、注目領域１１を設定するときの様子を示す図である。図９には、矩形の注目領域１１を設定するときの様子が示されており、図１０には、楕円形の注目領域１１が設定されるときの様子が示されている。

注目領域１１の設定においては、まず、制御部１は、矩形や、楕円形などによって軌跡を囲む領域（破線の矩形、楕円参照）を設定する。そして、制御部１は、軌跡を囲んだ領域に対して、この領域の外側に余白の領域を設定することによって注目領域１１（実線の矩形、楕円参照）を設定する。余白の領域の大きさは、固定値が用いられてもよいし、軌跡を囲む領域の大きさ対する比率によって決定されてもよい。

なお、注目領域１１の形状は、矩形、楕円形に限られず、矩形以外の多角形等が用いられてもよく、この形状については特に限定されない。

ここで、注目領域１１は、計測領域１３内に設定される。上述のように、計測領域１３は、ＯＣＴによる計測が行われる平面方向の領域（スキャンが行われる平面方向の領域）である。

図１１は、計測領域１３内において、注目領域１１が設定されたときの様子を示す図である。図１１では、計測領域１３が一点鎖線の矩形で示されており、注目領域１１が実線の矩形で示されている。

図１１に示すように、第２実施形態では、断層画像を取得するために、平面方向（ＸＹ方向）に所定の領域を有する計測領域１３内においてスキャンが実行される。つまり、本実施形態では、平面方向におけるＸ軸及びＹ軸方向の２方向にスキャンが実行され、眼のボリュームデータ（３次元データ）が取得される。

なお、計測領域１３の形状は、楕円形や、矩形以外の多角形等が用いられてもよく、この形状については特に限定されない。ここで、以降の説明において、計測領域１３内において、注目領域１１以外の領域を非注目領域１２（第２の領域）と呼ぶ。

注目領域１１を設定すると、次に、制御部１は、設定された注目領域１１に基づいて、断層画像を取得するためのキャンパターンを生成する（ステップ２０５）。

図１２は、断層画像を取得するためのスキャンパターンを示す図である。図１２の上側には、計測領域１３及び注目領域１１を上方から見たときの様子が示されている。一方、図１２の下側には、断層画像を取得する際のスキャンパターンを側方から見たときの様子（図１２の上側の図におけるＡ−Ａ'間の断面）が示されている。

図１２に示すように、計測領域１３において、注目領域１１と、非注目領域１２とでは、平面方向（ＸＹ方向）におけるスキャン密度が異なっている。つまり、制御部１は、注目領域１１と、非注目領域１２との間で、スキャン密度（パラメータ）を変更している。具体的には、制御部１は、注目領域１１におけるスキャン密度が、非注目領域１２のスキャン密度よりも高くなるように、スキャンにおけるスキャン密度を変更している。

スキャンパターンを設定すると、次に、制御部１は、設定されたスキャンパターンに応じて、断層画像取得部３によって断層画像を取得させる（ステップ２０６）。なお、注目領域１１は、非注目領域１２よりもスキャン密度が高いので、断層画像において、注目領域１１の画質は、非注目領域１２の画質よりも高くなる。

ここで、術具７の先端における動きの軌跡が含まれる領域（注目領域１１）は、ユーザからすれば、高画質の断層画像から眼の状態を詳細に観察したいといった要望がある領域であると考えらえる。つまり、第２実施形態においても、第１実施形態と同様に、術具７の動きと、ユーザによる要望との相関関係が考慮され、ユーザの要望に沿うように、術具７の動きに応じて、注目領域１１と、非注目領域１２との間で、断層画像のパラメータ（スキャン密度）が適切に変更される。

従って、第２実施形態においても第１実施系形態と同様に、術具７の動きに応じて、ユーザの要望に沿った断層画像を取得するための適切なパラメータを設定することができる。特に、第２実施形態では、断層画像において、ユーザは、複雑な作業を必要とせずに、計測領域１３において眼の全体を観察しつつ、施術が行われている注目領域１１において眼の状態を詳細に観察することができる。

＜第２実施形態変形例＞
「注目領域１１と、非注目領域１２とでフレームレートを異ならせる例」
上述の説明では、注目領域１１の画質と、非注目領域１２の画質とを異ならせる場合について説明した。一方、注目領域１１のフレームレートと、非注目領域１２のフレームレートとが異なっていてもよい。

つまり、制御部１は、注目領域１１と、非注目領域１２との間で、断層画像におけるフレームレート（パラメータ）を変更してもよい。この場合、制御部１は、注目領域１１におけるフレームレートが、非注目領域１２におけるフレームレートよりも高くなるように、フレームレートを変更してもよい。

以下、一例を挙げて具体的に説明する。図１３は、注目領域１１のフレームレートと、非注目領域１２のフレームレートを異ならせる場合の処理を示すフローチャートである。

制御部１は、計測領域１３内において、注目領域１１を設定した後、図１３に示すように、注目領域１１に対応する断層画像を断層画像取得部３により取得する処理を、５回繰り返す（ステップ３０１〜ステップ３０５）。制御部１は、注目領域１１に対応する断層画像を取得する度に、断層画像において、注目領域１１に対応する箇所について断層画像を更新する。

制御部１は、上記処理を、５回繰り返した後、非注目領域１２に対応する断層画像を断層画像取得部３により取得する（ステップ３０６）。

このような処理により、非注目領域１２に対応する断層画像が１回更新される間に、注目領域１１に対応する断層画像が５回更新される。つまり、注目領域１１におけるフレームレートが、非注目領域１２におけるフレームレートの５倍になる。

非注目領域１２のフレームレートに対する注目領域１１のフレームレートの倍率は、５倍に限られず、適宜変更可能である。なお、ここでの例では、注目領域１１のスキャン密度と、非注目領域１２のスキャン密度は同じであるが、スキャン密度が異なっていてもよい。

この例においては、ユーザは、断層画像において、計測領域１３において眼の全体を観察しつつ、施術が行われている注目領域１１において眼の状態の変化を素早く察知することができる。

［眼の状態の変化に基づいて、注目領域１１を設定する例］
以上の説明では、術具７の動きに基づいて、注目領域１１を設定する場合について説明した。一方、眼の状態の変化に基づいて、注目領域１１が設定されてもよい。

つまり、正面画像において、眼の状態が変化している領域は、眼の状態の変化を素早く察知したいといった要望や、眼の状態を詳細に観察したいといった要望がある領域である考えられる。従って、この関係が利用され、眼の状態の変化に基づいて、注目領域１１が設定されてもよい。

図１４、図１５は、眼の状態の変化に基づいて、注目領域１１を設定するときの様子を示す図である。図１４には、白内障手術において、水晶体２３における前嚢２５の切開が行われているときの眼の状態の変化が示されている。図１５には、網膜硝子体手術において、硝子体における内境界膜が剥離されているときの眼の状態の変化が示されている。

この場合、制御部１は、記憶部４に記憶された過去の正面画像と、取得された現在の正面画像とにおいて、画像認識処理を実行し、正面画像内に写っている眼の状態の変化を検出する。そして、制御部１は、眼の状態が変化している部分を囲むように、注目領域１１を設定する。注目領域１１の設定においては、余白の領域が設定されてもよい。

例えば、図１４に示す例では、術具７によって、水晶体２３における前嚢２５の切開が行われているが、前嚢２５による膜が剥がされている部分が、眼の状態が変化している部分であると判断され、この部分を囲むように注目領域１１が設定される。

また、図１５に示す例では、術具７によって、硝子体における内境界膜が剥離されているが、内境界膜が剥離されている部分が、眼の状態が変化している部分であると判断され、この部分を囲むように注目領域１１が設定される。

図１４、図１５に示す例では、注目領域１１が矩形とされているが、注目領域１１の形状については特に限定されない。

注目領域１１が設定されると、制御部１は、注目領域１１と、非注目領域１２との間で、画質を異ならせるか、あるいは、フレームレートを異ならせる（あるいは、これらの両方）。

ここでの例では、ユーザは、断層画像において、膜の牽引状態や、膜と他の組織との接着状態等を容易に確認することができるので、無駄な力が掛かっていないかなどを容易に認識することができる。

≪第３実施形態≫
次に、本技術の第３実施形態について説明する。第３実施形態では、術具７の動きが予測され、予測結果に応じて、断層画像を取得するための断層面（パラメータ）が変更される。

図１６は、第３実施系形態に係る処理を示すフローチャートである。図１６に示すように、まず、制御部１は、正面画像取得部２を制御して、眼の正面画像を撮像し、撮像された眼の正面画像を正面画像取得部２から取得する（ステップ４０１）。

なお、制御部１は、正面画像が取得される度に、取得された正面画像を記憶部４に記憶させ、また、制御部１は、取得された正面画像を表示部５の画面上に表示させる。

次に、制御部１は、記憶部４に記憶された過去の正面画像と、取得された現在の正面画像とにおいて、画像認識処理（第１実施形態と同様）を実行し、正面画像内に写っている術具７の先端の動きを検出する（ステップ４０２）。

術具７の先端の動きを検出すると、制御部１は、術具７の先端の動きに基づいて、現在時刻から所定時間後（ｔ＋ｄｔ）の術具７の先端の位置を予測する（ステップ４０３）。

図１７は、現在時刻から所定時間後における術具７の先端の位置が予測されるときの様子を示す図である。図１７において、現在時刻ｔにおける術具７が実線で示され、過去の時刻（ｔ−ｄｔ）における術具７が破線で示され、現在時刻から所定時間後（ｔ＋ｄｔ）の術具７が一点鎖線で示されている。

また、現在時刻ｔにおける術具７の先端の位置がＰ（ｔ）によって示され、過去の時刻（ｔ−ｄｔ）における術具７の先端の位置がＰ（ｔ−ｄｔ）によって示され、現在時刻から所定時間後（ｔ＋ｄｔ）の術具７の先端の予測位置がＰ（ｔ＋ｄｔ）によって示されている。なお、ｄｔは、典型的には、フレームレートと同じ時間とされている。

図１７に示す例では、制御部１は、現在時刻における術具７の先端の位置Ｐ（ｔ）、並びに、過去の時刻における術具７の先端の位置Ｐ（ｔ−ｄｔ）（及びそれ以上過去の先端の位置）に基づいて、術具７の先端の動き（軌跡）を検出する（ステップ４０２参照）。そして、制御部１は、この動き基づいて、現在時刻から所定時間後（ｔ＋ｄｔ）の術具７の先端の位置Ｐ（ｔ＋ｄｔ）を予測する（ステップ４０３参照）。

制御部１は、現在時刻から所定時間後（ｔ＋ｄｔ）の術具７の先端の位置Ｐ（ｔ＋ｄｔ）を予測すると、予測結果に基づいて、断層画像を取得するための断層面を設定する。

図１８及び図１９は、予測結果に基づいて決定された断層面の一例を示す図である。図１８では、現在時刻における術具７の先端の位置Ｐ（ｔ）と、現在時刻から所定時間後（ｔ＋ｄｔ）における術具７の先端の予測位置Ｐ（ｔ＋ｄｔ）とを結ぶ直線が断層面として設定される場合の一例が示されている。

一方、図１９では、現在時刻から所定時間後（ｔ＋ｄｔ）における術具７の先端の予測位置Ｐ（ｔ＋ｄｔ）を含む直線が断層面として設定される場合の一例が示されている。なお、図１９では、術具７の長手方向に沿うように断層面が設定されているが、断層面は、術具７の先端の予測位置Ｐ（ｔ＋ｄｔ）を含む直線であればどのような直線であってもよい。

断層面を設定すると、制御部１は、設定された断層面に応じた断層画像を断層画像取得部３により取得させる（ステップ４０５）。

第３実施形態では、断層面を適切な位置に設定することができ、術具７の動きが速いような場合にも、断層画像において、術具７の先端を含ませることができる。

≪各種変形例≫
以上の説明では、手術顕微鏡装置１０における制御部１が上記した各種の処理を実行する場合について説明した。一方、上記した各種の処理は、ネットワーク上のサーバ装置（情報処理装置）の制御部１によって実行されてもよい。

本技術は以下の構成をとることもできる。
（１）施術対象である眼を撮像することによって得られる画像に写っている被写体の時系列変化を検出し、前記被写体の時系列変化に応じて、前記眼の断層画像を取得するためのパラメータを変更する制御部
を具備する情報処理装置。
（２） 上記（１）に記載の情報処理装置であって、
前記制御部は、前記被写体の時系列変化として、術具の位置の変化を検出し、前記術具の位置の変化に応じて、前記パラメータを変更する
情報処理装置。
（３） 上記（１）又は（２）に記載の情報処理装置であって、
前記制御部は、前記被写体の時系列変化として、前記眼の状態の変化を検出し、前記眼の状態の変化に応じて、前記パラメータを変更する
情報処理装置。
（４） 上記（１）〜（３）のうちいずれか１つに記載の情報処理装置であって、
前記制御部は、前記被写体の時系列変化に応じて、前記断層画像における画質よりもフレームレートが優先されるように前記パラメータが設定される第１のモードと、前記断層画像におけるフレームレートよりも画質が優先されるように前記パラメータが設定される第２のモードとを切り替える
情報処理装置。
（５） 上記（４）に記載の情報処理装置であって、
前記制御部は、前記被写体の時系列変化における変化の速さを検出し、前記変化の速さに応じて、前記第１のモードと、前記第２のモードとを切り替える
情報処理装置。
（６） 上記（５）に記載の情報処理装置であって、
前記制御部は、前記変化の速さが所定の閾値以上であるかどうかを判定し、前記変化の速さが所定の閾値以上である場合、前記第１のモードを設定し、前記変化の速さが所定の閾値未満である場合、前記第２のモードを設定する
情報処理装置。
（７） 上記（１）〜（６）のうちいずれか１つに記載の情報処理装置であって、
前記制御部は、前記断層画像を得るためのスキャンが行われる計測領域内において、前記被写体の時系列変化に応じて、第１の領域を設定し、前記第１の領域と、前記計測領域内における前記第１の領域以外の領域である第２の領域との間で、前記パラメータを変更する
情報処理装置。
（８） 上記（７）に記載の情報処理装置であって、
前記制御部は、前記第１の領域と、前記第２の領域との間で、前記パラメータとして、前記スキャンにおけるスキャン密度を変更する
情報処理装置。
（９） 上記（８）に記載の情報処理装置であって、
前記制御部は、前記第１の領域におけるスキャン密度が、前記第２の領域のスキャン密度よりも高くなるように、前記スキャンにおける前記スキャン密度を変更する
情報処理装置。
（１０） 上記（７）に記載の情報処理装置であって、
前記制御部は、前記第１の領域と、前記第２の領域との間で、前記パラメータとして、前記断層画像におけるフレームレートを変更する
情報処理装置。
（１１） 上記（９）に記載の情報処理装置であって、
前記制御部は、前記第１の領域におけるフレームレートが、前記第２の領域におけるフレームレートよりも高くなるように、前記断層画像におけるフレームレートを変更する
情報処理装置。
（１２） 上記（１）〜（１１）のうちいずれか１つに記載の情報処理装置であって、
前記制御部は、前記被写体の時系列変化に基づいて、前記パラメータとして、前記断層画像を取得するための断層面を変更する
情報処理装置。
（１３） 上記（１２）に記載の情報処理装置であって、
前記制御部は、前記被写体の時系列変化に応じて、現在時刻から所定時間後の前記被写体の変化を予測し、予測結果に応じて、前記断層面を変更する
情報処理装置。
（１４） 施術対象である眼を撮像することによって得られる画像に写っている被写体の時系列変化を検出し、前記被写体の時系列変化に応じて、前記眼の断層画像を取得するためのパラメータを変更する
情報処理方法。
（１５） 施術対象である眼を撮像することによって得られる画像に写っている被写体の時系列変化を検出するステップと、
前記被写体の時系列変化に応じて、前記眼の断層画像を取得するためのパラメータを変更するステップと
をコンピュータに実行させるプログラム。

１…制御部
２…正面画像取得部
３…断層画像取得部
７…術具
１０…手術顕微鏡装置
１１…注目領域
１２…非注目領域

Claims (15)

1. 施術対象である眼を撮像することによって得られる画像に写っている被写体の時系列変化を検出し、前記被写体の時系列変化に応じて、前記眼の断層画像を取得するためのパラメータを変更する制御部
   を具備する情報処理装置。
2. 請求項１に記載の情報処理装置であって、
   前記制御部は、前記被写体の時系列変化として、術具の位置の変化を検出し、前記術具の位置の変化に応じて、前記パラメータを変更する
   情報処理装置。
3. 請求項１に記載の情報処理装置であって、
   前記制御部は、前記被写体の時系列変化として、前記眼の状態の変化を検出し、前記眼の状態の変化に応じて、前記パラメータを変更する
   情報処理装置。
4. 請求項１に記載の情報処理装置であって、
   前記制御部は、前記被写体の時系列変化に応じて、前記断層画像における画質よりもフレームレートが優先されるように前記パラメータが設定される第１のモードと、前記断層画像におけるフレームレートよりも画質が優先されるように前記パラメータが設定される第２のモードとを切り替える
   情報処理装置。
5. 請求項４に記載の情報処理装置であって、
   前記制御部は、前記被写体の時系列変化における変化の速さを検出し、前記変化の速さに応じて、前記第１のモードと、前記第２のモードとを切り替える
   情報処理装置。
6. 請求項５に記載の情報処理装置であって、
   前記制御部は、前記変化の速さが所定の閾値以上であるかどうかを判定し、前記変化の速さが所定の閾値以上である場合、前記第１のモードを設定し、前記変化の速さが所定の閾値未満である場合、前記第２のモードを設定する
   情報処理装置。
7. 請求項１に記載の情報処理装置であって、
   前記制御部は、前記断層画像を得るためのスキャンが行われる計測領域内において、前記被写体の時系列変化に応じて、第１の領域を設定し、前記第１の領域と、前記計測領域内における前記第１の領域以外の領域である第２の領域との間で、前記パラメータを変更する
   情報処理装置。
8. 請求項７に記載の情報処理装置であって、
   前記制御部は、前記第１の領域と、前記第２の領域との間で、前記パラメータとして、前記スキャンにおけるスキャン密度を変更する
   情報処理装置。
9. 請求項８に記載の情報処理装置であって、
   前記制御部は、前記第１の領域におけるスキャン密度が、前記第２の領域のスキャン密度よりも高くなるように、前記スキャンにおける前記スキャン密度を変更する
   情報処理装置。
10. 請求項７に記載の情報処理装置であって、
    前記制御部は、前記第１の領域と、前記第２の領域との間で、前記パラメータとして、前記断層画像におけるフレームレートを変更する
    情報処理装置。
11. 請求項９に記載の情報処理装置であって、
    前記制御部は、前記第１の領域におけるフレームレートが、前記第２の領域におけるフレームレートよりも高くなるように、前記断層画像におけるフレームレートを変更する
    情報処理装置。
12. 請求項１に記載の情報処理装置であって、
    前記制御部は、前記被写体の時系列変化に基づいて、前記パラメータとして、前記断層画像を取得するための断層面を変更する
    情報処理装置。
13. 請求項１２に記載の情報処理装置であって、
    前記制御部は、前記被写体の時系列変化に応じて、現在時刻から所定時間後の前記被写体の変化を予測し、予測結果に応じて、前記断層面を変更する
    情報処理装置。
14. 施術対象である眼を撮像することによって得られる画像に写っている被写体の時系列変化を検出し、前記被写体の時系列変化に応じて、前記眼の断層画像を取得するためのパラメータを変更する
    情報処理方法。
15. 施術対象である眼を撮像することによって得られる画像に写っている被写体の時系列変化を検出するステップと、
    前記被写体の時系列変化に応じて、前記眼の断層画像を取得するためのパラメータを変更するステップと
    をコンピュータに実行させるプログラム。

Images