JP2021003201A - 手術顕微鏡システム、制御装置及び制御方法 - Google Patents

Abstract

【課題】大掛かりなシステムを必要とせずに鏡筒の位置及び向きの調整を可能とする手術顕微鏡システム、制御装置及び制御方法を提供すること。【解決手段】本技術に係る手術顕微鏡システムは、アームと、手術顕微鏡と、目標値設定部と、推定部と、制御部とを具備する。上記アームは、回転可能な関節を備える。上記手術顕微鏡は、顕微鏡光学系と、上記顕微鏡光学系による術野の顕微鏡拡大像である術野画像を撮像するカメラとを備え、上記アームに支持されている。上記目標値設定部は、上記手術顕微鏡の位置及び向きの目標値を設定する。上記推定部は、上記術野画像に基づいて上記手術顕微鏡の位置及び向きを推定し、推定値を生成する。上記制御部は、上記目標値と上記推定値の比較結果に応じて上記関節の回転に制限を加える。【選択図】図１

Description

本技術は、手術顕微鏡の操作に係る手術顕微鏡システム、制御装置及び制御方法に関する。

各種の手術で用いられる手術顕微鏡には、可動式のアームに顕微鏡が接続され、顕微鏡の位置及び向きを調整可能なものがある。顕微鏡の動かし方には、ユーザが顕微鏡を把持して直接に顕微鏡を移動させる「粗動」と、フットスイッチ等を用いてアームを駆動する「微動」が含まれる。

この粗動においては、粗動によって観察対象が顕微鏡視野（以下、術野）から外れやすいという問題がある。手術顕微鏡は高倍率であるため、少しの角度や位置のずれで術野が大きく変化してしまうためである。また、粗動は目分量で行うため、観察対象に対する角度や距離を正確に設定することが容易ではなく、再現性の高い観察が難しいという問題もある。

これらの問題は、特に様々な角度や位置からの観察を可能とするフリーアーム動作が可能な多軸のアームを備える手術顕微鏡になるほど、動かすためのパラメータが増えるため、より顕著となる。一方で、従来の手術顕微鏡の接眼部の代わりに、手術顕微鏡にカメラを設け、３Ｄ映像をモニタやヘッドマウントディスプレイ越しに観察しながら手術を行うＨＵＳ（Head up surgery)が広まりつつある。

ＨＵＳの利点の一つとして、手術顕微鏡の接眼部に影響されずに自由な位置や角度から観察が可能になることがある。したがって、ＨＵＳの普及と共に従来よりもフリーアーム動作が可能な手術顕微鏡が増え、上述のような粗動時の問題が生じる機会が増加すると予想される。

手術顕微鏡の位置や姿勢の調整に関しては、自動制御を可能とする技術も提案されている。例えば、特許文献１には、顕微鏡の位置を検出し、顕微鏡の位置を自動制御するシステムや広角で撮影し、撮影画像を電子ズームで切り出す機構を備えるシステムが開示されている。

特開２０１８−９９２９７号公報

特許文献１に記載のように、顕微鏡の位置を自動制御するシステムは、所望の術野を得ることが可能であるものの、ロボットアームのように顕微鏡を自動的に移動させる機構が必要であり、システムが大掛かりとなる。また、顕微鏡が動くことにより、周囲の人や物に衝突するおそれがあり、安全面や衛生面でのリスクが生じることになる。

以上のような事情に鑑み、本技術の目的は、大掛かりなシステムを必要とせずに手術顕微鏡の位置及び向きの調整を可能とする手術顕微鏡システム、制御装置及び制御方法を提供することにある。

上記目的を達成するため、本技術に係る手術顕微鏡システムは、アームと、手術顕微鏡と、目標値設定部と、推定部と、制御部とを具備する。
上記アームは、回転可能な関節を備える。
上記手術顕微鏡は、顕微鏡光学系と、上記顕微鏡光学系による術野の顕微鏡拡大像である術野画像を撮像するカメラとを備え、上記アームに支持されている。
上記目標値設定部は、上記手術顕微鏡の位置及び向きの目標値を設定する。
上記推定部は、上記術野画像に基づいて上記手術顕微鏡の位置及び向きを推定し、推定値を生成する。
上記制御部は、上記目標値と上記推定値の比較結果に応じて上記関節の回転に制限を加える。

上記制御部は、上記関節が上記目標値と上記推定値の差異を大きくする方向に回転する場合、上記関節の回転抵抗を大きくしてもよい。

上記アームは複数の関節について、一定量回転した場合の上記目標値と上記推定値の差異の変化量を算出し、上記変化量が大きい関節の回転抵抗を、上記変化量が小さい関節の回転抵抗より大きくしてもよい。

上記制御部は、上記目標値と上記推定値の差異が大きいほど、上記関節の回転抵抗を大きくしてもよい。

上記制御部は、上記関節が上記目標値と上記推定値の差異を大きくする方向に回転する場合、上記関節の回転を停止させてもよい。

上記制御部は、上記関節が上記目標値と上記推定値の差異を最小とする回転角度となっている場合に上記関節の回転を停止させてもよい。

上記手術顕微鏡システムは、上記目標値と上記推定値を比較し、上記目標値と上記推定値の適合度を算出する適合度算出部をさらに具備し、上記制御部は、上記適合度に応じて上記関節の回転に制限を加えてもよい。

上記制御部は、さらに、上記カメラの撮像可能範距離に応じて、上記関節の回転に制限を加えてもよい。

上記カメラで撮影された術野画像に基づいて基準対象を決定する基準対象決定部をさらに具備し、上記目標値設定部は、上記基準対象の位置に対する上記手術顕微鏡の位置及び向きを上記目標値として設定してもよい。

目標値設定部は、上記カメラで撮像された術野画像に含まれる撮像対象の位置に対する上記手術顕微鏡の位置及び向きを上記目標値として設定してもよい。

上記目標値設定部は、過去の上記手術顕微鏡の位置及び向きを上記目標値のプリセットとして保持し、ユーザによる選択によって上記プリセットから上記目標値を設定してもよい。

上記推定部は、上記カメラの内部パラメータを上記手術顕微鏡の位置及び向きの推定に利用し、
上記制御部は、上記顕微鏡光学系を、上記推定部が保持している上記内部パラメータが利用できる設定に変更してもよい。

上記目的を達成するため、本技術に係る制御装置は、顕微鏡光学系と、上記顕微鏡光学系による術野の顕微鏡拡大像である術野画像を撮像するカメラとを備え、回転可能な関節を備えるアームに支持された手術顕微鏡の制御装置である。
上記制御装置は、目標値設定部と、推定部と、制御部とを具備する。
上記目標値設定部は、上記手術顕微鏡の位置及び向きの目標値を設定する。
上記推定部は、上記術野画像に基づいて上記手術顕微鏡の位置及び向きを推定し、推定値を生成する。
上記制御部は、上記目標値と上記推定値の比較結果に応じて上記関節の回転に制限を加える。

上記目的を達成するため、本技術に係る制御方法は、顕微鏡光学系と、上記顕微鏡光学系による術野の顕微鏡拡大像である術野画像を撮像するカメラとを備え、回転可能な関節を備えるアームに支持された手術顕微鏡の制御方法であり、目記目標値設定部が、上記手術顕微鏡の位置及び向きの目標値を設定し、推定部が、上記術野画像に基づいて上記手術顕微鏡の位置及び向きを推定して推定値を生成し、制御部が、上記目標値と上記推定値の比較結果に応じて上記関節の回転に制限を加える。

本技術の実施形態に係る手術顕微鏡システムの構成を示すブロック図である。 上記手術顕微鏡システムが備える手術顕微鏡ユニットの模式図である。 上記手術顕微鏡ユニットの動作を示す模式図である。 上記手術顕微鏡システムの第１処理フローのフローチャートである。 上記手術顕微鏡ユニットが備えるアームの関節の動作を示す模式図である。 上記手術顕微鏡システムによるＵＩ表示処理を示す模式図である。 上記手術顕微鏡システムの第２処理フローのフローチャートである。 上記手術顕微鏡システムにおける、撮像対象に対するカメラの距離及び角度の推定方法を示す模式図である。 上記手術顕微鏡システムが備える制御装置のハードウェア構成を示すブロック図である。

本技術の実施形態に係る手術顕微鏡システムについて説明する。

［出術顕微鏡システムの構成］
図１は、本実施形態に係る手術顕微鏡システム１００の構成を示すブロック図である。同図に示すように手術顕微鏡システム１００は、手術顕微鏡ユニット１１０、制御装置１２０及び表示装置１３０を備える。

図２は、手術顕微鏡ユニット１１０の模式図である。同図に示すように、手術顕微鏡ユニット１１０は、基部１１１、アーム１１２、手術顕微鏡１１３、顕微鏡光学系１１４及びカメラ１１５を備える。

アーム１１２は、可動性を有し、手術顕微鏡１１３を支持する。アーム１１２は、図２に示すように、複数のアーム部１１７及び複数の関節１１８を備える。各関節１１８は隣接するアーム部１１７の間を接続し、回転可能である。各関節１１８が回転することにより、各アーム部１１７は隣接するアーム部１１７に対する角度が変化し、手術顕微鏡１１３を任意の位置及び向きとすることが可能である。

図３は、アーム１１２の動作を示す模式図であり、観察対象に対する手術顕微鏡１１３の位置及び向きの変化を示す。同図では観察対象の一例として眼球Ｅを示している。図３（ａ）及び（ｂ）に示すように手術顕微鏡１１３はアーム１１２の動作によって各方向に移動可能であり、各方向に手術顕微鏡１１３を傾けることができる。

なお、アーム１１２の具体的構成は図２及び図３に示すものに限定されず、少なくとも１つのアーム部１１７と少なくとも一つの関節１１８を備え、手術顕微鏡１１３の位置及び向きを変更することが可能なものであればよい。

手術顕微鏡１１３は、アーム１１２によって支持され、位置及び向きを変更することが可能に構成されている。手術顕微鏡１１３は、対物レンズ１１９及びその他の図示しない光学素子を含む顕微鏡光学系１１４を備える。

カメラ１１５は、手術顕微鏡１１３に設けられ、顕微鏡光学系１１４によって生成された顕微鏡拡大像を撮像する。カメラ１１５は、顕微鏡拡大像の静止画又は動画を撮像可能なものであればよい。なお、以下の説明において、顕微鏡光学系１１４を介してカメラ１１５によって撮像される視野範囲を「術野」とし、カメラ１１５によって術野を撮像した画像又は動画を「術野画像」とする。カメラ１１５は、術野画像を制御装置１２０に出力する。

手術顕微鏡ユニット１１０は粗動が可能に構成されている。粗動は、ユーザによるアーム１１２の動作であり、ユーザは手術顕微鏡１１３を把持し、任意の方向に動かすことができる。またアーム１１２は、粗動に加え、微動が可能なものであってもよい。微動は、アーム１１２自体によるアーム１１２の動作であり、各関節１１８を回転駆動させることにより、アーム１１２が動作する。ユーザはフットスイッチ等を用いて手術顕微鏡ユニット１１０に微動を指示することができる。

制御装置１２０は、図１に示すように基準対象決定部１２１、目標値設定部１２２、推定部１２３、適合度算出部１２４、制御部１２５及び画像処理部１２６を備える。制御装置１２０の各構成はソフトウェアとハードウェアの協働によって実現される機能的構成である。制御装置１２０は、手術顕微鏡ユニット１１０とは独立した情報処理装置であってもよく、手術顕微鏡ユニット１１０のＣＣＵ（camera control unit)に搭載されてもよい。また、制御装置１２０はネットワークを介して手術顕微鏡ユニット１１０と接続されていてもよい。

以下では、制御装置１２０の各構成について説明するが、詳細については後述する手術顕微鏡システム１００の動作と合わせて説明する。

基準対象決定部１２１は、カメラ１１５から術野画像を取得し、基準となる対象（以下、基準対象）を検出及び決定する。基準対象は術野画像に映っている術野全体でもよく、術野画像のうち一部領域、術具や生体組織（眼球等）であってもよい。基準対象決定部１２１は決定した基準対象を目標値設定部１２２に供給する。

目標値設定部１２２は、「目標値」を設定する。目標値は、ユーザがアーム１１２を粗動により動かす際の、粗動後の手術顕微鏡１１３の位置及び向きである。目標値設定部１２２は、ユーザからの指定やプリセットからの選択により目標値を設定することができる。目標値設定部１２２は設定した目標値を適合度算出部１２４に供給する。

推定部１２３は、術野画像に基づいて手術顕微鏡１１３の位置及び向きを推定する。以下、推定部１２３によって推定された手術顕微鏡１１３の位置及び向きを「推定値」とする。推定部１２３は、ＳＬＡＭ（Simultaneous Localization and Mapping）技術等を用いて推定値を生成することができる。推定部１２３は、生成した推定値を適合度算出部１２４に供給する。

適合度算出部１２４は、目標値設定部１２２から供給された目標値と、推定部１２３から供給された推定値を比較し、適合度を算出する。適合度算出部１２４は、パラメータ（距離及び向き）毎に適合度を算出することができる。適合度算出部１２４は、算出した適合度を制御部１２５及び画像処理部１２６に供給する。

制御部１２５は、目標値と推定値の比較結果に応じてアーム１１２の動作を制御し、具体的には、適合度算出部１２４から供給された適合度に基づいて、アーム１１２の動作を制御する。アーム制御の具体的内容については後述する。また、制御部１２５は、顕微鏡光学系１１４のズーム倍率や絞りの大きさ等を制御することが可能なものが好適である。

画像処理部１２６は、カメラ１１５によって撮像された術野画像から表示画像を生成し、生成した表示画像を表示装置１３０に表示させる。この際、画像処理部１２６は、適合度算出部１２４から供給された適合度に応じてＵＩ（user inter Interface)表示処理を実行してもよい。

表示装置１３０は、画像処理部１２６から出力された表示画像を表示する。表示装置１３０は一般的なディスプレイであってもよく、３Ｄ映像を表示可能な３次元ディスプレイやヘッドマウントディスプレイであってもよい。

［出術顕微鏡システムの動作］
手術顕微鏡システム１００の粗動動作について説明する。手術顕微鏡システム１００において手術顕微鏡ユニット１１０の粗動を用いるユースケースとしては、以下の２つのケースがある。

第１のケースは、術野中に基準対象が存在する状態から粗動を開始し、手術顕微鏡１１３の基準対象に対する角度及び距離の少なくとも一方を変更して観察したいケースである。例えば、図３（ａ）に示すように、眼科手術において眼球Ｅの鉛直方向に手術顕微鏡１１３を配置した状態で創口作成を行った後、図３（ｂ）に示すように手術顕微鏡１１３を傾け、眼球Ｅに対して斜め方向から隅角処理を行うケースが挙げられる。

第２のケースは、術野中に基準対象が存在しない状態から粗動を開始し、最初の術野を得るケースである。例えば、手術の開始時に最初の術野を得るためにセットアップを行うケースが挙げられる。

以下、２つケースのそれぞれについて、手術顕微鏡システム１００の処理フローを説明する。

（第１のケースについての処理フロー）
手術顕微鏡システム１００は、ユーザの指示を受けて第１のケースについての処理フロー（以下、第１処理フロー）を実行する。ユーザは、手術顕微鏡１１３に設けられた物理スイッチやタッチパネル、フットスイッチ又は音声コマンド等により、手術顕微鏡システム１００に処理フロー開始の指示を行うことができる。図４は、第１処理フローを示すフローチャートである。

基準対象決定部１２１は、ユーザの指示が入力されると、カメラ１１５から術野画像を取得する（Ｓｔ１１１）。基準対象決定部１２１は、静止画を取得してもよく、カメラ１１５は術中は撮像を継続しているため、直近のいくつかのフレームを常に記録しておき、その中から画像を抽出してもよい。この際、基準対象決定部１２１は、ユーザの指示が入力されたタイミングになるべく近く、ブレ、ボケ及び隠れの少ない画像を抽出すると好適である。

基準対象決定部１２１は、取得した術野画像から基準対象を決定する（Ｓｔ１１２）。基準対象は術野画像に映っている術野全体でもよく、術野画像のうち、術野中央部やフォーカスが合っている領域であってもよい。また、基準対象決定部１２１は、ユーザから指定された生体の部位や術具等の物体を基準対象としてもよい。ユーザは表示装置１３０によって術野画像を参照し、基準対象とする物体を指定することができる。

また、基準対象決定部１２１は、画像認識技術を用いて基準対象を決定してもよい。例えば、ユーザが「眼球」、「隅角鏡」といった物体の名称を入力すると、基準対象決定部１２１は画像認識技術によりこれらの物体を検出し、基準対象として決定することができる。

さらに、基準対象決定部１２１は、ユーザがポインティングした点を含む同一部位を領域検出により抽出することで基準対象を決定してもよい。例えば、ユーザが目の一部をポインティングすると、基準対象決定部１２１は眼球全体を基準対象として決定することができる。この際、基準対象決定部１２１は画像認識技術として機械学習系の技術や特徴点抽出に基づく技術を用いることができる。また基準対象決定部１２１は、術具等に付されたマーカを検出することにより、術具等を検出し、基準対象とすることも可能である。

目標値設定部１２２は、基準対象の位置（以下、基準位置）に対する粗動後の手術顕微鏡１１３の位置及び向きを「目標値」として設定する（Ｓｔ１１３）。目標値設定部１２２は、ユーザからの指定によって目標値を設定することができる。ユーザは、基準位置を原点とした観察対象との距離及び向きの形式で目標値を指定することができ、例えば、「基準位置に対して角度４５度、ＷＤ（Working Distance）＝１５０ｍｍ」のように目標値を指定する。ユーザは、距離及び向きの両方を目標値として指定してもよく、いずれか一方のみを指定してもよい。

また、目標値設定部１２２は、事前に目標値のプリセットを備えていてもよい。ユーザはプリセットされた値から目標値を選択することで、類似のアーム動作を繰り返す際に同じ設定をする手間を省くことができる。目標値設定部１２２は例えば、白内障手術や緑内障種々等、手術の種類に応じたプリセットを備えるものとすることができる。

さらに、ユーザが一度アーム１１２を動かした後に、動かす前の状態に戻したい場合がある。このため、目標値設定部１２２は、過去の手術顕微鏡１１３の位置及び向きをプリセットとして記憶しておき、ユーザが選択できるようにしてもよい。

続いて、ユーザがアーム１１２を動かし、粗動を開始する（Ｓｔ１１４）。なお、上述の各ステップ（Ｓｔ１１１〜Ｓｔ１１３）はユーザが粗動を実施している間に実行してもよい。

続いて、推定部１２３は、カメラ１１５から術野画像を取得する（Ｓｔ１１５）。推定部１２３は、粗動が実施されている間の術野画像を定期的に取得することができる。術野画像の取得タイミングは、毎フレームでもよく、一定間隔毎でもよい。

続いて、推定部１２３は、取得した術野画像から基準位置に対する手術顕微鏡１１３の位置及び向きを推定（Ｓｔ１１６）し、推定値を生成する。推定部１２３は、ＳＬＡＭ（Simultaneous Localization and Mapping）技術を用いて推定値を生成することができる。ＳＬＡＭでは環境マップの構築も行われるため、粗動中は基準対象が術野に映らなくてもよいという利点がある。

また、推定部１２３は、術野画像の特徴点の比較から推定値を生成することも可能である。ユーザは術野を見ながら粗動を行うことができるため、ある程度術野に基準対象が映るように制御することは可能である。このため、２つの画像取得ステップ（Ｓｔ１１１及びＳｔ１１５）で取得した術野画像において画像に含まれる特徴点の対応を取り、Perspective-n-Point Problem問題を解くことにより、推定値を生成することも可能である。

また、術野画像がステレオ画像である場合、推定部１２３は術野画像からDepth Mapを生成することで推定値を生成することが可能である。さらに推定部１２３は、ＴＯＦ（Time-of-Flight）技術を用いて推定値を生成してもよい。

続いて、適合度算出部１２４は、目標値設定ステップ（Ｓｔ１１３）で設定した目標値と、手術顕微鏡位置推定ステップ（Ｓｔ１１６）で生成された推定値を比較し、適合度を算出する（Ｓｔ１１７）。適合度算出部１２４は、パラメータ（距離及び向き）毎に適合度を算出することができ、例えば、「距離の適合度：９０％、角度の適合度：８５％」のように適合度を算出する。

続いて制御部１２５は、アーム１１２の動作を制御する（Ｓｔ１１８）。具体的には、制御部１２５は、適合度算出ステップ（Ｓｔ１１７）で算出された適合度に基づいて、関節１１８の回転に制限を加える。

制御部１２５は、関節１１８毎に、関節１１８が一定量回転すると適合度がどの程度変化するかを算出する。制御部１２５は、ユーザが手術顕微鏡１１３の位置又は向きの少なくとも一方を変更するために手術顕微鏡１１３を移動させると、各関節１１８が適合度を低下させる方向に回転するか、適合度を増大させる方向に回転するかを判別する。

図５は、関節１１８の回転の例を示す模式図である。同図において、目標値設定部１２２より設定された目標値を目標値Ｐとして示す。手術顕微鏡１１３の位置及び向きは推定部１２３によって推定され、推定値として制御部１２５に供給されている。

同図において関節１１８の回転方向Ｒａは、手術顕微鏡１１３が目標値Ｐに接近する回転方向であり、即ち適合度を増大させる回転方向である。一方、回転方向Ｒｂは手術顕微鏡１１３が目標値Ｐから離間する回転方向であり、即ち適合度を低下させる回転方向である。制御部１２５は各関節１１８について、適合度が増加する回転方向及び適合度が減少する回転方向を特定する。また、制御部１２５は、関節１１８の回転量に伴う適合度の変動量を算出する。図５ではＸ−Ｙ方向の手術顕微鏡１１３の移動を示すが、Ｚ方向の手術顕微鏡１１３の移動も同様である。

制御部１２５は、関節１１８が、目標値と推定値の差異を大きくする方向、即ち適合度を低下させる方向に回転する場合、関節１１８にブレーキをかけ、回転抵抗を増大させることができる。図５に示す例では回転方向Ｒｂの回転抵抗を回転方向Ｒａの回転抵抗より大きくする。また、手術顕微鏡１１３が目標値Ｐを通り過ぎると、回転方向Ｒａが適合度を低下させる回転方向となり、制御部１２５は回転方向Ｒａの回転抵抗を大きくする。

これにより、ユーザが適合度を低下させる方向に手術顕微鏡１１３を移動させようとすると、手術顕微鏡１１３を移動させるために要する力が大きくなるため、手術顕微鏡１１３を目標値に合わせやすくなる。

また、制御部１２５は、関節１１８毎に回転抵抗を変更してもよい。制御部１２５は、一定量回転した場合の目標値と推定値の差異の変化量が大きい、即ち適合度の低下量が大きい関節１１８の回転抵抗を、同変化量が小さい、即ち適同度の低下量が小さい関節１１８の回転抵抗より大きくすることができる。上記変化量が大きい関節１１８は手術顕微鏡１１３の移動に伴う回転量が多い関節１１８であり、上記変化量が小さい関節１１８は手術顕微鏡１１３の移動に伴う回転量が少ない関節１１８である。この場合もユーザが、適合度が低下させる方向に手術顕微鏡１１３を移動させようとすると、手術顕微鏡１１３を移動させるために要する力が大きくなるため、手術顕微鏡１１３を目標値に合わせやすくなる。

さらに制御部１２５は、目標値と推定値の差異が大きい、即ち適合度が小さいほど、関節１１８の回転抵抗を大きくしてもよい。これにより、手術顕微鏡１１３の位置が目標値から離間している場合は手術顕微鏡１１３が動かしやすく、手術顕微鏡１１３の位置が目標値に接近すると、手術顕微鏡１１３が動かしにくくなるため、手術顕微鏡１１３を目標値に合わせやすくなる。

また、制御部１２５は、関節１１８が目標値と推定値の差異を大きくする方向、即ち適合度を低下させる方向に回転する場合、関節１１８をロックし、回転を停止させてもよい。図５に示す例では、回転方向Ｒａへの回転は許容し、回転方向Ｒｂへの回転は停止させる。これによりユーザは、手術顕微鏡１１３を適合度が増大する方向にのみ移動させることが可能となるため、手術顕微鏡１１３を目標値に合わせやすくなる。

また、制御部１２５は、各関節１１８の回転角度毎に適合度を算出し、各関節１１８が、目標値と推定値の差異を最小とする回転角度、即ち適合度が最大となる回転角度となっているかを判定してもよい。制御部１２５は、目標値と推定値の差異を最小とする回転角度となっている関節１１８の回転を停止させることができる。これにより、目標値と推定値の差異が最小となる回転角度に合わせられた関節１１８から順次関節１１８の回転が固定され、手術顕微鏡１１３を目標値に合わせやすくなる。

また、制御部１２５は、カメラ１１５の撮像可能距離に応じて関節１１８の回転を制限してもよい。例えば、カメラ１１５がオートフォーカス機能を有している場合、オートフォーカスの範囲外に手術顕微鏡１１３が位置するとフォーカスが合った術野画像を撮像することができない。

このため、制御部１２５は、オートフォーカスが有効な範囲から手術顕微鏡１１３が外れようとするとその方向に手術顕微鏡１１３を移動させる関節１１８の回転をロックすることができる。オートフォーカス範囲の他にも制御部１２５は顕微鏡光学系１１４の光学特性等に応じてカメラ１１５の撮像可能範囲に応じて関節１１８の回転を制限することができる。

手術顕微鏡システム１００は、粗動が継続している場合（Ｓｔ１１９：Ｎｏ）、画像取得ステップ（Ｓｔ１１５）からアーム制御ステップ（Ｓｔ１１８）を繰り返し実行し、粗動が終了（Ｓｔ１１９：Ｙｅｓ）すると処理フローを終了する。

なお、アーム１１２の動作を制御するステップ（Ｓｔ１１８）ステップでは、アーム動作の制御に加え、適合度に応じたＵＩ（user inter Interface)表示処理を実行してもよい。

図６は、画像処理部１２６によって生成される表示画像の例として表示画像３０１を示す模式図である。同図に示すように画像処理部１２６は、術野画像３０２において眼球Ｅの周囲等に適合度を示すインジケータ３０３を配置し、表示画像３０１を生成することができる。インジケータ３０３は、適合度に応じて、色、形状又は透過性等を変化させ、ユーザに適合度を提示する。

また、画像処理部１２６は、インジケータ３０３と共に、又はインジケータ３０３に代えて、適合度を示す文字列を術野画像３０２に重畳させ、表示画像３０１を生成してもよい。また、画像処理部１２６は、適合度に変えて、手術顕微鏡１１３の角度や距離情報を表示してもよく、手術顕微鏡１１３の目標値とのずれ度合いを表示してもよい。この他にも画像処理部１２６は、目標値と推定値の違いを示す各種表示を術野画像３０２に重畳させ、表示画像３０１を生成することができる。

画像処理部１２６は、生成した表示画像を表示装置１３０に出力する。これにより、ユーザは、上述した関節１１８の回転制御に加え、表示画像において提示されている情報を参照して手術顕微鏡１１３を動かすことが可能であり、さらに手術顕微鏡１１３を所望の位置及び向きに合わせやすくなる。

上記処理フローにしたがって粗動を実行したのち、ユーザはフットスイッチ等を操作し、アーム１１２を動作（微動）させてもよい。この際、画像処理部１２６は、適合度に応じてＵＩ表示処理を実行し、生成した表示画像（図６参照）を表示装置１３０に表示させることができる。これにより、ユーザは微動においても適合度を参照して手術顕微鏡１１３の位置及び向きを微調整することが可能である。

＜第１処理フローの変形例＞
上記説明では、基準対象を決定するため、術野画像取得ステップ（Ｓｔ１１１）において術野画像を取得するとしたが、特定の術具を基準対象とする場合はその術具の情報を事前に取得しておくことで術野画像取得ステップ（Ｓｔ１１１）は不要となる。

例えば、基準対象を隅角鏡とする場合、手術顕微鏡位置推定ステップ（Ｓｔ１１６）において術野画像からレンズ縁の楕円を検出し、長軸と短軸を取得することで、手術顕微鏡１１３の位置及び向きを推定することが可能となる。

さらに、手術顕微鏡位置推定ステップ（Ｓｔ１１６）においては、性能を改善するために以下のようにしてもよい。推定部１２３が手術顕微鏡１１３の位置及び向きを推定するためにはカメラの内部パラメータが既知であることが求められる。カメラの内部パラメータは、カメラ座標原点の３次元座標を画像上の座標に変換する際の変換行列であり、術野画像からカメラ１１５の３次元位置を推定する際に必要となる。

しかしながら、ズーム倍率等の設定により内部パラメータは変化するため、任意の倍率で対応しようとすると無数の内部パラメータを保持するか、近い内部パラメータによって代替する必要がある。

そこで、制御部１２５は、粗動が実行される際、手術顕微鏡１１３のズーム倍率や絞り等を、推定部１２３が保持する内部パラメータが利用できる設定に変更するように顕微鏡光学系１１４を制御することができる。これにより、推定部１２３は既知の内部パラメータを用いて手術顕微鏡１１３の位置及び向きを推定することができ、推定精度を向上させることができる。

また、制御部１２５は、顕微鏡光学系の倍率が高すぎると、基準対象が術野外になりやすいため、ある程度広角となるように顕微鏡光学系１１４を制御してもよい。さらに、フォーカスが合わないぼけた画像では手術顕微鏡１１３の位置及び向きの推定が難しいため、制御部１２５はオートフォーカスが動作するようにしたり、被写界深度が広くなるように絞りを絞ったり等の粗動用モードに設定を切り替えるように顕微鏡光学系１１４を制御してもよい。

（第２のケースについての処理フロー）
第２のケースについての処理フロー（以下、第２処理フロー）では、第１処理フローに対して最初の術野画像取得ステップ及び基準対象決定ステップがない点が異なる。

第２処理フローにおいても手術顕微鏡システム１００は、ユーザの指示を受けて処理フローを実行する。ユーザは、手術顕微鏡１１３に設けられた物理スイッチやタッチパネル、フットスイッチ又は音声コマンド等により、手術顕微鏡システム１００に処理フロー開始の指示を行うことができる。図７は、第２処理フローを示すフローチャートである。

目標値設定部１２２は、粗動後の手術顕微鏡１１３の位置及び向きを「目標値」として設定する（Ｓｔ１２１）。目標値設定部１２２は、ユーザからの指定によって目標値を設定することができる。第２処理フローでは、座標系を定める基準対象が存在しないため、ユーザは粗動中にカメラ１１５に映る対象（以下、撮像対象）との距離や手術顕微鏡１１３の傾け角度等の形式で目標値を指定することができる。傾け角度は「撮像対象の表面を平面で近似した場合の鉛直方向に対する傾け度合い」とすることができる。ユーザは例えば、「眼球に対して４５度、ＷＤ（Working Distance）＝１５０ｍｍ」のように目標値を指定することができる。ユーザは、距離及び向きの両方を目標値として指定してもよく、いずれか一方のみを指定してもよい。

また、目標値設定部１２２は、事前に目標値のプリセットを備えていてもよい。ユーザはプリセットされた値から目標値を選択することで、類似のアーム動作を繰り返す際に同じ設定をする手間を省くことができる。目標値設定部１２２は例えば、白内障手術や緑内障種々等、手術の種類に応じた目標値を備えるものとすることができ、例えば白内障用のプリセット値は「眼球に対し鉛直、ＷＤ＝２００ｍｍ」、緑内障用のプリセット値は「眼球に対し４５度、ＷＤ＝２００ｍｍ」等とすることができる。

さらに、ユーザが一度アーム１１２を動かした後に、動かす前の状態に戻したい場合がある。このため、目標値設定部１２２は、過去の手術顕微鏡１１３の位置や向きをプリセットとして記憶しておき、ユーザが選択できるようにしてもよい。

続いて、ユーザがアーム１１２を動かし、粗動を開始する（Ｓｔ１２２）。なお、目標値設定ステップ（Ｓｔ１２１）はユーザが粗動を実施している間に実行してもよい。

続いて、推定部１２３は、カメラ１１５から術野画像を取得する（Ｓｔ１２３）。推定部１２３は、粗動が実施されている間の術野画像を定期的に取得することができる。術野画像の取得タイミングは、毎フレームでもよく、一定間隔毎でもよい。

続いて、推定部１２３は、取得した術野画像から手術顕微鏡１１３の位置及び向きを推定（Ｓｔ１２４）し、推定値を生成する。第２処理フローでは、基準対象を必要としない推定方法のみが利用可能である。具体的には推定部１２３は、ＳＬＡＭ（Simultaneous Localization and Mapping）技術を用いて推定値を生成することができる。ＳＬＡＭでは環境マップの構築も行われるため、撮像対象との距離に加え、撮像対象の表面形状も取得することができる。

また、術野画像がステレオ画像である場合、推定部１２３は術野画像からDepth Mapを生成することで撮像対象に対する距離及び表面形状を求めることも可能である。図８は手術顕微鏡１１３の撮像対象に対する傾き及び距離を示す模式図である。同図に示すように撮像対象（ここでは例として眼球Ｅ）の表面形状が求められると、表面形状に対して平面３０４を当てはめ、平面３０４に対する垂直方向３０５を求めることで、手術顕微鏡１１３の傾きθ及び距離Ｌを算出することができる。

続いて、適合度算出部１２４は、目標値設定ステップ（Ｓｔ１２１）で設定した目標値と、手術顕微鏡位置推定ステップ（Ｓｔ１２４）で生成された推定値を比較し、適合度を算出する（Ｓｔ１２５）。適合度算出部１２４は、第１処理フローと同様にパラメータ（距離及び向き）毎に適合度を算出することができる。

続いて制御部１２５は、アーム１１２の動作を制御する（Ｓｔ１２６）。具体的には、制御部１２５は、適合度算出ステップ（Ｓｔ１２５）で算出された適合度に基づいて、第１処理フローと同様に関節１１８の回転に制限を加える。さらに、制御部１２５は、カメラ１１５の撮像可能距離に応じて関節１１８の回転を制限してもよい。

手術顕微鏡システム１００は、粗動が継続している場合（Ｓｔ１２７：Ｎｏ）、画像取得ステップ（Ｓｔ１２３）からアーム制御ステップ（Ｓｔ１２６）を繰り返し実行し、粗動が終了（Ｓｔ１２７：Ｙｅｓ）すると処理フローを終了する。

なお、アーム１１２の動作を制御するステップ（Ｓｔ１２６）ステップでは第１処理フローと同様に、関節１１８の回転の制限に加え、画像処理部１２６が適合度に応じたＵＩ表示処理を実行し（図６参照）、ユーザの粗動を補助してもよい。

上記処理フローにしたがって粗動を実行したのち、ユーザはフットスイッチ等を操作し、アーム１１２を動作（微動）させてもよい。この際にも、画像処理部１２６は、適合度に応じたＵＩ表示処理を実行し（図６参照）、ユーザの微動を補助することが可能である。

＜第２処理フローの変形例＞
第２処理フローにおいても、制御部１２５は、粗動が実行される際、手術顕微鏡１１３のズーム倍率や絞り等を推定部１２３が保持する内部パラメータが利用できる設定に変更するように顕微鏡光学系１１４を制御することができる。これにより、推定部１２３は既知の内部パラメータを用いて手術顕微鏡１１３の位置及び向きを推定することができ、推定精度を向上させることができる。

また、制御部１２５は、顕微鏡光学系の倍率が高すぎると、基準対象が術野外になりやすいため、ある程度広角となるように顕微鏡光学系１１４を制御してもよい。さらに、フォーカスが合わないぼけた画像では手術顕微鏡１１３の位置及び向きの推定が難しいため、制御部１２５はオートフォーカスが動作するようにしたり、被写界深度が広くなるように絞りを絞ったり等の粗動用モードに設定を切り替えるように顕微鏡光学系１１４を制御してもよい。

［出術顕微鏡システムによる効果］
以上のように手術顕微鏡システム１００では、目標値と推定値の適合度に応じて関節１１８の回転が制限され、手術顕微鏡１１３を粗動によって目標とする位置及び向きに合わせやすくすることが可能である。

これによりユーザは所望の距離や角度から観察対象の観察が容易となる。また、手術顕微鏡システム１００に目標値を記憶させることにより、再現性の高いセッティングとすることが可能となる。さらに、手術顕微鏡１１３がカメラ１１５のオートフォーカス範囲外等の撮像に不適当な位置に移動することを防止できる。

さらに、手術顕微鏡１１３はユーザが動かすため、手術顕微鏡システム１００はロボットアーム等による位置制御が不要であり、大掛かりなシステムが必要ないため、コストの抑制も可能である。

［ハードウェア構成］
制御装置１２０ハードウェア構成について説明する。図９は制御装置１２０のハードウェア構成を示す模式図である。

同図に示すように、制御装置１２０は、ＣＰＵ(Central Processing Unit)１００１を内蔵している。ＣＰＵ１００１にはバス１００４を介して、入出力インタフェース１００５が接続されている。バス１００４には、ＲＯＭ(Read Only Memory)１００２およびＲＡＭ(Random Access Memory)１００３が接続されている。

入出力インタフェース１００５には、ユーザが操作コマンドを入力するキーボード、マウスなどの入力デバイスよりなる入力部１００６、処理操作画面や処理結果の画像を表示デバイスに出力する出力部１００７、プログラムや各種データを格納するハードディスクドライブなどよりなる記憶部１００８、ＬＡＮ（Local Area Network）アダプタなどよりなり、インターネットに代表されるネットワークを介した通信処理を実行する通信部１００９が接続されている。また、磁気ディスク、光ディスク、光磁気ディスク、もしくは半導体メモリなどのリムーバブル記憶媒体１０１１に対してデータを読み書きするドライブ１０１０が接続されている。

ＣＰＵ１００１は、ＲＯＭ１００２に記憶されているプログラム、または磁気ディスク、光ディスク、光磁気ディスク、もしくは半導体メモリ等のリムーバブル記憶媒体１０１１ら読み出されて記憶部１００８にインストールされ、記憶部１００８からＲＡＭ１００３にロードされたプログラムに従って各種の処理を実行する。ＲＡＭ１００３にはまた、ＣＰＵ１００１が各種の処理を実行する上において必要なデータなども適宜記憶される。なお、ＣＰＵ１００１はＧＰＵ（Graphics Processing Unit）の機能を有するものであってもよく、制御装置１２０はＣＰＵ１００１とは別にＧＰＵを備えるものであってもよい。

以上のように構成される制御装置１２０では、ＣＰＵ１００１が、例えば、記憶部１００８に記憶されているプログラムを、入出力インタフェース１００５及びバス１００４を介して、ＲＡＭ１００３にロードして実行することにより、上述した一連の処理が行われる。

制御装置１２０が実行するプログラムは、例えば、パッケージメディア等としてのリムーバブル記憶媒体１０１１に記録して提供することができる。また、プログラムは、ローカルエリアネットワーク、インターネット、デジタル衛星放送といった、有線または無線の伝送媒体を介して提供することができる。

制御装置１２０では、プログラムは、リムーバブル記憶媒体１０１１をドライブ１０１０に装着することにより、入出力インタフェース１００５を介して、記憶部１００８にインストールすることができる。また、プログラムは、有線または無線の伝送媒体を介して、通信部１００９で受信し、記憶部１００８にインストールすることができる。その他、プログラムは、ＲＯＭ１００２や記憶部１００８に、あらかじめインストールしておくことができる。

なお、制御装置１２０が実行するプログラムは、本開示で説明する順序に沿って時系列に処理が行われるプログラムであっても良いし、並列に、あるいは呼び出しが行われたとき等の必要なタイミングで処理が行われるプログラムであってもよい。

また、制御装置１２０のハードウェア構成はすべてが一つの装置に搭載されていなくてもよく、複数の装置によって制御装置１２０が構成されていてもよい。また制御装置１２０のハードウェア構成の一部又はネットワークを介して接続されている複数の装置に搭載されていてもよい。

以上説明した本技術に係る特徴部分のうち、少なくとも２つの特徴部分を組み合わせることも可能である。すなわち各実施形態で説明した種々の特徴部分は、各実施形態の区別なく、任意に組み合わされてもよい。また上記で記載した種々の効果は、あくまで例示であって限定されるものではなく、また他の効果が発揮されてもよい。

なお、本技術は以下のような構成もとることができる。
（１）
回転可能な関節を備えるアームと、
顕微鏡光学系と、上記顕微鏡光学系による術野の顕微鏡拡大像である術野画像を撮像するカメラとを備え、上記アームに支持された手術顕微鏡と、
上記手術顕微鏡の位置及び向きの目標値を設定する目標値設定部と、
上記術野画像に基づいて上記手術顕微鏡の位置及び向きを推定し、推定値を生成する推定部と、
上記目標値と上記推定値の比較結果に応じて上記関節の回転に制限を加える制御部と
を具備する手術顕微鏡システム。
（２）
上記（１）に記載の手術顕微鏡システムであって、
上記制御部は、上記関節が上記目標値と上記推定値の差異を大きくする方向に回転する場合、上記関節の回転抵抗を大きくする
手術顕微鏡システム。
（３）
上記（２）に記載の手術顕微鏡システムであって、
上記アームは複数の関節を備え、
上記制御部は、上記複数の関節について、一定量回転した場合の上記目標値と上記推定値の差異の変化量を算出し、上記変化量が大きい関節の回転抵抗を、上記変化量が小さい関節の回転抵抗より大きくする
手術顕微鏡システム。
（４）
上記（１）から（３）のうちいずれか一つに記載の手術顕微鏡システムであって、
上記制御部は、上記目標値と上記推定値の差異が大きいほど、上記関節の回転抵抗を大きくする
手術顕微鏡システム。
（５）
上記（１）から（４）のうちいずれか一つに記載の手術顕微鏡システムであって、
上記制御部は、上記関節が上記目標値と上記推定値の差異を大きくする場合、上記関節の回転を停止させる
手術顕微鏡システム。
（６）
上記（５）に記載の手術顕微鏡システムであって、
上記制御部は、上記関節が上記目標値と上記推定値の差異を最小とする回転角度となっている場合に上記関節の回転を停止させる
手術顕微鏡システム。
（７）
上記（１）から（６）のうちいずれか一つに記載の顕微鏡システムであって、
上記目標値と上記推定値を比較し、上記目標値と上記推定値の適合度を算出する適合度算出部をさらに具備し、
上記制御部は、上記適合度に応じて上記関節の回転に制限を加える
手術顕微鏡システム。
（８）
上記（１）から（７）のうちいずれか一つに記載の手術顕微鏡システムであって、
上記制御部は、さらに、上記カメラの撮像可能距離に応じて、上記関節の回転に制限を加える
手術顕微鏡システム。
（９）
上記（１）から（８）のうちいずれか一つに記載の手術顕微鏡システムであって、
上記カメラで撮影された術野画像に基づいて基準対象を決定する基準対象決定部をさらに具備し、
上記目標値設定部は、上記基準対象の位置に対する上記手術顕微鏡の位置及び向きを上記目標値として設定する
手術顕微鏡システム。
（１０）
上記（１）から（８）のうちいずれか一つに記載の手術顕微鏡システムであって、
上記目標値設定部は、上記カメラで撮像された術野画像に含まれる撮像対象の位置に対する上記手術顕微鏡の位置及び向きを上記目標値として設定する
手術顕微鏡システム。
（１１）
上記（１）から（１０）のうちいずれか一つに記載の手術顕微鏡システムであって、
上記目標値設定部は、過去の上記手術顕微鏡の位置及び向きを上記目標値のプリセットとして保持し、ユーザによる選択によって上記プリセットから上記目標値を設定する
手術顕微鏡システム。
（１２）
上記（１）から（１１）のうちいずれか一つに記載の手術顕微鏡システムであって、
請求項１に記載の手術顕微鏡システムであって、
上記推定部は、上記カメラの内部パラメータを上記手術顕微鏡の位置及び向きの推定に利用し、
上記制御部は、上記顕微鏡光学系を、上記推定部が保持している上記内部パラメータが利用できる設定に変更する
手術顕微鏡システム。
（１３）
顕微鏡光学系と、上記顕微鏡光学系による術野の顕微鏡拡大像である術野画像を撮像するカメラとを備え、回転可能な関節を備えるアームに支持された手術顕微鏡の制御装置であって、
上記手術顕微鏡の位置及び向きの目標値を設定する目標値設定部と、
上記術野画像に基づいて上記手術顕微鏡の位置及び向きを推定し、推定値を生成する推定部と、
上記目標値と上記推定値の比較結果に応じて上記関節の回転に制限を加える制御部と
を具備する制御装置。
（１４）
顕微鏡光学系と、上記顕微鏡光学系による術野の顕微鏡拡大像である術野画像を撮像するカメラとを備え、回転可能な関節を備えるアームに支持された手術顕微鏡の制御方法であって、
目標値設定部が、上記手術顕微鏡の位置及び向きの目標値を設定し、
推定部が、上記術野画像に基づいて上記手術顕微鏡の位置及び向きを推定して推定値を生成し、
制御部が、上記目標値と上記推定値の比較結果に応じて上記関節の回転に制限を加える
制御方法。

１００…手術顕微鏡システム
１１０…手術顕微鏡ユニット
１１２…アーム
１１３…手術顕微鏡
１１４…顕微鏡光学系
１１５…カメラ
１１７…アーム部
１１８…関節
１２０…制御装置
１２１…基準対象決定部
１２２…目標値設定部
１２３…推定部
１２４…適合度算出部
１２５…制御部
１２６…画像処理部
１３０…表示装置

Claims (14)

1. 回転可能な関節を備えるアームと、
   顕微鏡光学系と、前記顕微鏡光学系による術野の顕微鏡拡大像である術野画像を撮像するカメラとを備え、前記アームに支持された手術顕微鏡と、
   前記手術顕微鏡の位置及び向きの目標値を設定する目標値設定部と、
   前記術野画像に基づいて前記手術顕微鏡の位置及び向きを推定し、推定値を生成する推定部と、
   前記目標値と前記推定値の比較結果に応じて前記関節の回転に制限を加える制御部と
   を具備する手術顕微鏡システム。
2. 請求項１に記載の手術顕微鏡システムであって、
   前記制御部は、前記関節が前記目標値と前記推定値の差異を大きくする方向に回転する場合、前記関節の回転抵抗を大きくする
   手術顕微鏡システム。
3. 請求項２に記載の手術顕微鏡システムであって、
   前記アームは複数の関節を備え、
   前記制御部は、前記複数の関節について、一定量回転した場合の前記目標値と前記推定値の差異の変化量を算出し、前記変化量が大きい関節の回転抵抗を、前記変化量が小さい関節の回転抵抗より大きくする
   手術顕微鏡システム。
4. 請求項１に記載の手術顕微鏡システムであって、
   前記制御部は、前記目標値と前記推定値の差異が大きいほど、前記関節の回転抵抗を大きくする
   手術顕微鏡システム。
5. 請求項１に記載の手術顕微鏡システムであって、
   前記制御部は、前記関節が前記目標値と前記推定値の差異を大きくする方向に回転する場合、前記関節の回転を停止させる
   手術顕微鏡システム。
6. 請求項５に記載の手術顕微鏡システムであって、
   前記制御部は、前記関節が前記目標値と前記推定値の差異を最小とする回転角度となっている場合に前記関節の回転を停止させる
   手術顕微鏡システム。
7. 請求項１に記載の手術顕微鏡システムであって、
   前記目標値と前記推定値を比較し、前記目標値と前記推定値の適合度を算出する適合度算出部をさらに具備し、
   前記制御部は、前記適合度に応じて前記関節の回転に制限を加える
   手術顕微鏡システム。
8. 請求項１に記載の手術顕微鏡システムであって、
   前記制御部は、さらに、前記カメラの撮像可能距離に応じて、前記関節の回転に制限を加える
   手術顕微鏡システム。
9. 請求項１に記載の手術顕微鏡システムであって、
   前記カメラで撮影された術野画像に基づいて基準対象を決定する基準対象決定部をさらに具備し、
   前記目標値設定部は、前記基準対象の位置に対する前記手術顕微鏡の位置及び向きを前記目標値として設定する
   手術顕微鏡システム。
10. 請求項１に記載の手術顕微鏡システムであって、
    前記目標値設定部は、前記カメラで撮像された術野画像に含まれる撮像対象の位置に対する前記手術顕微鏡の位置及び向きを前記目標値として設定する
    手術顕微鏡システム。
11. 請求項１に記載の手術顕微鏡システムであって、
    前記目標値設定部は、過去の前記手術顕微鏡の位置及び向きを前記目標値のプリセットとして保持し、ユーザによる選択によって前記プリセットから前記目標値を設定する
    手術顕微鏡システム。
12. 請求項１に記載の手術顕微鏡システムであって、
    前記推定部は、前記カメラの内部パラメータを前記手術顕微鏡の位置及び向きの推定に利用し、
    前記制御部は、前記顕微鏡光学系を、前記推定部が保持している前記内部パラメータが利用できる設定に変更する
    手術顕微鏡システム。
13. 顕微鏡光学系と、前記顕微鏡光学系による術野の顕微鏡拡大像である術野画像を撮像するカメラとを備え、回転可能な関節を備えるアームに支持された手術顕微鏡の制御装置であって、
    前記手術顕微鏡の位置及び向きの目標値を設定する目標値設定部と、
    前記術野画像に基づいて前記手術顕微鏡の位置及び向きを推定し、推定値を生成する推定部と、
    前記目標値と前記推定値の比較結果に応じて前記関節の回転に制限を加える制御部と
    を具備する制御装置。
14. 顕微鏡光学系と、前記顕微鏡光学系による術野の顕微鏡拡大像である術野画像を撮像するカメラとを備え、回転可能な関節を備えるアームに支持された手術顕微鏡の制御方法であって、
    目標値設定部が、前記手術顕微鏡の位置及び向きの目標値を設定し、
    推定部が、前記術野画像に基づいて前記手術顕微鏡の位置及び向きを推定して推定値を生成し、
    制御部が、前記目標値と前記推定値の比較結果に応じて前記関節の回転に制限を加える
    制御方法。

Images