JP7480783B2 - 内視鏡システム、制御装置、および制御方法 - Google Patents

Description

本開示は、内視鏡システム、制御装置、および制御方法に関し、特に、より良好な観察を行うことができるようにした内視鏡システム、制御装置、および制御方法に関する。

従来、低侵襲な手術として内視鏡を用いる手術が行われている。例えば、内視鏡による手術では、小さな切開部から体内に内視鏡を挿入して、病変部や処置すべき患部などを観察することができる。このとき、内視鏡により視認することが可能な範囲は、内視鏡の画角によって制限されるため、例えば、内視鏡の画角が６０°～９０°程度であるとき、狭い視野範囲で手術を行うことになる。これに対し、手術が安全に進められるようにするためには、限られた視野範囲の映像だけでなく、広範囲にわたって体内を観察可能とすることが望ましい。

そこで、特許文献１に開示されているように、超広角レンズを内視鏡に装着することによって、スコピストの操作がなくても視野範囲を広げることが試みられている超広角内視鏡が提案されている。

特許第３０７００２２号公報

ところで、従来、内視鏡を操作するスコピストが、内視鏡の位置や角度を変更することによって視野方向を調整し、体内を広範囲に観察できるようにすることで、手術の安全性が高められている。しかしながら、良好な観察を行うためには、操作の工夫や経験による習熟など、スコピストの技能に依存することが多かった。

また、上述した特許文献１のように超広角レンズを内視鏡に装着した構成では、レンズ中心から離れるほど視野が歪むことになる。そのため、通常は、広範囲の視野の中から表示の中心点を指示し、その中心点を中心とした一定範囲に対して歪み補正処理を施した画像が表示される。しかしながら、この場合、スコピストが、ポインティングデバイスを用いて表示の中心点を指示する操作を行う必要があり、片手で内視鏡を保持しつつ、同時にポインティングデバイスを操作することになり、良好な観察を行うためには、より高い技能が必要となる。または、スコピストとは別の操作者がポインティングデバイスを操作する場合には、手術要員が増加するだけでなく、良好な観察を行うためには、スコピストおよび操作者の間で高度な連携が必要となる。

本開示は、このような状況に鑑みてなされたものであり、より良好な観察を行うことができるようにするものである。

本開示の一側面の内視鏡システムおよび制御装置は、硬性鏡を介して高画角で術野を撮像する撮像素子を有するカメラヘッドに対して前記硬性鏡を接続可能に構成される内視鏡から供給される、前記硬性鏡の全視野範囲が撮像された全体画像の中心点から外れた位置を中心にして設定される切り出し領域に従って前記全体画像の一部分を切り出して、前記硬性鏡の光軸に対して斜め方向を見る斜視画像を生成する切り出し処理部と、前記カメラヘッドに対する相対的な前記硬性鏡の光軸を中心とした回転方向の回転操作に従って、その回転方向へ前記斜視画像の移動を指示する指示コマンドを取得する取得部と、前記指示コマンドに従った方向へ、前記全体画像の中心点を基準として前記切り出し領域を内接する円の内周に沿って前記切り出し領域を移動させる領域設定部とを備える。

本開示の一側面の制御方法は、内視鏡システムの制御装置が、硬性鏡を介して高画角で術野を撮像する撮像素子を有するカメラヘッドに対して前記硬性鏡を接続可能に構成される内視鏡から供給される、前記硬性鏡の全視野範囲が撮像された全体画像の中心点から外れた位置を中心にして設定される切り出し領域に従って前記全体画像の一部分を切り出して、前記硬性鏡の光軸に対して斜め方向を見る斜視画像を生成することと、前記カメラヘッドに対する相対的な前記硬性鏡の光軸を中心とした回転方向の回転操作に従って、その回転方向へ前記斜視画像の移動を指示する指示コマンドを取得することと、前記指示コマンドに従った方向へ、前記全体画像の中心点を基準として前記切り出し領域を内接する円の内周に沿って前記切り出し領域を移動させることとを含む。

本開示の一側面においては、硬性鏡を介して高画角で術野を撮像する撮像素子を有するカメラヘッドに対して硬性鏡を接続可能に構成される内視鏡から供給される、硬性鏡の全視野範囲が撮像された全体画像の中心点から外れた位置を中心にして設定される切り出し領域に従って全体画像の一部分が切り出されて、硬性鏡の光軸に対して斜め方向を見る斜視画像が生成され、カメラヘッドに対する相対的な硬性鏡の光軸を中心とした回転方向の回転操作に従って、その回転方向へ斜視画像の移動を指示する指示コマンドが取得され、その指示コマンドに従った方向へ、全体画像の中心点を基準として前記切り出し領域を内接する円の内周に沿って切り出し領域が移動される。

本技術を適用した内視鏡システムの一実施の形態の構成例を示すブロック図である。 全体画像および直視画像の関係について説明する図である。 全体画像および斜視画像の関係について説明する図である。 回転操作が行われたときの斜視画像の表示について説明する図である。 表示画面の一例を示す図である。 制御装置の構成例を示すブロック図である。 制御処理の一例を説明するフローチャートである。 内視鏡の第２の構成例を示す図である。 第１のバリエーションの表示画面を示す図である。 第２のバリエーションの表示画面を示す図である。 第３のバリエーションの表示画面を示す図である。 第４のバリエーションの表示画面を示す図である。 第５のバリエーションの表示画面を示す図である。 回転操作中に斜視画像の表示内容の更新を停止する表示方法を説明する図である。 回転操作に応じて斜視画像の向きが回転するように移動する表示方法を説明する図である。 斜視画像の表示内容の上下方向を反転させる表示方法を説明する図である。 本技術を適用したコンピュータの一実施の形態の構成例を示すブロック図である。

以下、本技術を適用した具体的な実施の形態について、図面を参照しながら詳細に説明する。

＜内視鏡システムの構成例＞
図１は、本技術を適用した内視鏡システムの一実施の形態の構成例を示すブロック図である。

図１において、内視鏡システム１１は、表示装置１２が載置されるカート１３に、内視鏡下手術のための様々な装置が搭載されて構成され、例えば、内視鏡下手術に使用される内視鏡１４により取得される画像に対する画像処理を施すことができる。

表示装置１２は、内視鏡１４により取得される画像や、その画像に対して画像処理が施された画像などを表示する。

カート１３には、図１に示す例では、光源装置２１、ＣＣＵ（ＣＣＵ：Camera Control Unit）２２、および制御装置２３が搭載されている。

光源装置２１は、例えば、ＬＥＤ、キセノンランプ、ハロゲンランプ、レーザ光源、または、これらの組み合わせに相当する光源を備えて構成され、観察対象へ向けて照射されるべき照射光を、ライトガイドを通じて内視鏡１４へ供給する。

ＣＣＵ２２は、カメラヘッド３１に内蔵される撮像素子による撮像を制御し、その撮像素子が観察対象を撮像することにより得られる画像が供給される。

制御装置２３は、内視鏡１４により取得される画像に対する画像処理を制御する。なお、制御装置２３の詳細な構成については、図６を参照して後述する。

内視鏡１４は、カメラヘッド３１および硬性鏡３２が接続可能に構成され、硬性鏡３２を介して高画角で術野を撮像する。

カメラヘッド３１は、術野を撮像する撮像素子を有するカメラヘッド本体部４１、硬性鏡３２との接続に利用される内視鏡カプラ４２、および、各種の操作を入力するための操作スイッチ４３を有して構成される。

硬性鏡３２は、鏡筒本体５１、光源装置２１に接続される光源接続部５２、カメラヘッド３１の内視鏡カプラ４２に対して接続されるカプラ接続部５３、および、回転操作を入力するための回転操作部５４を有して構成される。

例えば、回転操作部５４は、硬性鏡３２を取り付ける内視鏡カプラ４２の近傍に設けられており、鏡筒本体５１に対して相対的に回転する機構によって、外周側のリング状部分が自在に回転可能となるように構成されている。そして、回転操作部５４は、このリング状部分の回転量および回転速度を検出するロータリエンコーダを内蔵している。

このように内視鏡システム１１は構成されており、術者やスコピストなどは、例えば、内視鏡１４を把持したままで回転操作部５４に対する回転操作を行うことができ、内視鏡１４を安定して保持することができる。また、例えば、硬性鏡３２そのものを回転させる従来の斜視ローテーション方法では、硬性鏡に配置されているライトガイドの取付け部が一緒に回転することによって、ライトガイドの絡みなどが発生しないように操作の慣れが必要となっていた。これに対し、内視鏡システム１１では、回転操作部５４を採用することで、硬性鏡３２の向きを固定したまま回転操作部５４に対する回転操作を行うことができるので、従来のような慣れを必要とすることがなく、ラーニングカーブを非常に短時間にすることができる。

図２乃至図４を参照して、内視鏡１４により撮像される全体画像、並びに、その全体画像から切り出される直視画像および斜視画像について説明する。

図２において、実線で示されている正方形の領域は、内視鏡１４の撮像素子の撮像エリアを表している。また、撮像エリアに内接するように、点線で示されている円形の領域が、硬性鏡３２を介して撮像される全視野範囲を表しており、その視野範囲の画像が全体画像となる。つまり、全体画像は、硬性鏡３２を介して撮像される画像の有効領域（ケラレが生じていない領域）となる略円形の画像であり、この有効領域の中心が全体画像の中心点となる。

そして、全体画像の中央において、破線で示されている長方形の領域が、全体画像から直視画像を切り出す範囲を示す切り出し領域を表している。即ち、全体画像の中央に設定される切り出し領域に従って全体画像を切り出すことで直視画像が生成される。

また、図２の下側には、硬性鏡３２の鏡筒本体５１の先端部分が示されており、硬性鏡３２は、幾何学的に広い画角を有している。例えば、硬性鏡３２の視野（FOV：Field of View）に対応する全体画像の画角αは略140°または略120°となっており、全体画像から切り出される直視画像の画角βは略80°の範囲に相当する。

ここで、内視鏡１４の撮像素子としては、いわゆる4K解像度と称される4096×2304ドット以上であることが好適である。即ち、全体画像から直視画像または斜視画像を切り出す際に、手術において、十分な解像度を持つ映像を提供するためには、従来のHD（High Definition）解像度の撮像素子では、切り出して表示した際に解像度が低くなってしまう。そのため、従来のHD解像度の撮像素子は、内視鏡手術で使われる直視画像または斜視画像として十分な解像度を得ることができないことが懸念され、内視鏡１４では、4K解像度の撮像素子が採用される。

また、図３のＡに示されている全体画像において、破線で示されている長方形の領域が、全体画像から斜視画像を切り出す範囲を示す切り出し領域を表している。斜視画像の切り出し領域は、図２に示した直視画像の切り出し領域と同サイズであって、図３のＡに示すように、全体画像の中央より下側であって、全体画像の内周に接する位置に設定される。

そして、図３のＢには、斜視画像の切り出し領域に従って全体画像を切り出すことで生成される斜視画像が示されている。例えば、斜視画像の画角は、図２に示した直視画像と同様に、略８０°の範囲に相当する。そして、図３のＡに示すように全体画像の下側の内周に接する位置に設定される切り出し領域で全体画像から切り出された斜視画像は、光軸から下向き方向に略３０°となる斜視角に相当する。なお、例えば、切り出し領域は、全体画像の中心点から外れた位置を中心に設定されていればよく、３０°以下の斜視角に相当するように、全体画像の内周に接しない位置に設定してもよい。

なお、上述したようなFOVの値は、ここで説明したような値に限定されることなく、全体画像または斜視画像として観察を良好に行うことができるように適切な値に設定することができる。例えば、全体画像の画角αを略120°で、直視画像または斜視画像の画角βが略80°の範囲に相当するようにしてもよい。ここで、図３に示すように、全体画像から切り出された斜視画像は、正対姿勢状態で真下方向に向けられた斜視鏡によって撮像された画像に相当する。

そして、内視鏡システム１１では、図１の回転操作部５４に対する回転操作を行うことで、斜視画像の切り出し領域を全体画像の内周に沿って移動させることができる。

図４には、切り出し領域を全体画像の内周に沿って移動させたときの斜視画像の表示例が示されている。

例えば、図３に示したように真下方向の斜視画像が表示されているときに、回転操作部５４に対して右回転方向（時計方向）の回転操作が行われると、図４のＡに示すように、直視の中心軸を基準として、破線の長方形で示す切り出し領域が右回転方向へ全体画像に内周に沿って移動する。

このとき、切り出し領域は、図示するように、切り出し領域の向きが回転することなく、切り出し領域の移動方向が直視の中心軸を基準として回るように、例えば、切り出し領域の縦軸と全体画像の縦軸とが平行となったまま、切り出し領域の外形が全体画像の内周に接する状態で移動する。その結果、図４のＢに示すように、切り出し領域に従って全体画像から切り出された斜視画像が表示される。なお、切り出し領域が全体画像の内周に接しない位置に設定されている場合には、全体画像の中心点を基準として切り出し領域を内接するような円に沿って斜視画像を移動させてもよい。

図５には、表示装置１２に表示される表示画面の一例が示されている。

図５に示す表示画面では、右側に、硬性鏡３２の全視野範囲を表す全体画像６１が配置され、左側に、硬性鏡３２の全視野範囲の一部分を切り出した斜視画像６２が配置されている。また、表示画面では、破線の長方形で示すように、硬性鏡３２の全視野範囲から斜視画像６２を切り出した切り出し領域を示す領域マーカが、全体画像６１に重畳して表示される。

内視鏡システム１１では、このような表示画面を表示装置１２に表示することで、例えば、術者やスコピストなどは、注視したい患部を表示する斜視画像６２と同時に、全体画像６１によって患部の周囲の状況を把握することができる。さらに、斜視画像６２の切り出し領域を示す領域マーカを全体画像６１に重畳して表示することで、術者やスコピストなどは、硬性鏡３２の全視野範囲に対する、注視したい患部の範囲および方向を容易に把握することができる。

例えば、従来、全体画像６１の右側にあるドットのハッチングが施された四角いエリアから、鉗子が挿入されていく際に、通常の斜視鏡であれば、ある程度奥に入ってから鉗子が斜め右上の辺りから画像内に映し出されることになり、術者やスコピストなどが驚くことがあった。

これに対し、内視鏡システム１１では、術者やスコピストなどは、全体画像６１によって挿入し始めたときから鉗子を確認することができる。さらに、内視鏡システム１１では、術者やスコピストなどは、領域マーカによって斜視画像６２が全体画像６１の左下方向を見ていることを把握することができるので、斜視画像６２の右上から鉗子が挿入されてくるように映し出されることを事前に認識することができる。従って、術者やスコピストなどは、それらの状況を的確に把握して、手術を進める事ができる。

このように、内視鏡システム１１は、ある方向を斜視画像６２で観察しているときにも、全体画像６１によって斜視画像６２の視野外を同時に観察すること、即ち、死角が生じないように観察することができる。従って、内視鏡システム１１を使用することで、術者やスコピストなどは、より安全に手術を行うことができる。

＜制御装置の構成例および制御処理の処理例＞
図６は、制御装置２３の構成例を示すブロック図である。

図６に示すように、制御装置２３は、操作信号取得部７１、音声認識部７２、および画像処理部７３を備えて構成される。また、画像処理部７３は、領域設定部８１、切り出し処理部８２、マーカ生成部８３、および表示画面生成部８４を備えて構成される。

操作信号取得部７１は、図１の操作スイッチ４３および回転操作部５４に対する操作が行われたときに出力される操作信号を取得し、その操作信号によって指示される指示コマンドを画像処理部７３に供給する。例えば、操作信号取得部７１は、回転操作部５４に対する回転操作に従った操作信号を取得し、右回転方向または左回転方向へ全体画像の内周に沿った斜視画像の移動を指示する指示コマンドを画像処理部７３に供給する。

音声認識部７２は、図示しないマイクを介して、スコピストが発話した音声が供給され、その音声を認識する音声認識処理を行って、スコピストが発話した発話内容を認識する。そして、音声認識部３３は、スコピストの発話内容から音声による指示コマンドを認識した場合、その指示コマンドを画像処理部３４に供給する。例えば、音声認識部７２は、スコピストが「時計方向に回して」と発話した音声に基づいて、時計回りに全体画像の内周に沿って斜視画像を移動させる指示コマンドを画像処理部７３に供給することができる。その後、音声認識部７２は、例えば、観察したい位置の画像になったところで、スコピストが「止めて」と発話した音声に基づいて、全体画像の内周に沿った斜視画像の移動を停止させる指示コマンドを画像処理部７３に供給することができる。

画像処理部７３は、操作信号取得部７１または音声認識部７２から供給される指示コマンドに従って、内視鏡１４において撮像された画像に対して画像処理を施し、図５に示したような表示画面を表示装置１２に表示させる。

領域設定部８１は、硬性鏡３２の全視野範囲が撮像された全体画像の一部分を切り出す切り出し領域を設定する。そして、領域設定部８１は、指示コマンドに従った方向へ、全体画像の中心点を基準として切り出し領域を全体画像の内周に沿って移動させる。

切り出し処理部８２は、領域設定部８１により設定された切り出し領域に従って、内視鏡１４から供給される全体画像の一部分を切り出して、斜視画像または直視画像を生成する。例えば、切り出し処理部８２は、領域設定部８１による切り出し領域の設定に従って、全体画像の中心点から外れた位置を中心にして切り出し領域が設定された場合には、硬性鏡３２の光軸に対して斜め方向を見るような斜視画像を生成する。また、切り出し処理部８２は、領域設定部８１による切り出し領域の設定が切り替えられて、全体画像と中心点が一致する位置を中心にして切り出し領域が設定された場合には、硬性鏡３２の光軸と同一の方向を見るような直視画像を生成する。

マーカ生成部８３は、領域設定部８１により設定された切り出し領域を示す領域マーカを生成して表示画面生成部８４に供給し、全体画像に領域マーカを重畳させる。

表示画面生成部８４は、例えば、図５に示したように全体画像および斜視画像を表示する表示画面を生成する。また、表示画面生成部８４は、後述する図９乃至図１３を参照して説明するように様々なバリエーションの表示画面を生成する。

ここで、音声認識部３３による音声操作について説明する。

例えば、スコピストが「下に向けて」と発話すると、その発話の時点において直視画像が表示されていても、または、その発話の時点において斜視画像がどの方向を表示していたとしても、上述した図３に示したような真下方向の位置を切り出した斜視画像を表示するように、瞬時に、切り出し領域の設定が変更される。即ち、発話内容「下に向けて」は、時計方向の６時に相当する位置に切り出し領域を移動することを指示する指示コマンドとして音声認識される。同様に、発話内容「上に向けて」は時計方向の１２時に相当する位置、発話内容「左に向けて」は時計方向の９時に相当する位置、および、発話内容「右に向けて」は時計方向の３時に相当する位置に切り出し領域を移動することを指示する指示コマンドとして音声認識される。

このような指示コマンドを用いることで、例えば、スコピストが「時計方向に回して」と発話して、現在の視野範囲から目的の位置に向かって徐々に視野を変えて観察したいときと、現在の視野範囲から目的の位置に瞬時に視野を変えたいときとで、使い分けることができる。これにより、スコピストは、より最適な視野を簡単に得る事が出る。

また、例えば、スコピストが「直視に変えて」と発話すると、直視の軸線上に切り出し領域を変更して、直視鏡を使用しているのと同等の視野に切り替える事ができる。そして、また、斜視ローテーションを再開した時には、スコピストが「斜視に変えて」と発話するだけで、斜視に切り替える事ができる。

ここで、従来の内視鏡では、直視鏡に変えたい場面になった時は、硬性鏡を付け替えなければならず、直視鏡および斜視鏡の両方を準備し、必要に応じて、それらを付け替える行為が必要であった。そのため、従来、直視鏡および斜視鏡の両方を配置する場所を確保し、直視鏡および斜視鏡を付け替える手間による時間ロスが発生していた。

これに対し、内視鏡システム１１では、直視鏡および斜視鏡それぞれの機能を１つの硬性鏡３２で提供し、直視画像と斜視画像とを必要に応じて切り替えることができる。このため、直視鏡および斜視鏡の両方を配置する場所を確保する必要がなく、直視鏡および斜視鏡を付け替える手間による時間ロスが発生することも回避して、手術を行うことができる。

また、この音声操作と、図１の回転操作部５４、または、図８の磁気エンコーダ４４とマグネット５５との組み合わせを利用した操作方法を同時に使用できるようにしてもよい。その場合、例えば、スコピストが直接的に手で操作を行う一方で、必要に応じて、執刀医師が音声操作を使うような使い方も提供できる。

図７に示すフローチャートを参照して、制御装置２３が実行する制御処理の一例について説明する。

ステップＳ１１において、制御装置２３は、内視鏡１４において撮像された硬性鏡３２の全視野範囲を表す全体画像、および、全体画像の中央を切り出した直視画像を表示装置１２に表示する。即ち、制御装置２３では、領域設定部８１が、内視鏡１４から供給される全体画像の中央（図２参照）に切り出し領域を設定し、切り出し処理部８２が、その切り出し領域に従って全体画像を切り出して直視画像を生成する。そして、表示画面生成部８４は、例えば、全体画像および直視画像が左右に並んで配置される表示画面を生成して、表示装置１２に出力する。

ステップＳ１２において、操作信号取得部７１は、例えば、操作スイッチ４３に対する操作が行われて、直視画像から斜視画像への切り替えを指示する指示コマンドが供給されたか否かを判定する。ステップＳ１２において、操作信号取得部７１が、直視画像から斜視画像への切り替えを指示する指示コマンドが供給されていないと判定した場合、処理はステップＳ１１に戻り、処理は待機される。

一方、ステップＳ１２において、操作信号取得部７１が、直視画像から斜視画像への切り替えを指示する指示コマンドが供給されたと判定した場合、処理はステップＳ１３に進む。

ステップＳ１３において、領域設定部８１は、切り出し領域の初期位置として、例えば、図３に示したような真下方向の位置に、斜視画像に対応する切り出し領域を設定する。そして、領域設定部８１は、設定した切り出し領域を切り出し処理部８２およびマーカ生成部８３に通知する。

ステップＳ１４において、切り出し処理部８２は、ステップＳ１３で領域設定部８１により設定された切り出し領域に従って、全体画像から切り出して斜視画像を生成する。

ステップＳ１５において、マーカ生成部８３は、ステップＳ１３で領域設定部８１により設定された切り出し領域を示す領域マーカを生成して表示画面生成部８４に供給し、全体画像に対して領域マーカを重畳させる。

ステップＳ１６において、表示画面生成部８４は、ステップＳ１４で生成された斜視画像、および、領域マーカが重畳された全体画像が左右に並んで配置される表示画面を生成して、表示装置１２に出力する。これにより、表示装置１２の表示が、直視画像から斜視画像に切り替えられる。

ステップＳ１７において、操作信号取得部７１は、例えば、回転操作部５４に対する回転操作が行われて、全体画像の内周に沿った斜視画像の移動を指示する指示コマンドが供給されたか否かを判定する。

ステップＳ１７において、操作信号取得部７１が、全体画像の内周に沿った斜視画像の移動を指示する指示コマンドが供給されていないと判定した場合、処理はステップＳ１４に戻り、現時点で設定されている切り出し領域に従って、以下、同様の処理が繰り返して行われる。

一方、ステップＳ１７において、操作信号取得部７１が、全体画像の内周に沿った斜視画像の移動を指示する指示コマンドが供給されたと判定した場合、処理はステップＳ１８に進む。

ステップＳ１８において、領域設定部８１は、回転操作部５４に対する回転操作の回転量および回転速度に従って、斜視画像に対応する切り出し領域を全体画像の内周に沿って移動させ、切り出し領域を新たに設定する。その後、処理はステップＳ１４に戻り、新たに設定された切り出し領域に従って、以下、同様の処理が繰り返して行われ、回転操作部５４に対する回転操作に応じて全体画像の内周に沿って移動された斜視画像が表示される。

以上のように、制御装置２３は、操作スイッチ４３に対する操作に従って、直視画像および斜視画像の表示を切り替えることができる。そして、制御装置２３は、斜視画像を表示する際には、斜視画像を切り出した切り出し領域に対応する領域マーカが重畳された全体画像を表示することができる。そして、制御装置２３は、回転操作部５４に対する回転操作に従って、全体画像の内周に沿って斜視画像を移動させることができる。

なお、制御装置２３は、全体画像に対する切り出し領域の位置に応じて、切り出し処理部８２により生成される斜視画像に対する歪補正を行うことができる。例えば、全体画像の中心点を基準として全体画像の内周に沿って斜視画像が移動することになるが、広角レンズに製造誤差などによって均一でない歪みが全体画像に生じていることも想定される。そこで、制御装置２３の出荷前に広角レンズを校正し、その校正情報に従って、切り出し領域の位置に応じて斜視画像に対する歪補正を施すことで、より良好な斜視画像を得ることができる。

＜内視鏡の第２の構成例＞
図８を参照して、内視鏡１４の第２の構成例について説明する。なお、図８に示す第２の構成例の内視鏡１４ａにおいて、図１に示した第１の構成例の内視鏡１４と共通する構成については同一の符号を付し、その詳細な説明は省略する。

図８に示すように、内視鏡１４ａは、カメラヘッド３１ａに対して硬性鏡３２ａが装着可能に構成されている。図８のＡには、カメラヘッド３１ａから硬性鏡３２ａが取り外された状態が示されており、図８のＢには、カメラヘッド３１ａに硬性鏡３２ａが装着された状態が示されている。

カメラヘッド３１ａは、カメラヘッド本体部４１、内視鏡カプラ４２、および操作スイッチ４３を備える点で、図１のカメラヘッド３１と同様に構成されており、さらに磁気エンコーダ４４を備えて構成される。硬性鏡３２ａは、鏡筒本体５１、光源接続部５２、およびカプラ接続部５３を備える点で、図１の硬性鏡３２と同様に構成されており、さらにマグネット５５を備えて構成される。

磁気エンコーダ４４は、内視鏡カプラ４２に組み込まれており、マグネット５５の磁気を検出する磁気検出手段である。マグネット５５は、カプラ接続部５３に組み込まれている。そして、カメラヘッド３１ａに対して硬性鏡３２ａを回転させると、磁気エンコーダ４４がマグネット５５の磁気を検出して回転方向および回転量を認識し、その回転方向および回転量を示す操作信号が操作信号取得部７１に供給される。従って、制御装置２３では、カメラヘッド３１ａに対して硬性鏡３２ａを回転させる回転操作に従って、全体画像の内周に沿った斜視画像の移動を制御することができる。

なお、内視鏡１４ａにおいて、内視鏡カプラ４２は、従来と同様の構造が採用されており、例えば、マグネット５５がカプラ接続部５３に組み込まれていない従来の硬性鏡を内視鏡カプラ４２に取り付けて使用することができる。このように、従来の硬性鏡が内視鏡カプラ４２に接続された場合、磁気エンコーダ４４は、磁気を検出しないことになる。従って、この場合、制御装置２３は、全体画像から斜視画像を切り出す処理を行うことがなく、従来と同様に、硬性鏡により撮像された画像が表示装置１２に表示される。

このような構成の内視鏡１４ａを使用した内視鏡システム１１では、内視鏡１４ａと従来の硬性鏡とのいずれか一方を装着することで、制御装置２３は、その装着された一方の機能の提供に自動的に対応することができる。即ち、内視鏡システム１１は、内視鏡１４ａが装着された場合には、カメラヘッド３１ａに対する硬性鏡３２ａの回転操作に従って全体画像の内周に沿った斜視画像の移動を行う機能を提供することができ、従来の硬性鏡が装着された場合には、その硬性鏡に応じた機能を提供することができる。これにより、術者やスコピストなどは、従来の硬性鏡も含めて、違和感なく、内視鏡システム１１を使用することができる。従って、内視鏡システム１１は、操作方法習得のラーニングカーブが短く、従来の硬性鏡も使用できるので、医療経済性にも寄与することになる。

＜表示画面のバリエーション＞
図９乃至図１３を参照して、表示装置１２に表示される表示画面のバリエーションについて説明する。

図９に示す第１のバリエーションの表示画面では、硬性鏡３２の全視野範囲の一部分を切り出した斜視画像６２のみが画面全体に配置されている。この表示画面により、術者やスコピストなどは、大きく表示される斜視画像６２に集中して、斜視画像６２のみを観察して手術することができ、そのような場面において有効な表示画面である。なお、この表示画面では、斜視画像６２と同時に全体画像６１が表示されないため、全体画像６１による周辺観察を同時に行うことはできないが、例えば、音声操作によって切り替えを指示して、瞬時に、全体画像６１および斜視画像６２が並んで表示されるような表示画面に変更できるようにすればよい。

図１０に示す第２のバリエーションの表示画面では、左側に全体画像６１が配置され、右側に斜視画像６２が配置された構成となっている。また、全体画像６１の表示サイズは、表示装置１２の高さに応じた高さになるように調整され、斜視画像６２の表示サイズは、全体画像６１を表示した残りの表示装置１２の幅に応じた幅になるように調整される。

図１１に示す第３のバリエーションの表示画面では、左側に全体画像６１が配置されるとともに、その残りの右側において、下側に斜視画像６２が配置され、上側に直視画像６３が配置された構成となっている。

図１２に示す第４のバリエーションの表示画面では、左上側の斜視画像６２と左上側の直視画像６３とが並んで配置され、斜視画像６２の下方に全体画像６１が配置された構成となっている。

図１３に示す第５のバリエーションの表示画面では、左側に、正方形に切り出された直視画像６３が表示装置１２の高さに応じて配置され、その残りの右側において、上側に全体画像６１が配置され、下側に斜視画像６２が配置された構成となっている。

以上のように、内視鏡システム１１では、図９乃至図１３に示したような各種のバリエーションの表示画面を表示装置１２に表示することができる。これにより、例えば、手術の種類や、術者の意向などに沿って、表示画面のバリエーションを柔軟に変更できるので、従来の内視鏡よりも、多くの診療科で、最適な使用ができる。例えば、総合病院では、診療科ごとに準備するのではなく、内視鏡システム１１を共通で使用できる設備とすることができるといった価値を提供する事も可能となる。

＜斜視画像の表示方法のバリエーション＞
図１４乃至図１６を参照して、斜視画像の表示方法のバリエーションについて説明する。

例えば、内視鏡システム１１では、通常、斜視画像６２に対する回転操作に従って全体画像の内周に沿って移動するように設定される切り出し領域に従って、全体画像６１から切り出された一部分を表示内容として斜視画像６２の表示をリアルタイムに更新する表示方法となっている。

これに対し、図１４を参照して説明する表示方法では、斜視画像６２に対する回転操作が開始されると、斜視画像６２の表示内容の更新が停止されて、その回転操作が行われる直前の表示内容が保持される。そして、斜視画像６２に対する回転操作が終了すると、その回転操作に従って全体画像の内周に沿って移動して設定された切り出し領域に従った表示内容に切り替わるように斜視画像６２が表示される。

まず、図１４の上段に示すように、斜視画像６２に対する回転操作が行われていないとき、斜視画像６２は、全体画像６１に重畳して表示される切り出し領域に対応する表示内容を表示する。

そして、図１４の中段に示すように、斜視画像６２に対する回転操作が行われている間、その回転操作に応じて領域マーカの表示位置が全体画像の内周に沿って移動する一方で、斜視画像６２は、回転操作が行われる直前の表示内容で更新が停止されている。即ち、領域設定部８１は、回転操作に応じて全体画像の内周に沿って移動するように切り出し領域を設定し、マーカ生成部８３は、切り出し領域に従って領域マーカの表示を更新するのに対し、切り出し処理部８２は斜視画像６２の切り出しを行わない。そのため、斜視画像６２は、斜視画像６２に対する回転操作が行われる直前の表示内容、この例では、図１４の上段と同一の表示内容を保持した状態となっている。

その後、図１４の下段に示すように、斜視画像６２に対する回転操作が終了したタイミング（例えば、回転操作が終了して１秒後）で、斜視画像６２は、そのときに全体画像６１に重畳して表示される切り出し領域に対応する表示内容を表示する。即ち、領域設定部８１は、回転操作の終了に応じて全体画像の内周に沿った移動を終了させた位置に切り出し領域を設定し、切り出し処理部８２は、その切り出し領域に従った表示内容を全体画像６１から切り出し、斜視画像６２が表示される。

このような表示方法によって、スコピストは、全体画像６１上を移動する領域マーカにより、回転操作を終了したときに斜視画像６２に表示される表示内容を認識しながら、所望の領域まで切り出し領域を移動させることができる。そして、この回転操作が行われている間は、切り出し処理部８２において斜視画像を切り出す画像処理は停止することになるので、画像処理部７３の処理負荷を大幅に軽減することができる。これにより、例えば、画像処理部７３の低コスト化を図ることができる。

なお、この表示方法の変形例として、斜視画像６２に対する回転操作が行われている間、斜視画像６２の表示内容の更新を停止するのに替えて、低解像度の斜視画像６２を表示し、斜視画像６２の解像感をあえて低下させ、斜視画像６２に対する回転操作が終了したときに、元の解像度の斜視画像６２を表示する表示方法もある。このような表示方法では、画像処理部７３の処理負荷を軽減させることができるとともに、斜視画像６２の表示内容が変化することによって回転操作が行われていることを容易に認識させることができる。

次に、図１５および図１６を参照して説明する表示方法では、例えば、図１の回転操作部５４に対する回転操作に応じて、斜視画像の切り出し領域を全体画像の内周に沿って移動させる際に、その移動に伴って斜視画像の向きが回転するように切り出し領域が設定される。即ち、図１５のＡに示すように、切り出し領域の下方の両方の角部が全体画像の内周に常に接する状態で、直視の中心軸を回転中心として回転するように、全体画像に内周に沿って移動する。その結果、図１５のＢに示すように、切り出し領域に従って全体画像から切り出された斜視画像が表示される。

ところで、斜視画像の向きが回転する場合には、図１６を参照して説明するように、切り出し領域の位置に応じて、斜視画像６２の表示内容の上下方向が反転して表示することができる。

例えば、通常、図１６のＡおよび図１６のＢに示すように、切り出し領域の位置に関わらず、斜視画像６２は、全体画像６１から切り出された表示内容が、全体画像６１の外周側が下となり、全体画像６１の中心側が上となるような上下方向で表示される。

これに対し、図１６のＡに示すように、全体画像６１の中心を通る水平線よりも下側の位置に切り出し領域の中心があるときには、通常の上下方向で斜視画像６２を表示する一方、図１６のＣに示すように、全体画像６１の中心を通る水平線よりも上側の位置に切り出し領域の中心があるときには、通常の上下方向に対して反転して斜視画像６２を表示する。即ち、切り出し領域の中心が、全体画像６１の中心を通る水平線に対して上側および下側のどちらにあるかに応じて、斜視画像６２の表示内容の上下方向を反転して表示することができる。

このような表示方法によって、例えば、全体画像６１の中心に対して真上に切り出し領域が設定されたとき、全体画像６１に重畳された領域マーカ内における上下方向と、斜視画像６２の表示内容の上下方向とが一致することになる。これにより、全体画像６１に重畳された領域マーカと斜視画像６２との関係性を、より容易に認識させることができる。

なお、内視鏡システム１１では、図１に示したように１つの表示装置１２を備える構成に限定されることなく、複数台の表示装置１２を備える構成を採用してもよい。例えば、２台の表示装置１２を設ける構成では、一方の表示装置１２には、図９に示したように、斜視画像６２のみが配置された表示画面とし、他方の表示装置１２には、図５に示したように、全体画像６１および斜視画像６２が並んで配置された表示画面とする。これにより、執刀医師は、斜視画像６２のみが配置された表示画面を見ながら手術を進め、スコピストは、全体画像６１および斜視画像６２が並んで配置された表示画面を見ながら安全に内視鏡１４を操作することで、より有効活用することができる。

＜コンピュータの構成例＞
次に、上述した一連の処理（制御方法）は、ハードウェアにより行うこともできるし、ソフトウェアにより行うこともできる。一連の処理をソフトウェアによって行う場合には、そのソフトウェアを構成するプログラムが、汎用のコンピュータ等にインストールされる。

図１７は、上述した一連の処理を実行するプログラムがインストールされるコンピュータの一実施の形態の構成例を示すブロック図である。

プログラムは、コンピュータに内蔵されている記録媒体としてのハードディスク１０５やROM１０３に予め記録しておくことができる。

あるいはまた、プログラムは、ドライブ１０９によって駆動されるリムーバブル記録媒体１１１に格納（記録）しておくことができる。このようなリムーバブル記録媒体１１１は、いわゆるパッケージソフトウェアとして提供することができる。ここで、リムーバブル記録媒体１１１としては、例えば、フレキシブルディスク、CD-ROM(Compact Disc Read Only Memory)，MO(Magneto Optical)ディスク，DVD(Digital Versatile Disc)、磁気ディスク、半導体メモリ等がある。

なお、プログラムは、上述したようなリムーバブル記録媒体１１１からコンピュータにインストールする他、通信網や放送網を介して、コンピュータにダウンロードし、内蔵するハードディスク１０５にインストールすることができる。すなわち、プログラムは、例えば、ダウンロードサイトから、ディジタル衛星放送用の人工衛星を介して、コンピュータに無線で転送したり、LAN(Local Area Network)、インターネットといったネットワークを介して、コンピュータに有線で転送することができる。

コンピュータは、CPU(Central Processing Unit)１０２を内蔵しており、CPU１０２には、バス１０１を介して、入出力インタフェース１１０が接続されている。

CPU１０２は、入出力インタフェース１１０を介して、ユーザによって、入力部１０７が操作等されることにより指令が入力されると、それに従って、ROM(Read Only Memory)１０３に格納されているプログラムを実行する。あるいは、CPU１０２は、ハードディスク１０５に格納されたプログラムを、RAM(Random Access Memory)１０４にロードして実行する。

これにより、CPU１０２は、上述したフローチャートにしたがった処理、あるいは上述したブロック図の構成により行われる処理を行う。そして、CPU１０２は、その処理結果を、必要に応じて、例えば、入出力インタフェース１１０を介して、出力部１０６から出力、あるいは、通信部１０８から送信、さらには、ハードディスク１０５に記録等させる。

なお、入力部１０７は、キーボードや、マウス、マイク等で構成される。また、出力部１０６は、LCD(Liquid Crystal Display)やスピーカ等で構成される。

ここで、本明細書において、コンピュータがプログラムに従って行う処理は、必ずしもフローチャートとして記載された順序に沿って時系列に行われる必要はない。すなわち、コンピュータがプログラムに従って行う処理は、並列的あるいは個別に実行される処理（例えば、並列処理あるいはオブジェクトによる処理）も含む。

また、プログラムは、１のコンピュータ（プロセッサ）により処理されるものであっても良いし、複数のコンピュータによって分散処理されるものであっても良い。さらに、プログラムは、遠方のコンピュータに転送されて実行されるものであっても良い。

さらに、本明細書において、システムとは、複数の構成要素（装置、モジュール（部品）等）の集合を意味し、すべての構成要素が同一筐体中にあるか否かは問わない。したがって、別個の筐体に収納され、ネットワークを介して接続されている複数の装置、及び、１つの筐体の中に複数のモジュールが収納されている１つの装置は、いずれも、システムである。

また、例えば、１つの装置（または処理部）として説明した構成を分割し、複数の装置（または処理部）として構成するようにしてもよい。逆に、以上において複数の装置（または処理部）として説明した構成をまとめて１つの装置（または処理部）として構成されるようにしてもよい。また、各装置（または各処理部）の構成に上述した以外の構成を付加するようにしてももちろんよい。さらに、システム全体としての構成や動作が実質的に同じであれば、ある装置（または処理部）の構成の一部を他の装置（または他の処理部）の構成に含めるようにしてもよい。

また、例えば、本技術は、１つの機能を、ネットワークを介して複数の装置で分担、共同して処理するクラウドコンピューティングの構成をとることができる。

また、例えば、上述したプログラムは、任意の装置において実行することができる。その場合、その装置が、必要な機能（機能ブロック等）を有し、必要な情報を得ることができるようにすればよい。

また、例えば、上述のフローチャートで説明した各ステップは、１つの装置で実行する他、複数の装置で分担して実行することができる。さらに、１つのステップに複数の処理が含まれる場合には、その１つのステップに含まれる複数の処理は、１つの装置で実行する他、複数の装置で分担して実行することができる。換言するに、１つのステップに含まれる複数の処理を、複数のステップの処理として実行することもできる。逆に、複数のステップとして説明した処理を１つのステップとしてまとめて実行することもできる。

なお、コンピュータが実行するプログラムは、プログラムを記述するステップの処理が、本明細書で説明する順序に沿って時系列に実行されるようにしても良いし、並列に、あるいは呼び出しが行われたとき等の必要なタイミングで個別に実行されるようにしても良い。つまり、矛盾が生じない限り、各ステップの処理が上述した順序と異なる順序で実行されるようにしてもよい。さらに、このプログラムを記述するステップの処理が、他のプログラムの処理と並列に実行されるようにしても良いし、他のプログラムの処理と組み合わせて実行されるようにしても良い。

なお、本明細書において複数説明した本技術は、矛盾が生じない限り、それぞれ独立に単体で実施することができる。もちろん、任意の複数の本技術を併用して実施することもできる。例えば、いずれかの実施の形態において説明した本技術の一部または全部を、他の実施の形態において説明した本技術の一部または全部と組み合わせて実施することもできる。また、上述した任意の本技術の一部または全部を、上述していない他の技術と併用して実施することもできる。

＜構成の組み合わせ例＞
なお、本技術は以下のような構成も取ることができる。
（１）
硬性鏡の全視野範囲が撮像された全体画像の中心点から外れた位置を中心にして設定される切り出し領域に従って前記全体画像の一部分を切り出して、前記硬性鏡の光軸に対して斜め方向を見る斜視画像を生成する切り出し処理部と、
所定の回転方向へ前記斜視画像の移動を指示する指示コマンドを取得する取得部と、
前記指示コマンドに従った方向へ、前記全体画像の中心点を基準として前記切り出し領域を内接する円の内周に沿って前記切り出し領域を移動させる領域設定部と
を備える内視鏡システム。
（２）
前記全体画像および前記斜視画像のうち少なくとも一方を表示する表示画面を生成する表示画面生成部と、
前記全体画像における前記切り出し領域を示す領域マーカを生成して、前記表示画面に表示される前記全体画像に前記領域マーカを重畳して表示させるマーカ生成部と
をさらに備える上記（１）に記載の内視鏡システム。
（３）
前記硬性鏡を介して高画角で術野を撮像して前記全体画像を前記切り出し処理部に供給する内視鏡
をさらに備える上記（１）または（２）に記載の内視鏡システム。
（４）
前記内視鏡は、前記術野を撮像する撮像素子を有するカメラヘッドに対して前記硬性鏡を接続可能に構成される
上記（３）に記載の内視鏡システム。
（５）
前記硬性鏡は、前記カメラヘッドに対する接続に利用される接続部の近傍に、前記斜視画像の移動を行わせる回転操作を入力する回転操作部を有し、
前記回転操作部に対する回転操作に従って、前記取得部が前記指示コマンドを取得する
上記（４）に記載の内視鏡システム。
（６）
前記カメラヘッドは、前記硬性鏡の接続に利用されるカプラを有し、
前記硬性鏡は、前記カプラに対して接続される接続部を有し、
前記接続部および前記カプラのうち、一方にはマグネットが組み込まれるとともに、他方には磁気エンコーダが組み込まれており、
前記カメラヘッドに対して前記硬性鏡を回転させる回転操作に従って、前記取得部が前記指示コマンドを取得する
上記（４）に記載の内視鏡システム。
（７）
前記取得部は、音声から発話内容を認識することで前記指示コマンドを取得する音声認識部である
上記（１）から（６）までのいずれかに記載の内視鏡システム。
（８）
前記領域設定部は、前記全体画像の中心点から外れた位置を中心にした切り出し領域と、前記全体画像と中心点が一致する位置を中心にした切り出し領域とを切り替えて設定し、
前記切り出し処理部は、前記全体画像の中心点から外れた位置を中心にして設定された切り出し領域から前記斜視画像を生成し、前記全体画像と中心点が一致する位置を中心にして設定された切り出し領域から直視画像を生成する
上記（１）から（７）までのいずれかに記載の内視鏡システム。
（９）
前記全体画像の画角は略140°または略120°であり、前記全体画像の解像度は4096×2304ドット以上である
上記（１）から（８）までのいずれかに記載の内視鏡システム。
（１０）
前記全体画像に対する前記切り出し領域の位置に応じて、前記斜視画像に対する歪補正が行われる
上記（１）から（９）までのいずれかに記載の内視鏡システム。
（１１）
前記全体画像の中心点が、前記硬性鏡を介して撮像される画像の有効領域の中心である
上記（１）から（１０）までのいずれかに記載の内視鏡システム。
（１２）
前記切り出し領域は、移動に伴って前記斜視画像の向きが回転するように設定され、
前記切り出し領域の位置に応じて、前記斜視画像の表示内容の上下方向が反転して表示される
上記（１）から（１１）までのいずれかに記載の内視鏡システム。
（１３）
前記切り出し領域の位置が前記全体画像の中心点を通る水平線よりも上側または下側のどちらにあるかに応じて、前記斜視画像の表示内容の上下方向が反転される
上記（１２）に記載の内視鏡システム。
（１４）
前記斜視画像に対する回転操作が開始されると、前記斜視画像の表示内容の更新が停止されて、その回転操作が行われる直前の表示内容が保持され、
前記斜視画像に対する回転操作が終了すると、その回転操作に従って回転移動して設定された前記切り出し領域に従った表示内容で前記斜視画像が表示される
上記（１）から（１３）までのいずれかに記載の内視鏡システム。
（１５）
硬性鏡の全視野範囲が撮像された全体画像の中心点から外れた位置を中心にして設定される切り出し領域に従って前記全体画像の一部分を切り出して、前記硬性鏡の光軸に対して斜め方向を見る斜視画像を生成する切り出し処理部と、
所定の回転方向へ前記斜視画像の移動を指示する指示コマンドを取得する取得部と、
前記指示コマンドに従った方向へ、前記全体画像の中心点を基準として前記切り出し領域を内接する円の内周に沿って前記切り出し領域を移動させる領域設定部と
を備える内視鏡システムの制御装置。
（１６）
内視鏡システムの制御装置が、
硬性鏡の全視野範囲が撮像された全体画像の中心点から外れた位置を中心にして設定される切り出し領域に従って前記全体画像の一部分を切り出して、前記硬性鏡の光軸に対して斜め方向を見る斜視画像を生成することと、
所定の回転方向へ前記斜視画像の移動を指示する指示コマンドを取得することと、
前記指示コマンドに従った方向へ、前記全体画像の中心点を基準として前記切り出し領域を内接する円の内周に沿って前記切り出し領域を移動させることと
を含む制御方法。

なお、本実施の形態は、上述した実施の形態に限定されるものではなく、本開示の要旨を逸脱しない範囲において種々の変更が可能である。また、本明細書に記載された効果はあくまで例示であって限定されるものではなく、他の効果があってもよい。

１１ 内視鏡システム， １２ 表示装置， １３ カート， １４ 内視鏡， ２１ 光源装置， ２２ ＣＣＵ， ２３ 制御装置， ３１ カメラヘッド， ３２ 硬性鏡， ４１ カメラヘッド本体部， ４２ 内視鏡カプラ， ４３ 操作スイッチ， ４４ 磁気エンコーダ， ５１ 鏡筒本体， ５２ 光源接続部， ５３ カプラ接続部， ５４ 回転操作部， ５５ 磁石， ７１ 操作信号取得部， ７２ 音声認識部， ７３ 画像処理部， ８１ 領域設定部， ８２ 切り出し処理部， ８３ マーカ生成部， ８４ 表示画面生成部

Claims (14)

1. 硬性鏡を介して高画角で術野を撮像する撮像素子を有するカメラヘッドに対して前記硬性鏡を接続可能に構成される内視鏡から供給される、前記硬性鏡の全視野範囲が撮像された全体画像の中心点から外れた位置を中心にして設定される切り出し領域に従って前記全体画像の一部分を切り出して、前記硬性鏡の光軸に対して斜め方向を見る斜視画像を生成する切り出し処理部と、
   前記カメラヘッドに対する相対的な前記硬性鏡の光軸を中心とした回転方向の回転操作に従って、その回転方向へ前記斜視画像の移動を指示する指示コマンドを取得する取得部と、
   前記指示コマンドに従った方向へ、前記全体画像の中心点を基準として前記切り出し領域を内接する円の内周に沿って前記切り出し領域を移動させる領域設定部と
   を備える内視鏡システム。
2. 前記全体画像および前記斜視画像のうち少なくとも一方を表示する表示画面を生成する表示画面生成部と、
   前記全体画像における前記切り出し領域を示す領域マーカを生成して、前記表示画面に表示される前記全体画像に前記領域マーカを重畳して表示させるマーカ生成部と
   をさらに備える請求項１に記載の内視鏡システム。
3. 前記硬性鏡は、前記カメラヘッドに対する接続に利用される接続部の近傍に、前記斜視画像の移動を行わせる回転操作を入力する回転操作部を有し、
   前記回転操作部に対する回転操作に従って、前記取得部が前記指示コマンドを取得する
   請求項１に記載の内視鏡システム。
4. 前記カメラヘッドは、前記硬性鏡の接続に利用されるカプラを有し、
   前記硬性鏡は、前記カプラに対して接続される接続部を有し、
   前記接続部および前記カプラのうち、一方にはマグネットが組み込まれるとともに、他方には磁気エンコーダが組み込まれており、
   前記カメラヘッドに対して前記硬性鏡を回転させる回転操作に従って、前記取得部が前記指示コマンドを取得する
   請求項１に記載の内視鏡システム。
5. 前記取得部は、音声から発話内容を認識することで前記指示コマンドを取得する音声認識部である
   請求項１に記載の内視鏡システム。
6. 前記領域設定部は、前記全体画像の中心点から外れた位置を中心にした切り出し領域と、前記全体画像と中心点が一致する位置を中心にした切り出し領域とを切り替えて設定し、
   前記切り出し処理部は、前記全体画像の中心点から外れた位置を中心にして設定された切り出し領域から前記斜視画像を生成し、前記全体画像と中心点が一致する位置を中心にして設定された切り出し領域から直視画像を生成する
   請求項１に記載の内視鏡システム。
7. 前記全体画像の画角は略140°または略120°であり、前記全体画像の解像度は4096×2304ドット以上である
   請求項１に記載の内視鏡システム。
8. 前記全体画像に対する前記切り出し領域の位置に応じて、前記斜視画像に対する歪補正が行われる
   請求項１に記載の内視鏡システム。
9. 前記全体画像の中心点が、前記硬性鏡を介して撮像される画像の有効領域の中心である
   請求項１に記載の内視鏡システム。
10. 前記切り出し領域は、移動に伴って前記斜視画像の向きが回転するように設定され、
    前記切り出し領域の位置に応じて、前記斜視画像の表示内容の上下方向が反転して表示される
    請求項１に記載の内視鏡システム。
11. 前記切り出し領域の位置が前記全体画像の中心点を通る水平線よりも上側または下側のどちらにあるかに応じて、前記斜視画像の表示内容の上下方向が反転される
    請求項１０に記載の内視鏡システム。
12. 前記斜視画像に対する回転操作が開始されると、前記斜視画像の表示内容の更新が停止されて、その回転操作が行われる直前の表示内容が保持され、
    前記斜視画像に対する回転操作が終了すると、その回転操作に従って移動して設定された前記切り出し領域に従った表示内容で前記斜視画像が表示される
    請求項１に記載の内視鏡システム。
13. 硬性鏡を介して高画角で術野を撮像する撮像素子を有するカメラヘッドに対して前記硬性鏡を接続可能に構成される内視鏡から供給される、前記硬性鏡の全視野範囲が撮像された全体画像の中心点から外れた位置を中心にして設定される切り出し領域に従って前記全体画像の一部分を切り出して、前記硬性鏡の光軸に対して斜め方向を見る斜視画像を生成する切り出し処理部と、
    前記カメラヘッドに対する相対的な前記硬性鏡の光軸を中心とした回転方向の回転操作に従って、その回転方向へ前記斜視画像の移動を指示する指示コマンドを取得する取得部と、
    前記指示コマンドに従った方向へ、前記全体画像の中心点を基準として前記切り出し領域を内接する円の内周に沿って前記切り出し領域を移動させる領域設定部と
    を備える内視鏡システムの制御装置。
14. 内視鏡システムの制御装置が、
    硬性鏡を介して高画角で術野を撮像する撮像素子を有するカメラヘッドに対して前記硬性鏡を接続可能に構成される内視鏡から供給される、前記硬性鏡の全視野範囲が撮像された全体画像の中心点から外れた位置を中心にして設定される切り出し領域に従って前記全体画像の一部分を切り出して、前記硬性鏡の光軸に対して斜め方向を見る斜視画像を生成することと、
    前記カメラヘッドに対する相対的な前記硬性鏡の光軸を中心とした回転方向の回転操作に従って、その回転方向へ前記斜視画像の移動を指示する指示コマンドを取得することと、
    前記指示コマンドに従った方向へ、前記全体画像の中心点を基準として前記切り出し領域を内接する円の内周に沿って前記切り出し領域を移動させることと
    を含む制御方法。

Images