JP2019042412A5

JP2019042412A5 -

Info

Publication number: JP2019042412A5
Application number: JP2017171680A
Authority: JP
Filing date: 2017-09-07
Publication date: 2020-11-05
Anticipated expiration: 2037-09-07

Description

医療用観察システム１０００において上記顔検出処理と上記視線検出処理との一方または双方は、視線検出センサで行われてもよいし、医療用観察装置１００、制御装置（図示せず）あるいは表示装置２００で行われてもよい。なお、本実施形態に係る認識対象の視線の検出方法が、上記に示す例に限られないことは、言うまでもない。

また、撮像制御部１５６は、第１の例に係る露出機能の制御と連動して、所定の領域に対して電子ズームが行われるように、撮像デバイスのズーム機能を制御してもよい。第１の例に係る露出機能の制御と連動したズーム機能の制御は、自動的に行われてもよいし、フットスイッチなどの操作デバイスに対する操作やジェスチャ操作、音声操作などの所定の操作に基づいて行われてもよい。また、第１の例に係る露出機能の制御と連動したズーム機能の制御は、例えば、操作デバイスに対する操作などの所定の操作に基づいて解除されうる。

術者が視線の認識対象である場合を例に挙げると、第１の例に係る露出機能の制御と連動してズーム機能の制御が行われることによって、術者や術者の助手などの医療従事者は、“術者が観察を所望する術部に対してあたかもスポット照明が照射された状態で撮像されたような医療用撮像画像が拡大された、医療用撮像画像”を見ながら、医療行為を行うことが可能となる。よって、第１の例に係る露出機能の制御と連動してズーム機能の制御が行われることにより、術者が観察を所望する術部がより見易い医療用撮像画像を、表示画面に表示させることが可能となるので、医療従事者の利便性をより向上させることができる。

撮像制御部１５６は、例えば、推定された観察対象における位置に拡散照明光の光軸の中心がくるように、撮像デバイスを制御する。医療用観察装置１００が図１に示す構成の場合、撮像制御部１５６は、例えば、光源ユニット１０４を構成する、拡散板、およびライトガイド１０６への照明光の入射角度を調節する機構（図示せず）を制御することによって、観察対象における位置に対して拡散照明光を照射させる。医療用観察装置１００が図１に示す構成であり、挿入部材１０２が可撓性を有する素材で形成される場合（すなわち、軟性鏡である場合）には、拡散照明光の光軸の中心を移動させることによって、観察対象における位置に対して拡散照明光を照射させてもよい。また、医療用観察装置１００が図２に示す構成の場合、撮像制御部１５６は、例えば、光源（図示せず）を構成する拡散板と、アーム１２２とを制御することによって、観察対象における位置に対して拡散照明光を照射させる。なお、観察対象における位置に対して拡散照明光が照射されるように露出機能を制御する方法が、上記に示す例に限られないことは、言うまでもない。

ここで、上述した第１の例に係る露出機能の制御と第２の例に係る露出機能の制御との切り替えは、例えば“光源ユニット１０４が、拡散板の挿抜機構を有すること”によって実現することが可能である。

図５は、本実施形態に係る制御方法を説明するための説明図である。図５のＡは、図１に示す光源ユニット１０４が有する拡散板の挿抜機構を概略的に示しており、図５のＢは、拡散板の有無による照射角度の差異を示している。

図５のＢに示すように、拡散板が挿入されることによって、照射角度はＸ［°］からＹ［°］（Ｙ＞Ｘ）へと変化し、照明領域が広くなる。また、拡散板が挿入されることによって、図５のＢに示すように、光源ユニット１０４から照射される照明光の照度を変えなくとも、照明領域に対してより照度が高い照明光を照射することが可能となる。

また、表示制御部１５８は、医療用観察装置１００が有する撮像デバイスの撮像機能以外の機能を制御するためのユーザインタフェース画像と、医療用観察装置１００以外の機器の機能を制御するためのユーザインタフェース画像との一方または双方を、表示画面に表示させてもよい。

制御ユニット１１２は、例えば、信号入力インタフェース１６０と、ＡＧＣ回路１６２と、ホワイトバランス回路１６４と、送信デバイス１６６と、プロセッサ１６８とを有する。図８では、信号入力インタフェース１６０を「信号入力Ｉ／Ｆ」と示し、ＡＧＣ回路１６２を「ＡＧＣ（Automatic Gain Control）」と示し、ホワイトバランス回路１６４を「Ｗ／Ｂ」と示している。

信号入力インタフェース１６０に入力された画像信号は、ＡＧＣ回路１６２でゲインが制御され、ホワイトバランス回路１６４でホワイトバランスが調整される。

送信デバイス１６６は、例えば、ＡＧＣ回路１６２およびホワイトバランス回路１６４で各種信号処理が行われた画像信号と、表示制御信号とを、表示装置２００へ送信する。送信デバイス１６６は、例えば、画像信号に対して出力フォーマットに合わせた信号処理を行って、当該信号処理が行われた画像信号を送信する。

ＡＥ検波部１７２は、信号入力インタフェース１６０に入力された画像信号に基づいて、露出の検波値を取得する。露出の検波値は、例えば上記画像信号から取得される輝度値に基づいて算出される。ＡＥ検波部１７２における露出の検波範囲は、分析部１７０から伝達される制御信号に応じて変わりうる。ＡＥ検波部１７２は、取得された露出の検波値を、照明光制御部１７４と、出力ゲイン調整部１７６とにそれぞれ伝達する。

画像生成部２６８は、視線検出部２６６から伝達される視線の検出結果を示すデータに基づいて、認識対象の視線の位置を示す画像（例えば、図６において符号Ｏで示すような視線の位置を中心とする円形状の画像）を生成する。そして、画像生成部２６８は、生成した認識対象の視線の位置を示す画像を、表示部材２６２に伝達して、表示部材２６２の表示画面に認識対象の視線の位置を表示させる。

なお、以下のような構成も本開示の技術的範囲に属する。
（１）
撮像デバイスの撮像機能を制御する撮像制御部を備え、
前記撮像制御部は、認識対象の視線の検出結果に基づいて、前記撮像デバイスにより観察対象が撮像された医療用撮像画像における所定の領域の輝度が変わるように、前記撮像デバイスの露出機能を制御する、医療用観察装置。
（２）
前記撮像制御部は、前記認識対象の視線の検出結果から特定される、前記医療用撮像画像が表示される表示画面における認識対象の視線の位置に基づいて、前記所定の領域の輝度が変わるように、前記撮像デバイスの露出機能を制御する、（１）に記載の医療用観察装置。
（３）
前記所定の領域は、前記表示画面における前記視線の位置に対応する、前記医療用撮像画像における位置を含む領域である、（２）に記載の医療用観察装置。
（４）
前記撮像制御部は、前記医療用撮像画像における前記所定の領域以外の領域の輝度が小さくなるように、露出機能を制御する、（３）に記載の医療用観察装置。
（５）
前記撮像制御部は、前記露出機能の制御と連動して前記所定の領域に対して電子ズームが行われるように、前記撮像デバイスのズーム機能を制御する、（４）に記載の医療用観察装置。
（６）
前記撮像制御部は、前記医療用撮像画像における位置に対応する前記観察対象における位置に対して、拡散照明光が照射されるように、露出機能を制御する、（３）に記載の医療用観察装置。
（７）
前記認識対象の視線の検出結果に基づいて、前記表示画面における前記視線の位置に対応する前記医療用撮像画像における位置を、前記表示画面に表示させる表示制御部をさらに備える、（２）〜（６）のいずれか１つに記載の医療用観察装置。
（８）
前記表示制御部は、前記医療用撮像画像における位置を含む前記所定の領域を、前記表示画面に表示させる、（７）に記載の医療用観察装置。
（９）
前記表示制御部は、さらに、前記撮像デバイスの撮像機能を制御するためのユーザインタフェース画像を前記表示画面に表示させる、（７）または（８）に記載の医療用観察装置。
（１０）
前記表示制御部は、さらに、前記撮像デバイスの撮像機能の状態を前記表示画面に表示させる、（７）〜（９）のいずれか１つに記載の医療用観察装置。
（１１）
前記撮像制御部は、前記所定の領域の輝度が大きくなるように、または、前記所定の領域の輝度が小さくなるように、前記撮像デバイスの露出機能を制御する、（１）〜（１０）のいずれか１つに記載の医療用観察装置。
（１２）
患者の体内に挿入され、前記体内を撮像する前記撮像デバイスを備える、（１）〜（１１）のいずれか１つに記載の医療用観察装置。
（１３）
複数のリンクが関節部によって互いに連結されて構成されるアームと、
前記アームにより支持されている前記撮像デバイスと、
を備える、（１）〜（１１）のいずれか１つに記載の医療用観察装置。
（１４）
撮像デバイスの撮像機能を制御する撮像制御部を備える医療用観察装置と、
前記撮像デバイスにより撮像された医療用撮像画像を表示画面に表示する表示装置と、
を有し、
前記医療用観察装置の前記撮像制御部は、認識対象の視線の検出結果に基づいて、前記医療用撮像画像における所定の領域の輝度が変わるように、前記撮像デバイスの露出機能を制御する、医療用観察システム。

Claims

撮像デバイスの撮像機能を制御する撮像制御部を備え、
前記撮像制御部は、認識対象の視線の検出結果に基づいて、前記撮像デバイスにより観察対象が撮像された医療用撮像画像における所定の領域の輝度が変わるように、前記撮像デバイスの露出機能を制御する、医療用観察装置。
前記撮像制御部は、前記認識対象の視線の検出結果から特定される、前記医療用撮像画像が表示される表示画面における認識対象の視線の位置に基づいて、前記所定の領域の輝度が変わるように、前記撮像デバイスの露出機能を制御する、請求項１に記載の医療用観察装置。
前記所定の領域は、前記表示画面における前記視線の位置に対応する、前記医療用撮像画像における位置を含む領域である、請求項２に記載の医療用観察装置。
前記撮像制御部は、前記医療用撮像画像における前記所定の領域以外の領域の輝度が小さくなるように、露出機能を制御する、請求項３に記載の医療用観察装置。
前記撮像制御部は、前記露出機能の制御と連動して前記所定の領域に対して電子ズームが行われるように、前記撮像デバイスのズーム機能を制御する、請求項４に記載の医療用観察装置。
前記撮像制御部は、前記医療用撮像画像における位置に対応する前記観察対象における位置に対して、拡散照明光が照射されるように、露出機能を制御する、請求項３に記載の医療用観察装置。
前記認識対象の視線の検出結果に基づいて、前記表示画面における前記視線の位置に対応する前記医療用撮像画像における位置を、前記表示画面に表示させる表示制御部をさらに備える、請求項２〜６のいずれか１つに記載の医療用観察装置。
前記表示制御部は、前記医療用撮像画像における位置を含む前記所定の領域を、前記表示画面に表示させる、請求項７に記載の医療用観察装置。
前記表示制御部は、さらに、前記撮像デバイスの撮像機能を制御するためのユーザインタフェース画像を前記表示画面に表示させる、請求項７または８に記載の医療用観察装置。
前記表示制御部は、さらに、前記撮像デバイスの撮像機能の状態を前記表示画面に表示させる、請求項７〜９のいずれか１つに記載の医療用観察装置。
前記撮像制御部は、前記所定の領域の輝度が大きくなるように、または、前記所定の領域の輝度が小さくなるように、前記撮像デバイスの露出機能を制御する、請求項１〜１０のいずれか１つに記載の医療用観察装置。
患者の体内に挿入され、前記体内を撮像する前記撮像デバイスを備える、請求項１〜１１のいずれか１つに記載の医療用観察装置。
複数のリンクが関節部によって互いに連結されて構成されるアームと、
前記アームにより支持されている前記撮像デバイスと、
を備える、請求項１〜１１のいずれか１つに記載の医療用観察装置。
撮像デバイスの撮像機能を制御する撮像制御部を備える医療用観察装置と、
前記撮像デバイスにより撮像された医療用撮像画像を表示画面に表示する表示装置と、
を有し、
前記医療用観察装置の前記撮像制御部は、認識対象の視線の検出結果に基づいて、前記医療用撮像画像における所定の領域の輝度が変わるように、前記撮像デバイスの露出機能を制御する、医療用観察システム。