JP6988001B2 - 記録装置、画像観察装置、観察システム、観察システムの制御方法、及び観察システムの作動プログラム - Google Patents

Description

本発明は、記録装置、画像観察装置、観察システム、観察システムの制御方法、及び観察システムの作動プログラムに関する。

従来、医療分野において、生体である被検体の体内を内視鏡を用いた観察が行われている（例えば、特許文献１参照）。内視鏡が撮像した画像は、内視鏡を操作している第１の医師による診断に用いられる。

また、内視鏡が撮像した画像を記録装置に保存し、空間的又は時間的に離れた場所にいる第２の医師による診断（セカンドオピニオン）に用いることが検討されている。

特開２０１６−０６２４８８号公報

しかしながら、第２の医師が記録装置に記録された画像を閲覧する場合、被検体の脈拍や呼吸等の生体情報を活用することができないため、被検体に直接内視鏡を導入して観察する場合に比べて、観察しづらいという課題があった。

本発明は、上記に鑑みてなされたものであって、記録装置から内視鏡を用いて撮像した画像を取得して観察する際に、より観察しやすい記録装置、画像観察装置、観察システム、観察システムの制御方法、及び観察システムの作動プログラムを提供することを目的とする。

上述した課題を解決し、目的を達成するために、本発明の一態様に係る記録装置は、被検体の生体情報を生成する生体情報生成部と、内視鏡により生成されて時系列に並べられている画像データを、前記生体情報と関連づけて記録する記録部と、前記記録部に記録されている画像データから前記生体情報に基づいて画像データを選択して三次元画像データを生成する三次元画像生成部と、を備える。

また、本発明の一態様に係る記録装置は、前記生体情報に応じて異なる形状の変化を低減させる補正、又は、前記生体情報に応じて異なる色調の変化を強調する補正の少なくともいずれか一方を施す画像補正部を更に備える。

また、本発明の一態様に係る記録装置は、前記生体情報生成部は、前記画像データの時間変化に基づいて前記生体情報を生成する。

また、本発明の一態様に係る画像観察装置は、内視鏡により生成されて時系列に並べられている複数の画像データから被検体の生体情報に基づいて画像データを選択することにより生成された三次元画像データを取得する取得部と、前記被検体を観察する位置及び角度の入力を受け付ける入力装置が受け付けた情報に基づいて画角情報を生成する画角情報生成部と、前記三次元画像を前記生体情報及び前記画角情報に基づいて観察することにより得られる二次元画像データを生成する二次元画像生成部と、を備える。

また、本発明の一態様に係る観察システムは、被検体の生体情報を生成する生体情報生成部と、内視鏡により生成されて時系列に並べられている画像データを、前記生体情報と関連づけて記録する記録部と、前記記録部に記録されている画像から前記生体情報に基づいて画像データを選択することにより三次元画像データを生成する三次元画像生成部と、前記被検体を観察する位置及び角度の入力を受け付ける入力装置が受け付けた情報に基づいて画角情報を生成する画角情報生成部と、前記三次元画像を前記生体情報及び前記画角情報に基づいて観察することにより得られる二次元画像データを生成する二次元画像生成部と、を備える。

また、本発明の一態様に係る観察システムは、前記生体情報に応じて前記内視鏡が撮像するタイミングを制御する撮像制御部を更に備える。

また、本発明の一態様に係る観察システムの制御方法は、生体情報生成部が、被検体の生体情報を生成し、三次元画像生成部が、内視鏡により生成されて時系列に並べられている画像データから前記生体情報に基づいて画像データを選択することにより三次元画像データを生成し、画角情報生成部が、前記被検体を観察する位置及び角度の入力を受け付ける入力装置が受け付けた情報に基づいて画角情報を生成し、二次元画像生成部が、前記三次元画像を前記生体情報及び前記画角情報に基づいて観察することにより得られる二次元画像データを生成する。

また、本発明の一態様に係る観察システムの作動プログラムは、生体情報生成部が、被検体の生体情報を生成し、三次元画像生成部が、内視鏡により生成されて時系列に並べられている画像データから前記生体情報に基づいて画像データを選択することにより三次元画像データを生成し、画角情報生成部が、前記被検体を観察する位置及び角度の入力を受け付ける入力装置が受け付けた情報に基づいて画角情報を生成し、二次元画像生成部が、前記三次元画像を前記生体情報及び前記画角情報に基づいて観察することにより得られる二次元画像データを生成すること、を観察システムに実行させる。

本発明によれば、記録装置から内視鏡を用いて撮像した画像を取得して観察する際に、より観察しやすい記録装置、画像観察装置、観察システム、観察システムの制御方法、及び観察システムの作動プログラムを実現することができる。

図１は、本発明の実施の形態に係る観察システムの構成を示すブロック図である。 図２は、観察システムを用いた観察のフローチャートである。 図３は、記録装置が三次元画像データを生成する様子を表す図である。 図４は、画像観察装置が二次元画像データを生成する様子を表す図である。 図５は、変形例１に係る観察システムの構成を示すブロック図である。 図６は、変形例２に係る観察システムの構成を示すブロック図である。 図７は、変形例３に係る観察システムの構成を示すブロック図である。 図８は、特徴点の信号値から生体情報を生成する様子を表す図である。 図９は、特徴点の座標値から生体情報を生成する様子を表す図である。

以下に、図面を参照して本発明に係る記録装置、画像観察装置、観察システム、観察システムの制御方法、及び観察システムの作動プログラムの実施の形態を説明する。なお、これらの実施の形態により本発明が限定されるものではない。本発明は、医療用の内視鏡を用いる記録装置、画像観察装置、観察システム、観察システムの制御方法、及び観察システムの作動プログラム一般に適用することができる。

また、図面の記載において、同一又は対応する要素には適宜同一の符号を付している。また、図面は模式的なものであり、各要素の寸法の関係、各要素の比率などは、現実と異なる場合があることに留意する必要がある。図面の相互間においても、互いの寸法の関係や比率が異なる部分が含まれている場合がある。

（実施の形態）
図１は、本発明の実施の形態に係る観察システムの構成を示すブロック図である。図１に示すように、本実施の形態に係る観察システム１は、インターネット回線等のネットワーク２を経由して接続された内視鏡観察システム１０と、記録装置２０と、画像観察装置３０と、を備える。

内視鏡観察システム１０は、生体である被検体の体内を撮像する内視鏡１１と、被検体の生体情報を検出するセンサ部１２と、内視鏡１１が撮像した画像データに画像処理を施す画像処理装置１３と、画像処理装置１３が生成した画像データに応じた画像を表示する表示装置１４と、を備える。

内視鏡１１は、被検体に挿入される挿入部と、挿入部の基端側に連設された操作部とを有し、操作部に対する入力に応じて、挿入部の先端に配置された撮像素子が被検体の体内を撮像する。撮像素子は、ＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ Ｍｅｔａｌ Ｏｘｉｄｅ Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）やＣＣＤ（Ｃｈａｒｇｅ Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅ）等のイメージセンサである。

センサ部１２は、生体情報として、脈拍、呼吸等の情報を取得する。具体的には、センサ部１２は、被検体の指先を把持するように固定された血流センサである。また、センサ部１２は、被検体の口や鼻、胸部等に装着された呼吸センサであってもよい。

画像処理装置１３は、例えばＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）等の汎用プロセッサ、又はＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ Ｓｐｅｃｉｆｉｃ Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ）やＦＰＧＡ（Ｆｉｅｌｄ Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙ）等の特定の機能を実行する各種演算回路等の専用プロセッサを含むワークステーションやパーソナルコンピュータを用いて構成される。

表示装置１４は、液晶又は有機ＥＬ（Ｅｌｅｃｔｒｏ Ｌｕｍｉｎｅｓｃｅｎｃｅ）等を用いて構成されている。

記録装置２０は、ネットワーク２を経由して内視鏡観察システム１０及び画像観察装置３０を含む複数の内視鏡観察システムや画像観察装置等の機器に接続されているサーバである。記録装置２０は、例えばＣＰＵ等の汎用プロセッサ、又はＡＳＩＣやＦＰＧＡ等の特定の機能を実行する各種演算回路等の専用プロセッサ、フラッシュメモリ、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）等の半導体メモリ、ＨＤＤ、ＭＯ、ＣＤ−Ｒ、ＤＶＤ−Ｒ等の記録媒体（メモリ素子）と、該記録媒体を駆動する駆動装置等によって実現される。

記録装置２０は、被検体の生体情報を生成する生体情報生成部２１と、内視鏡１１により生成されて時系列に並べられている画像データを、生体情報と関連づけて記録する記録部２２と、記録部２２に記録されている画像データから生体情報に基づいて画像データを選択することにより三次元画像データを生成する三次元画像生成部２３と、を備える。

画像観察装置３０は、被検体を観察する位置及び角度の入力を受け付ける入力装置３１と、記録装置２０に記録された三次元画像データを読み出して画像データを生成する画像処理装置３２と、画像処理装置３２が生成した画像データに応じた画像を表示する表示装置３３と、を備える。

入力装置３１は、内視鏡１１の操作部と同様の構成であり、被検体を観察する位置及び角度の入力を受け付ける。ただし、入力装置３１は、マウス、キーボード、タッチパッド、又はタッチパネル等によって構成されていてもよい。

画像処理装置３２は、例えばＣＰＵ等の汎用プロセッサ、又はＡＳＩＣやＦＰＧＡ等の特定の機能を実行する各種演算回路等の専用プロセッサを含むワークステーションやパーソナルコンピュータを用いて構成される。

画像処理装置３２は、三次元画像生成部が生成した三次元画像データを取得する取得部３２１と、入力装置３１が受け付けた情報に基づいて画角情報を生成する画角情報生成部３２２と、三次元画像を生体情報及び画角情報に基づいて観察することにより得られる二次元画像データする二次元画像生成部３２３と、を有する。

表示装置３３は、液晶又は有機ＥＬ（Ｅｌｅｃｔｒｏ Ｌｕｍｉｎｅｓｃｅｎｃｅ）等を用いて構成されている。

次に、内視鏡観察システム１０を用いて第１の医師が撮像した画像を、画像観察装置３０を用いて第２の医師が観察する動作を説明する。図２は、観察システムを用いた観察のフローチャートである。図２に示すように、第１の医師が内視鏡１１を用いて、被検体の体内の画像を撮像する（ステップＳ１）。

同時に、センサ部１２は、内視鏡１１が画像を撮像している間の血流の情報を検出する（ステップＳ２）。

続いて、内視鏡１１が生成した画像データに画像処理装置１３が所定の画像処理を施す（ステップＳ３）。

その後、内視鏡観察システム１０は、ネットワーク２を経由して記録装置２０に画像データと血流の情報とを送信し、画像データと血流の情報とを記録装置２０に記録する（ステップＳ４）。

続いて、生体情報生成部２１は、血流の情報を用いて生体情報として脈拍の情報を生成する（ステップＳ５：生体情報生成ステップ）。図３は、記録装置が三次元画像データを生成する様子を表す図である。図３に示すように、生体情報生成部２１は、センサ部１２が検出した血流の情報に基づいて、内視鏡１１が撮像した各画像が、収縮期に撮像された画像であるか、拡張期に撮像された画像であるかを判定する。この判定結果が各画像の脈拍の情報である。なお、収縮期とは、心臓が収縮して心臓から血液が送出されている期間である。一方、拡張期は、心臓が拡張して体血管抵抗に従って動脈圧が低下している期間である。収縮期と拡張期とでは、体内の臓器において血流量が異なるため、臓器の色調が異なる。

そして、記録部２２は、画像データと生体情報とを関連づけて記録する（ステップＳ６）。具体的には、画像データに含まれる各画像と、その画像の脈拍の情報とを紐づけて記録する。

更に、三次元画像生成部２３は、画像データから生体情報に基づいて画像データを選択することにより三次元画像データを生成する（ステップＳ７：三次元画像生成ステップ）。具体的には、図３に示すように、三次元画像生成部２３は、画像データから収縮期に撮像された収縮期フレームの画像を選択し、収縮期の三次元画像を生成する。更に、三次元画像生成部２３は、画像データから拡張期に撮像された拡張期フレームの画像を選択し、拡張期の三次元画像を生成する。なお、三次元画像生成部２３は、各画像において特徴点を抽出し、時系列順に前後の画像の特徴点をつなぎ合わせることにより三次元画像を生成する。三次元画像生成部２３が生成した収縮期三次元画像及び拡張期三次元画像は、記録部２２に記録される。

続いて、画像観察装置３０の取得部３２１は、三次元画像データと生体情報とを取得する（ステップＳ８）。具体的には、取得部３２１は、記録装置２０の記録部２２から収縮期三次元画像及び拡張期三次元画像を取得する。

そして、画角情報生成部３２２は、入力装置３１が受け付けた情報に基づいて画角情報を生成する（ステップＳ９：画角情報生成ステップ）。具体的には、画角情報生成部３２２は、第２の医師による入力装置３１に対する操作に基づいて、時間変化する画角情報を生成する。

更に、二次元画像生成部３２３は、三次元画像を生体情報及び画角情報に基づいて観察することにより得られる二次元画像データを生成する（ステップＳ１０：二次元画像生成ステップ）。図４は、画像観察装置が二次元画像データを生成する様子を表す図である。図４に示すように、二次元画像生成部３２３は、脈拍の情報に基づいて仮想的な脈拍の位相を生成する。この位相は、脈拍の情報を用いてもよいし、脈拍の情報に基づいて周期や振幅等の平均値を算出して得られるものであってもよい。そして、二次元画像生成部３２３は、位相と画角情報とに基づいて、収縮期三次元画像又は拡張期三次元画像のうち位相が対応する三次元画像から、第２の医師が指示した位置及び角度の二次元画像データを生成する。

以上説明したように、実施の形態によれば、第２の医師は、仮想的に脈動しており血流も変化している被検体の体内を観察することができる。すなわち、第２の医師は、被検体の体内を直接内視鏡１１を用いて観察しているのに近い状態で観察を行うことができるためより観察しやすい。

また、生体情報として、呼吸の情報を用いる場合、第２の医師は、仮想的に呼吸で動く被検体の体内を観察することができる。すなわち、第２の医師は、被検体の体内を直接内視鏡１１を用いて観察しているのに近い状態で観察を行うことができるためより観察しやすい。

なお、上述した実施の形態では、仮想的な脈拍を生成して被検体の体内を観察する例を説明したが、収縮期三次元画像又は拡張期三次元画像をそのまま観察してもよい。

（変形例１）
図５は、変形例１に係る観察システムの構成を示すブロック図である。図５に示すように、観察システム１Ａにおいて記録装置２０Ａは、生体情報に応じて異なる形状の変化を低減させるとともに、生体情報に応じて異なる色調の変化を強調する補正を施す画像補正部２４Ａを更に備える。具体的には、画像補正部２４Ａは、図３に示す収縮期三次元画像及び拡張期三次元画像の形状情報及び色調情報に対して補正を施す。なお、形状情報は、例えば三次元画像を生成する際に抽出された特徴点の三次元の座標値であり、色調情報は、例えば特徴点のＲＧＢ信号値である。

収縮期三次元画像の形状情報をＳｓ、拡張期三次元画像の形状情報をＳｅ、補正後の収縮期三次元画像の形状情報をＳｓ’、補正後の拡張期三次元画像の形状情報をＳｅ’、補正の係数をｋｓとすると、以下の式（１）及び（２）により三次元画像に対して形状の変化を低減させる補正を施すことができる。
Ｓｓ’＝Ｓｓ＋ｋｓ（Ｓｅ−Ｓｓ）、ただし０＜ｋｓ＜０．５
・・・（１）
Ｓｅ’＝Ｓｅ−ｋｓ（Ｓｅ−Ｓｓ）、ただし０＜ｋｓ＜０．５
・・・（２）

また、収縮期三次元画像の色調情報をＴｓ、拡張期三次元画像の色調情報をＴｅ、補正後の収縮期三次元画像の色調情報をＴｓ’、補正後の拡張期三次元画像の色調情報をＴｅ’、補正の係数をｋｔとすると、以下の式（３）及び（４）により三次元画像の色調の変化を強調させる補正を施すことができる。
Ｔｓ’＝Ｔｓ＋ｋｓ（Ｔｅ−Ｔｓ）、ただしｋｔ＜０・・・（３）
Ｔｅ’＝Ｔｅ−ｋｓ（Ｔｅ−Ｔｓ）、ただしｋｔ＜０・・・（４）

以上説明したように、画像補正部２４Ａが補正を施すことにより、三次元画像生成部２３が生成した収縮期三次元画像と拡張期三次元画像との間で、形状の変化が少なくなるため、第２の医師が観察する際に二次元画像データにおいて脈動等による不要な動きがなく観察しやすい。更に、画像補正部２４Ａが補正を施すことにより、収縮期三次元画像と拡張期三次元画像との間で、色調の変化が大きくなるため、第２の医師が観察する際に二次元画像データにおいて発赤や腫瘍等の色調が異なる部分が観察しやすい。

なお、上述した変形例１では、画像補正部２４Ａが収縮期三次元画像と拡張期三次元画像との形状及び色調をそれぞれ補正する例を説明したがこれに限られない。三次元画像生成部２３は、全ての画像を用いて三次元画像の形状を生成し、生成した三次元画像の形状に対して収縮期の色調情報を用いて収縮期三次元画像を生成するとともに、生成した三次元画像の形状に対して拡張期の色調情報を用いて拡張期三次元画像を生成してもよい。そして、画像補正部２４Ａは、収縮期三次元画像と拡張期三次元画像との色調のみ上述した式（３）及び（４）を用いて補正してもよい。同様に、画像補正部２４Ａは、三次元画像生成部２３が生成した三次元画像の形状のみを補正してもよい。

また、上述した変形例１では、画像補正部２４Ａが、収縮期三次元画像及び拡張期三次元画像に補正を施す例を説明したがこれに限られない。画像補正部２４Ａは、例えば内視鏡１１が生成した画像データに補正を施し、三次元画像生成部２３が、補正された画像データを用いて三次元画像データを生成してもよい。

（変形例２）
図６は、変形例２に係る観察システムの構成を示すブロック図である。図６に示すように、観察システム１Ｂにおいて内視鏡観察システム１０Ｂの画像処理装置１３Ｂは、生体情報に応じて内視鏡１１が撮像するタイミングを制御する撮像制御部１３１Ｂを更に備える。その結果、例えば血流が最大や最小になるタイミングで撮像することができる。すると、第２の医師は、収縮期と拡張期との差が大きい状態で観察を行うことができるため観察しやすい。

（変形例３）
図７は、変形例３に係る観察システムの構成を示すブロック図である。図７に示すように、観察システム１Ｃにおいて内視鏡観察システム１０Ｃは、センサ部を有しない。

生体情報生成部２１は、記録部２２に記録されている画像データの時間変化に基づいて生体情報を生成する。

図８は、特徴点の信号値から生体情報を生成する様子を表す図である。図８に示すように、被検体の体内は血流によって色調が時間変化する。生体情報生成部２１は、三次元画像を生成する際に抽出された特徴点のＲＧＢ信号値の時間変化に基づいて生体情報を生成する。具体的には、生体情報生成部２１は、特徴点のＲ成分やＢ成分の信号値の時間変化に基づいて、生体情報として図３に示すような脈拍の情報を生成する。なお、生体情報生成部２１は、画像全体の色調の時間変化や所定の画像処理により抽出した領域の色調の時間変化等に基づいて脈拍の情報を生成してもよい。また、生体情報生成部２１は、Ｒ成分やＢ成分等のいずれか１つの色成分の情報に基づいて脈拍の情報を生成してもよいが、各色成分の信号値に対して所定の演算を施すことにより脈拍の情報を生成してもよい。

図９は、特徴点の座標値から生体情報を生成する様子を表す図である。図９に示すように、被検体内の臓器の位置は脈動によって時間変化する。生体情報生成部２１は、三次元画像を生成する際に抽出された特徴点の座標の時間変化に基づいて生体情報を生成する。具体的には、生体情報生成部２１は、特徴点の座標の時間変化に基づいて、生体情報として図３に示すような脈拍の情報を生成する。なお、生体情報生成部２１は、特徴点に限らず、画像から検出した輪郭線等の座標の時間変化に基づいて脈拍の情報を生成してもよい。

さらなる効果や変形例は、当業者によって容易に導き出すことができる。よって、本発明のより広範な態様は、以上のように表し、かつ記述した特定の詳細及び代表的な実施の形態に限定されるものではない。従って、添付のクレーム及びその均等物によって定義される総括的な発明の概念の精神又は範囲から逸脱することなく、様々な変更が可能である。

１、１Ａ、１Ｂ、１Ｃ 観察システム
２ ネットワーク
１０、１０Ｂ、１０Ｃ 内視鏡観察システム
１１ 内視鏡
１２ センサ部
１３、１３Ｂ、３２ 画像処理装置
１４、３３ 表示装置
２０、２０Ａ 記録装置
２１ 生体情報生成部
２２ 記録部
２３ 三次元画像生成部
２４Ａ 画像補正部
３０ 画像観察装置
３１ 入力装置
１３１Ｂ 撮像制御部
３２１ 取得部
３２２ 画角情報生成部
３２３ 二次元画像生成部

Claims (7)

1. 被検体の生体情報を生成する生体情報生成部と、
   内視鏡により生成されて時系列に並べられている画像データを、前記生体情報と関連づけて記録する記録部と、
   前記画像データから前記生体情報に基づいて画像データを選択して三次元画像データを生成する三次元画像生成部と、
   を備え、
   前記生体情報生成部は、前記画像データの時間変化に基づいて前記生体情報を生成する記録装置。
2. 前記生体情報に応じて異なる形状の変化を低減させる補正、又は、前記生体情報に応じて異なる色調の変化を強調する補正の少なくともいずれか一方を施す画像補正部を更に備える請求項１に記載の記録装置。
3. 内視鏡により生成されて時系列に並べられている画像データの時間変化に基づいて生成された被検体の生体情報に基づいて画像データを選択することにより生成された三次元画像データを取得する取得部と、
   前記被検体を観察する位置及び角度の入力を受け付ける入力装置が受け付けた情報に基づいて画角情報を生成する画角情報生成部と、
   前記三次元画像を前記生体情報及び前記画角情報に基づいて観察することにより得られる二次元画像データを生成する二次元画像生成部と、
   を備える画像観察装置。
4. 被検体の生体情報を生成する生体情報生成部と、
   内視鏡により生成されて時系列に並べられている画像データを、前記生体情報と関連づけて記録する記録部と、
   前記画像データから前記生体情報に基づいて画像データを選択して三次元画像データを生成する三次元画像生成部と、
   前記被検体を観察する位置及び角度の入力を受け付ける入力装置が受け付けた情報に基づいて画角情報を生成する画角情報生成部と、
   前記三次元画像を前記生体情報及び前記画角情報に基づいて観察することにより得られる二次元画像データを生成する二次元画像生成部と、
   を備え、
   前記生体情報生成部は、前記画像データの時間変化に基づいて前記生体情報を生成する観察システム。
5. 前記生体情報に応じて前記内視鏡が撮像するタイミングを制御する撮像制御部を更に備える請求項４に記載の観察システム。
6. 生体情報生成部が、内視鏡により生成されて時系列に並べられている画像データの時間変化に基づいて被検体の生体情報を生成し、
   三次元画像生成部が、前記画像データから前記生体情報に基づいて画像データを選択することにより三次元画像データを生成し、
   画角情報生成部が、前記被検体を観察する位置及び角度の入力を受け付ける入力装置が受け付けた情報に基づいて画角情報を生成し、
   二次元画像生成部が、前記三次元画像を前記生体情報及び前記画角情報に基づいて観察することにより得られる二次元画像データを生成する観察システムの制御方法。
7. 生体情報生成部が、内視鏡により生成されて時系列に並べられている画像データの時間変化に基づいて被検体の生体情報を生成し、
   三次元画像生成部が、前記画像データから前記生体情報に基づいて画像データを選択することにより三次元画像データを生成し、
   画角情報生成部が、前記被検体を観察する位置及び角度の入力を受け付ける入力装置が受け付けた情報に基づいて画角情報を生成し、
   二次元画像生成部が、前記三次元画像を前記生体情報及び前記画角情報に基づいて観察することにより得られる二次元画像データを生成すること、
   を観察システムに実行させる観察システムの作動プログラム。

Images