JPWO2013111684A1 - 医療情報記録装置 - Google Patents

Abstract

医療情報記録装置は、複数の入力端子を有して複数の撮像装置からの医療画像を入力可能であると共に、前記複数の入力端子のうちのいずれの入力端子を介して前記医療画像が入力されたかを検出して検出結果を出力する入力部と、前記複数の入力端子を介して入力された１つ以上の前記医療画像を予め規定された複数の合成パターンのうちの１つの合成パターンに従って合成処理するものであって、前記入力部の検出結果に基づいて医療シーン又は前記医療シーンの切換りを判定し、判定結果に基づいて前記合成パターンを切換えて、前記入力された１つ以上の医療画像に基づく合成画像を出力する画面合成部と、前記合成画像を１つの画像ファイルとして記録する記録処理部とを具備する。

Description

本発明は、内視鏡等の医療装置によって得られる画像を記録する医療情報記録装置に関する。

従来、内視鏡は医療用分野等において広く採用されている。内視鏡によって得られる医療画像は、診断や症例の記録のために、種々のメディアに記録される。近年、記録媒体の大容量化に伴って、内視鏡からの動画像の記録も行われるようになってきた。例えば、画像処理に応じた録画処理を行う装置が開示されている。このような医療画像の録画処理はデジタル化されており、医療画像はコンピュータによって読み出し可能なファイル形式にて保存されることがある。

ところで、医療機関においては、内視鏡やＸ線、超音波診断装置等の多くのモダリティを組み合わせて、内視鏡画像、超音波画像、Ｘ線画像を記録すると共に、更に術者の手元の画像や室内の様子の画像等の種々の画像（以下、医療画像という）を記録することがある。この場合において、記録する複数の医療画像を１つの医療画像に合成して記録することも可能である（例えば、日本国特開２００９−３９２４３１号公報参照）。例えば、内視鏡治療中において、内視鏡画像と術者の手元の画像とが同期して合成画像として同時に記録された場合には、病変部を的確に捉えるための内視鏡のアプローチ方法と実際の内視鏡画像の見え方が一目で把握できるため、若手医師への教育用として極めて有用である。

記録装置は複数の入力コネクタを有しており、記録時には、各コネクタに必要なモダリティを接続することで、必要な合成画像を得ることができる。しかし、比較的小規模の病院等においては、記録装置等を頻繁に移動させることも多く、記録前に各モダリティと記録装置の接続作業が必要な場合が多い。更に、合成画像を記録するためには、合成する画像が入力されるコネクタを指定すると共に、合成画像生成のための設定操作を行う必要があり、医療画像の合成画像を記録するためには、比較的煩雑な作業が必要である。

ところで、医療行為の内容によっては、記録すべき医療画像の種類が異なるだけでなく、医療行為の途中で記録すべき医療画像も異なることが考えられる。例えば、２台のモダリティからの医療画像のうち一方の医療画像は医療行為の全時間帯において記録するのに対し、他方の医療画像は一部の時間帯にのみ記録を行う場合等が考えられる。具体的には、病変部の表層を捉えた内視鏡画像は常時記録し続け、病変部の浸達度を診断するために一時的に使用される超音波診断装置からの超音波画像はその時だけ記録される場合である。

しかしながら、術者は医療行為に専念する必要があることから、一旦医療行為が開始されると、記録装置の煩雑な設定変更等を行うことはできない。従って、複数台のモダリティを接続してこれらの医療画像の合成画像を記録しようとする場合には、各モダリティの使用未使用の時間帯に拘わらず、全時間帯において合成画像が生成されることになる。このため、各モダリティの使用状況によっては、合成画像の一部は、無画像である黒表示となってしまう。 つまり、病変部を同定するまでの過程において、一部画像が欠けた状態で記録されることとなり、教育用に活用する上で、適切ではないものとなってしまう。

本発明は、記録途中において、記録を停止させることなく、複数のモダリティからの医療画像の合成を制御することができる医療情報記録装置を提供することを目的とする。

本発明の一態様に係る医療情報記録装置は、複数の入力端子を有して複数の撮像装置からの医療画像を入力可能であると共に、前記複数の入力端子のうちのいずれの入力端子を介して前記医療画像が入力されたかを検出して検出結果を出力する入力部と、前記複数の入力端子を介して入力された１つ以上の前記医療画像を予め規定された複数の合成パターンのうちの１つの合成パターンに従って合成処理するものであって、前記入力部の検出結果に基づいて医療シーン又は前記医療シーンの切換りを判定し、判定結果に基づいて前記合成パターンを切換えて、前記入力された１つ以上の医療画像に基づく合成画像を出力する画面合成部と、前記合成画像を１つの画像ファイルとして記録する記録処理部とを具備する。

また、本発明の他の態様に係る医療情報記録装置は、複数の入力端子を有して複数の撮像装置からの医療画像を入力可能であると共に、前記複数の入力端子のうちのいずれの入力端子を介して前記医療画像が入力されたかを検出して検出結果を出力する入力部と、前記複数の入力端子を介して入力された１つ以上の前記医療画像を予め規定された複数の合成パターンのうちの１つの合成パターンに従って合成処理するものであって、前記入力部の検出結果及び前記複数の入力端子を介して入力された１つ以上の前記医療画像の画像解析結果に基づいて医療シーン又は前記医療シーンの切換りを判定し、判定結果に基づいて前記合成パターンを切換えて、前記入力された１つ以上の医療画像に基づく合成画像を出力する画面合成部と、前記合成画像を１つの画像ファイルとして記録する記録処理部とを具備する。

本発明の第１の実施の形態に係る医療情報記録装置が組み込まれた医療情報記録システムを示すブロック図。 図１中の信号検出部２４，２５の具体的な構成の一例を示すブロック図。 本実施の形態における医療画像の記録処理を説明するためのタイミングチャート。 患者情報毎に作成されるフォルダを説明するための説明図。 第１の実施の形態の動作を説明するためのフローチャート。 本発明の第２の実施の形態において採用される動作フローを示すフローチャート。 合成パターンの例を示す説明図。 医療画像の色を判定する色判定フローの一例を示すフローチャート。 横軸に波長をとり縦軸に各ブロックのレベルをとって、各ブロックにおける色分布を示すグラフ。 医療画像の輪郭を判定する輪郭判定フローの一例を示すフローチャート。 内視鏡画像の輪郭を説明するための説明図。 第２変形例の構成を示すブロック図。 第２変形例の動作を説明するためのフローチャート。 第２変形例の合成パターンを説明するための説明図。 本発明の第３の実施の形態を示すブロック図。 第２の表示モードの表示例を示す説明図。 本発明の第４の実施の形態を示すブロック図。 内蔵ＨＤＤ３１の記録領域を説明するための説明図。 データベース３１ａとして記録される管理情報の一例である管理テーブルを示す説明図。 記録メディアの再生制御を説明するためのフローチャート。

以下、図面を参照して本発明の実施の形態について詳細に説明する。

（第１の実施の形態）
図１は本発明の第１の実施の形態に係る医療情報記録装置が組み込まれた医療情報記録システムを示すブロック図である。

本実施の形態は医療情報を出力する装置として内視鏡プロセッサ１０及び超音波装置１２を用いた例について説明する。内視鏡プロセッサ１０は、図示しない内視鏡等からの画像を取り込んで画像信号処理を行い、内視鏡画像等の医療画像を生成することができる。内視鏡プロセッサ１０からの医療画像は医療情報記録装置２０及びモニター４０に供給される。また、超音波装置１２は、超音波画像等の医療画像を生成して、医療情報記録装置２０に出力する。

入力装置１１は、図示しないキーボードや内視鏡プロセッサ１０の本体に設けられたボタン、スイッチ（図示せず）等によって構成され、内視鏡プロセッサ１０の画像処理に対する指示操作や、患者情報の入力操作等を行うことができるようになっている。内視鏡プロセッサ１０は、この患者情報を医療情報記録装置２０に出力することができる。

また、内視鏡プロセッサ１０は、医療情報記録装置２０を制御するための制御情報を発生する。制御情報としては、動画像である医療画像の録画開始を指示する録画開始情報、その録画終了を指示する録画終了情報、静止画像である医療画像の録画を指示する静止画録画情報、検査の終了を指示する検査終了情報等がある。例えば、内視鏡プロセッサ１０は、内視鏡に設けられたレリーズボタンや録画開始ボタン等の各種スコープ操作に応答して、画像処理が制御されると共に、各種スコープ操作に応じた制御情報を発生して医療情報記録装置２０に出力することができるようになっている。

更に、内視鏡プロセッサ１０は、内視鏡等の出力に基づいて生成した医療画像に、患者情報をスーパーインポーズして出力することができる。この場合において、内視鏡プロセッサ１０は、患者情報に基づく表示領域と内視鏡画像に基づく表示領域とを有する医療画像を生成することもできる。

モニター４０は、内視鏡プロセッサ１０からの医療画像を画面上に表示することができるようになっている。図１の例では、モニター４０の画面右側の領域４１及び左側の領域４２〜４４に、夫々内視鏡画像、患者名、患者ＩＤ及び検査情報が表示されることを示している。

医療情報記録装置２０は、内視鏡プロセッサ１０との間で情報の授受を行うインターフェース（以下、Ｉ／Ｆという）２１、内視鏡プロセッサ１０からの医療画像を取り込むＩ／Ｆ２２及び超音波装置１２からの医療画像を取り込むＩ／Ｆ２３を有している。Ｉ／Ｆ２１は例えばＲＳ−２３２Ｃ規格に基づくインターフェースであり、内視鏡プロセッサ１０からの患者情報及び制御情報を取り込む。Ｉ／Ｆ２２，２３は画像伝送に適したインターフェースであり、各種モダリティからの医療画像を取り込む。

なお、図１では、２系統のインターフェースのみを示し、内視鏡プロセッサ１０及び超音波装置１２を各インターフェースに接続する例を示しているが、３系統以上のインターフェースを有していてもよい。また、各インターフェースは複数の入力端子を備えることが可能である。例えば、入力端子として、ＤＶＩ(Digital Visual Interface)端子、ＳＤＩ(Serial Digital Interface)端子、ＲＧＢ端子、Ｙ／Ｃ端子、ＶＩＤＥＯ端子等の複数種類の端子を採用することができる。これらの入力端子には、内鏡プロセッサや超音波装置以外にも、例えば、術野カメラ、Ｘ線観測装置、内視鏡プロセッサ１０とは別の内視鏡プロセッサ等を接続可能である。

医療情報記録装置２０は、Ｉ／Ｆ２１を介して、内視鏡に設けられた録画開始ボタン及び録画終了ボタンの操作に応答して発生した制御情報が与えられると、Ｉ／Ｆ２２を介して取り込まれた動画像である医療画像（以下、本編動画ともいう）の録画の開始、及び当該録画の終了を行うようになっている。

本実施の形態においては、Ｉ／Ｆ２２，２３を介して入力された映像信号はそれぞれ信号検出部２４，２５に供給されるようになっている。信号検出部２４，２５は制御部２８に制御されて、Ｉ／Ｆ２２，２３を介して映像信号が入力された否かを検出することができるようになっている。

図２は図１中の信号検出部２４，２５の具体的な構成の一例を示すブロック図である。なお、信号検出部２４，２５は相互に同一構成であり、図２では一方の信号検出部２４のみを示している。図２の例はＩ／Ｆ２２，２３が夫々４系統の入力端子を有する例を示している。

図２において、Ｉ／Ｆ２２の４系統の出力端は信号検出部２４の各入力端子Ｉ１〜Ｉ４に供給される。入力端子Ｉ１〜Ｉ４は夫々ＶＩＤＥＯ端子、Ｙ／Ｃ端子、ＳＤＩ端子及びＤＶＩ端子である。これらの入力端子Ｉ１〜Ｉ４を介して入力された映像信号は検出部２４ａに供給されると共にスイッチ部２４ｂにも供給される。検出部２４ａは、制御部２８に制御されて、各入力端子Ｉ４〜Ｉ４に入力された映像信号を検出して、検出結果を制御部２８に出力する。制御部２８は、信号検出部２４から映像信号の検出結果が与えられると、スイッチ部２４ｂを制御して、映像信号が検出された入力端子を選択して、信号検出部２４に入力された映像信号を出力するようになっている。

内視鏡プロセッサ１０の信号コネクタをＩ／Ｆ２２の各入力端子のいずれか１つに接続して、内視鏡プロセッサ１０から映像信号が出力されることにより、制御部２８は、内視鏡プロセッサ１０からの映像信号が入力されたことを検出すると共に、内視鏡プロセッサ１０からの映像信号をスイッチ部２４ｂから出力させることができる。同様に、Ｉ／Ｆ２３の入力端子のいずれか１つに超音波装置１２の信号コネクタを接続して超音波装置１２から映像信号を出力させることにより、制御部２８は、超音波装置１２からの映像信号が入力されたことを検出すると共に、超音波装置１２からの映像信号をスイッチ部２４ｂから出力させることができる。

このように、信号検出部２４，２５の検出結果によって、制御部２８は、各Ｉ／Ｆ２２，２３を介して映像信号が入力されたか否かを判定することができ、また、これらの映像信号がいずれの種類の入力端子に入力された場合でも、入力された映像信号を取り込むことができる。つまり、術者は医療行為中に録画を停止し機器設定変更を行うこともなく、継続して医療行為を継続することができる。制御部２８は、Ｉ／Ｆ２２，２３のいずれから映像信号が入力されるかを示す合成制御信号を生成して画面合成演算部２９に出力するようになっている。

信号検出部２４，２５から出力された映像信号は夫々バッファメモリ２６，２７に供給される。バッファメモリ２６，２７は入力された映像信号を一旦保持した後、画面合成演算部２９に出力する。画面合成演算部２９は、入力映像信号に対して所定の映像信号処理を施す。

本実施の形態においては、画面合成演算部２９は、制御部２８からの合成制御信号によって、Ｉ／Ｆ２２，２３の一方から映像信号が入力されたことが示された場合には、入力された映像信号に基づく医療画像を出力し、Ｉ／Ｆ２２，２３の両方から映像信号が入力されたことが示された場合には、入力された２種類の映像信号に基づく医療画像に対する画面合成を行い、合成画像を出力することができるようになっている。画面合成演算部２９は、画面合成に際して、予め用意された複数の合成パターン、例えば、ピクチャーインピクチャー（ＰＩＰ）やピクチャーアウトピクチャー（ＰＯＰ）等の合成パターンの中から、制御部２８によって指定された合成パターンを用いて画面合成を行って、動画の医療画像（本編動画）を出力する。

画面合成演算部２９は、生成した本編動画を記録処理部３０に出力する。記録処理部３０は、入力された本編動画を順次圧縮処理して内蔵ＨＤＤ３１に与えて記録する。なお、記録処理部３０は、例えば、Ｈ．２６４方式等の所定のエンコード方式に従ってエンコード処理を行って本編動画を圧縮する。こうして、内蔵ＨＤＤ３１に、本編動画が記録される。

本実施の形態においては、画面合成演算部２９は、記録途中であっても、制御部２８からの合成制御信号に従って画面合成が制御されるようになっている。例えば、Ｉ／Ｆ２２から内視鏡画像のみが入力されている状態では、画面合成演算部２９によって内視鏡画像のみによる本編動画が生成されて圧縮記録される。この記録途中において、Ｉ／Ｆ２３を介して超音波画像が入力され始めると、制御部２８からの合成制御信号に制御されて、画面合成演算部２９は、入力された内視鏡画像と超音波画像との画面合成を開始して合成画像を生成する。この合成画像が本編動画として記録処理部３０に供給され、本編動画の圧縮及び記録処理が継続される。

更に、この記録途中において、Ｉ／Ｆ２３を介した超音波画像の入力が停止すると、制御部２８からの合成制御信号に制御されて、画面合成演算部２９は、入力された内視鏡画像のみの本編動画を生成し、この本編動画が圧縮されて記録処理が継続される。なお、記録処理は、医療画像が入力される医療画像が存在するか否かに拘わらず、制御部２８に録画終了情報が入力されるまで継続される。制御部２８に録画終了情報が入力されると、制御部２８は記録処理部３０に録画の終了を指示する。記録処理部３０は、制御部２８によって録画の終了が指示されると、内蔵ＨＤＤ３１に記録している動画像のファイル化を行う。こうして、録画開始情報の入力から録画終了情報の入力までの期間に記録された本編動画が１ファイルとして記録される。

記録処理部３０は、内蔵ＨＤＤ３１に記録されている本編動画を外部メディア５１に与えて記録させることもできるようになっている。なお、外部メディアとしては、外付けハードディスクや半導体記録媒体等の各種記録メディアを含む。

図３は本実施の形態における医療画像の記録処理を説明するためのタイミングチャートであり、図３（ａ）は患者情報を示し、図３（ｂ）は録画開始情報を示し、図３（ｃ）は録画終了情報を示し、図３（ｄ）は医療画像Ｉｍａ入力を示し、図３（ｅ）は医療画像Ｉｍｂ入力を示し、図３（ｆ）は画面合成処理を示し、図３（ｇ）はメモリバッファへの出力を示している。

制御部２８は、図３（ａ）に示す患者情報がＩ／Ｆ２１を介して入力されると、患者情報毎のフォルダを内蔵ＨＤＤ３１内に作成する。

図４は患者情報毎に作成されるフォルダを説明するための説明図である。図４の例では、各患者に対応する患者フォルダが作成され、更に、患者フォルダのサブフォルダとして、本編動画が格納される動画フォルダが生成されることを示している。

図３（ｂ）に示す録画開始情報がＩ／Ｆ２１を介して入力されると、制御部２８は、本編動画の録画を開始する。内視鏡プロセッサ１０からの医療画像ＩｍａはＩ／Ｆ２２を介して医療情報記録装置２０に取り込まれ、Ｉ／Ｆ２２を介して信号検出部２４に供給される。信号検出部２４は映像信号が入力されたことを検出して制御部２８に検出結果を出力する。これにより、制御部２８は、信号検出部２４を制御して、入力された映像信号をバッファメモリ２６に出力させる（図３（ｇ））。映像信号は、バッファメモリ２６から画面合成演算部２９に供給される。

画面合成演算部２９は、入力された映像信号に対して所定の信号処理を施した後、医療画像Ｉｍａを圧縮した後記録処理部３０に与える（図３（ｆ））。記録処理部３０は入力された医療画像Ｉｍａを内蔵ＨＤＤ３１に与えて記録する。こうして、録画開始情報の発生と同時に、内視鏡プロセッサ１０からの映像信号に基づく医療画像の記録が開始される。

なお、本実施の形態においては、内蔵ＨＤＤ３１に医療画像等を記録する例を説明するが、医療画像等の記録先としては、外部ＨＤＤや各種記録メディア等の外部メディア５１を選択することができることは明らかである。

ここで、内視鏡プロセッサ１０からの医療画像に基づく記録途中において、Ｉ／Ｆ２３に接続されている超音波装置１２の電源を投入して、超音波装置１２から超音波画像を出力させるものとする。この超音波画像は、Ｉ／Ｆ２３を介して信号検出部２５に供給される（図３（ｅ））。信号検出部２５は映像信号が入力されたことを検出して検出結果を制御部２８に出力する。これにより、制御部２８は、Ｉ／Ｆ２２だけでなくＩ／Ｆ２３にも映像信号が入力されたことを検出して、Ｉ／Ｆ２３を介して入力された映像信号をバッファメモリ２７を介して画面合成演算部２９に与えると共に、２入力を画面合成するための合成制御信号を画面合成演算部２９に出力する。

画面合成演算部２９は、合成制御信号に基づいて、入力された２つの医療画像を画面合成して、合成画像を生成し、本編動画として出力を続ける。こうして、記録処理部３０に入力される本編動画は、１種類の内視鏡画像に基づく動画像から内視鏡画像と超音波画像の２種類の画像に基づく合成画像の動画像に変化する。記録処理部３０が本編動画の圧縮処理及び記録処理を継続することで、内蔵ＨＤＤ３１に記録される本編動画は、１画面の動画像から２画面合成された動画像に変化する。

動画の医療画像である本編動画の録画は、図３（ｃ）に示す録画終了情報が入力されるまで継続される。制御部２８は、録画終了情報が入力されると、記録処理部３０を制御して、医療画像の録画を終了させる。記録処理部３０は、本編動画をファイル化し、このファイルを内蔵ＨＤＤ３１に作成された患者フォルダ内の本編動画用の動画フォルダ内に適宜のファイル名を付して記録する。

このように、本実施の形態においては、記録途中において、入力される映像信号が１種類から２種類に変化した場合でも、記録が停止されることなく、１種類の医療画像に基づく動画像から２種類の医療画像の合成画像に基づく動画像に変化するのみで、録画開始情報及び録画終了情報によって指定された動画録画期間の医療画像（本編動画）が１つの画像ファイルとして内蔵ＨＤＤ３１に記録される。

次に、このように構成された実施の形態の動作について図５のフローチャートを参照して説明する。

制御部２８は、図５のステップＳ１において、検査が開始されたか否かを判断する。例えば、患者情報の入力、録画開始操作、検査開始操作等の操作によって、制御部２８は検査が開始されたことを判断する。術者が入力装置１１を操作して患者情報を入力するものとする。この患者情報は、内視鏡プロセッサ１０から医療情報記録装置２０に供給される。患者情報は、Ｉ／Ｆ２１を介して制御部２８に取り込まれる（ステップＳ２）。

制御部２８は、入力された患者情報を解析し、患者情報に基づくフォルダ名の検査フォルダを内蔵ＨＤＤ３１内に作成する（ステップＳ３）。例えば、制御部２８は、患者ＩＤを含むフォルダ名の検査フォルダを作成する。また、制御部２８は、このフォルダ内に本編動画用の動画フォルダを作成する。

術者が図示しない内視鏡や内視鏡プロセッサ１０等に設けられた録画開始ボタンを押して、録画開始を指示するものとする。この操作によって、内視鏡プロセッサ１０は、例えば内視鏡からの内視鏡画像に患者情報をスーパーインポーズして生成した医療画像を医療情報記録装置２０に出力すると共に、録画開始情報を発生して医療情報記録装置２０に出力する。制御部２８は、Ｉ／Ｆ２１を介して録画開始情報を受信すると、Ｉ／Ｆ２２を介して入力される医療画像を取り込む。この医療画像は、信号検出部２４、バッファメモリ２６を介して画面合成演算部２９に与えられ、画面合成演算部２９の画像処理の後、本編動画として記録処理部３０に与えられ、記録処理部３０は本編動画を圧縮した後、内蔵ＨＤＤ３１に供給して記録を開始する（ステップＳ４）。

次のステップＳ５では、制御部２８によって、２入力が検出されたか否かの判定が行われる。本編動画の記録中において、超音波装置１２からの映像信号がＩ／Ｆ２３に供給されると、信号検出部２５の検出結果によって、制御部２８はＩ／Ｆ２２，２３の両方に映像信号が入力されたものと判定して、処理をステップＳ６に移行し、２画面合成処理を指示する。

Ｉ／Ｆ２３からの映像信号は、信号検出部２５及びバッファメモリ２７を介して画面合成演算部２９に与えられる。画面合成演算部２９には、制御部２８から２画面の画面合成処理を指示する合成制御信号が与えられており、画面合成演算部２９は、２入力の合成画像を生成して本編動画として記録処理部３０に出力する。記録処理部３０には、超音波装置１２からの映像信号の入力前後において、継続して本編動画が入力されており、記録処理部３０は、本編動画の入力、圧縮処理を継続し、圧縮画像を内蔵ＨＤＤ３１に供給して記録を続ける。

次に、合成画像の本編動画の記録途中において、超音波装置１２からの映像信号のＩ／Ｆ２３への供給が停止するものとする。制御部２８は、信号検出部２５の検出結果によって、入力はＩ／Ｆ２２からの映像信号のみになったものと判定して、２画面合成処理を停止するための合成制御信号を出力する。

これにより、画面合成演算部２９は、内視鏡画像のみに基づく本編動画を生成して記録処理部３０に出力する。記録処理部３０には、超音波装置１２からの映像信号の入力が停止する前後において、継続して本編動画が入力されており、記録処理部３０は、本編動画の入力、圧縮処理を継続し、圧縮画像を内蔵ＨＤＤ３１に供給して記録を続ける。

ステップＳ７では録画の終了が判定される。術者が録画終了ボタンを押すと、ステップＳ７において本編動画の録画中であるか否かが判定され、録画中でない場合には、ステップＳ８において、本編動画の録画処理が終了し、本編動画がファイル化される。この本編動画ファイルは、患者フォルダ内の本編動画用の動画フォルダ内に記録される。

２入力の画面合成処理は、Ｉ／Ｆ２２，２３に入力される映像信号の検出結果に応じて、記録途中においても変更可能であり、録画の開始から終了までの間、本編動画は入力に応じて単独の画像又は合成画像に変化しながら、１つの動画ファイルとして記録される。

このように本実施の形態においては、医療画像の記録途中において、記録されている医療画像とは異なる医療画像の入力又は入力の停止を検出し、この検出結果に基づいて、入力される１つ以上の医療画像の画面合成処理を制御しており、記録途中であっても入力の変化に応じた本編動画を１つの動画ファイルとして記録することができる。

（第２の実施の形態）
図６は本発明の第２の実施の形態において採用される動作フローを示すフローチャートである。図６において図５と同一の手順については同一符号を付して説明を省略する。本実施の形態のハードウェア構成は第１の実施の形態と同様であり、画面合成処理が第１の実施の形態と異なるのみである。

第１の実施の形態においては、制御部２８が設定した合成パターンに従って２画面合成処理を行う例について説明した。本実施の形態においては、医療画像の画像解析を行い、解析結果に基づいて自動的に最適な２画面合成パターンを選択するものである。一例として実際の術中内視鏡において、通常病変部までは内視鏡と術野カメラからの画像を画面合成して記録する。術者の手元と処置の仕方を捉えることで、病変部までのアプローチを的確に把握できる教育用データとなる。この時、一番重要な画像は内視鏡画像であることから親画面配置とし、直接医療に関わらない術野画像は子画面配置とするピクチャーインピクチャーの画面合成が最適となる。次に、病変部に到達後は、別の内視鏡プロセッサからの内視鏡画像を画面合成して記録する。管腔臓器の切除範囲を2つの内視鏡画像を比較し同定するための教育用データとなる。この時、2つの内視鏡画像はともに重要なことからピクチャーアウトピクチャーの画面合成が最適となる。このように、術者が医療行為中に機器設定変更を行うこともなく、最適な画面合成により自動的に記録できることは、医療知識と処置精度の向上に寄与し、医療の効率化を実現できると言える。

本実施の形態においては、図５のステップＳ５における２入力の検出処理までは第１の実施の形態と同様である。図６は１入力として内視鏡プロセッサ１０からの映像信号に基づく医療画像Ｉｍａの記録処理が開始されている場合における２入力目に対する処理を示している。

図７は合成パターンの例を示す説明図である。図７（ａ），（ｂ）はピクチャーインピクチャー（ＰＩＰ）形式の合成パターンを示しており、図７（ａ）はＩ／Ｆ２２を介して入力された映像信号に基づく医療画像Ｉｍａを親画像とし、この親画像内に、Ｉ／Ｆ２３を介して入力された映像信号に基づく医療画像Ｉｍｂを子画面配置する例を示している。また、図７（ｂ）は、医療画像Ｉｍｂを親画像とし、この親画像内に、医療画像Ｉｍａを子画面配置する例を示している。

図７（ｃ），（ｄ）はピクチャーアウトピクチャー（ＰＯＰ）形式の合成パターンを示しており、図７（ｃ）はＩ／Ｆ２２を介して入力された映像信号に基づく医療画像Ｉｍａを画面左側に配置し、Ｉ／Ｆ２３を介して入力された映像信号に基づく医療画像Ｉｍｂを画面右側に配置する例を示している。また、図７（ｄ）は、医療画像Ｉｍｂを画面左側に配置し、医療画像Ｉｍａを画面右側に配置する例を示している。なお、図７（ｂ），（ｃ）の合成パターンにおいては、医療画像Ｉｍａ，Ｉｍｂのアスペクト比を変更させないために、画面の上下に無画部が設けられている。

図６のステップＳ２１においては、画面合成演算部２９によって、入力された医療画像の画像解析が行われる。画面合成演算部２９は、画像解析の結果に基づいて、ステップＳ２１において医療画像が黒っぽい画像であるか否かを判定し、ステップＳ２２において医療画像が赤っぽい色であるか否かを判定する。

例えば、医療画像が内視鏡画像である場合には、臓器や血の色等の影響によって、入力される医療画像は全体的に赤っぽい色となる。また、例えば、医療画像がＸ線画像や超音波画像である場合には、入力される医療画像は白黒である。また、医療画像が術場の風景等の画像である場合には、入力される医療画像は全体的に緑色や青色系統の色となる。

図８は医療画像の色を判定する色判定フローの一例を示すフローチャートである。また、図９は横軸に波長をとり縦軸に各ブロックのレベルをとって、各ブロックにおける色分布を示すグラフである。

図８のステップＳ３１において、画面合成演算部２９は、複数フレームの医療画像を抽出し、ステップＳ３２において、各フレームの画像をブロックに分割する。画面合成演算部２９は、各ブロックの色分布を解析する。図９は所定の医療画像の所定のブロックにおける色分布の一例を示している。図９の例は対象ブロックについては波長が６００ｎｍのレベルが比較的高いことを示しており、対象ブロックは赤っぽい色であることが分かる。

画面合成演算部２９は、ステップＳ３４において、各ブロックの色分布の解析結果について１フレーム分の総和を求めて色分布平均値を算出する。更に、画面合成演算部２９は、ステップＳ３５において、各フレームの色分布平均値から抽出フレーム分の平均的色分布を算出する。画面合成演算部２９は、平均的色分布と各色に対応して規定されている色閾値との比較によって、医療画像の色を判定する（ステップＳ３６）。

画面合成演算部２９は、ステップＳ２１において、医療画像の解析結果が黒っぽい画像であることを示した場合には、次のステップＳ２４において、ＰＩＰ形式の合成パターンを選択し、２入力目の医療画像を子画面として合成する。また、画面合成演算部２９は、医療画像が黒っぽい画像でなく、ステップＳ２２において赤っぽい画像でもないことを検出した場合には、ステップＳ２４において、ＰＩＰ形式の合成パターンを選択し、２入力目の医療画像を子画面として合成する。また、画面合成演算部２９は、医療画像が黒っぽい画像でなく、ステップＳ２２において赤っぽい画像であることを検出した場合には、ステップＳ２３において、ＰＯＰ形式の合成パターンを選択し、２入力目の医療画像を画面の右側又は左側に配置して合成する。

他の処理は図５のフローと同様である。

次に、このように構成された実施の形態の動作について説明する。

いま、１入力目の映像信号として内視鏡画像が医療情報記録装置２０のＩ／Ｆ２２に入力されているものとする。内視鏡画像は、画面合成演算部２９によって処理され、記録処理部３０はこの内視鏡画像に基づく本編動画の内蔵ＨＤＤ３１への記録処理を開始する（ステップＳ４）。

ここで、２入力目の医療画像がＩ／Ｆ２３に入力されるものとする。この医療画像は画面合成演算部２９に与えられ、画面合成演算部２９は画像解析によって、２入力目の医療画像の色を判定する。図１の接続の場合には２入力目は超音波画像であり、画面合成演算部２９は、ステップＳ２１において、２入力目の画像の色が黒っぽいものと判定して、処理をステップＳ２４に移行する。ステップＳ２４では、画面合成演算部２９は、図７（ａ）に示すように、１入力目の内視鏡画像（医療画像Ｉｍａ）を親画像とし、２入力目の超音波画像（医療画像Ｉｍｂ）を子画面配置する。

内視鏡診断等の画像としては、通常、超音波画像よりも内視鏡画像が観察し易い方が好まれる。本実施の形態においては、画像解析によって医療画像の色を判定することで、医療画像の種類を判定しており、この判定結果に従って画面合成のパターンを選択することで、表示等に適した画面合成を自動的に行うことができる。

なお、２入力目が手術場の様子を撮影した医療画像である場合にも、ステップＳ２２からステップＳ２４に処理が移行して、２入力目が子画面表示される。また、２入力目が図示しない他の内視鏡プロセッサからの内視鏡画像である場合には、ステップＳ２２からステップＳ２３に処理が移行して、図７（ｃ），（ｄ）に示すように、入力された２つの医療画像を例えば左右に配置したピクチャーアウトピクチャーによって画面合成が行われる。なお、入力装置１１を操作することで、合成パターンを図７（ａ）乃至（ｄ）の間で強制的に変更するようにしてもよい。

このように本実施の形態においては、第１の実施の形態と同様の効果が得られるとともに、画像の色を解析することで、表示に適した画面合成を自動的に行うことができる。

（第１変形例）
第２の実施の形態における説明では、画像解析によって医療画像の色を判定し、色の判定結果に従って合成パターンを決定する例について説明したが、合成パターンの判定基準を医療画像に描写された輪郭を基準にしてもよい。例えば、内視鏡画像は、手術場の様子を撮影した画像に比べて、絵柄が粗く、輪郭が少ないことが考えられる。そこで、画像の輪郭を検出することで、内視鏡画像とその他の画像を判定することができる。

図１０は医療画像の輪郭を判定する輪郭判定フローの一例を示すフローチャートである。図１０において図８と同一の手順には同一符号を付して説明を省略する。図１１は内視鏡画像の輪郭を説明するための説明図である。

図１０のステップＳ４３において、画面合成演算部２９は、各ブロックの映像輪郭の線密度を解析する。図１１（ａ）は内視鏡画像を示し、図１１（ｂ）は映像輪郭を示している。画面６１の中央には、内視鏡画像６２が配置されている。内視鏡画像６２中には、内蔵６３及び鉗子６４が描写されている。例えば、画面合成演算部２９は、この内視鏡画像６２を１点鎖線に示す境界で４つのブロックに分割する。図１１（ｂ）は図１１（ａ）の４つのブロックのうちの右上のブロックについて、画面合成演算部２９が検出した映像輪郭を破線にて示している。図１１（ｂ）に示すように、内視鏡画像６２内のブロックの映像輪郭の線密度は比較的低い。

画面合成演算部２９は、ステップＳ４４において、各ブロックの輪郭線密度の解析結果について１フレーム分の総和を求めて輪郭線密度の平均値を算出する。更に、画面合成演算部２９は、ステップＳ４５において、各フレームの輪郭線密度の平均値から抽出フレーム分の平均的輪郭線密度を算出する。画面合成演算部２９は、平均的輪郭線密度と各画像に対応して規定されている平均的輪郭線密度との比較によって、医療画像の種類を判定する（ステップＳ４６）。

例えば、画面合成演算部２９は、平均的輪郭線密度が所定の閾値以下の場合には、対象の医療画像は内視鏡画像であるものと判定し、平均的輪郭線密度が閾値を超える場合には、対象の医療画像は内視鏡画像以外の画像、例えば、手術場の様子を撮影した画像であるものと判定する。

映像輪郭の判定結果に基づいて、ＰＩＰ又はＰＯＰ形式の合成パターンを選択して、画面合成を行うことは図６と同様である。

更に、他の変形例として、１入力目の内視鏡画像と２入力目の医療画像との画像比較によって、２入力目の医療画像が内視鏡画像であるか内視鏡画像以外の画像であるかを判定してもよい。

（第２変形例）
図１２乃至図１４は第２変形例を示しており、３入力以上の入力がある場合の例を示している。図１２は第２変形例の構成を示すブロック図であり、図１３は第２変形例の動作を説明するためのフローチャートであり、図１４は第２変形例の合成パターンを説明するための説明図である。図１２において図１と同一の構成要素には同一符号を付して説明を省略する。また、図１３において図５と同一の手順には同一符号を付して説明を省略する。

第２変形例は、入力を４系統にした点が図１と異なるのみである。なお、図１２においては、図面の簡略化のために、入力装置１１、内視鏡プロセッサ１０及びモニター４０の図示を省略している。

図１２では医療画像を出力する装置として、内視鏡プロセッサ１０（図１参照）及び超音波装置１２の外に、心電図装置７７及び術野カメラ７８を採用している。心電図装置７７からの医療画像はＩ／Ｆ７１を介して医療情報記録装置７０に取り込まれ、術野カメラ７８からの医療画像はＩ／Ｆ７２を介して医療情報記録装置７０に取り込まれる。

Ｉ／Ｆ７１を介して入力された映像信号は信号検出部７３を介してバッファメモリ７５に供給され、Ｉ／Ｆ７２を介して入力された映像信号は信号検出部７４を介してバッファメモリ７６に供給される。Ｉ／Ｆ７１，７２の構成はＩ／Ｆ２２，２３と同様であり、信号検出部７３，７４の構成は信号検出部２４，２５と同様であり、バッファメモリ７５，７６の構成はバッファメモリ２６，２７と同様である。Ｉ／Ｆ２２，２３，７１，７２を介して入力された映像信号は、夫々バッファメモリ２６，２７，７５，７６に一旦記憶された後、画面合成演算部２９に与えられる。

制御部２８は、信号検出部２４，２５，７３，７４を制御して、Ｉ／Ｆ２２，２３，７１，７２を介して映像信号が入力されたか否かの検出結果を取得し、検出結果に基づく合成制御信号を画面合成演算部２９に出力する。画面合成演算部２９は、合成制御信号に基づいて、入力された医療画像を合成処理する。

図１３のフローはステップＳ３１〜Ｓ３４の処理が追加された点が図５のフローと異なるのみである。ステップＳ３１，Ｓ３２，Ｓ５では、夫々４入力であるか否か、３入力であるか否か、２入力であるか否かが判定される。４入力の場合には、ステップＳ３３において４画面合成処理が行われ、３入力の場合には、ステップＳ３４において３画面合成処理が行われ、２入力の場合には、ステップＳ５において２画面合成処理が行われる。

図１４は合成パターンの例を示しており、図１４（ａ）は３画面合成の例であり、図１４（ｂ）は４画面合成の例である。図１４の例はいずれもＰＯＰ形式の例を示しており、図１４（ａ）はＩ／Ｆ２２を介して入力された映像信号に基づく医療画像Ｉｍａを画面左側の大部分に配置し、画面右側には上下に、Ｉ／Ｆ２３，７１を介して入力された映像信号に基づく医療画像Ｉｍｂ，Ｉｍｃを配置する例を示している。また、図１４（ｂ）は、Ｉ／Ｆ２２，２３，７１，７２を介して夫々入力された医療画像Ｉｍａ〜Ｉｍｄを画面の上下左右の４分割した領域に配置する例を示している。

このように第２変形例においては、４入力の医療画像の入力又は入力の停止を検出し、この検出結果に基づいて、４入力の医療画像の画面合成処理を制御しており、記録途中であっても入力の変化に応じた本編動画を１つの動画ファイルとして記録することができる。なお、第２変形例は４入力の例を示したが、入力系統数は適宜設定可能であることは明らかである。

次に、実際の手技の流れに合せて、２画面合成の形式が選択される機序と記録データの内容について説明する。

一般的な外科内視鏡手技では、硬性内視鏡を腔内に挿入してから記録を開始する（図６のステップＳ４）[シーン１ 病変部へ向けた剥離処置時]。病変部位に向けて、臓器周辺の癒着膜や脂肪を処置しながら手技を進めていく。この時、比較的高度な処置ではないこと、適切な処置実施の証明記録を残すという視点から、内視鏡画像のみの記録となる（図６のステップＳ５のＮＯ判定とステップＳ７のＮＯ判定とのループ）。

病変部位に到達すると、病変部位と周辺臓器との丁寧な剥離、切除などの高度な処置が開始される。この時、適切な処置実施の証明だけでなく若手医師の教育用途を意図して、術者の手元の画像を内視鏡画像と同期させて記録を残すために、前記医療情報記録装置に術野カメラからの映像ケーブルを接続する[シーン２ 病変部到達後の処置時]。これにより、前記医療情報記録装置にて検出した映像信号をもとに、入力端子を自動的に設定する（図２）。入力端子が設定されることで、図１で示す信号検出部２５、バッファメモリ２７を通して画面合成演算部２９へ術野カメラからの映像信号が入力されるとともに、制御部２８から画面合成演算部へ連携制御を行う（図６のステップＳ５）。画面合成演算部２９では、入力された映像信号をもとに自動的に画像解析を開始する（図６のステップＳ６）。術野カメラで撮影した映像信号の色分析と図６のステップＳ２１とステップＳ２２の判定を合せた結果からＰＩＰ合成パターンが自動的に設定され、２画面合成が開始しつつ動画像の記録を継続する。この時の２画面合成パターンは、教育用途を意図しているため、もっとも重要な内視鏡画像を親画面、術野画像を子画面とする図７（ａ）が選択される。

ある程度処置が進行すると、病変部位同定のために軟性内視鏡が用いられる。この時、適切な処置実施の証明だけでなく若手医師の教育用途を意図して、病変部位同定と切除ライン確定までのプロセスを明示させる記録を残すために、軟性内視鏡が接続された別のプロセッサーから出力される内視鏡画像を伝送する映像ケーブルを前記医療情報記録装置に接続する。同時に、病変部位同定の診断となり処置は中断されるため、術野カメラからの映像入力を外す[シーン３ 病変部の同定時]。ここでは、意図的にケーブルを外すこととしているが、ケーブルを外さない場合にて、信号検出部２５が２つ目の入力信号を検出することで、自動的に２つ目の映像入力端子に切り替える手段を有していてもよい。これにより、前記医療情報記録装置にて検出した映像信号をもとに、再度入力端子を自動的に設定する（図２）。前述と同様に、入力端子が設定されることで、図１で示す信号検出部２５、バッファメモリ２７を通して画面合成演算部２９へ軟性内視鏡が接続された別のプロセッサーからの映像信号が入力されるとともに、制御部２８から画面合成演算部へ連携制御を行う（図６のステップＳ５）。画面合成演算部２９では、入力された映像信号をもとに自動的に画像解析を開始する（図６のステップＳ６）。軟性内視鏡で観察した映像信号の色分析と図６のステップＳ２１とステップＳ２２の判定を合せた結果からＰＯＰ合成パターンが自動的に設定され、２画面合成が開始しつつ動画像の記録を継続する。この時の２画面合成パターンは、教育用途を意図しているため、医学的重要度が同程度である硬性内視鏡からの内視鏡画像を左画面に、軟性内視鏡からの内視鏡画像を右画面とする図７（ｃ）が選択される。

臓器に対する切除ラインが確定すると、病変部位の摘出に向けた切除が開始される。この時は前述と同様に高度な処置となる。このため、適切な処置実施の証明だけでなく若手医師の教育用途を意図して、術者の手元の画像を硬性内視鏡画像と同期させて記録を残すために、前記医療情報記録装置に術野カメラからの映像ケーブルを再接続する[シーン４ 病変部同定後の切除吻合時]。以降は前述と同様に、術野カメラからの映像信号を取り込んだ前記医療情報記録装置が自動的に入力端子を設定し、かつ、入力された映像信号をもとに色分析を行う。分析結果により、内視鏡画像を親画面、術野画像を子画面とした２画面合成のＰＩＰパターン（図７（ａ））が再度選択され、２画面合成しつつ動画像の記録を継続する。

病変部位摘出後の切除部吻合、出血確認においても、鉗子操作による吻合は高度な技術を要するため、内視鏡画像と術野画像の２画面合成による動画像の記録を継続する。

吻合後は、体内部の洗浄となる。この時は高度な医療行為はなく平易な処置となるため、教育的意図もほとんどなくなることから、術野カメラからの映像ケーブルを外し、内視鏡画像のみの動画像を継続記録する[シーン５ 病変部摘出後の処置時]。

最後に閉創となる。この時は、硬性内視鏡自体が体外へ取り出されてしまうため、内視鏡が接続されたプロセッサーからの映像ケーブルを取り外す。この代わりに、術野カメラからの映像ケーブルを前記医療情報記録装置に再接続させ、術野画像のみの動画像を継続記録する[シーン６ 閉創時]。

手技終了とともに、記録を停止する。これにより、一連の手技の中に、２画面合成された画像も取り込まれた１つの動画ファイルが生成される。

このように、制御部２８及び画面合成演算部２９は、入力端子の接続状態や入力状態、映像信号の画像解析結果等によってシーン判定又はシーンの切換りの判定が可能であり、各シーン毎に最適な画面合成の形式を選択すると共に記録するデータを決定することができる。

なお、上記説明は、一般的な外科内視鏡手技に沿ったものであり、手技の手順が予め決まっているものとして、入力端子に機器が接続されるか否かの判定及び画像解析の結果のみによって、各シーンを判定して画面合成の形式を選択する例について説明した。更に、入力端子毎に接続する機器を固定する場合には、いずれの入力端子に機器が接続された否かの判定結果によって、各シーンを推定することも可能である。これにより、例えば、硬性内視鏡用の入力端子と術野カメラ用の入力端子にこれらの機器が接続された場合には、硬性内視鏡からの画像を親画面とし、術野カメラからの画像を子画面とする画面合成を行うことができる。

（第３の実施の形態）
図１５は本発明の第３の実施の形態を示すブロック図である。図１５において図１と同一の構成要素には同一符号を付して説明を省略する。

従来、記録装置においては、記録装置の動作状態を示す表示や操作釦が記録装置筐体の前面部に配置されていることが多い。しかしながら、記録装置が設置される術場や医療機器を可搬するトロリーシステム上の配置によっては、記録装置筐体の前面部の視認性が悪く、動作状況を確認しにくい場合や、操作性が極めて不良となる場合がある。このように、記録装置の状況の把握が困難な場合には、記録容量不足に気付かずに記録を開始することや記録中における機器の異常状態を把握できていないなど、円滑な医療行為進行の妨げや適切な医療行為が実施されたことの証明記録ができない状態となる虞がある。

そこで、本実施の形態は記録装置筐体の前面部に配置された表示部だけでなく、外部モニターである表示装置に各種表示を行うことができるように構成する。本実施の形態の医療情報記録装置８０は、出力画面生成部８１及びＩ／Ｆ８２を採用した点が第１の実施の形態の医療情報記録装置２０と異なる。

出力画面生成部８１は、図示しない記録装置筐体の前面部に配置された表示部に表示する画像と同一の画像をＩ／Ｆ８２を介して液晶モニター等によって構成された表示装置８３に与えて表示させることができるようになっている。出力画面生成部８１は、医療画像の記録中において、画面合成演算部２９からの医療画像（合成画像）だけでなく、記録状態に関する様々な情報、例えば、記録時の画質設定、記録時のタイトル数、チャプター数、内蔵ＨＤＤ３１の残り記録容量等に基づく画像表示のための出力画面を生成する。

なお、図１５では、１つのＩ／Ｆ８２のみを示しているが、映像出力用の複数のインターフェースを採用することができる。例えば、ＳＤＩ用、ＤＶＩ用等の映像インターフェースを採用することができ、これらのインターフェースに対応した表示装置に、画像を出力可能である。また、インターフェースとしてEthernet（登録商標）を利用することで、ＨＴＴＰプロトコルやストリーミングにより映像を出力することができ、外部のコンピュータの表示部に画像出力することも可能である。

出力画面生成部８１は、表示用の出力画面を表示装置８３のインターフェースに適した形式に変換して出力する。Ｉ／Ｆ８２だけでなく複数のインターフェースがある場合には、複数のインターフェースのうち指定したインターフェースから表示用の出力画面を出力するようにすることもでき、また、全てのインターフェースから表示用の出力画面を出力するように構成することもできる。

本実施の形態においては、出力画面生成部８１は第１及び第２の表示モードで出力画面を生成することができる。

第１の表示モードは、記録処理部３０に入力されている画像をそのままの画像サイズで表示するモードである。この表示モードでは、記録対象となる画像を高精細に表示することができる。

第２の表示モードは、本装置の記録状態に関する情報を表示するモードである。第２の表示モードにおいては、記録装置筐体の前面に配置された表示部を見ることなく、表示装置８３において記録状態を確認することができる。

図１６は第２の表示モードの表示例を示す説明図である。図１６（ａ）は記録対象の本編動画が１つの場合の表示例を示し、図１６（ｂ）は記録対象の本編動画が同時に２つ存在する場合の表示例を示している。なお、上記各実施の形態における合成画像は１つの本編動画である。

図１６（ａ）に示すように、第２の表示モードは、表示画面２０１中に、複数の表示領域２０２〜２１１を有する。表示領域２０２は内視鏡プロセッサ１０（図１参照）等から入力された患者情報、例えば、患者ＩＤや患者名等を表示する領域である。また、この表示領域２０２には、現在検査中であるか検査外であるかの情報も表示される。図１６（ａ）の例では、「検査中」の表示によって検査中であることが示されているが、検査外の場合には、「非検査中」等が表示される。また、図１６（ａ）の例ではテキスト（文字列）で表示する例を示しているが、アイコン等を用いて表示を行うこともできる。

表示領域２０３には、記録対象の医療画像が入力される入力端子、動画であるか静止画である等の記録設定の情報が表示される。図１６（ａ）の例では、ＳＤＩ形式の映像信号が入力され、動画は「高画質」モードでの記録が指定され、静止画は「ＪＰＥＧ」フォーマットの「高圧縮」モードで記録が指定されていることを示している。

表示領域２０４には、記録対象の医療画像が、縮小された画像サイズで表示される。また、表示領域２０４の左下には、現在の記録時間が表示されており、右下にはアイコンやテキスト等によって、録画中、停止中又は一時停止中等の録画状態を表示している。図１６（ａ）の例では、「◎ ＲＥＣ」によって、現在録画中であることを表している。

表示領域２０５は、現在の検査中に記録した静止画の枚数を表示する。表示領域２０５の下方の３つの表示領域２０６には、現在の検査中に記録した画像がサムネイル表示される。図１６（ａ）の例では、過去３枚分のサムネイルを表示するようになっており、新しい画像が記録された場合には、古い画像が更新される。なお、図１６（ａ）の例では、表示枚数は３枚であるが、より多くの画像を表示可能なように構成することもできる。表示領域２０６を参照することで、確実に静止画が取得されていることを確認することができる。

表示領域２０７には、現在の検査中に記録した動画のタイトル数が表示される。録画及び停止操作をすることで、タイトルが区切られて、患者フォルダ内部にタイトル毎にサブフォルダが生成されて、１つの本編動画が記録される。表示領域２０７の下方の３つの表示領域２０８には、現在の検査中に記録した動画タイトル（本編動画）がサムネイル表示される。図１６（ａ）の例では、過去３タイトルが表示されるようになっているが、より多くのタイトルのサムネイルを表示することができるように構成することもできる。

表示領域２０９では、音声録音の有効・無効の情報が表示される。医療情報記録装置８０においては、動画の記録に併せて、図示しない音声入力端子から入力された音声信号の録音が可能である。図１６（ａ）においては、「ＡＵＤＩＯ ＯＮ」の表示によって、音声録音を有効にしていることを示している。音声録音の有効・無効は、設定により切り替え可能である。無効の場合には、例えば「ＡＵＤＩＯ ＯＦＦ」等のテキストを表示する。

表示領域２１０では、内蔵ＨＤＤ３１の記録可能な残量を表示する。表示領域２１０では、動画の記録時間と静止画の記録枚数が表示されるようになっており、状態に応じてリアルタイムに値が更新される。医療情報記録装置８０は、残量が少なくなった場合、例えば、ある閾値を下回った場合には、警告を表示することもできる。

表示領域２１１では、外部メディア５１の記録可能な残量が表示される。図１６（ａ）の例では、保存先となっているメディアの種別と、動画の記録時間、静止画の記録枚数が表示されている。記録可能な残量はリアルタイムに更新される。医療情報記録装置８０は、内蔵ＨＤＤ３１と同様に残量が少なくなった場合、例えば、ある閾値を下回った場合には、警告を表示することもできる。

図１６（ｂ）は表示画面２０１中に、記録の対象となる画像が複数、例えば、２つある場合の例であり、一方の画像（「ＣＨ１」）に関する表示領域を無地で示し、他方の画像（「ＣＨ２」）に関する表示領域を斜線部にて示している。なお、図１６（ｂ）において図１６（ａ）と同一の表示領域について同一符号を付して説明を省略する。

図１６（ｂ）において、表示領域２０３ａ，２０３ｂは、夫々ＣＨ１，ＣＨ２に関して、図１６（ａ）の表示領域２０３と同様の表示を行う領域である。また、表示領域２０４ａ，２０４ｂは、夫々ＣＨ１，ＣＨ２に関して、図１６（ａ）の表示領域２０４と同様の表示を行う領域である。図１６（ｂ）の例では、ＣＨ１の医療画像について録画中であり、ＣＨ２の医療画像については録画停止状態であることが示されている。

表示領域２１３は、図１６（ａ）の表示領域２０５と同様の内容をＣＨ１，ＣＨ２の両方について表示するものであり、表示領域２１４は、図１６（ａ）の表示領域２０７と同様の内容をＣＨ１，ＣＨ２の両方について表示するものである。これらの領域２１３，２１４においては、ＣＨ１に関する情報は「ＣＨ１」に続けて表示し、ＣＨ２に関する情報は「ＣＨ２」に続けて表示している。

また、静止画のサムネイル表示を行う表示領域２０６においては、ＣＨ１の静止画とＣＨ２の静止画との両方を表示する。表示領域２０６において、ＣＨ１，ＣＨ２のいずれの画像であるかが分かるように、サムネイル表示の下部に「ＣＨ１」，「ＣＨ２」を表示する。同様に、動画のサムネイル表示を行う表示領域２０８においては、ＣＨ１の動画とＣＨ２の動画との両方を表示する。表示領域２０８において、ＣＨ１，ＣＨ２のいずれの画像であるかが分かるように、サムネイル表示の下部に「ＣＨ１」，「ＣＨ２」を表示する。

術者は、入力装置１１を操作することで、第１の表示モードと第２の表示モードのいずれの表示モードを選択するかを指定することができる。入力装置１１からの表示モードに関する操作信号は、Ｉ／Ｆ２１を介して制御部２８に供給される。制御部２８は、この操作信号に基づいて、表示モードを指定するための表示制御信号を出力画面生成部８１に出力する。出力画面生成部８１は、制御部２８からの表示制御信号に従って、第１又は第２の表示モードの出力画面を生成する。なお、表示モードの選択操作は、入力装置１１に限らず、図示しない装置本体のボタンやタッチパネル、赤外線リモコン、その他外部のコントローラ等によって行うように構成することもできる。

また、インターフェースとしてＩ／Ｆ８２のみを備えた場合には、制御部２８によって表示モードを設定するか又は術者の操作に従って、表示モードを設定すればよい。複数のインターフェースを備える場合には、各インターフェースに対応していずれの表示モードを設定するかを個別に指定することができるように構成してもよい。

ところで、図１６（ｂ）の表示モードでは、２入力の医療画像を合成することなく表示することができる。このような表示を可能にするために、制御部２８は、画面合成演算部２９を制御して、画面合成を常時有効とするか無効とするかを設定することができるようになっている。

常時有効の設定では、２つの映像信号が入力されると同時に自動的に画面合成演算部２９が合成処理を開始し、１つの動画像が得られる。この場合には、表示装置８３の表示画面上には、図１６（ａ）の表示モードでの表示が行われる。

画面合成無効の設定では、２つの映像信号が入力されても合成処理されないので、各入力に対応した２つの動画像が得られる。この場合には、表示装置８３の表示画面上には、図１６（ｂ）の表示モードでの表示が行われる。

なお、画面合成無効の設定時に、１つの映像信号のみが入力された場合には、画面合成演算部２９における画面合成処理が行われないことから、図１６（ｂ）の表示領域２０４ａ，２０４ｂの一方の領域には、入力された医療画像が動画表示され、他方の領域は、無画像（黒画面）となる。なお、画面合成無効時には、画面合成演算部２９と記録処理部３０との間で２つの映像信号（動画像）が夫々伝送される（図示省略）。

（第４の実施の形態）
図１７乃至図２０は本発明の第４の実施の形態に係り、図１７は第４の実施の形態を示すブロック図である。図１７において図１と同一の構成要素には同一符号を付して説明を省略する。

従来、医療用の記録装置は、記録データをコンピュータ等で利用すること等を考慮して、内蔵ＨＤＤに記録した記録データを外部メディアにも複製可能に構成されていることが多い。しかしながら、外部メディアに存在するウィルスの侵入を防ぐ等の理由から、記録済の外部メディアから記録データを読み込むことができない設定になっている。このため、外部メディアを一旦記録装置から取り外した後は、外部メディアに記録した記録データの内容を、記録装置によって手軽に確認することができない。

そこで、本実施の形態においては、外部メディア及び記録ファイルの照合を行った後、記録済の外部メディアから記録データを読み込み可能にすることにより、セキュリティを確保しつつ、利便性を向上させるようになっている。

本実施の形態における医療情報記録装置３００は、記録情報管理部３０１、読取部３０２、データ処理部３０３及びＩ／Ｆ３０４を付加した点が図１の医療情報記録装置２０と異なる。読取部３０２は、記録情報管理部３０１に制御されて、外部メディア５１に記録されたデータを読み取ることができるようになっている。データ処理部３０３は読取部３０２から記録データが与えられ、映像信号に展開するためのデータ処理を行って、Ｉ／Ｆ３０４に出力する。Ｉ／Ｆ３０４は、データ処理部３０３からの映像信号をモニター４０に与えて、画像表示させるようになっている。

本実施の形態において、記録情報管理部３０１は、制御部２８に制御されて、本医療情報記録装置３００によって記録が行われた外部メディアについての照合を行い、照合の結果によって、書き出したデータが記録された外部メディアであると判定された場合に、当該外部メディアからの記録データの読み込みを許可するようになっている。この照合のために、記録情報管理部３０１は、データベース３１ａを生成して内蔵ＨＤＤ３１に記録するようになっている。

図１８は内蔵ＨＤＤ３１の記録領域を説明するための説明図である。内蔵ＨＤＤ３１は、画像記録エリア３２ａの外に画像管理エリア３２ｂを有する。内蔵ＨＤＤ３１の画像記録エリア３２ａには、動画又は静止画の医療画像等が記録される。内蔵ＨＤＤ３１内の画像記録エリア３２ａに記録された画像は、ユーザ操作に従って、記録情報管理部３０１により読取部３０２を介して外部メディア５１に書き出し可能である。本実施の形態においては、画像管理エリア３２ｂには、画像記録エリア３２ａに記録されて外部メディア５１に書き出された画像データの記録等に関する管理情報がデータベース３１ａとして記録される。

図１９はデータベース３１ａとして記録される管理情報の一例である管理テーブルを示す説明図である。

図１９に示すように、管理テーブル中には、内蔵ＨＤＤ３１に記録されている画像を管理するための内蔵ＨＤＤ管理テーブルと、画像が書き出された外部メディア５１を管理するための外部メディア管理テーブルとを含む。

図１９に示すように、内蔵ＨＤＤ管理テーブル中には、患者を特定するためのＩＤ、患者名、日付、画像記録エリア３２ａ内に記録された画像と対応付けられたファイル管理番号（Ｎｏ．）、及び、画像が画像記録エリア３２ａ内に存在するか否かを示すフラグの情報が含まれる。フラグは、画像が内蔵ＨＤＤ３１の画像記録エリア３２ａに書き込まれている場合に"１"となり、当該画像が画像記録エリア３２ａから削除された場合に"０"となる。記録情報管理部３０１は、制御部２８からこれらの情報を取得して、管理テーブルを生成する。

外部メディア管理テーブルは、画像の書き出しに際し、画像を記録する外部メディアの種類を示す"書き出しメディア種別"及び画像を記録するメディアを特定するための情報を記録する"メディアのシリアルNo．"の情報を含んでいる。

メディアのシリアルNo．としては、外部メディア５１がブルーレイディスク又はデジタルヴァーサタイルディスク等の光学ディスクの場合にはボリューム名が用いられ、ＵＳＢメモリ及びＵＳＢ−ＨＤＤ等のＵＳＢストレージやＳＤカード等の半導体メモリの場合にはシリアルナンバーが用いられる。記録情報管理部３０１は、これらの情報を読取部３０２を介して外部メディア５１から取得して、管理テーブルを生成する。

なお、外部メディアとしては、ＮＡＳ（ネットワークアタッチトストレージ Network Attached Storage）やストレージサーバ等を採用してもよい。この場合には、記録情報管理部３０１は、メディアのシリアルＮｏ．としてサーバ名を記録すればよい。

外部メディア５１に画像を書き出す場合には、記録情報管理部３０１は、内蔵ＨＤＤ管理テーブル中のＩＤ及び日付の値を用いてフォルダの名前を作成し、作成したフォルダ内に画像ファイルを書き出すようになっている。なお、この場合の画像ファイルの名前は、例えばフォルダ名及びファイル管理Ｎｏ．によって作成する。

例えば、図１９のファイル管理Ｎｏが１のレコードについては、フォルダ名は"1234567_2010_02_16"となり、ファイル名は"1234567_2010_02_16_h-1234567-1.mp4"となる。

記録情報管理部３０１は、画像管理エリア３２ｂに構築されたデータベース３１ａの内容を読み出して、読取部３０２を介してデータ処理部３０３に出力することができる。データ処理部３０３は管理テーブルをモニター４０に表示可能な形態に変換して出力することができる。これにより、ユーザのメニュー操作等によってモニター４０上に管理テーブルの内容を表示させることができる。

次に、このように構成された実施の形態の動作について図２０を参照して説明する。図２０は記録メディアの再生制御を説明するためのフローチャートである。

医療画像の内蔵ＨＤＤ３１への記録処理は第１の実施の形態と同様である。本実施の形態においては、内蔵ＨＤＤ３１に記録されている医療画像を外部メディア５１に書き出す場合には、記録情報管理部３０１によって、管理テーブルが生成される。

例えば、入力装置１１に対するユーザ操作によって、画像の外部メディア５１への書き出しが指示されると、記録情報管理部３０１は、制御部２８に制御されて、内蔵ＨＤＤ３１内の画像記録エリア３２ａから該当する画像を読み出して読取部３０２に供給する。読取部３０２は、記録情報管理部３０１から読み出された画像データを外部メディア５１に与えて記録する。

この書き出しに際して、記録情報管理部３０１は、読み出した画像に関する情報が制御部２８から与えられて、内蔵ＨＤＤ管理テーブルを作成する。また、記録情報管理部３０１は、外部メディア５１の種別及びボリュームラベルを読み出して、夫々外部メディア管理テーブルの書き出しメディア種別又はメディアのシリアルＮｏ．の欄に記録する。こうして、書き出す画像毎に、図１９の各レコードが生成される。なお、記録情報管理部３０１は、管理テーブルの各レコードのうち、内蔵ＨＤＤ３１から削除した画像に関するレコードについては、管理テーブルから削除することなく、フラグを"１"から"０"に変更する。

次に、一旦取り外した外部メディア５１を再び取り付けて、外部メディア５１に記録されている画像を読み出してモニター４０に表示させる場合の動作について説明する。

図２０のステップＳ４１において、記録情報管理部３０１は、読取部３０２からの情報に基づいて外部メディア５１が接続されているか否かを判定する。外部メディア５１が接続されると、記録情報管理部３０１は、読取部３０２を介して外部メディア５１に関する情報を読み出す（ステップＳ４２）。また、記録情報管理部３０１は、データベース３１ａの管理テーブルの情報を読み出す（ステップＳ４３）。

次に、記録情報管理部３０１は、読み出しを行う外部メディア５１が、内蔵ＨＤＤ３１からの医療画像を記録したメディアであるか否かの照合を行う。即ち、記録情報管理部３０１は、ステップＳ４４において、外部メディア５１から取得したメディア種別及びメディアのシリアルＮｏ．と同一のメディア種別及びメディアのシリアルＮｏ．を有するレコードが管理テーブル上に存在するか否かを判定する。存在する場合には、外部メディア５１が内蔵ＨＤＤ３１からの医療画像を記録したメディアであるものと判定して、記録情報管理部３０１は次のステップＳ４５の判定を行う。

ステップＳ４５においては、外部メディア５１から読み出すファイルについて、格納されているフォルダ名を示すＩＤと日付が管理テーブル上のレコード（ＩＤと日付）と一致しているか否かを判定する。一致している場合には、記録情報管理部３０１は、次のステップＳ４６において、外部メディア５１から読み出すファイルのファイル名が管理テーブル上のレコード（ファイル管理番号）と一致しているか否かを判定する。一致している場合には、記録情報管理部３０１は、次のステップＳ４７において、フラグが"１"であるか否かを判定する。また、記録情報管理部３０１は、ステップＳ４８において、フラグが"０"であるか否かを判定する。

フラグが"１"であるか"０"であるかに拘わらず、ステップＳ４６において、外部メディア５１内に、データベース３１ａの管理テーブルのレコードと一致するファイルが存在するものと判定された場合には、ステップＳ５１において、外部メディア５１内の当該ファイルの再生が許可される。

記録情報管理部３０１は、制御部２８の指示に従って読取部３０２を制御して、ユーザが指定したファイルを読み出し、データ処理部３０３に供給する。データ処理部３０３は、読み出されたデータを映像信号に展開した後、Ｉ／Ｆ３０４を介してモニター４０に与える。例えば、データ処理部３０３は、医療画像を元のサイズで表示させてもよく、また、サムネイル表示させてもよい。こうして、外部メディア５１に記録されている医療画像等の表示が可能である。

逆に、ステップＳ４６において、外部メディア５１内に、データベース３１ａの管理テーブルのレコードと一致するファイルが存在しないものと判定された場合には、外部メディア５１内の当該ファイルの再生は許可されない。記録情報管理部３０１は、ステップＳ４９によって次のファイルの存在を確認して処理をステップＳ４５又はＳ４６に戻すことにより、フォルダ内の全てのファイルについて管理テーブル上に同一ファイルのレコードが存在するか否かを調査する。

外部メディア５１に記録されているファイルであって、内蔵ＨＤＤ３１からは削除されているファイルについては、管理テーブル上のフラグが"０"となっている。記録情報管理部３０１は、このようなファイルが存在する場合には、処理をステップＳ４８からステップＳ５０に移行して、管理テーブルに当該ファイルに関する情報を登録する。例えば、記録情報管理部３０１は、管理テーブル上でフラグが"０"として管理された画像ファイルが外部メディアより読み込まれた場合には、そのファイルを読み込み再生すると共に、履歴が分かる読み込みテーブルを構成し、このテーブルに画像ファイルのリンクを登録する。これにより、この画像ファイルを再々再生する場合において、図２０の処理フローを毎回実施することなく、直ちに読み込みを行うことができる。

このように本実施の形態においては、医療画像を外部メディアに記録後において、記録された外部メディアが本記録装置に再接続された場合には、管理テーブルを用いることで、外部メディアが記録時のものであるか否かを照合すると共に、管理テーブルに一致するファイルが存在するか否かを調査して再生の可否を判断しており、セキュリティを確保しつつ、外部メディアに記録された画像を再生表示することができ、利便性に優れている。

なお、本発明は、上記各実施形態にそのまま限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記各実施形態に開示されている複数の構成要素の適宜な組み合わせにより、種々の発明を形成できる。例えば、実施形態に示される全構成要素の幾つかの構成要素を削除してもよい。さらに、異なる実施形態にわたる構成要素を適宜組み合わせてもよい。

本出願は、２０１２年１月２６日に日本国に出願された特願２０１２−１４２６９号を優先権主張の基礎として出願するものであり、上記の開示内容は、本願明細書、請求の範囲、図面に引用されたものとする。

Claims (13)

1. 複数の入力端子を有して複数の撮像装置からの医療画像を入力可能であると共に、前記複数の入力端子のうちのいずれの入力端子を介して前記医療画像が入力されたかを検出して検出結果を出力する入力部と、
   前記複数の入力端子を介して入力された１つ以上の前記医療画像を予め規定された複数の合成パターンのうちの１つの合成パターンに従って合成処理するものであって、前記入力部の検出結果に基づいて医療シーン又は前記医療シーンの切換りを判定し、判定結果に基づいて前記合成パターンを切換えて、前記入力された１つ以上の医療画像に基づく合成画像を出力する画面合成部と、
   前記合成画像を１つの画像ファイルとして記録する記録処理部と
   を具備したことを特徴とする医療情報記録装置。
2. 複数の入力端子を有して複数の撮像装置からの医療画像を入力可能であると共に、前記複数の入力端子のうちのいずれの入力端子を介して前記医療画像が入力されたかを検出して検出結果を出力する入力部と、
   前記複数の入力端子を介して入力された１つ以上の前記医療画像を予め規定された複数の合成パターンのうちの１つの合成パターンに従って合成処理するものであって、前記入力部の検出結果及び前記複数の入力端子を介して入力された１つ以上の前記医療画像の画像解析結果に基づいて医療シーン又は前記医療シーンの切換りを判定し、判定結果に基づいて前記合成パターンを切換えて、前記入力された１つ以上の医療画像に基づく合成画像を出力する画面合成部と、
   前記合成画像を１つの画像ファイルとして記録する記録処理部と
   を具備したことを特徴とする医療情報記録装置。
3. 前記画面合成部は、前記記録処理部の記録処理中において、前記入力部の検出結果に基づいて、合成処理する医療画像を切換える
   ことを特徴とする請求項１又は２に記載の医療情報記録装置。
4. 前記画面合成部は、前記合成パターンとしてピクチャーインピクチャー及びピクチャーアウトピクチャーの少なくとも一方を採用する
   ことを特徴とする請求項１又は２に記載の医療情報記録装置。
5. 前記画面合成部は、
   前記複数の入力端子を介して入力される前記医療画像の数に応じて、前記合成パターンを切換える
   ことを特徴とする請求項１又は２に記載の医療情報記録装置。
6. 前記画面合成部は、
   前記複数の入力端子を介して入力される前記医療画像の種類に応じて、前記合成パターンを切換える
   ことを特徴とする請求項１又は２に記載の医療情報記録装置。
7. 前記画面合成部は、
   前記入力された１つ以上の医療画像を画像解析する画像解析部と、
   前記画像解析部の画像解析結果に基づいて、前記合成処理に用いる合成パターンを決定する合成パターン決定部と
   を具備したことを特徴とする請求項１又は２に記載の医療情報記録装置。
8. 前記合成画像を表示する表示部と、
   外部表示装置に対して前記合成画像を出力するインターフェースと
   を具備したことを特徴とする請求項１又は２に記載の医療情報記録装置。
9. 前記記録処理部によって前記合成画像が記録される内蔵記録部と、
   前記内蔵記録部に記録された前記合成画像を外部メディアに書き出すと共に、外部メディアに記録された画像を読み出す外部記録制御部と、
   前記外部メディアに書き出された前記合成画像の記録に関する情報及び前記外部メディアに関する情報を含む管理テーブルを用いて、前記外部メディアを照合すると共に、前記外部メディアに記録されている画像が前記内蔵記録部から読み出されて書き出された前記合成画像であることを検出して、前記外部メディアに記録されている画像の再生の可否を決定する記録情報管理部と
   を具備したことを特徴とする請求項１又は２に記載の医療情報記録装置。
10. 前記画面合成部は、前記複数の入力端子のうちの２つの入力端子を介して内視鏡画像と術野画像とが入力された場合には、前記内視鏡画像を親画面とし術野画像を子画面とするピクチャーインピクチャー表示するための画面合成を行う
    ことを特徴とする請求項１又は２に記載の医療情報記録装置。
11. 前記画面合成部は、前記複数の入力端子のうちの２つの入力端子を介して硬性内視鏡画像と軟性内視鏡画像とが入力された場合には、前記硬性内視鏡画像と軟性内視鏡画像とをピクチャーアウトピクチャー表示するための画面合成を行う
    ことを特徴とする請求項１又は２に記載の医療情報記録装置。
12. 前記画像解析部は、画像の色分布の解析結果を出力し、
    前記合成パターン決定部は、前記色分布に基づいて、前記合成処理に用いる合成パターンを決定する
    ことを特徴とする請求項７に記載の医療情報記録装置。
13. 前記画像解析部は、画像中の絵柄の輪郭の解析結果を出力し、
    前記合成パターン決定部は、前記輪郭に基づいて、前記合成処理に用いる合成パターンを決定する
    ことを特徴とする請求項７に記載の医療情報記録装置。

Images