JP2021174047A - 医用画像表示装置、医用画像出力装置、医用画像用媒体及び医用画像表示プログラム - Google Patents

Abstract

【課題】フィルミングされた医用画像を用いた画像診断において、画像及び付帯情報の視認性を従来に比して向上させること。【解決手段】本実施形態に係る医用画像表示装置は、光学的撮像部と、表示制御部とを備える。光学的撮像部は、医用画像診断装置によって撮像された医用画像と、当該医用画像の付帯情報の表示レイアウトに関するレイアウト情報を含むコード化情報を撮像する。表示制御部は、撮像されたコード化情報に含まれたレイアウト情報に基づいて、光学的撮像部によって撮像された医用画像と付帯情報とを表示させる。【選択図】図６

Description

本明細書等に開示の実施形態は、医用画像表示装置、医用画像出力装置、医用画像用媒体及び医用画像表示プログラムに関する。

例えば、Ｘ線診断装置において、フィルムなどへ印刷（転写：フィルミングとも言う）する際に、画像と共にコメント、アノテーション、撮影条件等の付帯情報を同時に印刷する技術がある。この様な付帯情報は、印刷されるフィルムにおいて、診断部位等と重ならない様に、当該画像の隅に配置されるのが一般的である。

しかしながら、一枚のフィルム内に画像を多数配置する場合や付帯情報を多く配置する場合、付帯情報の印刷領域を十分に確保することができないことがある。係る場合、文字を縮小し過ぎると読みづらくなる一方、画像サイズを小さくすると画像の視認性が低下してしまう。Ｘ線画像検査では、例えば縦５枚、横５枚の合計２５枚の画像を同時にフィルミングするケースもある。この様に画像を複数枚同時にフィルミングするケースにおいては、画像及び付帯情報の視認性を両立させるのは特に困難である。

特表２０１６−５２６２０４号公報

本明細書等に開示の実施形態が解決しようとする課題の一つは、フィルミングされた医用画像を用いた画像診断において、画像及び付帯情報の視認性を従来に比して向上させることである。

本実施形態に係る医用画像表示装置は、光学的撮像部と、表示制御部とを備える。前記光学的撮像部は、医用画像診断装置によって撮像された医用画像と、当該医用画像の付帯情報の表示レイアウトに関するレイアウト情報を含むコード化されたコード化情報を撮像する。前記表示制御部は、前記撮像されたコード化情報に含まれた前記レイアウト情報に基づいて、前記光学的撮像部によって撮像された画像と前記付帯情報とを表示させる。

図１は、実施形態に係る医用画像出力装置及び医用画像表示装置を有する医用画像表示システムＳを示した図である。 図２は、実施形態に係る医用画像表示装置の構成を示したブロック図である。 図３は、コード化情報付画像が印刷された医用画像用媒体の一例を示した図である。 図４は、複数のコード化情報付画像が印刷された医用画像用媒体の一例を示した図である。 図５は、実施形態に係る医用画像表示装置の構成を示したブロック図である。 図６は、シャーカステンに設置された医用画像用媒体と、医用画像表示装置によって撮像された医用画像用媒体内の医用画像に重畳表示される付帯情を示した図である。 図７は、医用画像表示装置において表示された画像の一部を回転した場合における、文字情報としての付帯情報の表示例を説明するための図である。 図８は、医用画像表示装置において表示された画像の一部を拡大した場合における、文字情報としての付帯情報の表示例を説明するための図である。 図９は、医用画像表示装置において表示された画像の一部を回転した場合における、ＲＯＩとしての付帯情報の表示例を説明するための図である。 図１０は、医用画像表示装置において表示された画像の一部を拡大した場合における、ＲＯＩとしての付帯情報の表示例を説明するための図である。 図１１Ａは、本実施形態におけるコード化情報付画像出力処理の流れを示したフローチャートである。 図１１Ｂは、本実施形態における付帯情報重畳表示処理の流れを示したフローチャートである。 図１２Ａは、眼鏡としての医用画像表示装置を説明するための図である。 図１２Ｂは、眼鏡としての医用画像表示装置を説明するための図である。

以下、添付図面を参照しながら、実施形態に係る医用画像表示装置、医用画像出力装置及び医用画像用媒体について説明する。

まず、実施形態に係る医用画像表示装置及び医用画像出力装置が利用される環境について説明する。図１は、実施形態に係る医用画像出力装置１及び医用画像表示装置５を有する医用画像表示システムＳを示した図である。図１に示した様に、医用画像表示システムＳは、医用画像出力装置１を内蔵する医用画像診断装置２、スマートフォン、タブレット型コンピュータ等の医用画像表示装置５を有する。なお、医用画像診断装置２は、ネットワークを介して放射線部門サーバ装置３、医用画像管理サーバ装置４と通信することができる。

医用画像出力装置１は、医用画像診断装置２によって撮像された医用画像、医用画像管理サーバ装置４から取得した医用画像をフィルムや紙等の医用画像用媒体に印刷する装置である。医用画像出力装置１は、図１に示した様に、医用画像診断装置２に内蔵されていてもよいし、単体としての医用画像出力装置１が、医用画像診断装置２と有線又は無線によって通信可能に接続されていてもよい。なお、本実施形態においては、説明を具体的にするために、医用画像診断装置２をＸ線診断装置とし（以下、「Ｘ線診断装置２」と呼ぶ。）、医用画像出力装置１はＸ線診断装置２に内蔵されているものとする。医用画像出力装置１が有する具体的な構成、機能については後で詳しく説明する。

医用画像表示装置５は、医用画像出力装置１から出力された医用画像に、付帯情報を重畳させて表示する表示装置である。医用画像表示装置５は、典型的にはスマートフォン、タブレット型コンピュータ等である。なお、本実施形態においては、説明を具体的にするために、医用画像表示装置５はスマートフォンであるとする。また、医用画像表示装置５が有する具体的な構成、機能については後で詳しく説明する。

放射線部門サーバ装置３は、病院内の放射線部門における情報を管理する放射線部門情報システム（Ｒａｄｉｏｌｏｇｙ Ｉｎｆｏｒｍａｔｉｏｎ Ｓｙｓｔｅｍｓ：ＲＩＳ）における情報の管理にかかわる処理を実行するコンピュータ装置である。放射線部門サーバ装置３は、動作の一例として、検査オーダを受け、検査オーダからＸ線診断装置２に関する情報（例えば検査種別）等を取得する。放射線部門サーバ装置３は、検査オーダにより特定されたＸ線診断装置２に、当該検査オーダを送信する。なお、検査オーダがＸ線診断装置２に送信されるとき、放射線部門サーバ装置３は、患者ＩＤや検査日付などの情報を、ＤＩＣＯＭ（Ｄｉｇｉｔａｌ Ｉｍａｇｉｎｇ ａｎｄ Ｃｏｍｍｕｎｉｃａｔｉｏｎｓ ｉｎ Ｍｅｄｉｃｉｎｅ）タグとしてのメタ情報に付加してもよい。

医用画像管理サーバ装置４は、医用画像管理システム（Ｐｉｃｔｕｒｅ Ａｒｃｈｉｖｉｎｇ ａｎｄ Ｃｏｍｍｕｎｉｃａｔｉｏｎ Ｓｙｓｔｅｍｓ：ＰＡＣＳ）における情報の管理にかかわる処理を実行するコンピュータ装置である。ＰＡＣＳは、Ｘ線画像、Ｘ線ＣＴ画像、ＭＲ画像等の医用画像、および像診断レポートとも称される読影レポートを管理する情報システムである。医用画像管理サーバ装置４は、Ｘ線診断装置２から医用画像および検査オーダを受信すると、医用画像と検査オーダとを関連付けて記憶する。医用画像には、ＤＩＣＯＭのタグとしてメタ情報が付帯される。

図２は、実施形態に係る医用画像出力装置１の構成を示したブロック図である。図２に示した様に、医用画像出力装置１は、第１の記憶回路１０、第１の処理回路１１、第１の入力回路１２、通信Ｉ／Ｆ回路１３、第１の表示回路１４、印刷回路１５を備える。

第１の記憶回路１０は、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）、フラッシュメモリ（ｆｌａｓｈ ｍｅｍｏｒｙ）等の半導体メモリ素子、ハードディスク、光ディスク等によって構成される。第１の記憶回路１０は、ＵＳＢ（Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ）メモリ及びＤＶＤ（Ｄｉｇｉｔａｌ Ｖｉｄｅｏ Ｄｉｓｋ）などの可搬型メディアによって構成されてもよい。

第１の記憶回路１０は、第１の処理回路１１において用いられるＯＳ（Ｏｐｅｒａｔｉｎｇ Ｓｙｓｔｅｍ）用プログラム、各種処理プログラム（アプリケーションプログラム等も含まれる）や、プログラムの実行に必要なデータや、ボリュームデータ及び医用画像を記憶する。

第１の処理回路１１は、プログラムを第１の記憶回路１０から読み出し、実行することで各プログラムに対応する機能を実現するプロセッサである。第１の処理回路１１は、例えば、第１の記憶回路１０に格納されている各種制御プログラムを読み出して画像データ取得機能１１０、コード化情報生成機能１１１、コード化情報付画像生成機能１１２を実現すると共に、第１の記憶回路１０、第１の入力回路１２、通信Ｉ／Ｆ回路１３、第１の表示回路１４における処理動作を統括的に制御する。換言すると、各プログラムを読み出した状態の第１の処理回路１１は、図２の第１の処理回路１１内に示された各機能を有することとなる。

画像データ取得機能１１０は、Ｘ線診断装置２が撮像した医用画像の画像データを取得する。また、画像データ取得機能１１０は、ネットワークを介して医用画像管理サーバ装置４から医用画像の画像データを取得する。

コード化情報生成機能１１１は、画像データ取得機能１１０によって取得された画像データに付帯された付帯情報に基づいて、レイアウト情報を生成する。また、コード化情報生成機能１１１は、当該画像データに付帯された付帯情報と、当該付帯情報に基づいて生成されたレイアウト情報とを用いて、当該画像データに対応するコード化情報を生成する。

ここで、付帯情報とは、患者情報（患者氏名、患者ＩＤ、性別等）、撮像条件（管電流値、管電圧値、造影剤の有無等）、検査情報、対応する画像に設定された関心領域（ＲＯＩ）やマーカ、画像上に付されたコメント（又はアノテーション）、当該画像を用いて計測された計測値、当該画像について付された所見等を意味する。典型的には、付帯情報は、ＤＩＣＯＭのタグ情報として対応する画像に付帯されている。しかしながら、ＤＩＣＯＭのタグ情報に限定されず、画像と対応付けして管理される情報であれば、付帯させるための形態についてはどのようなものであってもよい。

また、レイアウト情報とは、対応する医用画像を基準とした付帯情報の表示レイアウトに関する情報である。より具体的には、レイアウト情報とは、医用画像を表示する場合において、対応付けされた付帯情報を当該医用画像を基準とする位置関係及び大小関係において、どの位置にどのサイズで配置して表示するのかを規定するためのレイアウトに関する情報である。

また、コード化情報とは、一次元バーコード、二次元バーコード（例えばＱＲコード（登録商標）、データマトリックス（登録商標））等によって、付帯情報及びレイアウト情報をコード化（符号化）した情報である。なお、本実施形態においては、説明を具体的にするため、コード化情報は、二次元バーコードによって生成するものとする。しかしながら、当該例に限定されることなく、付帯情報及びレイアウト情報を他のコード化手法によってコード化し、コード化情報を生成するようにしてもよい。

コード化情報付画像生成機能１１２は、コード化情報付画像を生成する。ここで、コード化情報付画像とは、コード化情報生成機能１１１によって生成されたコード化情報が対応する医用画像に付加された画像である。コード化情報付画像生成機能１１２は、コード化情報付画像を印刷回路１５に印刷させる。

なお、図２においては単一のプロセッサである第１の処理回路１１にて画像データ取得機能１１０、コード化情報生成機能１１１、コード化情報付画像生成機能１１２が実現されるものとして説明したが、複数の独立したプロセッサを組み合わせて処理回路を構成し、各プロセッサがプログラムを実行することにより機能を実現するものとしても構わない。また、図２においては単一の第１の記憶回路１０が各処理機能に対応するプログラムを記憶するものとして説明したが、複数の第１の記憶回路１０を分散して配置して、第１の処理回路１１は個別の第１の記憶回路１０から対応するプログラムを読み出す構成としても構わない。

図３は、コード化情報付画像６０が印刷された医用画像用媒体６の一例を示した図である。医用画像用媒体６がフィルムであれば、シャーカステンに設置され、画像診断に用いられる。

図３に示した様に、コード化情報付画像６０は、医用画像６０ａと、当該医用画像６０ａに関する付帯情報及びレイアウト情報がコード化されたコード化情報６０ｂと、を含む。この医用画像用媒体６を用いた、医用画像表示装置５の付帯情報重畳表示機能（後述）により、医用画像表示装置５のモニタを介して医用画像６０ａに付帯情報を重畳表示することができる。

なお、図３では、医用画像６０ａの左下にコード化情報６０ｂが配置されたコード化情報付画像６０の例を示した。しかしながら、当該例に限定されず、医用画像６０ａとの相対的な位置関係が規定されていれば、コード化情報６０ｂは医用画像用媒体６上のどの位置に配置されていてもよい。

図４は、複数のコード化情報付画像６０〜６３が印刷された医用画像用媒体６の一例を示した図である。画像診断においては、図４に示した様に、複数（図４では４つを例示）の医用画像６０ａ〜６３ａが一つの医用画像用媒体６に同時に印刷される場合がある。係る場合には、それぞれ医用画像６０ａ〜６３ａと決まった位置関係で対応するコード化情報６０ｂ〜６３ｂが印刷される。

図２に戻り、第１の入力回路１２は、操作者によって操作が可能なポインティングデバイス（マウス等）やキーボード等の入力デバイスからの信号を入力する回路であり、ここでは、入力デバイス自体も第１の入力回路１２に含まれるものとする。操作者により入力デバイスが操作されると、第１の入力回路１２はその操作に応じた入力信号を生成して第１の処理回路１１に出力する。なお、第１の入力回路１２は、入力デバイスが第１の表示回路１４と一体に構成されたタッチパネルを備えてもよい。

なお、第１の入力回路１２は、マウス、キーボードなどの物理的な操作部品を備えるものだけに限られない。例えば、装置とは別体に設けられた外部の入力機器から入力操作に対応する電気信号を受け取り、この電気信号を制御回路へ出力する電気信号の処理回路も第１の入力回路１２の例に含まれる。

通信Ｉ／Ｆ（ｉｎｔｅｒｆａｃｅ）回路１３は、所定の通信規格にしたがって、外部装置との通信動作を行う。医用画像出力装置１がネットワーク上に設けられる場合、通信Ｉ／Ｆ回路１３は、ネットワーク上の外部装置と情報の送受信を行なう。例えば、通信Ｉ／Ｆ回路１３は、撮像で得られたデータをＸ線診断装置２や医用画像管理サーバ装置４から受信する。

第１の表示回路１４は、画像を表示するディスプレイであり、ＬＣＤ（Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ）等によって構成される。第１の表示回路１４は、第１の処理回路１１からの指示に応じてＬＣＤ上に、各種操作画面や、画像データ等の各種表示情報を表示させる。

印刷回路１５は、コード化情報付画像生成機能１１２からの制御信号及び画像データに基づき、コード化情報付画像をフィルム、紙等の医用画像用媒体に印刷（転写）する。

（医用画像表示装置）
図５は、実施形態に係る医用画像表示装置５の構成を示したブロック図である。図５に示した様に、医用画像表示装置５は、医用画像表示装置５を統合的に制御するプロセッサである第２の処理回路５０、第２の表示回路５１、第２の記憶回路５２、通信回路５３、第２の入力回路５４、カメラ５５、マイク５６、スピーカ５７を備える。

第２の表示回路５１は、第２の処理回路５０から受信した信号に基づいて表示を行なう。第２の表示回路５１は、例えば液晶ディスプレイ、プラズマディスプレイ、または有機ＥＬディスプレイ等である。

第２の記憶回路５２は、ＲＡＭ、フラッシュメモリ等の半導体メモリ素子、ハードディスク、ＵＳＢメモリ等によって構成される。第２の記憶回路５２は、第２の処理回路５０において用いられる各種処理プログラム（ＯＳ用プログラム、アプリケーションプログラム等も含まれる）や、プログラムの実行に必要なデータを記憶する。

通信回路５３は、所定の方式に従い、通信事業者の通信網において通信を行なうことができる。また、通信回路５３は、例えばＷｉＦｉ（登録商標）、Ｂｌｕｅｔｏｏｔｈ（登録商標）によって近距離無線通信を行なうことができる。

第２の入力回路５４は、ユーザからの入力を受け付け、第２の処理回路５０にその入力に基づく信号を送信することができる。第２の入力回路５４は、操作部としてのタッチパネル５４０と電源ボタン５４１とを含む。ユーザは第２の入力回路５４から医用画像表示装置５の操作に必要な入力を行なうことができる。

カメラ５５は、医用画像診断装置によって撮像された医用画像を撮像し、一次元バーコード、二次元バーコード等のコード化情報を読み込むための読み込み装置であり、デジタルカメラ等に代表される光学撮像装置である。なお、カメラ５５は、光学的撮像部の一例である。

第２の処理回路５０は、医用画像表示装置５を統合的に制御するプロセッサである。第２の処理回路５０は、ＣＰＵ、ＳＲＡＭやＤＲＡＭ等の記憶回路（記憶素子）を有する。また、第２の処理回路５０は、プログラムを第２の記憶回路５２から読み出し、実行することで各プログラムに対応する機能を実現する。

例えば、第２の処理回路５０は、第２の記憶回路５２に格納されている各種制御プログラムを読み出して復号機能５００、表示制御機能５０２を実現すると共に、第２の表示回路５１、第２の記憶回路５２、通信回路５３、第２の入力回路５４、カメラ５５、マイク５６、スピーカ５７における処理動作を統括的に制御する。換言すると、各プログラムを読み出した状態の第２の処理回路５０は、図５の第２の処理回路５０内に示された各機能を有することとなる。

復号機能５００は、カメラ５５によって撮像された（読み込まれた）コード化情報６０ｂをデコード（復号化）し、付帯情報及びレイアウト情報を取得する。なお、復号機能５００は、情報取得部の一例である。

表示制御機能５０２は、カメラ５５によって撮像されたコード化情報に含まれたレイアウト情報に基づいて、カメラ５５によって撮像された医用画像上に付帯情報を表示させる。すなわち、表示制御機能５０２は、例えばＡＲ（Ａｕｇｕｍｅｎｔｅｄ Ｒｅａｌｉｔｙ）技術により、カメラ５５によって撮像された画像上に、レイアウト情報が規定する位置に付帯情報を重畳表示（合成表示）させる。また、表示制御機能５０２は、例えばＡＲ技術等により、カメラ５５によって撮像された画像と、レイアウト情報が規定する位置に付帯情報とを並列表示させる。また、表示制御機能５０２は、カメラ５５によって医用画像が逐次的に撮像される場合には、逐次的に撮像される各医用画像と、レイアウト情報が規定する位置に付帯情報とを表示させる。

さらに、表示制御機能５０２は、タッチパネル５４０から入力された拡大操作、縮小操作、回転操作に追従して、カメラ５５によって撮像された画像上に重畳された付帯情報の位置大きさの少なくとも一方を制御する。なお、表示制御機能５０２は、表示制御部の一例である。

なお、図５においては単一のプロセッサである第２の処理回路５０にて復号機能５００、表示制御機能５０２が実現されるものとして説明したが、複数の独立したプロセッサを組み合わせて処理回路を構成し、各プロセッサがプログラムを実行することにより機能を実現するものとしても構わない。また、図５においては単一の第２の記憶回路５２が各処理機能に対応するプログラムを記憶するものとして説明したが、複数の第２の記憶回路５２を分散して配置して、第２の処理回路５０は個別の第２の記憶回路５２から対応するプログラムを読み出す構成としても構わない。

図６は、シャーカステンに設置された医用画像用媒体６と、医用画像表示装置５によって撮像された医用画像用媒体６内の医用画像６１ａに重畳表示されるコード化情報６１ｂを示した図である。図６に示した様に、医用画像表示装置５のカメラ５５によって例えばコード化情報６１ｂを撮像した後、シャーカステンに設置された医用画像用媒体６に含まれる医用画像６１ａを、同じく医用画像表示装置５のカメラ５５によって撮像した場合を想定する。

係る場合、復号機能５００によって、コード化情報６１ｂに基づく医用画像６１ａの付帯情報、及び当該付帯情報の医用画像６１ａに対するレイアウト情報が取得される。取得された付帯情報５ａ、５ｂは、図６に示した様に、表示制御機能５０２により、レイアウト情報に基づいて、カメラ５５によって撮像された医用画像６１ａ上の対応する位置に、所定のサイズで重畳表示又は並列表示される。

この重畳表示は、例えばＡＲ技術によって実現されるため、付帯情報５ａ、５ｂは、レイアウト情報に基づいて、対応する医用画像６１ａと決まった位置関係を維持する。従って、例えば、医用画像表示装置５のカメラ５５をパン（ＰＡＮ）して医用画像６１ａがフレームアウトした場合、医用画像６１ａ重畳された付帯情報もフレームアウトすることになる。一方、医用画像６１ａがフレームアウトした状態から、医用画像表示装置５のカメラ５５をパンして医用画像６１ａをフレームインさせた場合には、医用画像６１ａに重畳された付帯情報もフレームインすることになる。

また、例えば、決まった位置に付帯情報５ａ、５ｂが重畳された医用画像６１ａを表示している状態で、医用画像表示装置５のカメラ５５をパンし、例えば隣のコード化情報６０ｂを撮像した後、シャーカステンに設置された医用画像６０ａを、同じく医用画像表示装置５のカメラ５５によって撮像した場合を想定する。

係る場合には、復号機能５００により、コード化情報６０ｂに基づく医用画像６０ａの付帯情報、及び当該付帯情報の医用画像６０ａに対するレイアウト情報が新たに取得される。取得された付帯情報は、表示制御機能５０２により、レイアウト情報に基づいて、カメラ５５によって撮像された医用画像６０ａ上の対応する位置に、所定のサイズで重畳表示される。

なお、コード化情報から取得された付帯情報は、同じコード化情報から取得されたレイアウト情報に従って、対応する医用画像と決まった位置関係を維持しながらに当該対応する医用画像に重畳表示される。従って、付帯情報は、対応しない医用画像上に重畳表示されることはない。

図７は、医用画像表示装置５において表示された画像の一部を回転した場合における、文字情報としての付帯情報の表示例を説明するための図である。図８は、医用画像表示装置５において表示された画像の一部を拡大した場合における、文字情報としての付帯情報の表示例を説明するための図である。まず、シャーカステンに設置された医用画像用媒体のコード化情報をカメラ５５によって読み込んだ後、対応する医用画像６１ａをカメラ５５によって撮像する。これにより、医用画像表示装置５の第２の表示回路５１には、文字情報としての付帯情報５ｂが決まった位置に重畳された医用画像６１ａが表示される。この医用画像６１ａに対して、ユーザによるタッチパネル５４０の操作により、回転操作が入力されたとする。このとき、第２の表示回路５１においては、図７に示した様に、医用画像６１ａが回転示されると共に、医用画像６１ａとの間で決まった位置関係を維持したまま、文字情報としての付帯情報５ｂが表示される。

また、例えば図７に示した状態で、ユーザによるタッチパネル５４０の操作により、医用画像６１ａの拡大操作が入力されたとする。このとき、第２の表示回路５１においては、図８に示した様に、医用画像６１ａが拡大表示されると共に、医用画像６１ａとの間で決まった位置関係を維持したまま、文字情報としての付帯情報５ｂが表示される。なお、このとき、拡大操作に追従して付帯情報５ｂを拡大表示してもよい。また、医用画像６１ａを拡大した場合であっても付帯情報５ｂが画面内に収まるように、医用画像６１ａとの位置関係を維持したまま、付帯情報５ｂのサイズを制御するようにしてもよい。

図９は、医用画像表示装置において表示された画像の一部を回転した場合における、ＲＯＩとしての付帯情報の表示例を説明するための図である。図１０は、医用画像表示装置において表示された画像の一部を拡大した場合における、ＲＯＩとしての付帯情報の表示例を説明するための図である。まず、シャーカステンに設置された医用画像用媒体のコード化情報をカメラ５５によって読み込んだ後、対応する医用画像６１ａをカメラ５５によって撮像する。これにより、医用画像表示装置５の第２の表示回路５１には、ＲＯＩとしての付帯情報５ｃが重畳された医用画像６１ａが表示される。この医用画像６１ａに対して、ユーザによるタッチパネル５４０の操作により、回転操作が入力されたとする。このとき、第２の表示回路５１においては、図９に示した様に、医用画像６１ａが回転示されると共に、医用画像６１ａとの間で決まった位置関係を維持したまま、ＲＯＩとしての付帯情報５ｂが表示される。

また、例えば図９に示した状態で、ユーザによるタッチパネル５４０の操作により、医用画像６１ａの拡大操作が入力されたとする。このとき、第２の表示回路５１においては、図１０に示した様に、医用画像６１ａが拡大表示されると共に、医用画像６１ａとの間で決まった位置関係を維持したまま、ＲＯＩとしての付帯情報５ｃが表示される。なお、このとき、拡大操作に追従して。ＲＯＩとしての付帯情報５ｃも拡大表示される。また、医用画像６１ａを拡大した場合であっても付帯情報５ｃが画面内に収まるように、医用画像６１ａとの位置関係を維持したまま、付帯情報５ｃのサイズを制御するようにしてもよい。

（コード化情報付画像出力処理）
次に、医用画像出力装置１によって実行されるコード化情報付画像出力処理、医用画像表示装置５によって実行される付帯情報重畳表示処理について説明する。

図１１Ａは、本実施形態におけるコード化情報付画像出力処理の流れを示したフローチャートである。

まず、医用画像出力装置１は、第１の入力回路１２を介して特定の医用画像についてのフィルミング指示を受け付ける（ステップＳ１）。医用画像出力装置１の画像データ取得機能１１０は、フィルミング指示の対象となる画像データ、及び当該画像データに付帯された付帯情報を取得する（ステップＳ２）。

医用画像出力装置１のコード化情報生成機能１１１は、画像データ取得機能１１０によって取得された画像データと付帯情報とに基づいて、レイアウト情報を生成する。また、医用画像出力装置１のコード化情報生成機能１１１は、付帯情報と当該付帯情報に基づいて生成されたレイアウト情報とをコード化し、当該画像データに対応するコード化情報を生成する（ステップＳ３）。

医用画像出力装置１のコード化情報付画像生成機能１１２は、コード化情報生成機能１１１によって生成されたコード化情報を印刷対象である医用画像に付加してコード化情報付画像を生成する（ステップＳ４）。また、コード化情報付画像生成機能１１２は、印刷回路１５にコード化情報付画像を印刷回路１５に印刷させる。印刷回路１５は、コード化情報付画像が印刷された医用画像用媒体を出力する（ステップＳ５）。

（付帯情報重畳表示処理）
図１１Ｂは、本実施形態における付帯情報重畳表示処理の流れを示したフローチャートである。以下、ステップＳ５において出力された医用画像用媒体がシャーカステンに設置され、これを医師等のユーザが観察する場合を想定する。

医用画像表示装置５のカメラ５５により、シャーカステンに設置されたコード化情報付画像内のコード化情報が撮像（読み取り）される（ステップＳ１１）と、医用画像表示装置５の復号機能５００は、カメラ５５によって撮像されたコード化情報をデコードし、付帯情報及びレイアウト情報を取得する（ステップＳ１２）。

医用画像表示装置５の表示制御機能５０２は、ＡＲ技術により、カメラ５５によって撮像され第２の表示回路５１に表示された画像上に、レイアウト情報が規定する位置に付帯情報を重畳させる（ステップＳ１３）。

以上述べた実施形態に係る医用画像表示装置５は、光学的撮像部としてのカメラ５５と、表示制御部としての表示制御機能５０２とを備える。カメラ５５は、Ｘ線診断装置２によって撮像された医用画像と、当該医用画像の付帯情報の表示レイアウトに関するレイアウト情報を含むコード化情報を撮像する。表示制御機能５０２は、カメラ５５に撮像されたコード化情報に含まれたレイアウト情報に基づいて、カメラ５５によって撮像された医用画像と付帯情報とを表示させる。

すなわち、ユーザは、医用画像と共に印刷されたコード化情報を例えばスマートフォン、タブレット型コンピュータ等のデバイスで読み取り、医用画像を撮像するだけで、当該医用画像の付帯情報を、例えばスマートフォン等の画面にのみ表示することができる。ユーザは、シャーカステン等において付帯情報のない医用画像を観察することができると共に、スマートフォン等の画面において付帯情報を確認することができる。フィルムに印刷された医用画像は、付帯情報が重畳されてないので観察の邪魔になることはない。また、スマートフォン等に医用画像と共に表示される付帯情報は、文字等を縮小することなく特定の位置に表示される。

従って、ユーザは、付帯情報によって医用画像が観察し辛くなったり、文字が縮小されて付帯情報が読み辛くなることなく、医用画像を観察し付帯情報を把握することができる。特に、ユーザは、医用画像を印刷されたフィルム等により観察し、付帯情報についてはスマートフォン等によって見ることができる。従って、複数の画像が印刷されたフィルム等を観察する場合や、付帯情報の情報量が増えた場合であっても、医用画像の良好な視認性と、付帯情報の読みやすさ及び情報量の確保とを両立させることができる。その結果、フィルミングされた医用画像を用いた画像診断において、画像及び付帯情報の視認性を従来に比して向上させることができる。

また、付帯情報は、レイアウト情報に従って、対応する医用画像を基準として特定の位置に表示される。従って、医用画像と付帯情報との関連付けも容易であり、他の医用画像や他の付帯情報との間で取り違えが発生こともない。

また、スマートフォン等の医用画像を拡大、縮小、回転したり、医用画像表示装置５のカメラ５５をパンした場合であっても、マーカ、コメント等を含む付帯情報の位置やサイズを追従して表示することができる。また、ＲＯＩ等が設定されている場合には、当該ＲＯＩの位置とサイズを追従して表示することができる。

（変形例１）
上記実施形態においては、医用画像診断装置がＸ線診断装置である場合を例として説明した。これに対し、医用画像診断装置がＸ線コンピュータ断層撮像装置、磁気共鳴イメージング装置、ＰＥＴ（Ｐｏｓｉｔｒｏｎ Ｅｍｉｓｓｉｏｎ Ｔｏｍｏｇｒａｐｈｙ）、ＳＰＥＣＴ（Ｓｉｎｇｌｅ Ｐｈｏｔｏｎ Ｅｍｉｓｓｉｏｎ Ｃｏｍｐｕｔｅｄ Ｔｏｍｏｇｒａｐｈｙ）である場合であっても、上述したコード化情報付画像生成・出力処理、付帯情報重畳表示処理を適用することができる。

（変形例２）
上記実施形態においては、Ｘ線診断装置２に内蔵された医用画像出力装置１が上記コード化情報付画像生成・出力処理を実行する構成を例として説明した。これに対し、例えばコード化情報付画像生成・出力処理を実行する医用画像出力装置１をネットワーク上或いはクラウド上において単独の装置として設置する構成であってもよい。この様な構成の場合、当該医用画像出力装置１は、Ｘ線診断装置２、医用画像管理サーバ装置４、或いは図示していない医用画像観察装置（ビューア）等からネットワークを介して取得した医用画像を用いて、上記コード化情報付画像生成・出力処理を実行する。

（変形例３）
上記実施形態においては、コード化情報付画像生成・出力処理において、一つの画像データとして、医用画像とコード化情報とを含むコード化情報付画像を生成し、一枚の医用画像用媒体に印刷又は転写する場合を例示した。これに対し、Ｘ線診断装置２において撮像された医用画像を例えばフィルムに現像する場合に、対応するコード化情報を同じフィルムに現像することで、医用画像とコード化情報とを含むコード化情報付画像を生成することも可能である。

これにより、Ｘ線画像と対応するコード化情報とを含むコード化情報付画像が現像されたフィルムを取得することができる。ユーザは、この様に取得されたフィルムを用いて、上述した付帯情報表示処理を実現することができる。なお、フィルムに限らず、Ｘ線診断装置２において撮像された医用画像を、例えば紙に印刷する場合においても同様である。

（変形例４）
上記実施形態においては、コード化情報付画像を観察する際の医用画像表示装置として、スマートフォンやタブレットＰＣを用いる場合を例とした。これに対し、付帯情報表示機能を有する専用の眼鏡型の医用画像表示装置を用いるようにしてもよい。

図１２Ａ、図１２Ｂは、変形例４に係る眼鏡型の医用画像表示装置８を説明するための図である。ユーザは、当該眼鏡型の医用画像表示装置８を装着し付帯情報表示機能をＯＮにしてシャーカステンに配置された医用画像６１ａを観察した場合には、図１２Ａに示した様に、付帯情報表示機能に従って、医用画像６１ａに重畳された付帯情報５ｅ、５ｆを見ることができる。一方、ユーザは、当該眼鏡型の医用画像表示装置８の付帯情報表示機能をＯＦＦにしてシャーカステンに配置された医用画像６１ａを観察した場合には、図１２Ｂに示した様に、付帯情報が重畳表示されていない医用画像６１ａを観察することができる。

係る眼鏡型の医用画像表示装置８によれば、ユーザは、付帯情報が重畳された医用画像、或いは付帯情報が重畳されていない医用画像を、ハンズフリーの状態で観察することができる。その結果、ユーザがより負担なく医用画像とその付帯情報を観察することができ、フィルミングされた医用画像を用いた画像診断において、さらに利便性の高い医用画像表示装置を実現することができる。

（変形例５）
上記実施形態においては、医用画像表示装置５においてＡＲ技術を用いて付帯情報を医用画像に重畳表示する場合を例として説明した。これに対し、医用画像表示装置５において、ＭＲ（Ｍｉｘｅｄ Ｒｅａｌｉｔｙ）技術を用いて付帯情報を医用画像に重畳表示するようにしてもよい。

（変形例６）
上記実施形態においては、コード化情報が付帯情報を含む場合を例示した。これに対し、コード化情報は、付帯情報を含まず、レイアウト情報、観察対象とする医用画像の付帯情報が保存された場所（例えば、観察対象とする医用画像の付帯情報を管理するサーバ）へのリンク情報、観察対象とする医用画像のＤＩＣＯＭ規格に従う付帯情報へのリンク情報を含むようにしてもよい。

なお、上記実施形態において用いた「プロセッサ」という文言は、例えば、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）、ＧＰＵ（Ｇｒａｐｈｉｃａｌ ｐｒｏｃｅｓｓｉｎｇ ｕｎｉｔ）或いは、特定用途向け集積回路（Ａｐｐｌｉｃａｔｉｏｎ Ｓｐｅｃｉｆｉｃ Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ：ＡＳＩＣ）、プログラマブル論理デバイス（例えば、単純プログラマブル論理デバイス（Ｓｉｍｐｌｅ Ｐｒｏｇｒａｍｍａｂｌｅ Ｌｏｇｉｃ Ｄｅｖｉｃｅ：ＳＰＬＤ）、複合プログラマブル論理デバイス（Ｃｏｍｐｌｅｘ Ｐｒｏｇｒａｍｍａｂｌｅ Ｌｏｇｉｃ Ｄｅｖｉｃｅ：ＣＰＬＤ），及びフィールドプログラマブルゲートアレイ（Ｆｉｅｌｄ Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙ：ＦＰＧＡ））等の回路を意味する。プロセッサは第１の記憶回路１０、第２の記憶回路５２に保存されたプログラムを読み出し実行することで機能を実現する。なお、第１の記憶回路１０、第２の記憶回路５２にプログラムを保存する代わりに、プロセッサの回路内にプログラムを直接組み込むよう構成しても構わない。この場合、プロセッサは回路内に組み込まれたプログラムを読み出し実行することで機能を実現する。

以上述べた少なくとも一つの実施形態によれば、フィルミングされた医用画像を用いた画像診断において、画像及び付帯情報の視認性を従来に比して向上させることができる。

本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれるものである。

１ 医用画像出力装置
２ Ｘ線診断装置（医用画像診断装置）
３ 放射線部門サーバ装置
４ 医用画像管理サーバ装置
５ 医用画像表示装置
５ａ、５ｂ、５ｃ 付帯情報
１０ 第１の記憶回路
１１ 第１の処理回路
１２ 第１の入力回路
１３ 通信Ｉ／Ｆ回路
１４ 第１の表示回路
１５ 印刷回路
５０ 第２の処理回路
５１ 第２の表示回路
５２ 第２の記憶回路
５３ 通信回路
５４ 第２の入力回路
５５ カメラ
５６ マイク
５７ スピーカ
６０、６１、６２、６３ コード化情報付画像
６０ａ、６１ａ、６２ａ、６３ａ 医用画像
６０ｂ、６１ｂ、６２ｂ、６３ｂ コード化情報
１１０ 画像データ取得機能
１１１ コード化情報生成機能
１１２ コード化情報付画像生成機能
５００ 復号機能
５０２ 表示制御機能

Claims (11)

1. 医用画像診断装置によって撮像された医用画像と、当該医用画像の付帯情報の表示レイアウトに関するレイアウト情報を含むコード化情報とを撮像する光学的撮像部と、
   前記撮像されたコード化情報に含まれた前記レイアウト情報に基づいて、前記光学的撮像部によって撮像された前記医用画像と前記付帯情報とを表示させる表示制御部と、
   を備えた医用画像表示装置。
2. 前記表示制御部は、前記光学的撮像部が前記医用画像を逐次的に撮像する場合には、前記撮像されたコード化情報を含む前記レイアウト情報に基づいて、逐次的に撮像される前記医用画像と前記付帯情報とを表示させる、
   請求項１に記載の医用画像表示装置。
3. 前記付帯情報と表示された前記医用画像に対する拡大操作、縮小操作、回転動作のうち少なくともいずれかを受け付ける操作部をさらに備え、
   前記表示制御部は、前記操作部が受け付けた拡大操作、縮小操作、回転動作の少なくともいずれかに追従して、前記医用画像と表示される前記付帯情報の位置及び大きさの少なくとも一方を制御する、
   請求項１又は２に記載の医用画像表示装置。
4. 前記表示制御部は、ＡＲ技術により、前記光学的撮像部によって撮像された前記医用画像と前記付帯情報とを表示させる請求項１乃至３のうちいずれか一項に記載の医用画像表示装置。
5. 前記医用画像表示装置は、眼鏡型である請求項１乃至４のうちいずれか一項に記載の医用画像表示装置。
6. 前記レイアウト情報は、前記医用画像を基準とした前記付帯情報の表示レイアウトに関する情報を含む請求項１乃至５のうちいずれか一項に記載の医用画像表示装置。
7. 前記コード化情報は、前記医用画像の前記付帯情報を含む請求項１乃至６のうちいずれか一項に記載の医用画像表示装置。
8. 前記表示制御部は、前記撮像されたコード化情報を含む前記レイアウト情報に基づいて、前記光学的撮像部によって撮像された前記医用画像上に前記付帯情報を重畳表示させる請求項１乃至７のうちいずれか一項に記載の医用画像表示装置。
9. 医用画像診断装置によって撮像された医用画像に関する付帯情報の表示レイアウトに関するレイアウト情報を含むコード化情報を生成するコード化情報生成部と、
   前記医用画像と前記コード化情報とを媒体に印刷又は転写して出力する出力部と、
   を備えた医用画像出力装置。
10. 医用画像診断装置によって撮像された医用画像と、前記医用画像に関する付帯情報の表示レイアウトに関するレイアウト情報を含むコード化情報と、が印刷又は転写された医用画像用媒体。
11. コンピュータに、
    医用画像診断装置によって撮像された医用画像の付帯情報の表示レイアウトに関するレイアウト情報を含むコード化情報とを取得する情報取得機能と、
    前記取得されたコード化情報に含まれる前記レイアウト情報に基づいて、光学的撮像部によって撮像された前記医用画像と前記付帯情報とを表示させる表示制御機能と、
    を実現させるための医用画像表示プログラム。

Images