JPWO2015076004A1

JPWO2015076004A1 - 内視鏡画像表示装置

Info

Publication number: JPWO2015076004A1
Application number: JP2015525677A
Authority: JP
Inventors: 圭司奥村; 幸一廣瀬; 俊哉西村
Original assignee: Olympus Corp
Current assignee: Olympus Corp
Priority date: 2013-11-21
Filing date: 2014-09-16
Publication date: 2017-03-16
Anticipated expiration: 2034-09-16
Also published as: WO2015076004A1; EP3037939A4; CN105683889B; US9916076B2; CN105683889A; US20160202895A1; EP3037939A1; JP5865557B2

Abstract

表示制御部２３は、画面内の特定の表示領域に、表示対象の複数の画像をスクロール表示する。操作受付部２１は、ユーザの操作に起因するスクロール切替指示および表示モード切替指示を受け付ける。表示モードを切り替える際、表示制御部２３は、第１表示モードで表示されている前記表示領域内の複数の画像の内、進行方向へのスクロールにより最初に前記表示領域から外れる位置にある少なくとも一つの画像が、第２表示モードに切り替え時の前記表示領域内においても進行方向へのスクロールにより最初に前記表示領域から外れる位置に配置されるよう、前記表示領域内の表示を切り替える。

Description

本発明は、特定の表示領域に複数の画像をスクロール表示する画像表示装置に関する。

比較的狭い表示領域に多くの画像を表示するために様々な表示方法が提案されている。例えば、サムネイル画像の表示サイズを切り替えて、一覧性と各画像の視認性を両立させた表示方法が提案されている（例えば、特許文献１、２参照）。

スクロール形式の表示方法において、小さなサイズの画像を多く表示するモードから、大きなサイズの画像を少なく表示するモードに切り替える場合、スクロール位置に関わらず、切り替え後のモードでは先頭に戻って画像を表示することが一般的である。

特開２００９−１７５２２７号公報特開平１１−３１７９３０号公報

スクロール形式の表示方法において、撮影した多数の画像から所望の画像を見つけ出すには、はじめに小さなサイズの画像を多く表示するモードで表示させ、所望の画像に近づくと大きなサイズの画像を少なく表示するモードに切り替える手法が有効である。しかしながら、上述のように切り替え後のモードで画像の先頭から表示されると再度、先頭から所望の画像を探索する必要がある。

これに対して、切り替え後のモードで表示されるべき少なくとも一枚の画像をユーザに選択させ、当該画像を含むようにモード切り替え後に表示すべき画像を選定する手法が考えられる。しかしながら、この手法では選択操作という煩雑な操作をユーザに強いることになる。

本発明はこうした状況に鑑みなされたものであり、その目的は、複数の画像をスクロール表示する際に、ユーザが所望の画像をモード切り替え後に初期表示できる技術を提供することにある。

上記課題を解決するために、本発明のある態様の画像表示装置は、画面内の特定の表示領域に、表示対象の複数の画像をスクロール表示する表示制御部と、ユーザの操作に起因するスクロール指示および表示モード切替指示を受け付ける操作受付部と、を備える。前記表示制御部は、受け付けられたスクロール指示に応じて前記複数の画像をスクロール処理するとともに、受け付けられた表示モード切替指示に応じて第１表示モードから、第１表示モードと画像サイズ及び表示枚数が異なる第２表示モードに切り替え処理する。表示モードを切り替える際、前記表示制御部は、第１表示モードで表示されている前記表示領域内の複数の画像の内、進行方向へのスクロールにより最初に前記表示領域から外れる位置にある少なくとも一つの画像が、第２表示モードに切り替え時の前記表示領域内においても進行方向へのスクロールにより最初に前記表示領域から外れる位置に配置されるよう、前記表示領域内の表示を切り替える。

なお、以上の構成要素の任意の組み合わせ、本発明の表現を方法、装置、システム、記録媒体、コンピュータプログラムなどの間で変換したものもまた、本発明の態様として有効である。

本発明によれば、複数の画像をスクロール表示する際に、ユーザが所望の画像をモード切り替え後に初期表示できる。

本発明の実施の形態に係る医療情報管理システムの構成を模式的に示す図である。図１の医療情報入力装置の内部構成を模式的に示す図である。図２の医療情報入力装置の内部構成を模式的に示す図である。本発明の実施の形態に係る医療情報入力装置のレポート入力画面の一例を示す図である。画像表示領域に表示される複数枚の画像の表示例１を示す図である。画像表示領域に表示される複数枚の画像の表示例２を示す図である。画像表示領域に表示される複数枚の画像の表示例３を示す図である。図３の表示制御部の動作を示すフローチャートである。

図１は、本発明の実施の形態に係る医療情報管理システム１の構成を模式的に示す図である。医療情報管理システム１は、例えば内視鏡等の医用画像を生成するモダリティ２、ＬＡＮ（Local Area Network）等のネットワーク３、レポート記憶部４、オーダ情報管理装置５、および医療情報入力装置６を含む。

オーダ情報管理装置５は、各部門に検査、診断、手術などの医療行為の実施を指示するオーダ情報を管理する。医療情報入力装置６は、医師などの医療関係者（以下、「医療従事者」とよぶ。）が検査業務や診断業務を記録するための医用レポート入力を支援する装置である。例えば内視鏡検査医は、内視鏡検査を実施してその検査画像から所見内容、診断内容、処置内容などをまとめて医用レポートを作成する。このように医用レポートは医師等による医学的な知見をまとめた情報を含み、患者への説明に用いられたり、院内の医療従事者への閲覧に供せられる。詳細は後述するが、医療情報入力装置６は医療従事者のためのユーザインタフェースとして入力部１５および表示部１６を含む。レポート記憶部４は、医療従事者が作成した医用レポートを記録する。

図２は、図１の医療情報入力装置６の内部構成を模式的に示す図である。医療情報入力装置６は、ユーザインタフェース１０、制御部２０及び記憶部３０を備える。ユーザインタフェース１０は、入力部１５お及び表示部１６を備える。制御部２０は、操作受付部２１、記録データ作成部２２及び表示制御部２３を備える。

図３は、図２の医療情報入力装置６の内部構成を模式的に示す図である。表示制御部２３は、表示対象画像取得部２３１、パラメータ保持部２３２、パラメータ取得部２３３、画像配列部２３４、配列画像表示領域決定部２３５、基準画像選定部２３６、スクロールバー位置決定部２３７及び表示データ出力部２３８を備える。

図３の表示制御部２３を含む図２の医療情報入力装置６のそれぞれの構成は、ハードウェア的には、任意のプロセッサ、メモリ、その他のＬＳＩ（Large Scale Integration）で実現でき、ソフトウェア的にはメモリにロードされたプログラムなどによって実現されるが、ここではそれらの連携によって実現される機能ブロックを描いている。したがって、これらの機能ブロックがハードウェアのみ、ソフトウェアのみ、またはそれらの組み合わせによっていろいろな形で実現できることは、当業者には理解されるところである。

上述のように医療情報入力装置６は、医療従事者が検査業務を記録するためのレポート入力画面を生成して、医療従事者が入力した検査などの実施データをレポート記憶部４に記録する機能を有している。この機能は、「レポート入力機能」と呼ばれ、医療行為の結果を記録するために、医療情報入力装置６に基本機能として搭載されている。

図４は、本発明の実施の形態に係る医療情報入力装置６のレポート入力画面の一例を示す図である。図４のレポート入力画面は、内視鏡検査のレポート入力画面を示している。このレポートには、内視鏡検査で撮影された画像を添付できる。図４のレポート入力画面の上欄および下欄に示されるように、このレポートには「診療情報提供書」が添付されている。「病理オーダ」は添付されていない。

図４のレポート入力画面の左欄には、患者情報および検査画像が表示される。検査画像は、画像表示領域４０に複数枚表示される。検査画像は、医療情報管理システム１の図示しない画像記憶部から取得される。この画像記憶部には、モダリティ２により撮影された患者の画像が保存される。各画像には患者ＩＤ及び検査ＩＤが付され、検査ごとに撮影順に保存される。レポート入力画面の前画面にて、医療従事者が入力部１５から患者ＩＤ及び検査ＩＤを入力することにより、上記の画像記憶部、図示しない患者情報記憶部および図示しない検査情報記憶部から図４の患者情報および検査画像が読み込まれる。また読み込まれた検査情報の一部が、図４の右欄の該当する項目に埋め込まれる。なお画像記憶部、患者情報記憶部および検査情報記憶部は、レポート記憶部４と同じ記録媒体に構築されてもよいし、別の記録媒体に構築されてもよい。

レポート入力画面の右欄には、レポート入力すべき項目が表示される。図４では項目として「観察範囲」、「総合診断」、「検査後指示／合併症」及び「各種コメント／使用スコープ」が表示される。「観察範囲」は、人体の部位ごとに所見内容、診断内容、処置内容を入力する項目である。「総合診断」は、総合診断の内容を入力する項目である。「検査後指示／合併症」は、検査後の医師からの指示内容および合併症の有無を入力する項目である。「各種コメント／使用スコープ」は、上記に記載した以外のコメント及び検査に使用したスコープの種別を入力する項目である。

図４では「観察範囲」に、「食道」６１、「胃」６２の２つの部位の所見内容、診断内容、処置内容が入力される。「食道」６１の項目には食道の検査画像として、画像表示領域４０内から選択された画像Ａ４１ａ、画像Ｂ４２ａ、画像Ｃ４４ａ、画像Ｄ４３ａが添付される。同様に、「胃」６２の項目には胃の検査画像として、画像表示領域４０内から選択された画像Ｅ４６ａ、画像Ｆ４５ａが添付される。

検査画像を選択して「観察範囲」に添付する際、撮影された画像とレポート入力エリアが一覧表示されているほうが医療従事者にとって操作性が高い。従って基本的に画像表示領域４０は、全画面の１／３〜１／２以下のサイズにレイアウトされることが望まれる。一方、一回の内視鏡検査で多数の画像が撮影される場合がある。また同じ患者の過去の検査画像と比較するため、今回の検査画像と過去の検査画像の両方を表示させる場合もある。これらの場合、画像表示領域４０に例えば５０枚〜１００枚程度、表示されることもある。その場合にて画像表示領域４０に全ての画像を一覧表示すると、一枚の画像の表示サイズが小さくなりすぎる。

そこで画像表示領域４０に表示対象の画像を、ページ送り表示またはスクロール表示することが考えられる。内視鏡検査画像は患者の体腔内を時系列に撮影したものであるため、医師が注目する画像と、その前後画像を一画面で同時に表示させることが望まれる。例えば、近い部位の画像を同時に観察することで、画像に写っている異物に対して、より的確な診断が可能となる。複数枚の検査画像はページ単位で、撮影された部位が区切られているわけではなく、体腔内を連続的に撮影されたものであるため、ページ送り表示よりスクロール表示が望まれる。そこで本実施の形態では画像表示領域４０に、複数枚の検査画像をスクロール表示する。

図４にて、画像表示領域４０の右端にスクロールバー５１が設けられる。また画像表示領域４０内に、４行２列の８枚の画像４１〜４８が表示される。画像４１〜４４は「食道」６１の添付画像として選択されており、画像４１〜４４の上端には「食道」と記載されたタブ４１ｔ〜４４ｔがそれぞれ付加されている。画像４５〜４６は「胃」６２の添付画像として選択されており、画像４５〜４６の上端には「胃」と記載されたタブ４５ｔ〜４６ｔがそれぞれ付加されている。医師はスクロールバー５１をマウスや上下キー等の入力デバイスを用いて上下させることにより、画像表示領域４０に表示される画像を切り替えることができる。

医師は、病変が写っている可能性のある画像を、より拡大して観察したい場合がある。またスクロールを速めて、より早く目的の画像近辺に到達したい場合もある。患者の体腔内を内視鏡で撮影した医師は、気になる部位の画像が撮影順で何枚目付近にあるかを、ある程度直感的に把握している。そこで本実施の形態では、それぞれ画像サイズ及び表示列数が異なる複数の表示モードを規定する。画像サイズを小さく表示列数を多く表示すると、一枚の画像の視認性が低下するがスクロール速度が速くなる。一方、画像サイズを大きく表示列数を少なく表示すると、スクロール速度が遅くなるが一枚の画像の視認性が向上する。

本実施の形態では、１列表示モード、２列表示モード及び３列表示モードの３種類の表示モードを規定し、ユーザの操作にしたがい任意に表示モードを切り替えることができるよう設計している。図４では画像表示領域４０の下端近傍に、１列表示ボタン５２、２列表示ボタン５３及び３列表示ボタン５４が設けられる。ユーザは、いずれかの表示ボタン５２〜５４を、マウスクリック等により押下して所望の表示モードに切り替えることができる。

医師はレポート作成を終了すると、レポート入力画面の右下欄の登録ボタンを押下する。医療情報入力装置６の記録データ作成部２２は、レポートデータをネットワーク３を介してレポート記憶部４に記録する。

以下、本明細書ではレポート入力画面に表示される画像の表示モード切り替えに注目する。即ち、医療情報入力装置６の画像表示装置としての機能に注目する。図２に戻る。

ユーザインタフェース１０の入力部１５は、キーボード、マウス等の入力デバイスを備え、ユーザの操作に応じた指示信号を生成する。入力部１５は、生成した指示信号を制御部２０に出力する。表示部１６は、液晶ディスプレイ等の表示デバイスを備え、制御部２０から入力される表示データを表示する。なお、タッチパネルディスプレイが使用される場合、そのディスプレイは入力デバイスとしての機能も兼ねる。

制御部２０は医療情報入力装置６全体を制御する。本実施の形態ではレポート入力画面表示機能、レポート作成機能に関連する機能に注目し、その他の機能の説明は割愛する。操作受付部２１は、ユーザの操作に起因して、入力部１５により生成された指示信号を受け付ける。医師により入力された、レポート内容に関するテキストデータを受け付けると操作受付部２１は、そのテキストデータを記録データ作成部２２及び表示制御部２３に出力する。医師により検査画像が選択され、ある部位の「観察範囲」に紐付けられると操作受付部２１は、その画像の選択情報および紐付情報を記録データ作成部２２及び表示制御部２３に出力する。

また画像表示領域４０の画像表示に関するユーザの操作に起因する指示信号を受け付けると操作受付部２１は、その指示信号を表示制御部２３に出力する。例えば、スクロール切替信号、表示モード切替信号を受け付けると表示制御部２３に出力する。

記録データ作成部２２は、記憶部３０からレポート入力フォームデータを取得し、操作受付部２１から、レポート作成に関する入力データを取得する。また上記の画像記憶部から選択された画像を取得し、上記の患者情報記憶部から患者情報を取得し、上記の検査情報記憶部から検査情報を取得する。記録データ作成部２２は、取得したレポート入力フォームの各欄に、それぞれ取得したデータを埋め込みレポートデータを生成する。なお画像を直接埋め込む代わりに、画像の保存場所を示すリンクデータを埋め込んでもよい。記録データ作成部２２は、生成したレポートデータをネットワーク３を介してレポート記憶部４に記録する。

表示制御部２３は、画像表示領域４０内の画像の表示形式を制御する。表示対象の画像の枚数が、画像表示領域４０に表示可能な枚数を超える場合、表示制御部２３は画像表示領域４０にスクロールバー５１を表示する。超えない場合は表示対象の全ての画像を画像表示領域４０内に一覧表示する。

表示制御部２３は、操作受付部２１からスクロール切替指示が入力されると、その切替指示に応じて、画像表示領域４０に表示されている複数枚の画像をスクロールさせる。本実施の形態では図４に示したように縦方向のスクロールを想定する。ホイールが付いたマウスを入力デバイスとして使用する場合、人差し指でホイールを前後に回転させる操作と、縦スクロールが直感的に対応付けられる。従ってマウスのホイールでスクロールバー５１を移動させる場合、横スクロールより縦スクロールのほうが相対的に操作性が高いといえる。

表示制御部２３は、操作受付部２１から表示モード切替指示が入力されると、その表示モード切替指示に応じて、画像表示領域４０内の画像の表示方法を切り替える。上述の例では、１列表示モード、２列表示モード及び３列表示モードの３種類の表示モードの間で切り替える。なお表示モードの数は３種類に限らず、２種類であってもよいし、４種類以上であってもよい。以下、切り替え前後の２つの表示モードの内、切り替え前の表示モードを第１表示モードと表記し、切り替え後の表示モードを第２表示モードと表記する。

スクロールの途中において、操作受付部２１により表示モード切替指示が受け付けられると、表示制御部２３は次のように処理する。即ち表示制御部２３は、第１表示モードで画像表示領域４０内に表示されている複数の画像の内、進行方向へのスクロールにより最初に画像表示領域４０から外れる位置にある少なくとも一枚の画像が、第２表示モードに切り替え時の画像表示領域４０内においても進行方向へのスクロールにより最初に画像表示領域４０から外れる位置に配置されるよう、画像表示領域４０内の表示を切り替える。

通常の縦スクロールの場合、進行方向が下方向になり、後退方向が上方向になる。なお、この反対に設計される場合もある。通常の縦スクロールの場合、進行方向へのスクロールにより次に画像表示領域４０から外れる位置にある画像は、画像表示領域４０内の最上行に位置する画像である。通常の横スクロールの場合、進行方向が右方向になり、後退方向が左方向になる。なお、この反対に設計される場合もある。通常の横スクロールの場合、進行方向へのスクロールにより次に画像表示領域４０から外れる位置にある画像は、画像表示領域４０内の最左列に位置する画像である。

通常の縦スクロールの場合、表示制御部２３は、第１表示モードで表示されている画像表示領域４０内の左上端の画像が、第２表示モードへの切り替え時に画像表示領域４０内の最上行に表示されるよう、画像表示領域４０内の表示を切り替える。表示対象の複数枚の画像が撮影順に並べられて保存されている場合、当該複数枚の画像は、基本的に撮影順に配列される。通常の縦スクロールの表示方法では、左から右に順番に画像が並べられ、右端に到達すると一行下に移動するという処理を繰り返す。従って左上端の画像が撮影順で最も過去の画像となる。

表示制御部２３は原則として、第１表示モードで画像表示領域４０内に表示されている複数の画像の内、撮影順で最も過去の画像を起点として未来方向に位置する画像の内、第２表示モードで表示可能な枚数の画像を、第２表示モードに切り替え直後の画像表示領域４０内に表示する。なお例外的に撮影順で最も過去の画像を起点として、過去方向の画像を含める場合もある。過去方向の画像を含める場合の例は後述する。

また表示制御部２３は、第１表示モードで表示されている画像表示領域４０内の最上行の画像の一部が画像表示領域４０の外に切れている場合、その最上行の画像を存在しないものとみなして、表示モードを切り替える。具体的には表示制御部２３は、当該最上行の画像の次行の画像の内、左端の画像が、第２表示モードへの切り替え時に画像表示領域４０内の最上行に表示されるよう、画像表示領域４０内の表示を切り替える。最上行の画像の一部が切れている場合の具体例は後述する。以下、表示モード切替処理の詳細を具体例を挙げながら説明する。

図５は、画像表示領域７０に表示される複数枚の画像７１〜７１２の表示例１を示す図である。図６は、画像表示領域７０に表示される複数枚の画像７１〜７１５の表示例２を示す図である。図７は、画像表示領域７０に表示される複数枚の画像７１〜７８の表示例３を示す図である。図５〜図７の画像表示領域７０は、図４の画像表示領域４０を抜き出したものと基本的に同じであるが、一部に相違点がある。まず図４では１列表示ボタン５２、２列表示ボタン５３及び３列表示ボタン５４が画像表示領域４０の下端近傍に設けられているが、図５〜図７では１列表示ボタン８２、２列表示ボタン８３及び３列表示ボタン８４が画像表示領域７０の上端近傍に設けられている。また図５〜図７では各画像の上端に、画像印刷の有無を指定するためのチェックボックスを含むタブが形成される。

初期状態では表示制御部２３は、表示対象の複数枚の画像を、最も多くの枚数を表示できる表示モードで表示する。本実施の形態では３列表示モードで表示する。まずはユーザの所望する画像に早く近づけるように、画像表示領域７０内にできるだけ多くの画像を表示する。

図５にて、画像表示領域７０に表示される第１画像７１〜第１２画像７１２の上端には、それぞれ上記チェックボックスを含む第１タブ７１ｔ〜第１２タブ７１２ｔが形成されている。図５では第１画像７１〜第４画像７４の第１タブ７１ｔ〜第４タブ７４ｔにチェックが入っている。この状態で印刷実行の操作がなされると、第１画像７１〜第４画像７４が印刷される。

なお図５のタブには、画像印刷の有無を指定するためのチェックボックスが設けられるが、他の処理の有無を指定するためのチェックボックスが設けられてもよい。例えば、レポートに添付すべき画像を指定するためのチェックボックスが設けられてもよい。またポップアップ拡大表示を指定するためのチェックボックスが設けられてもよい。

操作受付部２１は、処理対象とすべき画像を選択するユーザ操作に起因する画像選択指示を受け付けると、当該画像選択指示を表示制御部２３に出力する。当該処理には、印刷、添付、ポップアップ拡大表示、削除などが該当する。表示制御部２３は、当該画像選択指示にもとづく画像選択と無関係に、画像表示領域７０内の表示を切り替える。

表示制御部２３は、画像表示領域７０に表示される第１画像７１〜第１２画像７１２の内、配列順で最も古い画像である左上端に位置する第１画像７１を、表示モードの切り替えの際の基準画像に選定する。図５〜図７に示す表示例において、２列表示モードでは図７に示すように画像表示領域７０に６枚の画像を表示できる。１列表示モードでは画像表示領域７０に２枚の画像を表示できる。３列表示モードで表示されている図５の状態から２列表示モードに切り替える場合、表示制御部２３は、基準画像の第１画像７１から未来方向に第２画像７２、第３画像７３、第４画像７４、第５画像７５及び第６画像７６の６枚の画像を、２列表示モードに切り替え後の画像表示領域７０に初期表示する。１列表示モードに切り替える場合、表示制御部２３は、基準画像の第１画像７１と、その未来方向に位置する第２画像７２の２枚の画像を、１列表示モードに切り替え後の画像表示領域７０に初期表示する。この表示モード切替処理の際、表示制御部２３は、チェックボックス内のチェックの有無を考慮しない。

図６は、図５の状態からスクロールバー８１が下に移動され、画像表示領域７０に表示される複数枚の画像が下にスクロールされ、第１画像７１〜第１５画像７１５が表示されている状態である。図６にて、第１画像７１〜第３画像７３は下部の一部しか表示されていない状態であり、上部および中央部が表示上、欠けている状態である。本実施の形態では上記の基準画像に選定される条件として表示上、欠けていないことを要求する。従って第１画像７１は基準画像に選定されない。画像が欠けているか否かの判定基準において、タブを画像の一部と扱ってもよいし、別物と扱ってもよい。

また画像表示領域７０に含まれない画素が１画素でも存在すれば欠けていると判定する基準を用いてもよいし、画像表示領域７０に含まれない画素が設定画素数以上の場合に欠けていると判定する基準を用いてもよい。例えば、画像表示領域７０に含まれない画素が３行分の画素数未満である場合、欠けていないと判定する。本実施の形態では、表示モード切り替え前に左上端に表示されている画像が、切り替え後も最上行に表示されるようになる。切り替え前の画像表示領域７０における最上行の画像が、画像表示領域７０の上端にほぼ接して表示されている場合、ユーザがその画像を切り替え後の画像表示領域７０に残す意図であっても、画像表示領域７０から外れてしまうことがある。上述のように画像が欠けているか否かの判定基準に一定のマージンを持たせれば、ユーザが意図せずに、切り替え前の左上端の画像が、切り替え後に画像表示領域７０から外れることを抑制できる。

表示制御部２３は、画像の一部が欠けている第１画像７１〜第３画像７３及び第１３画像７１３〜第１５画像７１５を、基準画像の選定処理にて存在しないものとみなす。表示制御部２３は、画像表示領域７０内の第４画像７４〜第１２画像７１２の内、配列順で最も古い画像である左上端に位置する第４画像７４を基準画像に選定する。

３列表示モードで表示されている図６の状態から２列表示モードに切り替える場合、基準画像の第４画像７４から未来方向に第５画像７５、第６画像７６、第７画像７７、第８画像７８及び第９画像７９の６枚の画像を、２列表示モードに切り替え後に最初に表示させることが考えられる。このように第４画像７４を左上端に表示させると、第４画像７４及び第５画像７５が配置される行の１つ上の行には、第２画像７２及び第３画像７３が配置され、そのさらに１つ上の行には、空欄と第１画像７１が配置されることになる。ユーザがスクロールバー８１を最上部へ移動させると、この先頭行の空欄が表示されることになる。

この先頭行の空欄をなくすには奇数番号の画像を左列に、偶数番号の画像を右列に配置することが必要である。この配置に従うと先頭行に第１画像７１及び第２画像７２が配置され、その下の行に第３画像７３及び第４画像７４が配置される。表示制御部２３は図７に示すように、基準画像である第４画像７４を含む行を、画像表示領域７０の最上行に表示する。従って基準画像の第４画像７４から未来方向に第５画像７５、第６画像７６、第７画像７７、第８画像７８及び第９画像７９の６枚の画像ではなく、表示制御部２３は第４画像７４から未来方向に第５画像７５、第６画像７６、第７画像７７及び第８画像７８の５枚の画像に、第４画像７４から過去方向の第３画像７３を加えた６枚の画像を表示する。

このように表示モード切り替え後の最上行の空欄をなくす場合、表示制御部２３は最上行の左端から詰めて画像を配置していき、基準画像が存在する行を、画像表示領域７０の最上行に表示する。また表示モード切り替え後の最上行の空欄を許容する場合、表示制御部２３は基準画像を画像表示領域７０の最上行の左端に配置し、残りの画像を基準画像の前後に配置する。設計者は、いずれの表示方法を選択してもよい。またユーザが、表示方法を選択できるようにしてもよい。

以下、図３を参照して表示制御部２３の機能をより具体的に説明する。表示対象画像取得部２３１は上記の画像記憶部から、該当する検査で撮影された複数枚の画像を、表示対象の画像として取得する。なお同じ患者の過去の検査で撮影された画像を同時に取得してもよい。

パラメータ保持部２３２は各表示モードのパラメータを保持する。具体的には各表示モードにおける、一枚あたりの画像サイズ、表示列数、画像間の間隔サイズを保持する。また画像表示領域のサイズを保持する。この画像表示領域のサイズは全ての表示モードで共通である。パラメータ取得部２３３は指定された表示モードのパラメータ値を、パラメータ保持部２３２から取得する。

画像配列部２３４は、表示対象画像取得部２３１から供給される表示対象の複数枚の画像を、指定された表示モードに従いワークメモリ内に配列する。当該ワークメモリは記憶部３０内に構築できる。初期の表示モードは予め設定されている。本実施の形態では３列表示モードに設定されている。切り替え後の表示モードは、操作受付部２１からの表示モード切替信号により指定される。画像配列部２３４は画像を配列する際、パラメータ取得部２３３により取得されたパラメータに従い配列する。

配列画像表示領域決定部２３５は、当該ワークメモリ内に配列された配列画像のうち、画像表示領域７０に表示させる表示領域を決定する。この表示領域のサイズは、パラメータ取得部２３３によりパラメータ保持部２３２から取得されたパラメータ値に従う。初期状態では配列画像表示領域決定部２３５は、上記の配列画像の上辺と、表示領域の上辺が略一致するように表示領域の位置を決定する。その後、操作受付部２１からスクロール切替信号を受信すると、配列画像表示領域決定部２３５は当該スクロール切替信号に応じて表示領域の位置を変更する。本実施の形態では縦スクロールであるため当該スクロール切替信号に応じて、配列画像上の表示領域を上下に移動させる。

基準画像選定部２３６は、表示領域の左上端に位置する画像を基準画像に選定し、配列画像表示領域決定部２３５に供給する。配列画像表示領域決定部２３５は、表示モードが切り替えられた際、当該基準画像が表示領域の最上行に表示されるよう表示領域の位置を決定する。スクロールバー位置決定部２３７は、配列画像表示領域決定部２３５により移動された表示領域の位置に応じて、スクロールバーの表示位置を決定する。

表示データ出力部２３８は、記憶部３０からレポート入力フォームデータを取得し、操作受付部２１から入力データを取得し、上記の患者情報記憶部から患者情報を取得し、上記の検査情報記憶部から検査情報を取得する。また配列画像表示領域決定部２３５により決定された表示領域に表示すべき画像を、上記ワークメモリから取得する。表示データ出力部２３８は、これらのデータをもとに表示部１６に表示すべき表示データを生成し、表示部１６に出力する。

図８は、図３の表示制御部２３の動作を示すフローチャートである。画像配列部２３４は、表示対象画像取得部２３１から供給される表示対象の複数枚の画像を、初期設定された表示モードでワークメモリ内に配列する（Ｓ１０）。配列画像表示領域決定部２３５は、配列画像の最上部を、実際に画面に表示される表示領域に設定する（Ｓ１１）。基準画像選定部２３６は、表示領域の左上端に位置する画像を基準画像に選定する（Ｓ１２）。表示領域への画像表示終了指示が入力された場合（Ｓ１３のＹ）、全体処理を終了する。

配列画像表示領域決定部２３５がスクロール切替信号を受信すると（Ｓ１４のＹ）、ステップＳ１９に遷移する。スクロールバー位置決定部２３７は、当該スクロール切替信号および現在の表示領域の位置に応じてスクロールバーの位置を変更する（Ｓ１９）。その後、ステップＳ１２に遷移する。

画像配列部２３４が表示モード切替信号を受信すると（Ｓ１５のＹ）、パラメータ取得部２３３は、切り替え後の表示モードの画像サイズ、表示列数などのパラメータ値をパラメータ保持部２３２から取得する（Ｓ１６）。画像配列部２３４は、切り替え後の表示モードのパラメータ値をもとに、ワークメモリ内の複数枚の画像を配列し直す（Ｓ１７）。配列画像表示領域決定部２３５は、ステップＳ１２にて選定された基準画像が最上行に表示されるよう表示領域の位置を、再配列された配列画像上において決定する（Ｓ１８）。スクロールバー位置決定部２３７は、変更された表示領域の位置に応じてスクロールバーの位置を変更する（Ｓ１９）。その後、ステップＳ１２に遷移する。上記スクロール切替信号を受信せず（Ｓ１４のＮ）かつ上記表示モード切替信号も受信しない場合（Ｓ１５のＮ）、ステップＳ１３に遷移する。

以上説明したように本実施の形態に係るスクロール表示の画像処理装置によれば、表示モードを切り替える際、切り替え前の左上端に表示されている画像が切り替え後の最上行に表示されるよう、切り替え後の表示モードにおける最初の表示画像を決定する。これにより、複数の画像をスクロール表示する際に、ユーザが所望の画像をモード切り替え後に初期表示できる。その際、表示させる画像を指定する等の煩雑な操作は不要である。

複数枚の画像をスクロール表示する場合に、スクロールバーを両方向（本実施の形態では上下方向）に移動させる操作より、一方向（本実施の形態では下方向）に移動させる操作のほうが簡単な操作である。ユーザが、小さなサイズの画像を多く表示するモードから、大きなサイズの画像を少なく表示するモードに切り替える操作を行うことは、その時点で表示されている画像内に、興味のある画像が存在することを意味する。本実施の形態のように切り替え前の表示画像のうち最も順番が古い画像を、切り替え後の最上行に表示すれば、下方向のスクロール操作のみで切り替え前の全ての画像を大きなサイズで確認することができる。

本実施の形態に係る切替方法の代わりに、切り替え後の先頭または中央に表示されるべき画像を、切り替え前の状態でユーザに指定させる処理が考えられる。ただし、ユーザに追加的な操作が発生する。また切り替え前の表示画像のうち中心に表示されている画像を、切り替え後も中心に表示されるよう画像表示を切り替えることも考えられる。ただし、ユーザの興味のある画像が、中心画像の前にある場合と後にある場合があり、スクロール操作が上方向に必要な場合と下方向に必要な場合の両方が発生する。

本実施の形態に係る切替方法は、複数枚の画像が撮影順に並べられている場合に特に有効である。撮影順で過去から未来方向に複数枚の画像を順番に、下方向のスクロール操作で表示させることができる。ユーザは撮影時の記憶に従い、目的の画像近辺に高速にスクロール操作し、目的の画像近辺に到達すると、大きなサイズで画像が表示される表示モードに切り替える。ユーザは目的の画像に、下方向のスクロール操作のみで到達できる。

以上、本発明を実施の形態をもとに説明した。この実施の形態は例示であり、それらの各構成要素や各処理プロセスの組合せにいろいろな変形例が可能なこと、またそうした変形例も本発明の範囲にあることは当業者に理解されるところである。

上述の説明では本実施の形態に係る表示モード切替方法が適用される表示領域を、レポート作成画面内の一部に配置する例を示した。この点、本実施の形態に係る表示モード切替方法が適用される表示領域が表示される画面は、レポート作成画面に限るものではない。電子カルテなど他の医用文書の作成画面の一部に表示されてもよい。医師は、電子カルテなどの医用文書を作成する際、作成画面内に表示された医用画像を確認しながら医用文書を作成できる。また上述の説明では、医用画像として内視鏡で撮影された検査画像を例に挙げたが、ＣＴやＭＲＩ等の別の医療機器で撮影された画像であってもよい。

また本実施の形態に係る表示モード切替方法を用いた画像表示方法は、医用文書の作成画面に限らず、複数枚の画像をスクロール表示する画像表示全般に適用可能である。特にスクロール表示の必要性が高いディスプレイサイズが小さい機器への使用に適している。例えば、デジタルカメラ、フューチャーフォン、スマートフォン、携帯型ゲーム機器のディスプレイに、複数枚の画像をスクロール表示する場合に当該表示方法を適用するとよい。

上述の説明では上から下に縦スクロールする例を示した。この点、左から右に横スクロールする場合にも本実施の形態に係る表示モード切替方法を適用可能である。その場合、表示制御部２３は、表示対象の複数の画像を横方向にスクロール処理するとともに、受け付けられた表示モード切替指示に応じて第１表示モードから、第１表示モードと表示行数が異なる第２表示モードに切り替え処理する。具体的には表示制御部２３は、第１表示モードで表示されている表示領域内の左上端の画像が、第２表示モードへの切り替え時に表示領域内の最左列に配置されるよう、表示領域内の表示を切り替える。さらに、操作受付部２１により表示モード切替指示が受け付けられたとき、第１表示モードで表示されている表示領域内の最左列の画像の一部が表示領域外に切れている場合、表示制御部２３は、最左列の画像の次列の画像の内、上端の画像が、第２表示モードへの切り替え時に表示領域内の最左列に配置されるよう、表示領域内の表示を切り替える。また右から左に横スクロールする場合にも本実施の形態に係る表示モード切替方法を適用可能である。その場合、表示制御部２３は、第１表示モードで表示されている表示領域内の右上端の画像が、第２表示モードに切り替え時の表示領域内の最右列に表示されるよう、表示領域内の表示を切り替える。

１医療情報管理システム、２モダリティ、３ネットワーク、４レポート記憶部、５オーダ情報管理装置、６医療情報入力装置、１０ユーザインタフェース、１３記憶部、１４制御部、１５入力部、１６表示部、２０制御部、２１操作受付部、２２記録データ作成部、２３表示制御部、２３１表示対象画像取得部、２３２パラメータ保持部、２３３パラメータ取得部、２３４画像配列部、２３５配列画像表示領域決定部、２３６基準画像選定部、２３７スクロールバー位置決定部、２３８表示データ出力部、２４画面データ作成部、３０記憶部。

本発明は、内視鏡レポート作成時の画像表示に利用可能である。

Claims

画面内の特定の表示領域に、表示対象の複数の画像をスクロール表示する表示制御部と、
ユーザの操作に起因するスクロール指示および表示モード切替指示を受け付ける操作受付部と、を備え、
前記表示制御部は、受け付けられたスクロール指示に応じて前記複数の画像をスクロール処理するとともに、受け付けられた表示モード切替指示に応じて第１表示モードから、第１表示モードと画像サイズ及び表示枚数が異なる第２表示モードに切り替え処理し、
表示モードを切り替える際、前記表示制御部は、第１表示モードで表示されている前記表示領域内の複数の画像の内、進行方向へのスクロールにより最初に前記表示領域から外れる位置にある少なくとも一つの画像が、第２表示モードに切り替え時の前記表示領域内においても進行方向へのスクロールにより最初に前記表示領域から外れる位置に配置されるよう、前記表示領域内の表示を切り替えることを特徴とする画像表示装置。
前記表示制御部は、前記表示対象の複数の画像を縦方向にスクロール処理するとともに、受け付けられた表示モード切替指示に応じて第１表示モードから、第１表示モードと表示列数が異なる第２表示モードに切り替え処理し、
前記表示制御部は、第１表示モードで表示されている前記表示領域内の左上端の画像が、第２表示モードへの切り替え時に前記表示領域内の最上行に配置されるよう、前記表示領域内の表示を切り替えることを特徴とする請求項１に記載の画像表示装置。
前記操作受付部により表示モード切替指示が受け付けられたとき、第１表示モードで表示されている前記表示領域内の最上行の画像の一部が前記表示領域外に切れている場合、前記表示制御部は、前記最上行の画像の次行の画像の内、左端の画像が、第２表示モードへの切り替え時に前記表示領域内の最上行に配置されるよう、前記表示領域内の表示を切り替えることを特徴とする請求項２に記載の画像表示装置。
前記表示制御部は、前記表示対象の複数の画像を横方向にスクロール処理するとともに、受け付けられた表示モード切替指示に応じて第１表示モードから、第１表示モードと表示行数が異なる第２表示モードに切り替え処理し、
前記表示制御部は、第１表示モードで表示されている前記表示領域内の左上端の画像が、第２表示モードへの切り替え時に前記表示領域内の最左行に配置されるよう、前記表示領域内の表示を切り替えることを特徴とする請求項１に記載の画像表示装置。
前記操作受付部により表示モード切替指示が受け付けられたとき、第１表示モードで表示されている前記表示領域内の最左列の画像の一部が前記表示領域外に切れている場合、前記表示制御部は、前記最左列の画像の次列の画像の内、上端の画像が、第２表示モードへの切り替え時に前記表示領域内の最左列に配置されるよう、前記表示領域内の表示を切り替えることを特徴とする請求項４に記載の画像表示装置。
前記操作受付部は、前記表示領域内の複数の画像の内、処理対象とすべき画像を選択するユーザの操作に起因する画像選択指示を受け付け、
前記表示制御部は、前記画像選択指示にもとづく画像選択と無関係に、前記表示領域内の表示を切り替えることを特徴とする請求項１から５のいずれかに記載の画像表示装置。
前記表示対象の複数の画像は撮影された画像であり、撮影順に保存されていることを特徴とする請求項１から６のいずれかに記載の画像表示装置。
前記表示対象の複数の画像は医用画像であり、
前記画面は医用文書の作成画面であり、
前記表示領域は当該作成画面内の一部に配置されていることを特徴とする請求項１から７のいずれかに記載の画像表示装置。