JP7211132B2

JP7211132B2 - Information display device, information display method, and information display system

Info

Publication number: JP7211132B2
Application number: JP2019020102A
Authority: JP
Inventors: 直也岸本; 史裕長谷川; 聡史中村
Original assignee: Ricoh Co Ltd
Current assignee: Ricoh Co Ltd
Priority date: 2019-02-06
Filing date: 2019-02-06
Publication date: 2023-01-24
Anticipated expiration: 2039-02-06
Also published as: JP2020124445A

Description

本発明は、情報表示装置、情報表示方法、及び情報表示システムに関する。 The present invention relates to an information display device, an information display method, and an information display system.

脳磁計（ＭＥＧ：Magnetoencephalography）は、脳から発生する微弱な磁場を測定することで、脳活動を無侵襲で観測・可視化することができる。近年では、誘発刺激を与えた時に生じる位相同期していない脳磁界を観測し、脳の機能を特定する研究が盛んに行われている。その結果、脳機能マッピングにより脳部位のどこで脳活動が起こっているのか判断できるようになった。更に現在では、ＥＲＳ（Event-Related Synchronization）／ＥＲＤ（Event-Related Desynchronization）活動が顕著になっている部分（ピーク部分）をボクセル単位で同定することが可能である。それらの脳活動を３次元ＭＲＩ（Magnetic Resonance Imaging）やＭＲＩ三面図に表示する技術がある。 Magnetoencephalography (MEG) can noninvasively observe and visualize brain activity by measuring a weak magnetic field generated from the brain. In recent years, many studies have been conducted to identify brain functions by observing brain magnetic fields that are not phase-synchronized when an evoked stimulus is applied. As a result, brain function mapping has made it possible to determine where in the brain activity is occurring. Furthermore, at present, it is possible to identify a portion (peak portion) where ERS (Event-Related Synchronization)/ERD (Event-Related Desynchronization) activity is remarkable in units of voxels. There are techniques for displaying these brain activities on three-dimensional MRI (Magnetic Resonance Imaging) and MRI trihedral views.

例えば、心臓で生じる電気的活動を測定し、電気的活動に関連した情報を視覚化する電気生理学装置において、心臓の電気生理学的地図上で測定電極の位置を示す位置情報と電気的活動を示すデータ情報とが対応付けられた画像を表示する技術が開示されている（特許文献１）。 For example, in an electrophysiology device that measures electrical activity occurring in the heart and visualizes information related to the electrical activity, positional information indicating the location of the measurement electrode and the electrical activity are displayed on an electrophysiological map of the heart. A technique for displaying an image associated with data information is disclosed (Patent Document 1).

ＭＲＩ等により取得された脳の断面図等の脳画像（脳地図）に生理学的情報を重畳することにより、診断や治療に有用な画像情報を提供することができる。しかしながら、脳画像に脳活動のヒートマップ等を単に重畳させるだけでは、脳活動のピークがどこの領野を示しているか解り難い。また、脳は立体的な構造であり脳領域が細かく分類されているため、仮に脳画像に各部位の名称等を示すラベル情報を重畳したとしても、画像が煩雑になる。特定の脳領域に対してのみラベル情報を付与するという方法も考えられるが、従来技術においては断面図の切り替え等の操作が困難な場合が多い。 By superimposing physiological information on a brain image (brain map) such as a cross-sectional view of the brain obtained by MRI or the like, it is possible to provide useful image information for diagnosis and treatment. However, simply superimposing a brain activity heat map or the like on a brain image makes it difficult to determine which area the peak of brain activity indicates. In addition, since the brain has a three-dimensional structure and brain regions are finely classified, even if label information indicating the name of each part is superimposed on the brain image, the image becomes complicated. A method of assigning label information only to a specific brain region is also conceivable, but in the conventional technology, operations such as switching cross-sectional views are often difficult.

本発明は上記に鑑みてなされたものであって、利便性の高い画像情報を提供することを目的とする。 SUMMARY OF THE INVENTION It is an object of the present invention to provide highly convenient image information.

上述した課題を解決するため、本発明の一態様は、脳に関する診断結果を示す診断結果画像を表示装置に表示させる情報表示装置であって、前記表示装置の画像表示領域は、脳の少なくとも一部を表現する前記診断結果画像であってユーザによる操作に応じて表示形式の変更が可能な操作画像を表示するための第１の表示部と、前記脳の全体的形状を表現する前記診断結果画像であって前記操作画像の表示角度の変化に応じて回転する俯瞰画像を表示するための第２の表示部とを有し、前記第１の表示部と前記第２の表示部とは互いに別の位置に表示され、前記第２の表示部内に、前記第１の表示部に表示されている前記操作画像が脳全体のうちのどの部分にあたるかを示す表示領域枠が表示され、前記表示領域枠は、前記操作画像の拡大後の表示範囲に合わせて縮小される、ことを特徴とする。
In order to solve the above-described problems, one aspect of the present invention is an information display device for displaying a diagnostic result image indicating a diagnostic result related to the brain on a display device, wherein the image display region of the display device is at least one part of the brain. a first display unit for displaying an operation image, which is the diagnosis result image representing the brain and whose display format can be changed according to an operation by a user; and the diagnosis result representing the overall shape of the brain. a second display unit for displaying a bird's-eye view image that is an image and rotates according to a change in the display angle of the operation image , wherein the first display unit and the second display unit are connected to each other; a display area frame is displayed at a different position and is displayed in the second display section to indicate which part of the entire brain the operation image displayed on the first display section corresponds to, and The area frame is characterized by being reduced in accordance with the display range of the operation image after being enlarged .

本発明によれば、利便性の高い画像情報を提供することが可能となる。 According to the present invention, it is possible to provide highly convenient image information.

図１は、実施形態に係る脳機能診断システムのシステム構成の一例を示す図である。FIG. 1 is a diagram showing an example of a system configuration of a brain function diagnosis system according to an embodiment. 図２は、実施形態に係る情報表示装置のハードウェア構成の一例を示すブロック図である。FIG. 2 is a block diagram illustrating an example of the hardware configuration of the information display device according to the embodiment; 図３は、実施形態に係る脳機能診断システムの機能構成の一例を示す図である。FIG. 3 is a diagram illustrating an example of the functional configuration of the brain function diagnostic system according to the embodiment; 図４は、実施形態に係るプロジェクト情報のデータ構造の一例を示す図である。FIG. 4 is a diagram illustrating an example of a data structure of project information according to the embodiment; 図５は、実施形態に係るユーザ情報のデータ構造の一例を示す図である。FIG. 5 is a diagram showing an example of the data structure of user information according to the embodiment. 図６は、実施形態に係る検査情報のデータ構造の一例を示す図である。FIG. 6 is a diagram illustrating an example of the data structure of examination information according to the embodiment; 図７は、実施形態に係る脳活動情報のデータ構造の一例を示す図である。7 is a diagram illustrating an example of a data structure of brain activity information according to the embodiment; FIG. 図８は、実施形態に係る脳アトラス情報のデータ構造の一例を示す図である。FIG. 8 is a diagram showing an example of the data structure of brain atlas information according to the embodiment. 図９は、実施形態に係るＭＲＩ情報のデータ構造の一例を示す図である。FIG. 9 is a diagram illustrating an example of the data structure of MRI information according to the embodiment; 図１０は、実施形態に係る診断結果画像の一例を示す図である。FIG. 10 is a diagram illustrating an example of a diagnostic result image according to the embodiment; 図１１は、実施形態に係る診断結果画像の表示対象に関する設定処理の一例を示すフローチャートである。FIG. 11 is a flowchart illustrating an example of setting processing regarding display targets of diagnostic result images according to the embodiment. 図１２は、実施形態に係る脳活動情報が重畳された脳画像を表示する診断結果画像の一例を示す図である。FIG. 12 is a diagram illustrating an example of a diagnostic result image displaying a brain image on which brain activity information is superimposed according to the embodiment; 図１３は、実施形態に係る脳部位情報が重畳された脳画像を表示する診断結果画像の一例を示す図である。FIG. 13 is a diagram showing an example of a diagnostic result image displaying a brain image superimposed with brain region information according to the embodiment. 図１４は、実施形態に係るダイポール情報が重畳された脳画像を表示する診断結果画像の一例を示す図である。FIG. 14 is a diagram illustrating an example of a diagnostic result image displaying a brain image on which dipole information is superimposed according to the embodiment; 図１５は、実施形態に係る診断結果画像の表示形式を変更する処理の一例を示すフローチャートである。FIG. 15 is a flowchart illustrating an example of processing for changing the display format of a diagnostic result image according to the embodiment. 図１６は、実施形態に係る脳部位情報及びダイポール情報を含む脳画像の側面断面図を表示する診断結果画像の一例を示す図である。FIG. 16 is a diagram showing an example of a diagnosis result image displaying a lateral cross-sectional view of a brain image including brain region information and dipole information according to the embodiment; 図１７は、実施形態に係る脳部位情報及びダイポール情報を含む脳画像の前面断面図を表示する診断結果画像の一例を示す図である。FIG. 17 is a diagram showing an example of a diagnosis result image displaying a front cross-sectional view of a brain image including brain region information and dipole information according to the embodiment; 図１８は、実施形態に係る拡大された脳画像を表示する診断結果画像の一例を示す図である。FIG. 18 is a diagram showing an example of a diagnosis result image displaying an enlarged brain image according to the embodiment; 図１９は、実施形態に係る脳活動情報及び脳部位情報を含む脳画像の側面断面図を表示する診断結果画像の一例を示す図である。FIG. 19 is a diagram showing an example of a diagnosis result image displaying a lateral cross-sectional view of a brain image including brain activity information and brain region information according to the embodiment; 図２０は、実施形態に係る脳活動情報及び脳部位情報を含む脳画像の拡大された側面断面図を表示する診断結果画像の一例を示す図である。FIG. 20 is a diagram showing an example of a diagnosis result image displaying an enlarged side cross-sectional view of a brain image including brain activity information and brain region information according to the embodiment;

以下に、図面を参照しながら、本発明に係る情報表示装置、情報表示方法、及び情報表示システムの実施形態を詳細に説明する。また、以下の実施形態によって本発明が限定されるものではなく、以下の実施形態における構成要素には、当業者が容易に想到できるもの、実質的に同一のもの、およびいわゆる均等の範囲のものが含まれる。さらに、以下の実施の形態の要旨を逸脱しない範囲で構成要素の種々の省略、置換、変更および組み合わせを行うことができる。 BEST MODE FOR CARRYING OUT THE INVENTION Hereinafter, embodiments of an information display device, an information display method, and an information display system according to the present invention will be described in detail with reference to the drawings. In addition, the present invention is not limited by the following embodiments, and the constituent elements in the following embodiments can be easily conceived by those skilled in the art, substantially the same, and so-called equivalent ranges. is included. Furthermore, various omissions, replacements, changes and combinations of components can be made without departing from the gist of the following embodiments.

図１は、実施形態に係る脳機能診断システム１のシステム構成の一例を示す図である。脳機能診断システム１は、被検者の複数種類の生体信号を計測し、脳に関する診断結果等を示す画像情報を提供するシステムである。なお、計測対象となる生体信号は、脳に関連する信号に限られるものではなく、例えば心臓の活動に応じて発生する電気信号（心電図として表現可能な電気信号）等であってもよい。脳機能診断システム１は、「情報表示システム」の一例である。 FIG. 1 is a diagram showing an example of a system configuration of a brain function diagnostic system 1 according to an embodiment. The brain function diagnostic system 1 is a system that measures a plurality of types of biological signals of a subject and provides image information indicating diagnostic results and the like regarding the brain. The biological signal to be measured is not limited to a signal related to the brain, and may be, for example, an electrical signal (an electrical signal that can be expressed as an electrocardiogram) generated in response to heart activity. The brain function diagnosis system 1 is an example of an "information display system."

本実施形態に係る脳機能診断システム１は、脳磁計側装置（ＭＥＧ）１１、ＭＲＩ装置（ＭＲＩ）１２、脳波計側装置（ＥＥＧ：Electroencephalogram）１３、生体検査装置１４、サーバ１５、及び情報表示装置１６を含む。脳磁計側装置１１、ＭＲＩ装置１２、脳波計側装置１３、及び生体検査装置１４は、「検診装置」の一例である。脳磁計側装置１１、ＭＲＩ装置１２、脳波計側装置１３、及び生体検査装置１４により計測された生体信号等のデータは、サーバ１５により管理される。サーバ１５は、プログラムに従って所定の処理を行うプロセッサ、大容量記憶装置等を含む情報処理装置である。なお、「管理」には、記憶、削除、更新等の処理が含まれる。 A brain function diagnostic system 1 according to this embodiment includes a magnetoencephalography device (MEG) 11, an MRI device (MRI) 12, an electroencephalography device (EEG: Electroencephalogram) 13, a biopsy device 14, a server 15, and an information display. Includes device 16 . The magnetoencephalograph-side device 11, the MRI device 12, the electroencephalograph-side device 13, and the biopsy device 14 are examples of "examination devices." Data such as biological signals measured by the magnetoencephalography device 11 , MRI device 12 , electroencephalography device 13 , and biopsy device 14 are managed by the server 15 . The server 15 is an information processing device including a processor that performs predetermined processing according to a program, a large-capacity storage device, and the like. Note that "management" includes processing such as storage, deletion, and update.

情報表示装置１６は、サーバ１５に記憶されたデータを解析し、脳に関する診断結果を示す画像情報を表示する情報処理装置である。 The information display device 16 is an information processing device that analyzes the data stored in the server 15 and displays image information indicating the diagnosis results regarding the brain.

図２は、実施形態に係る情報表示装置１６のハードウェア構成の一例を示すブロック図である。情報表示装置１６は、ＣＰＵ（Central Processing Unit）５１、ＲＡＭ（Random Access Memory）５２、ＲＯＭ（Read Only Memory）５３、補助記憶装置５４、ネットワークＩ／Ｆ５５、入力装置５６、及び表示装置５７を含み、これらがバス５８により相互に接続されている。 FIG. 2 is a block diagram showing an example of the hardware configuration of the information display device 16 according to the embodiment. The information display device 16 includes a CPU (Central Processing Unit) 51, a RAM (Random Access Memory) 52, a ROM (Read Only Memory) 53, an auxiliary storage device 54, a network I/F 55, an input device 56, and a display device 57. , which are interconnected by a bus 58 .

ＣＰＵ５１は、情報表示装置１６の全体の動作を制御し、各種の情報処理を行う演算装置である。ＣＰＵ５１は、ＲＯＭ５３又は補助記憶装置５４に記憶されたプログラムを実行し、所定の演算制御処理を実行する。 The CPU 51 is an arithmetic device that controls the overall operation of the information display device 16 and performs various types of information processing. The CPU 51 executes programs stored in the ROM 53 or the auxiliary storage device 54 to perform predetermined arithmetic control processing.

ＲＡＭ５２は、ＣＰＵ５１のワークエリアとして用いられ、主要な制御パラメータ及び情報を記憶する揮発性の主記憶装置である。ＲＯＭ５３は、基本入出力プログラム等を記憶する不揮発性の主記憶装置である。 The RAM 52 is used as a work area for the CPU 51 and is a volatile main memory that stores main control parameters and information. The ROM 53 is a non-volatile main memory that stores basic input/output programs and the like.

補助記憶装置５４は、ＨＤＤ（Hard Disk Drive）又はＳＳＤ（Solid State Drive）等の記憶装置である。補助記憶装置５４は、例えば、情報表示装置１６の動作を制御するプログラム、並びに情報表示装置１６の動作に必要な各種のデータ及びファイル等を記憶する。 The auxiliary storage device 54 is a storage device such as an HDD (Hard Disk Drive) or an SSD (Solid State Drive). The auxiliary storage device 54 stores, for example, a program for controlling the operation of the information display device 16, various data and files required for the operation of the information display device 16, and the like.

ネットワークＩ／Ｆ５５は、データベースシステム（サーバ）２５等のネットワーク上の機器と通信を行うための通信インターフェースである。ネットワークＩ／Ｆ５５は、例えば、ＴＣＰ（Transmission Control Protocol）／ＩＰ（Internet Protocol）に準拠したＮＩＣ（Network Interface Card）等により実現される。 A network I/F 55 is a communication interface for communicating with devices on the network such as the database system (server) 25 . The network I/F 55 is realized by, for example, a NIC (Network Interface Card) conforming to TCP (Transmission Control Protocol)/IP (Internet Protocol).

入力装置５６は、タッチパネルの入力機能、キーボード、マウス、操作ボタン等のユーザインターフェースである。表示装置５７は、各種の情報を表示するディスプレイ装置である。表示装置５７は、例えば、タッチパネルの表示機能、液晶ディスプレイ（ＬＣＤ：Liquid Crystal Display）、有機ＥＬ（Electro-Luminescence）等により実現される。 The input device 56 is a user interface such as an input function of a touch panel, a keyboard, a mouse, and operation buttons. The display device 57 is a display device that displays various information. The display device 57 is implemented by, for example, a touch panel display function, a liquid crystal display (LCD), an organic EL (Electro-Luminescence), or the like.

なお、図２に示す情報表示装置１６のハードウェア構成は一例であり、これ以外の装置が備えられるものとしてもよい。また、図２に示す情報表示装置１６は、例えば、ＰＣ（Personal Computer）を想定したハードウェア構成であるが、これに限定されるものではなく、タブレット等のモバイル端末であってもよい。この場合、ネットワークＩ／Ｆ５５は、無線通信機能を有する通信インターフェースであればよい。 Note that the hardware configuration of the information display device 16 shown in FIG. 2 is an example, and devices other than this may be provided. The information display device 16 shown in FIG. 2 has a hardware configuration assuming, for example, a PC (Personal Computer), but is not limited to this, and may be a mobile terminal such as a tablet. In this case, the network I/F 55 may be any communication interface having a wireless communication function.

図３は、実施形態に係る脳機能診断システム１の機能構成の一例を示す図である。脳機能診断システム１は、情報記憶部１０１、脳活動情報収集部１０２、検査処理部１０３、及び表示制御部１０４を含む。 FIG. 3 is a diagram showing an example of the functional configuration of the brain function diagnostic system 1 according to the embodiment. The brain function diagnosis system 1 includes an information storage unit 101 , a brain activity information collection unit 102 , an examination processing unit 103 and a display control unit 104 .

情報記憶部１０１は、脳機能の診断を行うため、及び診断結果をユーザに提示するために利用される各種情報を記憶する。情報記憶部１０１は、例えばプロジェクト情報１５１、ユーザ情報１５２、検査情報１５３、脳活動情報１５４、脳アトラス情報１５５、ＭＲＩ情報１５６等を記憶する。これらの情報１５１～１５６は、脳磁計側装置１１、ＭＲＩ装置１２、脳波計側装置１３、及び生体検査装置１４の計測結果、情報表示装置１６に入力された情報等に基づいて取得される。情報記憶部１０１は、サーバ１５等により構成され得る。 The information storage unit 101 stores various types of information used for diagnosing brain function and presenting the diagnosis results to the user. The information storage unit 101 stores, for example, project information 151, user information 152, examination information 153, brain activity information 154, brain atlas information 155, MRI information 156, and the like. These pieces of information 151 to 156 are acquired based on the measurement results of the magnetoencephalography side device 11, the MRI device 12, the electroencephalography side device 13, and the biopsy device 14, the information input to the information display device 16, and the like. The information storage unit 101 may be configured by the server 15 or the like.

図４は、実施形態に係るプロジェクト情報１５１のデータ構造の一例を示す図である。ここで例示するプロジェクト情報１５１は、属性（カラム）としてユーザアカウント、検査日、及び検査内容を含むテーブル状のデータである。ユーザアカウントは、診断対象となるユーザ（被験者）を特定する識別番号である。検査日は、ある被験者に対して検査が行われた日付を示すデータである。検査内容は、実行された検査の種類等を示すデータである。 FIG. 4 is a diagram showing an example of the data structure of project information 151 according to the embodiment. The project information 151 exemplified here is tabular data including user accounts, inspection dates, and inspection details as attributes (columns). A user account is an identification number that identifies a user (subject) to be diagnosed. The date of examination is data indicating the date on which an examination was performed on a certain subject. The inspection content is data indicating the type of inspection that has been performed.

図５は、実施形態に係るユーザ情報１５２のデータ構造の一例を示す図である。ここで例示するユーザ情報１５２は、属性としてユーザアカウント、検査日、及び住所を含むテーブル状のデータである。住所は、ユーザアカウントに対応するユーザの住所を示すデータである。 FIG. 5 is a diagram showing an example of the data structure of user information 152 according to the embodiment. The user information 152 exemplified here is tabular data including user account, inspection date, and address as attributes. The address is data indicating the address of the user corresponding to the user account.

図６は、実施形態に係る検査情報１５３のデータ構造の一例を示す図である。ここで例示する検査情報１５３は、属性として検査、ユーザアカウント、日付、及び検査時間を含むテーブル状のデータである。検査は、症状の種類を示すデータである。検査時間は、検査が実行された時間（時刻）を示すデータである。 FIG. 6 is a diagram showing an example of the data structure of examination information 153 according to the embodiment. The examination information 153 exemplified here is tabular data including examination, user account, date, and examination time as attributes. A test is data indicating a type of symptom. The inspection time is data indicating the time (time) when the inspection was performed.

図７は、実施形態に係る脳活動情報１５４のデータ構造の一例を示す図である。ここで例示する脳活動情報１５４は、属性としてユーザアカウント、脳活動データ、座標、ピーク、及びクラスタを含むテーブル状のデータである。脳活動データは、脳活動に関する情報を示すデータである。座標は、診断対象となる被験者の脳地図上の座標を示すデータである。ピークは、脳活動におけるピークに関する情報を示すデータである。クラスタは、脳活動におけるクラスタに関する情報を示すデータである。 FIG. 7 is a diagram showing an example of the data structure of brain activity information 154 according to the embodiment. The brain activity information 154 exemplified here is tabular data including user accounts, brain activity data, coordinates, peaks, and clusters as attributes. Brain activity data is data indicating information about brain activity. The coordinates are data indicating the coordinates on the brain map of the subject to be diagnosed. A peak is data indicating information about a peak in brain activity. A cluster is data indicating information about a cluster in brain activity.

図８は、実施形態に係る脳アトラス情報１５５のデータ構造の一例を示す図である。ここで例示する脳アトラス情報１５５は、属性としてユーザアカウント、体性感覚連合野の座標、及び前運動野・補足運動野の座標を含むテーブル状のデータである。体性感覚連合野の座標は、診断対象となる被験者の脳地図における体性感覚連合野の座標を示すデータである。前運動野・補足運動野の座標は、診断対象となる被験者の脳地図における前運動野及び補足運動野の座標を示すデータである。 FIG. 8 is a diagram showing an example of the data structure of brain atlas information 155 according to the embodiment. The brain atlas information 155 exemplified here is tabular data including, as attributes, a user account, coordinates of the somatosensory association area, and coordinates of the premotor area/supplementary motor area. The coordinates of the somatosensory association area are data indicating the coordinates of the somatosensory association area in the brain map of the subject to be diagnosed. The coordinates of the premotor area/supplementary motor area are data indicating the coordinates of the premotor area and the supplementary motor area in the brain map of the subject to be diagnosed.

図９は、実施形態に係るＭＲＩ情報１５６のデータ構造の一例を示す図である。ここで例示するＭＲＩ情報１５６は、属性としてユーザアカウント及びＭＲＩデータを含むテーブル状のデータである。ＭＲＩデータは、ＭＲＩ検査（ＭＲＩ装置１２による計測）の結果を示すデータである。 FIG. 9 is a diagram showing an example of the data structure of the MRI information 156 according to the embodiment. The MRI information 156 illustrated here is tabular data including user accounts and MRI data as attributes. MRI data is data indicating the results of an MRI examination (measurement by the MRI apparatus 12).

脳活動情報収集部１０２（図３参照）は、情報記憶部１０１に記憶された各種情報の中から脳活動に関する情報を収集する。情報の収集方法は特に限定されるべきものではないが、例えばユーザ（診断結果を閲覧する医師等）が情報表示装置１６を操作して要求した内容に対応する情報を情報記憶部１０１から抽出してもよい。ここでは脳活動情報収集部１０２により収集された情報を収集情報１６１と称する。脳活動情報収集部１０２は、例えば情報表示装置１６のＣＰＵ等により構成され得る。 The brain activity information collection unit 102 (see FIG. 3) collects information on brain activity from among various types of information stored in the information storage unit 101 . Although the information collection method should not be particularly limited, for example, a user (such as a doctor who browses the diagnosis result) operates the information display device 16 to extract information corresponding to the content requested from the information storage unit 101. may The information collected by the brain activity information collection unit 102 is referred to as collected information 161 here. The brain activity information collection unit 102 may be configured by, for example, the CPU of the information display device 16 or the like.

診断処理部１０３は、脳活動情報収集部１０２により収集された収集情報１６１、情報記憶部１０１に記憶された情報１５１～１５６等に基づいて、脳に関する診断処理を行う。診断処理部１０３は、信号源推定部１１１、ピーク抽出部１１２、及びクラスタ抽出部１１３を含む。信号源推定部１１１は、取得した情報の信号源（ＭＥＧ、ＭＲＩ、又はＥＧＧのいずれであるか等）を推定する。ピーク抽出部１１２は、収集情報１６１等に基づいて脳活動ピーク（脳地図におけるピークの座標等）を抽出する。クラスタ抽出部１１３は、収集情報１６１等に基づいてクラスタ（特定の脳活動を行う脳地図における領域等）を抽出する。診断処理部１０３は、情報表示装置１６のＣＰＵ５１等により構成され得る。 The diagnostic processing unit 103 performs brain diagnostic processing based on the collected information 161 collected by the brain activity information collecting unit 102, the information 151 to 156 stored in the information storage unit 101, and the like. The diagnostic processing section 103 includes a signal source estimation section 111 , a peak extraction section 112 and a cluster extraction section 113 . The signal source estimator 111 estimates the signal source of the acquired information (MEG, MRI, EGG, etc.). The peak extraction unit 112 extracts brain activity peaks (coordinates of peaks in a brain map, etc.) based on the collected information 161 and the like. The cluster extraction unit 113 extracts clusters (regions in a brain map that perform specific brain activities, etc.) based on the collected information 161 and the like. The diagnostic processing unit 103 can be configured by the CPU 51 of the information display device 16 and the like.

表示制御部１０４は、診断処理部１０３による診断結果を示す診断結果画像を所定の表示装置に表示させるための処理を行う。表示制御部１０４は、双方向処理部１２１及び俯瞰表示処理部１２２を含む。双方向処理部１２１は、ユーザによる操作に応じて表示形式を変更可能な、後述する操作画像を表示するための処理を行う。俯瞰表示処理部１２２は、操作画像の表示対象となっている脳を俯瞰的に表現した、後述する俯瞰画像を表示するための処理を行う。表示制御部１０４は、情報表示装置１６のＣＰＵ５１等により構成され得る。 The display control unit 104 performs processing for displaying a diagnosis result image indicating the diagnosis result by the diagnosis processing unit 103 on a predetermined display device. The display control unit 104 includes an interactive processing unit 121 and an overhead display processing unit 122 . The interactive processing unit 121 performs processing for displaying an operation image (described later) whose display format can be changed according to an operation by the user. The bird's-eye view display processing unit 122 performs processing for displaying a bird's-eye view image, which will be described later, that is a bird's-eye view of the brain that is the display target of the operation image. The display control unit 104 may be configured by the CPU 51 of the information display device 16 or the like.

図１０は、実施形態に係る診断結果画像２０１の一例を示す図である。図１０に示すように、表示装置５７の画像表示領域５７ａには、診断結果画像２０１が表示される。より詳細には、表示装置５７の画像表示領域５７ａは、操作画像表示部２２１（第１の表示部）、俯瞰画像表示部２２２（第２の表示部）、及びユーザアカウント等のユーザ名２１３を表示するためのユーザ名表示部２２３を有している。操作画像表示部２２１（第１の表示部）には、診断結果画像２０１を構成する操作画像２１１が表示される。俯瞰画像表示部２２２（第２の表示部）には、診断結果画像２０１を構成する俯瞰画像２１２が表示される。 FIG. 10 is a diagram showing an example of a diagnosis result image 201 according to the embodiment. As shown in FIG. 10, a diagnosis result image 201 is displayed in the image display area 57a of the display device 57. As shown in FIG. More specifically, the image display area 57a of the display device 57 includes an operation image display portion 221 (first display portion), an overhead image display portion 222 (second display portion), and a user name 213 such as a user account. It has a user name display section 223 for displaying. An operation image 211 forming the diagnosis result image 201 is displayed on the operation image display unit 221 (first display unit). A bird's-eye view image 212 forming the diagnostic result image 201 is displayed on the bird's-eye view image display unit 222 (second display unit).

操作画像２１１は、表示対象（本例では被験者の脳）を、ユーザによる操作に応じて表示形式を変更可能に表現した画像である。表示形式は特に限定されるべきものではないが、例えば表示角度、倍率、断面位置、ラベル情報の有無等であり得る。ラベル情報とは、表示対象の各構成部に対応する情報であり、例えば脳の各部位の名称等を示す情報である。ユーザは、所定のユーザインターフェース（マウス、タッチパネル機構等）を操作して操作画像２１１の表示角度、倍率等の表示形式を任意に変化させることができる。 The operation image 211 is an image representing a display target (the subject's brain in this example) so that the display format can be changed according to the user's operation. The display format is not particularly limited, but may be, for example, display angle, magnification, cross-sectional position, presence/absence of label information, and the like. The label information is information corresponding to each component to be displayed, and is information indicating, for example, the name of each part of the brain. The user can arbitrarily change the display format such as the display angle and magnification of the operation image 211 by operating a predetermined user interface (mouse, touch panel mechanism, etc.).

俯瞰画像２１２は、操作画像２１１の表示対象を俯瞰的に表現した画像であり、操作画像２１１の表示形式の変化に応じて自動的に変化する。ここで例示する俯瞰画像２１２は、操作画像２１１の表示対象となっている脳の全体的形状を表現している。俯瞰画像２１２は、操作画像２１１の表示角度の変化に応じて回転する。 The bird's-eye view image 212 is an image that represents the display target of the operation image 211 in a bird's-eye view, and automatically changes according to the change in the display format of the operation image 211 . A bird's-eye view image 212 exemplified here expresses the overall shape of the brain that is the display target of the operation image 211 . The overhead image 212 rotates according to the change in the display angle of the operation image 211 .

また、俯瞰画像表示部２２２内には、操作画像２１１が脳全体のうちのどの部分にあたるかを示す表示領域枠２３２が表示されている。表示領域枠２３２は、操作画像２１１の倍率、表示範囲の移動等に応じて変化する。 Also, in the bird's-eye view image display section 222, a display area frame 232 is displayed to indicate which part of the entire brain the operation image 211 corresponds to. The display area frame 232 changes according to the magnification of the operation image 211, movement of the display range, and the like.

ユーザ名２１３は、操作画像２１１及び俯瞰画像２１２の表示対象に対応するユーザ（被験者等）を特定する情報である。ここで例示するユーザ名２１３は、情報記憶部１０１に記憶された各種情報１５１～１５６に含まれるユーザアカウントである。 The user name 213 is information that identifies a user (subject or the like) corresponding to the display target of the operation image 211 and the overhead image 212 . A user name 213 exemplified here is a user account included in various information 151 to 156 stored in the information storage unit 101 .

図１１は、実施形態に係る診断結果画像２０１の表示対象に関する設定処理の一例を示すフローチャートである。表示制御部１０４は、所定の表示装置（情報表示装置１６の表示装置５７等）に表示対象の設定を行うための準備画面を表示させる（Ｓ１０１）。表示制御部１０４は、脳活動情報を表示させるように設定されたか否かを判定し（Ｓ１０２）、脳活動情報を表示させるように設定された場合（Ｓ１０２：Ｙｅｓ）、脳活動情報があるか否か（情報記憶部１０１に記憶されているか否か）を判定する（Ｓ１０３）。表示制御部１０４は、脳活動情報がある場合（Ｓ１０３：Ｙｅｓ）、表示対象となる脳画像（例えばＭＲＩ断面図等）に脳活動情報を重畳させた操作画像２１１を表示するためのデータを生成する（Ｓ１０４）。一方、脳活動情報を表示させるように設定されなかった場合（Ｓ１０２：Ｎｏ）又は脳活動情報がない場合（Ｓ１０３：Ｎｏ）、ステップＳ１０４は実行されず、後述するステップＳ１０５が実行される。 FIG. 11 is a flowchart illustrating an example of setting processing regarding display targets of the diagnosis result image 201 according to the embodiment. The display control unit 104 causes a predetermined display device (the display device 57 of the information display device 16, etc.) to display a preparation screen for setting display targets (S101). The display control unit 104 determines whether or not brain activity information is set to be displayed (S102), and if brain activity information is set to be displayed (S102: Yes), whether there is brain activity information. It is determined whether or not (whether stored in the information storage unit 101) (S103). When there is brain activity information (S103: Yes), the display control unit 104 generates data for displaying an operation image 211 in which the brain activity information is superimposed on a brain image to be displayed (such as an MRI sectional view). (S104). On the other hand, if the brain activity information is not set to be displayed (S102: No) or if there is no brain activity information (S103: No), step S104 is not executed and step S105, which will be described later, is executed.

次いで、表示制御部１０４は、脳部位情報を表示させるように設定されたか否かを判定し（Ｓ１０５）、脳部位情報を表示させるように設定された場合（Ｓ１０５：Ｙｅｓ）、脳部位情報があるか否かを判定する（Ｓ１０６）。表示制御部１０４は、脳部位情報がある場合（Ｓ１０６：Ｙｅｓ）、表示対象となる脳画像に脳部位情報を重畳させた操作画像２１１を表示するためのデータを生成する（Ｓ１０７）。一方、脳部位情報を表示させるように設定されなかった場合（Ｓ１０５：Ｎｏ）又は脳部位情報がない場合（Ｓ１０６：Ｎｏ）、ステップＳ１０７は実行されず、後述するステップＳ１０８が実行される。 Next, the display control unit 104 determines whether or not the brain region information is set to be displayed (S105), and if the brain region information is set to be displayed (S105: Yes), the brain region information is It is determined whether or not there is (S106). When there is brain part information (S106: Yes), the display control unit 104 generates data for displaying the operation image 211 in which the brain part information is superimposed on the brain image to be displayed (S107). On the other hand, if it is not set to display brain region information (S105: No) or if there is no brain region information (S106: No), step S107 is not executed, and step S108, which will be described later, is executed.

次いで、表示制御部１０４は、ダイポール情報を表示させるように設定されたか否かを判定し（Ｓ１０８）、ダイポール情報を表示させるように設定された場合（Ｓ１０８：Ｙｅｓ）、ダイポール情報があるか否かを判定する（Ｓ１０９）。表示制御部１０４は、ダイポール情報がある場合（Ｓ１０９：Ｙｅｓ）、表示対象となる脳画像にダイポール情報を重畳させた操作画像２１１を表示するためのデータを生成する（Ｓ１１０）。一方、ダイポール情報を表示するように設定されなかった場合（Ｓ１０８：Ｎｏ）又はダイポール情報がない場合（Ｓ１０９：Ｎｏ）、ステップＳ１１０は実行されず、後述するステップＳ１１１が実行される。 Next, the display control unit 104 determines whether or not it is set to display dipole information (S108), and if it is set to display dipole information (S108: Yes), whether or not there is dipole information. (S109). When there is dipole information (S109: Yes), the display control unit 104 generates data for displaying the operation image 211 in which the dipole information is superimposed on the brain image to be displayed (S110). On the other hand, if the dipole information is not set to be displayed (S108: No) or if there is no dipole information (S109: No), step S110 is not executed and step S111, which will be described later, is executed.

次いで、表示制御部１０４は、ＭＲＩ情報を表示させるように設定されたか否かを判定し（Ｓ１１１）、ＭＲＩ情報を表示させるように設定された場合（Ｓ１１１：Ｙｅｓ）、ＭＲＩ情報があるか否かを判定する（Ｓ１１２）。表示制御部１０４は、ＭＲＩ情報がある場合（Ｓ１１２：Ｙｅｓ）、操作画像２１１を３次元ＭＲＩ画像として表示するためのデータを生成する（Ｓ１１３）。一方、ＭＲＩ情報を表示させるように設定されなかった場合（Ｓ１１１：Ｎｏ）又はＭＲＩ情報がない場合（Ｓ１１２：Ｎｏ）、ステップＳ１１３は実行されず、当該処理フローを終了する。 Next, the display control unit 104 determines whether or not the MRI information is set to be displayed (S111), and if the MRI information is set to be displayed (S111: Yes), whether there is MRI information (S112). If there is MRI information (S112: Yes), the display control unit 104 generates data for displaying the operation image 211 as a three-dimensional MRI image (S113). On the other hand, if the MRI information is not set to be displayed (S111: No) or if there is no MRI information (S112: No), step S113 is not executed and the processing flow ends.

図１２は、実施形態に係る脳活動情報２５１が重畳された脳画像を表示する診断結果画像２０１の一例を示す図である。図１２に示すように、ここで例示する操作画像表示部２２１（第１の表示部）内の操作画像２１１には、脳内における脳活動の大きさを示す脳活動情報（ヒートマップ）２５１が重畳されている。脳活動情報２５１中の星印は脳活動が最も大きいピークの場所を示している。脳活動情報２５１は、「付加情報」の一例である。 FIG. 12 is a diagram showing an example of a diagnosis result image 201 displaying a brain image on which brain activity information 251 is superimposed according to the embodiment. As shown in FIG. 12, an operation image 211 in an operation image display unit 221 (first display unit) illustrated here includes brain activity information (heat map) 251 indicating the magnitude of brain activity in the brain. superimposed. The asterisks in the brain activity information 251 indicate the peak locations of the highest brain activity. The brain activity information 251 is an example of "additional information".

図１３は、実施形態に係る脳部位情報２５２が重畳された脳画像を表示する診断結果画像２０１の一例を示す図である。ここで例示する操作画像表示部２２１（第１の表示部）内の操作画像２１１は、各部位（領野）の場所、名称等を示す脳部位情報２５２を含んでいる。脳部位情報２５２は、例えば文字、色彩等を用いて各部位を視覚的に識別可能にする情報である。脳部位情報２５２は、「付加情報」の一例である。 FIG. 13 is a diagram showing an example of a diagnostic result image 201 displaying a brain image on which brain region information 252 is superimposed according to the embodiment. The operation image 211 in the operation image display unit 221 (first display unit) illustrated here includes brain part information 252 indicating the location, name, etc. of each part (region). The brain part information 252 is information that makes each part visually identifiable, for example, using characters, colors, and the like. The brain region information 252 is an example of "additional information".

図１４は、実施形態に係るダイポール情報２５３が重畳された脳画像を表示する診断結果画像２０１の一例を示す図である。ここで例示する操作画像表示部２２１（第１の表示部）内の操作画像２１１には、ダイポールクラスタが存在する領域を示すダイポール情報２５３が重畳されている。ダイポール情報２５３は、例えば色彩等を用いてダイポールクラスタが存在する領域等を視覚的に識別可能にする情報である。ダイポール情報２５３は、「付加情報」の一例である。 FIG. 14 is a diagram showing an example of a diagnostic result image 201 displaying a brain image on which dipole information 253 is superimposed according to the embodiment. Dipole information 253 indicating an area in which a dipole cluster exists is superimposed on the operation image 211 in the operation image display portion 221 (first display portion) illustrated here. The dipole information 253 is information that makes it possible to visually identify areas where dipole clusters exist, for example, using colors. The dipole information 253 is an example of "additional information".

図１５は、実施形態に係る診断結果画像２０１の表示形式を変更する処理の一例を示すフローチャートである。表示制御部１０４は、操作画像２１１の表示範囲を移動させる操作が行われたか否かを判定する（Ｓ２０１）。表示範囲を移動させる操作が行われた場合（Ｓ２０１：Ｙｅｓ）、表示制御部１０４は、移動後の表示範囲に適合するように操作画像２１１及び俯瞰画像２１２の更新する（Ｓ２０２）。一方、表示範囲を移動させる操作が行われなかった場合（Ｓ２０１：Ｎｏ）、ステップＳ２０２は実行されず、後述するステップＳ２０３が実行される。 FIG. 15 is a flowchart showing an example of processing for changing the display format of the diagnosis result image 201 according to the embodiment. The display control unit 104 determines whether or not an operation has been performed to move the display range of the operation image 211 (S201). If an operation to move the display range has been performed (S201: Yes), the display control unit 104 updates the operation image 211 and the overhead image 212 so as to match the display range after movement (S202). On the other hand, if an operation to move the display range has not been performed (S201: No), step S202 is not executed, and step S203, which will be described later, is executed.

次いで、表示制御部１０５は、操作画像２１１の表示角度を変更させる操作が行われたか否かを判定する（Ｓ２０３）。表示角度を変更させる操作が行われた場合（Ｓ２０３：Ｙｅｓ）、表示制御部１０４は、変更後の表示角度に適合するように操作画像２１１及び俯瞰画像２１２を更新する（Ｓ２０４）。一方、表示角度を変更させる操作が行われなかった場合（Ｓ２０３：Ｎｏ）、ステップＳ２０４は実行されず、後述するステップＳ２０５が実行される。 Next, the display control unit 105 determines whether or not an operation to change the display angle of the operation image 211 has been performed (S203). If an operation to change the display angle has been performed (S203: Yes), the display control unit 104 updates the operation image 211 and the overhead image 212 so as to match the changed display angle (S204). On the other hand, if an operation to change the display angle has not been performed (S203: No), step S204 is not executed, and step S205, which will be described later, is executed.

次いで、表示制御部１０５は、操作画像２１１を拡大させる操作が行われたか否かを判定する（Ｓ２０５）。拡大させる操作が行われた場合（Ｓ２０５：Ｙｅｓ）、表示制御部１０４は、変更後の倍率に適合するように操作画像２１１及び俯瞰画像２１２を更新する（Ｓ２０６）。一方、拡大させる操作が行われなかった場合（Ｓ２０５：Ｎｏ）、ステップＳ２０６は実行されず、後述するステップＳ２０７が実行される。 Next, the display control unit 105 determines whether or not an operation to enlarge the operation image 211 has been performed (S205). If an enlargement operation has been performed (S205: Yes), the display control unit 104 updates the operation image 211 and the overhead image 212 so as to match the changed magnification (S206). On the other hand, if the enlargement operation has not been performed (S205: No), step S206 is not executed, and step S207, which will be described later, is executed.

次いで、表示制御部１０５は、操作画像２１１を縮小させる操作が行われたか否かを判定する（Ｓ２０７）。縮小させる操作が行われた場合（Ｓ２０７：Ｙｅｓ）、表示制御部１０４は、変更後の倍率に適合するように操作画像２１１及び俯瞰画像２１２を更新する（Ｓ２０８）。一方、縮小させる操作が行われなかった場合（Ｓ２０７：Ｎｏ）、ステップＳ２０８は実行されず、後述するステップＳ２０９が実行される。 Next, the display control unit 105 determines whether or not an operation to reduce the operation image 211 has been performed (S207). If a reduction operation has been performed (S207: Yes), the display control unit 104 updates the operation image 211 and the overhead image 212 so as to match the changed magnification (S208). On the other hand, if the reduction operation has not been performed (S207: No), step S208 is not executed, and step S209, which will be described later, is executed.

次いで、表示制御部１０４は、操作画像２１１の表示範囲内に表示させるべき付加情報があるか否かを判定する（Ｓ２０９）。表示範囲内に表示させるべき付加情報がある場合（Ｓ２０９：Ｙｅｓ）、表示制御部１０４は、当該付加情報を操作画像２１１に重畳させるための処理を行う（Ｓ２１０）。一方、表示範囲内に表示させるべき付加情報がない場合（Ｓ２０９：Ｎｏ）、ステップＳ２１０は実行されず、当該処理フローを終了する。 Next, the display control unit 104 determines whether there is additional information to be displayed within the display range of the operation image 211 (S209). If there is additional information to be displayed within the display range (S209: Yes), the display control unit 104 performs processing for superimposing the additional information on the operation image 211 (S210). On the other hand, if there is no additional information to be displayed within the display range (S209: No), step S210 is not executed and the processing flow ends.

図１６及び図１７は、操作画像２１１の表示角度を変更した場合における診断結果画像２０１の変化を例示している。図１６は、実施形態に係る脳部位情報２５２及びダイポール情報２５３を含む脳画像の側面断面図を表示する診断結果画像２０１の一例を示す図である。図１７は、実施形態に係る脳部位情報２５２及びダイポール情報２５３を含む脳画像の前面断面図を表示する診断結果画像２０１の一例を示す図である。図１７に示す脳画像は、図１６に示す脳画像のＸＶＩＩ－ＸＶＩＩ断面図である。 16 and 17 illustrate changes in the diagnosis result image 201 when the display angle of the operation image 211 is changed. FIG. 16 is a diagram showing an example of a diagnosis result image 201 displaying a lateral cross-sectional view of a brain image including brain region information 252 and dipole information 253 according to the embodiment. FIG. 17 is a diagram showing an example of a diagnosis result image 201 displaying a front cross-sectional view of a brain image including brain region information 252 and dipole information 253 according to the embodiment. The brain image shown in FIG. 17 is the XVII-XVII cross-sectional view of the brain image shown in FIG.

ユーザが操作画像２１１の表示角度を変更する所定の操作を行うと、図１６に示す操作画像２１１が図１７に示す操作画像２１１に変化する。このとき、操作画像２１１に重畳して表示される付加情報（脳部位情報２５２及びダイポール情報２５３）は、表示角度に応じて変化する。また、俯瞰画像表示部２２２内に表示されている俯瞰画像２１２の表示角度は、操作画像２１１の表示角度の変化と同期して自動的に変化する。 When the user performs a predetermined operation to change the display angle of the operation image 211, the operation image 211 shown in FIG. 16 changes to the operation image 211 shown in FIG. At this time, the additional information (the brain part information 252 and the dipole information 253) superimposed and displayed on the operation image 211 changes according to the display angle. Also, the display angle of the bird's-eye view image 212 displayed in the bird's-eye view image display unit 222 automatically changes in synchronization with the change of the display angle of the operation image 211 .

図１８は、実施形態に係る拡大された脳画像を表示する診断結果画像２０１の一例を示す図である。ここでは脳の断面図の一部を拡大して表示した場合を例示している。このような場合、付加情報（本例では脳部位情報２５２及びダイポール情報２５３）の粒度は、操作画像２１１の表示内容に合わせて変化する。例えば、脳部位情報２５２は、拡大前より詳細な内容を表示するように、すなわちより微細な領野の名称も表示するように変化する。また、俯瞰画像表示部２２２内に表示されている領域表示枠２３２の大きさが、拡大後の操作画像２１１の表示範囲に合わせて縮小される。このような俯瞰画像２１２を参照することにより、ユーザは現在表示されている操作画像２１１が脳全体のうちのどの部分にあたるのかを明確に把握することができる。 FIG. 18 is a diagram showing an example of a diagnosis result image 201 displaying an enlarged brain image according to the embodiment. Here, a case where a part of the cross-sectional view of the brain is enlarged and displayed is exemplified. In such a case, the granularity of the additional information (brain part information 252 and dipole information 253 in this example) changes according to the display content of the operation image 211 . For example, the brain region information 252 changes to display more detailed content than before enlargement, that is, to display the names of more detailed regions. Also, the size of the area display frame 232 displayed in the bird's-eye view image display portion 222 is reduced according to the display range of the operation image 211 after being enlarged. By referring to such a bird's-eye view image 212, the user can clearly grasp which part of the entire brain the currently displayed operation image 211 corresponds to.

図１９は、実施形態に係る脳活動情報２５１及び脳部位情報２５２を含む脳画像の側面断面図を表示する診断結果画像２０１の一例を示す図である。図２０は、実施形態に係る脳活動情報２５１及び脳部位情報２５２を含む脳画像の拡大された側面断面図を表示する診断結果画像２０１の一例を示す図である。 FIG. 19 is a diagram showing an example of a diagnosis result image 201 displaying a side sectional view of a brain image including brain activity information 251 and brain region information 252 according to the embodiment. FIG. 20 is a diagram showing an example of a diagnosis result image 201 displaying an enlarged side sectional view of a brain image including brain activity information 251 and brain region information 252 according to the embodiment.

図１９に示す操作画像２１１おける脳活動情報２５１内のピーク（星印）の数は１であるが、図２０に示す操作画像２１１における脳活動情報２５１内のピークの数は３となっている。また、図２０に示す操作画像２１１においては、図１９に示す操作画像２１１においては表示されていない詳細な脳部位情報２５２が表示されている。このように、操作画像２１１に重畳して表示される付加情報（本例では脳活動情報２５１及び脳部位情報２５２）は、操作画像２１１の倍率に応じて自動的に変化する。これにより、操作画像表示部２２１内が付加情報により煩雑になることを避けつつ、有用な情報提供を行うことが可能となる。 The number of peaks (asterisks) in the brain activity information 251 in the operation image 211 shown in FIG. 19 is 1, but the number of peaks in the brain activity information 251 in the operation image 211 shown in FIG. 20 is 3. . In addition, in the operation image 211 shown in FIG. 20, detailed brain part information 252 that is not displayed in the operation image 211 shown in FIG. 19 is displayed. In this way, the additional information (brain activity information 251 and brain part information 252 in this example) superimposed and displayed on the operation image 211 automatically changes according to the magnification of the operation image 211 . This makes it possible to provide useful information while avoiding the inside of the operation image display section 221 from becoming complicated with additional information.

以上のように、本実施形態によれば、表示装置５７の画像表示領域５７ａ内に、ユーザにより表示形式を任意に操作可能な診断結果画像２０１を構成する操作画像２１１と、操作画像２１１の表示形式に応じて変化する診断結果画像２０１を構成する俯瞰画像２１２とが表示される。そして、操作画像２１１内の付加情報は表示形式に応じて可読性を損なわないように自動的に調整される。これにより、可読性及び操作性を向上させ、利便性の高い画像情報を提供することが可能となる。 As described above, according to this embodiment, in the image display area 57a of the display device 57, the operation image 211 constituting the diagnosis result image 201 whose display format can be arbitrarily operated by the user, and the operation image 211 are displayed. A bird's-eye view image 212 that constitutes the diagnosis result image 201 that changes according to the format is displayed. The additional information in the operation image 211 is automatically adjusted according to the display format so as not to impair the readability. This makes it possible to improve readability and operability, and provide highly convenient image information.

上記実施形態の各機能の少なくとも一部がプログラムの実行によって実現される場合、プログラムは適宜な記憶装置に予め組み込まれて提供される。また、プログラムはインストール可能な形式又は実行可能な形式のファイルでＣＤ－ＲＯＭ、フレキシブルディスク（ＦＤ）、ＣＤ－Ｒ、ＤＶＤ等のコンピュータで読み取り可能な記録媒体に記録して提供されてもよい。また、プログラムはインターネット等のネットワークに接続されたコンピュータ上に格納され、ネットワーク経由でダウンロードさせることにより提供され得るように構成されてもよい。また、プログラムはインターネット等のネットワーク経由で提供又は配布され得るように構成されてもよい。また、プログラムは上述した各機能の少なくとも一部を含むモジュール構成となっていてもよい。 When at least part of each function of the above-described embodiments is realized by executing a program, the program is preinstalled in an appropriate storage device and provided. Also, the program may be recorded in a computer-readable recording medium such as a CD-ROM, a flexible disk (FD), a CD-R, or a DVD in the form of an installable or executable file and provided. Alternatively, the program may be stored on a computer connected to a network such as the Internet, and may be provided by being downloaded via the network. Also, the program may be configured to be provided or distributed via a network such as the Internet. Also, the program may have a module configuration including at least part of each function described above.

以上、本発明の実施形態を説明したが、上記実施形態は例として提示したものであり、発明の範囲を限定することを意図するものではない。上記新規な実施形態はその他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で種々の省略、置き換え、変更を行うことができる。上記実施形態及びその変形は発明の範囲及び要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。 Although the embodiment of the present invention has been described above, the above embodiment is presented as an example and is not intended to limit the scope of the invention. The novel embodiments described above can be implemented in various other forms, and various omissions, replacements, and modifications can be made without departing from the scope of the invention. The above-described embodiments and modifications thereof are included in the scope and gist of the invention, and are included in the scope of the invention described in the claims and equivalents thereof.

１脳機能診断システム（情報表示システム）
１１脳磁計側装置（検診装置）
１２ＭＲＩ装置（検診装置）
１３脳波計側装置（検診装置）
１４生体検査装置（検診装置）
１５サーバ
１６情報表示装置
５１ＣＰＵ
５２ＲＡＭ
５３ＲＯＭ
５４補助記憶装置
５５ネットワークＩ／Ｆ
５６入力装置
５７表示装置
１０１情報記憶部
１０２脳活動情報収集部
１０３診断処理部
１０４表示制御部
１１１信号源推定部
１１２ピーク抽出部
１１３クラスタ抽出部
１２１双方向処理部
１２２俯瞰処理部
１５１プロジェクト情報
１５２ユーザ情報
１５３検査情報
１５４脳活動情報
１５５脳アトラス情報
１５６ＭＲＩ情報
１６１収集情報
２０１診断結果画像
２１１操作画像
２１２俯瞰画像
２１３ユーザ名
２２１操作画像表示部（第１の表示部）
２２２俯瞰画像表示部（第２の表示部）
２２３ユーザ名表示部
２３２表示領域枠
２５１脳活動情報
２５２脳部位情報
２５３ダイポール情報 1 Brain function diagnosis system (information display system)
11 Magnetoencephalography device (examination device)
12 MRI device (examination device)
13 Electroencephalograph device (examination device)
14 biopsy device (examination device)
15 server 16 information display device 51 CPU
52 RAMs
53 ROMs
54 Auxiliary storage device 55 Network I/F
56 input device 57 display device 101 information storage unit 102 brain activity information collection unit 103 diagnosis processing unit 104 display control unit 111 signal source estimation unit 112 peak extraction unit 113 cluster extraction unit 121 interactive processing unit 122 overhead processing unit 151 project information 152 User information 153 Examination information 154 Brain activity information 155 Brain atlas information 156 MRI information 161 Collected information 201 Diagnosis result image 211 Operation image 212 Bird's eye image 213 User name 221 Operation image display section (first display section)
222 bird's-eye view image display unit (second display unit)
223 User name display part 232 Display area frame 251 Brain activity information 252 Brain region information 253 Dipole information

特表２００９－５０９５７１号公報Japanese Patent Publication No. 2009-509571

Claims

An information display device that causes a display device to display a diagnostic result image showing a diagnostic result related to the brain,
The image display area of the display device is a first display unit for displaying the operation image representing at least a part of the brain, the display format of which can be changed according to an operation by a user. a second display unit for displaying a bird's-eye view image, which is the diagnosis result image representing the overall shape of the brain and which rotates according to a change in the display angle of the operation image ;
the first display unit and the second display unit are displayed at positions different from each other;
displaying a display area frame indicating which part of the entire brain the operation image displayed on the first display corresponds to in the second display;
wherein the display area frame is reduced in accordance with the enlarged display range of the operation image;
Information display device.

comprising means for superimposing and displaying additional information related to the brain on the operation image;
the granularity of the additional information changes according to the magnification of the operation image;
The information display device according to claim 1 .

the additional information includes one or more information selected from the group consisting of brain region information, brain activity information, and dipole information;
The information display device according to claim 2 .

a medical examination device for acquiring data indicating diagnostic results related to the brain;
The information display device according to any one of claims 1 to 3 , wherein the diagnostic result image is displayed in an image display area of the display device based on the data acquired by the medical examination device;
Information display system.

An information display method for displaying, on a display device, a diagnostic result image showing a diagnostic result related to the brain,
An operation image, which is the diagnosis result image representing at least a part of the brain and whose display format can be changed according to an operation by a user, is displayed on a first display unit partitioned within the image display area of the display device. a step of displaying;
A bird's-eye view image, which is the diagnosis result image representing the overall shape of the brain and which rotates according to a change in the display angle of the operation image, is displayed on a second display unit partitioned within the image display area of the display device. and displaying
the first display unit and the second display unit are displayed at positions different from each other;
A display area frame is displayed in the second display unit to indicate which part of the entire brain the operation image displayed on the first display unit corresponds to, and the display area frame corresponds to the operation image. shrinks to fit the expanded display range of
Information display method.