JP6793332B2 - 制御方法及びプログラム - Google Patents
制御方法及びプログラム Download PDFInfo
- Publication number
- JP6793332B2 JP6793332B2 JP2016170880A JP2016170880A JP6793332B2 JP 6793332 B2 JP6793332 B2 JP 6793332B2 JP 2016170880 A JP2016170880 A JP 2016170880A JP 2016170880 A JP2016170880 A JP 2016170880A JP 6793332 B2 JP6793332 B2 JP 6793332B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- information
- display
- similar
- medical image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 116
- 230000003902 lesion Effects 0.000 claims description 205
- 238000009826 distribution Methods 0.000 claims description 188
- 210000004072 lung Anatomy 0.000 claims description 45
- 210000000056 organ Anatomy 0.000 claims description 17
- 208000013210 hematogenous Diseases 0.000 claims description 14
- 210000004224 pleura Anatomy 0.000 claims description 9
- 230000002146 bilateral effect Effects 0.000 claims description 8
- 238000003325 tomography Methods 0.000 claims description 8
- 201000010099 disease Diseases 0.000 description 159
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 description 159
- 238000007726 management method Methods 0.000 description 137
- 238000003745 diagnosis Methods 0.000 description 74
- 238000010586 diagram Methods 0.000 description 59
- 238000007689 inspection Methods 0.000 description 59
- 230000008569 process Effects 0.000 description 47
- 238000004891 communication Methods 0.000 description 41
- 238000002591 computed tomography Methods 0.000 description 28
- 238000012545 processing Methods 0.000 description 28
- 238000012360 testing method Methods 0.000 description 22
- 238000013500 data storage Methods 0.000 description 14
- 238000000605 extraction Methods 0.000 description 13
- 206010017533 Fungal infection Diseases 0.000 description 12
- 208000024386 fungal infectious disease Diseases 0.000 description 12
- 206010050017 Lung cancer metastatic Diseases 0.000 description 9
- 230000001613 neoplastic effect Effects 0.000 description 9
- 210000004204 blood vessel Anatomy 0.000 description 8
- 238000002595 magnetic resonance imaging Methods 0.000 description 8
- 239000000284 extract Substances 0.000 description 7
- 238000003384 imaging method Methods 0.000 description 7
- 210000000038 chest Anatomy 0.000 description 6
- 230000006872 improvement Effects 0.000 description 6
- 208000027531 mycobacterial infectious disease Diseases 0.000 description 6
- 238000006243 chemical reaction Methods 0.000 description 5
- 201000002909 Aspergillosis Diseases 0.000 description 4
- 208000036641 Aspergillus infections Diseases 0.000 description 4
- 206010058467 Lung neoplasm malignant Diseases 0.000 description 4
- 230000008901 benefit Effects 0.000 description 4
- 238000009534 blood test Methods 0.000 description 4
- 201000005202 lung cancer Diseases 0.000 description 4
- 208000020816 lung neoplasm Diseases 0.000 description 4
- 201000007336 Cryptococcosis Diseases 0.000 description 3
- 241000221204 Cryptococcus neoformans Species 0.000 description 3
- 230000001174 ascending effect Effects 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 3
- 230000017531 blood circulation Effects 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 238000005070 sampling Methods 0.000 description 3
- 206010028980 Neoplasm Diseases 0.000 description 2
- 238000001994 activation Methods 0.000 description 2
- 210000000621 bronchi Anatomy 0.000 description 2
- 201000009267 bronchiectasis Diseases 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 238000013170 computed tomography imaging Methods 0.000 description 2
- 238000004590 computer program Methods 0.000 description 2
- 238000013523 data management Methods 0.000 description 2
- 238000002059 diagnostic imaging Methods 0.000 description 2
- 210000001370 mediastinum Anatomy 0.000 description 2
- 238000012831 peritoneal equilibrium test Methods 0.000 description 2
- 238000012636 positron electron tomography Methods 0.000 description 2
- 238000012877 positron emission topography Methods 0.000 description 2
- 201000000306 sarcoidosis Diseases 0.000 description 2
- 210000001519 tissue Anatomy 0.000 description 2
- 230000007704 transition Effects 0.000 description 2
- 208000005189 Embolism Diseases 0.000 description 1
- 206010014561 Emphysema Diseases 0.000 description 1
- 241000186359 Mycobacterium Species 0.000 description 1
- 206010040067 Septic embolus Diseases 0.000 description 1
- 210000001015 abdomen Anatomy 0.000 description 1
- 206010000269 abscess Diseases 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 238000004820 blood count Methods 0.000 description 1
- 210000000988 bone and bone Anatomy 0.000 description 1
- 210000000481 breast Anatomy 0.000 description 1
- 201000011510 cancer Diseases 0.000 description 1
- 229940079593 drug Drugs 0.000 description 1
- 239000003814 drug Substances 0.000 description 1
- 238000001839 endoscopy Methods 0.000 description 1
- 239000005337 ground glass Substances 0.000 description 1
- 210000002216 heart Anatomy 0.000 description 1
- 230000002489 hematologic effect Effects 0.000 description 1
- 230000008595 infiltration Effects 0.000 description 1
- 238000001764 infiltration Methods 0.000 description 1
- 210000000265 leukocyte Anatomy 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000004807 localization Effects 0.000 description 1
- 201000003453 lung abscess Diseases 0.000 description 1
- 210000001165 lymph node Anatomy 0.000 description 1
- 210000000496 pancreas Anatomy 0.000 description 1
- 208000008128 pulmonary tuberculosis Diseases 0.000 description 1
- 230000004202 respiratory function Effects 0.000 description 1
- 210000002345 respiratory system Anatomy 0.000 description 1
- 238000010187 selection method Methods 0.000 description 1
- 210000004872 soft tissue Anatomy 0.000 description 1
- 210000002784 stomach Anatomy 0.000 description 1
- 239000013589 supplement Substances 0.000 description 1
- 238000012549 training Methods 0.000 description 1
- 201000008827 tuberculosis Diseases 0.000 description 1
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 1
Classifications
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H30/00—ICT specially adapted for the handling or processing of medical images
- G16H30/20—ICT specially adapted for the handling or processing of medical images for handling medical images, e.g. DICOM, HL7 or PACS
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/05—Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves
- A61B5/055—Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves involving electronic [EMR] or nuclear [NMR] magnetic resonance, e.g. magnetic resonance imaging
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/52—Devices using data or image processing specially adapted for radiation diagnosis
- A61B6/5211—Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data
- A61B6/5217—Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data extracting a diagnostic or physiological parameter from medical diagnostic data
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H30/00—ICT specially adapted for the handling or processing of medical images
- G16H30/40—ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H40/00—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
- G16H40/60—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices
- G16H40/63—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices for local operation
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
- G16H50/70—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for mining of medical data, e.g. analysing previous cases of other patients
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/0482—Interaction with lists of selectable items, e.g. menus
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V2201/00—Indexing scheme relating to image or video recognition or understanding
- G06V2201/03—Recognition of patterns in medical or anatomical images
- G06V2201/031—Recognition of patterns in medical or anatomical images of internal organs
Landscapes
- Health & Medical Sciences (AREA)
- Engineering & Computer Science (AREA)
- Medical Informatics (AREA)
- Public Health (AREA)
- General Health & Medical Sciences (AREA)
- Biomedical Technology (AREA)
- Epidemiology (AREA)
- Primary Health Care (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Life Sciences & Earth Sciences (AREA)
- Radiology & Medical Imaging (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- Pathology (AREA)
- Databases & Information Systems (AREA)
- Surgery (AREA)
- Heart & Thoracic Surgery (AREA)
- Veterinary Medicine (AREA)
- Animal Behavior & Ethology (AREA)
- Biophysics (AREA)
- High Energy & Nuclear Physics (AREA)
- Molecular Biology (AREA)
- Business, Economics & Management (AREA)
- General Business, Economics & Management (AREA)
- Theoretical Computer Science (AREA)
- Optics & Photonics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Physiology (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Measuring And Recording Apparatus For Diagnosis (AREA)
- Medical Treatment And Welfare Office Work (AREA)
- Apparatus For Radiation Diagnosis (AREA)
- Magnetic Resonance Imaging Apparatus (AREA)
Description
前記情報端末のコンピュータに対して、
読影対象の医用画像である対象医用画像と所定の類似度を有する複数の類似医用画像に対応する複数の画像を含む複数のデータを前記症例検索システムから受信させ、
前記複数の類似医用画像の各々は、断層撮影法により撮影され、かつ第1の方向に沿って並べられた画像群の内の1つの医用画像であり、
前記複数のデータの各々に対応する対応情報には、びまん性病変または限局性病変の識別情報が設定されており、
前記びまん性病変の識別情報が設定されている対応情報には、さらに、前記第1の方向に沿って並べられた画像群の内の他の複数の医用画像が付加されており、
前記限局性病変の識別情報が設定されている類似医用画像の付加情報には、さらに、前記第1の方向に沿って並べられた画像群の内から前記限局性病変を含む複数の医用画像が付加されており、
前記複数の類似医用画像をサムネイル表示する第1表示領域を含む表示画面を前記ディスプレイに表示させ、
前記第1表示領域にサムネイル表示される前記複数の類似医用画像の内から選択された1つの類似医用画像を検知させ、
前記選択された1つの類似医用画像がびまん性病変である場合、前記表示画面に含まれる第2表示領域に、前記他の複数の医用画像を表示させ、
前記選択された1つの類似医用画像が限局性病変である場合、前記第2表示領域に、前記限局性病変を含む複数の医用画像を前記第1の方向に沿って連続的に表示させる。
まず、本開示に係る一態様の着眼点について説明する。
医用画像を登録する医用画像データベースを参照して医用画像を検索する症例検索システムに接続し、ディスプレイを有する情報端末の制御方法であって、
前記情報端末のコンピュータに対して、
読影対象の医用画像である対象医用画像と所定の類似度を有する複数の類似医用画像に対応する複数の画像を含む複数のデータを前記症例検索システムから受信させ、
前記複数の類似医用画像の各々は、断層撮影法により撮影され、かつ第1の方向に沿って並べられた画像群の内の1つの医用画像であり、
前記複数のデータの各々に対応する対応情報には、びまん性病変または限局性病変の識別情報が設定されており、
前記びまん性病変の識別情報が設定されている対応情報には、さらに、前記第1の方向に沿って並べられた画像群の内の他の複数の医用画像が付加されており、
前記限局性病変の識別情報が設定されている対応情報には、さらに、前記第1の方向に沿って並べられた画像群の内から前記限局性病変を含む複数の医用画像が付加されており、
前記複数の類似医用画像をサムネイル表示する第1表示領域を含む表示画面を前記ディスプレイに表示させ、
前記第1表示領域にサムネイル表示される前記複数の類似医用画像の内から選択された1つの類似医用画像を検知させ、
前記選択された1つの類似医用画像がびまん性病変である場合、前記表示画面に含まれる第2表示領域に、前記他の複数の医用画像を表示させ、
前記選択された1つの類似医用画像が限局性病変である場合、前記第2表示領域に、前記限局性病変を含む複数の医用画像を前記第1の方向に沿って連続的に表示させる。
前記選択された1つの類似医用画像が限局性病変である場合、前記第2表示領域に、前記第1の方向に沿って並べられた画像群の内の前記限局性病変の一端から他端までを含む複数の医用画像を前記第1の方向に沿って連続的に表示させてもよい。
前記選択された1つの類似医用画像が限局性病変である場合、前記第2表示領域に、前記第1の方向に沿って並べられた画像群の内の前記選択された1つの類似医用画像を含む前後所定数の医用画像を前記第1の方向に沿って連続的に表示させてもよい。
前記類似医用画像は、肺の医用画像であり、
前記限局性病変の識別情報が設定されている対応情報には、さらに、前記限局性病変が上葉、中葉、又は下葉の内いずれの肺野に存在するかを示す情報が付加されており、
前記選択された1つの類似医用画像を含む前後所定数は、前記上葉、前記中葉、又は前記下葉毎にそれぞれ設定されていてもよい。
前記類似医用画像は、肺の医用画像であり、
前記びまん性病変の識別情報が設定されている対応情報には、さらに、上葉、中葉、及び下葉のそれぞれの代表的な医用画像を示す情報が付加されており、
前記選択された1つの類似医用画像がびまん性病変である場合、前記第2表示領域に、前記上葉、前記中葉、及び下葉の代表的な医用画像を表示させてもよい。
前記制御方法は、
前記情報端末のコンピュータに対して、
前記読影対象の医用画像の中の関心領域を示す指定情報を検知させ、
前記関心領域の特徴量を前記症例検索システムに送信させ、
前記関心領域の特徴量と前記所定の類似度を有する類似医用画像を前記症例検索システムから受信させてもよい。
前記制御方法は、
前記情報端末のコンピュータに対して、
前記対象医用画像の中の関心領域を示す指定情報を検知させ、
前記対象医用画像及び前記指定情報を前記症例検索システムに送信させ、
前記対象医用画像及び前記指定情報から得られる前記関心領域の特徴量と前記所定の類似度を有する類似医用画像を前記症例検索システムから受信させてもよい。
前記対象医用画像は、肺の医用画像であり、
前記類似医用画像の中の病変部を示す対応関心領域を有し、
前記表示画面は、
前記対応関心領域の大きさが肺の領域に対して広範囲であることを示す所定の第1範囲に属する類似医用画像を選択させる第1分布情報、前記対応関心領域の大きさが肺の領域の一部であることを示す前記第1範囲より低い所定の第2範囲に属する類似医用画像を選択させる第2分布情報、及び、前記対応関心領域が胸膜を含む類似医用画像を選択させる第3分布情報を含み、
前記第1分布情報から前記第3分布情報の中のいずれか一の選択が検知された場合、前記選択された一の分布情報に対応する類似医用画像を選択して前記第1表示領域に表示させてもよい。
前記第1表示領域は、前記受信した複数の類似医用画像をそれぞれ表示するための複数の個別領域を含み、
前記第1分布情報の選択が検知された場合、前記第1分布情報に対応する類似医用画像を、前記個別領域に初期表示サイズにてそれぞれ表示させ、
前記第2分布情報の選択が検知された場合、前記第2分布情報に対応する類似医用画像の中の前記対応関心領域を中心として、前記第2分布情報に対応する類似医用画像を、前記個別領域にそれぞれ拡大表示させ、
前記第3分布情報の選択が検知された場合、前記第3分布情報に対応する類似医用画像の中の前記対応関心領域を中心として、前記胸膜を含んだ状態で、前記第3分布情報に対応する類似医用画像を、前記個別領域にそれぞれ拡大表示させてもよい。
前記第1分布情報は、両側性、多発性、びまん性又は血行性のカテゴリーに属する分布を示す情報であり、
前記第2分布情報は、区域性又は気道性のカテゴリーに属する分布を示す情報であり、
前記第3分布情報は、胸膜下のカテゴリーに属する分布を示す情報であってもよい。
以下本開示の一実施の形態について、図面を参照しながら説明する。なお、各図面において、同じ構成要素については同じ符号が用いられている。
症例表示領域710において類似症例のサムネイル画像を指定する操作を入力制御部103が検知すると、表示制御部104は、指定されたサムネイル画像を含むシリーズの中から指定されたサムネイル画像に対応する要約画像を表示する。図50は、類似症例検索直後の基本画面K2において、ユーザがサムネイル画像を選択した状態の一例を示す図である。
次に、情報端末100が医用情報管理システム200と症例検索システム300と連携して読影作業開始から類似症例検索を開始するまでの流れを説明する。
次に、症例検索システム300が類似症例検索を行い、情報端末100が類似症例検索結果を初期表示するまでの処理を説明する。
次に、情報端末100に類似症例検索結果を初期表示した後,ユーザが情報端末100で類似症例検索結果のサムネイル画像を選択し、選択したサムネイル画像に対応する要約画像を表示するまでの処理の流れを説明する。
要約画像生成部112は、症例表示領域710に表示された類似症例のサムネイル画像の中から、ユーザが選択したサムネイル画像の類似症例ID4100を取得する。
要約画像生成部112は、S5301で取得した類似症例ID4100からユーザが選択したサムネイル画像の類似症例データ4000を参照し、病変属性4900を取得する。
要約画像生成部112は、S5302で取得した病変属性4900が限局性病変を示せば(S5303でYES)、処理をS5340に進め、S5302で取得した病変属性がびまん性病変を示せば(S5303でNO)、処理をS5306に進める。
要約画像生成部112は、S5301で取得された類似症例ID4100とS5302で取得された病変属性4900とを用いて連続フレーム画像717を生成し、処理をS5305に進める。
連続フレーム画像の生成方法1は、類似症例データ4000の要約画像4910に登録されたスライスIDを用いて連続フレーム画像717を生成する方法である。この場合、類似症例データ4000として、図21Aに示す類似症例データ4000が採用されればよい。要約画像生成部112は、S5301で取得した類似症例ID4100に対応する類似症例データ4000を参照し、要約画像4910に登録されたスライスIDを取得し、取得したスライスIDに対応するサムネイル画像を医用情報管理システム200から取得する。そして、要約画像生成部112は、取得したサムネイル画像を用いて連続フレーム画像717を生成する。
連続フレーム画像の生成方法2は、ユーザが選択したサムネイル画像を含む前後所定数のサムネイル画像を取得することで連続フレーム画像717を生成する方法である。要約画像生成部112は、S5301で取得した類似症例ID4100に対応する類似症例データ4000を参照し、スライスID4200が示すサムネイル画像を含む前後所定数のサムネイル画像を取得する。
連続フレーム画像の生成方法3は、病変領域が含まれる器官の領域内の全てのサムネイル画像を用いて連続フレーム画像717を生成する方法である。図56は、限局性の類似症例データ4000のデータ構成の第三例を示す図である。図56において、類似症例データ4000は、図21Aの類似症例データ4000に対して、要約画像4910に代えて、器官内領域4920を備えている。
表示制御部104は、S5304で生成された連続フレーム画像717を症例表示領域710に表示し、処理を終了する。表示方法としては、例えば図51に示すように、ユーザが選択したサムネイル画像716の表示領域716aに、ステップS5304で生成された連続フレーム画像717を、動画表示する方法が採用できる。具体的には、表示制御部104は、連続フレーム画像717を構成するサムネイル画像をスライスIDが若い順に一定のフレームレートで表示領域716a内で切り替えて表示することで連続フレーム画像717を動画表示する。
要約画像生成部112は、S5301で取得した類似症例ID4100と、S5302で取得した病変属性4900とを用いて代表画像718を生成し、処理をS5307に進める。
代表画像の生成方法1は、類似症例データ4000の要約画像4910に登録されたスライスIDを用いて代表画像718を生成する方法である。この場合、類似症例データ4000として、図20に示す類似症例データ4000が採用されればよい。要約画像生成部112は、S5301で取得した類似症例ID4100に対応する類似症例データ4000を参照し、要約画像4910に登録されたスライスIDを取得する。
代表画像の生成方法2は、ユーザが選択したサムネイル画像に対応する類似症例が属するシリーズを所定間隔でサンプリングすることで代表画像718を生成する方法である。図57は、要約画像生成部112によるサンプリング処理の概念図である。この場合、類似症例データ4000としては、例えば、図55に示す類似症例データ4000が採用される。図55は、びまん性の類似症例データ4000の第二例のデータ構成を示す図である。
代表画像の生成方法3は、図55に示す類似症例データ4000の器官内領域4920に登録された情報を用いて、ユーザが選択したサムネイル画像の各領域の代表画像を取得する方法である。要約画像生成部112は、ステップS5301で取得した類似症例IDに対応する類似症例データ4000を参照し、器官内領域4920に領域別に登録されたスライスIDの範囲の中から1つのスライスIDを選択することで、各領域の代表画像718のスライスIDを取得する。図55の例では、器官内領域4920は、上葉のスライスIDの範囲として「CT149391000−CT149391020」が登録され、中葉のスライスIDの範囲として「CT149391021−CT149391031」が登録され、下葉のスライスIDの範囲として「CT149391032−CT149391055」が登録されている。そこで、要約画像生成部112は、器官内領域4920を構成する各領域において中央位置のスライスIDを取得し、そのスライスIDのサムネイル画像を医用情報管理システム200から取得すればよい。
表示制御部104は、S5306で生成された代表画像718を症例表示領域710に表示し、処理を終了する。表示方法としては、例えば図52に示すように選択されたサムネイル画像の下部に代表画像718を一覧表示する方法が採用されればよい。
次に、図11に示す分布リスト表示領域750に表示された病変分布が選択されたときの処理について説明する。図43は、分布リスト表示領域750に表示された病変分布が選択されたときの処理を示すフローチャートである。
S1502では、表示制御部104は、類似症例iのサムネイル画像を第2拡大率kiで拡大し、サムネイル画像の関心領域の中心が表示領域の中心に位置するように症例表示領域710にサムネイル画像を表示する。
なお、胸膜領域情報4930は、類似症例データ4000の作成時に関心領域情報と共にユーザにより入力されてもよい。或いは、胸膜領域情報4930は、画像処理装置により、スライス画像から肺の領域を自動的に抽出させ、胸膜位置を判定させることで自動的に作成されてもよい。
101 ディスプレイ
101a ディスプレイ
101b ディスプレイ
102 操作部
103 入力制御部
104 表示制御部
105 ROI管理部
106 表示ボックス管理部
108 病名リスト管理部
109 分布リスト管理部
110 通信制御部
112 要約画像生成部
113 画像特徴抽出部
206 通信制御部
300 症例検索システム
301 類似症例データ蓄積部
302 画像特徴抽出部
303 類似症例検索部
304 通信制御部
400 ネットワーク
K1 基本画面
K2 基本画面
710 症例表示領域
715 スクロールバー
716 サムネイル画像
717 連続フレーム画像
718 代表画像
720 レイアウト領域
730 病名リスト表示領域
2000 医用画像データベース
4000 類似症例データ
4100 類似症例ID
4300 関心領域情報
4400 画像特徴データ
4500 サムネイル画像データ
4600 病変分布情報
4700 確定診断(大分類病名)
4800 確定診断(詳細分類病名)
4900 病変属性
4910 要約画像
Claims (11)
- 医用画像を登録する医用画像データベースを参照して医用画像を検索する症例検索システムに接続し、ディスプレイを有する情報端末の制御方法であって、
前記情報端末のコンピュータに対して、
読影対象の医用画像である対象医用画像と所定の類似度を有する複数の類似医用画像に対応する複数の画像を含む複数のデータを前記症例検索システムから受信させ、
前記複数の類似医用画像の各々は、断層撮影法により撮影され、かつ第1の方向に沿って並べられた画像群の内の1つの医用画像であり、
前記複数のデータの各々に対応する対応情報には、びまん性病変または限局性病変の識別情報が設定されており、
前記びまん性病変の識別情報が設定されている対応情報には、さらに、前記第1の方向に沿って並べられた画像群の内の他の複数の医用画像が付加されており、
前記限局性病変の識別情報が設定されている対応情報には、さらに、前記第1の方向に沿って並べられた画像群の内から前記限局性病変を含む複数の医用画像が付加されており、
前記複数の類似医用画像をサムネイル表示する第1表示領域を含む表示画面を前記ディスプレイに表示させ、
前記第1表示領域にサムネイル表示される前記複数の類似医用画像の内から選択された1つの類似医用画像を検知させ、
前記選択された1つの類似医用画像がびまん性病変である場合、前記表示画面に含まれる第2表示領域に、前記選択された1つの類似医用画像が示す器官に関する前記他の複数の医用画像を表示させ、
前記選択された1つの類似医用画像が限局性病変である場合、前記第2表示領域に、前記限局性病変を含む複数の医用画像を前記第1の方向に沿って連続的に表示させる、
制御方法。 - 前記選択された1つの類似医用画像が限局性病変である場合、前記第2表示領域に、前記第1の方向に沿って並べられた画像群の内の前記限局性病変の一端から他端までを含む複数の医用画像を前記第1の方向に沿って連続的に表示させる、
請求項1に記載の制御方法。 - 前記選択された1つの類似医用画像が限局性病変である場合、前記第2表示領域に、前記第1の方向に沿って並べられた画像群の内の前記選択された1つの類似医用画像を含む前後所定数の医用画像を前記第1の方向に沿って連続的に表示させる、
請求項1に記載の制御方法。 - 前記類似医用画像は、肺の医用画像であり、
前記限局性病変の識別情報が設定されている対応情報には、さらに、前記限局性病変が上葉、中葉、又は下葉の内いずれの肺野に存在するかを示す情報が付加されており、
前記選択された1つの類似医用画像を含む前後所定数は、前記上葉、前記中葉、又は前記下葉毎にそれぞれ設定されている、
請求項3に記載の制御方法。 - 前記類似医用画像は、肺の医用画像であり、
前記びまん性病変の識別情報が設定されている対応情報には、さらに、上葉、中葉、及び下葉のそれぞれの代表的な医用画像を示す情報が付加されており、
前記選択された1つの類似医用画像がびまん性病変である場合、前記第2表示領域に、前記上葉、前記中葉、及び下葉の代表的な医用画像を表示させる、
請求項1から4のいずれか1つに記載の制御方法。 - 前記制御方法は、
前記情報端末のコンピュータに対して、
前記読影対象の医用画像の中の関心領域を示す指定情報を検知させ、
前記関心領域の特徴量を前記症例検索システムに送信させ、
前記関心領域の特徴量と前記所定の類似度を有する類似医用画像を前記症例検索システムから受信させる、
請求項1から5のいずれか1つに記載の制御方法。 - 前記制御方法は、
前記情報端末のコンピュータに対して、
前記対象医用画像の中の関心領域を示す指定情報を検知させ、
前記対象医用画像及び前記指定情報を前記症例検索システムに送信させ、
前記対象医用画像及び前記指定情報から得られる前記関心領域の特徴量と前記所定の類似度を有する類似医用画像を前記症例検索システムから受信させる、
請求項1から5のいずれか1つに記載の制御方法。 - 前記対象医用画像は、肺の医用画像であり、
前記類似医用画像の中の病変部を示す対応関心領域を有し、
前記表示画面は、
前記対応関心領域の大きさが肺の領域に対して広範囲であることを示す所定の第1範囲に属する類似医用画像を選択させる第1分布情報、前記対応関心領域の大きさが肺の領域の一部であることを示す前記第1範囲の下限値以下の上限値を有する所定の第2範囲に属する類似医用画像を選択させる第2分布情報、及び、前記対応関心領域が胸膜を含む類似医用画像を選択させる第3分布情報を含み、
前記第1分布情報から前記第3分布情報の中のいずれか一の選択が検知された場合、前記選択された一の分布情報に対応する類似医用画像を選択して前記第1表示領域に表示させる、
請求項1から7のいずれか1つに記載の制御方法。 - 前記第1表示領域は、前記受信した複数の類似医用画像をそれぞれ表示するための複数の個別領域を含み、
前記第1分布情報の選択が検知された場合、前記第1分布情報に対応する類似医用画像を、前記個別領域に初期表示サイズにてそれぞれ表示させ、
前記第2分布情報の選択が検知された場合、前記第2分布情報に対応する類似医用画像の中の前記対応関心領域を中心として、前記第2分布情報に対応する類似医用画像を、前記個別領域にそれぞれ拡大表示させ、
前記第3分布情報の選択が検知された場合、前記第3分布情報に対応する類似医用画像の中の前記対応関心領域を中心として、前記胸膜を含んだ状態で、前記第3分布情報に対応する類似医用画像を、前記個別領域にそれぞれ拡大表示させる、
請求項8に記載の制御方法。 - 前記第1分布情報は、両側性、多発性、びまん性又は血行性のカテゴリーに属する分布を示す情報であり、
前記第2分布情報は、区域性又は気道性のカテゴリーに属する分布を示す情報であり、
前記第3分布情報は、胸膜下のカテゴリーに属する分布を示す情報である、
請求項8又は9に記載の制御方法。 - 医用画像を登録する医用画像データベースを参照して医用画像を検索する症例検索システムに接続し、ディスプレイを有する情報端末において実行されるプログラムであって、
前記情報端末のコンピュータに対して、
読影対象の医用画像である対象医用画像と所定の類似度を有する複数の類似医用画像に対応する複数の画像を含む複数のデータを前記症例検索システムから受信させ、
前記複数の類似医用画像の各々は、断層撮影法により撮影され、かつ第1の方向に沿って並べられた画像群の内の1つの医用画像であり、
前記複数のデータの各々に対応する対応情報には、びまん性病変または限局性病変の識別情報が設定されており、
前記びまん性病変の識別情報が設定されている対応情報には、さらに、前記第1の方向に沿って並べられた画像群の内の他の複数の医用画像が付加されており、
前記限局性病変の識別情報が設定されている対応情報には、さらに、前記第1の方向に沿って並べられた画像群の内から前記限局性病変を含む複数の医用画像が付加されており、
前記複数の類似医用画像をサムネイル表示する第1表示領域を含む表示画面を前記ディスプレイに表示させ、
前記第1表示領域にサムネイル表示される前記複数の類似医用画像の内から選択された1つの類似医用画像を検知させ、
前記選択された1つの類似医用画像がびまん性病変である場合、前記表示画面に含まれる第2表示領域に、前記選択された1つの類似医用画像が示す器官に関する前記他の複数の医用画像を表示させ、
前記選択された1つの類似医用画像が限局性病変である場合、前記第2表示領域に、前記限局性病変を含む複数の医用画像を前記第1の方向に沿って連続的に表示させる、
プログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020178069A JP6960612B2 (ja) | 2015-09-30 | 2020-10-23 | 制御方法及びプログラム |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015193682 | 2015-09-30 | ||
JP2015193682 | 2015-09-30 |
Related Child Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020077547A Division JP7065436B2 (ja) | 2015-09-30 | 2020-04-24 | 制御方法及びプログラム |
JP2020178069A Division JP6960612B2 (ja) | 2015-09-30 | 2020-10-23 | 制御方法及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2017064389A JP2017064389A (ja) | 2017-04-06 |
JP6793332B2 true JP6793332B2 (ja) | 2020-12-02 |
Family
ID=57348431
Family Applications (3)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016170880A Active JP6793332B2 (ja) | 2015-09-30 | 2016-09-01 | 制御方法及びプログラム |
JP2020077547A Active JP7065436B2 (ja) | 2015-09-30 | 2020-04-24 | 制御方法及びプログラム |
JP2020178069A Active JP6960612B2 (ja) | 2015-09-30 | 2020-10-23 | 制御方法及びプログラム |
Family Applications After (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020077547A Active JP7065436B2 (ja) | 2015-09-30 | 2020-04-24 | 制御方法及びプログラム |
JP2020178069A Active JP6960612B2 (ja) | 2015-09-30 | 2020-10-23 | 制御方法及びプログラム |
Country Status (4)
Country | Link |
---|---|
US (2) | US10726295B2 (ja) |
EP (1) | EP3151143A1 (ja) |
JP (3) | JP6793332B2 (ja) |
CN (1) | CN106557536B (ja) |
Families Citing this family (19)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2016046642A (ja) * | 2014-08-21 | 2016-04-04 | キヤノン株式会社 | 情報処理システム、情報処理方法及びプログラム |
CN106560827B (zh) * | 2015-09-30 | 2021-11-26 | 松下知识产权经营株式会社 | 控制方法 |
KR20170064297A (ko) * | 2015-12-01 | 2017-06-09 | 삼성전자주식회사 | 의료 영상 장치 및 그 제어 방법 |
JP6885896B2 (ja) * | 2017-04-10 | 2021-06-16 | 富士フイルム株式会社 | 自動レイアウト装置および自動レイアウト方法並びに自動レイアウトプログラム |
CN109002336B (zh) * | 2017-06-06 | 2021-10-22 | 许继电气股份有限公司 | 一种充电桩远程监控导航视窗的生成方法和装置 |
WO2019103912A2 (en) * | 2017-11-22 | 2019-05-31 | Arterys Inc. | Content based image retrieval for lesion analysis |
JP6956853B2 (ja) * | 2018-03-30 | 2021-11-02 | オリンパス株式会社 | 診断支援装置、診断支援プログラム、及び、診断支援方法 |
US20220044395A1 (en) * | 2018-09-16 | 2022-02-10 | Integral Systems Pty Ltd | System, method and interface for communication and viewing of medical imaging |
JP6957771B2 (ja) * | 2018-11-28 | 2021-11-02 | オリンパス株式会社 | 内視鏡システム、及び、内視鏡用画像処理方法、並びに、内視鏡用画像処理プログラム |
KR102273923B1 (ko) * | 2018-12-18 | 2021-07-06 | (주)제노레이 | 의료 영상 데이터 및 치료 데이터 관리 장치 및 방법 |
JP7233961B2 (ja) * | 2019-02-25 | 2023-03-07 | シャープ株式会社 | 画像処理装置、画像形成装置、画像処理方法及び画像処理プログラム |
JP7172796B2 (ja) * | 2019-03-28 | 2022-11-16 | コニカミノルタ株式会社 | 表示システム、表示制御装置及び表示制御方法 |
US11322243B2 (en) * | 2019-10-18 | 2022-05-03 | Neosoft, Llc | Method and system for identifying and displaying medical images |
US11798523B2 (en) * | 2020-01-31 | 2023-10-24 | Soundtrap Ab | Systems and methods for generating audio content in a digital audio workstation |
JP7533050B2 (ja) | 2020-09-11 | 2024-08-14 | 株式会社ニデック | 眼底画像観察プログラム |
JP7092244B1 (ja) | 2021-08-30 | 2022-06-28 | コニカミノルタ株式会社 | 医療情報管理装置及び医療情報管理プログラム |
CN113901241B (zh) * | 2021-11-22 | 2024-08-06 | 北京达佳互联信息技术有限公司 | 页面展示方法、装置、电子设备及存储介质 |
CN114066875A (zh) * | 2021-11-25 | 2022-02-18 | 数坤(北京)网络科技股份有限公司 | 切片图像处理方法、装置、存储介质及终端设备 |
US11775153B2 (en) * | 2022-02-17 | 2023-10-03 | Fujifilm Medical Systems U.S.A., Inc. | Assessing measurement errors in software calculations |
Family Cites Families (27)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001155019A (ja) * | 1999-11-25 | 2001-06-08 | Olympus Optical Co Ltd | 類似画像検索装置 |
WO2002025588A2 (en) * | 2000-09-21 | 2002-03-28 | Md Online Inc. | Medical image processing systems |
US7597663B2 (en) * | 2000-11-24 | 2009-10-06 | U-Systems, Inc. | Adjunctive ultrasound processing and display for breast cancer screening |
US7155043B2 (en) * | 2001-11-21 | 2006-12-26 | Confirma, Incorporated | User interface having analysis status indicators |
JP4182794B2 (ja) * | 2003-04-02 | 2008-11-19 | コニカミノルタエムジー株式会社 | 医用画像表示方法及び医用画像表示システム |
JP4912015B2 (ja) * | 2006-04-05 | 2012-04-04 | 富士フイルム株式会社 | 類似画像検索装置および方法並びにプログラム |
JP2008253292A (ja) * | 2007-03-30 | 2008-10-23 | Fujifilm Corp | 症例画像検索装置及びシステム |
JP2009045121A (ja) * | 2007-08-14 | 2009-03-05 | Fujifilm Corp | 医用画像処理システム、医用画像処理方法、及びプログラム |
JP2009078050A (ja) * | 2007-09-27 | 2009-04-16 | Fujifilm Corp | 医用レポート作成システム及び医用レポート作成方法 |
US8520978B2 (en) * | 2007-10-31 | 2013-08-27 | Mckesson Technologies Inc. | Methods, computer program products, apparatuses, and systems for facilitating viewing and manipulation of an image on a client device |
JP2009232970A (ja) * | 2008-03-26 | 2009-10-15 | Konica Minolta Medical & Graphic Inc | 医用画像管理装置、印刷画像順設定方法、及びプログラム |
CA2721510A1 (en) * | 2008-04-18 | 2009-10-22 | Nanobio Corporation | Methods for treating herpes virus infections |
EP2277049A4 (en) * | 2008-05-09 | 2012-05-30 | Univ Duke | AUTOANTIBODIES IN THE DETECTION AND TREATMENT OF CANCER |
US20100063842A1 (en) * | 2008-09-08 | 2010-03-11 | General Electric Company | System and methods for indicating an image location in an image stack |
JP2010082001A (ja) * | 2008-09-29 | 2010-04-15 | Toshiba Corp | 画像表示装置 |
JP5395393B2 (ja) * | 2008-10-03 | 2014-01-22 | 株式会社日立メディコ | 画像診断装置 |
JP5374169B2 (ja) * | 2009-01-21 | 2013-12-25 | オリンパスメディカルシステムズ株式会社 | 画像表示装置 |
JP5383431B2 (ja) * | 2009-10-27 | 2014-01-08 | キヤノン株式会社 | 情報処理装置、情報処理方法及びプログラム |
JP4931027B2 (ja) * | 2010-03-29 | 2012-05-16 | 富士フイルム株式会社 | 医用画像診断支援装置および方法、並びにプログラム |
SG185128A1 (en) * | 2010-05-06 | 2012-12-28 | Sequenta Inc | Monitoring health and disease status using clonotype profiles |
JP5700964B2 (ja) * | 2010-07-08 | 2015-04-15 | 富士フイルム株式会社 | 医用画像処理装置、方法およびプログラム |
WO2012132840A1 (ja) * | 2011-03-30 | 2012-10-04 | オリンパスメディカルシステムズ株式会社 | 画像管理装置、方法、及びプログラム、並びにカプセル型内視鏡システム |
JP2012230528A (ja) * | 2011-04-26 | 2012-11-22 | Canon Inc | 画像処理装置および画像処理装置の制御方法 |
US20140296174A1 (en) * | 2011-10-11 | 2014-10-02 | Tufts University | Silk-based multifunctional biomedical platform |
WO2013096766A2 (en) * | 2011-12-21 | 2013-06-27 | Shachaf Catherine M | System for imaging lesions aligning tissue surfaces |
JP5789211B2 (ja) * | 2012-03-23 | 2015-10-07 | 富士フイルム株式会社 | 類似画像検索装置、方法及びプログラム |
WO2015015698A1 (ja) * | 2013-08-01 | 2015-02-05 | パナソニック株式会社 | 病変判定装置、類似症例検索装置、病変判定方法、類似症例検索方法、およびプログラム |
-
2016
- 2016-08-30 CN CN201610772772.6A patent/CN106557536B/zh active Active
- 2016-09-01 JP JP2016170880A patent/JP6793332B2/ja active Active
- 2016-09-21 EP EP16189902.6A patent/EP3151143A1/en not_active Ceased
- 2016-09-21 US US15/272,277 patent/US10726295B2/en active Active
-
2020
- 2020-04-24 JP JP2020077547A patent/JP7065436B2/ja active Active
- 2020-06-22 US US16/907,481 patent/US20200320336A1/en active Pending
- 2020-10-23 JP JP2020178069A patent/JP6960612B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
JP2017064389A (ja) | 2017-04-06 |
EP3151143A1 (en) | 2017-04-05 |
JP7065436B2 (ja) | 2022-05-12 |
JP2020116429A (ja) | 2020-08-06 |
US20170091582A1 (en) | 2017-03-30 |
CN106557536B (zh) | 2021-12-21 |
JP6960612B2 (ja) | 2021-11-05 |
JP2021010777A (ja) | 2021-02-04 |
US10726295B2 (en) | 2020-07-28 |
US20200320336A1 (en) | 2020-10-08 |
CN106557536A (zh) | 2017-04-05 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6960612B2 (ja) | 制御方法及びプログラム | |
JP6874193B2 (ja) | 情報端末、制御方法及びプログラム | |
JP6907381B2 (ja) | 制御方法及びプログラム | |
JP6799115B2 (ja) | 情報端末の制御方法及びプログラム | |
US11179036B2 (en) | Control method of information terminal and computer-readable recording medium | |
US11185228B2 (en) | Control method of information terminal and computer-readable recording medium | |
JP6722857B2 (ja) | 制御方法及びプログラム | |
JP6697743B2 (ja) | 情報端末の制御方法及びプログラム | |
JP6675099B2 (ja) | 制御方法及びプログラム | |
JP6664113B2 (ja) | 情報端末の制御方法及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190408 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20200110 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200225 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200424 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200923 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20201023 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6793332 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |