JPWO2021107142A5 - - Google Patents
Download PDFInfo
- Publication number
- JPWO2021107142A5 JPWO2021107142A5 JP2021561575A JP2021561575A JPWO2021107142A5 JP WO2021107142 A5 JPWO2021107142 A5 JP WO2021107142A5 JP 2021561575 A JP2021561575 A JP 2021561575A JP 2021561575 A JP2021561575 A JP 2021561575A JP WO2021107142 A5 JPWO2021107142 A5 JP WO2021107142A5
- Authority
- JP
- Japan
- Prior art keywords
- content
- sentence
- text
- processor
- document creation
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 claims description 16
- 238000012986 modification Methods 0.000 claims 1
- 230000004048 modification Effects 0.000 claims 1
- 239000000470 constituent Substances 0.000 description 5
- 206010058467 Lung neoplasm malignant Diseases 0.000 description 4
- 238000013528 artificial neural network Methods 0.000 description 4
- 201000005202 lung cancer Diseases 0.000 description 4
- 208000020816 lung neoplasm Diseases 0.000 description 4
- 230000000306 recurrent effect Effects 0.000 description 4
- 230000001788 irregular Effects 0.000 description 3
- 210000004072 lung Anatomy 0.000 description 3
- 210000004224 pleura Anatomy 0.000 description 3
- 230000002685 pulmonary effect Effects 0.000 description 3
- 210000000779 thoracic wall Anatomy 0.000 description 3
- 230000002159 abnormal effect Effects 0.000 description 2
- 230000009545 invasion Effects 0.000 description 2
- 206010028980 Neoplasm Diseases 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 238000010191 image analysis Methods 0.000 description 1
- 238000007373 indentation Methods 0.000 description 1
- 230000008595 infiltration Effects 0.000 description 1
- 238000001764 infiltration Methods 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
Description
一方、上述したCT装置およびMRI装置の高性能化に伴い、読影を行う医用画像の数も増大している。しかしながら、読影医の数は医用画像の数に追いついていないことから、読影医の読影業務の負担を軽減することが望まれている。このため、読影レポート等の医療文書の作成を支援するための各種手法が提案されている。例えば、特開2019-153250号公報には、読影医が入力したキーワードおよび医用画像の解析結果に含まれる、関心構造物の性状を表す情報(以下、性状情報とする)に基づいて、読影レポートに記載するための文章を生成する各種手法が提案されている(特開2019-153250号公報参照)。特開2019-153250号公報に記載された手法においては、入力された性状情報を表す文字から文章を生成するように学習が行われたリカレントニューラルネットワーク等の機械学習がなされた学習モデルを用いて、医療用の文章(以下、医療文章とする)が作成される。特開2019-153250号公報に記載された手法のように、医療文章を自動で生成することにより、読影レポート等の医療文書を作成する際の読影医の負担を軽減することができる。
例えば、特開2002-117026号公報には、テキスト文書が1つまたは複数のテキスト構成要素を含み、1つまたは複数のテキスト構成要素から誤ったテキスト構成要素を識別し、誤ったテキスト構成要素に対する所望の代替物の部分入力に基づいて代替物リストを表示し、テキスト文書内で誤ったテキスト構成要素を選択した代替物で置き換える手法が提案されている。特開2002-117026号公報に記載された手法を用いることにより、ユーザに負担をかけることなく、文章における誤った箇所を修正することができる。
しかしながら、特開2002-117026号公報に記載された手法においては、ユーザは代替物リストから、修正する代替物を選択する作業を行う必要がある。また、代替物リストに所望とする内容の代替物が存在しない場合には、特開2002-117026号公報に記載された手法は、文章を効率よく修正することができない。
なお、本開示による文書作成支援方法をコンピュータに実行させるためのプログラムとして提供してもよい。
文章表示領域72には、文章生成部23が生成した医療文章75が表示されている。医療文章75は、「左肺胸膜下に、不整形な最大横径4.2cmの腫瘤が認められます。胸壁に接していて、胸膜陥入を認めますが、浸潤は認めません。原発性肺癌と考えられます。」である。なお、医療文章75において、コンテンツ特定部24が特定したコンテンツは、「左肺胸膜下」、「不整形」、「4.2cm」、「腫瘤」、「胸壁に接する」、「胸膜陥入有り」、「浸潤無し」および「原発性肺癌」である。
複数の修正候補は、例えば、「https://geekyisawesome.blogspot.com/2016/10/using-beam-serach-to-genrate-most.html」に記載された、ビームサーチの手法を、第4の学習モデル27Aを構成するリカレントニューラルネットワーク45に適用することにより、生成することができる。ビームサーチの手法は、ある単語の次に出現する単語について、単語の出現確率を考慮して、ある単語の次に出現する単語を探索する手法である。他の実施形態においては、文章修正部27は、ビームサーチの手法をリカレントニューラルネットワーク45に適用して、単語の出現確率が高い複数の医療文章の修正候補を生成する。
また、本実施形態においては、文章修正部27による医療文章の修正に応じて、修正医療文章79に含まれるコンテンツは、修正前の医療文章75に含まれるコンテンツと異なるものとなる。例えば、医療文章75が、「左肺胸膜下に、不整形な最大横径4.2cmの腫瘤が認められます。胸壁に接していて、胸膜陥入を認めますが、浸潤は認めません。原発性肺癌と考えられます。」である場合、コンテンツ特定部24が特定したコンテンツは、「左肺胸膜下」、「不整形」、「4.2cm」、「腫瘤」、「胸壁に接する」、「胸膜陥入有り」、「浸潤無し」および「原発性肺癌」である。
図14は、第2の実施形態における複数の修正候補を表示した医療文章の表示画面を示す図である。なお、図14は図7と同様に、「す」および「ぴ」の文字が入力された状態を示している。図14に示すように読影医が「す」および「ぴ」の文字を入力デバイス16を用いて入力すると、修正コンテンツ特定部26が、LUT1を参照して修正コンテンツを「スピキュラ」に特定し、文章修正部27が、修正コンテンツに基づいて複数の修正候補を生成する。そして、表示制御部25が、文章表示領域72の下方に複数の修正候補表示領域80を表示する。そして、例えば、修正候補表示領域80には、「左肺胸膜下に、不整形でスピキュラを有する最大横径4.2cmの腫瘤が認められます。」、「左肺胸膜下に、不整形でスピキュラを有する最大横径4.2cmの腫瘤が認められる。」および「左肺胸膜下に、スピキュラがあって不整形な最大横径4.2cmの腫瘤が認められる。」の3つの修正候補が表示される。なお、修正候補の数は3に限定されるものではない。
1 医療情報システム
2 モダリティ
3 読影ワークステーション
4 診療科ワークステーション
5 画像サーバ
6 画像データベース
7 読影レポートサーバ
8 読影レポートデータベース
10 ネットワーク
11 CPU
12 メモリ
13 ストレージ
14 通信I/F
15 ディスプレイ
16 入力デバイス
20 文書作成支援装置
21 画像取得部
22 画像解析部
22A 第1の学習モデル
23 文章生成部
23A 第2の学習モデル
24 コンテンツ特定部
24A 第3の学習モデル
25 表示制御部
26 修正コンテンツ特定部
27 文章修正部
27A 第4の学習モデル
30 教師データ
31 異常陰影
32 医用画像
33 性状情報
40,45 リカレントニューラルネットワーク
41,46 エンコーダ
42,47 デコーダ
50 教師データ
51 医療文章
52 性状を表す用語
60,65 教師データ
61,66 医療文章
62,67 修正コンテンツ
63,68 修正医療文章
70 表示画面
71 画像表示領域
72 文章表示領域
73 異常陰影候補
74 矩形領域
75,75A 医療文章
76 性状情報
77 ポップアップ
78A 修正ボタン
78B 確定ボタン
79,79A 修正医療文章
80 修正候補表示領域
SL1 スライス画像
2 モダリティ
3 読影ワークステーション
4 診療科ワークステーション
5 画像サーバ
6 画像データベース
7 読影レポートサーバ
8 読影レポートデータベース
10 ネットワーク
11 CPU
12 メモリ
13 ストレージ
14 通信I/F
15 ディスプレイ
16 入力デバイス
20 文書作成支援装置
21 画像取得部
22 画像解析部
22A 第1の学習モデル
23 文章生成部
23A 第2の学習モデル
24 コンテンツ特定部
24A 第3の学習モデル
25 表示制御部
26 修正コンテンツ特定部
27 文章修正部
27A 第4の学習モデル
30 教師データ
31 異常陰影
32 医用画像
33 性状情報
40,45 リカレントニューラルネットワーク
41,46 エンコーダ
42,47 デコーダ
50 教師データ
51 医療文章
52 性状を表す用語
60,65 教師データ
61,66 医療文章
62,67 修正コンテンツ
63,68 修正医療文章
70 表示画面
71 画像表示領域
72 文章表示領域
73 異常陰影候補
74 矩形領域
75,75A 医療文章
76 性状情報
77 ポップアップ
78A 修正ボタン
78B 確定ボタン
79,79A 修正医療文章
80 修正候補表示領域
SL1 スライス画像
Claims (11)
- 少なくとも1つのプロセッサを備え、
前記プロセッサは、
少なくとも1つのコンテンツを含む文章をディスプレイに表示し、
前記文章に対して追加するまたは該文章から削除する修正コンテンツについての少なくとも一部の文字の入力または指定に基づいて、前記修正コンテンツを特定し、
前記修正コンテンツに基づいて前記文章を修正するように構成される文書作成支援装置。 - 前記プロセッサは、さらに画像を解析することにより、該画像に含まれる関心構造物の性状を表す性状情報を前記コンテンツとして導出するように構成される請求項1に記載の文書作成支援装置。
- 前記プロセッサは、前記性状情報に基づいて、前記画像に関する文章を生成するように構成される請求項2に記載の文書作成支援装置。
- 前記プロセッサは、前記性状情報に基づいて、前記修正コンテンツを特定するように構成される請求項2または3に記載の文書作成支援装置。
- 前記プロセッサは、前記文章に含まれる前記コンテンツを特定し、
前記修正コンテンツに基づいて、前記特定されたコンテンツを変更するように構成される請求項1から4のいずれか1項に記載の文書作成支援装置。 - 前記プロセッサは、修正前の前記文章の文体に応じて前記文章を修正するように構成される請求項1から5のいずれか1項に記載の文書作成支援装置。
- 前記プロセッサは、複数の修正候補を生成し、
該複数の修正候補のうち、修正前の前記文章の文体に応じた修正候補により、前記文章を修正するように構成される請求項1から5のいずれか1項に記載の文書作成支援装置。 - 前記プロセッサは、複数の修正候補を生成し、
該複数の修正候補を前記ディスプレイに表示し、
該表示された複数の修正候補から前記文章に使用する修正候補の選択を受け付け、
該選択された修正候補により、前記文章を修正するように構成される請求項1から5のいずれか1項に記載の文書作成支援装置。 - 前記プロセッサは、前記修正コンテンツと修正前の前記文章に含まれるコンテンツとが整合するように、前記文章を修正するように構成される請求項1から8のいずれか1項に記載の文書作成支援装置。
- 少なくとも1つのコンテンツを含む文章をディスプレイに表示し、
前記文章に対して追加するまたは該文章から削除する修正コンテンツについての少なくとも一部の文字の入力または指定に基づいて、前記修正コンテンツを特定し、
前記修正コンテンツに基づいて前記文章を修正する文書作成支援方法。 - 少なくとも1つのコンテンツを含む文章をディスプレイに表示する手順と、
前記文章に対して追加するまたは該文章から削除する修正コンテンツについての少なくとも一部の文字の入力または指定に基づいて、前記修正コンテンツを特定する手順と、
前記修正コンテンツに基づいて前記文章を修正する手順とをコンピュータに実行させる文書作成支援プログラム。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019216046 | 2019-11-29 | ||
PCT/JP2020/044367 WO2021107142A1 (ja) | 2019-11-29 | 2020-11-27 | 文書作成支援装置、方法およびプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2021107142A1 JPWO2021107142A1 (ja) | 2021-06-03 |
JPWO2021107142A5 true JPWO2021107142A5 (ja) | 2022-07-29 |
Family
ID=76129680
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021561575A Pending JPWO2021107142A1 (ja) | 2019-11-29 | 2020-11-27 |
Country Status (3)
Country | Link |
---|---|
US (1) | US20220277134A1 (ja) |
JP (1) | JPWO2021107142A1 (ja) |
WO (1) | WO2021107142A1 (ja) |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7149970B1 (en) * | 2000-06-23 | 2006-12-12 | Microsoft Corporation | Method and system for filtering and selecting from a candidate list generated by a stochastic input method |
JP2005135444A (ja) * | 2005-02-14 | 2005-05-26 | Just Syst Corp | 校正支援機能を有する文字列変換装置および方法 |
US10803581B2 (en) * | 2017-11-06 | 2020-10-13 | Beijing Keya Medical Technology Co., Ltd. | System and method for generating and editing diagnosis reports based on medical images |
EP3506279A1 (en) * | 2018-01-02 | 2019-07-03 | Koninklijke Philips N.V. | Automatic diagnosis report preparation |
JP2019153250A (ja) * | 2018-03-06 | 2019-09-12 | 富士フイルム株式会社 | 医療文書作成支援装置、方法およびプログラム |
US11429779B2 (en) * | 2019-07-01 | 2022-08-30 | Microsoft Technology Licensing, Llc | Method and system for intelligently suggesting paraphrases |
-
2020
- 2020-11-27 JP JP2021561575A patent/JPWO2021107142A1/ja active Pending
- 2020-11-27 WO PCT/JP2020/044367 patent/WO2021107142A1/ja active Application Filing
-
2022
- 2022-05-18 US US17/746,978 patent/US20220277134A1/en not_active Abandoned
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10628476B2 (en) | Information processing apparatus, information processing method, information processing system, and storage medium | |
CN108475538B (zh) | 用于将第三方应用集成在图像解读工作流中的结构化发现对象 | |
US10372802B2 (en) | Generating a report based on image data | |
US20180068074A1 (en) | Method, apparatus and system of generating electronic medical record information | |
JP2017533522A (ja) | テキスト認識に基づくテキストイメージリンキングを伴うピクチャアーカイビングシステム | |
DE102018008377A1 (de) | Interaktive Integration von Tutorials | |
US20190057501A1 (en) | Detecting and classifying medical images based on continuously-learning whole body landmarks detections | |
Alsharid et al. | Captioning ultrasound images automatically | |
US20080262874A1 (en) | Medical report generating system and a medical report generating method | |
JP2012141797A (ja) | 医用レポート作成支援装置 | |
JP2020518047A5 (ja) | ||
CN109960721A (zh) | 基于源内容的多重压缩构造内容 | |
US11837346B2 (en) | Document creation support apparatus, method, and program | |
EP3113016A1 (en) | Tracing dependencies between development artifacts in a development project | |
US20230335261A1 (en) | Combining natural language understanding and image segmentation to intelligently populate text reports | |
JPWO2021157705A5 (ja) | ||
US20220382967A1 (en) | Document creation support apparatus, document creation support method, and program | |
JP6525527B2 (ja) | 読影レポート作成支援装置、読影レポート作成支援方法及びプログラム | |
US20220375562A1 (en) | Document creation support apparatus, document creation support method, and program | |
JPWO2021107142A5 (ja) | ||
CN112883218A (zh) | 一种图文联合表征的搜索方法、系统、服务器和存储介质 | |
EP4202867A1 (en) | Method, device and system for automated processing of medical images and medical reports of a patient | |
CN110147791A (zh) | 文字识别方法、装置、设备及存储介质 | |
US20180039761A1 (en) | Method and system for automatically adding connectors during generation of a report | |
JP2016133821A (ja) | 情報処理装置、情報処理方法およびプログラム |