JP2024010649A - 大便イメージ分析システムおよび方法 - Google Patents

大便イメージ分析システムおよび方法 Download PDF

Info

Publication number
JP2024010649A
JP2024010649A JP2023079401A JP2023079401A JP2024010649A JP 2024010649 A JP2024010649 A JP 2024010649A JP 2023079401 A JP2023079401 A JP 2023079401A JP 2023079401 A JP2023079401 A JP 2023079401A JP 2024010649 A JP2024010649 A JP 2024010649A
Authority
JP
Japan
Prior art keywords
stool
image
image analysis
user
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2023079401A
Other languages
English (en)
Inventor
ウン・ス・キム
Eun Soo Kim
スン・ムン・ジョン
Sung Moon Jeong
ドン・ウォン・ウ
Dong Won Woo
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Industry Academic Cooperation Foundation of KNU
Original Assignee
Industry Academic Cooperation Foundation of KNU
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Industry Academic Cooperation Foundation of KNU filed Critical Industry Academic Cooperation Foundation of KNU
Publication of JP2024010649A publication Critical patent/JP2024010649A/ja
Priority to JP2025172196A priority Critical patent/JP2026010074A/ja
Pending legal-status Critical Current

Links

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/42Detecting, measuring or recording for evaluating the gastrointestinal, the endocrine or the exocrine systems
    • A61B5/4222Evaluating particular parts, e.g. particular organs
    • A61B5/4255Intestines, colon or appendix
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0012Biomedical image inspection
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B10/00Instruments for taking body samples for diagnostic purposes; Other methods or instruments for diagnosis, e.g. for vaccination diagnosis, sex determination or ovulation-period determination; Throat striking implements
    • A61B10/0038Devices for taking faeces samples; Faecal examination devices
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0033Features or image-related aspects of imaging apparatus, e.g. for MRI, optical tomography or impedance tomography apparatus; Arrangements of imaging apparatus in a room
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/74Details of notification to user or communication with user or patient; User input means
    • A61B5/742Details of notification to user or communication with user or patient; User input means using visual displays
    • A61B5/7445Display arrangements, e.g. multiple display units
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/11Region-based segmentation
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/60Analysis of geometric attributes
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10068Endoscopic image
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20081Training; Learning
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20084Artificial neural networks [ANN]
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20112Image segmentation details
    • G06T2207/20132Image cropping
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30004Biomedical image processing
    • G06T2207/30028Colon; Small intestine

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Medical Informatics (AREA)
  • General Health & Medical Sciences (AREA)
  • Surgery (AREA)
  • Public Health (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Pathology (AREA)
  • Molecular Biology (AREA)
  • Biomedical Technology (AREA)
  • Animal Behavior & Ethology (AREA)
  • Veterinary Medicine (AREA)
  • Biophysics (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Radiology & Medical Imaging (AREA)
  • Quality & Reliability (AREA)
  • Geometry (AREA)
  • Endocrinology (AREA)
  • Gastroenterology & Hepatology (AREA)
  • Physiology (AREA)
  • Image Analysis (AREA)
  • Investigating Or Analysing Biological Materials (AREA)
  • Image Processing (AREA)

Abstract

【課題】本発明は、大便イメージ分析システムおよび方法に関し、より詳細には、既に学習済みのディープラーニングモデルを用いてユーザの大便イメージを分析することによって、ユーザの大腸状態を導出する大便イメージ分析システムおよび方法を提供する。【解決手段】本発明の一実施形態に係る大便イメージ分析システムは、ユーザの大便イメージを入力される入力部と、前記大便イメージを時間順に群集化してデータセットを構成するデータセット生成部と、前記データセットを分析して前記ユーザの大便状態情報または大腸状態情報を導出する分析部と、前記大便状態情報または大腸状態情報を出力する出力部と、を含んでもよい。本発明の一実施形態によると、大腸内視鏡を行うことなく、大便のカメラ映像から潰瘍性大腸炎の内視鏡活性度を予測することができる。【選択図】図1

Description

特許法第30条第2項適用申請有り KASID 20▲th▼ anniversary conferenceにおいて、Jung won Leeらによって、2022年5月14日に行われたプレゼンテーション「Development of an Artificial Intelligence Model using Stool Pictures for Predicting Endoscopic Mucosal Healing in Patients with Ulcerative Colitis: KASID Multicenter Study」において公開された内容に関する情報を提出致します。 提出物件の「上記プレゼンテーションの台本のコピー等」の1~2ページは、KASID 20▲th▼ anniversary conferenceに関する冊子の抜粋であり、3~4ページは、上記プレゼンテーションの台本のコピーです。
本発明は、大便イメージ分析システムおよび方法に関し、より詳細には、既に学習済みのディープラーニングモデルを用いてユーザの大便イメージを分析することによって、ユーザの大腸状態を導出する大便イメージ分析システムおよび方法に関する。
潰瘍性大腸炎は、大腸の粘膜または粘膜下層に限局する炎症を特徴とする原因不明の慢性炎症性腸疾患であり、直腸から連続的に大腸を侵犯し、病的な変化があちこちに散在しておらず、すべて連結されているという特徴を有する。
また、潰瘍性大腸炎は、慢性的に大腸に炎症を起こす疾患であり、持続的な薬物治療が必要である。薬物治療を通じて炎症が調節できない場合、入院や腸切除手術または大腸がんの発症リスクの増加などの問題が発生することもある。
大腸がんのような病気の発症を防ぐため、大腸の健康状態を定期的にモニターリングすることが好ましい。特に、大腸がんの発症リスクが大きい潰瘍性大腸炎患者の場合、大腸の状態を定期的にモニターリングすることは必須である。
一方、従来、大腸内視鏡を通じて粘膜の炎症活性度を測定するなどの方法によって患者の大腸状態をモニターリングしてきた。しかし、大腸内視鏡は、場合によっては睡眠麻酔が必要であり、比較的多くの時間と費用がかかり、穿孔や感染のような深刻な副作用が発生することもあり、被検査者に強い不快感を感じさせるため、必要性に比べて頻繁に行われ難いという問題点がある。
そこで、少ない費用と時間がかかり、かつ被検査者が感じる不快感を減らすことができる大腸状態モニターリング技術の開発が求められている実情である。
韓国登録特許10-2268304号
前述の問題を解決するために、本発明は、ユーザの大便イメージとディープラーニングモデルを用いて、ユーザの大腸状態を分析できる大便イメージ分析システムおよび方法を提供することを目的とする。
本発明の一実施形態として、大便イメージ分析システムが提供される。
本発明の一実施形態に係る大便イメージ分析システムは、ユーザの大便イメージを入力される入力部と、前記大便イメージを時間順に群集化してデータセットを構成するデータセット生成部と、前記データセットを分析して前記ユーザの大便状態情報または大腸状態情報を導出する分析部と、前記大便状態情報または大腸状態情報を出力する出力部と、を含んでもよい。
本発明の一実施形態に係る大便イメージ分析システムにおいて、前記データセットは、前記ユーザの大腸内視鏡検査の直後、7日間の大便イメージを含んでもよい。
本発明の一実施形態に係る大便イメージ分析システムは、前記大便イメージを、前記大便イメージに含まれた便器の特定の地点を基準にクロップ(crop)する前処理部をさらに含んでもよい。
本発明の一実施形態に係る大便イメージ分析システムにおいて、前記前処理部は、前記大便イメージから便器の特定の地点を抽出し、前記大便イメージの縁のいずれかが前記便器の特定の地点を含むように、前記大便イメージをクロップ(crop)することを特徴とする。
本発明の一実施形態に係る大便イメージ分析システムは、ディスプレイ部を含むユーザ端末と大便イメージを送受信する通信部をさらに含み、前記ディスプレイ部は、座便器の内部の特定の地点とマッチングさせるためのガイドラインを含んでもよい。
本発明の一実施形態に係る大便イメージ分析システムは、前記分析部は、前記大便イメージまたは前記データセットを入力データとし、大便状態情報または大腸状態情報を出力データとして既に学習済みのディープラーニングモデルを含んでもよい。
本発明の一実施形態に係る大便イメージ分析システムは、前記大腸状態情報が、前記ユーザの大腸状態の程度を示す不連続的な値である場合、前記既に学習済みのディープラーニングモデルは、分類問題に該当する損失関数を用いて学習を行うことを特徴とする。
本発明の一実施形態に係る大便イメージ分析システムは、前記大腸状態情報が特定の数値を示す連続的な値である場合、前記既に学習済みのディープラーニングモデルは、線形回帰問題に該当する損失関数を用いて学習を行うことを特徴とする。
本発明の一実施形態として、大便イメージ分析方法が提供される。
本発明の一実施形態に係る大便イメージ分析方法は、入力部が、ユーザの大便イメージを入力される入力ステップと、データセット構成部が、前記大便イメージを時間順に群集化してデータセットを構成するデータセット生成ステップと、分析部が、前記データセットを分析して前記ユーザの大便状態情報または大腸状態情報を導出する分析ステップと、出力部が前記大便状態情報または大腸状態情報を出力する出力ステップと、を含んでもよい。
本発明の一実施形態に係る大便イメージ分析方法において、前記データセットは、前記ユーザの大腸内視鏡検査の直後、7日間の大便イメージを含んでもよい。
一実施形態に係る大便イメージ分析方法は、前処理部が前記大便イメージを前記大便イメージに含まれた便器の特定の地点を基準にクロップ(crop)する前処理ステップをさらに含んでもよい。
本発明の一実施形態に係る大便イメージ分析方法において、前記前処理ステップは、前記前処理部が前記大便イメージから前記便器の特定の地点を抽出する基準抽出ステップと、前記前処理部が、前記大便イメージの縁のいずれかが前記便器の特定の地点を含むように、前記大便イメージをクロップ(crop)するクロッピングステップと、をさらに含んでもよい。
本発明の一実施形態に係る大便イメージ分析方法は、通信部が、ディスプレイ部を含むユーザ端末と大便イメージを送受信するイメージ送受信ステップと、前記ディスプレイ部が、座便器の内部の特定の地点とマッチングさせるためのガイドラインを表示するガイドライン表示ステップと、をさらに含んでもよい。
本発明の一実施形態に係る大便イメージ分析方法は、前記大便イメージまたは前記データセットを入力データとし、前記大便状態情報または大腸状態情報を出力データとしてディープラーニングモデルを学習させる学習ステップをさらに含んでもよい。
本発明の一実施形態に係る大便イメージ分析方法において、前記学習ステップは、前記大腸状態情報が、前記ユーザの大腸状態の程度を示す不連続的な値である場合、分類問題に該当する損失関数を用いて前記ディープラーニングモデルを学習させることを特徴とする。
本発明の一実施形態に係る大便イメージ分析方法において、前記学習ステップは、前記大腸状態情報が特定の数値を示す連続的な値である場合、線形回帰問題に該当する損失関数を用いて前記ディープラーニングモデルを学習させることを特徴とする。
本発明の一実施形態として、前述の方法を具現するためのプログラムが記録されたコンピュータで読み取り可能な記録媒体が提供される。
本発明の一実施形態によると、大腸内視鏡を行うことなく、大便のカメラ映像から潰瘍性大腸炎の内視鏡活性度を予測することができる。
また、本発明の一実施形態によると、病院に行かずに自宅でも大便イメージを撮影する簡単な方法でユーザの大腸状態をモニターリングすることができる。
また、本発明の一実施形態によると、挙動が不便であるか、病院へのアクセスが容易でない場所に居住するユーザも、自分の大腸の状態をモニターリングすることができるという利点がある。
本開示で得られる効果は、以上で言及した効果に制限されず、言及されていない他の効果は、以下の記載から本開示の属する技術分野における通常の知識を有する者に明確に理解できるだろう。
本発明の一実施形態に係る大便イメージ分析システムのブロック図である。 本発明の一実施形態に係る前処理部による前処理過程の一例である。 本発明の一実施形態に係る通信部を通じて表示されたガイドラインを含むユーザ端末のディスプレイを示す。 本発明の一実施形態に係るディープラーニングモデルの訓練用データの一例である。 分類問題に該当する損失関数を用いて学習を行うディープラーニングモデルの構造を示す。 線形回帰問題(Mean square error)に該当する損失関数を用いて学習を行うディープラーニングモデルの構造を示す。 分類問題に該当する損失関数を用いて学習済みのディープラーニングモデルを用いてユーザの大腸状態を評価する過程の一例示図である。 線形回帰問題に該当する損失関数を用いて学習済みのディープラーニングを用いてユーザの大腸状態を評価する過程の一例示図である。 本発明の一実施形態に係る大便イメージ分析方法のフローチャートである。
以下では、添付の図面を参照して、本発明の属する技術分野における通常の知識を有する者が容易に実施できるように本発明の実施形態を詳細に説明する。しかし、本発明は、様々な異なる形態で具現することができ、ここで説明する実施形態に限定されない。なお、図面で本発明を明確に説明するために、説明と関係のない部分は省略し、明細書全体を通して類似の部分には類似の参照番号を付けた。
本明細書で使用される用語について簡単に説明し、本発明について具体的に説明することにする。
本発明で使用される用語は、本発明における機能を考慮すると共にできる限り現在広く使用されている一般的な用語を選択しているが、これは、当分野に従事する技術者の意図または判例、新しい技術の出現などによって変わることもある。また、特定の場合は出願人が任意に選定した用語もあり、この場合、該当する発明の説明部分でその意味を詳細に記載する。したがって、本発明で使用される用語は、単なる用語の名称ではなく、その用語が有する意味と本発明の全般にわたる内容に基づいて定義されるべきである。
明細書全体において、ある部分がある構成要素を「含む」というとき、これは、特に反対の記載がない限り、他の構成要素を除外することではなく、他の構成要素をさらに含んでもよいことを意味する。また、本明細書に記載された「~部」、「モジュール」などの用語は、少なくとも1つの機能または動作を処理する単位を意味し、これは、ハードウェアまたはソフトウェアで具現するか、ハードウェアとソフトウェアとの結合で具現することもできる。また、明細書全体において、ある部分が他の部分と「連結」されているとするとき、これには、「直接に連結」されている場合だけでなく、「その中間に他の素子を挟んで」連結されている場合も含む。
以下、添付の図面を参考にして本発明を詳細に説明することにする。
図1は、本発明の一実施形態に係る大便イメージ分析システムのブロック図である。
図1を参照すると、本発明の一実施形態に係る大便イメージ分析システムは、入力部100、データセット生成部200、分析部300および出力部400を含んでもよい。
前記入力部100は、ユーザの大便イメージを入力されてもよい。このとき、前記大便イメージは、ユーザ端末を通じて得られたユーザの大便が含まれた便器イメージを意味する。
前記データセット生成部200は、大便イメージを時間順に群集化してデータセットを生成することができる。
実施形態によると、前記データセットは前記ユーザの大腸内視鏡検査の直後、7日間の大便イメージを1つのデータセットにグループ化したことを意味する。つまり、本発明の実施形態に係るデータセットは、7日間の大便の変化に関連する情報または内視鏡の回数に関する情報を含むことができる。
前記分析部300は、データセットを分析して前記ユーザの大便状態情報または大腸状態情報を導出することができる。
ここで、大便状態情報は、大便の色情報またはテクスチャ情報を含んでもよい。例えば、大便の色情報は黄色、茶色、赤色または黒赤色を含んでもよく、テクスチャ情報は下痢、定常、非常に硬い、硬い、若干硬い、普通、若干水っぽい、水っぽいまたは非常に水っぽいを含んでもよいが、これに限定されるものではない。
また、大腸状態情報は、大腸に関連する疾患および当該疾患の進行の程度を示すことができる。例えば、大腸がんの初期、大腸がん中期、大腸がん末期、潰瘍性大腸炎の軽症、潰瘍性大腸炎の中等症、潰瘍性大腸炎の重症または潰瘍性大腸炎の危篤などの情報を含んでもよいが、これに限定されるものではない。
前記出力部400は、大便状態情報または大腸状態情報を出力することができる。実施形態によると、前記出力部400は、大便状態情報または大腸状態情報をユーザ端末に含まれたディスプレイ部に出力することができる。
つまり、本発明の一実施形態に係る大便イメージ分析システムは、大腸内視鏡に関連する一切の医療行為(例えば、疾患の診断および分析、治療、検査、大腸内視鏡のための腸管洗浄など)に拡張または適用が可能である。
一方、本発明の一実施形態に係る大便イメージ分析システムは、前処理部500をさらに含んでもよい。以下、図2および図3を参照して、本発明の実施形態に係る前処理部500について説明する。
図2は、本発明の一実施形態に係る前処理部500による前処理過程の一例である。
図2を参照すると、本発明の実施形態に係る前処理部500は、大便イメージを前記大便イメージに含まれた便器の特定の地点を基準にクロップ(crop)することができる。
ここで、クロップ(crop)は写真編集技術の一つであって、写真を希望のサイズに合わせるようにサイズをトリミング(trimming)することを意味する。
実施形態によると、前記前処理部500は、前記大便イメージから便器の特定の地点を抽出し、前記大便イメージの縁のいずれかが前記便器の特定の地点を含むように、前記大便イメージをクロップ(crop)することを特徴とする。
ここで、大便器の特定の地点は、座便器の構成要素のうち、便座の内部楕円形または座便器の内部に存在する水の縁を意味するものであってもよい。
図2(a)は、大便イメージを座便器の便座の内部楕円形状を基準にクロップ(crop)処理したイメージであり、図2(b)は、大便イメージを座便器の内部に存在する水の縁を基準にクロップ(crop)処理したイメージである。
ユーザ一人一人が自分の携帯電話カメラから得た大便イメージは、ユーザ、撮影場所、撮影時間に応じてデータ間の変化(距離や角度など)が大きい。これにより、前処理過程を経ていないデータを用いて大腸状態を分析する場合、分析結果に誤差が発生する確率が大きい。
しかし、本発明の実施形態に係る前処理部500によると、データを得る過程で撮影に対する自由度(Degree of Freedom)が高いことから発生し得るデータ間の差を減らすことで、分析結果で発生し得る誤差を減らすことができる。
図3は、本発明の一実施形態に係る通信部600を通じて表示されたガイドラインを含むユーザ端末のディスプレイを示す。
本発明の一実施形態に係る大便イメージ分析システムは、通信部600をさらに含んでもよい。前記通信部600は、ユーザ端末などの外部装置と通信を行うための構成である。
実施形態によると、通信部600は、有線通信および/または無線通信を通じて具現されたネットワークを基盤に外部電子機器と連結されてもよい。
ここで、有線通信は、イーサネット(Ethernet)、光ネットワーク(optical network)、USB(Universal Serial Bus)、サンダーボルト(Thunder Bolt)などの通信方式のうち少なくとも1つを含んでもよい。
また、無線通信は、LTE(long-term evolution)、LTE-A(LTE Advance)、5G(5th Generation)移動通信、CDMA(code division multiple access)、WCDMA(登録商標)(wideband CDMA)、UMTS(universal mobile telecommunications system)、WiBro(Wireless Broadband)、GSM(Global System for Mobile Communications)、DMA(Time Division Multiple Access)、WiFi(Wi-Fi)、WiFi Direct、Bluetooth、NFC(near field communication)、Zigbeeなどの通信方式のうち少なくとも1つを含んでもよい。
図3を参照すると、本発明の一実施形態に係る通信部600は、ディスプレイ部11を含むユーザ端末10と大便イメージを送受信することができ、前記ディスプレイ部11は、座便器の内部の特定の地点とマッチングさせるためのガイドラインXを含んでもよい。
図4は、本発明の一実施形態に係るディープラーニングモデルの訓練用データの一例である。
図4(a)は、ディープラーニングモデル学習のための入力データであり、図4(b)は、図4(a)の各々の大便イメージに対応するユーザの内視鏡映像イメージである。
実施形態によると、前記分析部300は、前記大便イメージまたは前記データセットを入力データとし、大便状態情報または大腸状態情報を出力データとして既に学習済みのディープラーニングモデルを含んでもよい。
実施形態によると、前記ディープラーニングモデルは、特定の入力データが入力される場合、特定の入力データとマッチングした特定の出力データを出力するように学習されてもよい。つまり、大便イメージとそれに伴う大便または大腸状態情報をそれぞれ入力データと出力データにマッチングした後、ディープラーニングモデルを学習させることができる。
実施形態によると、前記大便イメージは、ユーザ端末10などに含まれたカメラのような映像撮影装置を通じて得られたイメージを意味し、例えば、図4(a)のように座便器などに存在する大便を撮影したイメージを意味するものであってもよい。
図4(a)および図4(b)を参照すると、ユーザの大便状態は、当該ユーザの大腸の状態と関連性があることが分かる。したがって、大便の状態を分析することによって、大腸の健康状態情報が分かる。
実施形態によると、前記大便状態情報は、Myo score、大便の回数、血便、Mayo endoscopic subscore、PGA、UCEIS、Vascular score、Bleeding scoreおよびErosion/Ulcer scoreのような不連続的な値と、WBC、Hb、Platelet、ESR、serum albumin、CRPのような連続的な値とを含んでもよく、前記ディープラーニングモデルを学習させるための出力データとして用いられてもよい。
例えば、前記出力データは、以下の[表1]または[表2]のように構成することができる。
図5は、分類問題に該当する損失関数を用いて学習を行うディープラーニングモデルの構造を示し、図6は、線形回帰問題(Mean square error)に該当する損失関数を用いて学習を行うディープラーニングモデルの構造を示す。
図5を参照すると、本発明の実施形態に係るディープラーニングモデルは、大腸状態情報が前記ユーザの大腸状態の程度を示す不連続的な値である場合に、前記既に学習済みのディープラーニングモデルは、分類問題(Cross-entropy)に該当する損失関数を用いて学習を行うことを特徴とする。
ここで、不連続的な値は、大腸に関連する状態の程度(例えば、潰瘍性大腸炎の程度)を示す情報を含んでもよいが、これに限定されるものではない。
図6を参照すると、本発明の実施形態に係るディープラーニングモデルは、大腸状態情報が特定の数値を示す連続的な値である場合、前記既に学習済みのディープラーニングモデルは、線形回帰問題に該当する損失関数を用いて学習を行うことを特徴とする。
ここで、連続的な値は、ユーザの大腸の健康状態に関連する正確な数値を示す情報を含んでもよいが、これに限定されるものではない。
図7は、分類問題に該当する損失関数を用いて学習済みのディープラーニングモデルを用いてユーザの大腸状態を評価する過程の一例示図である。
本発明の一実施形態に係る分類問題に該当する損失関数を用いて学習済みのディープラーニングモデルに一定期間の大便状態イメージを1つのデータセットとするデータを入力する場合、各々の大便状態イメージに対応する出力データ(図7のProbability 1~5に該当する)が得られる。このとき、前記出力データは不連続的な値に該当し、前記出力データの値を基準に特定の疾患があるか否かを評価することができる。
例えば、各々の出力データの値が特定の基準(図7では、Probabilityが0.5を超える場合、異常(赤色で表示)と評価する)を満たす場合、異常と評価することができる。
また、実施形態によると、複数の出力データの平均値が特定の基準を満たすか否か、または複数の出力データのうちの特定の基準を満たす出力データの個数を基準に特定の疾患があるか否かを評価することもできる。
例えば、図7のProbability 1~5のうち0.5以上であるProbabilityの個数を基準に特定の疾患の正常/異常か否かの評価を導出することもできる。
図8は、線形回帰問題に該当する損失関数を用いて学習済みのディープラーニングを用いてユーザの大腸状態を評価する過程の一例示図である。
本発明の一実施形態に係る線形回帰問題に該当する損失関数を用いて学習済みのディープラーニングモデルに一定期間の大便状態イメージを1つのデータセットとするデータを入力する場合、各々の大便状態イメージに対応する出力データ(図8のvalue 1~5に該当する)が得られる。
このとき、前記出力データは連続的な値に該当し、前記出力データは、等級化過程(Grading)を経た後、特定の疾患に該当するか否かの判断基準として用いられる。つまり、前記出力データ(value)は、臨床医の判断によって2~Nの等級に区分することができる。
例えば、線形回帰問題に該当する損失関数を用いて学習済みのディープラーニングの出力データは、図8に示しているように0等級~2等級に区分することができる。
また、実施形態によると、複数の出力データの等級が特定の基準を満たすか否か、または複数の出力データの等級のうちの特定の基準を満たすものの個数を基準に特定の疾患があるか否かを評価することもできる。
本発明の一実施形態に係る方法に関連しては、前述のシステムに関する内容を適用することができる。以下では、方法に関連して前述のシステムに関する内容と同一の内容については説明を省略する。
図9は、本発明の一実施形態に係る大便イメージ分析方法のフローチャートである。
図9を参照すると、本発明の一実施形態に係る大便イメージ分析方法は、入力ステップS100、データセット生成ステップS200、分析ステップS300および出力ステップS400を含んでもよい。
前記入力ステップS100では、入力部100がユーザの大便イメージを入力されてもよい。
前記データセット生成ステップS200では、データセット生成部200が、前記大便イメージを時間順に群集化してデータセットを構成してもよい。
実施形態によると、前記データセットは、前記ユーザの大腸内視鏡検査の直後、7日間の大便イメージを含んでもよい。
前記分析ステップS300では、分析部300が、前記データセットを分析して前記ユーザの大便状態情報または大腸状態情報を導出することができる。
前記出力ステップS400では、出力部400が、前記大便状態情報または大腸状態情報を出力することができる。
本発明の一実施形態に係る大便イメージ分析方法は、前処理ステップをさらに含んでもよい。
前記前処理ステップでは、前処理部500が前記大便イメージを、前記大便イメージに含まれた便器の特定の地点を基準にクロップ(crop)することができる。
実施形態によると、前記前処理ステップは、基準抽出ステップと、クロッピングステップと、をさらに含んでもよい。
前記基準抽出ステップでは、前記前処理部500が、前記大便イメージから前記便器の特定の地点を抽出することができる。
前記クロッピングステップでは、前記前処理部500が、前記大便イメージの縁のいずれかが前記便器の特定の地点を含むように、前記大便イメージをクロップ(crop)することができる。
本発明の一実施形態に係る大便イメージ分析方法は、送受信ステップと、ガイドライン表示ステップと、をさらに含んでもよい。
前記送受信ステップでは、通信部600が、ディスプレイ部11を含むユーザ端末10と大便イメージを送受信することができる。
前記ガイドライン表示ステップでは、ディスプレイ部11が座便器の内部の特定の地点とマッチングさせるためのガイドラインXを表示することができる。
本発明の一実施形態に係る大便イメージ分析方法は、学習ステップをさらに含んでもよい。
前記学習ステップは、大便イメージまたは前記データセットを入力データとし、前記大便状態情報または大腸状態情報を出力データとしてディープラーニングモデルを学習させることができる。
実施形態によると、前記学習ステップは、前記大腸状態情報が、前記ユーザの大腸状態の程度を示す不連続的な値である場合、分類問題に該当する損失関数を用いて前記ディープラーニングモデルを学習させることを特徴とする。
実施形態によると、前記学習ステップは、前記大腸状態情報が特定の数値を示す連続的な値である場合、線形回帰問題に該当する損失関数を用いて前記ディープラーニングモデルを学習させることを特徴とする。
一方、前述の方法は、コンピュータで実行可能なプログラムに作成可能であり、コンピュータで読み取り可能な記録媒体を用いて前記プログラムを動作させる汎用デジタルコンピュータで具現することができる。また、前述の方法で使用されるデータの構造は、コンピュータで読み取り可能な記録媒体に様々な手段を通じて記録することができる。前記コンピュータで読み取り可能な記録媒体は、磁気記憶媒体(例えば、ROM、RAM、USB、フロッピーディスク、ハードディスクなど)、光学的読み取り媒体(例えば、CD-ROM、DVDなど)のような記憶媒体を含む。
前述の本発明の説明は例示のためのものであり、本発明の属する技術分野における通常の知識を有する者は、本発明の技術的思想や必須の特徴を変更することなく、他の具体的な形態に容易に変形が可能であることが理解できるであろう。したがって、前述の実施形態は、あらゆる面で例示的なものであって、限定的ではないものと理解すべきである。例えば、単一形で説明されている各構成要素は分散して実施することもあり、同様に分散されたものと記載されている構成要素も結合した形態で実施することもある。
本発明の範囲は、前記の詳細な説明よりは、後述する特許請求の範囲によって示され、特許請求の範囲の意味および範囲、並びにその均等な概念から導出されるすべての変更または変形された形態が、本発明の範囲に含まれるものと解釈されるべきである。
X:ガイドライン
10:ユーザ端末
11:ディスプレイ
100:入力部
200:データセット構成部
300:分析部
400:出力部
500:前処理部
600:通信部

Claims (17)

  1. ユーザの大便イメージを入力される入力部と、
    前記大便イメージを時間順に群集化してデータセットを構成するデータセット生成部と、
    前記データセットを分析して前記ユーザの大便状態情報または大腸状態情報を導出する分析部と、
    前記大便状態情報または大腸状態情報を出力する出力部と、を含む、
    大便イメージ分析システム。
  2. 前記データセットは、
    前記ユーザの大腸内視鏡検査の直後、7日間の大便イメージを含む請求項1に記載の大便イメージ分析システム。
  3. 前記大便イメージを、前記大便イメージに含まれた便器の特定の地点を基準にクロップ(crop)する前処理部をさらに含む請求項1に記載の大便イメージ分析システム。
  4. 前記前処理部は、
    前記大便イメージから便器の特定の地点を抽出し、前記大便イメージの縁のいずれかが前記便器の特定の地点を含むように、前記大便イメージをクロップ(crop)することを特徴とする請求項3に記載の大便イメージ分析システム。
  5. ディスプレイ部を含むユーザ端末と大便イメージを送受信する通信部をさらに含み、
    前記ディスプレイ部は、座便器の内部の特定の地点とマッチングさせるためのガイドラインを含む請求項1に記載の大便イメージ分析システム。
  6. 前記分析部は、
    前記大便イメージまたは前記データセットを入力データとし、大便状態情報または大腸状態情報を出力データとして既に学習済みのディープラーニングモデルを含む請求項1に記載の大便イメージ分析システム。
  7. 前記大腸状態情報が、前記ユーザの大腸状態の程度を示す不連続的な値である場合、
    前記既に学習済みのディープラーニングモデルは、分類問題に該当する損失関数を用いて学習を行うことを特徴とする請求項6に記載の大便イメージ分析システム。
  8. 前記大腸状態情報が特定の数値を示す連続的な値である場合、
    前記既に学習済みのディープラーニングモデルは、線形回帰問題に該当する損失関数を用いて学習を行うことを特徴とする請求項6に記載の大便イメージ分析システム。
  9. 入力部が、ユーザの大便イメージを入力される入力ステップと、
    データセット構成部が、前記大便イメージを時間順に群集化してデータセットを構成するデータセット生成ステップと、
    分析部が、前記データセットを分析して前記ユーザの大便状態情報または大腸状態情報を導出する分析ステップと、
    出力部が、前記大便状態情報または大腸状態情報を出力する出力ステップと、
    を含む、大便イメージ分析方法。
  10. 前記データセットは、
    前記ユーザの大腸内視鏡検査の直後、7日間の大便イメージを含む請求項9に記載の大便イメージ分析方法。
  11. 前処理部が前記大便イメージを前記大便イメージに含まれた楕円形状を基準にクロップ(crop)する前処理ステップをさらに含む請求項9に記載の大便イメージ分析方法。
  12. 前記前処理ステップは、
    前記前処理部が、前記大便イメージから便器の特定の地点を抽出する基準抽出ステップと、
    前記前処理部が、前記大便イメージの縁のいずれかが前記便器の特定の地点を含むように、前記大便イメージをクロップ(crop)するクロッピングステップと、をさらに含む請求項11に記載の大便イメージ分析方法。
  13. 通信部が、ディスプレイ部を含むユーザ端末と大便イメージを送受信する送受信ステップと、
    前記ディスプレイ部が、座便器の内部の特定の地点とマッチングさせるためのガイドラインを表示するガイドライン表示ステップと、をさらに含む請求項9に記載の大便イメージ分析方法。
  14. 前記大便イメージまたは前記データセットを入力データとし、
    前記大便状態情報または大腸状態情報を出力データとしてディープラーニングモデルを学習させる学習ステップをさらに含む請求項9に記載の大便イメージ分析方法。
  15. 前記学習ステップは、
    前記大腸状態情報が、前記ユーザの大腸状態の程度を示す不連続的な値である場合、
    分類問題に該当する損失関数を用いて前記ディープラーニングモデルを学習させることを特徴とする請求項14に記載の大便イメージ分析方法。
  16. 前記学習ステップは、
    前記大腸状態情報が特定の数値を示す連続的な値である場合、
    線形回帰問題に該当する損失関数を用いて前記ディープラーニングモデルを学習させることを特徴とする請求項14に記載の大便イメージ分析方法。
  17. 請求項9~請求項16のいずれか一項に記載の方法を具現するためのプログラムが記録された、コンピュータで読み取り可能な記録媒体。
JP2023079401A 2022-07-12 2023-05-12 大便イメージ分析システムおよび方法 Pending JP2024010649A (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2025172196A JP2026010074A (ja) 2022-07-12 2025-10-10 大便イメージ分析システムおよび方法

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2022-0085663 2022-07-12
KR1020220085663A KR20240008606A (ko) 2022-07-12 2022-07-12 대변이미지 분석 시스템 및 방법

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2025172196A Division JP2026010074A (ja) 2022-07-12 2025-10-10 大便イメージ分析システムおよび方法

Publications (1)

Publication Number Publication Date
JP2024010649A true JP2024010649A (ja) 2024-01-24

Family

ID=89510223

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2023079401A Pending JP2024010649A (ja) 2022-07-12 2023-05-12 大便イメージ分析システムおよび方法
JP2025172196A Pending JP2026010074A (ja) 2022-07-12 2025-10-10 大便イメージ分析システムおよび方法

Family Applications After (1)

Application Number Title Priority Date Filing Date
JP2025172196A Pending JP2026010074A (ja) 2022-07-12 2025-10-10 大便イメージ分析システムおよび方法

Country Status (3)

Country Link
US (1) US12536654B2 (ja)
JP (2) JP2024010649A (ja)
KR (1) KR20240008606A (ja)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20240008606A (ko) * 2022-07-12 2024-01-19 경북대학교 산학협력단 대변이미지 분석 시스템 및 방법
US20260007309A1 (en) * 2023-07-23 2026-01-08 Manta Implant LLC Device and method to assess rectal effluent

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016066301A (ja) * 2014-09-25 2016-04-28 オリンパス株式会社 内視鏡業務支援装置、携帯型端末装置
US20210265059A1 (en) * 2018-06-21 2021-08-26 N.V. Nutricia Method and system for characterizing stool patterns of young infants
JP2021192024A (ja) * 2020-06-04 2021-12-16 Necプラットフォームズ株式会社 排泄物分析装置、分析システム、サーバ装置、及びプログラム
WO2021258033A1 (en) * 2020-06-19 2021-12-23 Ultrasound AI, Inc. Premature birth prediction

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8031921B2 (en) * 2005-02-14 2011-10-04 Mayo Foundation For Medical Education And Research Electronic stool subtraction in CT colonography
US8213700B2 (en) * 2009-03-31 2012-07-03 Icad, Inc. Systems and methods for identifying suspicious anomalies using information from a plurality of images of an anatomical colon under study
US20110206250A1 (en) * 2010-02-24 2011-08-25 Icad, Inc. Systems, computer-readable media, and methods for the classification of anomalies in virtual colonography medical image processing
US11604177B1 (en) * 2018-07-09 2023-03-14 The Board Of Trustees Of The Leland Stanford Junior University Smart toilet for human health monitoring
KR102268304B1 (ko) 2019-06-11 2021-06-22 김민후 대변 이미지를 이용한 영유아 건강 관리 방법 및 장치
US11763920B2 (en) * 2019-07-31 2023-09-19 Dig Labs Corporation Mucus analysis for animal health assessments
JP7325282B2 (ja) * 2019-09-24 2023-08-14 株式会社Lixil 判定装置
WO2021240865A1 (ja) * 2020-05-27 2021-12-02 パナソニック株式会社 撮像装置
WO2021261128A1 (ja) * 2020-06-26 2021-12-30 パナソニック株式会社 出力装置、方法、及びプログラム
CN115702336A (zh) * 2020-06-26 2023-02-14 松下控股株式会社 输出装置、方法、程序以及显示装置
JP7738016B2 (ja) * 2021-01-26 2025-09-11 パナソニックホールディングス株式会社 排尿分析方法、排尿分析装置、及び排尿分析プログラム
JP7160128B2 (ja) * 2021-03-23 2022-10-25 Toto株式会社 情報処理システム
JP7424651B2 (ja) * 2021-10-28 2024-01-30 Necプラットフォームズ株式会社 排泄物分析装置、排泄物分析方法、及びプログラム
KR20240008606A (ko) * 2022-07-12 2024-01-19 경북대학교 산학협력단 대변이미지 분석 시스템 및 방법

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016066301A (ja) * 2014-09-25 2016-04-28 オリンパス株式会社 内視鏡業務支援装置、携帯型端末装置
US20210265059A1 (en) * 2018-06-21 2021-08-26 N.V. Nutricia Method and system for characterizing stool patterns of young infants
JP2021192024A (ja) * 2020-06-04 2021-12-16 Necプラットフォームズ株式会社 排泄物分析装置、分析システム、サーバ装置、及びプログラム
WO2021258033A1 (en) * 2020-06-19 2021-12-23 Ultrasound AI, Inc. Premature birth prediction

Also Published As

Publication number Publication date
US12536654B2 (en) 2026-01-27
JP2026010074A (ja) 2026-01-21
KR20240008606A (ko) 2024-01-19
US20240020832A1 (en) 2024-01-18

Similar Documents

Publication Publication Date Title
Knudsen et al. Estimation of benefits, burden, and harms of colorectal cancer screening strategies: modeling study for the US Preventive Services Task Force
AU2014271202B2 (en) A system and method for remote medical diagnosis
JP2026010074A (ja) 大便イメージ分析システムおよび方法
Al-Jarrah et al. Non-proliferative diabetic retinopathy symptoms detection and classification using neural network
CN113164025A (zh) 医疗支持系统、医疗支持设备和医疗支持方法
JP7672642B2 (ja) 情報処理システム、情報処理方法及びプログラム
KR20190115713A (ko) 다기능 신경망을 활용한 혈관탐지 및 망막부종진단 장치 및 그 방법
CN112641451A (zh) 基于单通道脑电信号多尺度残差网络睡眠分期方法及系统
WO2020224282A1 (zh) 一种婴幼儿粪便采样图像分类处理系统及方法
CN110288589B (zh) 血肿扩大预测方法及装置
CN109460717A (zh) 消化道共聚焦激光显微内镜病变图像识别方法及装置
CN110189318B (zh) 带有语义特征得分的肺结节检测方法和系统
KR20230132387A (ko) 그래프 딥 러닝에 기반한 전체 슬라이드 이미지의 병리학 패턴 분석 방법 및 장치
CN115100723A (zh) 面色分类方法、装置、计算机可读程序介质及电子设备
KR102128435B1 (ko) 환자투병 관련기록을 자동으로 인식하여 분석하는 정신심리 분석 시스템
Post et al. Determinants of colorectal cancer screening in primary care
Gu et al. Enhancing kidney failure analysis: web application development for longitudinal trajectory clustering
CN117058467B (zh) 一种胃肠道病变类型识别方法及系统
US20240285231A1 (en) System and Method for Determining a Stool Condition
CN117352135A (zh) 基于深度学习的糖网识别方法和装置、设备及存储介质
CN116798611A (zh) 肝硬化结节的良恶性质预测装置、方法、设备及介质
TW202401452A (zh) 壓傷風險評估方法及其系統
CN115984551A (zh) 基于多尺度反向注意力的息肉分割方法、设备及存储介质
Chan et al. Identifying pediatric vascular anomalies with deep learning
CN117637155A (zh) 患病风险等级的预测方法、装置、电子设备和存储介质

Legal Events

Date Code Title Description
A80 Written request to apply exceptions to lack of novelty of invention

Free format text: JAPANESE INTERMEDIATE CODE: A80

Effective date: 20230601

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20230711

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20240419

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20240430

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20240723

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20241028

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20250127

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20250327

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20250610