JPWO2019131327A1 - 口内撮影装置、医療装置及びプログラム - Google Patents

口内撮影装置、医療装置及びプログラム Download PDF

Info

Publication number
JPWO2019131327A1
JPWO2019131327A1 JP2019561542A JP2019561542A JPWO2019131327A1 JP WO2019131327 A1 JPWO2019131327 A1 JP WO2019131327A1 JP 2019561542 A JP2019561542 A JP 2019561542A JP 2019561542 A JP2019561542 A JP 2019561542A JP WO2019131327 A1 JPWO2019131327 A1 JP WO2019131327A1
Authority
JP
Japan
Prior art keywords
oral
imaging device
image
oral imaging
mouth
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2019561542A
Other languages
English (en)
Other versions
JP7267608B2 (ja
Inventor
沖山翔
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
AILLIS INC.
Original Assignee
AILLIS INC.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by AILLIS INC. filed Critical AILLIS INC.
Publication of JPWO2019131327A1 publication Critical patent/JPWO2019131327A1/ja
Priority to JP2023065907A priority Critical patent/JP7498521B2/ja
Application granted granted Critical
Publication of JP7267608B2 publication Critical patent/JP7267608B2/ja
Priority to JP2024085185A priority patent/JP2024109854A/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/24Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor for the mouth, i.e. stomatoscopes, e.g. with tongue depressors; Instruments for opening or keeping open the mouth
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/32Devices for opening or enlarging the visual field, e.g. of a tube of the body
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002Operational features of endoscopes
    • A61B1/00004Operational features of endoscopes characterised by electronic signal processing
    • A61B1/00009Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
    • A61B1/000096Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope using artificial intelligence
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002Operational features of endoscopes
    • A61B1/00043Operational features of endoscopes provided with output arrangements
    • A61B1/00045Display arrangement
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00131Accessories for endoscopes
    • A61B1/00135Oversleeves mounted on the endoscope prior to insertion
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00147Holding or positioning arrangements
    • A61B1/00154Holding or positioning arrangements using guiding arrangements for insertion
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/04Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
    • A61B1/045Control thereof
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/0661Endoscope light sources
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0062Arrangements for scanning
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0082Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence adapted for particular medical purposes
    • A61B5/0088Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence adapted for particular medical purposes for oral or dental tissue
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/74Details of notification to user or communication with user or patient ; user input means
    • A61B5/742Details of notification to user or communication with user or patient ; user input means using visual displays
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0012Biomedical image inspection
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/20ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for computer-aided diagnosis, e.g. based on medical expert systems
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002Operational features of endoscopes
    • A61B1/00059Operational features of endoscopes provided with identification means for the endoscope
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/0638Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements providing two or more wavelengths
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/267Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor for the respiratory tract, e.g. laryngoscopes, bronchoscopes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00Indexing scheme for image data processing or generation, in general
    • G06T2200/24Indexing scheme for image data processing or generation, in general involving graphical user interfaces [GUIs]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10068Endoscopic image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20081Training; Learning
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30004Biomedical image processing
    • G06T2207/30092Stomach; Gastric
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30168Image quality inspection

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Surgery (AREA)
  • Medical Informatics (AREA)
  • General Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Biomedical Technology (AREA)
  • Physics & Mathematics (AREA)
  • Pathology (AREA)
  • Biophysics (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • Molecular Biology (AREA)
  • Veterinary Medicine (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Radiology & Medical Imaging (AREA)
  • Optics & Photonics (AREA)
  • Dentistry (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Signal Processing (AREA)
  • Evolutionary Computation (AREA)
  • Artificial Intelligence (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Quality & Reliability (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Otolaryngology (AREA)
  • Physiology (AREA)
  • Pulmonology (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Primary Health Care (AREA)
  • Epidemiology (AREA)
  • Endoscopes (AREA)
  • Dental Tools And Instruments Or Auxiliary Dental Instruments (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)

Abstract

口内の所見に差が出る疾患に関する判断の補助材料を提供するための口内撮影装置、医療装置及びプログラムを提供するものであり、口内の画像を取得する撮像デバイスと、前記撮像デバイスの被写体に光を照射する光源と、所定の疾患の判定ためのアルゴリズムを記憶する記憶装置と、演算装置と、を備える口内撮影装置であって、前記演算装置は、前記画像及び前記アルゴリズムに基づき、前記所定の疾患の可能性を判定する判定処理と、前記判定処理の結果を出力する出力処理と、を実行することを特徴とする口内撮影装置に関する。

Description

本発明は、口内を撮影するための口内撮影装置、その口内撮影装置と口内撮影補助具とを含む医療装置、及び撮影された口内画像に基づいて所定の疾患を判定するためのプログラムに関する。
非特許文献1は、咽頭の最深部に出現するリンパ濾胞にはインフルエンザに特有のパターンがあることを報告している。かかるパターンを有するリンパ濾胞をインフルエンザ濾胞と呼ぶことにする。インフルエンザ濾胞は、インフルエンザに特徴的なサインであって、発症後2時間程度で出現するとされる。
宮本・渡辺著「咽頭の診察所見(インフルエンザ濾胞)の意味と価値の考察」日大医誌72(1):11-18(2013)
インフルエンザ濾胞の的確な判別は、診断の正確性の飛躍的な向上に繋がると期待される。しかしながら、インフルエンザ濾胞の適切な見定めは、多くの症例を通じた集中的な訓練を必要とし、一般医師にとって決して容易ではない。残念なことに、上記の研究成果は、限られた範囲の医師の間で活用されるに留まっている。
ここで、咽頭所見に差が出る疾患は、インフルエンザ以外にも多数存在する。かかる疾患の診断についても、上記と同様の指摘が当てはまり得る。
更には、口腔の所見に差が出る疾患に対しても画像診断は有用である。
そこで、本発明は、口内の所見に差が出る疾患に関する判断の補助材料を提供することができる口内撮影装置、医療装置及びプログラムを提供することを目的とする。
上述した課題を解決すべく、本発明は、口内の画像を取得する撮像デバイスと、前記撮像デバイスの被写体に光を照射する光源と、所定の疾患の判定ためのアルゴリズムを記憶する記憶装置と、演算装置と、を備える撮影装置であって、前記演算装置は、前記画像及び前記アルゴリズムに基づき、前記所定の疾患の可能性を判定する判定処理と、前記判定処理の結果を出力する出力処理と、を実行することを特徴とする口内撮影装置を提供する。
ここで、「口内」は、人はもとより動物全般の口腔内及び咽頭を含むものとする。また、「咽頭」は、咽頭後壁のリンパ濾胞を含む『ワルダイエル咽頭輪』も含むものとする。したがって、本発明における「患者」は人だけでなく動物全般を含む。
また、光源は、撮影という目的を達することができるものを広く含み、可視光を照射してもよいし、例えば近赤外線や赤外線のような非可視光を照射してもよいものとする。
上記のような構成を有する本発明の口内撮影装置では、前記撮像デバイスが前記画像として動画像を取得し、前記演算装置が、前記動画像に含まれる複数枚の静止画像の中から、所定の条件を満たす少なくとも1枚の静止画像を抽出する抽出処理を更に実行し、前記抽出処理の結果に基づいて前記判定処理を実行してもよい。ここで、動画像の取得とは、撮像デバイスによる撮影を意味し、撮影された画像の記録媒体への記録を伴ってもよいし、伴っていなくてもよい。また、所定の条件とは、画像の内容に関する条件でもよいし、画像抽出のタイミングに関わる条件でもよい。
また、上記のような構成を有する本発明の口内撮影装置は、患者情報の入力を受け付ける入力装置を更に備え、前記演算装置が、更に前記患者情報に基づいて、前記判定処理を実行してもよい。
また、上記のような構成を有する本発明の口内撮影装置は、前記撮像デバイスによって取得された画像及び前記抽出処理の結果のうち少なくとも一方を表示する表示装置を更に備えていてもよい。
また、上記のような構成を有する本発明の口内撮影装置では、前記撮像デバイスが、前記口内に装着される筒状の口内撮影補助具内で前記口内の画像を取得し、前記記憶装置が、使用済みの口内撮影補助具の識別情報を記憶し、前記演算装置が、新たな判定に使用される口内撮影補助具の識別情報を取得する取得処理と、前記新たな判定に使用される口内撮影補助具の識別情報と一致する前記記憶装置の記録の有無を調べる検索処理と、前記検索処理の結果に応じて前記新たな判定を制限する制限処理と、を更に実行してもよい。
本発明は、上述した口内撮影装置と、口内に着脱可能に装着される筒状の口内撮影補助具と、を含み、前記口内撮影補助具は、開口を有する第1端部と、前記第1端部とは反対側に位置して、前記口内撮影補助具の内側から前記口内撮影補助具の外側への視野を与える窓部を有する第2端部と、を含むことを特徴とする医療装置をも提供する。
また、本発明は、所定の疾患の判定ためのアルゴリズムを記憶した記憶装置と、演算装置と、を備えるコンピュータに対して、前記撮像デバイスによって取得された口内画像及び前記アルゴリズムに基づき、前記所定の疾患の可能性を判定する判定処理と、前記判定処理の結果を出力する出力処理と、を実行させるためのプログラムをも提供する。
本発明によれば、口内の所見に差が出る疾患に関する判断の補助材料を提供することができる。
本発明の代表的な実施形態に係る口内撮影装置5及び口内撮影補助具3を含む医療装置1の概略図である。 図1の口内撮影補助具3を示す斜視図である。 図2の口内撮影補助具3の縦断面図である。 図2の口内撮影補助具3を口腔71内に挿入した状態の一例を示す図である。 変形例1に係る口内撮影補助具13を示す斜視図である。 図5の口内撮影補助具13を示す縦断面図である。 図5の口内撮影補助具13を口腔71内に挿入した状態の一例を示す図である。 変形例2に係る口内撮影補助具23を示す斜視図である。 変形例3に係る口内撮影補助具43の斜視図である。 図9の口内撮影補助具43の横断面図である。 包装された口内撮影補助具3を示す概略図である。 図1の口内撮影装置5の外観の一例を示す図である。 図9の口内撮影装置5のハードウェア構成の一例を示すブロック図である。 図9の口内撮影装置5の機能構成の一例を示すブロック図である。 図9の口内撮影装置5の動作例1を示すフローチャートである。 図9の口内撮影装置5の動作例2を示すフローチャートである。 判定アルゴリズムの生成手順を示すフローチャートである。 画像抽出手順の一例を示すフローチャートである。 図9の口内撮影装置5の動作例3を示すフローチャートである。 口内撮影装置5の撮影動作の例を示すフローチャートである。 人7の頭部の断面形状の概略図である。 口腔71内の概略図である。
以下、本発明の代表的な実施形態に係る口内撮影装置及び口内撮影補助具を含む医療装置を、図面を参照しつつ詳細に説明する。ただし、本発明はかかる実施形態及び図面に限定されるものではない。また、図面は、本発明を概念的に説明するためのものであるから、理解容易のために、必要に応じて寸法、比又は数を誇張又は簡略化して表している場合もある。
また、以下の開示は、医療装置をインフルエンザの判定のために使用することを想定しているが、本発明はこれに限られない。例えば、溶連菌感染症、アデノウイルス感染症、EBウイルス感染症、マイコプラズマ感染症等のように、咽頭所見に差が出る疾患は多数存在する。また、これら疾患でも、口腔内に重要な所見が現れることがある。更には、これら疾患以外の疾患でも、口腔内に所見が現れることがある。このように咽頭及び口腔内に所見が現れるいずれかの疾患の判定のために医療装置が使用されてもよい。また、口内撮影補助具は、例えばスマートフォン及びタブレット端末のような他の装置との組合せで使用されてもよい。
1 医療装置の概要
図1を参照して、本実施形態の医療装置1の概要を説明する。図示のように、医療装置1は、口内撮影装置5及び口内撮影補助具3を含むものである。口内撮影装置5は、口内撮影補助具3との組合せで使用されることが好適であるが、単独で又は他の補助具との組合せで使用されてもよい。
口内撮影装置5は、被写体の画像を取得する撮像デバイス57を含み、また、この装置5には予め専用のソフトウェアがインストールされている。ユーザ(例えば医師)は、インフルエンザの疑いのある判定対象者7(例えば患者)に口内撮影補助具3を咥えさせ、撮影のための視野を確保する。その後に、ユーザは、撮像デバイス57を口内撮影補助具3に挿入し、その対象者7の咽頭72を撮影する。また、ユーザは、口内撮影補助具3の挿入深さ及び挿入角度を調節することで、対象者7の口腔内71を撮影することもできる。あるいは、ユーザは、撮像デバイス57を内部に収納した口内撮影補助部3を判定対象者7の口内に挿入してもよいし、判定対象者7に口内撮影補助部3を口内に挿入させてもよい。
撮影された画像は、事前に生成された判定アルゴリズムによって処理される。かかる処理は、口内撮影装置5で行われることを想定しているが、他のコンピュータで行われてもよい。例えば判定がインフルエンザの可能性に関する場合、インフルエンザ濾胞等のインフルエンザ固有の咽頭症状(パターン)を判定アルゴリズムが検出し、インフルエンザらしさを表示する。これにより、例えば経験の浅い医師や研修医でも、正確かつ早期からのインフルエンザ診断が可能となる。また、経験豊かな医師にとっても、有用な判断資料を得ることができる。更には、インフルエンザの正診率が上がることで、患者は一度の受診で通院を終えることができるとともに、適切な治療をより早期から受けることができる。
2−1 口内撮影補助具
図2−図4を参照して、本実施形態の口内撮影補助具3を詳細に説明する。
口内撮影補助具3は、人7の口内(口腔内71及び咽頭72)の撮影のために使用される補助的な道具である。より具体的には、口内撮影補助具3は、口内の撮影の際に口腔71内に挿入され、口腔内71又は咽頭72を含む撮影領域の良好な視野を得るためのものである。更に良好な視野を得るという観点からは、口内撮影補助具3は透光性を有することが好ましい。本実施形態では、口内撮影補助具3の一例としてマウスピースを想定しているが、これに限られるものではない。
図2に示すように、口内撮影補助具3は、本体31、鍔部34及び規制部35を備えている。ただし、口内撮影補助具3は、本体31を有していれば足り、鍔部34及び規制部35の両方又は一方を有していなくてもよい。本実施形態では、口内撮影補助具3として、一体成型された樹脂製品を想定しているが、口内撮影補助具3は、紙や布、金属などの他の素材で作製されてもよいし、複数の素材で作製されていてもよい。また、口内撮影補助具3は、使い捨てタイプであることを想定しているが、再利用可能なタイプでもよい。
本体31は、全体として筒状を呈している。本体31は、口腔71内に深く挿入されると、例えば図1と図21との比較から分かるように、舌73を下方へ押しやるとともに、軟口蓋74を上方へ押しやる。これにより、例えば図4と図22との比較から分かるように、口内撮影補助具3(本体31)の内側から咽頭72の良好な視野を確保できる。
本実施形態において、本体31は実質的に略直線状に延びている。つまり、本体31の内径及び外径は長手方向にわたって実質的に一定である。ただし、本体31は、その内周面における撮像デバイス57のスライドを妨げない限り、一部又は全体が湾曲していてもよいし、本体31の内径又は外径が変わってもよい。
本体31の断面形状としては、ここでは真円状を想定している。ただし、断面形状は、楕円状でもよいし、四角形のような多角形状の断面でもよいし、例えば略D字状のような非対称な形状でもよい。本体31が楕円状、多角形状又は非対称の断面形状を持つ場合、本体31の形状に対応した撮像デバイス57は、本体31内でのスライドの際、本体31の軸方向を中心とした周方向の移動(つまり回転)を規制又は抑制されるので、判定に適した、向きの揃った口内画像を得ることができる。
本体31が真円状の断面形状の場合、図6を用いて後述するように、撮像デバイス57の外面及び本体31の内周面に互いに係合するレール及び突起部を設けることで、撮像デバイス57の本体31内での回転を規制してもよい。
図3に示すように、本体31は、互いに反対側に位置する端部32,33を含む。口内撮影補助具3が口腔71に装着されるとき、端部32は外部に露出し、端部33は口腔71内に位置することになる。したがって、端部32は第1端部に、端部33は第2端部に相当する。
本体31の外周面は滑らかであり、本体31と端部33も接続面36を介して滑らかに連続して一体的になるよう接続されている。つまり、本体31の外面は、口腔71を傷つけないように滑らかに加工されている。
本体31は、目盛り37を有する。目盛り37は、本体31の長手方向に沿って配置され、本体31が口腔71内にどれぐらい深く挿入されているかの目安として機能する。目盛り37は、本体31の外周面及び内周面のいずれかに設けられればよい。目盛り37が外周面に設けられる場合には、図2に示すように、上唇及び上前歯75が接触する側、つまり上側に設けられるとよい。目盛り37は、所定の間隔(例えば1cm刻み)で配置されるとよい。また、図2に示す目盛り37は本体31の周方向において半周近くの長さを有するが、これに限られるものではなく、短くてもよいし長くてもよい。
本実施形態では、目盛り37の一例として、本体31の長手方向に沿って整列する複数の隆起部を想定している。この隆起部の表面は、判定対象者7の口腔を傷付けないように滑らかに加工されているとよい。もっとも、目盛り37は、例えば、本体31の外周面の長手方向に延びる略直線状の凸部であってもよく、また、本体31の外周面又は内周面上に印刷又は表示されてもよい。
図3に示すように、端部32は開口32Aを有し、開口32Aには撮像デバイス57を挿入することが可能である。したがって、撮像デバイス57は、開口32Aから本体31内に挿入され、開口32Aから本体31の外へ取出されることになる。
端部32には鍔部34が設けられている。鍔部34は、端部32から本体31の径方向の外側に向かって延びている。鍔部34は、本体31が口腔71の奥深くに入り込むと判定対象者7の唇又は前歯に接触し、その判定対象者7が口内撮影補助具3を誤飲することを防止する。つまり、鍔部34は、ストッパとしての機能を果たす。本実施形態では、鍔部34は、端部32の全周に亘って設けられているが、例えば、端部32において上唇と下唇に対応する箇所に部分的に形成されてもよい。また、鍔部34の外縁は、図2のように真円状でもよいし、楕円状でもよいし、更には四角形のような多角形状でもよい。
鍔部34には、例えば判定対象者7が咳き込んだときに、判定対象者7の口からの飛沫が当たる。つまり、鍔部34は、医師が判定対象者7からの飛沫を回避することにも役立つ。この飛沫回避機能を持たせるためには、例えば、使用年齢や体格等に応じて、鍔部34の形状及び寸法を適宜選択すればよい。
端部33もまた開口し、窓部33Aを形成している。この窓部33Aは、本体31の内側から本体31の外側に視野を与えるためのものであり、ここでは、本体31内の撮像デバイス57のレンズを外部に露出させている。ただし、窓部33Aは、例えば透明な部材で覆われていてもよい。
端部33は本体31の内側に向かって突出し、規制部35を形成している。規制部35は、本体31内の撮像デバイス57が接触して、端部33を通過することを規制するために設けられる。もっとも、規制部35は、端部33に設けられていなくてもよい。例えば、追って図6との関係で述べる案内部141(凹部又は溝)は、その終端部において撮像デバイス57の係合突起57Aと接触し、撮像デバイス57の奥側への移動を規制するから、規制部35としての役割をも果たす。
上述した口内撮影補助具3を使用して咽頭72を撮影する場合、ユーザは、図1に示すように、判定対象者7の口腔71内に口内撮影補助具3を挿入する。このとき、本体31は、舌73を下方へ、軟口蓋74を上方へ押しやる。その後に又は同時に、ユーザは、撮像デバイス57を本体31内に挿入する。このとき、図4に示すように、撮像デバイス57の視野には舌73も軟口蓋74も入らないか、入るとしても僅かな範囲を占めるに留まる。したがって、咽頭72の良好な視野を得ることができる。
また、鍔部34により、判定対象者7による口内撮影補助具3の誤飲を防止することができる。併せて、鍔部34は、判定対象者7の口からユーザへの飛沫の飛散を抑制し、ユーザへのインフルエンザ等の感染症の二次感染のリスクを低減することができる。
更に、目盛り37は、口内撮影補助具3を、判定対象者7の体格や撮影部位に応じて適切な口腔深さに配置することを可能にする。このことは、意図する部位の鮮明な画像の撮影に寄与するとともに、本体31を必要以上に深く挿入することによる判定対象者7の不快感及び噎せ込みを抑制することができる。
2−2 口内撮影補助具の変形例1
図5−図7を参照して、本実施形態の変形例1に係る口内撮影補助具13を説明する。
口内撮影補助具13は、上述した口内撮影補助具3と同種の構成要素を備え、更に略直線状の案内部141を含む。他方、撮像デバイス57は、案内部141に係合する係合突起57Aを含む。したがって、案内部141は、撮像デバイス57が本体131に対して回転することなく、本体131内をスライド可能とする。
変形例1では、図6に示すように、案内部141の一例は、撮像デバイス57の外周面上の係合突起57Aと対応するように端部132から端部133に向かって略直線状に延びる溝である。あるいは、案内部141は、本体の内周面から突出する一対のレールでもよい。
選択的に、本体131の断面形状が楕円形状、多角形状、又は例えば略D字状のような非対称形状であり、かつ、撮像デバイス57が本体131の断面形状に対応した外形である場合には、撮像デバイス57が本体131に対して回転することなく本体131内をスライド可能であるから、この場合の本体131の内周面は案内部としても機能することになる。
図5に示すように、本体131及び鍔部134の外面上には、判定対象者7の口唇に対する本体131の位置決めを容易にするための指示表示142が設けられている。図7に示すように、指示表示142は例えば、判定対象者7の上唇の中央部又は上前歯75に対応する位置、つまり上部の中央に配置されるとよい。ユーザが、例えば指示表示142を判定対象者7の上唇の中央に揃えた状態で口内撮影補助具3を口腔71に装着することで、撮像デバイス57によって撮影される画像の向きがほぼ同じ向きに揃うことになる。これにより、画像を用いた機械学習及び特定の疾患(例えばインフルエンザ)の判定処理が容易になる。
2−3 口内撮影補助具の変形例2
図8を参照して、本実施形態の変形例2に係る口内撮影補助具23を説明する。
口内撮影補助具23は、上述した口内撮影補助具3と同種の構成要素を備え、更に、本体231に少なくとも1個の孔243を有する。孔243は、本体231の内側と外側との間を貫通している。かかる孔243により、口内撮影補助具23を咥えた判定対象者7が呼吸をすることが容易になり、その判定対象者7に安心感をもたらし得る。なお、孔243の大きさ、数及び配置は、判定対象者7の唾液が入りにくいように適宜設定されてよい。
上述した変形例2の構成要素、例えば案内部は、上記実施形態や変形例1に適用することも可能である。
2−4 口内撮影補助具の変形例3
図9及び図10を参照して、本実施形態の変形例3に係る口内撮影補助具43を説明する。口内撮影補助具43は、上述した口内撮影補助具3と同種の構成要素を備えている。
口内撮影補助具43の本体431は、透明又は半透明の樹脂成型品である。したがって、口内撮影装置5の撮影領域は、窓部433Aから見える範囲よりも更に広がり、より広い視野を得ることができる。また、本体431の内径は、端部432から端部433に向かって僅かに小さくなっており、これにより、口内撮影補助具43の樹脂成型が容易になる。
図10に示すように、目盛り437は本体431の内周面に形成され、これにより本体431の外周面を滑らかにすることができる。目盛り437は、本体431の内周面から突出する突起でもよいし、内周面に表示又は塗布されたマークでもよい。
図9に示すように、鍔部434の外縁は上下方向に長い楕円状をなし、これにより口内撮影補助具43を判定対象者7の口唇に対して容易に位置決めすることができる。また、鍔部434の外縁は、端部433に向かって突出し又は他の部分よりも肉厚に形成されている。これにより、鍔部434の材料の量及びコストを減らしながら必要な強度を確保している。
2−5 口内撮影補助具の他の変形例
本体31は、端部32から端部33に亘って実質的に同じ内径を有している必要はない。例えば、本体31は、端部32に向かうにつれて内径が拡大するように構成されてもよい。かかるラッパ状の本体31により、複数の口内撮影補助具3を重ねることが可能となり、輸送や保管のための空間を削減することができる。
また、撮像デバイス57として、スマートフォン又はタブレット端末に搭載されたカメラが採用されてもよい。このようなカメラと口内撮影補助具3(開口32A)との位置関係を固定するために、本体31又は鍔部34に枠やクリップを設けてもよい。例えば、口内撮影補助具3は、スマートフォンを上縁又は横縁から挟み込むためのクリップや、スマートフォンの角部に押し当てるためのL字状の枠を備えていてもよい。
2−6 口内撮影補助具の包装例
口内撮影補助具3は、滅菌され、図11のように、識別子91が表示された袋9で個別に包装されてもよく、これにより口内撮影補助具3の衛生的な管理が可能となる。なお、識別子91は、口内撮影補助具3上に表示されてもよい。
識別子91は、例えば口内撮影補助具3の製品IDを含む識別情報を含んでいる。識別子91としては例えばバーコード及びRFタグが挙げられるが、口内撮影装置5による読取り及び医療装置1の医療機関での使用を考慮すれば、バーコードが好ましい。バーコードとしては、一次元バーコード、二次元バーコードのいずれをも利用可能である。
例えば、口内の撮影前に、撮影デバイス57で識別子91を撮影し、袋9内の口内撮影補助具3の識別情報を口内撮影装置5に読み込むことで、該当する口内撮影補助具3のロット情報を確認することができる。これにより、口腔に触れることによる患者への有害事象が生じた場合でもトレーサビリティを担保することができ、また、口内撮影補助具3の再利用を検出することも可能となるため、それによる汚染及び二次感染を防止し、衛生面で安全性を確保することができる。
3−1 口内撮影装置
図12−図20を参照して、口内撮影装置5を詳細に説明する。
口内撮影装置5は、撮像デバイス、演算装置及び記憶装置を含むコンピュータである。ここでは、口内撮影装置5が1台のコンピュータで構成されていることを想定しているが、複数台のコンピュータで構成されていてもよい。例えば、遠隔画像診断では、撮影機能と判定機能とが別個のコンピュータにより実行されてもよい。口内撮影装置5は、図13に示すように、撮像デバイス57、演算装置の一例としての中央処理装置(CPU)51、記憶装置の一例としてのランダムアクセスメモリ(RAM)52及び読み出し専用メモリ(ROM)53、通信インターフェイス54、入力デバイス55、出力デバイス56及び光源58を備える。
通信インターフェイス54は、有線又は無線の通信モジュールであり、例えばアプリケーションプログラム及び判定アルゴリズムの取得及び更新、並びに、撮影された画像の回収(送信)のために利用される。無線の通信インターフェイスとしては、例えば、Wi−Fiのような無線LAN規格、BLUETOOTH(商標)のような近距離無線通信規格、第3世代・第4世代移動通信規格のいずれかを満たす機器が想定されているが、これに限られない。
入力デバイス55は、ユーザ入力を受け付ける入力装置の一例であり、例えば図12に示すような各種の操作ボタン及び操作キーである。あるいは、入力デバイス55は、タッチパネルやマイクロフォン、操作ダイヤル、スタイラスなどの他の入力手段でもよい。入力デバイス55は口内撮影装置5の本体(筐体)に配置されてもよいし、例えば撮像デバイス57に配置されてもよい。
出力デバイス56は、判定結果を出力する出力装置の一例であり、例えばディスプレイ、スピーカ、プリンタである。
撮像デバイス57は画像を取得する。この実施形態では、撮像デバイス57において取得する画像として動画像を想定している。取得される画像サイズは例えば640X480ピクセルで、フレームレートは例えば30fpsで足りる。ただし、画像サイズ及びフレームレートはこれに限られるものではない。
選択的に又は追加的に、撮像デバイス57は静止画像を撮影可能とされていてもよい。静止画像を撮影する場合、撮像デバイス57は連写機能を有することが望ましいが、これに限られない。
本実施形態では、図12に示すように、撮像デバイス57は、口内撮影装置5の本体(筐体)とは分離し、単独で口内撮影補助具3内に挿入されることが想定されている。撮像デバイス57はまた、口内撮影補助具3の本体31の内周面に対応した外形(例えば円柱形状)を有することが好ましい。
ただし、撮像デバイス57は、例えばスマートフォン又はタブレット端末のように、口内撮影装置5の本体に組み込まれてもよい。
撮像デバイス57は、図示しないオートフォーカス機構を有しており、例えば、レンズの正面に焦点が特定部位に合うように設定されていてもよい。撮像デバイス57はまた、自動で特定部位(例えば咽頭後壁)を認識してそこにフォーカスする機能を有していてもよい。撮像デバイス57は更に、ズーム機能を有しており、例えば、咽頭後壁又は濾胞の寸法に応じて適切な倍率で撮影するように設定されてもよい。
撮像デバイス57の作動中には、光源58から被写体に向かって光が照射されてもよく、これにより良質な画像の確保を図っている。ここで、光源58が照射する光は、可視光でもよいし、例えば近赤外線や赤外線のような非可視光でもよいものとする。また、例えば1つの光源が可視光を照射し、他の光源が近赤外線又は赤外線を照射するように、複数の光源58がそれぞれ特定の範囲の波長の光の照射を担当してもよい。
これに対して、撮像デバイス57は、光源58が発する光を適切に受光し得る種類及び数の受光素子を有しているとよい。例えば、光源58が可視光を発する場合には、撮像デバイス57は、可視光を受光するのに適した受光素子を有し、光源58が非可視光を発する場合には、撮像デバイス57は、非可視光を受光するのに適した受光素子を有していればよい。光源58は、例えば発光ダイオード(LED)又は有機エレクトロルミネッセンス(OEL)でよい。
選択的に、撮像デバイス57の作動中に、出力デバイス56としてのディスプレイに、撮影中の画像と半透明のイラストとが重ねて表示されるようプログラムされていてもよい。ユーザが、イラストとそれに対応する部位(例えば口蓋垂や口蓋扁桃)の画像とが重なるように撮像デバイス57を動かすと、判定のために適切な画像を得ることが可能となる。
ROM53は、口内撮影装置5における各種処理を実行するためのアプリケーションプログラム、及び、特定の疾患の判定ためのアルゴリズムを記憶している。ROM53はまた、撮像デバイス57において取得した画像及び口内撮影補助具3の識別情報、入力デバイス55から入力された各種情報(例えば判定対象者7の情報)、判定結果を記憶してもよい。ROM53は、内蔵タイプでも、例えばUSBメモリ又はMicroSDカードのような着脱可能なタイプでもよいし、更には、外部サーバなどの外部コンピュータの記憶装置の記憶領域をも含んでいてもよい。
CPU51は、ROM53に記憶されたアプリケーションプログラムをRAM52に読み出し、次の処理(a)〜(d)を含む各種処理を実行することができる。なお、撮像デバイス57が取得した画像が1枚の静止画像である場合には、抽出処理は省略されてもよい。
3−2 CPUが実行する主な処理
(a)抽出処理
CPU51は、撮像デバイス57から取得した画像から、所定の条件を満たす少なくとも1枚の静止画像を抽出する。例えば撮像デバイス57が動画像を撮影する場合には、CPU51は、動画像に含まれる複数枚の静止画像の中から少なくとも1枚の静止画像を抽出する。動画像の撮影時には所定のフレームレートで静止画像が記録される。その中には撮影条件が良いものとそうでないものとが含まれるはずである。次の判定処理で用いるための画像として、撮影条件が良いもの数枚を選び出すのである。
例えば、予め多くの同様の画像データを元に、特定の撮影角度、特定のライトの照射具合、特定の視野の広さ、特定部位(例えば咽頭など)の描出位置、特定部位へのフォーカスの程度の全部又は一部を満たすと特定疾患(例えばインフルエンザ)の診断判定の精度が高い、という条件を見出しておき、これを撮影条件の良し悪しの判断基準とする。このような基準が採用される場合には、抽出処理は、例えば図18のように、撮影対象の描出位置に基づいて画像を順位付けし(ステップS31)、特定部位へのフォーカスの程度に基づいて画像を順位付けし(ステップS32)、光の照射状態に基づいて画像を順位付けし(ステップS33)、最後に、総合順位において上位である数枚の画像を選び出す(ステップS34)という手順を経ることになる。追加的に、総合順位の算出前に、視野の広さ又は撮影角度の基準にしたがって画像を順位付けしてもよい。あるいは、抽出処理には、ディープラーニング(深層学習)機能を用いても良い。
(b)判定処理
CPU51は、撮像デバイス57から取得した画像(例えば抽出処理で得た少なくとも1枚の静止画像)及びROM53に記憶された判定アルゴリズムに基づき、特定の疾患の可能性を判定する。特定の疾患は、本実施形態ではインフルエンザである。判定のために、ユーザが入力デバイス55を介して入力した判定対象者7の情報(以下、患者情報という)が併用されてもよい。患者情報は、例えば、年齢、性別、発症からの経過時間、インフルエンザの諸症状(咳、鼻水、寒気ほか)の有無、及び、他のインフルエンザ患者との接触歴を含む。患者情報は、人種や遺伝子情報、日付や季節、位置情報(受診地の緯度経度)及び気象情報(例えば天気、気温など)の全部又は一部を含んでいてもよい。
ここで、判定アルゴリズムは、例えば図17に示す手順で生成されてもよい。
例えばインフルエンザの場合では、まず、医療機関において患者の咽頭画像と、それに付属する、インフルエンザか否かを示す正解ラベルとを収集する(ステップS21)。正解ラベルは、例えば、患者に受けてもらった、スワブによるインフルエンザ迅速検査、PCR検査、ウイルス分離培養検査の結果に基づいて付与される。PCR検査及びウイルス分離培養検査は、結果の判明までに数週間を要するものの、極めて高い正確性を示すため、その結果は正解ラベルとして好適である。また、正解ラベルは、画像データだけでなく、上記の患者情報を含んでいてもよい。
次いで、上記のPCR検査またはウイルス分離培養検査の判定結果を正解としてラベル付けした教師データ(画像データ)を生成する(ステップS22)。この教師データに基づいて機械学習を行い、判定アルゴリズムを生成する(ステップS23)。この判定アルゴリズムは、画像を与えるとその画像がインフルエンザらしいか否かを判定するためのアルゴリズムである。これによって、インフルエンザである可能性を数値化して、例えば「98.5%」と示すことができるようになる。
選択的に、例えば「判定:インフルエンザ陽性」及び「判定:インフルエンザ陰性」のように、陽性又は陰性を判定してもよい。この場合、陽性又は陰性の判定に加えて、判定の信頼性を数値化したり、高中低などの段階評価で示したりしてもよい。あるいは、インフルエンザである確証度合いを、高中低などの段階評価で示してもよい。
(c)出力処理
CPU51は、判定処理の結果を出力する。出力方法の一例は、ディスプレイへの表示、他のコンピュータへの送信である。
(d)口内撮影補助具の識別情報の取得
選択的に、CPU51は、新たな判定に先立ち、その判定に使用するための口内撮影補助具3の識別情報の入力をユーザに要求してもよい。例えばユーザが撮像デバイス57で識別子91を撮影すると、CPU51は、識別子91の画像から、対応する口内撮影補助具3の識別情報を取得する。
次いで、CPU51は、ROM53内の記録を検索し、該当する口内撮影補助具3と一致する記録の有無を調べる。あるいは、CPU51は、外部サーバ上の口内撮影補助具3の使用記録を調べさせてもよい。
一致する記録がない場合、CPU51は、新たな判定を許容する。一致する記録がある場合、CPU51は、該当する口内撮影補助具3は使用済みであると判定する。そして、CPU51は、例えば、ディスプレイにアラームを表示させたり、一連の処理を終了させたりしてもよい。つまり、CPU51は、検索結果に応じて新たな判定を制限することができる。
3−3 口内撮影装置の機能構成
図14は、口内撮影装置5の機能構成を示す。口内撮影装置5は、撮像部61、抽出部62、判定部63、カメラ制御64、記憶部65、入力部66、出力部67及び通信部68を含んでいる。口内撮影装置5のハードウェア構成との対応関係を示せば、撮像部61は撮像デバイス57に、抽出部62、判定部63及びカメラ制御64はCPU51に、記憶部65はROM53に、入力部66は入力デバイス55に、出力部67は出力デバイス56に、通信部68は通信インターフェイス54に、それぞれ対応する。ここで、カメラ制御64は、撮像デバイス57を制御して、オートフォーカス機能及びズーム機能等の諸機能を実現するものである。
その他の機能として、口内撮影装置5は、撮影が行われた時刻を取得する計時機能、撮影が行われた位置情報を取得する位置情報取得機能、当該位置における気象情報を取得する気象情報取得機能を有していてもよい。計時機能は内蔵の時計として実現されてもよいし、外部の時刻サーバにアクセスする通信インターフェイスの一機能であってもよい。位置情報取得機能は例えば全地球測位システム(GPS)として実現されてもよい。気象情報取得機能は、外部の気象サーバにアクセスする通信インターフェイスの一機能であってもよい。
3−4 口内撮影装置の動作例1
図15を参照して、口内撮影装置5の動作例1を説明する。ここでは口内撮影装置5が動画像を撮影する場合の動作を例として挙げる。ただし、口内撮影装置5は静止画像を撮影してもよく、この場合にも口内撮影装置5は同様に動作する。
電源が投入されると、口内撮影装置5は、撮像デバイス57による撮影を開始してディスプレイに表示するとともに、ステップS1において、録画ボタン(入力デバイス55の1つ)が押下されたかどうかを判定する。録画ボタンの押下を確認しないときには、口内撮影装置5は、ステップS1を繰り返す。
録画ボタンの押下を確認すると、口内撮影装置5は、ステップS2において、録画を開始する。併せて、口内撮影装置5は、光源58を点灯させる。ユーザは、判定対象者7の口腔71に口内撮影補助具3を装着し、その後に口内撮影補助具3に撮像デバイス57を挿入する(図1参照)。撮像デバイス57は、口内撮影補助具3内のスライド中にも判定対象者7の口内(口腔内71又は咽頭72)を撮影する。
ステップS3において、口内撮影装置5は、取得した動画像に含まれる複数の静止画像の中から、判定のために適切な静止画像を抽出する。このとき、抽出された静止画像が抽出結果としてディスプレイに表示されてもよい。
口内撮影装置5は、ステップS4において、抽出された静止画像及び判定アルゴリズムに基づいて、特定の疾患らしさを判定し、ステップS5において判定結果を例えばディスプレイに出力する。これにより一連の動作が終了する。
このように、機械学習により生成された判定アルゴリズムを用いて特定の疾患の可能性を評価しているので、高精度の判定結果を期待することができる。
撮影条件の良い画像が判定のために選ばれるため、判定の精度が向上する。
口内撮影装置5が口内撮影補助具3と組み合わせて使用されることで、視野が広く、鮮明な画像を得ることができる。このことは、判定精度の向上に寄与する。
3−5 口内撮影装置の動作例2
図16を参照して、口内撮影装置5の動作例2を説明する。この動作例2は、先に述べた動作例1と同種のステップを含み、更にユーザによる抽出画像の確認ステップ(S14)、患者情報の入力ステップ(S16)、及び総合判定(S17)を含んでいる。
具体的には、口内撮影装置5は、電源が投入されると、録画ボタンの押下を確認し(ステップS11)、録画を開始し(ステップS12)、判定のための画像を抽出する(ステップS13)。そして、口内撮影装置5は、抽出した画像を例えばディスプレイに表示し、ユーザに対して、当該画像を判定のために使用するか否かの確認を求める(ステップS14)。もしユーザが「NO」を選択すると、再度ステップS12,S13を実行し、新たな判定用の画像をユーザに提示する。
ステップS14においてユーザが「YES」を選択すると、口内撮影装置5は、抽出された画像に基づいて特定の疾患らしさを判定する(ステップS15)。
次いで、口内撮影装置5は、ユーザに対して患者情報の入力を求める(ステップS16)。ここで、患者情報は、例えば受診時の体温やワクチン接種の有無といった、定型化されたシンプルな情報である。かかる患者情報は、図9に例示するように、ソフトウェアが一律に処理できる形で入力される。例えば、プルダウンメニューや、半角数字以外を拒否するような入力フォーム設定が利用されてもよい。あるいは、口内撮影装置5は、有線又は無線回線を介して、外部コンピュータ(例えば電子カルテシステム)から患者情報を取得してもよい。なお、ステップS16は、ステップS11に先立って実行されてもよい。
そして、上記の患者情報と、画像に基づく特定の疾患らしさの評価の両方を統合して、全体としてその疾患らしさを計算する(ステップS17)。計算結果は、例えばディスプレイに表示され(ステップS18)、一連の手順が終了する。
このように、口内撮影装置5が、ユーザによる確認済みの画像に基づいて特定の疾病の可能性を評価することで、判定の精度及び信頼性が向上する。
更に患者情報に基づいて判定を行えば、判定の精度及び信頼性が更に向上することが期待される。
3−6 口内撮影装置の動作例3
図19を参照して、口内撮影装置5の動作例3を説明する。この動作例3は、口内撮影補助具3の識別情報を取得する手順(ステップS41)を含んでいる。
具体的には、口内撮影装置5は、電源が投入されると、ステップS41において、例えばディスプレイへの表示を介して、ユーザに対して口内撮影補助具3の識別情報の入力を求める。例えばユーザが撮像デバイス57で袋9上の識別子91を撮影したり、入力デバイス55を介して識別情報を入力したりすると、口内撮影装置5は、口内撮影補助具3の識別情報を取得する。
口内撮影装置5は、識別情報を用いて、当該の口内撮影補助具3のロット情報を調べてもよい。例えば、口内撮影装置5は、ROM53内の記録に当該口内撮影補助具3の製品IDが含まれるかどうかを検索してもよいし、外部コンピュータに当該製品IDの有無を調べさせてもよい。
該当する製品IDが内部又は外部の記録にある場合には、口内撮影装置5は、アラームを出力したり、一連の処理を終了させたりしてもよい。アラームとしては、例えば当該の口内撮影補助具3が使用済みである旨のディスプレイへの表示が挙げられる。これにより口内撮影補助具3の再利用を制限し、二次感染の予防を含む口内撮影補助具3の安全性を高めている。また、口内撮影補助具3とそれを利用した判定対象者7とを1対1に対応させることが可能になるため、将来における追跡調査が容易になる。
その後、口内撮影装置5は、ステップS42において口内の撮影を行う。ここで、口内の撮影処理は、上述した動作例1,2と同じでもよいし、追って述べる手順で行われてもよい。そして、口内撮影装置5は、ステップS43において特定の疾患らしさを判定し、ステップS44において判定結果を出力し、一連の処理を終了する。
3−7 口内撮影の他の例
図20を参照して、口内撮影の他の手順を説明する。ここで述べる手順は、上述した動作例1〜3における画像取得手順に代替可能できる。また、この手順は、機械学習用の訓練データの収集のために利用できる。
まずステップS51において、口内撮影装置5は患者登録を行う。患者登録は、例えばユーザが口内撮影装置5に入力し又は撮影した患者IDを記録することで行われる。
次いで、ステップS52において、口内撮影装置5は画像を取得する。ここでいう画像は静止画像であり、例えば、撮像デバイス57において撮影された画像の中から、所定の時間間隔(例えば1秒ごと)に抜き出された一組の静止画像で構成されてもよい。
そして、ステップS53において、口内撮影装置5は、取得した画像を例えばディスプレイに表示し、ユーザに確認を求める。ステップS54においてユーザから承認が得られると、口内撮影装置5は、ステップS55において承認された画像を保存し、一連の撮影処理を終了する。ユーザの承認が得られない場合には、ステップS52に戻って再び画像を取得する。
以上、本発明の代表的な実施形態について説明したが、本発明はこれらに限定されるものではなく、種々の設計変更が可能であり、それらも本発明に含まれる。上記のように、例えば、溶連菌感染症、アデノウイルス感染症、EBウイルス感染症、マイコプラズマ感染症等、咽頭又は口腔内の所見に差が出る疾患の判定のために適用することもできる。
1・・・医療装置、
3,13,23,43・・・口内撮影補助具、
5・・・口内撮影装置、
31,131,231,431・・・本体、
34,134,234,434・・・鍔部、
35,135,235,435・・・規制部、
37,137,237,437・・・目盛り、
55・・・入力デバイス、
56・・・出力デバイス、
57・・・撮像デバイス、
58・・・光源。

Claims (7)

  1. 口内の画像を取得する撮像デバイスと、
    前記撮像デバイスの被写体に光を照射する光源と、
    所定の疾患の判定ためのアルゴリズムを記憶する記憶装置と、
    演算装置と、を備える口内撮影装置であって、
    前記演算装置は、
    前記画像及び前記アルゴリズムに基づき、前記所定の疾患の可能性を判定する判定処理と、
    前記判定処理の結果を出力する出力処理と、
    を実行することを特徴とする口内撮影装置。
  2. 前記撮像デバイスは前記画像として動画像を取得し、
    前記演算装置は、
    前記動画像に含まれる複数枚の静止画像の中から、所定の条件を満たす少なくとも1枚の静止画像を抽出する抽出処理を更に実行し、
    前記抽出処理の結果に基づいて前記判定処理を実行すること、
    を特徴とする請求項1に記載の口内撮影装置。
  3. 患者情報の入力を受け付ける入力装置を更に備え、
    前記演算装置は、更に前記患者情報に基づいて、前記判定処理を実行すること、
    を特徴とする請求項1又は2に記載の口内撮影装置。
  4. 前記撮像デバイスによって取得された画像及び前記抽出処理の結果のうち少なくとも一方を表示する表示装置
    を更に備えることを特徴とする請求項2に記載の口内撮影装置。
  5. 前記撮像デバイスは、前記口内に装着される筒状の口内撮影補助具内で前記口内の画像を取得し、
    前記記憶装置は、使用済みの口内撮影補助具の識別情報を記録し、
    前記演算装置は、
    新たな判定に使用される口内撮影補助具の識別情報を取得する取得処理と、
    前記新たな判定に使用される口内撮影補助具の識別情報と一致する前記記憶装置の記録の有無を調べる検索処理と、
    前記検索処理の結果に応じて前記新たな判定を制限する制限処理と、
    を更に実行することを特徴とする請求項1〜4のいずれかに記載の口内撮影装置。
  6. 請求項1〜5のいずれかに記載の口内撮影装置と、
    口内に着脱可能に装着される筒状の口内撮影補助具と、を含み、
    前記口内撮影補助具は、
    開口を有する第1端部と、
    前記第1端部とは反対側に位置して、前記口内撮影補助具の内側から前記口内撮影補助具の外側への視野を与える窓部を有する第2端部と、
    を含むことを特徴とする医療装置。
  7. 所定の疾患の判定ためのアルゴリズムを記憶した記憶装置と、演算装置と、を備えるコンピュータに対して、
    撮像デバイスによって取得された口内画像及び前記アルゴリズムに基づき、前記所定の疾患の可能性を判定する判定処理と、
    前記判定処理の結果を出力する出力処理と、
    を実行させるためのプログラム。
JP2019561542A 2017-12-28 2018-12-18 口内撮影装置、医療装置及びプログラム Active JP7267608B2 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2023065907A JP7498521B2 (ja) 2017-12-28 2023-04-13 口内撮影装置、医療装置及びプログラム
JP2024085185A JP2024109854A (ja) 2017-12-28 2024-05-24 口内撮影装置、医療装置及びプログラム

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2017254164 2017-12-28
JP2017254164 2017-12-28
PCT/JP2018/046559 WO2019131327A1 (ja) 2017-12-28 2018-12-18 口内撮影装置、医療装置及びプログラム

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2023065907A Division JP7498521B2 (ja) 2017-12-28 2023-04-13 口内撮影装置、医療装置及びプログラム

Publications (2)

Publication Number Publication Date
JPWO2019131327A1 true JPWO2019131327A1 (ja) 2021-03-04
JP7267608B2 JP7267608B2 (ja) 2023-05-02

Family

ID=67063606

Family Applications (3)

Application Number Title Priority Date Filing Date
JP2019561542A Active JP7267608B2 (ja) 2017-12-28 2018-12-18 口内撮影装置、医療装置及びプログラム
JP2023065907A Active JP7498521B2 (ja) 2017-12-28 2023-04-13 口内撮影装置、医療装置及びプログラム
JP2024085185A Pending JP2024109854A (ja) 2017-12-28 2024-05-24 口内撮影装置、医療装置及びプログラム

Family Applications After (2)

Application Number Title Priority Date Filing Date
JP2023065907A Active JP7498521B2 (ja) 2017-12-28 2023-04-13 口内撮影装置、医療装置及びプログラム
JP2024085185A Pending JP2024109854A (ja) 2017-12-28 2024-05-24 口内撮影装置、医療装置及びプログラム

Country Status (7)

Country Link
US (2) US11523741B2 (ja)
EP (1) EP3714764A4 (ja)
JP (3) JP7267608B2 (ja)
KR (1) KR20200103676A (ja)
CN (1) CN111526778A (ja)
SG (1) SG11202006040YA (ja)
WO (1) WO2019131327A1 (ja)

Families Citing this family (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019198637A1 (ja) * 2018-04-13 2019-10-17 富士フイルム株式会社 画像処理装置、内視鏡システム、及び画像処理方法
JPWO2021002355A1 (ja) * 2019-07-03 2021-01-07
WO2021020187A1 (ja) * 2019-07-26 2021-02-04 知明 久慈 医療システム、医療デバイス及び医療プログラム
JPWO2021085443A1 (ja) * 2019-10-31 2021-05-06
JP2022087967A (ja) * 2020-12-02 2022-06-14 正男 山本 カメラ、呼吸器感染症に関する学習済みモデルの生成方法、呼吸器感染症に関する学習済モデル、呼吸器感染症に関する自動診断方法、並びにコンピュータプログラム
FR3119761B1 (fr) 2021-02-17 2023-06-30 Dental Monitoring KIT d’acquisition
FR3119757B1 (fr) * 2021-02-17 2023-10-06 Dental Monitoring KIT d’acquisition
FR3119756B1 (fr) 2021-02-17 2023-05-19 Dental Monitoring KIT d’acquisition
FR3119755B1 (fr) * 2021-02-17 2023-10-13 Dental Monitoring KIT d’acquisition
FR3119762B1 (fr) 2021-02-17 2023-06-16 Dental Monitoring KIT d’acquisition
CN113077446A (zh) * 2021-04-02 2021-07-06 重庆金山医疗器械有限公司 一种交互方法、装置、设备和介质
JPWO2022230084A1 (ja) * 2021-04-28 2022-11-03
US11382727B1 (en) * 2021-05-19 2022-07-12 Thamer Marghalani Three-dimensional oral imaging system and method
KR20240032748A (ko) * 2021-07-14 2024-03-12 아이리스 가부시키가이샤 처리 장치, 처리 프로그램, 처리 방법 및 처리 시스템
CN118785843A (zh) * 2021-10-27 2024-10-15 阿伊里斯株式会社 处理装置、处理程序以及处理方法
WO2023170788A1 (ja) * 2022-03-08 2023-09-14 アイリス株式会社 補助具、撮影装置、プログラム及び方法
KR102668823B1 (ko) * 2022-08-25 2024-05-22 조정환 반려동물의 구강 관리를 위한 구강 촬영 장치
KR102674263B1 (ko) * 2022-09-05 2024-06-12 조정환 반려동물 구강 영상 제공 시스템

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015213733A (ja) * 2013-10-10 2015-12-03 住友ベークライト株式会社 内視鏡検査用マウスピースおよび脱気防止弁装置
US20170007126A1 (en) * 2014-03-23 2017-01-12 Doc@Home Ltd System for conducting a remote physical examination

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR19990035197U (ko) 1999-06-05 1999-09-06 박운식 내시경용마우스피스
JP2005000631A (ja) * 2002-07-03 2005-01-06 Shiyoufuu:Kk 歯科口腔測色写真システム
JP3959644B2 (ja) * 2003-09-30 2007-08-15 英宏 藤江 歯科診療装置
US7303528B2 (en) * 2004-05-18 2007-12-04 Scimed Life Systems, Inc. Serialization of single use endoscopes
KR200395743Y1 (ko) 2005-06-22 2005-09-13 김동선 마우스피스
JP5250251B2 (ja) * 2007-12-17 2013-07-31 イマグノーシス株式会社 医用撮影用マーカーおよびその活用プログラム
CA2791624A1 (en) * 2010-02-26 2011-09-01 Myskin, Inc. Analytic methods of tissue evaluation
WO2012002564A1 (ja) * 2010-06-29 2012-01-05 株式会社アドバンス 口腔内撮影システム
US8998609B2 (en) 2012-02-11 2015-04-07 The Board Of Trustees Of The Leland Stanford Jr. University Techniques for standardized imaging of oral cavity
US20160287063A1 (en) * 2013-11-22 2016-10-06 Duke University Colposcopes having light emitters and image capture devices and associated methods
WO2016181781A1 (ja) * 2015-05-14 2016-11-17 オリンパス株式会社 内視鏡装置
ES2865298T3 (es) 2015-05-19 2021-10-15 Tyto Care Ltd Sistemas y métodos para la obtención de imágenes de la garganta
CN106491068A (zh) * 2015-09-06 2017-03-15 孟立 一种基于移动终端的口腔摄影系统及方法
US10405754B2 (en) * 2015-12-01 2019-09-10 University Of South Florida Standardized oral health assessment and scoring using digital imaging
IT201700046337A1 (it) 2017-04-28 2018-10-28 Francesco Antoniomaria Garbagnati Strumento per accesso in visione ad organi cavi
WO2019092723A1 (en) 2017-11-12 2019-05-16 Ofek Eshkolot Research And Development Ltd. System and method for determining pathological status of a laryngopharyngeal area in a patient

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015213733A (ja) * 2013-10-10 2015-12-03 住友ベークライト株式会社 内視鏡検査用マウスピースおよび脱気防止弁装置
US20170007126A1 (en) * 2014-03-23 2017-01-12 Doc@Home Ltd System for conducting a remote physical examination

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
SHICHIJO, SATOKI, ET AL.: "Application of Convolutional Neural Networks in the Diagnosis of Helicobacter pylori Infection Based", EBIOMEDICINE, vol. 25, JPN6019034982, 2017, pages 106 - 111, XP055665829, ISSN: 0005011793, DOI: 10.1016/j.ebiom.2017.10.014 *
山田真善、上條憲一、斉藤豊: "形態情報定量化を基盤とする人工知能システムを活用した大腸がんおよび前がん病変発見のためのリアルタイム", 日本消化器病学会雑誌 第114巻臨時増刊号(大会), JPN6022048120, 15 September 2017 (2017-09-15), pages 498, ISSN: 0004920423 *

Also Published As

Publication number Publication date
JP2023089157A (ja) 2023-06-27
JP7267608B2 (ja) 2023-05-02
CN111526778A (zh) 2020-08-11
JP7498521B2 (ja) 2024-06-12
WO2019131327A1 (ja) 2019-07-04
JP2024109854A (ja) 2024-08-14
KR20200103676A (ko) 2020-09-02
US11523741B2 (en) 2022-12-13
US20230047709A1 (en) 2023-02-16
US20210059534A1 (en) 2021-03-04
EP3714764A4 (en) 2021-06-30
SG11202006040YA (en) 2020-07-29
EP3714764A1 (en) 2020-09-30

Similar Documents

Publication Publication Date Title
JP7267608B2 (ja) 口内撮影装置、医療装置及びプログラム
US11676705B2 (en) Tracking wound healing progress using remote image analysis
US10991096B2 (en) Utilizing personal communications devices for medical testing
US11087467B2 (en) Systems and methods for urinalysis using a personal communications device
US20130177222A1 (en) Systems, methods and computer readable storage media storing instructions for generating an image series
US20180028108A1 (en) Digital wound assessment device and method
CN109935316B (zh) 医疗辅助系统、信息终端装置、患者图像数据取得方法
US20200066394A1 (en) Medical image management system, medical image acquisition apparatus, medical image data file acquisition method and medical image management server
WO2019131328A1 (ja) 口内撮影補助具、及びその口内撮影補助具を含む医療装置
KR20200068992A (ko) 전자 차트 관리 장치, 전자 차트 관리 방법 및 기록 매체
JP4885518B2 (ja) カプセル型内視鏡システムおよびカプセル型内視鏡情報処理方法
KR20080087965A (ko) 피검사자의 설진 영상을 스스로 촬영할 수 있는 방법 및 그장치
JP5753986B2 (ja) 身元確認支援システム
KR20200059535A (ko) 전자 차트 관리 서버, 전자 차트 관리 방법 및 기록 매체
JP7547057B2 (ja) 医療用画像処理装置、医療用画像処理装置の制御方法、及びプログラム
JP7104913B2 (ja) 撮像装置と撮像プログラムと画像判定装置と画像判定プログラムと画像処理システム
WO2021002355A1 (ja) インフルエンザウイルス感染症を治療するための医薬組成物
JP2007275117A (ja) 放射線画像読取装置
WO2023073844A1 (ja) 処理装置、処理プログラム及び処理方法
KR102691173B1 (ko) 모바일 사용자 단말을 이용한 치과 임플란트 및 골이식재 정보 공유 기반 플랫폼 서비스 제공 방법 및 그 장치
WO2023286199A1 (ja) 処理装置、処理プログラム、処理方法及び処理システム
JP2023004843A (ja) 口角鈎器
Bilo et al. Forensic Photography in Suspected Child Abuse

Legal Events

Date Code Title Description
AA64 Notification of invalidation of claim of internal priority (with term)

Free format text: JAPANESE INTERMEDIATE CODE: A241764

Effective date: 20200925

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20201105

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20201113

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20211202

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20221115

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20230110

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230209

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230314

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230413

R150 Certificate of patent or registration of utility model

Ref document number: 7267608

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150