JP6940880B2 - 異常を識別するための皮膚検査装置 - Google Patents

異常を識別するための皮膚検査装置 Download PDF

Info

Publication number
JP6940880B2
JP6940880B2 JP2018562094A JP2018562094A JP6940880B2 JP 6940880 B2 JP6940880 B2 JP 6940880B2 JP 2018562094 A JP2018562094 A JP 2018562094A JP 2018562094 A JP2018562094 A JP 2018562094A JP 6940880 B2 JP6940880 B2 JP 6940880B2
Authority
JP
Japan
Prior art keywords
skin
temperature
motomeko
transparent panel
image capture
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2018562094A
Other languages
English (en)
Other versions
JP2019516521A (ja
Inventor
マーフィー,クリス
コーリー,ギャビン
キアージー,サイモン
Original Assignee
ブルードロップ メディカル リミテッド
ブルードロップ メディカル リミテッド
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ブルードロップ メディカル リミテッド, ブルードロップ メディカル リミテッド filed Critical ブルードロップ メディカル リミテッド
Publication of JP2019516521A publication Critical patent/JP2019516521A/ja
Application granted granted Critical
Publication of JP6940880B2 publication Critical patent/JP6940880B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/44Detecting, measuring or recording for evaluating the integumentary system, e.g. skin, hair or nails
    • A61B5/441Skin evaluation, e.g. for skin disorder diagnosis
    • A61B5/445Evaluating skin irritation or skin trauma, e.g. rash, eczema, wound, bed sore
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0002Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network
    • A61B5/0015Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network characterised by features of the telemetry system
    • A61B5/0022Monitoring a patient using a global network, e.g. telephone networks, internet
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0077Devices for viewing the surface of the body, e.g. camera, magnifying lens
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/01Measuring temperature of body parts ; Diagnostic temperature sensing, e.g. for malignant or inflamed tissue
    • A61B5/015By temperature mapping of body part
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/103Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/1032Determining colour for diagnostic purposes
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/103Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/1036Measuring load distribution, e.g. podologic studies
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/44Detecting, measuring or recording for evaluating the integumentary system, e.g. skin, hair or nails
    • A61B5/441Skin evaluation, e.g. for skin disorder diagnosis
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/44Detecting, measuring or recording for evaluating the integumentary system, e.g. skin, hair or nails
    • A61B5/441Skin evaluation, e.g. for skin disorder diagnosis
    • A61B5/442Evaluating skin mechanical properties, e.g. elasticity, hardness, texture, wrinkle assessment
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/44Detecting, measuring or recording for evaluating the integumentary system, e.g. skin, hair or nails
    • A61B5/441Skin evaluation, e.g. for skin disorder diagnosis
    • A61B5/443Evaluating skin constituents, e.g. elastin, melanin, water
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/44Detecting, measuring or recording for evaluating the integumentary system, e.g. skin, hair or nails
    • A61B5/441Skin evaluation, e.g. for skin disorder diagnosis
    • A61B5/447Skin evaluation, e.g. for skin disorder diagnosis specially adapted for aiding the prevention of ulcer or pressure sore development, i.e. before the ulcer or sore has developed
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/72Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7203Signal processing specially adapted for physiological signals or for diagnostic purposes for noise prevention, reduction or removal
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/72Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7235Details of waveform analysis
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/74Details of notification to user or communication with user or patient ; user input means
    • A61B5/746Alarms related to a physiological condition, e.g. details of setting alarm thresholds or avoiding false alarms
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01GWEIGHING
    • G01G19/00Weighing apparatus or methods adapted for special purposes not provided for in the preceding groups
    • G01G19/44Weighing apparatus or methods adapted for special purposes not provided for in the preceding groups for weighing persons
    • G01G19/50Weighing apparatus or methods adapted for special purposes not provided for in the preceding groups for weighing persons having additional measuring devices, e.g. for height
    • GPHYSICS
    • G02OPTICS
    • G02FOPTICAL DEVICES OR ARRANGEMENTS FOR THE CONTROL OF LIGHT BY MODIFICATION OF THE OPTICAL PROPERTIES OF THE MEDIA OF THE ELEMENTS INVOLVED THEREIN; NON-LINEAR OPTICS; FREQUENCY-CHANGING OF LIGHT; OPTICAL LOGIC ELEMENTS; OPTICAL ANALOGUE/DIGITAL CONVERTERS
    • G02F1/00Devices or arrangements for the control of the intensity, colour, phase, polarisation or direction of light arriving from an independent light source, e.g. switching, gating or modulating; Non-linear optics
    • G02F1/01Devices or arrangements for the control of the intensity, colour, phase, polarisation or direction of light arriving from an independent light source, e.g. switching, gating or modulating; Non-linear optics for the control of the intensity, phase, polarisation or colour 
    • G02F1/13Devices or arrangements for the control of the intensity, colour, phase, polarisation or direction of light arriving from an independent light source, e.g. switching, gating or modulating; Non-linear optics for the control of the intensity, phase, polarisation or colour  based on liquid crystals, e.g. single liquid crystal display cells
    • G02F1/132Thermal activation of liquid crystals exhibiting a thermo-optic effect
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2560/00Constructional details of operational features of apparatus; Accessories for medical measuring apparatus
    • A61B2560/02Operational features
    • A61B2560/0223Operational features of calibration, e.g. protocols for calibrating sensors
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2562/00Details of sensors; Constructional details of sensor housings or probes; Accessories for sensors
    • A61B2562/02Details of sensors specially adapted for in-vivo measurements
    • A61B2562/0261Strain gauges
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2562/00Details of sensors; Constructional details of sensor housings or probes; Accessories for sensors
    • A61B2562/02Details of sensors specially adapted for in-vivo measurements
    • A61B2562/0271Thermal or temperature sensors
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2562/00Details of sensors; Constructional details of sensor housings or probes; Accessories for sensors
    • A61B2562/02Details of sensors specially adapted for in-vivo measurements
    • A61B2562/0271Thermal or temperature sensors
    • A61B2562/0276Thermal or temperature sensors comprising a thermosensitive compound
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2562/00Details of sensors; Constructional details of sensor housings or probes; Accessories for sensors
    • A61B2562/04Arrangements of multiple sensors of the same type
    • A61B2562/046Arrangements of multiple sensors of the same type in a matrix array
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2562/00Details of sensors; Constructional details of sensor housings or probes; Accessories for sensors
    • A61B2562/18Shielding or protection of sensors from environmental influences, e.g. protection from mechanical damage
    • A61B2562/185Optical shielding, e.g. baffles
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2576/00Medical imaging apparatus involving image processing or analysis
    • A61B2576/02Medical imaging apparatus involving image processing or analysis specially adapted for a particular organ or body part
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/44Detecting, measuring or recording for evaluating the integumentary system, e.g. skin, hair or nails
    • A61B5/441Skin evaluation, e.g. for skin disorder diagnosis
    • A61B5/444Evaluating skin marks, e.g. mole, nevi, tumour, scar

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • General Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Pathology (AREA)
  • Biophysics (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • Veterinary Medicine (AREA)
  • Dermatology (AREA)
  • Dentistry (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Physiology (AREA)
  • Signal Processing (AREA)
  • General Physics & Mathematics (AREA)
  • Psychiatry (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Artificial Intelligence (AREA)
  • Nonlinear Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Chemical & Material Sciences (AREA)
  • Crystallography & Structural Chemistry (AREA)
  • Optics & Photonics (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)

Description

本発明は、異常を識別するための皮膚検査装置に関する。具体的には、しかし非独占的に、皮膚検査装置は、潰瘍形成を予測するためにヒトの足の裏を熱感知することに関する。
糖尿病患者は、一般に、生涯にわたって、糖尿病性足部潰瘍(DFU)として知られている状態に悩まされる。糖尿病患者は、DFUの発症の指標であり得る皮膚へのいかなる異常な損傷も検出するために、自分の足を日々、検査することが推奨される。しかし、視力低下、移動性の低下、末梢神経障害に起因した感覚低下、および教育の欠如などの制限要因のために、糖尿病患者は、日々の足検査を推奨されたとおりには忠実に守れない結果となる。DFUを早期に識別すると、治療成績の向上および治療費の削減につながり得る。DFUが形成前に検出されると、恩恵はさらに大きいであろう。現在のところ、最良実施は、視覚的に足を検査して、足治療医に定期的に報告することである。
温度監視は、DFU形成を予測する既知の方法である。反対の足上の同様の点の間に2.2℃の温度差があれば、潰瘍形成の前駆体であり得る炎症を示していることが明らかにされている。患者が両方の足の裏で温度を測って、スポットごとに温度比較が行われ得るのを可能にする温度点プローブは当技術分野で既知である。かかる点プローブは、個々の標的スポットで皮膚温度を測定するために使用され得る。片方の足上のスポットが、もう一方の足上の同じスポットと比べて、温度変化を示していて、その温度変化以上が持続している(華氏4度(2.2℃)以上が、2日以上にわたって上昇している)場合、問題が生じている可能性があることを示しており、患者は医師に相談するように警告される。このアプローチでの問題は、患者の足の同じスポットを何日にもわたって測定する必要があることである。正確に測定するために、患者が同じスポットを識別することは困難である。さらに、比較を行うために温度読取りのログを維持することは患者の責任であり、それは、ヒューマンエラーとなり得る。日々、視覚的に足を検査することは、全ての糖尿病患者に対して推奨される。既に述べたように、これは、低下した視力および移動性のために困難であり得る。現在の温度監視装置では、推奨される日々の視覚的な検査は容易でない。
従来技術の欠点の少なくともいくつかに対処する皮膚検査装置に対する必要性がある。
本開示は、異常を識別するための皮膚検査装置に関し;
本装置は、
検査領域を有する透明パネルと、
標的の皮膚領域の温度を記録するために透明パネル上に提供された温度センサーの配列と、
検査領域内に置かれた標的の皮膚領域の画像を捕捉するための1つ以上の画像捕捉装置であって、捕捉された画像および記録された温度が標的のその皮膚領域内で異常を識別するために解析される、1つ以上の画像捕捉装置と、
1つ以上の画像捕捉装置および温度センサーの配列にその動作を制御するために動作可能に結合されたプロセッサと
を含み、
プロセッサは、潰瘍および/または他の皮膚異常の出現を示す印(indicia)を生成するように動作可能である。
一態様では、温度センサーの配列は、関連付けられたアドレス可能な座標を有する。
別の態様では、プロセッサは、捕捉された画像の1つ以上の領域を1つ以上のアドレス可能な座標に関連付けるために動作可能である。
さらなる態様では、温度センサーは、その間の光透過を容易にするために間隔が空けられている。
一態様では、光経路が、隣接した温度センサーの間に提供される。好都合に、光経路は、2つ以上の隣接した温度センサーの間の領域によって画定される。
例示的な態様では、透明パネル上の重量支持荷重を検出するために動作可能な、歪みゲージが提供される。好都合に、プロセッサは、重量支持荷重を検出する歪みゲージに応答して画像捕捉装置を起動するように構成される。
一態様では、透明パネルがその上に取り付けられる筐体が提供される。好都合に、筐体は、プロセッサおよび1つ以上の画像捕捉装置をその中に収納する。
さらなる態様では、透明パネルは、成人の体重を支持するために十分な強度の踏み板を提供する。
一態様では、透明パネルは剛性である。
代替態様では、透明パネルは、個人が踏んだ場合に足の裏の形状に一致するように動作可能な弾性材料である。
一態様では、温度センサーが、透明パネルの上表面上に提供される。
別の態様では、温度センサーは透明パネル上に取り付けられる。
例示的な配置では、較正手段が提供される。
一態様では、プロセッサは、標的の皮膚領域の温度を複数の別々の位置で測定するために画像捕捉装置によって捕捉された画像を処理するように構成される。
別の態様では、プロセッサは、複数の別々の位置における標的の皮膚領域の温度に基づいて、温度データセットを生成するように構成される。
さらなる態様では、温度データセットは、温度センサーの配列によって記録された温度を含む。
例示的な態様では、プロセッサは、温度データセット内の温度値を標的の捕捉された画像上の位置と関連付けるように構成される。
一態様では、プロセッサは、温度データセットおよび捕捉された画像に関して解析を実行するように構成される。
別の態様では、解析では、捕捉された画像の同様の点で温度を比較する。
さらなる態様では、プロセッサは、捕捉された画像の特定の位置における潰瘍および/または他の皮膚異常の出現を示す印を生成するように動作可能である。
一態様では、印は温度データセットを含む。
別の態様では、プロセッサは、過度の皮膚肥厚(callous)、水疱、水分、および変色の少なくとも1つを含む、捕捉された画像上の領域を検出するように構成される。
さらなる態様では、警告を生成するための警告機構が提供される。好都合に、警告機構は、警告を遠隔エンティティに電気通信ネットワーク経由で伝達するように動作可能である。
一態様では、画像捕捉装置は、入力に応答して画像を捕捉するようにトリガーされる。好都合に、画像捕捉装置は、検査領域上に置かれている足に応答して画像を捕捉するようにトリガーされる。
さらなる態様では、温度センサーは、1cmあたりほぼ1つの間隔を置かれる。好都合に、温度センサーの密度は、1cmあたり0.5〜6の間の範囲である。一例では、各温度センサーは、0.1mm〜4mmの範囲の直径を有する。
別の態様では、透明パネルは、ガラス、複合材料、ポリカーボネートまたは他のプラスチック材料を含む。
さらなる態様では、1つ以上の較正構成要素が提供される。
例示的な態様では、光源が提供される。
一態様では、画像捕捉装置の視野に入る光強度を変更するために光フィルタが提供される。
別の態様では、光源は既知の強度および色の1つ以上のLEDを含む。
さらなる態様では、透明パネル上のグレアを低減するために1つ以上の拡散フィルムが提供される。
一態様では、足型に形成されたパネルが提供される。
一態様では、標的の画像を捕捉するために複数の画像捕捉装置が使用される。
一態様では、視野内に重複する領域をもつ、2つ以上の画像捕捉装置が提供される。
別の態様では、較正標的が、重複する視野内に配置される。
一態様では、光センサーが画像捕捉装置の視野内に提供される。
別の態様では、光センサーからの出力は、画像捕捉装置の動作設定を変更するためにプロセッサによって使用される。
さらなる態様では、光センサーからの出力は、周囲光の影響を除去するために後処理アルゴリズムによって入力として使用される。
別の態様では、透明パネルの温度を感知するために熱センサーが提供される。
一態様では、1つ以上の遮光板が、グレアを生じる光線の少なくとも一部を遮断するように構成される。
一態様では、1つ以上の遮光板が選択的に調整可能である。好都合に、1つ以上の遮光板の寸法、配向、構成または位置が選択的に調整可能である。
本開示は体重計にも関し、本体重計は、
個人の体重を計算するための手段と、
異常を検出するための皮膚検査であって、
検査領域を有する透明パネルと、
標的の皮膚領域の温度を記録するために透明パネル上に提供された温度センサーの配列と、
検査領域内に置かれた標的の皮膚領域の画像を捕捉するための1つ以上の画像捕捉装置であって、捕捉された画像および記録された温度が標的のその皮膚領域内で異常を識別するために解析される、1つ以上の画像捕捉装置と、
1つ以上の画像捕捉装置および温度センサーの配列にその動作を制御するために動作可能に結合されたプロセッサであって、潰瘍および/または他の皮膚異常の出現を示す印を生成するように動作可能である、プロセッサと
を含む、装置とを含む。
これらのおよび他の構成は、本教示の理解を支援するために提供されている以下の図面を参照して、より良く理解されるであろう。
本教示は、ここで、添付の図面を参照して説明される:
本開示に従った皮膚検査装置を示す。 図1の装置の詳細のグラフィック表現である。 図1の装置の詳細のブロックレベル図である。 同様に本教示に従う、別の皮膚検査装置を示す。 図4の皮膚検査装置の詳細を示す。 同様に本教示に従う別の皮膚検査装置を示す。 本教示に従った皮膚検査装置の例示的な詳細を示す。 本教示に従った皮膚検査装置の例示的な詳細を示す。 本教示に従った皮膚検査装置の例示的な詳細を示す。 本教示に従った皮膚検査装置の例示的な詳細を示す。 同様に本教示に従う別の皮膚検査装置を示す。 本教示に従った皮膚検査装置の例示的な構成要素を示す。 本教示に従った皮膚検査装置によって実行される例示的なステップを詳述する流れ図である。 本教示に従った皮膚検査装置によって実行される例示的なステップを詳述する流れ図である。 本教示に従った皮膚検査装置によって実行される例示的なステップを詳述する流れ図である。 温度データだけを使用した視覚化表現である。 温度データおよび標的の画像を組み合わせた視覚化表現である。 温度データおよび標的の画像を組み合わせた視覚化表現である。 本教示に従った皮膚検査装置の例示的な読出し回路を示す。 本教示に従った皮膚検査装置の別の例示的な読出し回路を示す。 本教示に従った皮膚検査装置の例示的な詳細を示す。
本発明は、ここで、いくつかの例示的な皮膚検査装置を参照して説明される。例示的な皮膚検査装置は、本教示の理解を支援するために提供されており、いかなる形でも制限として解釈すべきでないことが理解されよう。さらに、任意の1つの図を参照して説明される要素または構成要素は、本教示の精神から逸脱することなく、他の図のそれらまたは他の等価要素と置き換えられ得る。説明を簡潔かつ明瞭にするために、適切であると考えられる場合は、参照番号が、対応するかまたは類似の要素を示すために、図面間で繰り返され得ることが理解されるであろう。
図面を参照すると、本教示に従い異常の形成を識別するための皮膚検査装置100が示されている。本装置100は、検査中の身体の部位と連携するための検査領域を画定する透明パネル102を含む。例えば、検査中の部位は、足、手、腕、脚などであり得る。例示的な配置では、検査中の部位は、図2に示すように、足109の裏である。透明パネル102は、検査中に足109に適合する踏み板を提供する。しかし、他の部位も装置100によって検査され得るので、本教示を足に制限することは意図していない。検査中に足109の皮膚領域の温度を記録するように動作可能な、温度センサー105の配列が、透明パネル102上に提供される。
透明パネル102は、装置100の構成要素をその中に収容する筐体106上で支持される。筐体106は、側壁112がそこから上方に延出して、一緒に中空内部領域113を画定する基部111を含む。1つ以上の画像捕捉装置107が、温度センサーおよび透明パネル102と接触している足109の皮膚領域の画像を捕捉するために、中空内部領域113内に提供される。LED122の形での1つ以上の光源も中空内部領域113内に配置され得る。冷陰極放電ランプ、エレクトロルミネセンスコーティング材料、例えば、テープ、パネル、ワイヤーなど、キセノンまたはハロゲン球などの、LED以外の他のタイプの光源が使用され得る。中央処理装置115も中空内部領域113内に提供されて、以下で詳細に説明するように、装置100の動作を制御するように構成される。
例示的な実施形態では、温度センサー105は、印刷された可撓性電子構成要素として透明パネル102上に提供される。例示的な実施形態では、温度センサー105は、透明パネル102上に直接印刷されるか、または0.01mm PETなどの、後で透明パネル102に付着される、透明なオーバーレイフィルム上に印刷されるかのいずれかである。接触または非接触センサー、RTD、熱電温度計、サーモパイル、サーミスタ、半導体、マイクロボロメータ、感温液晶などであるが、それらに制限されず、任意のタイプの温度センサーが使用され得る。温度センサーは、ほんの一例として説明されている印刷以外の技術を使用してパネル上に提供され得ることが、当業者によって理解されるであろう。温度センサー105の配列は、検査中の身体の部位、すなわち、足109の裏、と容易に接触するように、透明パネル102の上面上に提供される。センサー105およびそれらの接続ワイヤー/配線は、最大限の可視性を透明パネルを通して画像捕捉装置107に提供するような方法で配置される。センサー105は、典型的には、0.5〜2cmピッチのグリッドで配置される。これは、足109の皮膚領域の温度を記録するために十分な解像度を提供することが分かっている。代替配置では、温度センサー105は、透明パネル102の下面に提供される。かかる配置では、パネル102は、IR放射が通過するのを可能にするために赤外線(IR)透過材で作られるか、または孔を含み得る。別の配置では、透明パネル102の部分は、透明パネル102の一方の側から他方への熱伝導を容易にするために高伝導性材料で作られ得、それにより透明パネル102の下面上の温度センサー105が、透明パネル102の上面上の温度を測定し得る。
透明パネル102は、成人の体重を支持するのに十分な強度を有するように構成される。透明パネル102は、ガラス、複合材料、ポリカーボネートもしくは他のプラスチック材料、または同様のものなどの、剛性材料であり得る。足109は、様々な輪郭、例えば、アーチ、をもつ3次元形状であり、足109の裏全体が温度センサー105と接触するのではない。温度センサー105と足109との間の接触を改善するために、パネル102は、足109の裏の形状に適合する可撓性または弾性材料から製造され得る。透明なシリコーンなどの材料が、光透過性および弾力性の両方があるので、使用され得る。例えば、パネルは、ユーザーの足109のアーチの形状に一致するように適合し得る。これは、温度センサーとのさらなる接触を可能にする。例示的な配置では、温度センサー105と接触している足の領域を強化するために、パネルは、足と係合するための1つ以上の構成を含み得る。例えば、1つ以上の構成は、1つ以上の窪みもしくは1つ以上の突起、または窪みと突起の組合せを含み得る。当業者によって理解され得るように、類似の特性をもつ他の材料が使用され得るので、本教示をシリコーンに制限することは意図していない。温度センサー105は、次いで、上で概説したのと同じ方法で、この層の上に印刷できる。
剛性の透明パネル102が使用される場合、温度センサー105は、画像捕捉装置107に対して同じXY位置に配置される。しかし、弾性パネル102の場合、温度センサー105は、わずかにXおよびY方向に、かつもっと劇的にZ方向にシフトし得る。この配置では、CPU115は、捕捉された画像をスキャンして、温度センサー105の位置を自動的に識別し、次いで更新された位置を後続の処理ステップで使用し得るアルゴリズムを適用するように構成され得る。
精度を改善するために様々な較正特徴が装置100に組み込まれ得る。精度を最大限にするために、装置100は、環境光、光の温度および視野角の捕捉された色への影響を軽減するための特徴を含み得る。様々な較正技術が、これらの影響を軽減するために使用され得る。これに加えて、画像捕捉装置107のための「ビュー領域」と考えられ得る中空内部領域113内の照明環境を制御するために様々な方法が使用できる。較正標的が、複数カメラ構成の装置で使用され得る。これは、輝度および色の再現の一致を可能にし得る。別の選択肢は、マスタースレーブカメラ構成を使用して、複数のカメラにわたる設定を一致させることである。別の潜在的な構成は、視野内に重なり合う領域をもつ2つ以上のカメラ、およびこの重なり部分に配置された較正標的を使用することである。
本発明に従った皮膚検査装置の一実施形態をここで、使用時において説明する。足109の裏を検査するために、ユーザーは装置100の透明パネル102に乗る。ユーザーの足109の裏が温度センサー105と接触して、温度センサーに接触する足の裏上の皮膚領域の温度が記録されるのを可能にする。温度センサー105は、透明パネル102上にグリッド構成で配置され、それにより、足109の裏上の複数の別々の位置で温度の十分な測定を行うことができる。温度センサー105および検査中の足109の裏のデジタル写真画像が画像捕捉装置107によって撮られる。温度センサー105の間隔は、足109の裏の高解像度デジタル写真が捕捉できるようなものである。温度センサー105の配列は、関連付けられたアドレス可能な座標を有する。CPU115は、捕捉された画像の1つ以上の領域を1つ以上のアドレス可能な座標と関連付けるように動作可能である。温度センサー105は、その間の光透過を容易にするために間隔が空けられている。光経路が、隣接した温度センサー105の間に提供される。光経路は、2つ以上の隣接した温度センサー105の間の領域によって画定され得る。例示的な配置では、画像捕捉装置107に対して可視な皮膚領域を最大限にするために、温度センサー105間の光経路のサイズを最大限にすることが望ましい。画像捕捉装置107に対して可視な皮膚領域は、透明パネル102を通る光透過を塞ぐ温度センサー105の領域に反比例する。このように、温度センサー105によって塞がれる領域を最小限にしながら、光経路の領域を最大限にすることは好都合である。かかる配置は、皮膚のさらなる領域を画像捕捉装置107によって見ることができるので、より多くの異常の検出を促進することが当業者によって理解されるであろう。
1つの例示的な配置では、温度センサーは、1cmあたり1つの間隔が置かれ得る。別の配置では、温度センサーは、1cmあたり0.5〜6の間の範囲で間隔が置かれ得る。例えば、各温度センサー105は、0.1mm〜4mmの範囲の直径を有する。センサーは、電気伝導体108によって相互に接続され得、電気伝導体108によって占有される領域は、温度センサー105間の光経路のサイズを最大限にするために、最小限にすべきであることが理解されるであろう。1つの例示的な配置では、温度センサー105は、行と列を含むマトリックス構成で配置される。電気伝導体108は、行および列に沿って延在して、アドレス可能な温度センサー105を画定する。本教示を、提供される例示的な値に制限することは意図しておらず、例示的な値はほんの一例として提供されることが当業者によって理解されるであろう。
CPU115は、温度センサー105の記録された温度値を含む温度データセットを生成するように構成される。CPU115は、温度データセット内の温度値を標的の捕捉された画像上の位置と関連付けるようにさらに構成される。各温度値は、従って、デジタル画像内の既知の座標または座標の範囲と関連付けられる。温度センサー105は、足109上の様々な点における温度を記録する。片方の足上の点が、もう一方の足上の同じ点と比較して、温度変化を示し、その温度変化以上が持続している(華氏4度(2.2℃)以上が、2日以上にわたって上昇している)場合、CPU115は、DFU問題が生じている可能性があることを示すように構成され得、患者は医師に相談するように警告される。
温度センサー105が、ガラス、プラスチックまたは同様のもので作られた透明パネル102上に配置されている構成では、センサー読取りでこの温度に対してオフセットするために、パネル温度を知ることは好都合であろう。センサー118が透明パネル102上に配置され得るか、またはパネル102を指している近接IRセンサーがパネル温度を取得するために使用され得る。
図4に示すように一連のLED122が、中空内部領域113内に配置され得、環境光条件を無効にするために機能し得る。LED122は、温度センサー105を見るための再現可能な状態を生じる既知の強度および色であり得る。標準的なLED光に加えて、1つ以上の拡散フィルム124が提供されて、LED122に由来する透明パネル102上のグレアを低減し、パネル102の表面全体にわたって均一レベルの照明を提供し得る。グレアを低減する別の代替方法は、標的、画像捕捉装置107、および照明光源の位置を調整することである。グレアを最小限にするために、好ましい配置は、照明光源によって画像捕捉装置107に反射する光の量を最小限にするものである。
グレアを減少させる別の代替方法は、照明光源122からの光線を遮断する遮光板(複数可)123などの1つ以上の構造を提供することであり、照明光源122からの光線は、画像捕捉装置107に直接反射する。遮光板123は好都合に、投じられる影のサイズを最小限にする方法で構築され得、それは、影が、グレアを生じる光線127を遮断するのに十分な大きさであることを確実にする。遮光板123は、グレアを生じる光線127の実質的に全てを遮断するように構成されることを意図する。しかし、いくつかの配置では、遮光板123は、グレアを生じる光線127の一部を選択的に遮断するように構成され得る。遮光板123は、標的が置かれる領域の照明の量が所望のレベルに制御されることを確実にする。このようにしてグレアが所望のレベルに制御される。遮光板123の位置は固定または調整可能であり得る。遮光板を所望の位置へ選択的に移動することを容易にするための機構が提供され得る。遮光板123の寸法は、固定または調整可能であり得る。遮光板123は、選択的に調整可能であり得ることが理解されるであろう。遮光板123の寸法、構成、配向、または位置は、必要に応じて、選択的に調整可能であり得ることが予測される。
ここで、同様に本教示に従った例示的な皮膚検査装置を示す、図6を参照する。この例示的な配置では、筐体106の内部表面に反射する光の量が最小限になるように、筐体106の全ての内部表面が低反射性材料126でコーティングされる。これは、標的に下から反射する外部光の量を低減する。
ここで、同様に本教示に従った例示的な皮膚検査装置を示す、図7A〜図7Bを参照する。ビュー領域119に入る環境光の量を制限するために、ユーザーは、大きくて開いたパネルとは対照的に、足型に形成されたパネル128に足を踏み入れるように指示され得る。足型に形成されたパネル128は、透明な材料で作られ得るが、他方、残りの領域129は不透明であろう。不透明な領域は、環境光がビュー領域119に入るのを許可しない。同様に、足109が足型に形成されたパネル128上に置かれると、それは光がビュー領域に入るのを遮る。装置100が、不透明な保護カバー130を用いて保管されて運ばれるのは有益であり得る。カバー130は、異なる足サイズの「剥がし(peel−away)」部分を有し得る。ユーザーは、必要な部分を剥がして、自分の足のサイズに合わせる。これは、装置に入り得る周囲光の量を制限するであろう。
光センサー134は、装置100のビュー領域119内に配置され得る。この光センサー134は、それに作用する周囲光の強度を感知できる。かかるセンサーの一例は、Seeed StudioからのGrove Light Sensorである。このセンサーは、光強度および近似のルクス値を検出できる。このセンサーからの出力は、環境光に反応するように画像捕捉装置107設定を変更するためにCPU115によって使用できる。それは、周囲光のセンサー読取りへの影響を取り除くために後処理アルゴリズムに対する入力にもなり得る。光センサー134は、写真画像が撮られているときに、装置100によって起動できる。代替として、光センサー134は、ユーザーがパネル102に乗る前に起動できる。このシナリオでは、ユーザーは、装置100を起動し、それが光強度試験を実行するのを待ってから、パネル102に乗り得る。
パネル102の温度は、温度センサー105の温度に潜在的に影響を及ぼして、誤った温度読取りを与え得る。温度センサーは、足109およびパネル102によって熱的に作用され、パネル102は、図8に示すように、センサー温度を上昇または低下させるように働く。パネル温度102をセンサー温度から分離するために、パネル102自体の温度を知ることは有益である。パネル温度または基準温度は、いくつかの方法で記録できる。この温度値は、温度センサーからの記録された温度値に適用されるアルゴリズムに入力され得る。このアルゴリズムは、記録されたセンサー温度に対するパネル温度の影響を取り除き得る。
1つの方法は、図9に示すように、パネル102に向けられた赤外線温度センサー136を使用する。これは、パネル102の比較的大きい領域がその温度に関して解析できるようにし得る。パネル102の温度が表面全体にわたって連続的でないリスクがあり得る。これを判断するために、いくつかの温度測定がいくつかの温度センサーによって行われ得る。温度を測定する代替方法は、図10に示すように、パネル上に取り付けられたサーミスタまたは熱電温度計138を使用することによる。いくつかのこれらのセンサー138は、パネル全体の温度が連続的であるかどうかを判断するために使用できる。
パネル温度を記録するさらなる代替方法は、温度センサー自体の使用を伴い得る。CPU115は、足から十分に離れているセンサーを識別するためのアルゴリズムを適用し得る。記録された温度値が表面全体にわたって著しく異なる場合、装置は、パネルの温度が連続的でないことをユーザーに警告して、より安定した温度が達成できる場所に移動させるように指示し得る。例えば、装置が暖房器の横、または直射日光下に放置されていたために、温度が連続的でない可能性がある。
前述の方法に追加して、ユーザーの体重によって起動される装置の代わりに、ボタンによって起動される方法があり得る。一旦、押されると、装置100はパネル温度を判断するために温度を読み取り得る。この利点は、患者の足の暖かさがこの温度読取りに影響を及ぼさないことである。この温度読取りに加えて、光強度読取りも行われ得る。
装置100は、所定の機能を実装するようにプログラムされる1つ以上のソフトウェアモジュールを含むことが理解されるであろう。装置100は、図11に示すように、本開示に従って方法を実行するように機能する様々なハードウェアおよびソフトウェア構成要素を含み得る。装置100は、ユーザーインタフェース150、メモリ160と通信するCPU115、および通信インタフェース165を含む。CPU115は、メモリ160にロードして格納できるソフトウェア命令を実行するように機能する。CPU115は、特定の実施態様に応じて、いくつかのプロセッサ、マルチプロセッサコア、または何らかの他のタイプのプロセッサを含み得る。メモリ160は、CPU115によってアクセス可能であり得、それによりCPU115が、メモリ160上に格納された命令を受信および実行するのを可能にする。メモリ160は、例えば、ランダムアクセスメモリ(RAM)または任意の他の適切な揮発性もしくは不揮発性コンピュータ可読記憶媒体であり得る。加えて、メモリ160は、固定または取外し可能であり得、ハードドライブ、フラッシュメモリ、書換型光ディスク、書換型磁気テープ、または前述の何らかの組合せなどの、1つ以上の構成要素または装置を含み得る。
1つ以上のソフトウェアモジュール170は、メモリ160内でコード化され得る。ソフトウェアモジュール170は、プロセッサ115によって実行されるように構成されたコンピュータプログラムコードまたは命令のセットを有する1つ以上のソフトウェアプログラムまたはアプリケーションを含み得る。本明細書で開示するシステムおよび方法の態様のための操作を実行するための、かかるコンピュータプログラムコードまたは命令は、1つ以上のプログラミング言語の任意の組合せで書かれ得る。ソフトウェアモジュール170の実行中、CPU115は、本開示の実施形態に従い、皮膚異常形成の識別に関連した様々な操作を実行するように装置110を構成する。CPU115は、標的の温度を複数の別々の位置で測定するために、画像捕捉装置107によって捕捉された画像を処理するように構成され得る。追加として、CPU115は、温度値に基づいて温度マップを生成するように構成され得る。1つの例示的な配置では、CPU115は、温度マップを、標的の捕捉された画像に重ね合わせるように動作可能である。別の配置では、CPU115は、温度マップおよび捕捉された画像に関して画像解析を実行するように構成される。CPUは、捕捉された画像の同様の点において温度を比較するようにプログラムされ得る。CPU115は、捕捉された画像の画像解析に基づいて、潰瘍および/または他の皮膚異常の出現を示す印を生成するように動作可能であり得る。印は、例えば、出力画像の形であり得る。CPU115は、捕捉された画像上の特定の位置における潰瘍および/または他の皮膚異常の出現を示す印を生成するように動作可能であり得る。別の例では、CPU115は、過度の皮膚肥厚、水疱、水分、および変色の少なくとも1つを含む、捕捉された画像上の領域を検出するように構成される。
データベース185などの、本システムおよび方法の操作に関連した他の情報および/またはデータも、メモリ160上に格納され得る。データベース185は、様々な操作を通して利用される様々なデータ項目および要素を含み、かつ/または保持し得る。データベース185は装置100にローカルに構成されているとして示されているが、ある実施態様では、データベース185および/またはその中に格納された様々な他のデータ要素はリモートに配置され得ることに留意すべきである。かかる要素は、リモート装置またはサーバー−図示せず−上に配置されて、プロセッサにロードされて実行されるために、当業者に周知の方法でネットワークを通して装置100に接続され得る。
さらに、ソフトウェアモジュール170のプログラムコードおよび1つ以上のコンピュータ可読記憶装置(メモリ160など)は、当業者に周知のように、本開示に従って製造および/または分散され得るコンピュータプログラム製品を形成する。
通信インタフェース165も、CPU115に動作可能に接続され、装置110と、外部装置、機械および/または要素との間で通信を可能にする任意のインタフェースであり得る。通信インタフェース165は、データを送信および/または受信するために構成される。例えば、通信インタフェース165は、Bluetooth(登録商標)、WiFi;またはセルラー送受信機、無線モジュール、衛星通信送信機/受信機、光ポートおよび/もしくは装置100を外部装置に接続するための任意の他のかかるインタフェースを含み得るが、それらに制限されない。
ユーザーインタフェース150も、CPU115に動作可能に接続される。ユーザーインタフェースは、スイッチ(複数可)、ボタン(複数可)、鍵(複数可)、またはタッチスクリーンなどの1つ以上の入力装置(複数可)を含み得る。ユーザーインタフェース150は、データ入力を可能にするように機能する。ユーザーインタフェース150は、オン−オフコマンドまたは前述した方法の操作に関連した設定など、ユーザーからのコマンドの捕捉を容易にするように機能する。
ディスプレイ190も、CPU115に動作可能に接続され得る。ディスプレイ190は、ユーザーが様々なオプション、パラメータ、および結果を見るのを可能にする画面または任意の他のかかる提示装置を含み得る。ディスプレイ190は、LEDディスプレイなどのデジタルディスプレイであり得る。装置110は、電源192によって電力供給され得る。警告を生成するために、警告機構195が提供される。警告機構195は、警告を遠隔エンティティに電気通信ネットワーク経由で伝達するように動作可能である。
装置100の例示的な動作を、流れ図200、300A、および300Bを参照して説明する。ブロック202で、ユーザーは透明パネル102に乗る。CPU115に動作可能に結合される歪みゲージ169は、透明パネル102上の重量荷重を感知する(ブロック204)。歪みゲージ169は、ユーザーが安定した位置にある時を判断するように構成される(ブロック206)。測定前チェックが実行される(ブロック208)。CPU115は、LED122を起動する(ブロック210)。透明パネル102と接触している足109の裏上の皮膚領域の温度を記録するために温度センサー105が起動される(ブロック212)。この例示的な実施形態では、2つの画像捕捉装置107が起動されて個人の足109の裏、および足109の裏上の対応する点の温度を記録する温度センサー105の画像を捕捉する(ブロック214)。温度センサー118が透明パネル102の温度を記録する(ブロック216)。この例では、皮膚検査装置110は、個人の体重を捕捉するための体重計としても機能し得る(ブロック218)。画像データ、体重データ、基準温度データ、タイムスタンプが、記録されて、処理のためにCPU115に送信される(ステップ220)。本教示を、提供された例示的なステップ、または必要に応じて修正され得るステップの順序および連続に制限することは意図しないことが理解されるであろう。
流れ図300Aを参照して、例示的なデータ処理アプローチを説明する。CPU115は、画像データ、体重データ、基準温度データ、タイムスタンプを受信する(ブロック302)。画像データがCPU115によって処理される(ブロック304)。この処理は、捕捉された画像をスキャンして、温度センサー105の位置を識別するアルゴリズムをCPU115が適用することを含み得る。捕捉された画像内での温度センサー105の位置が、センサー105によって記録された温度データにリンクされる(ブロック306)。CPU115は、センサー105の記録された温度値に基づいて、温度データセットを生成する(ブロック308)。温度データセットが、データベース185に格納される。基準温度およびオフセットアルゴリズムがCPU115によって温度データセットに適用される(ブロック310)。修正された温度データセットが患者データベースに格納される(ブロック312)。画像データ、体重データ、基準温度およびタイムスタンプもデータベースに格納される(ブロック314)。温度データセット内の温度値がDFUの形成を示していると判断される場合、適切な印がディスプレイ190上に表示されて、その個人に潜在的な潰瘍形成を警告する(ブロック316)。本教示が、提供された例示的なステップ、または必要に応じて修正され得るステップの順序および連続に制限されることは意図しないことが理解されるであろう。例えば、体重データの包含は、前述のデータ処理アプローチでは任意選択であり得る。
流れ図300Bを参照して、代替データ処理アプローチを説明する。ブロック310、312、314および316は、図13Bで同様にラベル付けされたブロックに対応する。ブロック317および318は、代替アプローチを説明する。特徴は、色相解析、ブロブ、コーナー、エッジ解析および他のかかる特徴検出アルゴリズムなどの、当業者に周知の様々なコンピュータビジョン手段によって識別され得る(ブロック317)。特徴は、タグ付けされた特徴のデータベースとの比較を通しても識別され得る。タグ付けされたデータセットは、例えば、ニューラルネットワークを使用する、機械学習アルゴリズムのための訓練セットとしても使用され得る。特徴は、そのサイズ、形状、配向などを含む、足を含み得る。検出され得る他の特徴は、潰瘍、つま先、皮膚肥厚、変色、切り傷、水疱、または同様のものを含み得る。
システムは、視覚的もしくは熱的異常、または両方の組合せを検出するように構成され得る(ブロック318)。視覚的異常は、まず、画像内の足を識別することによって検出され得る。足は次いで、異常な特徴に関して再調査される。熱的異常は、温度データだけを使用することによって、または視覚画像を温度データと組み合わせることによって、識別され得る。足の位置が、視覚画像を使用して決定され得る。足の温度が周囲温度と同様である場合があるので、これは好都合であり、従って、温度データだけを使用して足の位置を判断することは困難であり得る。そのため、足上の点と他方の足上の点との間の比較を実行することは、どの点を比較すべきかを判断することが困難であるので、困難であり得る。
足の画像を温度データセットとリンクすることにより、足上の任意の位置における温度を測定することが可能である。異常は、足上の同等点の間で温度を比較する(対側比較)ことによって検出され得る。異常を検出する他の方法は、平均、最大、最小温度、または任意の他の統計的に生成された数を比較することを含み得る。別の方法は、収集されたデータを、以前に収集されたデータと比較することである。ある患者では、対側の部位間に既存の温度差があり得、これらの場合、温度を以前に記録された温度と比較することが好都合であろう。別の実施形態では、足の前部、踵、母趾などの、局所的温度の比較が実行され得る。
2つの異なる感知モダリティデータセット(熱的および視覚的)を再調査することは、異常の存在を判断するために利用可能な情報のレベルを高めるので、好都合である。いくつかの異常は、データセットの1つにだけ存在し得る。それは、4つの潜在的な結果を与えるので好都合であるが、単一の感知モダリティでは、2つしかない。
Figure 0006940880
システムは、検出された異常のタイプに基づいて警告を変更するように構成され得る。例えば、視覚的な異常が存在せず対側温度上昇によって生成された印は、活動性潰瘍が検出される場合に生成された印とは異なり得る。
つま先、踵、アーチなどの、身体的部位を識別するために画像内の点が使用され得る。画像は、足の幾何学的マップを生成するためにデジタル化され得る。画像の異なる領域が特性に基づいて分類され得る。これらの分類された領域は、両方の足を比較する場合に基準点(複数可)として使用され得る。幾何学的マップは、所与の座標において物理的形成を識別するために使用され得る。従って、幾何学的マップは、他方の足上の同じ領域との正確な比較を可能にする。これは、同様の点における各足からのデータの簡単なマッピングを容易にする。
足の温度は通常、体温よりも低い。多くの場合、足の温度は、周囲温度と同様の温度であり得る。かかる場合、ヒートマップ内でどこが足に対応するかを判断することは不可能である。従って、対側温度比較を実行することは困難であり得る。図14Aは、温度センサー105の配列を使用して記録され得る可能な温度データセットの表示を提供する。足の大部分は、周囲温度と同様であり、従って、温度センサー105から区別するのは不可能である。しかし、ヒートマップ内には温度が上昇した2つの領域がある。温度が異常であるかを判断する主な形態は、対側比較を実行すること、すなわち、それを他方の足上の同じ点と比較することである。
図14Bおよび図14Cは、データセットを組み合わせると、温度データの有用性を高める追加の情報をどのように提供するかを示す。図14Aでは、温度が上昇した2つの領域が(図14Bで示されるように)足の同じ位置に対応するか、または(図14Cで示されるように)それらが異なる位置に対応するかを判断することは不可能である。診断は、この追加の情報に基づいて、健康から不健康に逆転する。図14Bは、温度データを視覚データと組み合わせて、ホットスポット部位が足の同じ位置に対応することを確認するために使用され得る。対側比較では、これは、温度が正常であることを示すであろう。図14Cも温度データを視覚データと組み合わせて、ホットスポットが足の異なる位置にあるかを判断するために使用できる。視覚画像は、ホットスポット部位が足の異なる位置に対応することを確認するために使用され得る。対側比較では、これは、温度は正常でないことを示すであろう。
ここで、本教示に従った皮膚検査装置の例示的な読出し回路を示す、図15を参照する。読出し回路400は、マトリックス構成で示されている温度センサー105の配列と通信する。温度感知は、電圧を読み取ることによって達成される。温度センサー105の配列の各素子は、行選択用に1つ(MuxB)および列選択用に1つ(MuxA)の、2つのスイッチングマルチプレクサを使用して、個別に読み取ることができる。読出し回路400は、ハーフブリッジ回路として構成される。読出し回路500の代替実施形態は、図16に示すフルブリッジ回路のそれである。
単一のアレイ素子の最大読取り速度は、マルチプレクサスイッチング速度、アナログ/デジタル変換器読取り速度ならびに寄生容量および抵抗に起因した信号切換ノイズの関数である。検知システムのノイズおよび温度依存性を最小限にするために、調整回路が使用され得、低域通過フィルタを使用して高周波ノイズを除去し、差動増幅器を使用して信号を増幅して、アナログ/デジタル変換を実行する。
図17は、足109の長さに沿って配置され、そのため温度センサー105の配列の同時サンプリングが生じ得る、例示的な読出し回路400を示す。これは、全体的なスキャン/検査時間を最小限にして、ユーザーに対する不都合を低減する。読出し回路は、センサー105からのデータ読取りを温度値に変換するためにCPU115と通信する。読出し回路400、500およびCPU115の間の接続は、12CまたはSPIなどの、高速デジタルバスであり得、バス接続は、画像捕捉装置107の視野から隠されるべきである。温度センサー105の配列は、行−列構成をもつグリッドで配置される。温度センサー105は、光経路が温度センサー105間に存在するように間隔が空けられて、温度センサー105と接触した足109の裏の画像が捕捉できるようにする。光経路は、2つ以上の隣接する温度センサー105の間のゾーンによっても画定され得る。温度センサー105は、座標を通してアドレス可能であり、センサー105の座標は、捕捉された画像内の1つ以上の画素に対応し得る。CPU115は、検査中の足109の裏のグラフィック領域を温度センサー105の座標にマッピングするように動作可能である。
本発明の範囲から逸脱することなく、前述の実施形態に対して様々な変更が行われ得ることが当業者によって理解されるであろう。このように、教示は、添付の請求項の観点から必要であると考えられる限りにおいてのみ制限されると理解される。例示的な配置では、複数の画像捕捉装置が示されているが、単一の画像捕捉装置が使用され得ることが理解されるであろう。
本発明の範囲から逸脱することなく、前述の実施形態に対して様々な変更が行われ得ることが当業者によって理解されるであろう。このように、教示は、添付の請求項の観点から必要であると考えられる限りにおいてのみ制限されると理解される。例示的な実施形態では、皮膚検査装置100は、個人の体重を計算するための手段を有する体重計に組み込まれ得る。
同様に、含むという用語は、明細書内で使用される場合、述べられた構成、整数、ステップまたは構成要素の存在を指定するために使用されるが、1つ以上の追加の構成、整数、ステップ、構成要素またはそれらのグループの存在または追加を除外しない。

Claims (44)

  1. 異常を識別するための皮膚検査装置であって、
    検査領域を有する透明パネルと、
    標的の皮膚領域の温度を記録するために前記透明パネル上に提供された接触式温度センサーの配列と、
    前記検査領域内に置かれた標的の前記皮膚領域の画像を捕捉するための1つ以上の画像捕捉装置であって、前記捕捉された画像および記録された温度が前記標的の前記皮膚領域内で異常を識別するために解析される、1つ以上の画像捕捉装置と、
    前記1つ以上の画像捕捉装置および接触式温度センサーの前記配列にその動作を制御するために動作可能に結合されたプロセッサと
    を備え、
    前記プロセッサは、潰瘍および/または他の皮膚異常の出現を示す印を生成するように動作可能であり、
    前記接触式温度センサーは、前記接触式温度センサーの間に光経路が存在するように間隔を空けて配置されることにより、前記接触式温度センサーと前記皮膚領域の画像が捕捉されるように構成され、前記光経路は各々2つ以上の隣接した前記接触式温度センサーの間の領域によって画定され、前記接触式温度センサーは座標を介してアドレス可能であり、前記接触式温度センサーの前記座標は前記捕捉された画像の1つ以上のピクセルと対応し、前記プロセッサは前記皮膚の前記捕捉された画像のグラフィック領域を前記接触式温度センサーの前記座標にマッピングするように動作可能である、
    皮膚検査装置。
  2. 前記透明パネル上の重量支持荷重を検出するために動作可能な歪みゲージをさらに備える、請求項1に記載の皮膚検査装置。
  3. 前記プロセッサは、重量支持荷重を検出する前記歪みゲージに応答して前記画像捕捉装置を起動するように構成される、請求項に記載の皮膚検査装置。
  4. 前記透明パネルがその上に取り付けられる筐体をさらに備える、請求項に記載の皮膚検査装置。
  5. 前記筐体が、前記プロセッサおよび前記1つ以上の画像捕捉装置をその中に収納する、請求項に記載の皮膚検査装置。
  6. 前記透明パネルが、成人の体重を支持するために十分な強度の踏み板を提供する、請求項に記載の皮膚検査装置。
  7. 前記透明パネルが剛性である、請求項1に記載の皮膚検査装置。
  8. 前記透明パネルが、個人が乗った場合に足の裏の形状に一致するように動作可能な弾性材料から成る、請求項に記載の皮膚検査装置。
  9. 前記接触式温度センサーが、前記透明パネルの上表面上に提供される、請求項に記載の皮膚検査装置。
  10. 前記接触式温度センサーが、前記透明パネル上に取り付けられる、請求項に記載の皮膚検査装置。
  11. 較正手段をさらに備える、請求項に記載の皮膚検査装置。
  12. 前記プロセッサは、前記標的の前記皮膚領域の前記温度を複数の別々の位置で測定するために前記画像捕捉装置によって捕捉された前記画像を処理するように構成される、請求項に記載の皮膚検査装置。
  13. 前記プロセッサは、前記複数の別々の位置における前記標的の前記皮膚領域の前記温度に基づいて、温度データセットを生成するように構成される、請求項12に記載の皮膚検査装置。
  14. 前記温度データセットは、接触式温度センサーの前記配列によって記録された前記温度を含む、請求項に記載の皮膚検査装置。
  15. 前記プロセッサは、前記温度データセット内の温度値を前記標的の前記捕捉された画像上の位置と関連付けるように構成される、請求項12に記載の皮膚検査装置。
  16. 前記プロセッサは、前記温度データセットおよび前記捕捉された画像に関して解析を実行するように構成される、請求項12に記載の皮膚検査装置。
  17. 前記解析は、前記捕捉された画像の同様の点における前記温度を比較する、請求項16に記載の皮膚検査装置。
  18. 前記プロセッサは、前記捕捉された画像の特定の位置における潰瘍および/または他の皮膚異常の前記出現を示す印を生成するように動作可能である、請求項13に記載の皮膚検査装置。
  19. 前記印は、前記温度データセットを含む、請求項18に記載の皮膚検査装置。
  20. 前記プロセッサは、皮膚肥厚、水疱、水分、および変色の少なくとも1つを含む、前記捕捉された画像上の領域を検出するように構成される、請求項に記載の皮膚検査装置。
  21. 警告を生成するための警告機構をさらに備える、請求項に記載の皮膚検査装置。
  22. 前記警告機構は、前記警告を遠隔エンティティに電気通信ネットワーク経由で伝達するように動作可能である、請求項21に記載の皮膚検査装置。
  23. 前記画像捕捉装置は、入力に応答して画像を捕捉するようにトリガーされる、請求項に記載の皮膚検査装置。
  24. 前記画像捕捉装置は、前記検査領域上に置かれている足に応答して画像を捕捉するようにトリガーされる、請求項に記載の皮膚検査装置。
  25. 前記接触式温度センサーは、1cmあたりほぼ1つ間隔が置かれる、請求項に記載の皮膚検査装置。
  26. 接触式温度センサーの空間的解像度は、1cmあたり0.5〜6の間の範囲である、請求項に記載の皮膚検査装置。
  27. 各接触式温度センサーは、0.1mm〜4mmの範囲の直径を有する、請求項に記載の皮膚検査装置。
  28. 前記透明パネルは、ガラス、複合材料、ポリカーボネートまたは他のプラスチック材料を含む、請求項に記載の皮膚検査装置。
  29. 1つ以上の較正構成要素をさらに備える、請求項に記載の皮膚検査装置。
  30. 光源をさらに備える、請求項に記載の皮膚検査装置。
  31. 前記画像捕捉装置の視野に入る光強度を変更するための光フィルタをさらに備える、請求項に記載の皮膚検査装置。
  32. 前記光源は、既知の強度および色の1つ以上のLEDを含む、請求項30に記載の皮膚検査装置。
  33. 前記透明パネル上のグレアを低減するための1つ以上の拡散フィルムをさらに備える、請求項に記載の皮膚検査装置。
  34. 前記透明パネルは、足型に形成された透明部分と不透明層を有する、請求項に記載の皮膚検査装置。
  35. 前記1つ以上の画像捕捉装置が複数の画像捕捉装置を備え、前記複数の画像捕捉装置は前記視野内に重複する領域をもつ、2つ以上の画像捕捉装置を備える、請求項1に記載の皮膚検査装置。
  36. 較正標的が前記重複する視野内に配置される、請求項35に記載の皮膚検査装置。
  37. 前記1つ以上の画像捕捉装置のうちの1つについて視野内に光センサーをさらに備える、請求項に記載の皮膚検査装置。
  38. 前記光センサーからの前記出力が、前記1つ以上の画像捕捉装置のうちの1つについて前記動作設定を変更するために前記プロセッサによって使用される、請求項37に記載の皮膚検査装置。
  39. 前記光センサーからの前記出力が、周囲光の影響を除去するために後処理アルゴリズムによって入力として使用される、請求項37に記載の皮膚検査装置。
  40. 前記透明パネルの前記温度を感知するための熱センサーをさらに備える、請求項に記載の皮膚検査装置。
  41. グレアを生じる光線の少なくとも一部を遮断するように構成された1つ以上の遮光板をさらに備える、請求項に記載の皮膚検査装置。
  42. 前記1つ以上の遮光板が選択的に調整可能である、請求項41に記載の皮膚検査装置。
  43. 前記1つ以上の遮光板の寸法、構成、配向または位置が選択的に調整可能である、請求項42に記載の皮膚検査装置。
  44. 請求項に記載の皮膚検査装置と、
    個人の前記体重を計算するための手段と
    を備える、体重計。
JP2018562094A 2016-05-23 2017-04-06 異常を識別するための皮膚検査装置 Active JP6940880B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
GB1609031.8 2016-05-23
GB1609031.8A GB2550582B (en) 2016-05-23 2016-05-23 A skin inspection device identifying abnormalities
PCT/EP2017/058294 WO2017202534A1 (en) 2016-05-23 2017-04-06 A skin inspection device for identifying abnormalities

Publications (2)

Publication Number Publication Date
JP2019516521A JP2019516521A (ja) 2019-06-20
JP6940880B2 true JP6940880B2 (ja) 2021-09-29

Family

ID=56369804

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2018562112A Active JP6844865B2 (ja) 2016-05-23 2017-04-06 異常を識別するための皮膚検査装置
JP2018562094A Active JP6940880B2 (ja) 2016-05-23 2017-04-06 異常を識別するための皮膚検査装置

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP2018562112A Active JP6844865B2 (ja) 2016-05-23 2017-04-06 異常を識別するための皮膚検査装置

Country Status (9)

Country Link
US (2) US20190200917A1 (ja)
EP (3) EP3463048B1 (ja)
JP (2) JP6844865B2 (ja)
CN (2) CN109152537B (ja)
AU (2) AU2017271204B2 (ja)
CA (2) CA3024363A1 (ja)
ES (1) ES2965013T3 (ja)
GB (1) GB2550582B (ja)
WO (2) WO2017202535A1 (ja)

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20190021649A1 (en) * 2017-07-24 2019-01-24 Mike Van Snellenberg Device for non-invasive detection of skin problems associated with diabetes mellitus
EP3899463A4 (en) 2018-12-14 2022-12-21 Spectral MD, Inc. SYSTEM AND METHOD FOR HIGH-PRECISION MULTIAPERTURE SPECTRAL IMAGING
WO2020123724A1 (en) * 2018-12-14 2020-06-18 Spectral Md, Inc. Machine learning systems and methods for assessment, healing prediction, and treatment of wounds
AT16533U1 (de) * 2019-06-07 2019-12-15 Grinschgl Andreas Messgerät zur Positionierung des Fußes und zur Messung des Fußabdrucks
CA3170767A1 (en) * 2020-03-06 2021-09-10 Urte Steikuniene System, method, and apparatus for temperature asymmetry measurement of body parts
GB202003754D0 (en) * 2020-03-16 2020-04-29 Thermetrix Ltd Optimising the temperature range of thermochromic materials
KR102535884B1 (ko) * 2020-05-06 2023-05-24 고려대학교 산학협력단 당뇨병성 합병증 모니터링 장치 및 이를 이용하는 당뇨병성 합병증 관리 시스템
KR20220000469A (ko) * 2020-06-26 2022-01-04 삼성전자주식회사 생체 신호 측정을 위한 외부 광 보정 방법, 이를 위한 전자 장치 및 저장 매체
KR102442647B1 (ko) * 2020-07-02 2022-09-13 박기완 족부 궤양 검사 방법 및 장치
US20220151541A1 (en) * 2020-11-16 2022-05-19 Dosepack LLC Computerised and Automated System for Detecting an Allergic Reaction and Managing Allergy Treatment
CN112907571A (zh) * 2021-03-24 2021-06-04 南京鼓楼医院 基于多光谱图像融合识别的目标判定方法
WO2023235628A1 (en) * 2022-06-03 2023-12-07 University Of Central Florida Research Foundation, Inc. System to visualize, measure and track skin abnormalities
GB2620182B (en) 2022-06-30 2024-08-14 Bluedrop Medical Ltd A skin inspection device for identifying abnormalities
JP7446652B1 (ja) 2023-08-08 2024-03-11 株式会社永泰産業 足湯装置及び足湯システム

Family Cites Families (45)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
SE425331B (sv) * 1979-01-17 1982-09-20 Erling Nilsson Anordning for detektering av cirkulationsrubbningar i en patients extremiter pa grundval av extremiteternas hudtemperatur
US4327742A (en) * 1979-10-25 1982-05-04 E-Z-Em Company, Inc. Apparatus for detecting temperature variations over selected regions of living tissue, and method thereof
FR2516779A1 (fr) * 1981-11-25 1983-05-27 Quenneville Yves Feuille composite thermosensible a accentuation des contours pour la thermographie mammaire
US4534365A (en) * 1984-04-05 1985-08-13 Canadian Ursus Rubber Limited Apparatus for evaluating foot condition
US4945919A (en) * 1989-02-10 1990-08-07 Yamaguchi Yakuhin Shokai Ltd. Rhinological diagnostic device
US5526148A (en) * 1994-08-02 1996-06-11 Moffat; Robert J. Apparatus and method for full-field calibration of color response to temperature of thermochromic liquid crystals
US5678566A (en) * 1995-09-13 1997-10-21 Diagnostic Thermographics, Inc. Method and apparatus of thermographic evaluation of the plantar surface of feet
GB9805861D0 (en) * 1998-03-20 1998-05-13 Rolls Royce Plc A method and an apparatus for inspecting articles
US6767330B2 (en) * 2000-05-25 2004-07-27 Salix Medical, Inc. Foot temperature and health monitoring system
CN1780581A (zh) * 2003-02-26 2006-05-31 马尔西奥·马克·奥雷利奥·马丁斯·阿布雷乌 测量生物学参数的仪器和方法
JP4406226B2 (ja) * 2003-07-02 2010-01-27 株式会社東芝 生体情報映像装置
US20050078533A1 (en) * 2003-10-10 2005-04-14 Andrey Vyshedskiy Physiological data recording apparatus for single handed application
EP1530034A1 (en) * 2003-11-05 2005-05-11 Microlife Intellectual Property GmbH An infrared thermometer and a method for determining a temperature
JP2006010320A (ja) * 2004-06-22 2006-01-12 Tama Tlo Kk 温度分布の観測方法、観測装置、及び、観測対象物
WO2006020631A1 (en) * 2004-08-11 2006-02-23 Lehighton Electronics, Inc. Device and handling system for measurement of mobility and sheet charge density in conductive sheet materials
US8548570B2 (en) * 2004-11-29 2013-10-01 Hypermed Imaging, Inc. Hyperspectral imaging of angiogenesis
CN101282687B (zh) * 2005-10-14 2011-11-16 应用研究联盟新西兰有限公司 监测表面特征的方法和装置
US20070132898A1 (en) * 2005-11-04 2007-06-14 Union College Light transmission based liquid crystal temperature sensor
US20070211355A1 (en) * 2006-03-13 2007-09-13 Arcadia Group Llc Foot imaging device
CN2910107Y (zh) * 2006-05-18 2007-06-13 王霁云 糖尿病患者肢端温度测试仪
US8243358B2 (en) * 2006-11-24 2012-08-14 The Hong Kong University Of Science & Technology Constructing planar and three-dimensional microstructures with PDMS-based conducting composite
EP2120688A4 (en) * 2006-12-11 2010-07-21 Tempstat Holding Llc SYSTEM AND METHOD FOR CONTROLLING THE TEMPERATURE OF THE FEET PLANT
US7862598B2 (en) * 2007-10-30 2011-01-04 The Invention Science Fund I, Llc Devices and systems that deliver nitric oxide
PL381431A1 (pl) * 2006-12-29 2008-07-07 Jacek Stępień Termomastograficzny aparat do diagnostyki różnicującej dla celu detekcji patologii piersi u kobiet i zastosowanie termomastograficznego aparatu do diagnostyki różnicującej
US7764324B2 (en) * 2007-01-30 2010-07-27 Radiabeam Technologies, Llc Terahertz camera
US8116429B2 (en) * 2009-01-29 2012-02-14 The Invention Science Fund I, Llc Diagnostic delivery service
US9173568B2 (en) * 2009-02-12 2015-11-03 Ramot At Tel-Aviv University Ltd. Method and system for detecting neuropathy
KR101043976B1 (ko) * 2009-12-15 2011-06-24 데오덴탈 주식회사 구강용 스캐너
CN102804354B (zh) * 2010-03-05 2015-07-08 应用材料公司 气体分布器的多个气体喷嘴的流动性质的测量
US20130194261A1 (en) * 2010-03-10 2013-08-01 Phillip Cummins System For Skin Treatment Analysis Using Spectral Image Data To Generate 3D RGB Model
US10391277B2 (en) * 2011-02-18 2019-08-27 Voxel Rad, Ltd. Systems and methods for 3D stereoscopic angiovision, angionavigation and angiotherapeutics
CA2859989C (en) * 2011-12-23 2020-03-24 Vessix Vascular, Inc. Methods and apparatuses for remodeling tissue of or adjacent to a body passage
US9901297B2 (en) * 2012-02-08 2018-02-27 Biop Medical Ltd. Method and apparatus for tissue disease diagnosis
DE102012101054A1 (de) * 2012-02-09 2013-08-14 T & T Medilogic Medizintechnik Gmbh Vorrichtung zur Fußdiagnostik
CA2907979C (en) * 2012-04-02 2023-09-26 Podimetrics, Inc. Method and apparatus for indicating the emergence of a pre-ulcer and its progression
US9901298B2 (en) * 2012-11-01 2018-02-27 Quaerimus Medical Incorporated System and method for prevention of diabetic foot ulcers using total internal reflection imaging
CN103190895A (zh) * 2012-12-29 2013-07-10 中山市永衡日用制品有限公司 可测脚温的脂肪秤
US20150057562A1 (en) * 2013-08-26 2015-02-26 Podimetrics, Inc. Apparatus for measuring temperature distribution across the sole of the foot
EP3090239A4 (en) * 2014-01-03 2018-01-10 Verifood Ltd. Spectrometry systems, methods, and applications
CN203710555U (zh) * 2014-02-07 2014-07-16 吕纯鹏 一种新型皮肤溃疡治疗装置
DE102014008091A1 (de) * 2014-06-02 2015-12-03 automation & software Günther Tausch GmbH Vorrichtung zur Erfassung von Druckbelastungen und/oder Temperaturdifferenzen für den diabetischen Fuß
CN104077495B (zh) * 2014-07-17 2017-10-17 杜晓松 一种可穿戴无线人体特征信息采集及传输模块、监控系统
WO2016025430A1 (en) * 2014-08-11 2016-02-18 The Board Of Trustees Of The University Of Illinois Epidermal photonic systems and methods
CN104257368A (zh) * 2014-10-13 2015-01-07 天津工业大学 一种睡眠监测及筛查阻塞性睡眠呼吸暂停综合症的装置
CN105078418B (zh) * 2015-09-09 2017-06-30 南京理工大学 基于柔性液晶温度传感器的皮肤温度采集与成像方法

Also Published As

Publication number Publication date
EP4306046A2 (en) 2024-01-17
EP3463049A1 (en) 2019-04-10
AU2017271204A1 (en) 2019-01-17
CA3024344A1 (en) 2017-11-30
CN109414183A (zh) 2019-03-01
CN109152537A (zh) 2019-01-04
JP2019519294A (ja) 2019-07-11
GB2550582B (en) 2020-07-15
JP6844865B2 (ja) 2021-03-17
AU2017271205A1 (en) 2019-01-17
EP3463048A1 (en) 2019-04-10
AU2017271204B2 (en) 2022-08-04
EP3463048B1 (en) 2023-09-13
CA3024363A1 (en) 2017-11-30
CN109152537B (zh) 2023-04-11
GB2550582A (en) 2017-11-29
AU2017271205B2 (en) 2021-05-20
US20190200917A1 (en) 2019-07-04
EP4306046A3 (en) 2024-02-28
CN109414183B (zh) 2022-02-22
JP2019516521A (ja) 2019-06-20
GB201609031D0 (en) 2016-07-06
ES2965013T3 (es) 2024-04-10
WO2017202535A1 (en) 2017-11-30
US20190209076A1 (en) 2019-07-11
WO2017202534A1 (en) 2017-11-30

Similar Documents

Publication Publication Date Title
JP6940880B2 (ja) 異常を識別するための皮膚検査装置
US9955900B2 (en) System and method for continuous monitoring of a human foot
AU2017332437B2 (en) A device and method for thermal imaging of a living mammal body section
CN107233082B (zh) 红外热成像检测系统
CN103188991B (zh) 用于显示生物对象的温度场的方法
CN113226156A (zh) 同侧溃疡和溃疡前期检测方法和设备
US20180132730A1 (en) Ulcer Detection Apparatus and Method with Varying Thresholds
CN109506804A (zh) 一种用于监测温度的柔性热测绘装置
EP4298997A1 (en) A skin inspection device for identifying abnormalities

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200330

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210119

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20210413

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20210615

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210716

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20210803

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20210827

R150 Certificate of patent or registration of utility model

Ref document number: 6940880

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250