TWI524878B - 疾病檢測方法及穿戴式裝置 - Google Patents

疾病檢測方法及穿戴式裝置 Download PDF

Info

Publication number
TWI524878B
TWI524878B TW103131894A TW103131894A TWI524878B TW I524878 B TWI524878 B TW I524878B TW 103131894 A TW103131894 A TW 103131894A TW 103131894 A TW103131894 A TW 103131894A TW I524878 B TWI524878 B TW I524878B
Authority
TW
Taiwan
Prior art keywords
image
pixel intensity
pixel
wearable device
output
Prior art date
Application number
TW103131894A
Other languages
English (en)
Other versions
TW201611772A (en
Inventor
蕭浩明
高憲立
李冠輝
李典儒
Original Assignee
國立臺灣大學
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 國立臺灣大學 filed Critical 國立臺灣大學
Priority to TW103131894A priority Critical patent/TWI524878B/zh
Priority to US14/838,341 priority patent/US10395370B2/en
Application granted granted Critical
Publication of TWI524878B publication Critical patent/TWI524878B/zh
Publication of TW201611772A publication Critical patent/TW201611772A/zh

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/0002—Inspection of images, e.g. flaw detection
    • G06T7/0012—Biomedical image inspection
    • G06T7/0014—Biomedical image inspection using an image reference approach
    • G06T7/0016—Biomedical image inspection using an image reference approach involving temporal comparison
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/0016—Operational features thereof
    • A61B3/0041—Operational features thereof characterised by display arrangements
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
    • A61B3/14—Arrangements specially adapted for eye photography
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/30—Determination of transform parameters for the alignment of images, i.e. image registration
    • G06T7/33—Determination of transform parameters for the alignment of images, i.e. image registration using feature-based methods
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50—Constructional details
    • H04N23/51—Housings
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633—Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
    • H04N23/635—Region indicators; Field of view indicators
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2621—Cameras specially adapted for the electronic generation of special effects during image pickup, e.g. digital cameras, camcorders, video cameras having integrated special effects capability
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/265—Mixing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10016—Video; Image sequence
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10024—Color image
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20016—Hierarchical, coarse-to-fine, multiscale or multiresolution image processing; Pyramid transform
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30004—Biomedical image processing
    • G06T2207/30076—Plethysmography

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Molecular Biology (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Biophysics (AREA)
  • Ophthalmology & Optometry (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • Surgery (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Quality & Reliability (AREA)
  • Radiology & Medical Imaging (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)
  • Geometry (AREA)
  • Image Processing (AREA)

Description

疾病檢測方法及穿戴式裝置
本發明是有關於一種影像處理方法及裝置，且特別是有關於一種疾病檢測方法及穿戴式裝置。
近年來，有一項新型影像處理技術是透過電腦演算法處理影像，對影像在空間或時域上的變化進行分析與處理，揭開一般肉眼所無法察覺或很難觀測到的微小變化。無論是肉眼無法辨識的低振幅動作，甚或血流經過顏面所造成的顏色變化，皆可藉由此項新型影像處理技術，將其凸顯至肉眼可觀察的階段。
目前，此項新型影像處理技術之應用範圍仍在拓展階段，例如在工程實務上，可用於觀測建築物之穩定性；在醫學檢測上，可透過此影像處理來觀察受測者之呼吸與心跳頻率等人體生理動作。然而，上述應用僅針對既有影像做分析處理，其分析結果亦僅止於原影像上，因此使用者只能從既有影像判讀病徵，未能結合所視畫面，實現臨床上的即時疾病檢測。
本發明提供一種疾病檢測方法及穿戴式裝置，藉由將人體表面的細微變化放大並顯示在使用者配載的穿戴式裝置上，可實現臨床疾病檢測。
本發明的疾病檢測方法，適用於具有影像擷取單元及顯示單元的穿戴式裝置。此方法係利用影像擷取單元擷取穿戴式裝置之視野內的多張輸入影像，這些輸入影像包括位置相對應的多個像素。然後，分析這些像素的像素強度在空間或時域上的變化，以放大所屬頻率帶位於特定頻率範圍內的像素強度，並將處理前後的像素強度疊加以產生輸出影像。最後，將輸出影像重疊於穿戴式裝置視野內的即時影像，並將輸出影像顯示於顯示單元，以供疾病檢測。
在本發明的一實施例中，上述分析像素的像素強度在空間或時域上的變化，以放大所屬頻率帶位於特定頻率範圍內的像素強度的步驟包括依據各個像素的像素強度在空間頻率上分佈，將這些像素強度分離為多個頻率帶，然後將特定頻率範圍內的像素強度放大，例如心跳頻率。
在本發明的一實施例中，上述將輸出影像重疊於穿戴式裝置之視野內的即時影像的步驟包括利用影像擷取單元擷取穿戴式裝置視野內的即時影像，並分析輸出影像及即時影像中相對應的至少一個特徵，然後根據各個特徵在輸出影像及即時影像中的位置，將這些特徵對齊，以將輸出影像重疊於即時影像。
在本發明的一實施例中，在上述將像素強度放大以產生 輸出影像的步驟之後，所述方法更重覆上述步驟，以產生放大後的多張輸出影像，接著以這些輸出影像中的某參考影像作為基準，將其他輸出影像中的各個輸出影像減掉此參考影像，以獲得各個像素的像素強度差值，然後依據其他輸出影像中各個像素的像素強度差值的變化方向及變化量，定義向量，並將這些像素的向量疊加以產生總向量，最後則根據總向量的數值是否超過門檻值，判斷輸出影像的變化是否異常。
本發明的穿戴式裝置包括影像擷取單元、顯示單元及處理單元。影像擷取單元係用以擷取穿戴式裝置視野內的多張輸入影像，這些輸入影像包括位置相對應的多個像素。處理單元係耦接影像擷取單元及顯示單元，其包括影像放大模組及影像重合模組。其中，影像放大模組係用以分析影像擷取單元所擷取之輸入影像中像素的像素強度在空間或時域上的變化，以將所屬頻率帶位於特定頻率範圍內的像素強度放大，並將處理前後的像素強度疊加以產生輸出影像。影像重合模組係用以將輸出影像重疊於穿戴式裝置視野內的即時影像，並將輸出影像顯示於顯示單元，以供疾病檢測。
在本發明的一實施例中，上述的影像放大模組包括分離器、濾波器及放大器。其中，分離器係用以依據各個像素的像素強度在空間頻率上分佈，將這些像素強度分離為多個頻率帶。濾波器係用以將頻率帶位於特定頻率範圍外的像素強度過濾或濾除。放大器係用以將特定頻率範圍的像素強度放大。
在本發明的一實施例中，上述的影像重合模組更包括特徵分析器及特徵對齊器。其中，特徵分析器係用以分析影像擷取單元擷取穿戴式裝置視野內的即時影像與輸出影像中相對應的至少一個特徵。特徵對齊器係用以根據各個特徵在輸出影像及即時影像中的位置，將這些特徵對齊，以將輸出影像重疊於即時影像。
在本發明的一實施例中，上述的影像放大模組更重複分析影像擷取單元所擷取之輸入影像中像素的像素強度在空間或時域上的變化，以將所屬頻率帶位於特定頻率範圍內的像素強度放大，並將處理前後的像素強度疊加以產生多張輸出影像。
在本發明的一實施例中，上述的處理單元更包括異常判斷模組，其係以影像放大模組所產生的輸出影像中的某參考影像作為基準，將其他輸出影像中的各個輸出影像減掉此參考影像，以獲得各個像素的像素強度差值，並依據其他輸出影像中各個像素的像素強度差值的變化方向及變化量以定義向量，並將這些像素的向量疊加以產生總向量，以及根據總向量的數值是否超過門檻值，判斷輸出影像的變化是否異常。
在本發明的一實施例中，上述的疾病檢測包括心腦血管疾病、糖尿病自體動靜脈瘻管、週邊血管疾病、心臟衰竭、帕金森氏症之檢測。
基於上述，本發明的穿戴式裝置及其疾病檢測方法係針對穿戴式裝置所擷取影像，依據其空間頻率分佈作分割，將其分為各個不同的頻率帶，然後再針對這些頻率帶，加以時域處理後， 選出特定頻率範圍作分析，藉此放大影像中的細微變化。此放大後的影像可進一步與醫療人員透過穿戴式裝置所看到的病患的即時影像重疊。藉此，可凸顯病徵，並實現臨床疾病檢測。
為讓本發明的上述特徵和優點能更明顯易懂，下文特舉實施例，並配合所附圖式作詳細說明如下。
10‧‧‧穿戴式裝置
12‧‧‧影像擷取單元
14‧‧‧顯示單元
16‧‧‧處理單元
18‧‧‧影像放大模組
182‧‧‧分離器
184‧‧‧濾波器
186‧‧‧放大器
20‧‧‧影像重合模組
202‧‧‧特徵分析器
204‧‧‧特徵對齊器
30‧‧‧輸入影像
32‧‧‧分離空間頻率帶
34‧‧‧時域處理
36‧‧‧疊加重建
38‧‧‧輸出影像
60、62、64、66、100、102、104‧‧‧影像
S22~S26‧‧‧本發明一實施例之疾病檢測方法的步驟
S52~S56‧‧‧本發明一實施例之的影像放大方法的步驟
S82~S86‧‧‧本發明一實施例之影像重合方法的步驟
S92~S96‧‧‧本發明一實施例之影像變化判斷方法的步驟
圖1是依照本發明一實施例所繪製之穿戴式裝置的方塊圖。
圖2是依照本發明一實施例所繪製的疾病檢測方法的流程圖。
圖3是依照本發明一實施例所繪製的影像放大的示意圖。
圖4是依照本發明一實施例所繪製的影像放大模組的方塊圖。
圖5是依照本發明一實施例所繪製的影像放大方法的流程圖。
圖6(a)至圖6(d)是依照本發明一實施例所繪製的影像放大方法的範例。
圖7是依照本發明一實施例所繪製的影像重合模組的方塊圖。
圖8是依照本發明一實施例所繪製的影像重合方法的流程圖。
圖9是依照本發明一實施例所繪製的影像變化判斷方法的流程圖。
圖10是依照本發明一實施例所繪製的影像變化判斷方法的範例。
本發明係結合空間與時間的影像處理技術，將穿戴式裝置所擷取影像中物體的微小變化量，透過影像處理，將其凸顯至肉眼可觀察的階段，並輸出至穿戴式裝置顯示。在顯示放大影像時，本發明進一步將此影像與穿戴式裝置所擷取的即時影像進行特徵分析及比對，以將此影像與醫療人員透過穿戴式裝置所看到的實際影像重疊。藉由在實際物體上顯示放大後的病徵影像，可幫助配戴此穿戴式裝置的醫療人員即時地觀測到病患的病徵，從而實現臨床疾病檢測。
圖1是依照本發明一實施例所繪製之穿戴式裝置的方塊圖。請參照圖1，本實施例的穿戴式裝置10例如是配戴在人類頭部的眼鏡、眼罩、頭燈、頭盔、頭罩等裝置，或是配戴在手上的手錶、手環、手機等裝置。穿戴式裝置10包括影像擷取單元12、顯示單元14及處理單元16，其功能分述如下：影像擷取單元12例如配置在穿戴式裝置10本體的邊緣、中央或其他位置，而用以擷取位於穿戴式裝置10視野內的影像，例如受測病患的影像。影像擷取單元12包括鏡頭、快門、感光元件等組成元件。其中，感光元件例如是電荷耦合元件(Charge Coupled Device，CCD)、互補性氧化金屬半導體(Complementary Metal-Oxide Semiconductor，CMOS)元件或其他元件。其中，當擷取單元12接收到處理單元16所觸發的快門訊號時，即會擷取穿戴式裝置10視野內的影像。
顯示單元14例如是液晶顯示器(Liquid Crystal Display， LCD)、發光二極體(Light-Emitting Diode，LED)顯示器、有機電激發光顯示器(Organic Light Emitting Display，OLED)、電泳動顯示器(Electro-Phoretic Display，EPD)、採用LED光源或雷射光源的微投影顯示器或其他種類的顯示器，其係耦接處理單元16，而可顯示處理單元16輸出的影像。顯示單元14例如是採用透明或半透明的顯示面板，使得配戴穿戴式裝置10的使用者不僅可看到顯示單元14顯示的影像，且能穿透顯示單元14看到顯示單元14後方位於穿戴式裝置10視野內的影像。
處理單元16係耦接至影像擷取單元12與顯示單元14，其例如是具有單核心或多核心的中央處理單元(Central Processing Unit，CPU)，或是其他可程式化之一般用途或特殊用途的微處理器(Microprocessor)、數位訊號處理器(Digital Signal Processor，DSP)、可程式化控制器、特殊應用積體電路(Application Specific Integrated Circuit，ASIC)或其他類似元件或上述元件的組合。在本實施例中，處理單元16可執行電腦程式，藉以實現本發明實施例的疾病檢測方法。
處理單元16係包括影像放大模組18及影像重合模組20。這些模組例如是以邏輯電路元件組成的硬體裝置，而可執行本發明實施例的疾病檢測功能。這些模組也可以是儲存在穿戴式裝置10之儲存媒體(未繪示)中的程式，其可載入處理單元16以執行本發明實施例的疾病檢測功能。以下即舉實施例說明穿戴式裝置10執行疾病檢測功能的詳細步驟。
詳言之，圖2是依照本發明一實施例所繪製的疾病檢測方法的流程圖。請同時參照圖1與圖2，本實施例的方法適用於上述的穿戴式裝置10，以下即搭配圖1中穿戴式裝置10的各項元件，說明本實施例方法的詳細流程。
首先，由處理單元16利用影像擷取單元12擷取位於穿戴式裝置10視野內的多張輸入影像(步驟S22)，這些輸入影像包括位置相對應的多個像素。
接著，由影像放大模組18分析影像擷取單元12所擷取之輸入影像中所述像素的像素強度在空間或時域上的變化，以將所屬頻率帶位於特定頻率範圍內的像素強度放大，並將處理前後的像素強度進行疊加以產生輸出影像(步驟S24)。其中，影像放大模組18係將輸入影像依其空間頻率分佈進行分割，以將其分為不同的頻率帶，再分別進行時域處理後，可過濾不需要的雜訊，並可選出特定感興趣的頻率範圍進行分析。藉此，不僅可減少雜訊，並可避免其他非重要頻率的像素強度也被放大處理，而掩蓋掉所欲觀察之低振幅影像。
舉例來說，圖3是依照本發明一實施例所繪製的影像放大的示意圖。請參照圖3，本實施例係將輸入影像30分離成不同的空間頻率帶32，並選擇特定頻率範圍內的像素強度進行時域處理34，最後將放大後的像素強度疊加重建36，最終獲得輸出影像38。其中，本發明針對像素強度隨時間變化的部份，使用一個放大倍率因子來放大此影像變化量，以確實凸顯微小變化。例如， 將影像強度的波長套用於線性函數或其他非線性函數來計算放大倍率因子，藉此凸顯感興趣之頻率範圍的影像強度，以產生較佳之視覺結果，亦即變化量會有更好的呈現方式。
對於上述影像處理流程，本發明亦提供一套完整的方法與裝置，藉以實現影像放大功能。詳言之，圖4是依照本發明一實施例所繪製的影像放大模組的方塊圖。圖5是依照本發明一實施例所繪製的影像放大方法的流程圖。其中，圖4係進一步繪製圖1中影像放大模組18的細部元件，其包括分離器182、濾波器184及放大器186，以下即搭配圖4中的各項元件，說明圖5中影像放大方法的詳細流程。
首先，由分離器182依據各個像素的像素強度在空間頻率上分佈，將這些像素強度分離為多個頻率帶(步驟S52)。接著，由濾波器184將頻率帶位於特定頻率範圍外的像素強度過濾或濾除(步驟S54)。意即，影像放大模組18僅保留頻率帶位於特定頻率範圍內的像素強度以進行後續放大處理，此特定頻率範圍例如是介於0.4赫茲至4.0赫茲的低頻範圍，藉以放大低振幅影像。
然後，由放大器186將過濾或濾除後之特定頻率帶的像素強度放大(步驟S56)。其中，放大器186例如會針對所選擇頻率帶的像素強度進行時域處理，並選擇合適的倍率因子來與經過時域處理的像素強度相乘，以達到放大效果。其中，上述波長與倍率因子之間例如具有線性關係或其他非線性函數關係，在此不設限。
舉例來說，圖6(a)至圖6(d)是依照本發明一實施例所繪製的影像放大方法的範例。本實施例是以人體頸部測試為例，圖6(a)及圖6(b)的影像60、62分別是在頸部血管舒張及收縮狀態下所擷取的頸部影像。由圖6(a)及圖6(b)的影像60、62中的方框可知，以肉眼觀察受測者時，非常不容易觀察其脈搏起伏，更難以看出血管舒張與收縮狀態之差異。然而，當影像60、62經過上述的影像放大處理後，在血管舒張與收縮過程時，皮膚表面所產生的脈動將會被凸顯出來。甚至是血液流經血管時，各處所產生的細微顏色或動作變化，也都可經由影像中輕易判讀。由圖6(c)及圖6(d)的影像64、66中的方框可知，血管脈動經影像處理後，皮膚表面隆起及凹陷動作變得顯而易見。
同樣以人體頸部測試為例，在另一實施例中，可針對有中風及無中風的病患分別拍攝其頸部影像。這些影像若以肉眼觀察，幾乎看不出其差異。然而，當這些影像經過上述的影像放大處理後，有中風病患之頸部影像中的血管變化將會被凸顯出來，但無中風病患之頸部影像則仍無顯著變化。藉此，醫生經由放大後的影像即可判斷所拍攝使用者是否有中風的可能。
藉由上述方法，即可放大特定頻率範圍的像素強度，以凸顯影像中的低振幅動作或顏色變化，從而幫助醫療人員判斷病徵。
回到圖2的流程，當影像放大模組18產生輸出影像之後，影像重合模組20即會將輸出影像重疊於穿戴式裝置10視野 內的即時影像，並將輸出影像顯示於顯示單元14，以供疾病檢測(步驟S26)。其中，影像放大模組18例如會分析輸出影像與即時影像的特徵並據以將其疊合，從而讓使用者可在所視影像中觀看到放大後的輸出影像。上述的疾病檢測例如是心腦血管疾病、糖尿病自體動靜脈瘻管、週邊血管疾病、心臟衰竭或帕金森氏症等之檢測。此外，本實施例的方法亦可適用於其他非醫療領域，例如測謊、從靜止掩蔽物或移動物體中發現躲藏目標物等，在此不設限。
詳言之，圖7是依照本發明一實施例所繪製的影像重合模組的方塊圖。圖8是依照本發明一實施例所繪製的影像重合方法的流程圖。其中，圖7係進一步繪製圖1中影像重合模組20的細部元件，其包括特徵分析器202及特徵對齊器204，以下即搭配圖7中的各項元件，說明圖8中影像重合方法的詳細流程。
首先，由處理單元16利用影像擷取單元12擷取位於穿戴式裝置10視野內的即時影像(步驟S82)。接著，由特徵分析器202分析影像擷取單元12所擷取的即時影像與輸出影像中相對應的至少一個特徵(步驟S84)。其中，特徵分析器202例如是利用邊緣偵測(edge detection)技術分析即時影像與輸出影像中受測者之頭、頸或五官的輪廓，而辨識出眼睛、鼻子、下巴、耳朵等臉部特徵。之後，特徵對齊器204可利用影像重合技術，根據各個特徵在輸出影像及即時影像中的位置，將這些特徵對齊，以將輸出影像重疊於即時影像(步驟S86)。
藉由將經過分析及放大後的輸出影像與醫療人員當下透過穿戴式裝置10所觀看到之病患即時影像進行重疊，可使病患的病徵以不正常扭曲的方式放大，從而讓醫療人員更清楚地辨識病徵。其中，重疊在即時影像上的輸出影像還可藉由動畫或顏色來顯示或標記，使得醫師所觀看到的病徵呈現出與週邊皮膚不同的態樣。
需說明的是，除了上述將放大處理後的影像與即時影像疊合以協助醫療人員判斷病徵的實施方式外，本發明實施例還可針對放大處理後的影像，找出影像上每一個點的像素變化，並量化其在空間或時域上的變化量。藉由此量化指標，本發明可進一步協助醫療人員快速判斷並早期監控可能病徵。以下則再舉一實施例詳細說明。
圖9是依照本發明一實施例所繪製的影像變化判斷方法的流程圖。請同時參照圖1及圖9，本實施例係藉由影像放大模組18重複分析影像擷取單元12所擷取之輸入影像中像素的像素強度在空間或時域上的變化，以將所屬頻率帶位於特定頻率範圍內的像素強度放大，並將處理前後的像素強度疊加以產生多張輸出影像。針對這些輸出影像，本實施例進一步由處理單元16中的異常判斷模組(未繪示)對這些輸出影像中的像素變化進行量化，以取得量化指標，並據以判斷受測者是否具有罹患特定疾病之風險。
詳言之，異常判斷模組會先以影像放大模組18所產生的 多張輸出影像中的某一張參考影像作為基準，將其他輸出影像分別減掉此參考影像，以獲得各個像素的像素強度差值(步驟S92)。然後，異常判斷模組會依據這些輸出影像中各個像素的像素強度差值的變化方向及變化量，定義一個向量，並將這些像素的向量疊加以產生一個總向量(步驟S94)。最後，異常判斷模組可將此總向量量化為數值，並判斷此數值是否超過門檻值，據以判斷這些輸出影像中的變化是否異常(步驟S96)。
舉例來說，圖10是依照本發明一實施例所繪製的影像變化判斷方法的範例。請參照圖10，本實施例是以受測者的頸部影像為例，假設取時間t1的影像102作為基準點，將時間t0的影像100至時間tn的影像104分別減掉時間t1的影像102，則會得出每張影像中每一點像素強度上之差值。接著，將每張影像的差值，依據其動作變化方向定義一個向量，再將時間t0至tn的影像疊加起來，分別進行各像素點之向量疊加。其中，從總向量之長度與方向，可推論出受測者頸部主要變化量發生之位置、大小、方向，而藉由量化的數值，即可找到與受測者生理或疾病之間的關聯性。例如，可將總向量量化為量化指標，並以1至10的等級顯示，若受測者的等級超過5，即代表變化超過標準，表示受測者可能患有特定疾病之風險。
上述的量化指標可協助醫療人員快速判斷與早期監控可能病患，避免忽略身體上出現的疾病警訊，而可大幅提升治癒的機會。
綜上所述，本發明之疾病檢測方法及穿戴式裝置由於僅需透過攝影機拍攝影像及影像處理即能檢測病徵，擁有非侵入式診斷之優點，且在安全性與便利性上大為提升。若進一步結合穿戴式裝置的特性，將處理後的影像直接顯示在穿戴式裝置上，並與醫療人員觀看到的即時影像重合，則可幫助醫療人員快速判斷病徵。此外，透過制定量化指標，可協助醫療人員快速判斷與早期監控可能病患，避免忽略身體上出現的疾病警訊，而大幅提升治癒的機會。
雖然本發明已以實施例揭露如上，然其並非用以限定本發明，任何所屬技術領域中具有通常知識者，在不脫離本發明的精神和範圍內，當可作些許的更動與潤飾，故本發明的保護範圍當視後附的申請專利範圍所界定者為準。
S22~S26‧‧‧本發明一實施例之疾病檢測方法的步驟

Claims (11)

  1. 一種疾病檢測方法，適用於具有一影像擷取單元及一顯示單元的一穿戴式裝置，該方法包括下列步驟：利用該影像擷取單元擷取該穿戴式裝置之一視野內的多張輸入影像，所述輸入影像包括位置相對應的多個像素；分析所述像素的像素強度在空間或時域上的變化，以放大所屬頻率帶位於一特定頻率範圍內的所述像素強度，並疊加處理前後的所述像素強度以產生一輸出影像；以及重疊該輸出影像於該穿戴式裝置之該視野內的一即時影像，並顯示該輸出影像於該顯示單元，以供疾病檢測。
  2. 如申請專利範圍第1項所述的疾病檢測方法，其中分析所述像素的像素強度在空間或時域上的變化，以放大所屬頻率帶位於該特定頻率範圍內的所述像素強度的步驟包括：依據各所述像素的像素強度在空間頻率上分佈，分離所述像素強度為多個頻率帶；放大該頻率帶位於該特定頻率範圍內的所述像素強度；以及選擇合適的倍率因子與所述經過時域處理的像素強度相乘，以達到放大效果。
  3. 如申請專利範圍第1項所述的疾病檢測方法，其中重疊該輸出影像於該穿戴式裝置之該視野內的該即時影像的步驟包括：利用該影像擷取單元擷取該穿戴式裝置之該視野內的該即時 影像；分析該輸出影像及該即時影像中相對應的至少一特徵；以及根據各所述特徵在該輸出影像及該即時影像中的位置，對齊所述特徵，以重疊該輸出影像於該即時影像。
  4. 如申請專利範圍第1項所述的疾病檢測方法，其中在疊加放大後的所述像素強度以產生該輸出影像的步驟之後，所述方法更包括：重覆上述步驟，以產生放大後的多張輸出影像；以所述輸出影像中的某一參考影像作為基準，將其他輸出影像中各所述輸出影像減掉該參考影像，以獲得各所述像素的一像素強度差值；依據所述其他輸出影像中各所述像素的該像素強度差值的一變化方向及一變化量，定義一向量，並疊加所述像素的所述向量以產生一總向量；以及根據該總向量的一數值是否超過一門檻值，判斷所述輸出影像的一變化是否異常。
  5. 如申請專利範圍第1項所述的疾病檢測方法，其中該疾病檢測包括心腦血管疾病、糖尿病自體動靜脈瘻管、週邊血管疾病、心臟衰竭、帕金森氏症等之檢測。
  6. 一種穿戴式裝置，包括：一影像擷取單元，擷取該穿戴式裝置之一視野內的多張輸入影像，所述輸入影像包括位置相對應的多個像素； 一顯示單元；以及一處理單元，耦接該影像擷取單元及該顯示單元，包括：一影像放大模組，分析該影像擷取單元所擷取之所述輸入影像中所述像素的像素強度在空間或時域上的變化，以放大所屬頻率帶位於一特定頻率範圍內的所述像素強度，並疊加處理前後的所述像素強度以產生一輸出影像；以及一影像重合模組，重疊該輸出影像於該穿戴式裝置之該視野內的一即時影像，並顯示該輸出影像於該顯示單元，以供疾病檢測。
  7. 如申請專利範圍第6項所述的穿戴式裝置，其中該影像放大模組包括：一分離器，依據各所述像素的像素強度在空間頻率上分佈，分離所述像素強度為多個頻率帶；一濾波器，過濾或濾除該頻率帶位於該特定頻率範圍外的所述像素強度；以及一放大器，放大該頻率帶位於該特定頻率範圍內的所述像素強度。
  8. 如申請專利範圍第6項所述的穿戴式裝置，其中該影像重合模組更包括：一特徵分析器，分析該影像擷取單元擷取該穿戴式裝置之該視野內的該即時影像與該輸出影像中相對應的至少一特徵；以及一特徵對齊器，根據各所述特徵在該輸出影像及該即時影像 中的位置，對齊所述特徵，以重疊該輸出影像於該即時影像。
  9. 如申請專利範圍第6項所述的穿戴式裝置，其中該影像放大模組更重複分析該影像擷取單元所擷取之所述輸入影像中所述像素的像素強度在空間或時域上的變化，以放大所屬頻率帶位於該特定頻率範圍內的所述像素強度，並疊加處理前後的所述像素強度以產生多張輸出影像。
  10. 如申請專利範圍第9項所述的穿戴式裝置，其中該處理單元更包括：一異常判斷模組，以該影像放大模組所產生的所述輸出影像中的某一參考影像作為基準，將其他輸出影像中各所述輸出影像減掉該參考影像，以獲得各所述像素的一像素強度差值，並依據所述其他輸出影像中各所述像素的該像素強度差值的一變化方向及一變化量，定義一向量，並疊加所述像素的所述向量以產生一總向量，以及根據該總向量的一數值是否超過一門檻值，判斷所述輸出影像的一變化是否異常。
  11. 如申請專利範圍第6項所述的穿戴式裝置，其中該疾病檢測包括心腦血管疾病、糖尿病自體動靜脈瘻管、週邊血管疾病、心臟衰竭、帕金森氏症等之檢測。
TW103131894A 2014-09-16 2014-09-16 疾病檢測方法及穿戴式裝置 TWI524878B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
TW103131894A TWI524878B (zh) 2014-09-16 2014-09-16 疾病檢測方法及穿戴式裝置
US14/838,341 US10395370B2 (en) 2014-09-16 2015-08-27 Method and wearable apparatus for disease diagnosis

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
TW103131894A TWI524878B (zh) 2014-09-16 2014-09-16 疾病檢測方法及穿戴式裝置

Publications (2)

Publication Number Publication Date
TWI524878B true TWI524878B (zh) 2016-03-11
TW201611772A TW201611772A (en) 2016-04-01

Family

ID=55455210

Family Applications (1)

Application Number Title Priority Date Filing Date
TW103131894A TWI524878B (zh) 2014-09-16 2014-09-16 疾病檢測方法及穿戴式裝置

Country Status (2)

Country Link
US (1) US10395370B2 (zh)
TW (1) TWI524878B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110352035A (zh) * 2017-02-27 2019-10-18 皇家飞利浦有限公司 经由信号变化放大的静脉穿刺和动脉线引导
US11986285B2 (en) 2020-10-29 2024-05-21 National Taiwan University Disease diagnosing method and disease diagnosing system

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10510145B2 (en) 2017-12-27 2019-12-17 Industrial Technology Research Institute Medical image comparison method and system thereof
TWI712909B (zh) 2018-04-17 2020-12-11 和碩聯合科技股份有限公司 輔助臉部辨識的防僞方法及系統
CN110151188A (zh) * 2019-04-27 2019-08-23 嘉善医之爱生物技术有限公司 帕金森诊断系统
CN110175996A (zh) * 2019-05-29 2019-08-27 中国人民解放军陆军军医大学第二附属医院 一种基于cmr双向循环网络的心衰自动分级方法
CN111931754B (zh) * 2020-10-14 2021-01-15 深圳市瑞图生物技术有限公司 一种样本中目标物的识别方法、系统和可读存储介质
CN117854700B (zh) * 2024-01-19 2024-05-28 首都医科大学宣武医院 基于可穿戴监控设备的术后管理方法和系统

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7738710B2 (en) * 2004-08-02 2010-06-15 Electronics For Imaging, Inc. Methods and apparatus for communicating and displaying compressed image data
JP2006239195A (ja) * 2005-03-04 2006-09-14 Fuji Photo Film Co Ltd コンピュータによる画像診断支援方法および画像診断支援装置ならびにプログラム
JP5374941B2 (ja) * 2008-07-02 2013-12-25 ソニー株式会社 固体撮像装置及び電子機器
JP4508279B2 (ja) * 2008-07-17 2010-07-21 ソニー株式会社 画像処理装置、画像処理方法、及び、プログラム
US9183621B2 (en) * 2011-09-07 2015-11-10 Shimadzu Corporation Image processing apparatus and radiographic apparatus having the same
WO2013076927A1 (ja) * 2011-11-24 2013-05-30 パナソニック株式会社 診断支援装置および診断支援方法
JP2014123173A (ja) * 2012-12-20 2014-07-03 Sony Corp 画像処理装置、撮像装置及び画像処理方法
US20150068069A1 (en) * 2013-07-27 2015-03-12 Alexander Bach Tran Personally powered appliance
US20170261750A1 (en) * 2013-12-04 2017-09-14 Google Inc. Co-Aligned Retinal Imaging And Display System

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110352035A (zh) * 2017-02-27 2019-10-18 皇家飞利浦有限公司 经由信号变化放大的静脉穿刺和动脉线引导
CN110352035B (zh) * 2017-02-27 2023-09-08 皇家飞利浦有限公司 经由信号变化放大的静脉穿刺和动脉线引导
US11986285B2 (en) 2020-10-29 2024-05-21 National Taiwan University Disease diagnosing method and disease diagnosing system

Also Published As

Publication number Publication date
US10395370B2 (en) 2019-08-27
TW201611772A (en) 2016-04-01
US20160078622A1 (en) 2016-03-17

Similar Documents

Publication Publication Date Title
TWI524878B (zh) 疾病檢測方法及穿戴式裝置
Holm et al. DR HAGIS—a fundus image database for the automatic extraction of retinal surface vessels from diabetic patients
KR101629901B1 (ko) 휴대용 단말기를 사용하는 맥파 신호 측정 방법
WO2018058705A1 (zh) 基于视频精神生理参数监测危险人物装置及方法
US20160086380A1 (en) Hyperspectral imager
JP2017221486A5 (zh)
EP2829231A1 (en) Image-generating apparatus
WO2020067105A1 (ja) 医用画像処理装置、医用画像処理方法、及びプログラム、診断支援装置並びに内視鏡システム
JP6273640B2 (ja) 撮影画像表示装置
KR20160010864A (ko) 검안경
Al-Naji et al. Remote optical cardiopulmonary signal extraction with noise artifact removal, multiple subject detection & long-distance
JP2017213097A (ja) 画像処理装置、画像処理方法およびプログラム
US20220148170A1 (en) Spectral-spatial imaging device
US11744453B2 (en) Methods and apparatus to detect bleeding vessels
JP2010187723A (ja) 画像処理装置、画像処理方法、およびプログラム
Dosso et al. Eulerian magnification of multi-modal RGB-D video for heart rate estimation
JP2014157428A (ja) 画像表示装置、画像表示方法、及び、プログラム
JP6471559B2 (ja) 診断装置並びに当該診断装置における画像処理方法、画像処理システム及びそのプログラム
JP7051083B2 (ja) 心理状態判定方法、判定装置、判定システムおよび判定プログラム
Mantena et al. Low-cost, smartphone-based specular imaging and automated analysis of the corneal endothelium
Kumar et al. Fundus imaging-based healthcare: Present and future
AU2015275264B2 (en) Diagnosis support apparatus for lesion, image processing method in the same apparatus, and medium storing program associated with the same method
JP6240134B2 (ja) 皮膚状態推定装置およびその作動方法
JP2021101900A (ja) 学習データ作成装置、方法及びプログラム並びに医療画像認識装置
KR20140009847A (ko) 안과용 장치 및 이의 치료위치 측정방법