TWI823508B - 非接觸式之肢障患者的求助方法及系統 - Google Patents
非接觸式之肢障患者的求助方法及系統 Download PDFInfo
- Publication number
- TWI823508B TWI823508B TW111129139A TW111129139A TWI823508B TW I823508 B TWI823508 B TW I823508B TW 111129139 A TW111129139 A TW 111129139A TW 111129139 A TW111129139 A TW 111129139A TW I823508 B TWI823508 B TW I823508B
- Authority
- TW
- Taiwan
- Prior art keywords
- information
- artificial intelligence
- user
- recognition module
- message
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 17
- 238000013473 artificial intelligence Methods 0.000 claims abstract description 67
- 230000001815 facial effect Effects 0.000 claims abstract description 30
- 210000004709 eyebrow Anatomy 0.000 claims description 19
- 230000004424 eye movement Effects 0.000 claims description 11
- 210000000887 face Anatomy 0.000 claims description 2
- 210000001508 eye Anatomy 0.000 description 14
- 230000014509 gene expression Effects 0.000 description 11
- 238000010586 diagram Methods 0.000 description 8
- 208000002193 Pain Diseases 0.000 description 5
- 230000008921 facial expression Effects 0.000 description 5
- 230000036407 pain Effects 0.000 description 5
- 230000002159 abnormal effect Effects 0.000 description 4
- 210000000056 organ Anatomy 0.000 description 4
- 230000000694 effects Effects 0.000 description 3
- 230000000241 respiratory effect Effects 0.000 description 3
- 230000029058 respiratory gaseous exchange Effects 0.000 description 3
- 230000009429 distress Effects 0.000 description 2
- 206010010071 Coma Diseases 0.000 description 1
- 206010013082 Discomfort Diseases 0.000 description 1
- 206010019233 Headaches Diseases 0.000 description 1
- 208000003443 Unconsciousness Diseases 0.000 description 1
- 206010053692 Wound complication Diseases 0.000 description 1
- 230000005856 abnormality Effects 0.000 description 1
- QVGXLLKOCUKJST-UHFFFAOYSA-N atomic oxygen Chemical compound [O] QVGXLLKOCUKJST-UHFFFAOYSA-N 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 230000004397 blinking Effects 0.000 description 1
- 239000008280 blood Substances 0.000 description 1
- 210000004369 blood Anatomy 0.000 description 1
- 210000005252 bulbus oculi Anatomy 0.000 description 1
- 239000003651 drinking water Substances 0.000 description 1
- 235000020188 drinking water Nutrition 0.000 description 1
- 210000000744 eyelid Anatomy 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 210000003128 head Anatomy 0.000 description 1
- 231100000869 headache Toxicity 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 229910052760 oxygen Inorganic materials 0.000 description 1
- 239000001301 oxygen Substances 0.000 description 1
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 1
Images
Landscapes
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
- Finger-Pressure Massage (AREA)
Abstract
本發明係一種非接觸式之肢障患者的求助方法及系統。包含一資料庫,儲存有該使用者之複數聲紋資訊、複數臉部第一輪廓資訊及複數臉部第二輪廓資訊;一感測單元,設置在該輔具上,該感測單元包含一聲音感測器及一影像感測器;一人工智慧辨識模組,訊號連接該感測單元及該資料庫;一處理單元,訊號連接該人工智慧辨識模組;一警示單元,訊號連接該處理單元;該聲音感測器接收該使用者之一聲紋訊息,或該影像感測器接收該使用者之一臉部第一影像訊息或一臉部第二影像訊息,並以該人工智慧辨識模組辨識該聲紋訊息、該臉部第一影像訊息或該臉部第二影像訊息,當該聲紋訊息比對符合其中一聲紋資訊、該臉部第一影像訊息比對符合其中一臉部第一輪廓資訊或該臉部第二影像訊息比對符合其中一臉部第二輪廓資訊時,該人工智慧辨識模組輸出一第一指令、一第二指令或一第三指令,該處理單元根據該第一指令、該第二指令與該第三指令中之任一,而使該警示單元發出一警示訊號,藉此,能接收並辨識肢障患者的聲音或臉部影像的訊息,並作為發出警示訊號的依據。
Description
本發明係關於一種非接觸式之肢障患者的求助方法及系統,尤指利用發出聲音、改變嘴型、改變眼型或透過特定臉部表情動作,作為求助的指令,而使警示單元發出警示訊息通知照護者的發明。
醫院內之病床旁皆設置有求助鈴,當患者有需求或是有緊急事件需要求助時,能透過設置在病床旁的求助鈴,向護理師或醫師求助。
或是使用即時的監控系統,能持續地監控被監控者的生理狀況,如中華人民共和國專利公開號CN112216065A「一種老年人行為智能看護系統及識別方法」係透過音頻採集器、視頻採集器及生理採集器全面性的監控被監控者的生理狀況,如被監控者移動的路徑、說話的聲音、或脈搏及血氧等生理訊息,並判斷有無發生異常。
然而,一般肢障或重度肢障的患者,往往無法透過肢體操作求助設備而即時獲得必要的協助,甚至在緊急時,更難即時發出求助訊息,使照護者不易在第一時間掌握救護的先機。對於一般肢障或重度肢障的患者,需要求助時,除了發出聲音之外,通常不易藉由明顯的肢體動作發出求助訊息,而往往是僅能透過開闔眼睛或是張閉嘴巴等動作,發出求助的訊息。上述前案的視頻採集系統用於監看老年人的日常動作,並非用於辨識臉部器官的特徵,對重度肢障者而言,上述前案的視頻採集系統難以用於蒐集重度肢障者的臉部器官所表達的求助訊息。又當重度肢障者處於睡眠、昏迷等狀態
且又發生醫療器材脫落、異位等狀態,例如用於幫助呼吸的呼吸器面罩脫落或異位,患者當時的生理指數未必會在第一時間出現差異,因此上述前案的生理採集器也未必能即時發生作用。再者,或者若干的嚴重疼痛及不適也未必能即時反映在生理數據上,例如頭痛、傷口疼痛等,當疼痛感特別劇烈時,常會令重度肢障者的開闔眼睛或是張閉嘴巴等動作產生扭曲,甚至讓患者無法執行該等動作,則上述前案單純利用視頻採集系統用於監看肢體動作,利用生理採集器蒐集生理訊息,仍難以適用於重度肢障者的緊急求助。
爰此,本發明人為能辨識肢障者主動發出的求助聲音,以及肢障者主動發出的臉部器官動作所形成的指令,甚至是肢障者並非刻意的發出的臉部動作指令,以及肢障者在臉部的醫療器材脫落或異位等情形,而能夠即時產生求助訊息,協助肢障者在正常求助下能獲得即時的協助,也能使肢障者在睡眠或無意識等狀態下,也能獲得必要的緊急協助,因此提出一種非接觸式之肢障患者的求助方法,供肢體障礙的一使用者使用,該非接觸式之肢障患者的求助方法包含下列步驟:
將該使用者之複數聲紋資訊、複數臉部第一輪廓資訊及複數臉部第二輪廓資訊記錄在一資料庫;使一聲音感測器接收該使用者之一聲紋訊息,並以一人工智慧辨識模組辨識該聲紋訊息,當該聲紋訊息比對符合其中一聲紋資訊時,該人工智慧辨識模組輸出一第一指令;使一影像感測器拍攝該使用者的一臉部第一影像訊息,並以該人工智慧辨識模組辨識該臉部第一影像訊息,當該臉部第一影像訊息比對符合其中一臉部第一輪廓資訊時,該人工智慧辨識模組輸出一第二指令;使該影像感測器拍攝該使用者的一臉部
第二影像訊息,該人工智慧辨識模組辨識該臉部第二影像訊息,當該臉部第二影像訊息比對符合其中一臉部第二輪廓資訊時,該人工智慧辨識模組輸出一第三指令;一處理單元根據該第一指令、該第二指令與該第三指令中之任一,控制一警示單元發出一警示訊號。
進一步,該處理單元使一雲端管理單元向一電子行動單元發出一警示訊息。
進一步,前述臉部第一輪廓資訊包含一嘴型動作資訊、一眼睛動作資訊或一眉毛動作資訊,該嘴型動作資訊包含該使用者之一嘴唇內緣高度及一嘴唇外緣寬度,該臉部第一影像訊息相應為一嘴型動作訊息、一眼睛動作訊息、一眉毛動作訊息,其中,該嘴型動作訊息包含一張開訊息,該張開訊息包含該使用者之該嘴唇內緣高度及該嘴唇外緣寬度;該使用者的嘴部打開,該人工智慧辨識模組辨識該嘴唇內緣高度大於該嘴唇外緣寬度的百分之三十時,該人工智慧辨識模組判斷該使用者的嘴部為張開的狀態而收到該張開訊息;當該使用者開闔嘴部三次,每次達0.5秒以上時,該人工智慧辨識模組收到該張開訊息並連續收到三次時,該人工智慧辨識模組發出該第二指令,使該處理單元根據該第二指令控制該警示單元發出該警示訊號;當該使用者開闔嘴部二次,每次達0.5秒以上時,該人工智慧辨識模組收到該張開訊息並連續收到二次時,該人工智慧辨識模組判斷為取消該第一指令或該第二指令,而使該處理單元控制該警示單元停止發出該警示訊號。
進一步,前述臉部第二輪廓資訊包含一特定表情資訊或一使用者之呼吸器或呼吸面罩的位置影像資訊,該臉部第二影像訊息相應為一特定表情訊息或一使用者之呼吸器或呼吸面罩的影像訊息。
一種非接觸式之肢障患者的求助系統,供肢體障礙的一使用者使用,包含:一輔具;一資料庫,儲存有該使用者之複數聲紋資訊、複數臉部第一輪廓資訊及複數臉部第二輪廓資訊;一感測單元,設置在該輔具上,該感測單元包含一聲音感測器及一影像感測器;一人工智慧辨識模組,訊號連接該感測單元及該資料庫;一處理單元,訊號連接該人工智慧辨識模組;一警示單元,訊號連接該處理單元;該聲音感測器接收該使用者之一聲紋訊息,或該影像感測器接收該使用者之一臉部第一影像訊息或一臉部第二影像訊息,並以該人工智慧辨識模組辨識該聲紋訊息、該臉部第一影像訊息或該臉部第二影像訊息,當該聲紋訊息比對符合其中一聲紋資訊、該臉部第一影像訊息比對符合其中一臉部第一輪廓資訊或該臉部第二影像訊息比對符合其中一臉部第二輪廓資訊時,該人工智慧辨識模組輸出一第一指令、一第二指令或一第三指令,該處理單元根據該第一指令、該第二指令與該第三指令中之任一,而使該警示單元發出一警示訊號。
進一步,有一雲端管理單元訊號連接該處理單元,一電子行動單元訊號連接該雲端管理單元。
進一步,前述臉部第一輪廓資訊包含一嘴型動作資訊、一眼睛動作資訊或一眉毛動作資訊,該嘴型動作資訊包含該使用者之一嘴唇內緣高度及一嘴唇外緣寬度,該臉部第一影像訊息相應為一嘴型動作訊息、一眼睛
動作訊息、一眉毛動作訊息,其中,該嘴型動作訊息包含一張開訊息,該張開訊息包含該使用者之該嘴唇內緣高度及該嘴唇外緣寬度;該使用者的嘴部打開,該人工智慧辨識模組辨識該嘴唇內緣高度大於該嘴唇外緣寬度的百分之三十時,該人工智慧辨識模組判斷該使用者的嘴部為張開的狀態而收到該張開訊息;當該使用者開闔嘴部三次,每次達0.5秒以上時,該人工智慧辨識模組收到該張開訊息並連續收到三次時,該人工智慧辨識模組發出該第二指令,使該處理單元根據該第二指令控制該警示單元發出該警示訊號;當該使用者開闔嘴部二次,每次達0.5秒以上時,該人工智慧辨識模組收到該張開訊息並連續收到二次時,該人工智慧辨識模組判斷為取消該第一指令或該第二指令,而使該處理單元控制該警示單元停止發出該警示訊號。
進一步,前述臉部第二輪廓資訊包含一特定表情資訊或一使用者之呼吸器或呼吸面罩的位置資訊,該臉部第二影像訊息相應為一特定表情訊息或一使用者之呼吸器或呼吸面罩的影像訊息。
進一步,該輔具係輪椅,該聲音感測器及該影像感測器設置在該輪椅之一扶手上,該聲音感測器及該影像感測器設置在一高度位置,且該影像感測器高於該聲音感測器。
進一步,該處理單元設置在該輪椅之一椅背。
根據上述技術特徵可達成以下功效:
1.除了由肢障的使用者『主動』發出聲音或臉部器官特定動作,例如張嘴三次或閉眼三次等作為求助指令之外,肢障使用者的『非主動』臉
部表情或異常的臉部區域影像,例如皺眉表情或呼吸器脫落的影像,均能夠成為本發明的求助訊號。
2.當使用者表現出特定的臉部表情,如感到痛苦而皺眉,或是長期穿戴在臉上之呼吸器或呼吸面罩脫落而位置不同時,影像感測單元擷取影像後,人工智慧辨識模組能辨識到上述訊息並發出指令,使處理單元通知警示單元能發出警示訊號,藉此通知照護者,使照護者能即時接收到使用者需要幫忙的求助訊號。
3.擷取眼部的特定動作,經辨識後形成求助的指令,對於因疫情或病情而配戴有口罩的肢障者而言,仍能正常的主動發出求助訊息。又即使肢障者配戴口罩而非由眼部發出特定動作的指令,而是眼部因疼痛而皺眉的表情,本發明也可以不受肢障者配戴口罩的限制,而能正常運作。
4.處理單元能使訊號連接的雲端管理單元或是電子行動單元發出警示訊號,藉此通知照護者,使照護者不在使用者身邊時亦能夠即時接收到使用者的求助訊息。
1:資料庫
2:感測單元
21:聲音感測器
22:影像感測器
21A:聲音感測器
22A:影像感測器
3:處理單元
30:人工智慧辨識模組
3A:處理單元
4:警示單元
41:按鈕
42:發光件
43:揚聲器
5:雲端管理單元
6:電子行動單元
7:輔具
7A:輔具
8:聲紋訊息
9:臉部第一影像訊息
10:臉部第二影像訊息
H:嘴唇內緣高度
W:嘴唇外緣寬度
[第一圖]係本發明之方塊圖。
[第二圖]係將本發明設置在輪椅上之第一實施例的立體外觀圖。
[第三圖]係本發明之警示單元的立體外觀圖。
[第四圖]係本發明非接觸式之肢障患者的求助方法之流程圖。
[第四A圖]係本發明實施例之示意流程圖。
[第五圖]係本發明第一實施例之使用者發出聲音,使警示單元發出警示訊號的使用示意圖。
[第六圖]係本發明第一實施例之電子行動單元時接收到「Line
Notify」傳送之警示訊息的使用示意圖。
[第七圖]係本發明第一實施例之電子行動單元時接收到「Line
Bot」傳送的緊急求助事件選單的使用示意圖。
[第八圖]係本發明第一實施例之使用者未開闔嘴部,警示單元不發出警示訊號的使用示意圖。
[第九圖]係本發明第一實施例之使用者開闔嘴部數次,使警示單元發出警示訊號的使用示意圖。
[第十圖]係本發明第一實施例之使用者未移動眉毛或是未露出特定表情,使警示單元不發出警示訊號的使用示意圖。
[第十一圖]係本發明第一實施例之使用者移動眉毛或是露出特定表情,使警示單元發出警示訊號的使用示意圖。
[第十二圖]係將本發明設置在病床上之第二實施例的立體外觀圖。
綜合上述技術特徵,本發明非接觸式之肢障患者的求助方法及系統的主要功效將可於下述實施例清楚呈現。
請參閱第一圖、第二圖及第三圖,本發明的第一實施例係配合輔具7實施,該輔具7為輪椅,但不以此為限。本發明之非接觸式之肢障患者的求助方法包含一資料庫1、一感測單元2、一處理單元3、一人工智慧辨識模組30、一警示單元4、一雲端管理單元5及一電子行動單元6。其中,該資料庫1預先儲存有肢體障礙的一使用者的複數聲紋資訊、複數臉部第一輪廓資訊及
複數臉部第二輪廓資訊,前述聲紋資訊包含該使用者說話聲音的頻率高低、聲音大小或是說話速度快慢等資訊,或是將常見的求助指令以文字資訊存入該資料庫1。前述臉部第一輪廓資訊包含特定的一嘴型動作資訊、特定的一眼睛動作資訊或特定的一眉毛動作資訊,前述臉部第二輪廓資訊包含使用者的一特定表情資訊或使用者之一臉部醫療器材影像資訊;具體而言,前述臉部第一輪廓資訊可以是該使用者的張嘴動作、閉嘴動作、張眼動作、閉眼動作或抬眉動作等,較佳為執行特定次數、多次張閉的時間間隔相近等,以特定次數或時間間隔相近等動作作為部第一輪廓資訊的條件,可以有效排除單次張嘴、正常說話、單次閉眼等常態動作,以有效避免誤判。前述臉部第二輪廓資訊可以是使用者穿戴於臉部之維生器具如呼吸器或呼吸面罩位於各種異常位置的影像,或是使用者皺眉的影像。
該感測單元2包含一聲音感測器21及一影像感測器22,該影像感測器22在本實施例為攝影鏡頭,該感測單元2及該處理單元3設置在該輔具7上,該感測單元2能接收該使用者之一聲紋訊息8、一臉部第一影像訊息9或一臉部第二影像訊息10,該臉部第一影像訊息9相應為一嘴型動作訊息、一眼睛動作訊息、一眉毛動作訊息,該臉部第二影像訊息10相應為一特定表情訊息或一使用者配戴呼吸器或呼吸面罩的影像訊息。
該人工智慧辨識模組30訊號連接該感測單元2及該資料庫1,該處理單元3訊號連接至該人工智慧辨識模組30、該警示單元4、該雲端管理單元5及該電子行動單元6。
該警示單元4設有一接收單元並設有一按鈕41、一發光件42及一揚聲器43,該按鈕41電性連結於該發光件42及該揚聲器43。
請參閱第四圖、第四A圖、第五圖、第六圖及第七圖,在本實施例中,當該使用者乘坐在該輔具7上,並配合使用本發明之非接觸式之肢障患者的求助系統,並將該聲音感測器21及該影像感測器22設置在該輪椅之一扶手上,該聲音感測器21及該影像感測器22設置在一高度位置,且該影像感測器22高於該聲音感測器21,該處理單元3設置在該輪椅之一椅背。當肢障患者需要求助時,係對著該聲音感測器21發出聲音,例如係說「我要上廁所」、「上廁所」、「我要喝水」、「HELP」等需要照護者幫忙之聲紋訊息8時,該聲音感測器21接收到上述聲紋訊息8後,該人工智慧辨識模組30辨識到「廁所」、「喝水」、「HELP」等關鍵字時,該人工智慧辨識模組30比對上述聲紋訊息8及該資料庫1內預先儲存之使用者的聲紋資訊,或是該人工智慧辨識模組30將上述聲紋訊息8轉換成文字訊息,並比對該資料庫1內預先儲存之文字資訊,並比對相符時,該人工智慧辨識模組30輸出一第一指令,該處理單元3根據該第一指令使該警示單元4發出該警示訊號,例如係使該警示單元4發出光線或聲音提醒照護者,並使該處理單元3透過該雲端管理單元5傳送求救訊號至該電子行動單元6以顯示一警示訊息,同時記錄該警示訊息,例如係文字訊息,本發明雲端管理單元5是利用「Line Notify」傳送病患求救訊號至該電子行動單元6,並通過「Line Bot」將處理過程紀錄於雲端介面中,藉此通知照護者該使用者需要幫助;具體而言,當該使用者主動發出聲音指令使該警示單元4的該發光件42發出光線或該揚聲器43發出聲音後,照護者看到光線或聽到聲音後能及時趕到該使用者身旁提供照護,並透過按壓該警示單元4上的按鈕41,使該警示單元4的發光件42停止發出光線或使該警示單元4的揚聲器43停止發出聲音,同時地,照護者所攜帶的電子行動單元6能同時接收到
「Line Notify」傳送的警示訊息,與「Line Bot」傳送的一緊急求助事件選單,照護者將處理後的結果回覆至該緊急求助事件選單,並將該急求助事件選單記錄於該雲端管理單元5,藉此,當有需求需要調閱使用者的求助或求救記錄時,能經由該雲端管理單元5內記錄的警示訊息,輔助了解使用者的求助或求救情形。
請參閱第四圖、第四A圖、第八圖及第九圖,在本實施例中,當該使用者乘坐在該輔具7上,並需要求助時,係對著該影像感測器22眼睛開闔三次、張嘴三次或抬眉二次等,當該影像感測器22接收到上述之臉部第一影像訊息9後,該人工智慧辨識模組30辨識到該臉部第一影像訊息9並比對該資料庫1內預先儲存之該使用者的前述臉部第一輪廓資訊,比對相符時,該人工智慧辨識模組30輸出一第二指令,該處理單元3根據該第二指令使該警示單元4發出該警示訊號,或係使該電子行動單元6顯示該警示訊息並使該雲端管理單元5同步記錄該警示訊息;具體而言,該嘴型動作資訊包含該使用者之一嘴唇內緣高度H及一嘴唇外緣寬度W,當該使用者的嘴部打開時,即該嘴唇內緣高度H大於該嘴唇外緣寬度W的百分之三十時,該人工智慧辨識模組30辨識出該使用者的嘴部為張開的狀態;當該使用者以特定頻率如開闔嘴部三次,每次達0.5秒以上時,該人工智慧辨識模組30辨識並比對相符時發出該第二指令,使該處理單元3根據該第二指令使該警示單元4發出該警示訊號;當使用者想要自行取消該警示訊號時,能透過該使用者嘴部開闔二次,每次達0.5秒以上,該人工智慧辨識模組30判斷為取消求助訊號,使該處理單元3通知該警示單元4停止發出該警示訊號。
請參閱第四圖、第四A圖及第十圖,在本實施例中,當該使用者乘坐在該輔具7上並穿戴口罩,臉部僅露出眼睛以上之部位,並需要求助或求救時,係對著該影像感測器22透過移動眉毛、眨眼睛或是使眼球朝左或朝右移動,當該影像感測器22接收到該眼睛動作訊息或該眉毛動作訊息之臉部第一輪廓資訊9,辨識方式及通知方式相同於前述之實施方式,故在此不多做描述;具體而言,該資料庫1內預先儲存有該使用者之眉毛或眼睛在臉部的位置資訊,當該使用者透過固定頻率移動眉毛三次或固定頻率開闔眼皮三次,該影像感測器22接收到該眉毛動作訊息或該眼睛動作訊息,該人工智慧辨識模組30辨識並比對相符時發出該第二指令,使該處理單元3根據該第二指令使該警示單元4發出該警示訊號。
上述第一指令與第二指令都是經由該人工智慧辨識模組30辨識使用者『刻意且主動』的動作而產生,但除此之外,對於使用者『非刻意』而形成的某些臉部影像,也能形成本發明的第三指令。例如當該使用者長時間穿戴之呼吸器或呼吸面罩突然脫落,該影像感測器22接收到該使用者之呼吸器或呼吸面罩的位置異常的影像,上述影像即為本發明的臉部第二影像訊息10,該人工智慧辨識模組30將該臉部第二影像訊息10與該資料庫1內預先儲存之該使用者的前述臉部第二輪廓資訊相比對,其中前述臉部第二輪廓資訊包含了各種呼吸器或呼吸面罩位於各種異常位置的影像,經比對後如果符合,該人工智慧辨識模組30輸出一第三指令,該處理單元3根據該第三指令使該警示單元4發出該警示訊號,藉此通知照護者該使用者需要幫助。或者,使用者無論是否有配戴呼吸器或呼吸面罩,當使用者因感到身體疼痛而自然反射產生有皺眉頭表情時,由於本發明的臉部第二輪廓資訊也可以是預設的使用者
皺眉頭影像,當影像感測器22拍攝到使用者的皺眉頭表情後,該皺眉頭表情影像經該人工智慧辨識模組30上述比對臉部第二輪廓資訊,如果符合,該人工智慧辨識模組30輸出上述第三指令,該處理單元3根據該第三指令使該警示單元4發出該警示訊號,藉此通知照護者該使用者需要幫助。
請參閱第十一圖,在本發明之第二實施例中,輔具7A係為病床,並將一聲音感測器21A設置在該輔具7A的床頭及一影像感測器22A設置在該輔具7A的床尾,一處理單元3A設置在該輔具7A的側邊,並使該聲音感測器21A及該影像感測器22A朝向一使用者躺臥於該輔具7A時,該使用者頭部的位置;當該使用者需要求助時,該使用者可藉由發出聲音、開闔改變嘴型、作出皺眉頭或其他特定表情動作等,使該聲音感測器21A或該影像感測器22A接收到該使用者的訊息,而後續之流程相同於上述第一實施例,故在此不多作描述。
綜合上述實施例之說明,當可充分瞭解本發明之操作、使用及本發明產生之功效,惟以上所述實施例僅係為本發明之較佳實施例,當不能以此限定本發明實施之範圍,即依本發明申請專利範圍及發明說明內容所作簡單的等效變化與修飾,皆屬本發明涵蓋之範圍內。
Claims (8)
- 一種非接觸式之肢障患者的求助方法,供肢體障礙的一使用者使用,該非接觸式之肢障患者的求助方法包含下列步驟:將該使用者之複數聲紋資訊及複數臉部第一輪廓資訊記錄在一資料庫,前述臉部第一輪廓資訊包含一嘴型動作資訊,其中,該嘴型動作資訊包含該使用者之一嘴唇內緣高度及一嘴唇外緣寬度;使一聲音感測器接收該使用者之一聲紋訊息,並以一人工智慧辨識模組辨識該聲紋訊息,當該聲紋訊息比對符合其中一聲紋資訊時,該人工智慧辨識模組輸出一第一指令;使一影像感測器拍攝該使用者的一臉部第一影像訊息,並以該人工智慧辨識模組辨識該臉部第一影像訊息,該臉部第一影像訊息包含有一嘴型動作訊息,其中,該嘴型動作訊息包含一張開訊息,該張開訊息包含該使用者之該嘴唇內緣高度及該嘴唇外緣寬度,當該臉部第一影像訊息比對符合其中一臉部第一輪廓資訊時,該人工智慧辨識模組輸出一第二指令;一處理單元根據該第一指令、該第二指令中之任一,控制一警示單元發出一警示訊號;該使用者的嘴部打開,該人工智慧辨識模組辨識該嘴唇內緣高度大於該嘴唇外緣寬度的百分之三十時,該人工智慧辨識模組判斷該使用者的嘴部為張開的狀態而收到該張開訊息;當該使用者開闔嘴部三次,每次達0.5秒以上時,該人工智慧辨識模組收到該張開訊息並連續收到三次時,該人工智慧辨識模組發出該第二指令,使該處理單元根據該第二指令控制該警示單元發出該警示訊號; 當該使用者開闔嘴部二次,每次達0.5秒以上時,該人工智慧辨識模組收到該張開訊息並連續收到二次時,該人工智慧辨識模組判斷為取消該第一指令或該第二指令,而使該處理單元控制該警示單元停止發出該警示訊號。
- 如請求項1所述之非接觸式之肢障患者的求助方法,其中,該處理單元使一雲端管理單元向一電子行動單元發出一警示訊息。
- 如請求項1所述之非接觸式之肢障患者的求助方法,其中,前述臉部第一輪廓資訊進一步包含一眼睛動作資訊或一眉毛動作資訊,該臉部第一影像訊息進一步相應為一眼睛動作訊息及一眉毛動作訊息。
- 一種非接觸式之肢障患者的求助系統,供肢體障礙的一使用者使用,包含:一輔具;一資料庫,儲存有該使用者之複數聲紋資訊及複數臉部第一輪廓資訊,前述臉部第一輪廓資訊包含一嘴型動作資訊,其中,該嘴型動作資訊包含一嘴唇內緣高度及一嘴唇外緣寬度;一感測單元,設置在該輔具上,該感測單元包含一聲音感測器及一影像感測器;一人工智慧辨識模組,訊號連接該感測單元及該資料庫;一處理單元,訊號連接該人工智慧辨識模組;一警示單元,訊號連接該處理單元;該聲音感測器接收該使用者之一聲紋訊息,或該影像感測器接收該使用者之一臉部第一影像訊息,並以該人工智慧辨識模組辨識該聲紋訊息、該臉部第一影像訊息,該臉部第一影像訊息包含有一嘴型動作訊息,其中,該嘴型動作訊息包含一張開訊息,當該聲紋訊息比對符合其中一聲紋資訊、該臉部第一影像訊 息比對符合其中一臉部第一輪廓資訊時,該人工智慧辨識模組輸出一第一指令或一第二指令,該處理單元根據該第一指令與該第二指令中之任一,而使該警示單元發出一警示訊號;該使用者的嘴部打開,該人工智慧辨識模組辨識該嘴唇內緣高度大於該嘴唇外緣寬度的百分之三十時,該人工智慧辨識模組判斷該使用者的嘴部為張開的狀態而收到該張開訊息;當該使用者開闔嘴部三次,每次達0.5秒以上時,該人工智慧辨識模組收到該張開訊息並連續收到三次時,該人工智慧辨識模組發出該第二指令,使該處理單元根據該第二指令控制該警示單元發出該警示訊號;當該使用者開闔嘴部二次,每次達0.5秒以上時,該人工智慧辨識模組收到該張開訊息並連續收到二次時,該人工智慧辨識模組判斷為取消該第一指令或該第二指令,而使該處理單元控制該警示單元停止發出該警示訊號。
- 如請求項4所述之非接觸式之肢障患者的求助系統,其中,有一雲端管理單元訊號連接該處理單元,一電子行動單元訊號連接該雲端管理單元。
- 如請求項4所述之非接觸式之肢障患者的求助系統,其中,前述臉部第一輪廓資訊進一步包含一眼睛動作資訊或一眉毛動作資訊,該臉部第一影像訊息進一步相應為一眼睛動作訊息及一眉毛動作訊息。
- 如請求項4所述之非接觸式之肢障患者的求助系統,其中,該輔具係輪椅,該聲音感測器及該影像感測器設置在該輪椅之一扶手上,該聲音感測器及該影像感測器設置在一高度位置,且該影像感測器高於該聲音感測器。
- 如請求項7所述之非接觸式之肢障患者的求助系統,其中,該處理單元設置在該輪椅之一椅背。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
TW111129139A TWI823508B (zh) | 2022-08-03 | 2022-08-03 | 非接觸式之肢障患者的求助方法及系統 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
TW111129139A TWI823508B (zh) | 2022-08-03 | 2022-08-03 | 非接觸式之肢障患者的求助方法及系統 |
Publications (2)
Publication Number | Publication Date |
---|---|
TWI823508B true TWI823508B (zh) | 2023-11-21 |
TW202407651A TW202407651A (zh) | 2024-02-16 |
Family
ID=89722738
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
TW111129139A TWI823508B (zh) | 2022-08-03 | 2022-08-03 | 非接觸式之肢障患者的求助方法及系統 |
Country Status (1)
Country | Link |
---|---|
TW (1) | TWI823508B (zh) |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
TW200742573A (en) * | 2006-05-12 | 2007-11-16 | chang-an Zhou | Non-invasion life sign monitoring device, system and method |
CN104606003A (zh) * | 2015-02-02 | 2015-05-13 | 河海大学常州校区 | 基于人脸识别的智能护理床及其工作方法 |
US20200242908A1 (en) * | 2018-04-03 | 2020-07-30 | Guangzhou Safenc Electronics Co., Ltd. | Help-seeking method and system for indoor care |
CN111476196A (zh) * | 2020-04-23 | 2020-07-31 | 南京理工大学 | 一种基于面部动作的老年残障人士护理需求识别方法 |
CN114341960A (zh) * | 2019-08-07 | 2022-04-12 | 艾弗里协助通信有限公司 | 患者监测系统和方法 |
-
2022
- 2022-08-03 TW TW111129139A patent/TWI823508B/zh active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
TW200742573A (en) * | 2006-05-12 | 2007-11-16 | chang-an Zhou | Non-invasion life sign monitoring device, system and method |
CN104606003A (zh) * | 2015-02-02 | 2015-05-13 | 河海大学常州校区 | 基于人脸识别的智能护理床及其工作方法 |
US20200242908A1 (en) * | 2018-04-03 | 2020-07-30 | Guangzhou Safenc Electronics Co., Ltd. | Help-seeking method and system for indoor care |
CN114341960A (zh) * | 2019-08-07 | 2022-04-12 | 艾弗里协助通信有限公司 | 患者监测系统和方法 |
CN111476196A (zh) * | 2020-04-23 | 2020-07-31 | 南京理工大学 | 一种基于面部动作的老年残障人士护理需求识别方法 |
Also Published As
Publication number | Publication date |
---|---|
TW202407651A (zh) | 2024-02-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20230222805A1 (en) | Machine learning based monitoring system | |
Cooper et al. | ARI: The social assistive robot and companion | |
USRE41376E1 (en) | System and method for monitoring eye movement | |
US6542081B2 (en) | System and method for monitoring eye movement | |
EP1371042B1 (en) | Automatic system for monitoring person requiring care and his/her caretaker automatic system for monitoring person requiring care and his/her caretaker | |
US8823527B2 (en) | Consciousness monitoring | |
US8708903B2 (en) | Patient monitoring appliance | |
US9060683B2 (en) | Mobile wireless appliance | |
US20150269825A1 (en) | Patient monitoring appliance | |
US20130072807A1 (en) | Health monitoring appliance | |
CN105380655B (zh) | 一种移动终端的情绪预警方法、装置及移动终端 | |
JP2004523849A (ja) | 不定期的に補助を要する一人暮らしの人を監視する自動システム | |
CN113257440A (zh) | 一种基于病患视频识别的icu智能看护系统 | |
US11635816B2 (en) | Information processing apparatus and non-transitory computer readable medium | |
JP2019523939A (ja) | センサープライバシー設定制御 | |
CN111882820A (zh) | 用于特殊人群的看护系统 | |
CN114341960A (zh) | 患者监测系统和方法 | |
TWI823508B (zh) | 非接觸式之肢障患者的求助方法及系統 | |
CN109730659A (zh) | 一种基于微波信号监测的智能床垫 | |
WO2021122136A1 (en) | Device, system and method for monitoring of a subject | |
TWM595870U (zh) | 照護系統 | |
Maritsa et al. | Audio-based wearable multi-context recognition system for apnea detection | |
CN221266141U (zh) | 基于多种数据融合分析的非接触式婴儿睡眠觉醒监测系统 | |
CN110278489B (zh) | 一种根据病人表情对播放内容控制的方法及播放控制系统 | |
CN118570964A (zh) | 一种预防窒息的报警系统 |