TW201545130A - 守衛提醒方法及其提醒裝置、提醒系統及電腦程式產品 - Google Patents
守衛提醒方法及其提醒裝置、提醒系統及電腦程式產品 Download PDFInfo
- Publication number
- TW201545130A TW201545130A TW103119035A TW103119035A TW201545130A TW 201545130 A TW201545130 A TW 201545130A TW 103119035 A TW103119035 A TW 103119035A TW 103119035 A TW103119035 A TW 103119035A TW 201545130 A TW201545130 A TW 201545130A
- Authority
- TW
- Taiwan
- Prior art keywords
- person
- alert
- unit
- sleep state
- guard
- Prior art date
Links
Landscapes
- Alarm Systems (AREA)
- Emergency Alarm Devices (AREA)
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
Abstract
一種提守衛醒方法、守衛提醒裝置、守衛提醒系統及電腦程式產品。在透過影像擷取單元擷取站立於平台上方的人員的影像序列後,分析影像序列,以判斷人員是否呈現睡眠狀態。當人員呈現睡眠狀態時,產生提醒訊號,以警示人員。
Description
本發明是有關於一種警示技術,且特別是有關於一種防止人員瞌睡的守衛提醒方法、守衛提醒裝置、守衛提醒系統與電腦程式產品。
執勤是哨兵的主要任務之一,而通過哨兵的執勤,能夠及時的發現和處理突發事故。若執勤發生任何閃失,都有可能對於當前社會治安帶來嚴重的後果。故為了要保障社會的安全,哨兵執勤時的執勤狀態相當的重要。
目前對於哨兵的執勤狀態的管理,主要是透過人為方式來監控,例如經由上級來定時巡視哨兵的執勤情況,或者是經由非直接監控的方式,例如通過培訓或紀律約束,來督導哨兵勤守崗位。然而,所述方式並無法確保哨兵處於較佳的執勤狀態,因此往往哨兵仍會有短暫睡崗或恍神的情形發生。
本發明提供一種守衛提醒方法、守衛提醒裝置、守衛提醒系統及電腦程式產品,其可提醒站立於平台上的人員,藉以防止人員瞌睡。
本發明提出一種提醒方法,其包括:透過影像擷取單元擷取站立於平台上方的人員的影像序列,其中影像擷取單元面向平台並且以預設角度擷取影像序列;分析影像序列,以判斷人員是否呈現睡眠狀態;以及當人員呈現睡眠狀態時,產生提醒訊號,以警示人員。
在本發明的一實施例中,當人員呈現睡眠狀態時,則發出預警訊號至遠端監控主機。
在本發明的一實施例中,其中判斷人員是否呈現睡眠狀態的步驟包括:根據影像序列偵測該人員是否於預設時間內維持固定姿勢,若人員在預設時間內維持固定姿勢,則判斷人員呈現睡眠狀態。
在本發明的一實施例中,判斷人員是否呈現睡眠狀態的步驟更包括:偵測影像序列的臉部物件,以在偵測到在預設時間內人員的頭部並未轉動的情況下,判定人員呈現睡眠狀態。
在本發明的一實施例中,當偵測到人員的頭部向下低時,判定人員呈現睡眠狀態。
在本發明的一實施例中,其中判斷人員是否呈現睡眠狀態的步驟更包括:分析影像序列判斷人員的眼睛是否為閉眼狀
態;以及倘若人員的眼睛為閉眼狀態,則判斷人員呈現睡眠狀態。
在本發明的一實施例中,其中分析影像序列,以判斷人員的眼睛是否屬於閉眼狀態的步驟包括:對影像序列執行人臉辨識程序,以在影像序列中獲得臉部物件;執行眼部搜尋程序,以在臉部物件中獲得眼部區域;以及根據眼部區域的尺寸判斷眼睛是否為閉眼狀態。
在本發明的一實施例中,其中在產生提醒訊號的步驟之後,更包括:分析影像序列的臉部特徵資訊,以判斷人員是否注視於指定方向;以及倘若人員未注視於指定方向,持續驅使警示單元發出提醒訊號,直至偵測到人員注視於指定方向。
在本發明的一實施例中,其中提醒訊號包括振動警示、光源警示或音源警示。
本發明另提出一種守衛提醒裝置,其包括警示單元、影像擷取單元、儲存單元以及處理單元。警示單元設置於平台內。影像擷取單元面向平台並且以預設角度的方式擷取站立於平台上方的人員的影像序列。儲存單元具有影像處理模組。處理單元耦接至警示單元、儲存單元以及影像擷取單元之間。處理單元執行影像處理模組來分析影像序列,以偵測人員是否呈現睡眠狀態。若人員呈現睡眠狀態,則處理單元傳送控制訊號至警示單元,使警示單元產生提醒訊號來警示人員。
本發明另提出一種守衛提醒系統,其包括平台、警示單元、影像擷取單元以及遠端監控主機。平台供人員站立於其上。
警示單元設置於平台內。影像擷取單元面向平台並且以預設角度的方式擷取人員的影像序列。遠端監控主機耦合於警示單元與影像擷取單元之間,接收並根據自影像擷取單元之影像序列,以偵測人員是否呈現睡眠狀態。若人員呈現睡眠狀態,則遠端監控主機傳送控制訊號至警示單元,使警示單元產生提醒訊號來警示人員。
本發明另提出一種守衛提醒系統,包括電腦可讀取記錄媒體,電腦可讀取記錄媒體記錄至少一程式指令,此至少一程式指令在載入電子裝置後,用以執行下列步驟:透過影像擷取單元,擷取站立於平台上方的人員的影像序列,其中影像擷取單元面向平台並且以預設角度擷取影像序列;分析影像序列,以判斷人員是否呈現睡眠狀態;以及當人員呈現睡眠狀態時,產生提醒訊號,以警示人員。
基於上述,倘若人員在預設時間內的姿勢維持不變,則平台中的警示單元會發出提醒訊號來提醒人員,據以防止人員處於瞌睡的狀態。
為讓本發明的上述特徵和優點能更明顯易懂,下文特舉實施例,並配合所附圖式作詳細說明如下。
10‧‧‧人員
100‧‧‧守衛提醒裝置
110、1210‧‧‧警示單元
120、1220‧‧‧影像擷取單元
1230‧‧‧遠端監控主機
130‧‧‧儲存單元
132‧‧‧資料庫
134‧‧‧影像處理模組
140‧‧‧處理處理單元
302‧‧‧行為偵測模組
402、702、1002‧‧‧人臉偵測模組
404‧‧‧面向偵測模組
610‧‧‧頭部
704‧‧‧閉眼偵測模組
902‧‧‧眼部區域
1004‧‧‧視線視線偵測模組
θ‧‧‧預設角度
d1‧‧‧第一方向
d2‧‧‧第二方向
I‧‧‧影像
L‧‧‧水平線
N1‧‧‧第一中心點
N2‧‧‧第二中心點
P‧‧‧平台
R‧‧‧參考點
S302~S306、S502~S510、S802~S808、S1102~S1110‧‧‧守衛提醒方法的各步驟
圖1是依照本發明第一實施例的守衛提醒裝置的方塊圖。
圖2是依照本發明第一實施例的守衛提醒裝置的安裝示意圖。
圖3A是依照本發明第一實施例的守衛提醒方法的方法流程圖。
圖3B是依照本發明第一實施例的影像處理模組的示意圖。
圖4是依照本發明第二實施例的影像處理模組的示意圖。
圖5是依照本發明第二實施例的守衛提醒方法的方法流程圖。
圖6是依照本發明第二實施例的頭部轉動的示意圖。
圖7是依照本發明第三實施例的影像處理模組的示意圖。
圖8是依照本發明第三實施例的守衛提醒方法的方法流程圖。
圖9是依照本發明第三實施例的眼部區域的示意圖。
圖10是依照本發明第四實施例的影像處理模組的示意圖。
圖11是依照本發明第四實施例的守衛提醒方法的方法流程圖。
圖12是依照本發明第五實施例的守衛提醒系統的方塊圖。
對於站岡的哨兵或執勤人員,倘若可對其站崗狀態進行即時監控,並在哨兵或執勤人員瞌睡或恍神的時候發出提醒,勢必可更加確保哨兵或執勤人員勤守岡位。本發明便是基於上述觀
點而提出的守衛提醒方法、守衛提醒裝置、守衛提醒系統與電腦程式產品。為了使本發明之內容更為明瞭,以下特舉實施例做為本發明確實能夠據以實施的範例。
第一實施例
圖1是依照本發明第一實施例的守衛提醒裝置的方塊圖。請參照圖1,守衛提醒裝置100包括警示單元110、影像擷取單元120、儲存單元130以及處理單元140。處理單元140耦接至警示單元110、影像擷取單元120及儲存單元130。處理單元140利用影像擷取單元120來監控人員的清醒狀態,據以決定是否驅動警示單元110發出提醒訊號來提醒人員,以防止人員打瞌睡。在本實施例中,警示單元110、儲存單元130以及處理單元140設置於一平台內,影像擷取單元120設置於平台的周圍。底下舉一例來說明守衛提醒裝置100的安裝。
圖2是依照本發明第一實施例的守衛提醒裝置的示意圖。請參照圖2,警示單元110、儲存單元130以及處理單元140設置於平台P內,其中,影像擷取單元120的鏡頭面向平台P並且以一個預設角度擷取影像序列,例如,影像擷取單元120會以與水平線L相夾預設角度θ的方式面向上方而設置,以擷取站立於平台P上方的人員10的影像序列。處理單元130與影像擷取單元120之間的資料傳輸可透過無線傳輸或有線傳輸來傳輸影像序列。
警示單元110包含但不限於振動警示、光源警示或音源
警示裝置,而其發出的提醒訊號例如是光源警示、振動警示或音源警示,藉以來提醒平台P上的人員10。然,本實施例並不限於此,只要是可發出具有提醒作用的訊號之裝置即可用來做為警示單元110。
影像擷取單元120用來擷取人員10的影像序列,即,連續擷取多張影像。影像擷取單元110例如是採用電荷耦合元件(Charge coupled device,CCD)鏡頭、互補式金氧半電晶體(Complementary metal oxide semiconductor transistors,CMOS)鏡頭、或紅外線鏡頭的攝影機、照相機,但不限於此。
儲存單元130包括資料庫132以及影像處理模組134。資料庫132用以儲存影像擷取單元120所獲得的影像序列。影像處理模組134例如為一應用程式,由處理單元140來執行此影像處理模組134以實現分析人員10的姿勢或局部區域的變化。儲存單元130例如為非揮發性記憶體(Non-volatile memory)、隨機存取記憶體(Random Access Memory,RAM)或硬碟等。上述僅為舉例說明,並不以此為限。
處理單元140耦接至警示單元110、影像擷取單元120以及儲存單元130,並控制守衛提醒裝置100的整體運作。具體而言,處理單元140會執行影像處理模組134來分析影像序列,並判斷人員10是否於預設時間內維持同樣的姿勢,據以判斷是否驅使警示單元110發出提醒訊號。處理單元140包括中央處理單元(Central Processing Unit,CPU)或微處理器(microprocessor)
等,但不限於此。
在此,本實施例係利用程式碼來實現。即,儲存單元130中的影像處理模組134可由一或多個程式碼片段所組成,且這些程式碼片段包括多個指令,而處理單元140會藉由影像處理模組134來執行這些指令,以實現守衛提醒方法的多個步驟。
底下即搭配上述守衛提醒裝置100詳細說明守衛提醒方法的各步驟。圖3A是依照本發明第一實施例的守衛提醒方法的方法流程圖。請同時參照圖1至圖3A,於步驟S302,影像擷取單元120會擷取站立於平台P上方的人員10的影像序列。舉例來說,影像擷取單元120與地面的水平線L所相夾的預設角度θ為45度,但不限於此,此預設角度θ的大小可對應人員的身高而調整。
於步驟S304,處理單元140會執行影像處理模組132來分析影像序列,以判斷人員10是否呈現睡眠狀態。由於一般當人員在瞌睡中時會維持同樣的姿勢,因此處理單元140可根據人員10的姿勢是否維持相同與否,來判斷人員10是否在睡眠。舉例而言,影像處理模組132可偵測人員10是否於一個預設時間內維持固定姿勢,來判斷人員10是否呈現睡眠狀態。
舉例來說,如圖3B所示,影像處理模組132可包括行為偵測模組302,用以判斷人員10是否於預設時間內維持固定姿勢。具體來說,行為偵測模組302可自影像序列中取得有關人員的多個特徵點,並根據這些特徵點在預設時間內的變化來判斷人員10是否維持固定姿勢。例如,行為偵測模組302可比較預設時
間內先後兩張影像中特徵點的分布差異,並判斷此分布差異是否小於一個預設值。倘若此分布差異小於預設值,也就是先後兩張影像中人員10的影像相似,則行為偵測模組302會判斷人員10在預設時間內維持固定姿勢。倘若先後兩張影像中特徵點的分布差異非小於此預設值,也就是先後兩張影像中人員10的影像並非相似,則行為偵測模組302會判斷人員10在預設時間內有移動。據此,若人員10在預設時間內維持固定姿勢,則處理單元140可根據行為偵測模組302判斷人員10是呈現睡眠狀態。反之,若人員10在預設時間內有移動時,例如人員10的頭部、四肢、臉部中的眼睛或其他區域非維持固定姿勢,則表示人員不是在瞌睡,因此處理單元140可根據行為偵測模組302判斷人員10並非呈現睡眠狀態。
返回圖3A,倘若人員10呈現睡眠狀態,則如步驟S306所示,處理單元140會驅使警示單元110發出提醒訊號以警示人員10。或者,處理單元140也可發出預警訊號至一個遠端監控主機,以透過遠端監控主機發出提醒訊號來警示人員10。如此一來,當人員10在瞌睡時,則平台P中的警示單元110會發出振動訊號或聲音訊號等提醒訊號來提醒人員10,讓人員10得以保持在清醒狀態。
倘若人員10非呈現睡眠狀態,則影像擷取單元120會繼續擷取站立於平台P上方的人員10的影像序列(步驟S302),也就是此時守衛提醒裝置100不會驅使警示單元110來提醒人員10。
上述處理單元140執行影像處理模組134來分析影像序列,以判斷人員10是否於預設時間內維持同樣的姿勢時,處理單元140還會根據人員10頭部的轉動與否來進行判斷。由於當人員10清醒時,其頭部會左右擺動以巡視周圍環境,因此藉由頭部的轉動與否來判斷人員10是否維持同樣的姿勢,可快速偵測人員10是否在瞌睡。底下再舉一實施例來進行說明。
第二實施例
圖4是依照本發明第二實施例的影像處理模組的示意圖。請參照圖4,影像處理模組134還包括人臉偵測模組402及面向偵測模組404。人臉偵測模組402用以辨識影像序列中的臉部物件,而面向偵測模組404會根據臉部物件的變化,以偵測頭部的移動狀態。
圖5是依照本發明第二實施例的守衛提醒方法的方法流程圖。以下搭配圖1的守衛提醒裝置100來進行說明。請同時參照圖1、圖4及圖5,於步驟S502,影像擷取單元120會擷取站立於平台P上方的人員10的影像序列。
處理單元140自影像擷取單元120接收影像序列之後,於步驟S504,處理單元140會執行影像處理模組134來分析影像序列。其中,人臉偵測模組402會對影像序列執行人臉辨識程序,以在影像序列中獲得臉部物件,並分析臉部物件的變化,而面向偵測模組404會依據影像序列中的臉部物件的變化,偵測人員10的頭部是否有轉動。
詳細而言,人臉偵測模組402可利用AdaBoost演算法或其他現有的人臉偵測演算法(如,利用Haar-like特徵來進行人臉辨識動作)來獲得各影像中的臉部物件。此外,人臉偵測模組402還可在臉部物件中搜尋鼻孔區域,即,兩個鼻孔的所在位置,據以獲得鼻孔位置資訊,例如為兩個鼻孔的第一中心點與第二中心點。之後,面向偵測模組404可基於鼻孔位置資訊來判斷頭部是否轉動。
舉例來說,圖6是依照本發明第二實施例的頭部轉動的示意圖。請參照圖4及圖6,人臉偵測模組402辨識出臉部物件(如影像I所示)後,面向偵測模組404可利用兩個鼻孔的第一中心點N1與第二中心點N2來判斷影像中的頭部610是否向第一方向d1轉動或向第二方向d2轉動。在此,以人員10的方向而言,將向右方向視為第一方向d1,將向左方向視為第二方向d2。具體而言,面向偵測模組404可將第一中心點N1與第二中心點N2與參考點R進行比對,藉由第一中心點N1與參考點之間的位置關係以及第二中心點N2與參考點R之間的位置關係,判斷頭部610往哪一方向轉動。當然,面向偵測模組404也可利用第一中心點N1或第二中心點N2來進行低頭偵測。例如,面向偵測模組404可將第一中心點N1或第二中心點N2其中之一與參考點R進行比對,以判斷第一中心點N1或第二中心點N2是否位於參考點R的下方,且當第一中心點N1或第二中心點N2位於參考點R的下方時,面向偵測模組404可判斷頭部610往下低。
如此一來,處理單元140可根據面向偵測模組404偵測的結果,判斷人員10是否於預設時間內維持同樣的姿勢。
返回圖5,在面向偵測模組404偵測到在預設時間內人員10的頭部並未轉動的情況下,如步驟S506所示,處理單元140會判定人員10在預設時間內為維持同樣的姿勢,並且於步驟S508,處理單元140會驅使警示單元110發出提醒訊號來提醒人員。換言之,由於人員10在瞌睡時,其頭部不會轉動,因此當面向偵測模組404在預設時間內並未偵測到人員10的頭部轉動時,處理單元140會將人員10視為在瞌睡,進而透過警示單元110使得人員保持清醒。
倘若在預設時間內面向偵測模組404偵測到人員10的頭部有轉動,則如步驟S510所示,處理單元140會判定人員在預設時間內並非維持同樣的姿勢,並且於步驟S502,影像擷取單元120會繼續擷取站立於平台P上方的人員10的影像序列。也就是此時處理單元140會將人員視為處於清醒狀態,因此不會透過警示單元110來提醒人員,且會繼續透過影像擷取單元120來監控人員10。
上述倘若人員10於預設時間內維持同樣的姿勢,處理單元140還會根據人員10的眼睛的開闔與否,更精確判斷人員10是否在瞌睡,據以決定是否驅使警示單元110發出提醒訊號。底下再舉一實施例來進行說明。
第三實施例
圖7是依照本發明第三實施例的影像處理模組的示意圖。請參照圖7,影像處理模組134包括人臉偵測模組702以及閉眼偵測模組704。其中,人臉偵測模組702與第二實施例的人臉偵測模組402相似,故於此不再贅述。閉眼偵測模組704用以對臉部物件執行眼部搜尋程序,以判斷眼睛是否為閉眼狀態。
圖8是依照本發明第三實施例的守衛提醒方法的方法流程圖。以下仍搭配圖1的守衛提醒裝置100來進行說明。請同時參照圖1、圖7及圖8,於步驟S802,影像擷取單元120會擷取站立於平台P上方的人員10的影像序列。於步驟S804,處理單元140會執行影像處理模組134來分析影像序列,以判斷人員10是否於預設時間內維持同樣的姿勢。
與前述實施例不同的是,倘若人員10於預設時間內維持同樣的姿勢,影像處理模組134還會進一步去判斷人員10的眼睛是否為閉眼狀態(步驟S806)。舉例來說,人臉偵測模組702會對影像序列執行人臉辨識程序,以在影像序列中獲得臉部物件,而閉眼偵測模組704會對臉部物件執行眼部搜尋程序,以在臉部物件中獲得眼部區域,進而根據眼部區域的尺寸判斷眼睛是否為閉眼狀態。
詳細而言,人臉偵測模組702獲得臉部物件之後,可進一步在臉部物件中搜尋鼻孔區域,以獲得鼻孔位置資訊。接著,閉眼偵測模組704可依據鼻孔位置資訊來預估眼部搜尋框,以在眼部搜尋框內偵測眼部區域。也就是說,相較於眼睛,鼻孔在影
像中更容易辨識,因此,先找出鼻孔之後,在往上估算出一眼部搜尋框,以在眼部搜尋框內找出眼部區域,藉此縮小眼部搜尋範圍。
更進一步而言,閉眼偵測模組704執行眼部搜尋程序而取出眼部區域之後,調整眼部區域的對比,而獲得加強影像。接著再對加強影像依序進行去雜點、邊緣銳利化、二值化及再次邊緣銳利化等處理,以獲得如圖9所示的眼部區域902的影像。圖9是依照本發明第三實施例的眼部區域的示意圖。
接下來,閉眼偵測模組704可基於眼部區域902的尺寸來判斷眼睛是否閉上,藉此而獲得眼部開閉資訊。例如,當眼部區域902的高度小於高度門檻值(例如,高度門檻值的範圍界於5~7個像素),且眼部區域902的寬度大於寬度門檻值(例如,寬度門檻值的範圍界於60~80個像素)時,判定眼睛目前處於閉眼狀態。若不符合上述條件,則判定眼睛目前處於睜眼狀態。
返回圖8,在人員10的眼睛為閉眼狀態的情況下,如步驟S808所示,處理單元140會驅使警示單元110發出提醒訊號。在本實施例中,閉眼偵測模組704還會繼續判斷人員10的眼睛是否仍為閉眼狀態(如步驟S806所示),而在閉眼偵測模組704偵測到人員的眼睛為睜眼狀態之前,處理單元140仍會持續驅使警示單元110發出提醒訊號。換言之,直到在閉眼偵測模組704偵測到人員10的眼睛為非閉眼狀態,也就是人員10的眼睛為睜眼狀態之後,處理單元140將會停止驅使警示單元110發出提醒訊
號,且於步驟S802,影像擷取單元120會繼續擷取人員10的影像序列。
值得一提的是,上述警示單元110所發出的提醒訊號是用以通知人員10觀看一個指定方向的訊號。例如,藉由語音訊號來通知人員去觀看影像擷取單元120,以確保人員10的眼睛並非處於閉眼狀態。然,亦可以振動訊號來提醒人員觀看指定方向。底下再舉一實施例來進行說明。
第四實施例
圖10是依照本發明第四實施例的影像處理模組的示意圖。請參照圖10,影像處理模組134包括人臉偵測模組1002以及視線偵測模組1004。其中,人臉偵測模組1002與第二實施例的人臉偵測模組402相似,故於此不再贅述。視線偵測模組1004用以分析臉部物件的臉部特徵資訊,以判斷人員注視的方向。
圖11是依照本發明第四實施例的守衛提醒方法的方法流程圖。以下仍搭配圖1的守衛提醒裝置100來進行說明。請同時參照圖1、圖10及圖11,於步驟S1102,影像擷取單元120會擷取站立於平台P上方的人員10的影像序列。於步驟S1104,處理單元140會執行影像處理模組134來分析影像序列,以判斷人員10是否於預設時間內維持同樣的姿勢。倘若人員10改變姿勢,則返回步驟S1102,影像擷取單元120繼續擷取人員10的影像序列。反之,倘若人員10於預設時間內維持同樣的姿勢,則如步驟S1106所示,處理單元140會驅使警示單元110發出提醒訊號。
與前述實施例不同的是,警示單元110所發出的提醒訊號是用以要求人員10注視指定方向。例如,透過警示單元110來發出語音訊號,以通知人員注視影像擷取單元120或其他例如為向上、向下等指定方向。或者,透過警示單元110發出振動訊號,使得人員意識到要藉由注視於指定方向來解除振動訊號。
接著,在步驟S1108中,影像處理模組134會分析影像序列的臉部特徵資訊,以判斷人員10是否注視於指定方向。例如,由人臉偵測模組1002來找出影像序列中的臉部物件,使得視線偵測模組1004能夠分析臉部物件的臉部特徵資訊,以判斷人員10注視的方向。舉例來說,視線偵測模組1004自臉部物件找到眼部區域,進而追蹤瞳孔位置的移動,以計算眼球移動座標。藉此,視線偵測模組1004可依據眼球移動座標來獲得人員10目前的注視方向。
倘若人員10未注視於指定方向,則如步驟S1106所示,處理單元140會持續驅使警示單元110發出提醒訊號。倘若視線偵測模組1004偵測到人員10注視於指定方向,則如步驟S1110所示,處理單元140會使得警示單元110停止發出提醒訊號。換言之,在人員10未注視於指定方向的情況下,處理單元140會持續驅使警示單元110發出提醒訊號,直至視線偵測模組1004偵測到人員注視於指定方向時,處理單元140會使警示單元110停止發出提醒訊號。如此一來,為了避免警示單元110發出提醒訊號後人員10仍在瞌睡,藉由判斷人員10是否注視於指定方向,可
更加確保人員10回到清醒狀態。
第五實施例
上述的守衛提醒方法也可透過守衛提醒系統來實現。圖12是依照本發明第五實施例的守衛提醒系統的方塊圖。請參照圖12,守衛提醒系統1200包括平台P、警示單元1210、影像擷取單元1220以及遠端監控主機1230,其中遠端監控主機1230耦合於警示單元1210與影像擷取單元1220之間。在此,平台P、警示單元1210及影像擷取單元1220與第一實施例中的平台P、警示單元110及影像擷取單元120之功用相同或相似,故於此不再贅述。
與前述實施例不同的是,本實施例可利用遠端監控主機1230來實現守衛提醒方法,其中遠端監控主機1230具有儲存單元以及處理單元,其中儲存單元具有影像處理模組,而處理單元會透過影像處理模組來執行守衛提醒方法的各步驟。在此,儲存單元以及處理單元與上述實施例的功能相同或相似。
如此一來,遠端監控主機1230會接收並根據自影像擷取單元1220之影像序列,以偵測人員10是否呈現睡眠狀態。並且,若人員10呈現睡眠狀態,則遠端監控主機1230會傳送控制訊號至警示單元1210,使警示單元1210產生提醒訊號來警示人員10。此外,遠端監控主機1230也可根據內部儲存的行為偵測模組、人臉偵測模組、面向偵測模組、視線偵測模組以及閉眼偵測模組,來判斷人員10是否維持固定姿勢、判斷人員10是否呈現閉眼狀態、判斷人員10的頭部是否轉動或低頭,以及判斷人員10是否
注視於指定方向,藉以判斷人員10是否在瞌睡,以及產生提醒訊號讓人員10清醒,而其中關於守衛提醒方法的詳細步驟可參考前述實施例,故於此亦不再贅述。
第六實施例
本發明另提供一種電腦程式產品,此電腦程式產品包括電腦可讀取記錄媒體。電腦可讀取記錄媒體記錄數個程式指令。這些程式指令在載入電子裝置並執行之後,便可完成上述守衛提醒方法的各步驟,同時使得電子裝置實現上述實施例所說明的功能。其中,電腦可讀取記錄媒體可以是唯讀記憶體、隨機存取記憶體、磁帶、軟碟、硬碟、光碟片以及傳輸媒體等等。在其他實施例中,電腦程式產品亦可經由網路直接傳輸提供,在此並不限制其範圍。
綜上所述,在守衛提醒方法、守衛提醒裝置、守衛提醒系統與電腦程式產品中,守衛提醒裝置會偵測人員的姿勢在預設時間內是否有變化。倘若人員在預設時間內的姿勢維持不變,則平台中的警示單元會發出提醒訊號來提醒人員,據以防止人員處於瞌睡的狀態。此外,警示單元還可持續發出提醒訊號,直到人員的姿勢有改變或人員注視指定方向,藉此,可確保人員回到清醒狀態。如此一來,守衛提醒裝置可即時地監控站立於平台上的人員的狀態,且當人員在瞌睡時或恍神的時候,守衛提醒裝置可快速的提醒人員,藉以防止人員瞌睡並讓人員保持清醒。
雖然本發明已以實施例揭露如上,然其並非用以限定本
發明,任何所屬技術領域中具有通常知識者,在不脫離本發明的精神和範圍內,當可作些許的更動與潤飾,故本發明的保護範圍當視後附的申請專利範圍所界定者為準。
S302~S306‧‧‧守衛提醒方法的各步驟
Claims (26)
- 一種守衛提醒方法,包括:透過一影像擷取單元,擷取站立於一平台上方的一人員的一影像序列,其中該影像擷取單元面向該平台並且以一預設角度擷取該影像序列;分析該影像序列,以判斷該人員是否呈現一睡眠狀態;以及當該人員呈現該睡眠狀態時,產生一提醒訊號,以警示該人員。
- 如申請專利範圍第1項所述的守衛提醒方法,其中當該人員呈現該睡眠狀態時,則發出一預警訊號至一遠端監控主機。
- 如申請專利範圍第1項所述的守衛提醒方法,其中判斷該人員是否呈現該睡眠狀態的步驟包括:根據該影像序列偵測該人員是否於一預設時間內維持一固定姿勢,若該人員在該預設時間內維持該固定姿勢,則判斷該人員呈現該睡眠狀態。
- 如申請專利範圍第1項所述的守衛提醒方法,其中判斷該人員是否呈現該睡眠狀態的步驟包括:偵測該影像序列的一臉部物件,以在偵測到在該預設時間內該人員的一頭部並未轉動的情況下,判定該人員呈現該睡眠狀態。
- 如申請專利範圍第4項所述的守衛提醒方法,其中判斷該人員是否呈現該睡眠狀態的步驟包括:當偵測到該人員的該頭部向下低時,判定該人員呈現該睡眠 狀態。
- 如申請專利範圍第1項所述的守衛提醒方法,其中判斷該人員是否呈現該睡眠狀態的步驟更包括:分析該影像序列判斷該人員的眼睛是否為一閉眼狀態;以及倘若該人員的眼睛為該閉眼狀態,則判斷該人員呈現睡眠狀態。
- 如申請專利範圍第6項所述的守衛提醒方法,其中分析該影像序列,以判斷該人員的眼睛是否屬於該閉眼狀態的步驟包括:對該影像序列執行一人臉辨識程序,以在該影像序列中獲得一臉部物件;執行一眼部搜尋程序,以在該臉部物件中獲得一眼部區域;以及根據該眼部區域的尺寸判斷該眼睛是否為該閉眼狀態。
- 如申請專利範圍第1項所述的守衛提醒方法,其中在產生該提醒訊號的步驟之後,包括:分析該影像序列的一臉部特徵資訊,以判斷該人員是否注視於一指定方向;以及倘若該人員未注視於該指定方向,持續驅使該警示單元發出該提醒訊號,直至偵測到該人員注視於該指定方向。
- 如申請專利範圍第1項所述的守衛提醒方法,其中該提醒訊號包括一振動警示、一光源警示或一音源警示。
- 一種守衛提醒裝置,包括: 一警示單元,設置於一平台內;一影像擷取單元,面向該平台並且以一預設角度的方式擷取站立於該平台上方的一人員的一影像序列;一儲存單元,具有一影像處理模組;以及一處理單元,耦接至該警示單元、該儲存單元以及該影像擷取單元之間,該處理單元執行該影像處理模組來分析該影像序列,以偵測該人員是否呈現一睡眠狀態;其中若該人員呈現該睡眠狀態,則該處理單元傳送一控制訊號至該警示單元,使該警示單元產生一提醒訊號,警示該人員。
- 如申請專利範圍第10項所述的守衛提醒裝置,其中若該人員呈現該睡眠狀態,則該處理單元發出一預警訊號至一遠端監控主機。
- 如申請專利範圍第10項所述的守衛提醒裝置,其中該影像處理模組包括:一行為偵測模組,根據該影像序列偵測該人員是否於一預設時間內維持一固定姿勢,若該人員在該預設時間內維持該固定姿勢,則判斷該人員呈現該睡眠狀態。
- 如申請專利範圍第10項所述的守衛提醒裝置,其中該影像處理模組包括:一人臉偵測模組,偵測該影像序列中的一臉部物件;以及一面向偵測模組,依據該影像序列中的該臉部物件,偵測該人員的一頭部是否有轉動,當偵測到在該預設時間內該人員的一 頭部並未轉動的情況下,該處理單元判定該人員呈現該睡眠狀態。
- 如申請專利範圍第13項所述的守衛提醒裝置,其中當該面向偵測模組偵測到該人員的該頭部向下低時,該處理單元判定該人員呈現該睡眠狀態。
- 如申請專利範圍第13項所述的守衛提醒裝置,其中該影像處理模組更包括:一視線偵測模組,分析該臉部物件的一臉部特徵資訊,以判斷該人員是否注視於一指定方向,以在該人員未注視於該指定方向的情況下,判斷該人員呈現該睡眠狀態,並使該警示單元持續發出該提醒訊號,直至偵測到該人員注視於該指定方向。
- 如申請專利範圍第10項所述的守衛提醒裝置,其中該影像處理模組包括:一人臉偵測模組,偵測該影像序列中的一臉部物件;一閉眼偵測模組,對該臉部物件執行一眼部搜尋程序,以在該臉部物件中獲得一眼部區域,進而根據該眼部區域的尺寸判斷該眼睛是否為該閉眼狀態,當該眼睛為閉眼狀態時,判斷該人員呈現睡眠狀態。
- 如申請專利範圍第10項所述的守衛提醒裝置,其中該提醒訊號包括一振動警示、一光源警示或一音源警示。
- 一種守衛提醒系統,包括:一平台,供一人員站立於其上;一警示單元,設置於該平台內; 一影像擷取單元,面向該平台並且以一預設角度的方式擷取該人員的一影像序列;以及一遠端監控主機,耦合於該警示單元與該影像擷取單元之間,接收並根據自該影像擷取單元之該影像序列,以偵測該人員是否呈現一睡眠狀態;其中若該人員呈現該睡眠狀態,則該遠端監控主機傳送一控制訊號至該警示單元,使該警示單元產生一提醒訊號,警示該人員。
- 如申請專利範圍第18項所述的守衛提醒系統,其中該遠端監控主機包括:一儲存單元,具有一影像處理模組;以及一處理單元,耦合至該儲存單元,該處理單元執行該影像處理模組來分析該影像序列,以判斷該人員是否呈現該睡眠狀態,若該人員呈現該睡眠狀態,則傳送該控制訊號至該警示單元。
- 如申請專利範圍第19項所述的守衛提醒系統,其中該影像處理模組包括:一行為偵測模組,根據該影像序列偵測該人員是否於一預設時間內維持一固定姿勢,若該人員在該預設時間內維持該固定姿勢,則判斷該人員呈現該睡眠狀態。
- 如申請專利範圍第19項所述的守衛提醒系統,其中該影像處理模組包括:一人臉偵測模組,偵測該影像序列中的一臉部物件;以及 一面向偵測模組,依據該影像序列中的該臉部物件,偵測該人員之頭部是否有轉動,當在一預設時間內該人員之頭部並未轉動的情況下,該處理單元判斷該人員呈現該睡眠狀態。
- 如申請專利範圍第21項所述的守衛提醒系統,其中當該面向偵測模組偵測到該人員的該頭部向下低時,該處理單元判定該人員呈現該睡眠狀態。
- 如申請專利範圍第21項所述的守衛提醒系統,其中該影像處理模組更包括:一視線偵測模組,分析該臉部物件的一臉部特徵資訊,以判斷該人員是否注視於一指定方向,當該人員未注視於該指定方向的情況下,判斷該人員呈現該睡眠狀態,並使該警示單元持續發出該提醒訊號,直至偵測到該人員注視於該指定方向。
- 如申請專利範圍第19項所述的守衛提醒系統,其中該影像處理模組包括:一人臉偵測模組,偵測該影像序列中的一臉部物件;一閉眼偵測模組,對該臉部物件執行一眼部搜尋程序,以在該臉部物件中獲得一眼部區域,進而根據該眼部區域的尺寸判斷該眼睛是否為該閉眼狀態,當該眼睛為閉眼狀態時,判斷該人員呈現睡眠狀態。
- 如申請專利範圍第18項所述的守衛提醒系統,其中該警示信號包括一振動警示、光源警示或音源警示。
- 一種電腦程式產品,包括一電腦可讀取記錄媒體,該電 腦可讀取記錄媒體記錄至少一程式指令,該至少一程式指令在載入一電子裝置後,用以執行申請專利範圍第1項至第9項中之任一項之步驟。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
TW103119035A TW201545130A (zh) | 2014-05-30 | 2014-05-30 | 守衛提醒方法及其提醒裝置、提醒系統及電腦程式產品 |
CN201410364471.0A CN105138947A (zh) | 2014-05-30 | 2014-07-29 | 守卫提醒方法及其提醒装置与提醒系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
TW103119035A TW201545130A (zh) | 2014-05-30 | 2014-05-30 | 守衛提醒方法及其提醒裝置、提醒系統及電腦程式產品 |
Publications (1)
Publication Number | Publication Date |
---|---|
TW201545130A true TW201545130A (zh) | 2015-12-01 |
Family
ID=54724291
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
TW103119035A TW201545130A (zh) | 2014-05-30 | 2014-05-30 | 守衛提醒方法及其提醒裝置、提醒系統及電腦程式產品 |
Country Status (2)
Country | Link |
---|---|
CN (1) | CN105138947A (zh) |
TW (1) | TW201545130A (zh) |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109492620A (zh) * | 2018-12-18 | 2019-03-19 | 广东中安金狮科创有限公司 | 监控设备及其控制装置、岗位监控方法和可读存储介质 |
CN110059666B (zh) * | 2019-04-29 | 2022-04-01 | 北京市商汤科技开发有限公司 | 一种注意力检测方法及装置 |
CN112016363A (zh) * | 2019-05-30 | 2020-12-01 | 富泰华工业(深圳)有限公司 | 人员监控方法、装置、计算机装置及可读存储介质 |
CN110349284A (zh) * | 2019-07-03 | 2019-10-18 | 浙江好得电气有限公司 | 带互感器外壳的高原高压pt柜检修监控方法、装置 |
CN111990976A (zh) * | 2020-07-22 | 2020-11-27 | 五八到家有限公司 | 监测方法、装置、设备和存储介质 |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001010368A (ja) * | 1999-06-17 | 2001-01-16 | Hyundai Motor Co Ltd | 居眠り運転警報システムの居眠り運転判断方法 |
JP4845698B2 (ja) * | 2006-12-06 | 2011-12-28 | アイシン精機株式会社 | 眼部検出装置、眼部検出方法及びプログラム |
CN101574261A (zh) * | 2009-06-18 | 2009-11-11 | 金会庆 | 一种驾驶疲劳远程监控预警装置 |
CN102034334B (zh) * | 2009-09-28 | 2012-12-19 | 财团法人车辆研究测试中心 | 驾驶人监控方法及其监控系统 |
CN102752458A (zh) * | 2012-07-19 | 2012-10-24 | 北京理工大学 | 一种驾驶员疲劳检测手机与检测单元 |
CN105303772A (zh) * | 2012-09-24 | 2016-02-03 | 由田新技股份有限公司 | 瞌睡提醒装置 |
-
2014
- 2014-05-30 TW TW103119035A patent/TW201545130A/zh unknown
- 2014-07-29 CN CN201410364471.0A patent/CN105138947A/zh active Pending
Also Published As
Publication number | Publication date |
---|---|
CN105138947A (zh) | 2015-12-09 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11100780B2 (en) | Surveillance system and method for predicting patient falls using motion feature patterns | |
CN110287923B (zh) | 人体姿态获取方法、装置、计算机设备及存储介质 | |
US11308777B2 (en) | Image capturing apparatus with variable event detecting condition | |
TW201545130A (zh) | 守衛提醒方法及其提醒裝置、提醒系統及電腦程式產品 | |
US10853698B2 (en) | System and method of using multi-frame image features for object detection | |
WO2014125882A1 (ja) | 情報処理システム、情報処理方法及びプログラム | |
US20160342845A1 (en) | Detection zones | |
JP2011070576A (ja) | 画像処理装置、及び画像処理方法 | |
TWI533239B (zh) | 遠距臉部監控系統及其方法、電腦可讀取紀錄媒體、及電腦程式產品 | |
JPWO2015198767A1 (ja) | 異常検知装置及び異常検知方法 | |
US20240045440A1 (en) | Electronic apparatus and control method therof | |
WO2019013257A1 (ja) | 見守り支援システム及びその制御方法、プログラム | |
US11043301B2 (en) | Infrared detectors and thermal tags for real-time activity monitoring | |
TWI492193B (zh) | 觸發訊號的方法及車用電子裝置 | |
KR20190126773A (ko) | 웨어러블 기기를 이용한 객체의 이벤트 감지 방법 및 이를 운용하는 관리 서버 | |
US11842513B2 (en) | Image processing apparatus, image processing method, and storage medium | |
JP7210163B2 (ja) | 画像処理装置、画像処理方法およびプログラム | |
WO2023164782A1 (en) | Harm prevention monitoring system and method | |
US20210312191A1 (en) | System and method for efficient privacy protection for security monitoring | |
Gulhane et al. | Intelligent fatigue detection and automatic vehicle control system | |
TW201126463A (en) | Video monitoring system and method | |
Himaswi et al. | Deep Learning-Based Drowsiness Detection System Using IoT | |
Cheng et al. | A surveillance robot with human recognition based on video and audio | |
TWM503714U (zh) | 廣角影像切割處理系統 | |
Siddiqua et al. | Real Time Face Mask Detection and Monitoring System (RFMDM) |