TW202226173A

TW202226173A - 基於互動行為偵測的警示方法與警示系統

Info

Publication number: TW202226173A
Application number: TW109145824A
Authority: TW
Inventors: 何亮融; 楊宗翰
Original assignee: 宏碁股份有限公司
Priority date: 2020-12-23
Filing date: 2020-12-23
Publication date: 2022-07-01

Abstract

一種基於互動行為偵測的警示方法與系統。所述方法包括：經由影像辨識模組偵測目標區域內的第一目標物的類型；經由所述影像辨識模組偵測所述目標區域內的第二目標物的類型；根據所述第一目標物的類型與所述第二目標物的類型決定風險評估模型；經由所述影像辨識模組偵測所述第一目標物與所述第二目標物之間的互動行為；以及根據所述風險評估模型與所述互動行為發出警示訊息，以藉由所述警示訊息警示所述第一目標物。

Description

基於互動行為偵測的警示方法與警示系統

本發明是有關於一種風險評估與警示技術，且特別是有關於一種基於互動行為偵測的警示方法與警示系統。

在日常生活中，許多危險或意外的發生與人們大意的行為息息相關。但是，現有的安保系統主要都是針對已經發生的意外(例如火災)而進行警報發布以及滅火等後續處理，並無法在意外發生之前即預先偵測並嘗試預防。

本發明提供一種基於互動行為偵測的警示方法與警示系統，可根據不同類型的物體之間的互動行為來嘗試偵測與預防可能發生的意外事故。

本發明的實施例提供一種基於互動行為偵測的警示方法，其包括：經由影像辨識模組偵測目標區域內的第一目標物的類型；經由所述影像辨識模組偵測所述目標區域內的第二目標物的類型；根據所述第一目標物的類型與所述第二目標物的類型決定風險評估模型；經由所述影像辨識模組偵測所述第一目標物與所述第二目標物之間的互動行為；以及根據所述風險評估模型與所述互動行為發出警示訊息，以藉由所述警示訊息警示所述第一目標物。

本發明的實施例另提供一種基於互動行為偵測的警示系統，其包括影像擷取界面、影像辨識模組、警示裝置及處理器。所述影像擷取界面用以擷取對應目標區域的目標影像。所述影像辨識模組用以對所述目標影像執行影像辨識操作。所述處理器耦接至所述影像擷取界面、所述影像辨識模組及所述警示裝置。所述處理器用以：經由所述影像辨識模組偵測所述目標區域內的第一目標物的類型；經由所述影像辨識模組偵測所述目標區域內的第二目標物的類型；根據所述第一目標物的類型與所述第二目標物的類型決定風險評估模型；經由所述影像辨識模組偵測所述第一目標物與所述第二目標物之間的互動行為；以及根據所述風險評估模型與所述互動行為指示所述警示裝置發出警示訊息，以藉由所述警示訊息警示所述第一目標物。

基於上述，影像辨識模組可偵測目標區域內的多個目標物的類型並據以決定一個風險評估模型。根據所述風險評估模型與所述多個目標物之間的互動行為，一個警示訊息可被發出，以藉由所述警示訊息警示所述目標物。藉此，可嘗試偵測與預防可能發生的風險事件。

圖1是根據本發明的一實施例所繪示的基於互動行為偵測的警示系統的功能方塊圖。請參照圖1，系統(亦稱為基於互動行為偵測的警示系統)100包括影像擷取界面11、儲存裝置12、警示裝置13及處理器14。

影像擷取界面11用以擷取外部影像(亦稱為目標影像)。此目標影像可包括某一區域(亦稱為目標區域)之影像。例如，影像擷取界面11可包括鏡頭與感光模組等影像擷取元件之組合。此外，影像擷取界面11的數目可以是一或多個，以分別或共同擷取所述目標影像。

儲存裝置12用以儲存資料(例如所述目標影像之影像資料)。例如，儲存電路12可包括揮發性記憶體模組與非揮發性記憶體模組。揮發性記憶體模組可用以揮發性地儲存資料。非揮發性記憶體模組可用以非揮發性地儲存資料。例如，揮發性記憶體模組可包括動態隨機存取記憶體(Dynamic Random Access Memory, DRAM)，且非揮發性記憶體模組可包括傳統硬碟(Hard Disk Drive, HDD)及/或固態硬碟(Solid state drive, SSD)。

警示裝置13用以發出警示訊息。例如，警示裝置13可發出與視覺或聽覺有關的警示訊息至所述目標區域。例如，在一實施例中，警示裝置13可包括一或多個顯示器。所述顯示器可藉由影像的形式顯示所述警示訊息。或者，在一實施例中，警示裝置13可包括一或多個揚聲器。所述揚聲器可藉由聲音(例如警示音)的形式發出所述警示訊息。

處理器14耦接至影像擷取界面11、儲存裝置12及警示裝置13。處理器14可用以負責系統100的整體或部分運作。例如，處理器14可包括任何可程式化之一般用途或特殊用途的微處理器、數位訊號處理器(Digital Signal Processor, DSP)、可程式化控制器、特殊應用積體電路(Application Specific Integrated Circuits, ASIC)、可程式化邏輯裝置(Programmable Logic Device, PLD)或其他類似裝置或這些裝置的組合。

在一實施例中，系統100中的各個構件(例如影像擷取界面11、儲存裝置12、警示裝置13及處理器14)可實作於單一主機裝置10中。例如，主機裝置10的外型可類似於監視器並可設置於所述目標區域附近。在一實施例中，系統100中的各個構件可分散配置於多個裝置中。例如，影像擷取界面11可實作為監視器，警示裝置13可實作為揚聲器，而儲存裝置12與處理器14可設置於一主機裝置中。影像擷取界面11與警示裝置13可設置於所述目標區域附近，而儲存裝置12與處理器14則可設置於任一地點(例如所述目標區域附近或者於遠端的伺服器中)。在一實施例中，系統100還可包括其他類型的輸入/輸出介面，例如麥克風(用以接收目標區域內的聲音訊號)、顯示器(用以顯示目標影像)、滑鼠、鍵盤或網路連接介面等，本發明不加以限制。

在一實施例中，儲存裝置12儲存有影像辨識模組101。影像辨識模組101可基於影像辨識技術來對所述目標影像執行自動化影像辨識操作。在一實施例中，影像辨識模組101還可實作為硬體電路(例如影像處理晶片)。

在一實施例中，處理器14可藉由影像辨識模組101來偵測所述目標區域內的目標物(亦稱為第一目標物)的類型。同時，處理器14可藉由影像辨識模組101來偵測所述目標區域內的另一目標物(亦稱為第二目標物)的類型。

在一實施例中，目標物的類型可以是人、人以外的動物或物體。在一實施例中，目標物的類型還可以進一步細分為特定類型的人、特定類型的動物或特定類型的物體。以人為例，所述特定類型的人可以職業、年齡及/或性別來進行區別。以動物為例，所述特定類型的動物可以是貓、狗或其他動物。或者，以物為例，所述特定類型的物體可以物體的型態、用途及/或功能來進行區別。處理器14可藉由影像辨識模組101來辨識目標影像中的一或多個目標物之類型。

在一實施例中，處理器14可根據第一目標物的類型與第二目標物的類型決定一個風險評估模型。須注意的是，特定類型的目標物之組合可對應特定的風險評估模型。不同類型的目標物之組合可對應不同的風險評估模型。

在一實施例中，處理器14可經由影像辨識模組101偵測第一目標物與第二目標物之間的互動行為。接著，處理器14可根據所決定的風險評估模型與所述互動行為指示警示裝置13發出警示訊息，以藉由所述警示訊息警示所述目標區域內的目標物。

在一實施例中，處理器14可判斷所偵測到的第一目標物與第二目標物之間的互動行為是否符合所決定的風險評估模型所定義的一個警示觸發條件。若所述互動行為符合所決定的風險評估模型所定義的警示觸發條件，處理器14可指示警示裝置13發出所述警示訊息，以所述警示訊息警示所述目標區域內的目標物。此外，若所述互動行為不符合所決定的風險評估模型所定義的警示觸發條件，則處理器14可不指示警示裝置13發出所述警示訊息。

在一實施例中，處理器14可根據第一目標物的類型與第二目標物的類型之組合來決定所述風險評估模型。例如，在一實施例中，假設第一目標物的類型與第二目標物的類型符合某一類型組合(亦稱為第一類型組合)，處理器14可將所述風險評估模型決定為某一風險評估模型(亦稱為第一風險評估模型)。所述第一風險評估模型可定義一個警示觸發條件(亦稱為第一警示觸發條件)。在採用第一風險評估模型的狀態下，若所偵測到的第一目標物與第二目標物之間的互動行為符合所述第一風險評估模型所定義的第一警示觸發條件，處理器14可指示警示裝置13發出所述警示訊息。

或者，在一實施例中，假設第一目標物的類型與第二目標物的類型符合另一類型組合(亦稱為第二類型組合)，處理器14可將所述風險評估模型決定為另一風險評估模型(亦稱為第二風險評估模型)。所述第二風險評估模型可定義另一個警示觸發條件(亦稱為第二警示觸發條件)。在採用第二風險評估模型的狀態下，若所偵測到的第一目標物與第二目標物之間的互動行為符合所述第二風險評估模型所定義的第二警示觸發條件，處理器14可發出所述警示訊息。其中，第二類型組合不同於第一類型組合，第二風險評估模型不同於第一風險評估模型、且第二警示觸發條件不同於第一警示觸發條件。此外，根據不同互動行為及/或不同警示觸發條件所發出的警示訊息的訊息內容也可能不同。

在以下實施例中，是假設所述警示訊息是用以警示目標區域中的第一目標物。因此，第一目標物的類型可為人或人以外的動物，而第二目標物的類型則可以是人、人以外的動物或物體。處理器14可藉由影像辨識模組101來偵測第一目標物與第二目標物之間的相對位置及/或偵測第一目標物的姿態。然後，處理器14可根據第一目標物與第二目標物之間的相對位置及/或第一目標物的姿態來決定第一目標物與第二目標物之間的互動行為。

圖2是根據本發明的一實施例所繪示的目標影像的示意圖。請參照圖2，目標影像21中的目標物201與202及其類型可被偵測。例如，目標物201的類型可被偵測為人或廚師，而目標物202的類型可被偵測為危險物品、需要長時間關注的物體或火爐。根據目標物201(例如廚師)與202(例如火爐)的類型組合，相應的風險評估模型可被決定。爾後，根據目標物201的位置、肢體移動軌跡、臉部朝向、肢體動作、目標物201與202之間的相對位置、目標物202的位置、及/或目標物202的狀態(例如已開火或者已熄火)，目標物201與202之間的互動行為可被持續偵測。

在某一時間點，若所測得的目標物201與202之間的互動行為符合所決定的風險評估模型所定義的警示觸發條件(例如在目標物202處於已開火的狀態下，目標物201經過一段預設時間後仍未回到目標物202前方或關注目標物202)，一個警示訊息可被發出。例如，此警示訊息可藉由揚聲器送出，以警示或提醒目標物201前去查看目標物202的狀態。藉此，可減少因廚師長時間未注意火爐的運作狀態而導致火災發生的機率。

須注意的是，在不同的使用場景中，圖2中的目標物201與202之類型組合可改變。同時，用以偵測目標物201與202之互動行為是否觸發警示的風險評估模型也可被相應地決定並使用。

在一實施例中，假設圖2中的目標物201的類型為照顧者(例如保母)，而目標物202的類型為被照顧者(例如小孩)。在識別出目標物201與202的類型後，對應於目標物201與目標物202之類型組合的風險評估模型可被決定。同時，目標物201與202之間的互動行為(例如目標物201的位置、肢體移動軌跡、臉部朝向、肢體動作、目標物201與202之間的相對位置、目標物202的位置、及/或目標物202的狀態)可被持續偵測。

在某一時間點，若所測得的目標物201與202之間的互動行為符合所決定的風險評估模型所定義的警示觸發條件(例如目標物201經過一段預設時間後仍未回到目標物202前方或關注目標物202)，一個警示訊息可被發出。例如，此警示訊息可藉由揚聲器送出，以警示或提醒目標物201前去查看目標物202的狀態。藉此，可減少因照顧者長時間未關注受照顧者而導致受照顧者發生意外的機率。

在一實施例中，假設圖2中的目標物201的類型為巡視人員(例如保全)，而目標物202的類型為特定場所。在識別出目標物201與202的類型後，對應於目標物201與目標物202之類型組合的風險評估模型可被決定。同時，目標物201與202之間的互動行為(例如目標物201的位置、肢體移動軌跡、臉部朝向、肢體動作、目標物201與202之間的相對位置、目標物202的位置、及/或目標物202的狀態)可被持續偵測。

在某一時間點，若所測得的目標物201與202之間的互動行為符合所決定的風險評估模型所定義的警示觸發條件(例如目標物201經過一段預設時間後仍未經過目標物202前方或關注目標物202)，一個警示訊息可被發出。例如，此警示訊息可藉由揚聲器送出，以警示或提醒目標物201前去查看目標物202的狀態。藉此，可減少因巡邏人員長時間未前往特定場所巡邏而導致特定場被其他人入侵的機率。

在一實施例中，假設圖2中的目標物201的類型為未知人員(例如陌生人)，而目標物202的類型為特定物體或特定場所。在識別出目標物201與202的類型後，對應於目標物201與目標物202之類型組合的風險評估模型可被決定。同時，目標物201與202之間的互動行為(例如目標物201的位置、肢體移動軌跡、臉部朝向、肢體動作、目標物201與202之間的相對位置、目標物202的位置、及/或目標物202的狀態)可被持續偵測。

在某一時間點，若所測得的目標物201與202之間的互動行為符合所決定的風險評估模型所定義的警示觸發條件(例如目標物201在目標物202前方的停留時間或出現頻率超過一預設值)，一個警示訊息可被發出。例如，此警示訊息可藉由揚聲器送出，以警示或提醒目標物201其異常行為已經被偵測。藉此，可減少在無人看守的情況下特定物體遭竊或特定場所被入侵的機率。

須注意的是，雖然在前述實施例中已經提出了多種目標物之類型組合以及相應的風險評估模型在使用上的範例，然而，實際上目標物之類型組合還可以具有更多的變化，而不顯於上述組合。同時，風險評估模型也可以根據不同的目標物之類型組合來進行選用或設定從而產生相應的警示訊息。具體的操作細節已詳述於上，在此不逐一贅述。

圖3是根據本發明的一實施例所繪示的基於互動行為偵測的警示方法的流程圖。請參照圖3，在步驟S301中，經由影像辨識模組偵測目標區域內的第一目標物的類型。在步驟S302中，經由所述影像辨識模組偵測所述目標區域內的第二目標物的類型。在步驟S303中，根據所述第一目標物的類型與所述第二目標物的類型決定風險評估模型。在步驟S304中，經由所述影像辨識模組偵測所述第一目標物與所述第二目標物之間的互動行為。在步驟S305中，根據所述風險評估模型與所述互動行為發出警示訊息，以藉由所述警示訊息警示所述第一目標物。

然而，圖3中各步驟已詳細說明如上，在此便不再贅述。值得注意的是，圖3中各步驟可以實作為多個程式碼或是電路，本發明不加以限制。此外，圖3的方法可以搭配以上實施例使用，也可以單獨使用，本發明不加以限制。

綜上所述，影像辨識模組可偵測目標區域內的多個目標物的類型並據以決定一個風險評估模型。根據所述風險評估模型與所述多個目標物之間的互動行為，一個警示訊息可被發出，以藉由所述警示訊息警示所述目標物。藉此，可在風險事件發生之前，即嘗試偵測與預防可能發生的風險事件。此外，由於目標區域內的目標物的類型可被自動偵測且相應的風險評估模型可被自動選用，故本發明實施例中提出的方法與系統在使用上也具有相當高的便利性，從而改善使用者體驗。

雖然本發明已以實施例揭露如上，然其並非用以限定本發明，任何所屬技術領域中具有通常知識者，在不脫離本發明的精神和範圍內，當可作些許的更動與潤飾，故本發明的保護範圍當視後附的申請專利範圍所界定者為準。

100:基於互動行為偵測的警示系統 10:主機裝置 11:影像擷取界面 12:儲存裝置 13:警示裝置 14:處理器 21:目標影像 201, 202:目標物 S301~S305:步驟

圖1是根據本發明的一實施例所繪示的基於互動行為偵測的警示系統的功能方塊圖。圖2是根據本發明的一實施例所繪示的目標影像的示意圖。圖3是根據本發明的一實施例所繪示的基於互動行為偵測的警示方法的流程圖。

S301~S305:步驟

Claims

一種基於互動行為偵測的警示方法，包括：經由一影像辨識模組偵測一目標區域內的一第一目標物的類型；經由該影像辨識模組偵測該目標區域內的一第二目標物的類型；根據該第一目標物的類型與該第二目標物的類型決定一風險評估模型；經由該影像辨識模組偵測該第一目標物與該第二目標物之間的一互動行為；以及根據該風險評估模型與該互動行為發出一警示訊息，以藉由該警示訊息警示該第一目標物。
如請求項1所述的基於互動行為偵測的警示方法，其中根據該第一目標物的類型與該第二目標物的類型決定該風險評估模型之步驟包括：若該第一目標物的類型與該第二目標物的類型符合一第一類型組合，將該風險評估模型決定為一第一風險評估模型；以及若該第一目標物的類型與該第二目標物的類型符合一第二類型組合，將該風險評估模型決定為一第二風險評估模型，其中該第一風險評估模型所定義的一第一警示觸發條件不同於該第二風險評估模型所定義的一第二警示觸發條件。
如請求項1所述的基於互動行為偵測的警示方法，其中該第一目標物的類型為人或動物，且該第二目標物的類型為人、動物或物體。
如請求項1所述的基於互動行為偵測的警示方法，其中經由該影像辨識模組偵測該第一目標物與該第二目標物之間的該互動行為之步驟包括：偵測該第一目標物與該第二目標物之間的相對位置；偵測該第一目標物的姿態；以及根據該第一目標物與該第二目標物之間的相對位置與該第一目標物的姿態，決定該第一目標物與該第二目標物之間的該互動行為。
如請求項1所述的基於互動行為偵測的警示方法，其中根據該風險評估模型與該互動行為發出該警示訊息之步驟包括：判斷該互動行為是否符合該風險評估模型所定義的一警示觸發條件；以及若該互動行為符合該風險評估模型所定義的該警示觸發條件，發出該警示訊息。
一種基於互動行為偵測的警示系統，包括：一影像擷取界面，用以擷取對應一目標區域的一目標影像；一影像辨識模組，用以對該目標影像執行一影像辨識操作；一警示裝置；一處理器，耦接至該影像擷取界面、該影像辨識模組及該警示裝置，其中該處理器用以：經由該影像辨識模組偵測該目標區域內的一第一目標物的類型；經由該影像辨識模組偵測該目標區域內的一第二目標物的類型；根據該第一目標物的類型與該第二目標物的類型決定一風險評估模型；經由該影像辨識模組偵測該第一目標物與該第二目標物之間的一互動行為；以及根據該風險評估模型與該互動行為指示該警示裝置發出一警示訊息，以藉由該警示訊息警示該第一目標物。
如請求項6所述的基於互動行為偵測的警示系統，其中根據該第一目標物的類型與該第二目標物的類型決定該風險評估模型之操作包括：若該第一目標物的類型與該第二目標物的類型符合一第一類型組合，將該風險評估模型決定為一第一風險評估模型；以及若該第一目標物的類型與該第二目標物的類型符合一第二類型組合，將該風險評估模型決定為一第二風險評估模型，其中該第一風險評估模型所定義的一第一警示觸發條件不同於該第二風險評估模型所定義的一第二警示觸發條件。
如請求項6所述的基於互動行為偵測的警示系統，其中該第一目標物的類型為人或物，且該第二目標物的類型為人、動物或物體。
如請求項6所述的基於互動行為偵測的警示系統，其中經由該影像辨識模組偵測該第一目標物與該第二目標物之間的該互動行為之操作包括：偵測該第一目標物與該第二目標物之間的相對位置；偵測該第一目標物的姿態；以及根據該第一目標物與該第二目標物之間的相對位置與該第一目標物的姿態，決定該第一目標物與該第二目標物之間的該互動行為。
如請求項6所述的基於互動行為偵測的警示系統，其中根據該風險評估模型與該互動行為指示該警示裝置發出該警示訊息之操作包括：判斷該互動行為是否符合該風險評估模型所定義的一警示觸發條件；以及若該互動行為符合該風險評估模型所定義的該警示觸發條件，指示該警示裝置發出該警示訊息。