TW202315382A - 監測區域的設定裝置、監測區域的設定方法以及監測區域的設定程式 - Google Patents

Abstract

設定方法包括下述步驟：從攝影機獲取映照有作業現場與正在作業現場進行作業的作業者的設定用動態圖像；根據與分析程式相同的命令，對於設定用動態圖像的各訊框來檢測作業者的位置；提供播放設定用動態圖像的第一畫面；以及對應於針對第一畫面的操作來設定監測區域。第一畫面包含表示所檢測出的作業者的位置的標記。標記被重疊顯示於設定用動態圖像上。藉此，設定方法可支援與步驟相應的監測區域的適當且簡便的設定。

Description

設定裝置、設定方法以及設定程式

本揭示是有關於一種設定裝置、設定方法以及設定程式。

以往，進行了下述嘗試，即：使用由設置於工廠等的作業現場的攝影機所拍攝的動態圖像，來改善作業現場中所含的作業步驟。例如，日本專利特開2020-204819號公報（專利文獻1）揭示了一種資訊處理裝置，對藉由天花板攝影機的拍攝而獲得的動態圖像進行圖像分析。資訊處理裝置藉由對動態圖像進行圖像分析，從而判定與各步驟關聯的監測區域中是否有作業者存在，並生成表示被判定為在監測區域有作業者存在的時段的資料。根據所述資料，容易掌握各步驟中的作業時段。 [現有技術文獻] [專利文獻]

專利文獻1：日本專利特開2020-204819號公報

[發明所欲解決之課題]

專利文獻1所揭示的技術中，對各步驟預先設定監測區域。若對某步驟設定的監測區域與正在所述步驟中進行作業的作業者的位置產生偏離，則分析結果的精度將下降。因此，理想的是適當且簡便地設定與步驟相應的監測區域。

本揭示是有鑒於所述問題而完成，其目的在於提供一種支援與步驟相應的監測區域的適當且簡便的設定的設定裝置、設定方法以及設定程式。 [解決課題之手段]

根據本揭示的一例，設定裝置對分析程式設定監測區域。分析程式包含：第一命令，對於從拍攝作業現場的攝影機所獲取的分析用動態圖像的各訊框來檢測作業者的位置，所述作業現場包含多個步驟；以及第二命令，基於與多個步驟各自對應的監測區域和所檢測出的作業者的位置來判定在監測區域是否有作業者存在。設定裝置包括獲取部、檢測部、提供部以及設定部。獲取部從攝影機獲取映照有作業現場與正在作業現場進行作業的作業者的設定用動態圖像。檢測部根據與第一命令相同的命令，對於設定用動態圖像的各訊框來檢測作業者的位置。提供部提供播放設定用動態圖像的第一畫面。設定部對應於針對第一畫面的操作來設定監測區域。第一畫面包含表示由檢測部所檢測出的位置的標記。標記被重疊顯示於設定用動態圖像上。

根據該揭示，使用者可一邊觀察映照於在第一畫面上播放的設定用動態圖像中的作業者，一邊設定各步驟的監測區域。表示依據與分析程式的第一命令相同的命令而檢測出的作業者的位置的標記被重疊顯示於設定用動態圖像。因此，使用者只要調整監測區域的尺寸及位置以使其包含標記即可。藉此，使用者可對於各步驟而簡便地設定與進行所述步驟的作業的作業者的位置相適合的監測區域。如此，設定裝置可支援與步驟相應的監測區域的適當且簡便的設定。

所述的揭示中，提供部進而提供第二畫面，所述第二畫面表示使用設定用動態圖像與由設定部所設定的監測區域的分析程式得出的分析結果。

根據該揭示，使用者藉由確認第二畫面，從而可驗證是否已適當地設定了監測區域。

所述的揭示中，第二畫面包含對於多個步驟的各步驟而表示在對應的監測區域有作業者存在的時段的圖。或者，第二畫面包含對於多個步驟的各步驟而表示對應的監測區域的有作業者存在的時間的偏差的箱形圖。

根據該揭示，使用者藉由確認表示在監測區域有作業者存在的時段的圖或箱形圖，可容易地判斷監測區域是否適當。

所述的揭示中，第二命令包含：從分析用動態圖像中提取包含對象訊框的連續的多個訊框的命令；算出多個訊框中在對象監測區域包含藉由第一命令的執行而檢測出的作業者的位置的訊框的比例的命令，所述對象監測區域與所述多個步驟中的對象步驟對應；以及對應於比例超過臨限值的情況，而決定為在對象訊框的拍攝時刻有作業者存在於對象監測區域的命令。提供部進而提供用於設定臨限值的第三畫面。設定部對應於針對第三畫面的操作，進而設定臨限值。

根據該揭示，分析程式的分析結果對應於臨限值而變化。使用者可一邊確認第二畫面，一邊設定適當的臨限值。

所述的揭示中，第一命令包含：對於分析用動態圖像的各訊框，檢測映照有作業者的矩形區域的命令；以及將矩形區域的中心點決定為作業者的位置的命令。檢測部根據與第一命令相同的命令，對於設定用動態圖像的各訊框檢測矩形區域。第一畫面更包含表示由檢測部所檢測出的矩形區域的第一框線。第一框線被重疊顯示於設定用動態圖像上。

根據該揭示，使用者可容易地掌握在設定用動態圖像中映照有作業者的區域。

所述的揭示中，設定用動態圖像是在第一畫面中，依據從播放、暫停、逐格前進、逐格後退及時間指定中所選擇的方式顯示。

根據該揭示，使用者可一邊確認依據所期望的方式而顯示的設定用動態圖像，一邊設定監測區域。

所述的揭示中，第一畫面包含分別表示一個以上的監測區域的一個以上的第二框線。設定部將由一個以上的第二框線中經指定的一個第二框線所表示的監測區域決定為作為編輯對象的監測區域，對應於針對經指定的一個第二框線的操作來對作為編輯對象的監測區域進行編輯。

根據該揭示，使用者可藉由調整第二框線的尺寸及位置來容易地遍及監測區域。

根據本揭示的一例，設定方法對分析程式設定監測區域。分析程式包含：第一命令，對於從拍攝作業現場的攝影機所獲取的分析用動態圖像的各訊框來檢測作業者的位置，所述作業現場包含多個步驟；以及第二命令，基於與多個步驟各自對應的監測區域和所檢測出的作業者的位置來判定在監測區域是否有作業者存在。設定方法包括第一步驟～第四步驟。第一步驟是從攝影機獲取映照有作業現場與正在作業現場進行作業的作業者的設定用動態圖像的步驟。第二步驟是根據與第一命令相同的命令，對於設定用動態圖像的各訊框來檢測作業者的位置的步驟。第三步驟是提供播放設定用動態圖像的第一畫面的步驟。第四步驟是對應於針對第一畫面的操作來設定監測區域的步驟。第一畫面包含表示所檢測出的作業者的位置的標記。標記被重疊顯示於設定用動態圖像上。

根據本揭示的一例，設定程式使電腦執行所述設定方法。

藉由該些揭示，亦可支援與步驟相應的監測區域的適當且簡便的設定。 [發明的效果]

根據本揭示，可支援與步驟相應的監測區域的適當且簡便的設定。

一邊參照圖式，一邊詳細說明本發明的實施形態。再者，對於圖中的相同或相當的部分，標註同一符號並不再重複其說明。以下所說明的各變形例亦可適當選擇性地加以組合。

§1 適用例 對適用本實施形態的設定裝置的系統的概略進行說明。圖1是表示適用實施形態的設定裝置的系統的一例的圖。如圖1所示，系統1包括設定裝置100、攝影機200、顯示裝置300、輸入裝置350以及分析程式400。系統1被設在工廠等作為生產現場的作業現場2。

作業現場2包含多個步驟3（步驟3_1～步驟3_n）。一位以上的作業者5在作業現場2，一邊在多個步驟3之間移動，一邊在各步驟3中進行作業。

攝影機200被設置於俯瞰作業現場2的位置（例如天花板），對作業現場2進行拍攝。攝影機200例如為超廣角攝影機或廣角攝影機。攝影機200輸出藉由拍攝而獲得的動態圖像資料（以下簡稱作「動態圖像」）。

分析程式400是用於進行針對從攝影機200獲取的分析用動態圖像的圖像分析的程式。分析程式400亦可被安裝於未圖示的電腦裝置，由所述電腦裝置的處理器予以執行。或者，分析程式400亦可被安裝於設定裝置100，由設定裝置100的處理器予以執行。

分析程式400包含：命令401，對於分析用動態圖像的各訊框而檢測作業者的位置；以及命令402，基於與多個步驟3各自對應的監測區域和所檢測出的作業者的位置，來判定在監測區域是否有作業者存在。監測區域為動態圖像上的區域，例如為矩形。然而，監測區域並不限定於矩形，亦可為其他形狀（例如圓形、橢圓形等）。以下，對監測區域為矩形的情況進行說明。

設定裝置100例如為通用電腦，與顯示裝置300及輸入裝置350連接。顯示裝置300例如為液晶顯示器。輸入裝置350例如包含鍵盤、滑鼠、觸控面板等。

設定裝置100支援分析程式400的執行所需的監測區域的設定。具體而言，設定裝置100執行圖1所示的步驟S1～步驟S4。步驟S1～步驟S4是由設定裝置100的處理器予以執行。

步驟S1中，設定裝置100從攝影機200獲取映照有作業現場2與正在作業現場2進行作業的作業者5的設定用動態圖像。

步驟S2中，設定裝置100根據與分析程式400的命令401相同的命令，對於設定用動態圖像的各訊框而檢測作業者5的位置。

步驟S3中，設定裝置100提供播放設定用動態圖像的設定畫面30。具體而言，設定裝置100使顯示裝置300顯示設定畫面30。

步驟S4中，設定裝置100對應於針對設定畫面30的操作來設定監測區域。具體而言，在設定畫面30上，對應於對輸入裝置350的輸入而顯示與監測區域對應的矩形的框線32。使用者對輸入裝置350進行操作，從而在設定畫面30上調整框線32的位置及尺寸。設定裝置100將由框線32所包圍的區域決定為監測區域，生成表示監測區域的四個頂點的座標的設定資訊。分析程式400基於所生成的設定資訊來確定監測區域，使用所確定的監測區域來進行圖像分析。

設定畫面30包含表示在步驟S2中所檢測出的作業者5的位置的標記31。標記31在設定畫面30上，被重疊顯示於設定用動態圖像上。

根據本實施形態，使用者可一邊觀察映照於在設定畫面30上播放的設定用動態圖像中的作業者5，一邊設定各步驟3的監測區域。表示依據與分析程式400的命令401相同的命令而檢測出的作業者5的位置的標記31被重疊顯示於設定用動態圖像。因此，使用者可一邊觀察映照於設定用動態圖像中的作業者5的樣子，一邊調整框線32的位置及尺寸，以使其包含作業者5進行各步驟3的作業時的標記31。藉此，使用者可對於各步驟3而簡便地設定與進行所述步驟3的作業的作業者5的位置相適合的監測區域。如此，本實施形態的設定裝置100可支援與步驟3相應的監測區域的適當且簡便的設定。

§2 具體例 ＜以往的監測區域設定方法中的問題＞ 在說明本實施形態的設定裝置100的具體例之前，參照圖2及圖3來說明以往的監測區域設定方法中的問題。以往，監測區域是使用在作業者5未進行作業的時段藉由攝影機200的拍攝而獲得的靜態圖像來設定。

圖2是表示在參考形態的系統中，為了設定監測區域而獲取的靜態圖像的一例的圖。靜態圖像20是藉由作業者5未進行作業的時段的拍攝而獲得，因此僅映照有作業現場2。如圖2所示，一般而言，在作業現場2設置有大量的設備及各種裝置。該些設備及各種裝置是依據作業現場2中所含的多個步驟的順序而配置。因此，使用者藉由確認映照於靜態圖像20中的設備及各種裝置，可確定各步驟的場所。使用者對於所確定的各步驟的場所，設想作業者5的作業位置，設定與所設想的作業位置相適合的尺寸及位置的框線32。藉此，由框線32所圍成的區域被設定為監測區域。圖2中，與十個步驟對應地分別設定有十個框線32。

若使用映照有作業者5的靜態圖像，則設備及各種裝置的一部分會被作業者5遮掩，從而認為無法高精度地確定各步驟的場所。因此，以往是使用藉由作業者5未進行作業的時段的拍攝而獲得的靜態圖像20來設定監測區域。

然而，由於使用未映照有作業者5的靜態圖像20來設定監測區域，因此所設定的監測區域與實際的作業位置可能產生偏離。其結果，會產生下述問題，即，無法高精度地測量在各步驟中進行作業的時段。

圖3是表示依據以往的設定方法而設定的監測區域與作業者的作業位置的關係的一例的圖。圖3中，標記71a、標記71b分別表示根據分析程式400的命令401而檢測出的作業者5a、作業者5b的位置。如圖3所示，針對連續的三個步驟，分別設定有三個監測區域72a～72c。監測區域72a與監測區域72b相接近。監測區域72b與監測區域72c相接近。

標記71b位於監測區域72c的大致中央附近。因此，識別出作業者5b正在與監測區域72c對應的步驟中進行作業。

另一方面，標記71a位於監測區域72a、監測區域72b的邊界附近。因此，因作業者5a的稍許移動，作業者5a所存在的區域的判定結果可能在監測區域72a、監測區域72b之間發生變動。因此，儘管實際上作業者5a正在與監測區域72b對應的步驟中進行作業，但可能被誤識別為作業者5a正在與監測區域72a對應的步驟中進行作業。

如此，以往的設定方法中，所設定的監測區域與實際的作業位置可能產生偏離。尤其是在使用超廣角攝影機或廣角攝影機來作為攝影機200的情況下，容易產生所述偏離。因此，為了消除此種偏離，必須反覆實施使用所設定的監測區域的分析程式400的分析結果的驗證與監測區域的重新設定。因此產生下述問題，即，適當地設定與各步驟相應的監測區域耗時耗力。本實施形態的設定裝置100解決此種問題。

＜設定裝置的硬體結構＞ 參照圖4來說明設定裝置100的硬體結構。以下，舉安裝有分析程式400的設定裝置100為例來進行說明。即，設定裝置100亦作為執行分析程式400的分析裝置而運作。

圖4是表示實施形態的設定裝置的硬體結構的一例的示意圖。如圖4所示，設定裝置100典型的是具有遵循通用電腦架構的結構。

具體而言，設定裝置100包含中央處理單元（Central Processing Unit，CPU）或微處理單元（Micro-Processing Unit，MPU）等的處理器101、記憶體102、儲存器103、攝影機介面104、顯示控制器105、輸入介面106以及通訊介面107。該些各部經由匯流排可彼此進行資料通訊地連接。

處理器101藉由將記憶於儲存器103中的各種程式展開至記憶體102中而執行，從而實現依據本實施形態的各種處理。

記憶體102典型的是動態隨機存取記憶體（Dynamic Random Access Memory，DRAM）等的揮發性的記憶裝置，記憶從儲存器103讀出的程式、從攝影機200接收的動態圖像、處理結果以及工件資料等。

儲存器103典型的是硬碟驅動器等的非揮發性的磁性記憶裝置。儲存器103記憶由處理器101所執行的設定程式110及分析程式400、與為了執行分析程式400而使用的設定資訊410。進而，在儲存器103中，保存有從攝影機200接收的設定用動態圖像120及分析用動態圖像130。再者，保存於儲存器103中的設定用動態圖像120及分析用動態圖像130各自的個數並不限定於一個，亦可為多個。安裝於儲存器103中的設定程式110及分析程式400是以保存於記憶卡等中的狀態而流通。

設定資訊410是藉由處理器101執行設定程式110而生成，並被保存至儲存器103。

攝影機介面104對處理器101與攝影機200之間的資料傳輸進行中介。更具體而言，從處理器101經由攝影機介面104而對攝影機200輸出設定用動態圖像120或分析用動態圖像130的拍攝指示。攝影機介面104將根據設定用動態圖像120的拍攝指示而從攝影機200接收的動態圖像作為設定用動態圖像120而輸出至處理器101。攝影機介面104將根據分析用動態圖像130的拍攝指示而從攝影機200接收的動態圖像作為分析用動態圖像130而輸出至處理器101。處理器101將設定用動態圖像120及分析用動態圖像130保存至儲存器103。

顯示控制器105與顯示裝置300連接，根據來自處理器101的內部指令，將用於顯示各種資訊的訊號輸出至顯示裝置300。

輸入介面106對處理器101與鍵盤、滑鼠、觸控面板等輸入裝置350之間的資料傳輸進行中介。即，輸入介面106受理使用者藉由操作輸入裝置350而給予的操作指令。

通訊介面107對處理器101與外部設備之間的資料傳輸進行中介。通訊介面107典型的是包含乙太網（註冊商標）或通用序列匯流排（Universal Serial Bus，USB）等。再者，設定程式110及分析程式400亦可經由通訊介面107而從分發伺服器等下載。

在利用如上的具有遵循通用電腦架構的結構的電腦的情況下，除了用於提供本實施形態的功能的應用以外，亦可安裝用於提供電腦的基本功能的作業系統（Operating System，OS）。此時，本實施形態的程式亦可為以規定的順序及時機而調用作為OS的一部分所提供的程式模組中的所需的模組來執行處理的程式。即，本實施形態的程式自身亦有時不包含如上所述的模組，而是與OS協作地執行處理。

再者，亦可替代性地，將藉由設定程式110的執行而提供的功能的一部分或全部作為專用的硬體電路來實現。

＜設定裝置的功能結構＞ 圖5是表示實施形態的設定裝置的功能結構的一例的圖。如圖5所示，設定裝置100包括記憶部10、獲取部11、檢測部12、提供部13、設定部14以及分析部15。記憶部10是藉由圖4所示的記憶體102及儲存器103而實現。獲取部11是藉由攝影機介面104與執行設定程式110或分析程式400的處理器101而實現。檢測部12是藉由處理器101執行設定程式110而實現。提供部13是藉由顯示控制器105與執行設定程式110的處理器101而實現。設定部14是藉由輸入介面106與執行設定程式110的處理器101而實現。分析部15是藉由處理器101執行分析程式400而實現。

獲取部11從攝影機200獲取設定用動態圖像120及分析用動態圖像130。獲取部11將所獲取的設定用動態圖像120及分析用動態圖像130保存至記憶部10。

例如，獲取部11在作業者5正在作業現場2進行作業時，對應於對輸入裝置350的輸入而獲取經指定的時長的設定用動態圖像120。進而，獲取部11在從作業現場2中的作業開始直至作業結束為止的期間內，週期性地獲取規定時長的分析用動態圖像130。再者，獲取部11亦可獲取多個分析用動態圖像130的一部分來作為設定用動態圖像120。

檢測部12根據與分析程式400的命令401（參照圖1）相同的命令，對於設定用動態圖像120的各訊框而檢測作業者5的位置。即，設定程式110包含與命令401相同的命令。檢測部12是藉由處理器101執行所述命令而實現。

具體而言，檢測部12使用公知的物體識別技術，對設定用動態圖像120的各訊框執行人體（即作業者5）的識別處理。檢測部12針對所識別出的每個作業者5，決定映照有所述作業者5的矩形區域。檢測部12將所決定的矩形區域的中心檢測作為作業者5的位置。檢測部12算出映照有作業者5的矩形區域的四頂點的座標與作業者5的位置的座標。

提供部13提供用於設定與各步驟3對應的監測區域的設定畫面。在設定畫面上播放設定用動態圖像。提供部13使顯示裝置300顯示設定畫面。

設定部14從輸入裝置350受理針對設定畫面的操作，根據所述操作來設定與各步驟3對應的監測區域。設定部14生成表示對於各步驟3而設定的監測區域的設定資訊410，並將設定資訊410保存至記憶部10。設定資訊410對於各步驟3而將識別所述步驟3的步驟ID與表示對所述步驟3所設定的監測區域的尺寸及位置的區域資訊予以關聯。區域資訊例如表示矩形的監測區域的四頂點的座標。

分析部15對分析用動態圖像130進行圖像分析。如圖5所示，分析部15包含檢測部16、判定部17以及生成部18。

檢測部16根據命令401（參照圖1），對於分析用動態圖像130的各訊框而檢測作業者5的位置。命令401包含：對於分析用動態圖像130的各訊框而檢測映照有作業者5的矩形區域的命令；以及將矩形區域的中心點決定為作業者的位置的命令。檢測部16是藉由執行該些命令而實現。檢測部16所進行的檢測方法與檢測部12所進行的檢測方法相同。因此，省略詳細的說明。

判定部17根據命令402（參照圖1）來判定：在分析用動態圖像130的各訊框的拍攝時刻，對於多個步驟3的各步驟，在針對所述步驟3所設定的監測區域是否有作業者5存在。判定部17參照設定資訊410來確定各步驟3的監測區域。

在某步驟3中有作業者5進行作業的情況下，作業者5將連續停留於與所述步驟3對應的監測區域。換言之，若作業者5僅僅是單純地通過某監測區域，則作業者5未在與所述監測區域對應的步驟3中進行作業。而且，亦可能存在下述情況（case），即，根據分析用動態圖像130的訊框，儘管映照有作業者5，但檢測部12對人體的識別處理卻失敗。因此，判定部17亦可根據命令402中所含的以下的命令（1）～命令（3）來判定：在分析用動態圖像130中所含的對象訊框的拍攝時刻，在與作為對象的步驟3對應的對象監測區域是否有作業者5存在。 命令（1）：從分析用動態圖像130中提取包含對象訊框的、連續的多個訊框。例如，提取對象訊框與對象訊框前後各五個訊框合計十一個訊框。 命令（2）：算出藉由命令（1）的執行而得出的多個訊框中的、由檢測部12檢測出的作業者5的位置包含在對象監測區域中的訊框的比例。 命令（3）：對應於藉由命令（2）的執行而算出的比例超過臨限值的情況，而決定為在對象訊框的拍攝時刻有作業者5存在於對象監測區域。

進而，判定部17對於各步驟3，對於在針對所述步驟3所設定的監測區域有作業者5存在的一個以上的時段的各時段而生成時段資訊420。判定部17將所生成的時段資訊420保存至記憶部10。時段資訊420表示步驟ID、開始時刻與結束時刻。

判定部17對於各步驟3，從分析用動態圖像130中確定被判定為在與所述步驟3對應的監測區域有作業者5存在的、連續的多個訊框。判定部17針對所確定的多個訊框，生成表示對所述步驟3進行識別的步驟ID的時段資訊420。時段資訊420將所確定的多個訊框中的第一個訊框的拍攝時刻表示為開始時刻，且將所確定的訊框中的最後的訊框的拍攝時刻表示為結束時刻。

生成部18基於時段資訊420來生成各種圖表。例如，生成部18亦可對於多個步驟3的各步驟，而生成表示在對應的監測區域有作業者5存在的時段（即，由時段資訊420所示的時段）的甘特圖（Gantt chart）。或者，生成部18亦可對於多個步驟3的各步驟，而生成表示在對應的監測區域有作業者5存在的時間（即，由時段資訊420所示的時段的長度）的偏差的箱形圖。由生成部18所生成的圖表是對應於使用者的要求而提供。

＜設定畫面的示例＞ 圖6是表示設定畫面的一例的圖。圖6所例示的設定畫面30是由提供部13所提供，並顯示於顯示裝置300。如圖6所示，設定畫面30包含動態圖像播放區域33、列表顯示欄34、刪除按鈕35、追加按鈕36、分析處理開始按鈕37、保存按鈕38、動態圖像播放按鈕組39以及進度條（seek bar）40。

在動態圖像播放區域33，顯示有設定用動態圖像120。設定用動態圖像120是對應於對動態圖像播放按鈕組39或進度條40的操作而顯示。動態圖像播放按鈕組39包含用於選擇播放、暫停、逐格前進、逐格後退、時間指定中的任一個的按鈕。設定用動態圖像120是在動態圖像播放區域33中，依據播放、暫停、逐格前進、逐格後退、時間指定中的所選擇的方式而顯示。當「播放」受到選擇時，播放設定用動態圖像120。當「暫停」受到選擇時，維持在「暫停」受到選擇時所顯示的訊框。當「逐格前進」受到選擇時，設定用動態圖像120以慢至可確認各訊框的程度的速度來播放。當「逐格後退」受到選擇時，設定用動態圖像120以慢至可確認各訊框的程度的速度進行倒放。當「時間指定」受到選擇時，顯示設定用動態圖像120中的經指定的時刻的訊框。

在動態圖像播放區域33，重疊於設定用動態圖像120而顯示有框線41與標記31，所述框線41表示映照有作業者5的矩形區域，所述標記31表示作業者5的位置。如上所述，映照有作業者5的矩形區域及作業者5的位置是由檢測部12予以檢測。圖6所示的示例中，針對作業者5a～作業者5c，分別顯示有框線41a～框線41c與標記31a～標記31c。藉此，使用者可掌握在執行分析程式400時所檢測出的各作業者5的位置。

提供部13對應於追加按鈕36受到點擊的操作，將用於設定新的監測區域的框線32顯示於動態圖像播放區域33，並且將對所述新的監測區域進行識別的名稱追加至列表顯示欄34。

提供部13在追加按鈕36受到點擊時，將與已顯示於列表顯示欄34的名稱不同的任意名稱賦予給新的監測區域。提供部13對顯示於列表顯示欄34的名稱的編輯進行受理。藉此，使用者可對監測區域賦予所期望的名稱。

提供部13對應於在顯示於動態圖像播放區域33中的一個框線32已被選擇的狀態下刪除按鈕35受到點擊的操作，從動態圖像播放區域33中刪除所選擇的框線32。進而，提供部13從列表顯示欄34中刪除與所刪除的框線32對應的名稱。

或者，對應於在顯示於列表顯示欄34中的一個名稱已被選擇的狀態下刪除按鈕35受到點擊的操作，從列表顯示欄34中刪除所選擇的名稱。進而，提供部13從動態圖像播放區域33中刪除與所刪除的名稱對應的框線32。

圖6所示的示例中，在動態圖像播放區域33中，顯示有用於分別設定兩個監測區域的兩個框線32a、32b。設定部14對顯示於動態圖像播放區域33的框線32的尺寸及位置的編輯操作進行受理。具體而言，設定部14將由一個以上的框線32中的經指定的一個框線32所示的監測區域決定為作為編輯對象的監測區域，對應於針對設定畫面30的動態圖像播放區域33的操作，來對作為編輯對象的監測區域進行編輯。即，使用者只要一邊確認設定用動態圖像120與表示所檢測出的作業者5的位置的標記31，一邊調整框線32的尺寸及位置以使其包含與正在某步驟中進行作業的作業者5對應的標記31即可。藉此，使用者可簡便地設定與進行步驟3的作業的作業者5的位置相適合的監測區域。

設定部14對應於保存按鈕38受到點擊的操作，生成表示由顯示於動態圖像播放區域33中的各框線32所圍成的監測區域的四頂點的座標的區域資訊。設定部14生成將各區域資訊與針對所述區域資訊而輸入的步驟ID相關聯的設定資訊410。例如，設定部14亦可使用顯示於列表顯示欄34的名稱來作為步驟ID。或者，設定部14亦可使與各監測區域對應的步驟ID的輸入畫面顯示於顯示裝置300，並對應於對輸入畫面的輸入來對各監測區域設定步驟ID。

提供部13對應於分析處理開始按鈕37受到點擊的操作而提供一畫面，所述畫面表示使用設定用動態圖像120與所設定的監測區域的分析程式400得出的分析結果。

具體而言，提供部13對分析部15指示使用設定用動態圖像120與所設定的監測區域的處理。分析部15將設定用動態圖像120作為分析對象，使用監測區域來進行圖像分析。其結果，生成時段資訊420（參照圖5）。進而，基於時段資訊420而生成甘特圖或者箱形圖，所述甘特圖表示每個步驟3的、被判定為在監測區域有作業者5存在的時段，所述箱形圖表示每個步驟3的、被判定為在監測區域有作業者5存在的時段的長度的偏差。

圖7是表示對應於分析處理開始按鈕受到點擊的操作而提供的畫面的一例的圖。如圖7所示，畫面50包含對於多個步驟3的各步驟而表示在對應的監測區域有作業者5存在的時段的甘特圖51。進而，畫面50包含對於多個步驟3的各步驟而表示在對應的監測區域有作業者5存在的時間的偏差的箱形圖52。再者，畫面50亦可僅包含甘特圖51及箱形圖52中的其中一個。

若對應於在某步驟進行作業的作業者5的位置而適當地設定了監測區域，則判定為在所述監測區域有作業者5存在的時間的偏差將變小。

另一方面，若未對應於在某步驟進行作業的作業者5的位置而適當地設定監測區域（例如若未設定圖3的監測區域72a），則判定為在所述監測區域有作業者5存在的時間的偏差將變大。而且，在甘特圖51中，在相鄰的兩個步驟間進行作業的時段會細微地變動。

因此，使用者藉由確認圖7所示的畫面，便可驗證是否適當地設定了監測區域。

如此，使用者可一邊觀察圖6所示的設定畫面30及圖7所示的畫面50，一邊對於各步驟3而簡便地設定與進行所述步驟3的作業的作業者5的位置相適合的監測區域。

＜變形例＞ 如上所述，分析部15的判定部17亦可根據命令402中所含的命令（1）～命令（3）來判定：在對象訊框的拍攝時刻，在與作為對象的步驟3對應的對象監測區域是否有作業者5存在。此時，在命令（3）的執行中所使用的臨限值會對在監測區域有作業者5存在的時段的分析造成影響。即，圖7所示的甘特圖51及箱形圖52對應於臨限值而發生變化。

因此，提供部13亦可進而提供用於設定在命令（3）的執行中所使用的臨限值的畫面。

圖8是表示用於設定臨限值的畫面的一例的圖。如圖8所示，畫面60包含用於輸入臨限值的輸入欄61。

設定部14對應於針對畫面60的操作來設定臨限值，並使所設定的臨限值包含在設定資訊410中。分析程式400的命令（3）是使用包含在設定資訊410中的臨限值而執行。

藉此，使用者可一邊確認圖7所示的畫面50中所含的甘特圖51及箱形圖52，一邊設定適當的臨限值。

圖4及圖5所示的示例中，在設定裝置100中安裝分析程式400。然而，如上所述，分析程式400亦可被安裝於與設定裝置100不同的裝置中。此時，由設定裝置100所生成的設定資訊410被傳輸至安裝有分析程式400的裝置。而且，設定裝置100的提供部13亦可對安裝有分析程式400的裝置指示使用設定用動態圖像120與所設定的監測區域的處理。並且，提供部13只要從安裝有分析程式400的裝置獲取作為分析結果的時段資訊420（參照圖5），並基於所獲取的時段資訊420來生成圖7所示的畫面50即可。

§3 附註 如上所述，本實施形態包含如下所述的揭示。

（結構1） 一種設定裝置100，對包含第一命令401與第二命令402的分析程式400設定監測區域，所述第一命令401是對於從拍攝作業現場2的攝影機200所獲取的分析用動態圖像130的各訊框來檢測作業者5的位置，所述作業現場2包含多個步驟3，所述第二命令402是基於與所述多個步驟3各自對應的所述監測區域和所檢測出的所述作業者5的位置來判定在所述監測區域是否有所述作業者5存在，所述設定裝置100包括： 獲取部11、101、104，從所述攝影機200獲取映照有所述作業現場2與正在所述作業現場2進行作業的所述作業者5的設定用動態圖像120； 檢測部12、101，根據與所述第一命令401相同的命令，對於所述設定用動態圖像120的各訊框來檢測所述作業者5的位置； 提供部13、101、104，提供播放所述設定用動態圖像120的第一畫面30；以及 設定部14、101、106，對應於針對所述第一畫面30的操作來設定所述監測區域， 所述第一畫面30包含表示由所述檢測部12、101所檢測出的位置的標記31， 所述標記31被重疊顯示於所述設定用動態圖像120上。

（結構2） 如結構1所述的設定裝置100，其中 所述提供部13、101、104進而提供第二畫面50，所述第二畫面50表示使用所述設定用動態圖像120與由所述設定部14、101、106所設定的所述監測區域的所述分析程式400得出的分析結果。

（結構3） 如結構2所述的設定裝置100，其中 所述第二畫面50包含對於所述多個步驟3的各步驟而表示在對應的所述監測區域有所述作業者5存在的時段的圖51。

（結構4） 如結構2所述的設定裝置100，其中 所述第二畫面50包含對於所述多個步驟3的各步驟表示對應的所述監測區域的有所述作業者5存在的時間的偏差的箱形圖52。

（結構5） 如結構2至結構4中任一項所述的設定裝置100，其中 所述第二命令402包含： 從所述分析用動態圖像130中提取包含對象訊框的連續的多個訊框的命令； 算出所述多個訊框中在對象監測區域包含藉由所述第一命令401的執行而檢測出的作業者5的位置的訊框的比例的命令，所述對象監測區域與所述多個步驟3中的對象步驟對應；以及 對應於所述比例超過臨限值的情況，而決定為在所述對象訊框的拍攝時刻有所述作業者5存在於所述對象監測區域的命令， 所述提供部13、101、104進而提供用於設定所述臨限值的第三畫面60， 所述設定部14、101、106對應於針對所述第三畫面60的操作，進而設定所述臨限值。

（結構6） 如結構1至結構5中任一項所述的設定裝置100，其中 所述第一命令401包含： 對於所述分析用動態圖像130的各訊框，檢測映照有所述作業者5的矩形區域的命令；以及 將所述矩形區域的中心點決定為所述作業者5的位置的命令， 所述檢測部12、101根據與所述第一命令401相同的命令，對於所述設定用動態圖像120的各訊框檢測所述矩形區域， 所述第一畫面30更包含表示由所述檢測部12、101所檢測出的所述矩形區域的第一框線41， 所述第一框線41被重疊顯示於所述設定用動態圖像120上。

（結構7） 如結構1至結構5中任一項所述的設定裝置100，其中 所述設定用動態圖像120是在所述第一畫面30中，依據從播放、暫停、逐格前進、逐格後退及時間指定中所選擇的方式顯示。

（結構8） 如結構1至結構7中任一項所述的設定裝置100，其中 所述第一畫面30包含分別表示一個以上的監測區域的一個以上的第二框線32， 所述設定部14、101、106將由所述一個以上的第二框線32中的經指定的一個第二框線32所表示的所述監測區域決定為作為編輯對象的監測區域，對應於針對所述經指定的一個第二框線32的操作來對所述作為編輯對象的監測區域進行編輯。

（結構9） 一種設定方法，對包含第一命令401與第二命令402的分析程式400設定監測區域，所述第一命令401是對於從拍攝作業現場2的攝影機200所獲取的分析用動態圖像130的各訊框來檢測作業者5的位置，所述作業現場2包含多個步驟3，所述第二命令402是基於與所述多個步驟3各自對應的所述監測區域和所檢測出的所述作業者5的位置來判定在所述監測區域是否有所述作業者5存在，所述設定方法包括下述步驟： 從所述攝影機200獲取映照有所述作業現場2與正在所述作業現場2進行作業的所述作業者5的設定用動態圖像120； 根據與所述第一命令401相同的命令，對於所述設定用動態圖像120的各訊框來檢測所述作業者5的位置； 提供播放所述設定用動態圖像120的第一畫面30；以及 對應於針對所述第一畫面30的操作來設定所述監測區域， 所述第一畫面30包含表示由所述檢測部12、101所檢測出的位置的標記31， 所述標記31被重疊顯示於所述設定用動態圖像120上。

（結構10） 一種設定程式110，對包含第一命令401與第二命令402的分析程式400設定監測區域，所述第一命令401是對於從拍攝作業現場2的攝影機200所獲取的分析用動態圖像130的各訊框來檢測作業者5的位置，所述作業現場2對包含多個步驟3，所述第二命令402是基於與所述多個步驟3各自對應的所述監測區域和所檢測出的所述作業者5的位置來判定在所述監測區域是否有所述作業者5存在，所述設定程式110使電腦執行下述步驟： 從所述攝影機200獲取映照有所述作業現場2與正在所述作業現場2進行作業的所述作業者5的設定用動態圖像120； 根據與所述第一命令401相同的命令，對於所述設定用動態圖像120的各訊框來檢測所述作業者5的位置； 提供播放所述設定用動態圖像120的第一畫面30；以及 對應於針對所述第一畫面30的操作來設定所述監測區域， 所述第一畫面30包含表示由所述檢測部12、101所檢測出的位置的標記31， 所述標記31被重疊顯示於所述設定用動態圖像120上。

對本發明的實施形態進行了說明，但應認為，此次揭示的實施形態在所有方面為例示而非限制者。本發明的範圍是由申請專利範圍所示，且意圖包含與申請專利範圍均等的含義及範圍內的所有變更。

1:系統 2:作業現場 3、3_1～3_n、S1～S4:步驟 5、5a～5c:作業者 10:記憶部 11:獲取部 12、16:檢測部 13:提供部 14:設定部 15:分析部 17:判定部 18:生成部 20:靜態圖像 30:設定畫面 31、31a～31c、71a、71b:標記 32、32a、32b、41、41a～41c:框線 33:動態圖像播放區域 34:列表顯示欄 35:刪除按鈕 36:追加按鈕 37:分析處理開始按鈕 38:保存按鈕 39:動態圖像播放按鈕組 40:進度條 50、60:畫面 51:甘特圖 52:箱形圖 61:輸入欄 72a～72c:監測區域 100:設定裝置 101:處理器 102:記憶體 103:儲存器 104:攝影機介面 105:顯示控制器 106:輸入介面 107:通訊介面 110:設定程式 120:設定用動態圖像 130:分析用動態圖像 200:攝影機 300:顯示裝置 350:輸入裝置 400:分析程式 401、402:命令 410:設定資訊 420:時段資訊

圖1是表示適用實施形態的設定裝置的系統的一例的圖。 圖2是表示在參考形態的系統中，為了設定監測區域而獲取的靜態圖像的一例的圖。 圖3是表示依據以往的設定方法而設定的監測區域與作業者的作業位置的關係的一例的圖。 圖4是表示實施形態的設定裝置的硬體結構的一例的示意圖。 圖5是表示實施形態的設定裝置的功能結構的一例的圖。 圖6是表示設定畫面的一例的圖。 圖7是表示對應於分析處理開始按鈕受到點擊的操作而提供的畫面的一例的圖。 圖8是表示用於設定臨限值的畫面的一例的圖。

1:系統

2:作業現場

3_1~3_n、S1~S4:步驟

5:作業者

30:設定畫面

31:標記

32:框線

100:設定裝置

200:攝影機

300:顯示裝置

350:輸入裝置

400:分析程式

401、402:命令

Claims (10)

1. 一種設定裝置，對包含第一命令與第二命令的分析程式設定監測區域，所述第一命令是對於從拍攝作業現場的攝影機所獲取的分析用動態圖像的各訊框來檢測作業者的位置，所述作業現場包含多個步驟，所述第二命令是基於與所述多個步驟各自對應的所述監測區域和所檢測出的所述作業者的位置來判定在所述監測區域是否有所述作業者存在，所述設定裝置包括： 獲取部，從所述攝影機獲取映照有所述作業現場與正在所述作業現場進行作業的所述作業者的設定用動態圖像； 檢測部，根據與所述第一命令相同的命令，對於所述設定用動態圖像的各訊框來檢測所述作業者的位置； 提供部，提供播放所述設定用動態圖像的第一畫面；以及 設定部，對應於針對所述第一畫面的操作來設定所述監測區域， 所述第一畫面包含表示由所述檢測部所檢測出的位置的標記， 所述標記被重疊顯示於所述設定用動態圖像上。
2. 如請求項1所述的設定裝置，其中 所述提供部進而提供第二畫面，所述第二畫面表示使用所述設定用動態圖像與由所述設定部所設定的所述監測區域的所述分析程式得出的分析結果。
3. 如請求項2所述的設定裝置，其中 所述第二畫面包含對於所述多個步驟的各步驟而表示在對應的所述監測區域有所述作業者存在的時段的圖。
4. 如請求項2所述的設定裝置，其中 所述第二畫面包含對於所述多個步驟的各步驟表示對應的所述監測區域的有所述作業者存在的時間的偏差的箱形圖。
5. 如請求項2所述的設定裝置，其中 所述第二命令包含： 從所述分析用動態圖像中提取包含對象訊框的連續的多個訊框的命令； 算出所述多個訊框中在對象監測區域包含藉由所述第一命令的執行而檢測出的作業者的位置的訊框的比例的命令，所述對象監測區域與所述多個步驟中的對象步驟對應；以及 對應於所述比例超過臨限值的情況，而決定為在所述對象訊框的拍攝時刻有所述作業者存在於所述對象監測區域的命令， 所述提供部進而提供用於設定所述臨限值的第三畫面， 所述設定部對應於針對所述第三畫面的操作，進而設定所述臨限值。
6. 如請求項1至請求項5中任一項所述的設定裝置，其中 所述第一命令包含： 對於所述分析用動態圖像的各訊框，檢測映照有所述作業者的矩形區域的命令；以及 將所述矩形區域的中心點決定為所述作業者的位置的命令， 所述檢測部根據與所述第一命令相同的命令，對於所述設定用動態圖像的各訊框檢測所述矩形區域， 所述第一畫面更包含表示由所述檢測部所檢測出的所述矩形區域的第一框線， 所述第一框線被重疊顯示於所述設定用動態圖像上。
7. 如請求項1至請求項5中任一項所述的設定裝置，其中 所述設定用動態圖像是在所述第一畫面中，依據從播放、暫停、逐格前進、逐格後退及時間指定中所選擇的方式顯示。
8. 如請求項1至請求項5中任一項所述的設定裝置，其中 所述第一畫面包含分別表示一個以上的監測區域的一個以上的第二框線， 所述設定部將由所述一個以上的第二框線中經指定的一個第二框線所表示的所述監測區域決定為作為編輯對象的監測區域，對應於針對所述經指定的一個第二框線的操作來對所述作為編輯對象的監測區域進行編輯。
9. 一種設定方法，對包含第一命令與第二命令的分析程式設定監測區域，所述第一命令是對於從拍攝作業現場的攝影機所獲取的分析用動態圖像的各訊框來檢測作業者的位置，所述作業現場包含多個步驟，所述第二命令是基於與所述多個步驟各自對應的所述監測區域和所檢測出的所述作業者的位置來判定在所述監測區域是否有所述作業者存在，所述設定方法包括下述步驟： 從所述攝影機獲取映照有所述作業現場與正在所述作業現場進行作業的所述作業者的設定用動態圖像； 根據與所述第一命令相同的命令，對於所述設定用動態圖像的各訊框來檢測所述作業者的位置； 提供播放所述設定用動態圖像的第一畫面；以及 對應於針對所述第一畫面的操作來設定所述監測區域， 所述第一畫面包含表示所檢測出的所述作業者的位置的標記， 所述標記被重疊顯示於所述設定用動態圖像上。
10. 一種設定程式，對包含第一命令與第二命令的分析程式設定監測區域，所述第一命令是對於從拍攝作業現場的攝影機所獲取的分析用動態圖像的各訊框來檢測作業者的位置，所述作業現場包含多個步驟，所述第二命令是基於與所述多個步驟各自對應的所述監測區域和所檢測出的所述作業者的位置來判定在所述監測區域是否有所述作業者存在，所述設定程式使電腦執行下述步驟： 從所述攝影機獲取映照有所述作業現場與正在所述作業現場進行作業的所述作業者的設定用動態圖像； 根據與所述第一命令相同的命令，對於所述設定用動態圖像的各訊框來檢測所述作業者的位置； 提供播放所述設定用動態圖像的第一畫面；以及 對應於針對所述第一畫面的操作來設定所述監測區域， 所述第一畫面包含表示所檢測出的所述作業者的位置的標記， 所述標記被重疊顯示於所述設定用動態圖像上。

Images