TWI797411B - 資訊處理裝置 - Google Patents

資訊處理裝置 Download PDF

Info

Publication number
TWI797411B
TWI797411B TW109100674A TW109100674A TWI797411B TW I797411 B TWI797411 B TW I797411B TW 109100674 A TW109100674 A TW 109100674A TW 109100674 A TW109100674 A TW 109100674A TW I797411 B TWI797411 B TW I797411B
Authority
TW
Taiwan
Prior art keywords
person
attribute information
information
captured image
attributes
Prior art date
Application number
TW109100674A
Other languages
English (en)
Other versions
TW202046709A (zh
Inventor
小野里宗明
寺澤哲
大網亮磨
潘雅冬
Original Assignee
日商日本電氣股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 日商日本電氣股份有限公司 filed Critical 日商日本電氣股份有限公司
Publication of TW202046709A publication Critical patent/TW202046709A/zh
Application granted granted Critical
Publication of TWI797411B publication Critical patent/TWI797411B/zh

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20Movements or behaviour, e.g. gesture recognition
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/52Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/103Static body considered as a whole, e.g. static pedestrian or occupant recognition
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/20Analysis of motion
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V2201/00Indexing scheme relating to image or video recognition or understanding
    • G06V2201/10Recognition assisted with metadata
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B25/00Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Psychiatry (AREA)
  • Social Psychology (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Signal Processing (AREA)
  • Alarm Systems (AREA)
  • Image Analysis (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Debugging And Monitoring (AREA)
  • Image Processing (AREA)
  • Burglar Alarm Systems (AREA)

Abstract

本發明之資訊處理裝置100,具備:儲存手段130,儲存表示依照對象場所之人物的屬性之基準屬性資訊;抽出手段110,將表示拍攝對象場所而得的拍攝影像內之人物的屬性之人物屬性資訊抽出;以及檢測手段120,依據基準屬性資訊與人物屬性資訊,檢測拍攝影像內之既定人物。

Description

資訊處理裝置
本發明係關於一種檢測存在於對象場所的人物之資訊處理裝置、資訊處理方法、及程式。
在機場或車站、店鋪、活動會場等,不特定多數人物所聚集的場所,有存在可能進行犯罪行為或造成困擾之行為的人物之情況。此等人物,有採取可疑行動、成為異常的生物體狀態之情況,亦有可經由外觀而判斷為可疑者之情形,因而亦可事先採取對應。
另一方面,亦有檢測可疑者之保全人員人數少或不存在、無法經由外觀判斷可疑者的情況。考慮此等狀況,期望用於自動檢測可疑者之技術。 [習知技術文獻] [專利文獻]
專利文獻1:日本特開第2018-37075號公報
[本發明所欲解決的問題]
此處,例如,如專利文獻1所記載,揭露用於在機場等中自動檢測可疑者之技術。此專利文獻1,作為一例,在機場之入境審查區中,收集人物的生物體資料而檢測可疑者。
然而,在如專利文獻1之記載般從生物體資料檢測可疑者之方法,首先,不易從不特定多數人物檢測生物體資料本身。因此,無法檢測可疑者,此外,不限於可疑者,亦無法於某場所中檢測期望人物。
因此,本發明之目的在於提供一種資訊處理裝置,其可解決上述問題,即無法於對象場所中簡單地檢測期望人物之問題。 [解決問題之技術手段]
本發明的一形態之資訊處理裝置,採用具備如下手段之構成: 儲存手段,儲存表示依照對象場所之人物的屬性之基準屬性資訊; 抽出手段,將表示拍攝該對象場所而得的拍攝影像內之人物的屬性之人物屬性資訊抽出;以及 檢測手段,依據該基準屬性資訊與該人物屬性資訊,檢測該拍攝影像內之既定人物。
此外,本發明的一形態之程式,採用使資訊處理裝置實現如下手段之構成: 抽出手段,將表示拍攝對象場所而得的拍攝影像內之人物的屬性之人物屬性資訊抽出;以及 檢測手段,依據儲存在儲存手段的表示依照該對象場所之人物的屬性之基準屬性資訊、及該人物屬性資訊,檢測該拍攝影像內之既定人物。
此外,本發明的一形態之資訊處理方法,採用包含如下步驟之構成: 將表示拍攝對象場所而得的拍攝影像內之人物的屬性之人物屬性資訊抽出;以及 依據儲存在儲存手段的表示依照該對象場所之人物的屬性之基準屬性資訊、及該人物屬性資訊,檢測該拍攝影像內之既定人物。 [本發明之效果]
本發明,藉由如同上述地構成,而可於對象場所中簡單地檢測期望人物。
<實施形態1> 參考圖1至圖8,說明本發明之第1實施形態。圖1至圖6為,用於說明資訊處理系統之構成的圖;圖7至圖8為,用於說明資訊處理系統之處理運作的圖。以下,一併說明資訊處理系統之構成與運作。
本發明之資訊處理系統,係用於檢測在存在於店鋪或設施等成為設定之對象的場所R之人物P中,藉由預先設定的基準判斷為可疑者之人物等期望人物。另,下述內容中,將使對象場所為「百貨商場之化妝品販售處」,此外,使檢測對象為在此一場所中可判別為「可疑者」之人物的情況,列舉作為一例而說明。然則,本發明中,對象場所,亦可為如珠寶店、遊樂中心、遊樂園等店鋪或設施等任意場所。此外,本發明中,不限於可疑者,亦可使店鋪所希望的屬性之人物為檢測對象等,將任意人物作為檢測對象。因此,本發明,亦可利用在對象場所之可疑者的監視之保全,亦可利用在對於販售對象屬性者進行積極接待等市場行銷活動。另,作為檢測對象之人物,亦可為迷路者或病人、老人、被照護者等。
如圖1所示,本實施形態之資訊處理系統,具備:相機C,用於拍攝成為對象場所R之空間;監視裝置10,監視拍攝影像內之人物P;以及輸出裝置20,將監視結果輸出。另,監視裝置10,係由具備運算裝置與儲存裝置之1台或複數台資訊處理裝置所構成。此外,輸出裝置20,係由具備運算裝置與儲存裝置之1台或複數台資訊處理裝置所構成,進一步具備顯示裝置。此顯示裝置,如同後述,用於將檢測到的人物,與由監視裝置10拍攝到的拍攝影像一同顯示輸出。以下,主要針對監視裝置10的構成予以詳述。
上述監視裝置10,如圖2A所示,具備使運算裝置實行程式藉而建構出之人物抽出部11、學習部12、及檢測部13。此外,監視裝置10,具備形成於儲存裝置之人物資訊儲存部14、及基準資訊儲存部15。以下,針對各構成予以詳述。
上述人物抽出部11(抽出手段),首先,以一定的時間間隔受理由相機C拍攝到的對象場所R之拍攝影像。例如,如圖4所示,受理存在複數人物P的對象場所R之拍攝影像,先暫時儲存。另,本實施形態,於監視裝置10僅連接1台相機C,但亦可連接複數台相機C,對由各相機C拍攝到的拍攝影像,施行如同以下所說明之抽出處理或學習處理、可疑者之檢測處理。
而後,人物抽出部11,從顯現在拍攝影像內之物體的形狀、色彩、移動等,將拍攝影像內之人物P抽出(圖7的步驟S1)。進一步,人物抽出部11,依據從拍攝影像抽出之人物P的影像部分,將表示該人物P的屬性之人物屬性資訊抽出(圖7的步驟S2)。人物屬性資訊,例如係表示人物P的性別、年齡(年代)、服裝或持有物等個人配件之資訊,藉由影像解析而從人物P的臉部影像或身體影像等抽出。
此外,人物抽出部11,亦將表示拍攝影像內之人物P的行動之行動資訊抽出(圖7的步驟S3)。例如,人物抽出部11,從人物的臉部影像或身體影像、與其他人物的距離等,將臉部朝向、表情、視線、移動路徑、單人或團體等,抽出作為行動資訊。另,本實施形態中,人物抽出部11,從相機C取得由動態影像構成的拍攝影像,如同上述地將人物的屬性、行動抽出,但亦可從相機C取得由靜態影像構成的拍攝影像,將人物的屬性、行動抽出。此一情況,可從1張靜態影像將人物性別等屬性、臉部朝向等行動抽出,亦可從沿著時間序列連續的複數張靜態影像將人物的屬性、行動抽出。
進一步,人物抽出部11,取得如同上述地對每一人物P將人物屬性資訊或行動資訊抽出時的對象場所R之場面資訊。具體而言,人物抽出部11,作為場面資訊,取得表示對象場所R的屬性或特定場所之場所資訊、表示對象場所R的周圍環境之環境資訊。例如,人物抽出部11,作為上述場所資訊,取得對拍攝對象場所R的拍攝影像之相機C給予的相機識別資訊、相機位置資訊,取得和相機識別資訊、相機位置資訊賦予關連之場所資訊。作為一例,作為場所資訊,可為「百貨商場之化妝品販售處」等表示場所的屬性之資訊,亦可為如「○○百貨公司銀座店」般地表示特定場所之資訊。此外,人物抽出部11,作為上述環境資訊,將日期時間或季節、天氣等,從經由網路而連接之其他資訊處理裝置取得。另,上述場所資訊或環境資訊,並未限定於上述資訊,此外,亦可藉由任意方法取得。而後,人物抽出部11,將由場所資訊與環境資訊構成之場面資訊,對抽出之人物屬性資訊與行動資訊賦予關連,先儲存於人物資訊儲存部14。
上述學習部12(基準屬性資訊產生手段),讀取如同上述地從拍攝影像抽出,儲存在人物資訊儲存部14之人物屬性資訊及行動資訊。而後,藉由學習人物屬性資訊及行動資訊,而產生表示與對象場所R即場面資訊對應之人物P的屬性及行動之基準屬性資訊(圖7的步驟S4)。例如,學習部12,從抽出之人物P的性別與年齡等屬性,如圖3所示,產生學習到探訪對象場所R即「化妝品販售處」之人物P的每種性別之年齡的分布之基準屬性資訊。圖3之例子中,得知探訪對象場所R即「化妝品販售處」之人物P的屬性為20歲至60歲之女性多(參考符號W),男性極少(參考符號M)。如此地,基準屬性資訊,表示複數人物的屬性。而後,學習部12,將產生之基準屬性資訊和場面資訊賦予關連,儲存於基準資訊儲存部15(儲存手段)(圖7的步驟S5)。
另,學習部12,亦可亦包含和人物屬性資訊賦予關連之環境資訊、行動資訊而學習,產生基準屬性資訊。例如,學習部12,亦可從行動資訊,僅將單人行動之人物P的每種性別之年齡的分布,產生作為基準屬性資訊;亦可將複數人團體行動之人物P的每種性別之年齡分布,產生作為基準屬性資訊。此外,學習部12,亦可從行動資訊,將人物P的每種性別之臉部朝向或移動路徑的統計,產生作為基準屬性資訊。此外,作為另一例,學習部12,亦可從行動資訊,將人物P所進行之從商品架拿取商品/將商品放回商品架的動作、徘徊動作、在特定場所停留一定時間的動作、人物P凝視特定商品一定時間的動作、遠望商品架以外的動作等特定動作,產生作為基準屬性資訊。進一步,學習部12,亦可從環境資訊,於每一季節或每一時間帶,產生人物P的每種性別之年齡的分布。
此處,學習部12,使用藉由事先的設定或外部,輸入判斷為對象場所R係一般狀態時所儲存的每一場面資訊之人物屬性資訊等,產生基準屬性資訊。亦即,儲存在基準資訊儲存部15的每一場面資訊之基準屬性資訊,其對象場所R之場所資訊或環境資訊成為一般狀態之資訊。此外,學習部12,亦可使用由上述人物抽出部11從新的拍攝影像抽出之人物屬性資訊等持續學習,更新基準資訊儲存部15內之基準屬性資訊。另,儲存在基準資訊儲存部15之基準屬性資訊,並未限定於如同上述地必須藉由學習部12學習,亦可儲存預先準備的資訊。
圖2B,顯示藉由學習部12產生,儲存在基準資訊儲存部15之基準屬性資訊的一例。例如,對於場所資訊「化妝品販售處」、環境資訊「假日」,將「20世代以上之女性」、「30世代以上之男女組合」等人物屬性,與「觀察商品」、「拿取商品」等行動,儲存作為基準屬性資訊。作為另一例,對於場面資訊「○○百貨公司銀座店」、環境資訊「夏」,將「衣著輕薄(服裝)」等人物屬性,儲存作為基準屬性資訊。然則,圖2B所示之基準屬性資訊為一例,亦可於如圖3所示之每一人物季節或每一時間帶,將人物P的每種性別之年齡的分布直接儲存作為基準屬性資訊,亦可為其他任意內容的資訊。
另,圖2B之例子中,例示對於場所資訊與環境資訊,將一般狀態之人物P的屬性、行動,作為基準屬性資訊之情況,但亦可將異常狀態即與可疑者一致之人物P的屬性、行動,作為基準屬性資訊。例如,亦可對於場所資訊「化妝品販售處」、環境資訊「平日」,將「團體之男性」等人物的屬性、「環顧商品以外」等行動,儲存作為基準屬性資訊。此外,作為基準屬性資訊,亦可儲存場所資訊或環境資訊中,成為期望來訪的潛在客戶之人物的屬性、行動。
此處,如同上述地儲存基準屬性資訊的基準資訊儲存部15,並未限定於必須設置於監視裝置10內,亦可裝設於其他資訊處理裝置。此一情況,監視裝置10,亦可經由網路而與其他資訊處理裝置連接,儲存產生之基準屬性資訊、如同後述地讀取儲存之基準屬性資訊。
上述檢測部13(檢測手段),檢測新拍攝到的拍攝影像內之人物P中的可疑者。因此,首先,對新拍攝到的拍攝影像,如同上述地使人物抽出部11從拍攝影像內將人物P抽出(圖8的步驟S11),將此人物P的人物屬性資訊、行動資訊、環境資訊抽出(圖8的步驟S12、S13),往檢測部13傳送。此時,檢測部13,取得對拍攝到拍攝影像之相機C給予的相機識別資訊、相機位置資訊,將和此等資訊賦予關連之場所資訊抽出。如此一來,則檢測部13,讀取對所抽出之場所資訊及環境資訊賦予關連而儲存於基準資訊儲存部15之基準屬性資訊,將此等基準屬性資訊,與從新的拍攝影像抽出之人物屬性資訊等加以比較(圖8的步驟S14)。
而後,檢測部13,於基準屬性資訊,在抽出之人物屬性資訊行動資訊與預先設定之基準不一致的情況,將該人物P檢測為可疑者(圖8的步驟S15為Yes)。例如,使基準屬性資訊,為如圖3所示的單人行動之人物P的每種性別之年齡分布之內容,或為與圖2B之場所資訊「化妝品販售處」、環境資訊「平日」對應的「20世代以上之女性」等內容。此時,在新抽出之人物屬性資訊為「60世代之男性」的情況,或「團體(複數)之男性」的情況,與基準屬性資訊不一致,將該人物P或人物團體檢測為可疑者。如此地,檢測部13,亦可將複數人物P的人物屬性資訊等與基準屬性資訊比較,將複數人物P(團體)檢測為可疑者。另,抽出之人物屬性資訊與行動資訊和基準屬性資訊不一致之判定,例如,係在抽出之人物屬性資訊及行動資訊和基準屬性資訊一致的確率(例如概度)為閾値以下(例如20%以下)之情況施行。然則,此一判定亦可藉由任意方法施行。
而後,檢測部13,將包含可疑者之資訊的拍攝影像,往輸出裝置20顯示輸出(圖8的步驟S16)。此處,圖4,顯示將拍攝影像本身往輸出裝置20輸出時之樣子,於此等拍攝影像上,以可區別檢測為可疑者之人物P1的方式顯示。例如,如圖5、6所示,可將可疑者P1以既定顏色填滿顯示,亦可將可疑者P1之周圍框出顯示,或以對可疑者P1給予標記等其他方法使可疑者P1顯目的方式顯示。此外,檢測部13,亦可隨著拍攝影像內之人物P動作而追蹤該人物P,亦追蹤可疑者P1而施行可疑者顯示。
此處,說明檢測部13所進行之檢測可疑者的情況之另一例。例如,使基準屬性資訊,為與圖2B之場所資訊「化妝品販售處」、環境資訊「平日」對應的「20世代以上之女性」等人物屬性,「觀察商品」、「拿取商品」等行動之內容。此一情況,即便從人物P抽出之人物屬性資訊為「20世代之女性」,在行動資訊為「臉部朝向為四處張望(並未朝向商品架)」等情況,仍與上述基準屬性資訊不一致,故將此人物P檢測為可疑者。
此外,作為另一例,基準屬性資訊表示人物P持有的包袋之大小,於其係「小尺寸」等資訊的情況,在從人物P抽出之作為人物屬性資訊的持有的包袋之大小為「大尺寸」等情況,與上述基準屬性資訊不一致,故將此人物P檢測為可疑者。此外,作為另一例,基準屬性資訊表示人物P的服裝,於其係「衣著輕薄」等資訊的情況,在從人物P抽出之作為人物屬性資訊的服裝為「衣著厚重」等情況,與上述基準屬性資訊不一致,故將此人物P檢測為可疑者。
另,上述內容中,雖例示檢測從人物P抽出的人物屬性資訊與基準屬性資訊不一致之人物的情況,但亦可檢測與基準屬性資訊一致的人物屬性資訊之人物P。亦即,在基準屬性資訊本身係與可疑者一致之資訊的情況,可檢測可疑者;在基準屬性資訊本身係成為店鋪方期望來訪之潛在客戶等內容的情況,可檢測期望之潛在客戶。
此外,檢測部13,亦可從拍攝影像內之人物P的行動資訊指定追蹤之人物P,從此指定出之人物P的行動資訊檢測可疑者P1。例如,亦可追蹤進行多次停佇在相同場所、遊蕩等預先設定的行動之人物P,在此人物P採取儲存作為基準屬性資訊的行動之情況,將其檢測為可疑者P1。此外,檢測部13,亦可先儲存將人物P檢測為可疑者P1之次數,僅在此次數成為閾値以上的情況,將此人物P最後決定為可疑者P1而輸出。
此外,檢測部13,例如,亦可在儲存如圖3所示之表示人物P的每種性別之年齡的分布之基準屬性資訊的情況,將成為全體之百分之幾以下的「年代之男性」檢測為可疑者。此外,作為另一例,依據在對象場所R發生犯罪等異常狀態時之拍攝影像,將造成異常狀態之人物P的屬性儲存作為基準屬性資訊之情況,可將可能造成異常狀態之人物P檢測為可疑者。作為一例,對於場所資訊「化妝品販售處」,將「拿取商品以外之物品」等人物的行動儲存為基準屬性資訊之情況,將採取此行動之人物P檢測為可疑者。
如同上述,本發明中,先準備表示依照對象場所之人物的屬性之基準屬性資訊,將其與拍攝對象場所而得的拍攝影像內之人物的屬性加以比較,藉而可檢測對象場所之期望人物。藉此,例如可在對象場所中檢測被認為不適當之可疑者而利用在保全方面;此外,另一例中,可在對象場所中檢測被認為適當之潛在客戶而利用在接待方面。
另,上述內容中,作為基準屬性資訊,雖例示使用人物的屬性與人物的行動兩者之情況,但本發明之基準屬性資訊,亦可僅使用至少一方之資訊。亦即,本發明中,可依據儲存作為基準屬性資訊之人物的屬性,僅由從新的拍攝影像抽出之人物的屬性檢測可疑者,亦可依據儲存作為基準屬性資訊之人物的行動,僅由從新的拍攝影像抽出之人物的行動檢測可疑者。
<實施形態2> 其次,參考圖9,說明本發明之第2實施形態。圖9為,顯示由實施形態2之監視裝置10輸出的影像之一例的圖。
本實施形態之資訊處理系統,具備與上述實施形態1幾近相同的構成。其中,在實施形態1,監視裝置10,將從1台相機C拍攝到的拍攝影像之幾近全體,作為監視之對象場所R,但本實施形態,將從1台相機C拍攝到的拍攝影像加以分割之分割區域,作為分別監視之對象場所R。
此處,圖9,顯示由1台相機C拍攝到的拍攝影像,使此拍攝影像之橫方向的左右,分別顯現2個不同場所(作為一例,2個販售處)。此一情況,監視裝置10,將拍攝影像於左右分別分割,設定使左側為第一分割區域R1,使右側為第二分割區域R2。而後,監視裝置10,對第一分割區域R1與第二分割區域R2,分別抽出人物P,產生學習之基準屬性資訊,從此等基準屬性資訊與新抽出之人物P的屬性、行動,檢測可疑者。
具體而言,監視裝置10,從相機C之相機識別資訊、及指明分割區域之區域資訊,取得與第一分割區域R1對應之場所資訊及環境資訊等場面資訊。而後,監視裝置10,將僅顯現在第一分割區域R1之人物P的屬性資訊、行動資訊抽出,學習其等,先產生並記憶與第一分割區域R1之場所資訊及環境資訊對應之基準屬性資訊。其後,監視裝置10,將第一分割區域R1內之人物P抽出,在該屬性資訊、行動資訊,和與第一分割區域R1對應而儲存之基準屬性資訊一致/不一致的情況,將此人物P檢測為可疑者。
此外,監視裝置10,對於相同拍攝影像之第二分割區域R2,亦如同上述地施行對於第一分割區域R1施行之相同處理。首先,監視裝置10,從相機C之相機識別資訊、及指明分割區域之區域資訊,取得與第二分割區域R2對應之場所資訊及環境資訊等場面資訊。而後,監視裝置10,將僅顯現在第二分割區域R2之人物P的屬性資訊、行動資訊抽出,學習其等,先產生並記憶與第二分割區域R2之場所資訊及環境資訊對應之基準屬性資訊。其後,監視裝置10,將第二分割區域R2內之人物P抽出,在該屬性資訊、行動資訊,和與第二分割區域R2對應而儲存之基準屬性資訊一致/不一致的情況,將此人物P檢測為可疑者。
藉由如同上述之方式,可於拍攝影像內之每一分割區域R1、R2設定基準屬性資訊。例如,在與分割區域R1、R2分別對應之每一販售處,於訪客的屬性(性別、年代等)、行動(例如僅檢視商品或必須試用等)不同之情況,可設定表示每一販售處的一般狀態或異常狀態之人物的屬性、行動之適當的基準屬性資訊。此一結果,可於每一分割區域R1、R2,適當地檢測可疑者。
<實施形態3> 接著,參考圖10,說明本發明之第3實施形態。圖10為,顯示實施形態3之資訊處理裝置的構成之方塊圖。另,本實施形態,顯示在實施形態1、2說明之監視裝置的構成之概略。
如圖10所示,本實施形態之資訊處理裝置100,具備: 儲存手段130,儲存表示依照對象場所之人物的屬性之基準屬性資訊; 抽出手段110,將表示拍攝對象場所而得的拍攝影像內之人物的屬性之人物屬性資訊抽出;以及 檢測手段120,依據基準屬性資訊與人物屬性資訊,檢測拍攝影像內之人物。
另,上述抽出手段110與檢測手段120,可藉由使資訊處理裝置100所裝設之運算裝置實行程式而建構,亦可由電子電路建構。
而上述構成之資訊處理裝置100,以實行下述等處理的方式作動: 將表示拍攝對象場所而得的拍攝影像內之人物的屬性之人物屬性資訊抽出;以及 依據儲存在儲存手段的表示依照對象場所之人物的屬性之基準屬性資訊、人物屬性資訊,檢測拍攝影像內之人物。
依上述發明,則藉由將預先準備的表示依照對象場所之人物的屬性之基準屬性資訊,與拍攝對象場所而得的拍攝影像內之人物的屬性加以比較,而可檢測對象場所之期望人物。
<附註> 上述實施形態之一部分或全部,亦可如同以下附註般地記載。以下,說明本發明之資訊處理系統、資訊處理方法、及程式的構成之概略。然則,本發明,並未限定於下述構成。
(附註1) 一種資訊處理裝置,具備: 儲存手段,儲存表示依照對象場所之人物的屬性之基準屬性資訊; 抽出手段,將表示拍攝該對象場所而得的拍攝影像內之人物的屬性之人物屬性資訊抽出;以及 檢測手段,依據該基準屬性資訊與該人物屬性資訊,檢測該拍攝影像內之既定人物。
(附註2) 如附註1所記載之資訊處理裝置,其中, 該檢測手段,依據表示複數人物的屬性之該基準屬性資訊、及表示一人或複數人物的屬性之該人物屬性資訊,檢測該拍攝影像內之既定人物。
(附註3) 如附註1或2所記載之資訊處理裝置,其中, 該檢測手段,對於該基準屬性資訊,在該人物屬性資訊和既定基準一致的情況,或和既定基準不一致的情況,檢測與該人物屬性資訊對應的該拍攝影像內之既定人物。
(附註4) 如附註1至3中任一項所記載之資訊處理裝置,其中, 該基準屬性資訊,係針對周圍環境逐一設定; 該檢測手段,依據與該拍攝影像的周圍環境對應而設定之該基準屬性資訊、及該人物屬性資訊,檢測該拍攝影像內之既定人物。
(附註5) 如附註1至4中任一項所記載之資訊處理裝置,其中, 該抽出手段,將表示該拍攝影像內之人物的行動之行動資訊抽出; 該檢測手段,依據該基準屬性資訊、該人物屬性資訊、及該行動資訊,檢測與該人物屬性資訊對應的該拍攝影像內之既定人物。
(附註6) 如附註1至5中任一項所記載之資訊處理裝置,其中, 具備基準屬性資訊產生手段,其將拍攝該對象場所而得的該拍攝影像內之人物的屬性抽出,依據該抽出之人物的屬性,產生與該對象場所對應之該基準屬性資訊,將其儲存。
(附註7) 如附註1至6中任一項所記載之資訊處理裝置,其中, 該屬性,係表示人物的年齡之資訊、表示人物的性別之資訊、或表示人物的個人配件之資訊。
(附註8) 一種電腦可讀取記錄媒體,儲存有用於使資訊處理裝置實現下述手段之程式: 抽出手段,將表示拍攝對象場所而得的拍攝影像內之人物的屬性之人物屬性資訊抽出;以及 檢測手段,依據儲存在儲存手段的表示依照該對象場所之人物的屬性之基準屬性資訊、及該人物屬性資訊,檢測該拍攝影像內之既定人物。
(附註8.1) 如附註8所記載之儲存有程式之電腦可讀取記錄媒體,其中, 該基準屬性資訊,係針對周圍環境逐一設定; 該檢測手段,依據與該拍攝影像的周圍環境對應而設定之該基準屬性資訊、及該人物屬性資訊,檢測該拍攝影像內之既定人物。
(附註8.2) 如附註8或8.1中任一項所記載之儲存有程式之電腦可讀取記錄媒體,其中, 該抽出手段,將表示該拍攝影像內之人物的行動之行動資訊抽出; 該檢測手段,依據該基準屬性資訊、該人物屬性資訊、及該行動資訊,檢測與該人物屬性資訊對應的該拍攝影像內之既定人物。
(附註8.3) 如附註8至8.2中任一項所記載之儲存有程式之電腦可讀取記錄媒體,其中, 儲存有用於使資訊處理裝置進一步實現下述手段之程式: 基準屬性資訊產生手段,其將拍攝該對象場所而得的該拍攝影像內之人物的屬性抽出,依據該抽出之人物的屬性,產生與該對象場所對應之該基準屬性資訊,將其儲存。
(附註9) 一種資訊處理方法,包含如下步驟: 將表示拍攝對象場所而得的拍攝影像內之人物的屬性之人物屬性資訊抽出;以及 依據儲存在儲存手段的表示依照該對象場所之人物的屬性之基準屬性資訊、及該人物屬性資訊,檢測該拍攝影像內之既定人物。
(附註10) 如附註9所記載之資訊處理方法,其中, 該基準屬性資訊,係針對周圍環境逐一設定; 依據與該拍攝影像的周圍環境對應而設定之該基準屬性資訊、及該人物屬性資訊,檢測該拍攝影像內之既定人物。
(附註11) 如附註9或10所記載之資訊處理方法,其中, 將表示該拍攝影像內之人物的行動之行動資訊抽出; 依據該基準屬性資訊、該人物屬性資訊、及該行動資訊,檢測與該人物屬性資訊對應的該拍攝影像內之既定人物。
(附註12) 如附註9至11中任一項所記載之資訊處理方法,其中, 將拍攝該對象場所而得的該拍攝影像內之人物的屬性抽出,依據該抽出之人物的屬性,產生與該對象場所對應之該基準屬性資訊,將其儲存。
另,上述程式,可使用各種類型之非暫態性電腦可讀取媒體(non-transitory computer readable medium)收納,而對電腦供給。非暫態性電腦可讀取媒體,包含各種類型之具有實體的記錄媒體(tangible storage medium,有形的儲存媒體)。非暫態性電腦可讀取媒體之例子,包含磁性記錄媒體(例如軟性磁碟、磁帶、硬碟)、光磁性記錄媒體(例如磁光碟)、CD-ROM(Read Only Memory,唯讀記憶體)、CD-R、CD-R/W、半導體記憶體(例如遮罩ROM、PROM(Programmable ROM,可程式化唯讀記憶體)、EPROM(Erasable PROM,可抹除可程式化唯讀記憶體)、快閃ROM、RAM(Random Access Memory,隨機存取記憶體))。此外,程式,亦可藉由各種類型之暫態性電腦可讀取媒體(transitory computer readable medium)對電腦供給。暫態性電腦可讀取媒體的例子,包含電訊號、光學訊號、及電磁波。暫態性電腦可讀取媒體,可經由電線及光纖等有線通訊線路、或無線通訊線路,將程式對電腦供給。
以上,雖參考上述實施形態等而說明本案之發明,但本案發明,並未限定於上述實施形態。在本案發明之範圍內,可對本案發明之構成、細節,進行所屬技術領域中具有通常知識者可理解的各種變更。
10:監視裝置 11:人物抽出部 12:學習部 13:檢測部 14:人物資訊儲存部 15:基準資訊儲存部 20:輸出裝置 100:資訊處理裝置 110:抽出手段 120:檢測手段 130:儲存手段 C:相機 P:人物 P1:可疑者 R:對象場所 R1,R2:分割區域
圖1係顯示本發明的實施形態1之資訊處理系統的全體構成之圖。 圖2A係顯示本發明的實施形態1之資訊處理系統的構成之方塊圖。 圖2B係顯示儲存在圖2所A揭露之基準資訊儲存部的資訊之一例的圖。 圖3係顯示儲存在圖1所揭露之監視裝置的資訊之一例的圖。 圖4係顯示由圖1所揭露之監視裝置輸出的影像之一例的圖。 圖5係顯示由圖1所揭露之監視裝置輸出的影像之一例的圖。 圖6係顯示由圖1所揭露之監視裝置輸出的影像之一例的圖。 圖7係顯示圖1所揭露之監視裝置的處理運作之流程圖。 圖8係顯示圖1所揭露之監視裝置的處理運作之流程圖。 圖9係顯示由本發明的實施形態2之監視裝置輸出的影像之一例的圖。 圖10係顯示本發明的實施形態2之資訊處理裝置的構成之方塊圖。
100:資訊處理裝置
110:抽出手段
120:檢測手段
130:儲存手段

Claims (11)

  1. 一種資訊處理裝置,包含:儲存手段,儲存表示依照對象場所之人物的屬性之基準屬性資訊;抽出手段,將表示拍攝該對象場所而得的拍攝影像內之人物的屬性之人物屬性資訊抽出;以及檢測手段,依據該基準屬性資訊與該人物屬性資訊,檢測該拍攝影像內之既定人物;該檢測手段,對於該基準屬性資訊,在該人物屬性資訊和既定基準一致的情況,或和既定基準不一致的情況,檢測與該人物屬性資訊對應的該拍攝影像內之既定人物。
  2. 如申請專利範圍第1項之資訊處理裝置,其中,該檢測手段,依據表示複數人物的屬性之該基準屬性資訊、及表示一人或複數人物的屬性之該人物屬性資訊,檢測該拍攝影像內之既定人物。
  3. 如申請專利範圍第1項之資訊處理裝置,其中,該基準屬性資訊,係針對周圍環境逐一設定;該檢測手段,依據與該拍攝影像的周圍環境對應而設定之該基準屬性資訊、及該人物屬性資訊,檢測該拍攝影像內之既定人物。
  4. 如申請專利範圍第1項之資訊處理裝置,其中,該抽出手段,將表示該拍攝影像內之人物的行動之行動資訊抽出; 該檢測手段,依據該基準屬性資訊、該人物屬性資訊、及該行動資訊,檢測與該人物屬性資訊對應的該拍攝影像內之既定人物。
  5. 如申請專利範圍第1項之資訊處理裝置,其中,更包含:基準屬性資訊產生手段,其將拍攝該對象場所而得的該拍攝影像內之人物的屬性抽出,依據該抽出之人物的屬性,產生與該對象場所對應之該基準屬性資訊,將其儲存。
  6. 如申請專利範圍第1項之資訊處理裝置,其中,該屬性,係表示人物的年齡之資訊、表示人物的性別之資訊、或表示人物的個人配件之資訊。
  7. 一種電腦可讀取記錄媒體,儲存有用於使資訊處理裝置實現下述手段之程式:抽出手段,將表示拍攝對象場所而得的拍攝影像內之人物的屬性之人物屬性資訊抽出;以及檢測手段,依據儲存在儲存手段的表示依照該對象場所之人物的屬性之基準屬性資訊、及該人物屬性資訊,檢測該拍攝影像內之既定人物;該檢測手段,對於該基準屬性資訊,在該人物屬性資訊和既定基準一致的情況,或和既定基準不一致的情況,檢測與該人物屬性資訊對應的該拍攝影像內之既定人物。
  8. 一種資訊處理方法,包含如下步驟:將表示拍攝對象場所而得的拍攝影像內之人物的屬性之人物屬性資訊抽出; 依據儲存在儲存手段的表示依照該對象場所之人物的屬性之基準屬性資訊、及該人物屬性資訊,檢測該拍攝影像內之既定人物;在該檢測該拍攝影像內之既定人物之步驟中,對於該基準屬性資訊,在該人物屬性資訊和既定基準一致的情況,或和既定基準不一致的情況,檢測與該人物屬性資訊對應的該拍攝影像內之既定人物。
  9. 如申請專利範圍第8項之資訊處理方法,其中,該基準屬性資訊,係針對周圍環境逐一設定;依據與該拍攝影像的周圍環境對應而設定之該基準屬性資訊、及該人物屬性資訊,檢測該拍攝影像內之既定人物。
  10. 如申請專利範圍第8項之資訊處理方法,其中,將表示該拍攝影像內之人物的行動之行動資訊抽出;依據該基準屬性資訊、該人物屬性資訊、及該行動資訊,檢測與該人物屬性資訊對應的該拍攝影像內之既定人物。
  11. 如申請專利範圍第8項之資訊處理方法,其中,將拍攝該對象場所而得的該拍攝影像內之人物的屬性抽出,依據該抽出之人物的屬性,產生與該對象場所對應之該基準屬性資訊,將其儲存。
TW109100674A 2019-01-18 2020-01-09 資訊處理裝置 TWI797411B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
PCT/JP2019/001464 WO2020148889A1 (ja) 2019-01-18 2019-01-18 情報処理装置
WOPCT/JP2019/001464 2019-01-18

Publications (2)

Publication Number Publication Date
TW202046709A TW202046709A (zh) 2020-12-16
TWI797411B true TWI797411B (zh) 2023-04-01

Family

ID=71614090

Family Applications (1)

Application Number Title Priority Date Filing Date
TW109100674A TWI797411B (zh) 2019-01-18 2020-01-09 資訊處理裝置

Country Status (5)

Country Link
US (3) US20220058380A1 (zh)
JP (3) JP7151789B2 (zh)
AR (1) AR117829A1 (zh)
TW (1) TWI797411B (zh)
WO (1) WO2020148889A1 (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020148889A1 (ja) * 2019-01-18 2020-07-23 日本電気株式会社 情報処理装置
WO2023286274A1 (ja) * 2021-07-16 2023-01-19 日本電気株式会社 顔認証システム、顔認証方法およびプログラム
WO2023037552A1 (ja) * 2021-09-13 2023-03-16 日本電気株式会社 監視支援装置、システム及び方法、並びに、コンピュータ可読媒体
JP7416315B1 (ja) 2023-05-31 2024-01-17 三菱電機ビルソリューションズ株式会社 入退室管理システム、情報処理装置、入退室管理方法、及びコンピュータ読み取り可能な記録媒体
JP7507524B1 (ja) 2023-09-28 2024-06-28 株式会社アジラ 注目行動呼びかけシステム

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100106707A1 (en) * 2008-10-29 2010-04-29 International Business Machines Corporation Indexing and searching according to attributes of a person
US20120308090A1 (en) * 2011-06-06 2012-12-06 Kabushiki Kaisha Toshiba Facial image search system and facial image search method

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4592383B2 (ja) * 2004-10-25 2010-12-01 三菱電機株式会社 不審者通報システム
JP4785651B2 (ja) 2006-07-04 2011-10-05 日立オムロンターミナルソリューションズ株式会社 金融機関ブース内監視システム
JP2008047074A (ja) * 2006-08-21 2008-02-28 Sogo Keibi Hosho Co Ltd 警備装置、警備方法および警備プログラム
JP2008083933A (ja) * 2006-09-27 2008-04-10 Sogo Keibi Hosho Co Ltd 不審者判定装置、不審者判定方法および不審者判定プログラム
JP2009252215A (ja) * 2008-04-11 2009-10-29 Sogo Keibi Hosho Co Ltd 警備装置および情報表示方法
JP5550974B2 (ja) * 2010-04-19 2014-07-16 セコム株式会社 不審者検知装置
US20140347479A1 (en) * 2011-11-13 2014-11-27 Dor Givon Methods, Systems, Apparatuses, Circuits and Associated Computer Executable Code for Video Based Subject Characterization, Categorization, Identification, Tracking, Monitoring and/or Presence Response
US20170316258A1 (en) * 2016-04-29 2017-11-02 International Business Machines Corporation Augmenting gesture based security technology for improved differentiation
JP6702045B2 (ja) * 2016-07-11 2020-05-27 沖電気工業株式会社 監視装置
JP6912881B2 (ja) 2016-12-01 2021-08-04 キヤノン株式会社 情報処理装置、情報処理方法およびプログラム
JP6905850B2 (ja) 2017-03-31 2021-07-21 綜合警備保障株式会社 画像処理システム、撮像装置、学習モデル作成方法、情報処理装置
WO2020148889A1 (ja) 2019-01-18 2020-07-23 日本電気株式会社 情報処理装置

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100106707A1 (en) * 2008-10-29 2010-04-29 International Business Machines Corporation Indexing and searching according to attributes of a person
US20120308090A1 (en) * 2011-06-06 2012-12-06 Kabushiki Kaisha Toshiba Facial image search system and facial image search method

Also Published As

Publication number Publication date
US20230410558A1 (en) 2023-12-21
US20230401895A1 (en) 2023-12-14
JPWO2020148889A1 (ja) 2021-10-14
US20220058380A1 (en) 2022-02-24
TW202046709A (zh) 2020-12-16
WO2020148889A1 (ja) 2020-07-23
JP7416165B2 (ja) 2024-01-17
JP2024041796A (ja) 2024-03-27
JP2022191288A (ja) 2022-12-27
JP7151789B2 (ja) 2022-10-12
AR117829A1 (es) 2021-08-25

Similar Documents

Publication Publication Date Title
TWI797411B (zh) 資訊處理裝置
US20210383132A1 (en) Video identification and analytical recognition system
CN108369770B (zh) 丢弃物监视装置和具备该丢弃物监视装置的丢弃物监视系统以及丢弃物监视方法
US11743431B2 (en) Video identification and analytical recognition system
US11138420B2 (en) People stream analysis method, people stream analysis apparatus, and people stream analysis system
JP5740210B2 (ja) 顔画像検索システム、及び顔画像検索方法
JP6185517B2 (ja) 画像監視装置
US20190213424A1 (en) Image processing system and image processing method
CN109376639A (zh) 基于人像识别的伴随人员预警系统及方法
Tan et al. Application of face recognition in tracing COVID-19 fever patients and close contacts
JP2018201176A (ja) アラート出力制御プログラム、アラート出力制御方法およびアラート出力制御装置
US11537639B2 (en) Re-identification of physical objects in an image background via creation and storage of temporary data objects that link an object to a background
JP7423904B2 (ja) 情報出力装置、方法、及びプログラム
JP2019109760A (ja) 画像監視装置
CN110443187B (zh) 特征信息的记录方法及装置
JP2017054229A (ja) 人物判別システム
JP7310834B2 (ja) 情報処理装置
TWI853876B (zh) 資訊處理裝置、電腦可讀取記錄媒體及資訊處理方法
JP7310833B2 (ja) 情報処理装置
US20220269890A1 (en) Method and system for visual analysis and assessment of customer interaction at a scene
Ponmalar et al. Smart borderline Micro-Cannon using surveillance camera and sentry gun
KR20200041673A (ko) 영상 내 이벤트를 추정하는 장치, 방법 및 컴퓨터 프로그램
FR3011428A1 (fr) Systeme de videosurveillance permettant de suivre le deplacement des personnes a l'interieur et a l'exterieur d'un batiment
Pedrini Fig. 1: Where’s Wally 1conceptofourproposedstudy (A daptedfrom CNN).