TW202046710A - 資訊處理裝置 - Google Patents

資訊處理裝置 Download PDF

Info

Publication number
TW202046710A
TW202046710A TW109100686A TW109100686A TW202046710A TW 202046710 A TW202046710 A TW 202046710A TW 109100686 A TW109100686 A TW 109100686A TW 109100686 A TW109100686 A TW 109100686A TW 202046710 A TW202046710 A TW 202046710A
Authority
TW
Taiwan
Prior art keywords
processing
captured image
processing mode
content
image
Prior art date
Application number
TW109100686A
Other languages
English (en)
Inventor
小野里宗明
寺澤哲
篠崎祐司
池田浩雄
中川淳子
Original Assignee
日商日本電氣股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 日商日本電氣股份有限公司 filed Critical 日商日本電氣股份有限公司
Publication of TW202046710A publication Critical patent/TW202046710A/zh

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/52Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • G06V20/53Recognition of crowd images, e.g. recognition of crowd congestion
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/20Analysis of motion
    • G06T7/292Multi-camera tracking
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172Classification, e.g. identification
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20Movements or behaviour, e.g. gesture recognition
    • G06V40/23Recognition of whole body movements, e.g. for sport training
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30196Human being; Person
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30242Counting objects in image

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Psychiatry (AREA)
  • Social Psychology (AREA)
  • Signal Processing (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Image Processing (AREA)
  • Image Analysis (AREA)
  • Studio Devices (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • User Interface Of Digital Computer (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

本發明之資訊處理裝置100,具備:檢測手段110,檢測拍攝影像之內容;判定手段120,依據該拍攝影像之內容的檢測結果,判定與該拍攝影像相關之處理模式;以及實行手段130,實行和處理模式對應的與拍攝影像相關之處理。

Description

資訊處理裝置
本發明係關於一種控制與對象場所之拍攝影像相關的處理之資訊處理裝置、資訊處理方法、及程式。
在機場或車站、店鋪、活動會場等,不特定多數人物所聚集的場所,設置用於檢測人物的行動或人物本身之監視相機。而後,從藉由監視相機拍攝到的拍攝影像,施行偵測由多數人物構成之群眾的移動狀況、藉由臉部識別檢測預先登錄之人物等處理。
作為一例,於專利文獻1,記載從藉由相機拍攝到的輸入影像檢測對象物,將特徵量抽出。尤其是,於專利文獻1記載,評估對於每一時間的輸入影像之檢測方式、抽出方式,加以選擇。 [習知技術文獻] [專利文獻]
專利文獻1:國際公開第2014/155639號公報
[本發明所欲解決的問題]
然而,上述專利文獻1之技術,僅在每一時間施行對於輸入影像之處理的切換。因此,無法對輸入影像效率良好且適當地施行處理。此一結果,產生無法追求為了拍攝輸入影像而設置的拍攝裝置之有效率的利用等問題。
因此,本發明之目的在於解決上述問題,即無法追求拍攝裝置之有效率的利用之問題。 [解決問題之技術手段]
本發明的一形態之資訊處理裝置,採用具備如下手段之構成: 檢測手段,檢測拍攝影像之內容; 判定手段,依據該拍攝影像之內容的檢測結果,判定與該拍攝影像相關之處理模式;以及 實行手段,實行和該處理模式對應的與該拍攝影像相關之處理。
此外,本發明的一形態之程式,採用使資訊處理裝置實現如下手段之構成: 檢測手段,檢測拍攝影像之內容; 判定手段,依據該拍攝影像之內容的檢測結果,判定與該拍攝影像相關之處理模式;以及 實行手段,實行和該處理模式對應的與該拍攝影像相關之處理。
此外,本發明的一形態之資訊處理方法,採用包含如下步驟之構成: 檢測拍攝影像之內容; 依據該拍攝影像之內容的檢測結果,判定與該拍攝影像相關之處理模式;以及 實行和該處理模式對應的與該拍攝影像相關之處理。 [本發明之效果]
本發明,藉由如同上述地構成,而可追求拍攝裝置之有效率的利用。
<實施形態1> 參考圖1至圖10,說明本發明之第1實施形態。圖1至圖7為,用於說明資訊處理系統之構成的圖;圖8至圖10為,用於說明資訊處理系統之處理運作的圖。
[構成] 本發明之資訊處理系統,係用於控制設置在屋內或屋外等對象場所之拍攝裝置即相機C及拍攝影像之處理的系統。本實施形態,將具備設置於對象場所即進行運動或音樂會等活動之體育館S的複數台相機C之資訊處理系統,列舉作為一例而說明。然則,本發明之資訊處理系統,亦可利用在任意場所。
如圖1所示,構成資訊處理系統之相機C,係由內部相機與外部相機構成;內部相機,拍攝成為對象場所之體育館S的內部,即操場等活動實行場所、觀眾席;外部相機,拍攝體育館S的外部,即出入口附近、體育館的周圍。另,在圖2,例示拍攝出入口G附近之相機C。然則,相機C的設置場所,並未限定於上述場所。
而本實施形態之資訊處理系統,如圖1及圖2所示,具備與相機C連接之監視裝置10、以及與該監視裝置10連接之輸出裝置20及資訊提供裝置30而構成。上述監視裝置10,實行對於由相機C拍攝到的拍攝影像之解析處理、相機C之控制處理。上述輸出裝置20,將拍攝影像本身輸出,並將由監視裝置10施行之處理結果輸出。上述資訊提供裝置30,提供在體育館S進行的活動之進行狀況、體育館S附近之氣象資訊等各種資訊。以下,針對各構成予以詳述。
上述監視裝置10,係由具備運算裝置與儲存裝置之1台或複數台資訊處理裝置所構成。而監視裝置10,如圖3A所示,具備使運算裝置實行程式藉而建構出之映像檢測部11、資訊取得部12、處理模式判定部13、控制部14。此外,監視裝置10,具備形成於儲存裝置之判定基準儲存部15。
上述映像檢測部11(檢測手段),首先,以一定的時間間隔受理由相機C拍攝到的拍攝影像。例如,如圖2所示,從設置於出入口G附近之相機C,受理以該相機C拍攝到的拍攝影像。而後,映像檢測部11,從顯現在拍攝影像內之物體的形狀、色彩、移動等,檢測拍攝影像內之內容,在本實施形態尤其為拍攝影像內之人物P的狀況(圖8的步驟S1)。作為一例,映像檢測部11,檢測從拍攝影像檢測到之人物P的人數或密度、移動方向。而後,映像檢測部11,對處理模式判定部13,通知檢測到之人物P的狀況。
上述資訊取得部12,從經由網路而與監視裝置10連接之資訊提供裝置30,取得在體育館S施行的活動(事件)之進行狀況、體育館S附近之氣象資訊等各種資訊(圖8的步驟S2)。具體而言,資訊取得部12,作為在體育館S進行的比賽(比試)之進行狀況,取得比賽開始前、比賽中、比賽結束後等資訊;作為體育館S附近的當下之氣象資訊,取得晴、雨、氣溫等氣象資訊。而後,資訊取得部12,對處理模式判定部13,通知取得之資訊。
另,映像檢測部11,亦可依據由相機C拍攝到的拍攝影像之內容,檢測上述比賽之進行狀況、氣象資訊等,該映像檢測部11將其對處理模式判定部13通知。例如,映像檢測部11,依據由體育館S內之相機C拍攝到的拍攝影像,檢測操場內之人物P的人數或裁判的有無、移動等,從此檢測到之內容,檢測比賽之進行狀況為比賽開始前、比賽中、比賽結束後。此外,映像檢測部11,檢測拍攝影像內之觀眾即人物P是否撐傘,或雨所造成的影像擾動等,從此檢測到之內容檢測天氣等氣象資訊。另,映像檢測部11,亦可藉由任意方法,從映像影像檢測上述進行狀況或氣象資訊等體育館S之各種資訊。
上述處理模式判定部13(判定手段),依據從映像檢測部11通知的拍攝影像之內容的檢測結果、及從資訊取得部12通知的資訊,判定與拍攝影像相關而實行之處理模式(圖8的步驟S3)。另,將依據拍攝影像之內容的檢測結果、及從資訊取得部12接收到的資訊而決定判定為何種處理模式之判定基準,儲存在監視裝置10的判定基準儲存部15。因此,處理模式判定部13,利用此一判定基準,判定處理模式。
此處,與拍攝模式相關而實行之處理模式,包含:對於拍攝影像的解析處理、對於用來拍攝拍攝影像之相機C的控制處理。進一步,具體而言,對於拍攝影像的解析處理,包含:對於拍攝影像內之人物的群眾偵測處理、行動偵測處理、臉部識別處理。此外,對於相機C之控制處理,包含:相機的運作/停止、調焦、視角切換、移動等控制處理。
另,上述判定基準,例如如圖3B所示,與處理模式賦予對應而儲存。圖3B之例子中,將對於拍攝影像或取得之資訊的判定基準、成為判定的處理模式之對象的範圍(相機)、及判定的處理模式(解析處理及控制處理),賦予對應。
此處,說明處理模式判定部13之判定處理的具體例。在此例中,說明應用圖3B所示之No.1的判定基準之情況。處理模式判定部13,在從出入口G附近的相機C,作為拍攝影像之內容,接收到表示拍攝影像內之人物P的人數或密度之資訊的情況,調查人數或密度是否超過可判斷為群眾之閾值。而後,如圖4所示,在人數或密度超過閾值的情況,將對於由出入口G附近之相機C拍攝到的拍攝影像之處理模式,判定為「群眾偵測處理」之解析處理(在圖8的步驟S4為Yes,步驟S5)。另,群眾偵測處理,為檢測是否因由相機C拍攝到的拍攝影像內之人物而產生群眾、群眾的移動方向/移動速度等之處理,群眾偵測處理係藉由與監視裝置10連接的解析引擎E實行。此外,處理模式判定部13,在人數或密度超過閾值而判定為群眾偵測處理之解析處理的情況,一併判定為施行對於出入口G附近之相機C的調焦之控制處理(在圖8的步驟S6為Yes,步驟S7)。亦即,此一情況,判定為施行推遠控制俾可拍攝遠景影像,以容易對拍攝影像施行群眾偵測處理。
此外,作為一例,說明應用圖3B所示之No.2的判定基準之情況。處理模式判定部13,與上述內容相反,如圖5所示,在從出入口G附近之相機C接收到的拍攝影像內之人物P的人數或密度為閾值以下之情況,將對於該相機C之處理模式,判定為「臉部識別處理」之解析處理。另,臉部識別處理,為從拍攝影像內之人物的臉部影像將特徵量抽出,調查其與預先登錄的臉部影像是否一致之認證處理,臉部識別處理係藉由與監視裝置10連接的解析引擎E而實行。此外,處理模式判定部13,在人數或密度為閾值以下而判定為臉部識別處理之解析處理的情況,一併判定為施行對於出入口G附近之相機C的調焦之控制處理。亦即,此一情況,判定為施行拉近控制俾可拍攝近景影像,以容易對拍攝影像取得人物的臉部影像。
此外,作為一例,說明應用圖3B所示之No.3、4、5的判定基準之情況。處理模式判定部13,在從資訊取得部12接收到表示體育館S的活動之進行狀況的資訊之情況,調查該進行狀況之內容。而後,因應活動之進行狀況,判定處理模式。例如,在進行狀況為「比賽開始前」之情況,將對於由出入口G附近之相機C拍攝到的拍攝影像之處理模式判定為「臉部識別處理」,一併將對於此相機C之處理模式判定為「拉近控制」。此外,在進行狀況為「比賽中」之情況,將對於由出入口G附近之相機C拍攝到的拍攝影像之處理模式判定為「行動偵測處理」,一併將對於此相機C之處理模式判定為「推遠控制」。此外,在進行狀況為「比賽結束後」之情況,將對於由出入口G附近之相機C拍攝到的拍攝影像之處理模式判定為「群眾偵測處理」,一併將對於此相機C之處理模式判定為「推遠控制」。另,上述「行動偵測處理」,為從拍攝影像內之人物P的動線或動作,檢測採取可疑行動或身體搖晃等特定行動之人物的解析處理,行動偵測處理係藉由與監視裝置10連接的解析引擎E而實行。
此外,作為一例,說明處理模式判定部13,依據拍攝影像之內容與對象場所之資訊雙方判定處理模式的情況。此一情況,作為判定基準,設定「進行狀況:比賽開始前」及「相機1拍攝影像:人數/密度≦閾值」,作為對於其之處理模式,設定「臉部識別處理」及「拉近」。如此一來,則在進行狀況為比賽開始前,由出入口G附近之相機C拍攝到的拍攝影像內之人物P的人數或密度為閾值以下之情況,將對於由該相機C拍攝到的拍攝影像之處理模式判定為「臉部識別處理」之解析處理,將對於相機C之處理模式判定為「拉近控制」。此外,作為另一例,在進行狀況為比賽開始前,由出入口G附近之相機C拍攝到的拍攝影像內之人物P的人數或密度超過閾值之情況,將對於由該相機C拍攝到的拍攝影像之處理模式判定為「群眾偵測處理」之解析處理,將對於相機C之處理模式判定為「推遠控制」。
此外,作為一例,說明應用圖3B所示之No.6的判定基準之情況。處理模式判定部13,從體育館S的活動之進行狀況,調查是否在體育館S進行活動。例如,處理模式判定部13,收集關於時間表、從活動開始算起的經過時間、從拍攝影像解析出之觀眾的移動(離開、入座)等關於活動之進行狀況的資訊,調查活動為未實施或結束、其他進行狀況(舉行中、休息等)。而後,處理模式判定部13,在檢測到並未進行活動的情況,判定控制相機C本身或解析引擎的運作/停止之處理模式。例如,如圖6的叉形記號所示,將對於出入口G附近之相機C的處理模式判定為「停止」,停止拍攝本身。此外,如圖6的叉形記號所示,將對於拍攝體育館S內的一部分之相機C的處理模式判定為「停止」,將對於剩下之相機C的處理模式判定為「行動偵測處理」,一併將對於此相機C的處理模式判定為「推遠控制」。藉此,可抑制運作相機的台數,並施行往體育館S內之非法侵入者的偵測。
此外,作為一例,說明應用圖3B所示之No.7的判定基準之情況。處理模式判定部13,在從資訊取得部12接收到體育館S附近之氣象資訊的情況,調查該氣象之內容。而後,處理模式判定部13,因應氣象狀況,判定處理模式。例如,在體育館S附近之天氣為「晴」的情況,將對於由體育館S內之相機C拍攝到的拍攝影像之處理模式判定為「行動偵測處理」,一併將對於此相機C之處理模式判定為「推遠控制」。另一方面,作為應用另一判斷基準的例子,在體育館S附近之天氣為「雨」的情況,如圖7所示,將對於拍攝體育館S內的僅一部分之相機C之處理模式判定為「停止」,停止對於拍攝影像之解析處理。此係因預期撐傘之觀眾因雨而增加,故行動偵測處理的處理精密度降低,因而停止拍攝、解析處理。此外,作為應用另一判斷基準的例子,在體育館S附近之氣溫高而為閾值以上的情況,將對於由體育館S內之相機C拍攝到的拍攝影像之處理模式判定為「行動偵測處理」,一併將對於此相機C之處理模式判定為「拉近控制」。藉此,可施行體育館S內之觀眾身體搖晃等身體狀況不佳的偵測。
另,在如同上述地映像檢測部11從拍攝影像之內容檢測到活動之進行狀況、體育館S附近之氣象資訊等的情況,處理模式判定部13,亦可依據從映像檢測部11通知的活動之進行狀況、氣象資訊,判定處理模式。
另,上述內容中,處理模式判定部13,判定為對1個範圍(相機)之拍攝影像施行1個解析處理,但亦可判定為對1個範圍(相機)之拍攝影像施行複數解析處理。亦即,亦可如圖3B的No.8所示,對於判定基準「人數/密度≦閾值2」,將複數解析處理即「臉部識別處理」及「群眾偵測處理」和範圍1(相機1)賦予對應。此一情況,對於範圍1(相機1)之拍攝影像,施行「臉部識別處理」與「群眾偵測處理」雙方之解析處理。另,如圖3B的No.8所示,在一方之解析處理「臉部識別處理」設定為「優先」的情況,處理模式判定部13,判定為將「臉部識別處理」較「群眾偵測處理」更優先實行。此一情況,相對於「群眾偵測處理」,將「臉部識別處理」,藉由解析引擎E以更早的順序處理、分配大量解析引擎E之CPU等資源而處理、在該資源少的情況僅實行「臉部識別處理」。此外,亦可相對於「群眾偵測處理」,將「臉部識別處理」,使用大量拍攝影像之影格率(frame rate)、以高畫質處理。如此地,處理模式判定部13,亦可判定處理模式的處理層級。
此外,上述內容中,處理模式判定部13,於每一範圍(相機)判定處理模式,但亦可在將範圍即相機C的拍攝影像分割為複數區域之每一分割區域,判定處理模式。例如,亦可因拍攝影像之左半部的區域,滿足判定基準「人數/密度≦閾值」,而將處理模式判定為「臉部識別處理」,因拍攝影像之右半部的區域,滿足判定基準「人數/密度>閾值」,而將處理模式判定為「群眾偵測處理」。此外,此時,拍攝影像之左半部的區域,將處理模式判定為「臉部識別處理」,拍攝影像之右半部的區域,不判定為任一處理模式亦可,此一情況,可與左半部的區域之「臉部識別處理」對應而將對於相機C之處理模式判定為「拉近控制」。進一步,在顯現在將處理模式判定為「臉部識別處理」的拍攝影像之左半部的區域之人物移動的情況,亦可因應此人物的移動,而使判定處理模式為「臉部識別處理」的區域移動而設定。如此地,亦可於拍攝影像的每一區域,調查是否滿足判定基準,判定處理模式。
此處,上述內容中,雖說明處理模式判定部13,作為拍攝影像之內容,檢測顯現在該拍攝影像之人物的「人數或密度」,判定處理模式之情況,但亦可檢測如下所示的拍攝影像之內容而判定處理模式。例如,亦可偵測顯現在拍攝影像之人物的移動方向,在該人物朝向相機之情況將處理模式判定為臉部識別處理,在遠離之情況將處理模式判定為全身認證處理。另,全身認證處理,例如為包含人物的服裝、髮型、側影、持有物品等之全身影像的人物認證處理。此外,例如,亦可偵測顯現在拍攝影像之人物的臉部區域,若臉部大小超過既定值則將處理模式判定為臉部識別處理,若為既定值以下則將處理模式判定為全身認證處理。此外,例如,亦可於偵測顯現在拍攝影像之人物的行動,在偵測到特定行動(揮舞物品、人彼此爭搶、跌倒等)之情況,判定為將相機拉近之控制處理。然則,處理模式判定部13判定處理模式時所使用的拍攝影像之內容,並未限定於上述內容。
另,使用上述圖3B之資訊的例子中,處理模式判定部13,藉由拍攝影像之內容、活動進行狀況、氣象資訊中的1種資訊是否滿足判定基準,而判定處理模式,但亦可在複數種資訊滿足判定基準的情況,判定與此一判定基準賦予對應之處理模式。亦即,亦可在拍攝影像之內容、活動進行狀況、及氣象資訊中的1種資訊,或其等中的2種或3種資訊滿足判定基準的情況,判定與此一判定基準賦予對應之處理模式。具體而言,亦可在拍攝影像之內容與活動進行狀況、拍攝影像之內容與氣象資訊、活動進行狀況與氣象資訊、拍攝影像之內容與活動進行資訊與氣象資訊,滿足判定基準的情況,判定與此一判定基準賦予對應之處理模式。進一步,此時,亦可藉由1種資訊中之複數資訊是否滿足判定基準,而判定處理模式。例如,亦可在拍攝影像之內容中的人數/密度、人物的移動方向,滿足判定基準之情況,判定與此一判定基準賦予對應之處理模式。此外,上述圖3B之例子中,作為判定之處理模式,雖列舉僅「解析處理」的情況、及「解析處理」與「相機控制處理」的情況,但亦可僅判定「相機控制處理」。
上述控制部14(通知手段、實行手段),首先,藉由將如同上述地判定之處理模式從輸出裝置20輸出,而對外部通知。此外,控制部14,實行和判定之處理模式對應的與拍攝影像相關之處理(圖8的步驟S8)。亦即,依照判定之處理模式,施行相機C的運作/停止之控制或調焦之控制、控制使各解析引擎E實行對於拍攝影像之各種解析處理。進一步,控制部14,將實行之解析處理的處理結果從輸出裝置20輸出。藉此,體育館S的監視者,可辨識實行之處理模式,且亦可辨識處理結果。
此處,於圖9至圖10,顯示上述控制部14,從輸出裝置20輸出對於拍攝影像之解析處理的樣子時之一例。首先,如圖9所示,於輸出裝置20,將下述顯示區域顯示輸出:影像顯示區域21,顯示拍攝影像;相機名稱顯示區域22,顯示拍攝在影像顯示區域21顯示的拍攝影像之相機名稱;解析處理名稱顯示區域23,顯示對拍攝影像施行之解析處理名稱;預告解析處理名稱顯示區域24,顯示預定切換之解析處理名稱;以及中止按鈕25。
而圖9之例子中,顯示對於以「出入口相機1」之相機C拍攝到的拍攝影像實行「臉部識別處理」時之樣子。此時,於影像顯示區域21,將拍攝影像全體輸出至區域全體,但在此例中,於左上顯示縮小的拍攝影像21a全體,將該拍攝影像21a內之一部分21b,在影像顯示區域21全體放大顯示。此一放大的影像21b,為對於拍攝影像21a施行之臉部識別處理的處理結果之顯示,尤其為,將存在有藉由臉部識別而與預先登錄之人物(例如,登錄為需注意人物之人物)一致的人物之區域放大的影像。此時,在放大的影像21b,將藉由臉部識別處理而與登錄人物一致之人物的臉部部分強調顯示。例如,將與登錄人物一致之人物塗黑顯示、將此人物的臉部部分以四角形的框包圍顯示。另,在施行臉部識別處理,並未存在與登錄人物一致之人物的情況,如圖10所示,成為在影像顯示區域21顯示拍攝影像全體之狀態。
而後,在如同上述地對拍攝影像施行臉部識別處理之間,使處理模式判定部13施行新的處理模式之判定。亦即,處理模式判定部13,在拍攝影像之內容或活動進行狀況、氣象資訊,滿足另一判定基準的情況,判定與該另一判定基準賦予對應之另一處理模式。如此一來,則控制部14,將新判定之另一處理模式,往預告解析處理名稱顯示區域24顯示輸出,在經過一定時間後切換為新的處理模式。例如,圖10之例子中,由於拍攝影像內之人物的人數增加,人數/密度超過閾值,故將處理模式中之解析處理判定為「群眾偵測處理」,在預告解析處理名稱顯示區域24施行此一顯示。此時,操作輸出裝置20之操作者,在不欲切換為「群眾偵測處理」的情況,按壓中止按鈕25。藉此,控制部14,繼續實行「臉部識別處理」,而未將對於拍攝影像的解析處理切換為「群眾偵測處理」。另,在對預告解析處理名稱顯示區域24施行「群眾偵測處理」的顯示後,若經過一定時間而中止按鈕25未受到按壓,則控制部14,將對於拍攝影像的解析處理切換為「群眾偵測處理」。
此處,操作者,在欲對拍攝影像設定期望之處理模式(解析處理)的情況,可從解析處理名稱顯示區域23的下拉式選單,選擇期望之解析處理。如此一來,則控制部14,切換為選出之解析處理。藉此,例如即便為解析處理切換的情況,仍可實行如返回實行切換前之解析處理等期望之解析處理。
此外,控制部14,在如同上述地由操作者按壓中止按鈕25、從解析處理名稱顯示區域23的下拉式選單選出期望之解析處理時,取得此時的拍攝影像之內容、活動進行狀況、氣象狀況的資訊。而後,將取得之資訊,與係切換前之處理模式的解析處理或選出之解析處理賦予關連而學習。亦即,亦可將取得的拍攝影像之內容、活動進行狀況、氣象狀況的資訊作為判定基準,將切換前之解析處理或選出之解析處理與此判定基準賦予對應,而產生新的判定基準資訊。
另,圖9、10之例子中,將由1台相機C拍攝到的拍攝影像本身、及對於拍攝影像之解析處理結果,於影像顯示區域21放大顯示,但亦可將由複數台相機C拍攝到的複數拍攝影像本身、及解析處理結果,於影像顯示區域21顯示。
如同上述,依本發明之資訊處理系統,則可依照對象場所的狀況,而控制設置於體育館S等對象場所之相機C的拍攝狀況、或對於拍攝影像的解析處理。因此,監視者,可辨識因應狀況而實行之處理模式與處理結果,可採取因應處理結果之迅速的對應。此一結果,可追求設置於對象場所的相機C之有效率的利用。
另,上述內容中,作為拍攝影像之內容,檢測拍攝影像內之人物的狀況,依據此等人物的狀況,判定關於拍攝影像之處理模式,但亦可依據拍攝影像內的任意內容之檢測結果,判定處理模式。例如,亦可在拍攝影像內偵測到人所進行之遺棄物品等行動之情況、或偵測到動物之情況,作為處理模式,判定為施行相機C之拉近等控制處理、物體偵測處理等解析處理。此外,上述內容中,雖依據對象場所之氣象資訊或活動之進行狀況,判定關於拍攝影像之處理模式,但亦可依據對象場所的任意資訊,判定處理模式。進一步,上述內容中,作為判定之處理模式,判定對於拍攝影像的解析處理之內容、對於拍攝裝置的控制處理之內容,但若為關於拍攝影像的處理,則亦可判定其他處理模式。
<實施形態2> 其次,參考圖11,說明本發明之第2實施形態。圖11為顯示實施形態2之資訊處理裝置的構成之方塊圖。另,本實施形態,顯示在實施形態1說明之監視裝置的構成之概略。
如圖11所示,本實施形態之資訊處理裝置100,具備: 檢測手段110,檢測拍攝影像之內容; 判定手段120,依據該拍攝影像之內容的檢測結果,判定與該拍攝影像相關之處理模式;以及 實行手段130,實行和處理模式對應的與拍攝影像相關之處理。
另,上述檢測手段110、判定手段120、及實行手段130,可藉由使資訊處理裝置100所裝設之運算裝置實行程式而建構,亦可由電子電路建構。
而上述構成之資訊處理裝置100,以實行下述等處理的方式作動: 檢測拍攝影像之內容; 依據拍攝影像之內容的檢測結果,判定與該拍攝影像相關之處理模式;以及 實行和處理模式對應的與拍攝影像相關之處理。
依上述發明,則因應設置在對象場所之拍攝裝置所產生的拍攝影像之內容,判定與拍攝影像相關之處理模式,實行和此處理模式對應的與拍攝影像相關之處理。因此,可依照對象場所之狀況而實行與拍攝影像相關之處理,可追求設置在對象場所的拍攝裝置之有效率的利用。
<附註> 上述實施形態之一部分或全部,亦可如同以下附註般地記載。以下,說明本發明之資訊處理系統、資訊處理方法、及程式的構成之概略。然則,本發明,並未限定於下述構成。
(附註1) 一種資訊處理裝置,具備: 檢測手段,檢測拍攝影像之內容; 判定手段,依據該拍攝影像之內容的檢測結果,判定與該拍攝影像相關之處理模式;以及 實行手段,實行和該處理模式對應的與該拍攝影像相關之處理。
(附註2) 如附註1所記載之資訊處理裝置,其中, 該檢測手段,檢測該拍攝影像內之人物的狀況; 該判定手段,依據該拍攝影像內之人物的狀況,判定該處理模式。
(附註3) 如附註1或2所記載之資訊處理裝置,其中, 該判定手段,依據該拍攝影像之內容的檢測結果,將表示對於該拍攝影像的解析處理之內容的解析處理模式,判定作為該處理模式; 該實行手段,對該拍攝影像,實行和該解析處理模式對應之解析處理。
(附註4) 如附註3所記載之資訊處理裝置,其中, 該檢測手段,檢測該拍攝影像內之人物的數量或密度; 該判定手段,依據該拍攝影像內之人物的數量或密度之檢測結果,判定該解析處理模式。
(附註5) 如附註3或4所記載之資訊處理裝置,其中, 該檢測手段,檢測該拍攝影像內之人物的行動; 該判定手段,依據該拍攝影像內之人物的行動之檢測結果,判定該解析處理模式。
(附註6) 如附註1至5中任一項所記載之資訊處理裝置,其中, 該判定手段,依據該拍攝影像之內容的檢測結果,將表示對於該拍攝影像的解析處理之內容的解析處理模式,並將和該解析處理模式對應的對於用來拍攝該拍攝影像之拍攝裝置的控制處理,判定作為該處理模式。
(附註7) 如附註1至6中任一項所記載之資訊處理裝置,其中, 該判定手段,將對於該拍攝影像內之人物的群眾偵測處理、行動偵測處理、或臉部識別處理中之任一種,判定作為該處理模式。
(附註8) 如附註1至7中任一項所記載之資訊處理裝置,其中, 該判定手段,將對於用來拍攝該拍攝影像之拍攝裝置的控制處理,判定作為該處理模式。
(附註9) 如附註1至8中任一項所記載之資訊處理裝置,其中, 該判定手段,依據該拍攝影像之內容的檢測結果、及與拍攝該拍攝影像之場所相關而輸出的資訊,判定該處理模式。
(附註10) 如附註9所記載之資訊處理裝置,其中, 該判定手段,依據表示在拍攝該拍攝影像之場所施行的事件之進行狀況的資訊,判定該處理模式。
(附註11) 如附註9或10所記載之資訊處理裝置,其中, 該判定手段,依據拍攝該拍攝影像之場所的氣象資訊,判定該處理模式。
(附註12) 如附註1至11中任一項所記載之資訊處理裝置,其中, 具備通知手段,其對外部通知該處理模式。
(附註13) 一種電腦可讀取記錄媒體,儲存有用於使資訊處理裝置實現下述手段之程式: 檢測手段,檢測拍攝影像之內容; 判定手段,依據該拍攝影像之內容的檢測結果,判定與該拍攝影像相關之處理模式;以及 實行手段,實行和該處理模式對應的與該拍攝影像相關之處理。
(附註14) 一種資訊處理方法,包含如下步驟: 檢測拍攝影像之內容; 依據該拍攝影像之內容的檢測結果,判定與該拍攝影像相關之處理模式;以及 實行和該處理模式對應的與該拍攝影像相關之處理。
(附註15) 如附註14所記載之資訊處理方法,其中, 作為該拍攝影像之內容,檢測該拍攝影像內之人物的狀況; 依據該拍攝影像內之人物的狀況,判定該處理模式。
(附註16) 如附註14或15所記載之資訊處理方法,其中, 依據該拍攝影像之內容的檢測結果,將表示對於該拍攝影像的解析處理之內容的解析處理模式,判定作為該處理模式; 對該拍攝影像,實行和該解析處理模式對應之解析處理。
(附註17) 如附註14至16中任一項所記載之資訊處理方法,其中, 將對於用來拍攝該拍攝影像之拍攝裝置的控制處理,判定作為該處理模式。
(附註18) 如附註14至17中任一項所記載之資訊處理方法,其中, 依據該拍攝影像之內容的檢測結果、及與拍攝該拍攝影像之場所相關而輸出的資訊,判定該處理模式。
另,上述程式,可使用各種類型之非暫態性電腦可讀取媒體(non-transitory computer readable medium)收納,而對電腦供給。非暫態性電腦可讀取媒體,包含各種類型之具有實體的記錄媒體(tangible storage medium,有形的儲存媒體)。非暫態性電腦可讀取媒體之例子,包含磁性記錄媒體(例如軟性磁碟、磁帶、硬碟)、光磁性記錄媒體(例如磁光碟)、CD-ROM(Read Only Memory,唯讀記憶體)、CD-R、CD-R/W、半導體記憶體(例如遮罩ROM、PROM(Programmable ROM,可程式化唯讀記憶體)、EPROM(Erasable PROM,可抹除可程式化唯讀記憶體)、快閃ROM、RAM(Random Access Memory,隨機存取記憶體))。此外,程式,亦可藉由各種類型之暫態性電腦可讀取媒體(transitory computer readable medium)對電腦供給。暫態性電腦可讀取媒體的例子,包含電訊號、光學訊號、及電磁波。暫態性電腦可讀取媒體,可經由電線及光纖等有線通訊線路、或無線通訊線路,將程式對電腦供給。
以上,雖參考上述實施形態等而說明本案之發明,但本案發明,並未限定於上述實施形態。在本案發明之範圍內,可對本案發明之構成、細節,進行所屬技術領域中具有通常知識者可理解的各種變更。
10:監視裝置 11:映像檢測部 12:資訊取得部 13:處理模式判定部 14:控制部 15:判定基準儲存部 20:輸出裝置 21:影像顯示區域 21a:拍攝影像 22:相機名稱顯示區域 22b:拍攝影像之一部分 23:解析處理名稱顯示區域 24:預告解析處理名稱顯示區域 25:中止按鈕 30:資訊提供裝置 100:資訊處理裝置 110:檢測手段 120:判定手段 130:實行手段 C:相機 E:解析引擎 G:出入口 P:人物 S:體育館
[圖1]係顯示本發明的實施形態1之資訊處理系統的全體構成之圖。 [圖2]係顯示本發明的實施形態1之資訊處理系統的全體構成之圖。 [圖3A]係顯示圖1所揭露之監視裝置的構成之方塊圖。 [圖3B]係顯示儲存在圖3A所揭露之監視裝置的判定基準儲存部之資訊的一例之圖。 [圖4]係顯示圖1所揭露之監視裝置的控制處理之樣子的圖。 [圖5]係顯示圖1所揭露之監視裝置的控制處理之樣子的圖。 [圖6]係顯示圖1所揭露之監視裝置的控制處理之樣子的圖。 [圖7]係顯示圖1所揭露之監視裝置的控制處理之樣子的圖。 [圖8]係顯示圖1所揭露之監視裝置的處理運作之流程圖。 [圖9]係顯示圖1所揭露之監視裝置的監視拍攝影像時之樣子的圖。 [圖10]係顯示圖1所揭露之監視裝置的監視拍攝影像時之樣子的圖。 [圖11]係顯示本發明的實施形態2之資訊處理裝置的構成之方塊圖。
100:資訊處理裝置
110:檢測手段
120:判定手段
130:實行手段

Claims (18)

  1. 一種資訊處理裝置,包含: 檢測手段,檢測拍攝影像之內容; 判定手段,依據該拍攝影像之內容的檢測結果,判定與該拍攝影像相關之處理模式;以及 實行手段,實行和該處理模式對應的與該拍攝影像相關之處理。
  2. 如申請專利範圍第1項之資訊處理裝置,其中, 該檢測手段,檢測該拍攝影像內之人物的狀況; 該判定手段,依據該拍攝影像內之人物的狀況,判定該處理模式。
  3. 如申請專利範圍第1項之資訊處理裝置,其中, 該判定手段,依據該拍攝影像之內容的檢測結果,將表示對於該拍攝影像的解析處理之內容的解析處理模式,判定作為該處理模式; 該實行手段,對於該拍攝影像,實行和該解析處理模式對應之解析處理。
  4. 如申請專利範圍第3項之資訊處理裝置,其中, 該檢測手段,檢測該拍攝影像內之人物的數量或密度; 該判定手段,依據該拍攝影像內之人物的數量或密度之檢測結果,判定該解析處理模式。
  5. 如申請專利範圍第3項之資訊處理裝置,其中, 該檢測手段,檢測該拍攝影像內之人物的行動; 該判定手段,依據該拍攝影像內之人物的行動之檢測結果,判定該解析處理模式。
  6. 如申請專利範圍第1項之資訊處理裝置,其中, 該判定手段,依據該拍攝影像之內容的檢測結果,將表示對於該拍攝影像的解析處理之內容的解析處理模式,並將對於用來拍攝和該解析處理模式對應的該拍攝影像之拍攝裝置的控制處理,判定作為該處理模式。
  7. 如申請專利範圍第1項之資訊處理裝置,其中, 該判定手段,將對於該拍攝影像內之人物的群眾偵測處理、行動偵測處理、或臉部識別處理中之任一種,判定作為該處理模式。
  8. 如申請專利範圍第1項之資訊處理裝置,其中, 該判定手段,將對於用來拍攝該拍攝影像之拍攝裝置的控制處理,判定作為該處理模式。
  9. 如申請專利範圍第1項之資訊處理裝置,其中, 該判定手段,依據該拍攝影像之內容的檢測結果、及與拍攝到該拍攝影像之場所相關而輸出的資訊,判定該處理模式。
  10. 如申請專利範圍第9項之資訊處理裝置,其中, 該判定手段,依據表示在拍攝該拍攝影像之場所施行的事件之進行狀況的資訊,判定該處理模式。
  11. 如申請專利範圍第9項之資訊處理裝置,其中, 該判定手段,依據拍攝該拍攝影像之場所的氣象資訊,判定該處理模式。
  12. 如申請專利範圍第1項之資訊處理裝置,其中,更包含: 通知手段,其對外部通知該處理模式。
  13. 一種電腦可讀取記錄媒體,儲存有用於使資訊處理裝置實現下述手段之程式: 檢測手段,檢測拍攝影像之內容; 判定手段,依據該拍攝影像之內容的檢測結果,判定與該拍攝影像相關之處理模式;以及 實行手段,實行和該處理模式對應的與該拍攝影像相關之處理。
  14. 一種資訊處理方法,包含如下步驟: 檢測拍攝影像之內容; 依據該拍攝影像之內容的檢測結果,判定與該拍攝影像相關之處理模式;以及 實行和該處理模式對應的與該拍攝影像相關之處理。
  15. 如申請專利範圍第14項之資訊處理方法,其中, 作為該拍攝影像之內容,檢測該拍攝影像內之人物的狀況; 依據該拍攝影像內之人物的狀況,判定該處理模式。
  16. 如申請專利範圍第14項之資訊處理方法,其中, 依據該拍攝影像之內容的檢測結果,將表示對於該拍攝影像的解析處理之內容的解析處理模式,判定作為該處理模式; 對該拍攝影像,實行和該解析處理模式對應之解析處理。
  17. 如申請專利範圍第14項之資訊處理方法,其中, 將對於用來拍攝該拍攝影像之拍攝裝置的控制處理,判定作為該處理模式。
  18. 如申請專利範圍第14項之資訊處理方法,其中, 依據該拍攝影像之內容的檢測結果、及與拍攝該拍攝影像之場所相關而輸出的資訊,判定該處理模式。
TW109100686A 2019-01-18 2020-01-09 資訊處理裝置 TW202046710A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
WOPCT/JP2019/001465 2019-01-18
PCT/JP2019/001465 WO2020148890A1 (ja) 2019-01-18 2019-01-18 情報処理装置

Publications (1)

Publication Number Publication Date
TW202046710A true TW202046710A (zh) 2020-12-16

Family

ID=71613185

Family Applications (1)

Application Number Title Priority Date Filing Date
TW109100686A TW202046710A (zh) 2019-01-18 2020-01-09 資訊處理裝置

Country Status (5)

Country Link
US (6) US11893797B2 (zh)
JP (2) JP7151790B2 (zh)
AR (1) AR117830A1 (zh)
TW (1) TW202046710A (zh)
WO (1) WO2020148890A1 (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023037552A1 (ja) * 2021-09-13 2023-03-16 日本電気株式会社 監視支援装置、システム及び方法、並びに、コンピュータ可読媒体

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09330415A (ja) 1996-06-10 1997-12-22 Hitachi Ltd 画像監視方法および画像監視システム
US20040004663A1 (en) * 2002-07-02 2004-01-08 Lightsurf Technologies, Inc. Imaging system providing automatic organization and processing of images based on location
JP2005012590A (ja) * 2003-06-20 2005-01-13 Sanyo Electric Co Ltd 監視カメラシステム
JP2005026980A (ja) * 2003-07-01 2005-01-27 Minolta Co Ltd 撮像システム
US20050129324A1 (en) * 2003-12-02 2005-06-16 Lemke Alan P. Digital camera and method providing selective removal and addition of an imaged object
JP4430027B2 (ja) 2006-03-27 2010-03-10 横河電機株式会社 画像処理装置、監視カメラ及び画像監視システム
JP4622928B2 (ja) 2006-04-14 2011-02-02 トヨタ自動車株式会社 車載カメラ制御装置および車載カメラ制御方法。
JP5083164B2 (ja) 2008-10-09 2012-11-28 住友電気工業株式会社 画像処理装置及び画像処理方法
JP5686435B2 (ja) * 2011-03-14 2015-03-18 オムロン株式会社 監視システム、監視カメラ端末、および動作モード制御プログラム
WO2012124230A1 (ja) 2011-03-17 2012-09-20 日本電気株式会社 撮影装置、撮影方法、及びプログラム
JP2013186872A (ja) 2012-03-12 2013-09-19 Mitsubishi Electric Corp 運転支援装置
JP5982557B2 (ja) 2013-03-29 2016-08-31 株式会社日立製作所 映像監視システムおよび画像検索システム
WO2017033619A1 (ja) 2015-08-26 2017-03-02 富士フイルム株式会社 撮像システム及び撮像制御方法

Also Published As

Publication number Publication date
JP7151790B2 (ja) 2022-10-12
US20220101632A1 (en) 2022-03-31
US20230394838A1 (en) 2023-12-07
JPWO2020148890A1 (ja) 2021-10-14
AR117830A1 (es) 2021-08-25
JP2022191289A (ja) 2022-12-27
US20230401868A1 (en) 2023-12-14
US11893797B2 (en) 2024-02-06
WO2020148890A1 (ja) 2020-07-23
US20230394837A1 (en) 2023-12-07
US20230394840A1 (en) 2023-12-07
US20230394839A1 (en) 2023-12-07

Similar Documents

Publication Publication Date Title
JP5390322B2 (ja) 画像処理装置、及び画像処理方法
US10515471B2 (en) Apparatus and method for generating best-view image centered on object of interest in multiple camera images
WO2018096787A1 (ja) 人物行動監視装置および人物行動監視システム
JP6555906B2 (ja) 情報処理装置、情報処理方法、およびプログラム
WO2018198373A1 (ja) 映像監視システム
JPWO2016157327A1 (ja) 映像監視システム及び映像監視方法
JP2016100696A (ja) 画像処理装置、画像処理方法、及び画像処理システム
CN109391757B (zh) 信息处理装置、信息处理方法和存储介质
JP6465600B2 (ja) 映像処理装置および映像処理方法
WO2021068553A1 (zh) 一种监控方法、装置和设备
WO2020065852A1 (ja) 認証システム、認証方法、及び、記憶媒体
JP5213123B2 (ja) 映像出力方法及び映像出力装置
KR20140058192A (ko) 관심객체 이동방향에 따른 관제 영상 재배치 방법 및 장치
JP5771039B2 (ja) 放置人物検出装置
CN111401239A (zh) 一种视频分析方法、装置、系统、设备及存储介质
US20230394837A1 (en) Information processing device
JP4985742B2 (ja) 撮影システム、方法及びプログラム
JP2018170573A (ja) 監視システム
KR20180075506A (ko) 정보 처리 장치, 정보 처리 방법 및 프로그램
JP2020086961A (ja) 画像解析装置、撮影装置、画像解析方法、及び、プログラム
JP7371806B2 (ja) 情報処理装置、情報処理方法、およびプログラム
KR101269081B1 (ko) 영상분석을 이용한 폭력방지 시스템
KR20230089558A (ko) 영상 전송 장치 및 방법, 그리고 영상 수신 장치 및 방법
JP2022131011A (ja) 処理装置、処理方法及びプログラム
JP2020077951A (ja) 画像処理装置