KR102427095B1 - 화상 처리장치, 정보 처리장치, 정보 처리방법, 및 기록매체 - Google Patents

화상 처리장치, 정보 처리장치, 정보 처리방법, 및 기록매체 Download PDF

Info

Publication number
KR102427095B1
KR102427095B1 KR1020190060370A KR20190060370A KR102427095B1 KR 102427095 B1 KR102427095 B1 KR 102427095B1 KR 1020190060370 A KR1020190060370 A KR 1020190060370A KR 20190060370 A KR20190060370 A KR 20190060370A KR 102427095 B1 KR102427095 B1 KR 102427095B1
Authority
KR
South Korea
Prior art keywords
image
distributed
type
invalid
detection function
Prior art date
Application number
KR1020190060370A
Other languages
English (en)
Other versions
KR20190136943A (ko
Inventor
신지로 타카미
Original Assignee
캐논 가부시끼가이샤
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 캐논 가부시끼가이샤 filed Critical 캐논 가부시끼가이샤
Publication of KR20190136943A publication Critical patent/KR20190136943A/ko
Application granted granted Critical
Publication of KR102427095B1 publication Critical patent/KR102427095B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/40—Document-oriented image-based pattern recognition
    • G06V30/41—Analysis of document content
    • G06V30/413—Classification of content, e.g. text, photographs or tables
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/23412—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs for generating or manipulating the scene composition of objects, e.g. MPEG-4 objects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/23418—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H04N5/225—
    • H04N5/23229—
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/183—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Library & Information Science (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Artificial Intelligence (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Studio Devices (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

화상 처리장치는, 화상을 촬영하고, 촬영한 화상에 있어서 물체를 검출하고, 화상과, 이 화상으로부터 검출되는 물체에 관한 물체 정보를 포함하는 메타데이터를 정보 처리장치에 송신한다. 송신하는 제1 화상에 대해 검출 기능이 유효이고, 제1 화상 후에 송신하는 제2 화상에 대해 검출 기능이 무효이면, 화상 처리장치는 제2 화상에 대해 물체가 검출되지 않는 것을 나타내는 무효 정보를 정보 처리장치에 송신한다.

Description

화상 처리장치, 정보 처리장치, 정보 처리방법, 및 기록매체{IMAGE PROCESSING APPARATUS, INFORMATION PROCESSING APPARATUS, INFORMATION PROCESSING METHOD, AND RECORDING MEDIUM}
본 발명은, 촬영한 화상을 해석하여 물체를 검출하는 기술에 관한 것이다.
종래, 촬영장치에 의해 촬영한 화상에 영상 해석을 행하고, 영상 해석 결과로서 검출한 물체의 정보를 메타데이터로서 분배하도록 구성된 촬영장치가 있었다.
또한, 촬영 화상을 클라이언트 장치에 분배하도록 구성된 촬영장치에 있어서, 클라이언트 장치가 촬영장치에 대하여 설정 변경의 지시나, 화상 및 메타데이터의 분배의 개시를 지시할 수 있도록 하는 코맨드 군이 실장되어 있는 것이 일반적이다. 예를 들면, 이와 같은 코맨드 군의 예로서, Open Network Video Interface Forum(ONVIF)에 의해 책정된 규격에 의해 정의되는 코맨드 군이 알려져 있다. ONVIF는 메타데이터의 내용도 정의하고 있고, 이 메타데이터의 내용의 예로는, 영상 해석에 의해 검출한 물체의 상세를 포함하는 물체 정보가 있다. 물체 정보의 예로는, 화상에 있어서 검출한 물체의 위치를 나타내는 위치 정보가 있다.
또한, 일본국 특허 제5999395호에는, 분배 영상의 영상 종별에 근거하여, 메타데이터를 분배할 것인지 여부를 판단하는 촬영장치가 개시되어 있다.
여기에서, 촬영장치가, 검출한 물체의 물체 정보에 변화가 있는 경우에만, 메타데이터에 물체 정보를 추가하는 프로토콜을 이용하는 경우, 메타데이터를 수신하는 클라이언트 장치는 최후에 수신한 물체 정보를 계속해서 유지하는 경우가 있다. 이때, 촬영장치가 송신하는 화상에 대해 검출 기능이 무효로 되면, 클라이언트 장치는 최후에 수신한 물체 정보를 계속해서 유지하여, 물체가 계속해서 검출되고 있다고 판단하는 경우가 있었다. 이 경우, 클라이언트 장치가 계속해서 유지하는 물체 정보는, 촬영장치의 검출 기능이 무효로 된 이후에는 무효인 정보다.
일본국 특허 제5999395호의 기술에 따르면, 촬영장치측에서 검출 기능이 무효로 되어도, 클라이언트 장치는 촬영장치측에서 물체가 계속해서 검출되고 있다고 판단해 버려, 유저에게 오해를 주는 표시를 바람직하지 않게 하는 경우가 있었다.
클라이언트 장치가 무효인 물체 정보를 계속해서 유지하는 것을 억제를 하기 위해서, 본 발명에 따르면, 촬영장치는, 화상을 촬영하도록 구성된 화상 취득부와, 상기 화상 취득부가 촬영한 화상에 있어서 물체를 검출하도록 구성된 검출부와, 상기 화상과, 상기 화상으로부터 상기 검출부에 의해 검출되는 물체에 관한 물체 정보를 포함하는 메타데이터를 정보 처리장치에 송신하도록 구성된 송신부를 구비한다. 상기 송신부는, 상기 송신부가 송신하는 제1 화상에 대해 상기 검출부의 검출 기능이 유효이고, 상기 송신부가 상기 제1 화상 후에 송신하는 제2 화상에 대해 상기 검출 기능이 무효인 경우, 상기 제2 화상에 대해 상기 물체를 검출하지 않고 있는 것을 나타내는 무효 정보를 상기 정보 처리장치에 송신한다.
본 발명의 또 다른 특징은 첨부도면을 참조하여 주어지는 이하의 실시형태의 상세한 설명으로부터 명백해질 것이다.
도 1은 시스템 구성을 나타내는 모식도다.
도 2는 촬영장치 및 클라이언트 장치의 하드웨어 구성을 도시한 개략도다.
도 3a 및 도 3b는 촬영장치 및 클라이언트 장치의 기능 블록도다.
도 4는 촬영장치 및 클라이언트 장치 사이에 있어서의 화상 분배와 메타데이터 분배의 시퀀스를 도시한 도면이다.
도 5는 표시장치에 표시되는 화면의 모식도다.
도 6a 및 도 6b는 정보 추가 처리 및 정보 갱신 처리의 흐름도다.
도 7은 메타데이터의 기술 예를 도시한 개략도다.
도 8은 촬영장치 및 클라이언트 장치 사이의 화상 분배와 메타데이터 분배에 관한 시퀀스 도다.
도 9a 및 도 9b는 정보 추가 처리 및 정보 갱신 처리의 흐름도다.
도 10은 촬영장치 및 클라이언트 장치 사이의 화상 분배와 메타데이터 분배의 시퀀스 도다.
도 11은 정보 갱신 처리의 흐름도다.
이하, 첨부도면을 참조하면서 본발명에 따른 실시형태에 대해 설명한다. 이때, 이하의 실시형태에 있어서 나타내는 구성은 일례에 지나지 않고, 도시된 구성에 한정되는 것은 아니다.
이하의 설명에서, 실시형태1을 설명한다. 도 1은, 본 실시형태에 따른 시스템 구성을 나타내는 모식도다. 촬영장치(100)는, 화상을 촬영하는 장치이며, 예를 들어, 네트워크(103)를 통해 화상을 송신할 수 있는 네트워크 카메라나 감시 카메라이다.
클라이언트 장치(101)는, 정보 처리장치이며, 촬영장치(100)와 네트워크(103)를 통해 통신 가능하게 접속되어 있다. 클라이언트 장치(101)는, 화상 분배와 메타데이터 분배를 요구하는 코맨드와, 영상 해석을 행하고 있는 화상의 종별을 취득하는 코맨드 등의 각 제어 코맨드를 촬영장치(100)에 송신한다. 촬영장치(100)는, 클라이언트 장치(101)로부터 송신된 코맨드에 대한 리스폰스, 화상 분배 요구에 대한 화상, 메타데이터 분배 요구에 대한 메타데이터를 클라이언트 장치(101)에 송신한다.
표시장치(102)는, 클라이언트 장치(101)에 접속되어, 예를 들어, 촬영장치(100)로부터 송신되는 화상 데이터에 근거한 화상을 표시하는 디스플레이이다.
또한, 촬영장치(100)및 클라이언트 장치(101)는, 네트워크(103)를 통해서 서로 통신을 행한다. 네트워크(103)는, ETHERNET(등록상표) 등의 통신 규격을 만족하는 복수의 라우터, 복수의 스위치, 및/또는 복수의 케이블로 구성된다. 네트워크(103)는 인터넷, 유선 로컬 에어리어 네트워크(LAN), 무선 LAN, 와이드 에어리어 네트워크(WAN) 등에 의해 구성되어도 된다.
다음에, 도 2를 참조하여, 촬영장치(100)및 클라이언트 장치(101)의 하드웨어 구성에 대해 설명한다. 도 2는, 촬영장치(100)및 클라이언트 장치(101)의 하드웨어 구성을 도시한 개략도다.
우선 촬영장치(100)의 하드웨어 구성에 대해 설명한다. 중앙처리장치(CPU)(200)는, 촬영장치(100)를 총괄 제어한다.
인터페이스(I/F)(201)는, 네트워크(103)를 통해 Open Network Video Interface Forum(ONVIF) 등의 프로토콜에 따라, 클라이언트 장치(101)와의 통신을 행한다. I/F(201)는, 예를 들면, 클라이언트 장치(101)에 화상과 메타데이터를 송신하고, 예를 들어, 촬영장치(100)를 제어하기 위한 각종의 코맨드를 클라이언트 장치(101)로부터 수신한다.
랜덤 액세스 메모리(RAM)(202)는, CPU(200)이 실행하는 컴퓨터 프로그램을 일시적으로 기억한다. 또한, RAM(202)은, I/F(201)를 통해 외부에서 취득한 데이터(예를 들어, 코맨드와 촬영 조건에 관한 파라미터)를 일시적으로 기억한다. 또한, RAM(202)은, 후술하는 도6a 및 도9a에 나타내는 흐름도와, 도 4, 도 8, 도 10에 나타내는 시퀀스를 CPU(200)이 실행할 때에 사용하는 워크 에어리어를 제공한다. 또한, RAM(202)은, 예를 들면, 프레임 메모리로서 기능하고, 버퍼 메모리로서 기능한다.
판독 전용 메모리(ROM)(203)는, CPU(200)이 촬영장치(100)를 제어하기 위해 사용하는 프로그램 등을 기억한다. 촬영장치(100)는 ROM(203) 이외에, 후술하는 하드디스크 드라이브(HDD)(213)와 유사한 2차 기억장치를 구비하도록 구성되어도 된다.
촬영 디바이스(204)는, 촬상광학계를 구성하는 렌즈 군 및 촬상소자를 구비한다. 렌즈 군은, 입사광을 결상하기 위한 광학 렌즈를 갖고, 입사광을 촬상소자에 집광시킨다. 촬상소자는, 전하 결합 소자(CCD) 센서와 상보성 금속 산화물 반도체(CMOS) 센서 등으로 구성되어 있다. 그리고, 촬영 디바이스(204)는, 촬영장치(100)의 렌즈 군을 통해 송신되는 촬상소자에 결상된 피사체상을 광전변환해서 전기신호를 생성한다. 더구나, 촬영 디바이스(204)는, 생성된 전기신호를 디지털 신호로 변환하는 처리와, Joint Photographic Experts Group(JPEG), H.264 및 H.265 등의 형식에 근거해 압축 부호화 처리를 행함으로써 화상 데이터를 생성한다.
다음에, 클라이언트 장치(101)의 하드웨어 구성에 대해 설명한다. CPU(210)은, 클라이언트 장치(101)를 제어한다.
I/F(211)는, 네트워크(103)를 통해 ONVIF 등의 프로토콜에 따라, 촬영장치(100)과의 통신을 행한다. 또한, I/F(211)는, 예를 들어, 촬영장치(100)로부터 송신되는 화상을 수신하고, 예를 들어, 촬영장치(100)를 제어하기 위한 각종의 코맨드를 송신한다.
RAM(212)은, CPU(210)이 실행하는 컴퓨터 프로그램을 일시적으로 기억한다. 또한, RAM(212)은, I/F(211)를 통해 외부에서 취득한 데이터(코맨드와 화상 데이터) 등을 일시적으로 기억한다. 또한, RAM(212)은, CPU(210)이 후술하는 도 6b 및 도 9b 및 도 11에 나타내는 흐름도와, 도 4, 도 8, 도 10에 나타내는 시퀀스 등을 실행할 때에 사용하는 워크 에어리어를 제공한다. 또한, RAM(212)은, 예를 들면, 프레임 메모리로서 기능하고, 버퍼 메모리로서 기능한다.
CPU(210)은, RAM(212)에 격납되는 컴퓨터 프로그램을 실행한다. CPU 이외에도, 디지털 신호 처리기(DSP) 등의 프로세서를 사용해도 된다.
HDD(213)은, 오퍼레이팅 시스템의 프로그램과 화상 데이터를 기억한다. 후술하는 흐름도 및 시퀀스 등을 실행하기 위한 컴퓨터 프로그램과 데이터는 HDD(213)에 격납되고, CPU(210)에 의한 제어에 따라, 필요에 따라, RAM(212)에 로드되어, CPU(210)에 의해 실행된다. HDD 이외에도 플래시 메모리 등의 다른 기억매체를 사용해도 된다.
클라이언트 장치(101)의 케이싱은 표시장치(102)와 일체로 준비되어도 된다. 유저 인터페이스(UI)(214)는, 키보드와 마우스 등의 입력장치다.
이후의 설명에서는, CPU(210)이 후술하는 흐름도 및 시퀀스 등을 실행하는 예를 참조하여 본 실시형태를 설명하지만, CPU(210)의 처리 중 적어도 일부를 전용의 하드웨어에 의해 행하도록 구성하여도 된다. 예를 들면, 표시장치(102)에 그래픽 유저 인터페이스(GUI)와 화상 데이터를 표시하는 처리는, 그래픽 처리 유닛(GPU)에 의해 실행해도 된다. 또한, HDD(213)로부터 프로그램 코드를 판독해서 RAM(212)에 전개하는 처리는, 전송 장치로서 기능하는 직접 메모리 액세스(DMA)에 의해 실행해도 된다.
다음에, 도3a를 참조하여, 본 실시형태에 따른 촬영장치(100)에 관하여 설명한다. 도3a는, 촬영장치(100)의 기능 블럭도다. 도3a에 있어서, 촬영장치(100)는, 화상취득부(300)와, 제어부(301)와, 검출부(302)와, 통신부(303)와, 기억부(304)를 가진다. 이후의 설명에 있어서, 도3a에 나타내는, 촬영장치(100)가 갖는 각 기능 블록은, CPU(200)이 ROM(203)의 프로그램을 실행함으로써 실현된다.
화상취득부(300)는, 촬영 디바이스(204)에 의해 생성된 화상 데이터를 취득한다.
제어부(301)는, CPU(200)에 의해 행해진 처리에 따라, 촬영장치(100)의 전체의 처리를 제어한다.
검출부(302)는, 화상취득부(300)가 취득한 화상에 있어서 물체를 검출하는 처리를 행한다. 검출부(302)가 검출한 물체의 물체 정보는 통신부(303) 및/또는 기억부(304)에 보내진다.
본 실시형태에 따른 검출부(302)는, 대조 패턴(사전)을 사용한 패턴매칭을 행하고, 화상에 있어서 인체를 검출한다. 검출부(302)는, 유저가 검출하고 싶은 대상으로 설정된 특정한 물체를 화상으로부터 검출하는 기능을 갖고 있으면 다른 방법을 사용해도 된다. 검출부(302)에 의해 행해지는 처리는, 기지의 동체 검출, 피부색 검출 등이어도 되고, 패턴매칭 처리에 한정되는 것은 아니다. 또한, 이후의 설명에서는, 본 실시형태에 따른 검출부(302)는, 검출을 행하는 대상으로 인체가 설정된 것을 가정하여 설명하지만, 검출을 행하는 대상으로서, 예를 들면, 사람의 얼굴, 차량, 또는 동물이어도 된다.
통신부(303)는, I/F(201)를 통해, 각 제어 코맨드를 클라이언트 장치(101)로부터 수신한다. 또한, 통신부(303)는, I/F(201)를 통해, 클라이언트 장치(101)로부터 수신한 각 제어 코맨드에 근거하여, 화상과 메타데이터를 클라이언트 장치(101)에 송신하고, 이벤트 통지를 클라이언트 장치(101)에 송신한다.
또한, 본 실시형태에 따른 통신부(303)는, 다음과 같은 처리를 행한다. 즉, 통신부(303)는, 통신부(303)가 송신하는 제1 화상에 대해 검출부(302)의 검출 기능이 유효이고, 통신부(303)가 제1 화상 후에 송신하는 제2 화상에 대해 검출 기능이 무효인 경우, 제2 화상에 대해 물체를 검출하지 않고 있는 것을 나타내는 무효 정보를 송신한다.
본 실시형태에 따른 무효 정보는, 물체를 검출하지 않고 있는 것을 나타내는 메타데이터이다. 또한, 본 실시형태에 따른 검출 기능은, 검출부(302)에 의한 물체를 검출하는 기능을 의미하고 있다. 또한, 본 실시형태에 있어서, 통신부(303)가 송신하는 분배 화상의 화상 종별과, 검출부(302)가 물체를 검출하는 처리를 행하는 화상의 화상 종별이 일치하고 있을 경우, 검출 기능이 유효인 것으로 판정되고, 이들 화상 종별이 불일치인 경우에는 검출 기능이 무효인 것으로 판정된다. 이것은, 분배 화상과 관계성이 낮은 화상에 대해 검출 기능을 동작시켜도, 그 검출 결과는 유저에게 있어서 가치가 낮기 때문이다.
기억부(304)는, 천정 설치와 벽 설치 등의 카메라의 설치 상태를 나타내는 설정값, 분배 화상의 화상 종별의 설정값, 영상 해석이 행해지는 화상의 화상 종별의 설정값, 화상취득부(300)가 취득한 화상 데이터 등을 기억한다. 본 실시형태에서의 화상 종별은, 촬영 디바이스(204)에 의해 생성된 화상의 종별을 나타내고, 그것의 예로는, 어안 카메라에 의해 촬영된 어안 화상과, 그 어안 화상에 대하여 화상보정과 화상 잘라내기를 행하여 생성된 파노라마 화상이 있다.
또한, 본 실시형태에 있어서, 영상 해석은, 검출부(302)에 의한 화상으로부터 물체를 검출하는 처리인 것을 가정하여 설명한다.
다음에, 도3b를 참조하여, 본 실시형태에 따른 클라이언트 장치(101)에 관하여 설명한다. 도3b는, 클라이언트 장치(101)의 기능 블럭도다. 도3b에 있어서, 클라이언트 장치(101)는, 제어부(330)와, 통신부(331)와, 표시부(332)와, 기억부(333)를 가진다. 이후의 설명에 있어서, 도3b에 나타낸 것과 같은 클라이언트 장치(101)가 갖는 각 기능 블록은, CPU(210)에 의해 실행된다.
제어부(330)는, CPU(210)이 실행하는 처리에 따라, 클라이언트 장치(101)의 전체의 처리의 제어를 행한다.
통신부(331)는, I/F(211)를 통해, 화상 분배와 메타데이터 분배를 요구하는 코맨드와, 영상 해석이 행해지는 화상의 화상 종별을 취득하는 코맨드 등의 각 제어 코맨드 등을 촬영장치(100)에 송신한다. 또한, 통신부(331)는, I/F(211)를 통해, 촬영장치(100)로부터 송신된 각 제어 코맨드에 대한 리스폰스, 촬영된 화상과 메타데이터, 이벤트 통지 등을 촬영장치(100)로부터 수신한다.
표시부(332)는, 통신부(331)를 통해 수신한 화상을 표시장치(102)에게 출력시킨다. 또한, 표시부(332)는, 촬영장치(100)의 검출부(302)가 검출한 물체의 물체 정보에 근거한 정보를 표시장치(102)에게 출력시킨다. 본 실시형태에 따른 표시부(332)는, 검출부(302)가 검출한 물체의 물체 정보에 근거하여, 화상에 있어서의 물체의 위치를 나타내는 외접 사각형을, 수신한 화상에 이 외접 사각형을 중첩시켜서 표시장치(102)에게 출력시킨다.
기억부(333)는, 촬영장치(100)가 촬영한 화상의 화상 데이터와, 촬영장치(100)에 의해 영상 해석이 행해지는 화상의 화상 종별 등의 다양한 종류의 데이터를 격납하는 영역으로서 사용된다.
다음에, 도 4를 참조하여, 촬영장치(100)가 클라이언트 장치(101)에 화상 분배와 메타데이터 분배를 행하는 시퀀스에 대해 설명한다. 도 4는, 본 실시형태에 따른, 촬영장치(100)로부터 클라이언트 장치(101)에 화상 분배와 메타데이터 분배가 행해지는 시퀀스를 도시한 도면이다.
클라이언트 장치(101)의 제어부(330)는, 통신부(331)를 제어하여, 촬영장치(100)로부터 화상 분배와 메타데이터 분배를 받기 위해서, 화상의 종별을 지정한 화상 분배와 메타데이터 분배를 요구하는 코맨드를 송신시킨다.
촬영장치(100)의 통신부(303)는, 화상 분배와 메타데이터 분배를 요구하는 코맨드를 수신한다.
촬영장치(100)의 제어부(301)는, 수신한 코맨드에 근거하여, 클라이언트 장치(101)가 지정한 화상 종별에 따른 분배 화상과, 메타데이터에 물체 정보를 추가하는 정보 추가 처리(400)를 행하는 것에 의해 메타데이터를 생성한다. 본 실시형태에 따른 정보 추가 처리(400)는 도6a 및 도 7을 참조해서 후술한다.
촬영장치(100)의 제어부(301)는, 통신부(303)를 제어하여, 생성된 화상과 메타데이터를 클라이언트 장치(101)에 송신시킨다. 그리고, 클라이언트 장치(101)의 통신부(331)는, 송신된 화상과 메타데이터를 수신한다. 클라이언트 장치(101)가 물체 정보를 포함하는 메타데이터, 또는, 물체를 검출하지 않고 있는 것을 나타내는 메타데이터를 수신했을 경우, 정보 갱신 처리(401)를 행한다. 본 실시형태에 따른 정보 갱신 처리(401)에 대해서는 도 6b를 참조해서 후술한다.
도 4에 나타내는 클라이언트 장치(101)와 촬영장치(100) 사이의 통신에 사용하는 코맨드의 프로토콜은 ONVIF이거나, 각 메이커가 준비하는 감시 카메라 독자의 제어 프로토콜이어도 된다.
다음에, 도 5를 참조하여, 클라이언트 장치(101)의 표시부(332)에 의해 행해지는 처리에 대해 설명한다. 도 5는, 뷰어 화면의 일례를 도시한 도면이다. 도 5에 있어서의 뷰어 화면(500)은, 클라이언트 장치(101)의 표시부(332)에 의해 표시장치(102)에 표시된다. 표시부(332)는, 촬영장치(100)로부터 수신한 화상에, 수신한 메타데이터에 포함되는 물체 정보의 외접 사각형(502)을 중첩해서 표시장치(102)에게 표시하게 한다.
다음에, 도6a 및 도 7을 참조하여, 본 실시형태에 따른 정보 추가 처리(400)에 대해 설명한다. 도6a는, 메타데이터에 물체 정보, 또는, 물체를 검출하지 않고 있는 것을 나타내는 물체 검출 없음의 정보를 추가하는 처리의 흐름을 나타내는 흐름도다. 이때, 도6a에 나타내는 흐름도에 따른 처리는, 촬영장치(100)의 ROM(203)에 격납된 컴퓨터 프로그램을 CPU(200)이 실행함으로써 실현되는 도3a의 각 기능 블록에 의해 실행되는 것으로 가정하여 설명한다.
스텝 S601에서, 제어부(301)는, 검출부(302)의 검출 기능이 유효인지 무효인지를 나타내는 정보를 취득한다. 이때, 본 실시형태에 따른 제어부(301)는, 통신부(303)가 송신하는 분배 화상의 화상 종별과, 검출부(302)가 물체를 검출하는 처리를 행하는 화상의 화상 종별이 일치하고 있을 경우, 검출 기능이 유효라고 판단하고, 이들 화상 종별이 불일치인 경우, 검출 기능이 무효인 것으로 판단한다. 예를 들면, 제어부(301)는, 통신부(303)가 송신하는 분배 화상이 어안 화상이고, 검출부(302)가 물체를 검출하는 처리를 행하는 화상이 파노라마 화상일 경우, 통신부(303)가 송신하는 화상에 대해 검출부(302)의 검출 기능이 무효라고 판단한다.
이 판단을 달성하기 위해, 본 실시형태에 따른 제어부(301)는, 분배 화상의 화상 종별과, 영상 해석이 행해지는 화상의 화상 종별을 취득한다. 이때, 본 실시형태에 따른 제어부(301)는, 기억부(304)로부터, 분배 화상의 화상 종별의 설정값과, 카메라의 설치 상태를 나타내는 설정값을 취득한다. 그리고, 제어부(301)는, 촬영장치(100)의 설치 상태가 천정 설치인 경우에 영상 해석이 행해지는 화상의 화상 종별이 어안 화상인 것으로 판단하고, 카메라의 설치 상태가 벽 설치인 경우에 영상 해석이 행해지는 화상의 화상 종별이 파노라마 화상이라고 판단한다. 이렇게, 본 실시형태에 따른 제어부(301)는, 촬영장치(100)의 설치 상태에 근거하여, 영상 해석이 행해지는 화상의 화상 종별을 취득한다.
영상 해석이 행해지는 화상 종별의 설정값이 기억부(304)에서 기억되어 있을 경우, 제어부(301)는, 분배 화상의 화상 종별의 설정값과, 영상 해석이 행해지는 화상 종별의 설정값을 기억부(304)로부터 취득하도록 구성해도 된다.
그리고, 본 실시형태에 따른 제어부(301)는, 취득한 분배 화상의 화상 종별과, 영상 해석이 행해지는 화상 종별에 근거하여, 통신부(303)가 송신하는 화상에 대해 검출부(302)의 검출 기능이 유효인지 무효인지를 판단함으로써, 검출 기능의 정보를 취득한다.
스텝 S602에서, 기억부(304)는, 통신부(303)가 송신하는 화상의 송신 순서를 나타내는 화상 ID(identification)와, 그 화상에 대해 제어부(301)에 의해 판단된 검출부(302)의 검출 기능이 유효인지 무효인지를 나타내는 정보를 관련시켜 기억한다. 예를 들면, 제어부(301)는, 통신부(303)를 통해 1번째로 송신되는 화상에 대하여, 화상 ID로서 "1"을 부여하고, 2번째로 송신되는 화상에 대하여, 화상 ID로서 "2"를 부여한다. 그리고, 기억부는, 화상 ID와, 화상 ID에 대응하는 화상에 관한 검출 기능의 정보를 관련시켜 기억한다.
스텝 S603에서, 제어부(301)는, 통신부(303)가 송신하는 화상에 대해 검출부(302)의 검출 기능이 유효인지 아닌지를 판단한다. 검출 기능이 유효인 경우에는(스텝 S603에서 YES), 스텝 S604로 처리를 진행한다. 검출 기능이 무효인 경우에는(스텝 S603에서 NO) 스텝 S606으로 처리를 진행한다.
스텝 S604에서, 전회 메타데이터에서 분배한 물체 정보에 변화가 있는 경우에는(스텝 S604에서 YES) 스텝 S605로 처리를 진행한다. 스텝 S604에서 변화가 없는 경우에는(스텝 S604에서 NO) 처리를 종료한다.
다음에, 스텝 S605에서, 촬영장치(100)의 제어부(301)는, 검출부(302)가 검출한 물체의 물체 정보를 메타데이터에 추가한다. 그후, 처리를 종료한다.
스텝 S606에서, 제어부(301)는, 기억부(304)에 기억된, 화상의 송신 순서를 나타내는 화상 ID와, 이 화상에 대해 검출 기능이 유효인지 무효인지를 나타내는 정보에 근거하여, 전회 송신한 화상에 대해 검출부(302)의 검출 기능이 유효인지 무효인지를 판단한다. 이때, 통신부(303)가 전회 송신한 화상에 대해 검출 기능이 유효인 경우(스텝 S606에서 YES), 스텝 S607로 처리를 진행한다. 검출 기능이 무효인 경우(스텝 S606에서 NO), 처리를 종료한다. 또한, 전회 송신한 화상이 없을 경우, 즉, 클라이언트 장치(101)로부터 화상 분배 및 메타데이터 분배의 요구가 촬영장치(100)에 송신된 후 처음으로 정보 추가 처리(400)가 행해지고 있을 경우, 스텝 S604에서 처리가 종료된다.
스텝 S607에서, 제어부(301)는, 검출부(302)가 물체를 검출하지 않고 있는 것을 나타내는 정보를 메타데이터에 추가한다. 그후, 처리를 종료한다.
이상에서 설명한 정보 추가 처리(400)에 의해 생성된 메타데이터는, 클라이언트 장치(101)에 송신된다.
다음에, 도 6b에 나타내는 클라이언트 장치(101)에 의해 행해지는 정보 갱신 처리(401)에 대해 설명한다. 클라이언트 장치(101)는, 물체 정보를 포함하는 메타데이터, 또는, 물체를 검출하지 않고 있는 것을 나타내는 메타데이터를 수신했을 경우, 정보 갱신 처리(401)를 행한다.
스텝 S608에서, 메타데이터에 물체가 검출되지 않고 있는 것을 나타내는 정보가 포함되어 있지 않은 경우에는(스텝 S608에서 NO), 스텝 S609로 처리를 진행한다. 메타데이터에 물체가 검출되지 않고 있는 것을 나타내는 정보가 포함되어 있는 경우에는(스텝 S608에서 YES), 스텝 S611로 처리를 진행한다.
스텝 S609에서, 클라이언트 장치(101)의 제어부(330)는, 촬영장치(100)로부터 수신한 메타데이터에 포함되는 물체 정보로 물체 정보를 갱신한다. 그후, 스텝 S610으로 처리를 진행한다.
스텝 S610에서, 표시부(332)는, 스텝 S610에서 갱신된 물체 정보를 분배 화상에 중첩해서 표시장치(102)에 표시한다. 그후, 처리를 종료한다. 본실시형태에서는, 표시부(332)는, 갱신된 물체 정보에 근거하여, 검출된 물체의 위치를 나타내는 외접 사각형을 분배 화상에 중첩하여, 외접 사각형을 표시장치(102)에게 표시시킨다.
스텝 S611에서, 클라이언트 장치(101)의 제어부(330)는, 물체를 검출하지 않고 있는 것을 나타내는 정보로 물체 정보를 갱신한다.
스텝 S612에서 표시장치(102)에 표시된 분배 화상에 물체 정보가 중첩되지 않고 있는 경우에는(스텝 S612에서 NO) 처리를 종료한다. 스텝 S612에서 분배 화상에 물체 정보가 중첩되어 있을 경우(스텝 S612에서 YES), 스텝 S613으로 처리를 진행한다.
스텝 S613에서, 표시부(332)는, 표시장치(102)에 표시된 분배 화상에 중첩되어 있는 물체 정보에 근거한 외접 사각형을 삭제한다.
분배 화상의 화상 종별과 영상 해석이 행해지는 화상 종별이 불일치인 경우, 클라이언트측에서 물체 정보를 분배 화상에 중첩할 때에, 물체 정보가 무효인 위치에 바람직하지 않게 중첩해 버리는 일이 있다. 예를 들면, 본 실시형태에 따른 촬영장치(100)가, 어안 렌즈를 사용하여 어안 화상을 촬영하고, 더구나 이 어안 화상에 왜곡 보정과 화상 잘라내기를 행함으로써 파노라마 화상을 생성할 수 있는 것으로 가정한다.
이때, 분배 화상은 어안 화상이며, 영상 해석은 파노라마 화상에 대해 행할 경우, 어안 화상이 분배되지만, 메타데이터 분배로 분배되는 물체 정보로서는 파노라마 화상 위에서 검출된 물체의 물체 정보가 제공된다. 그 결과, 파노라마 화상에서 검출된 물체 정보가 어안 화상에 중첩된다. 이것은, 외접 사각형아 어안 화상의 내용과 관계 없는 위치에 중첩되므로, 클라이언트 장치에 송신되는 화상에 대해 검출 기능은 더 이상 유효하지 않게 된다(무효로 되어 버린다)는 것을 의미한다.
또한, 그 밖에도, 예를 들면, 분배 화상이 어안 화상이며, 어안 화상으로부터 잘라낸 화상에 대해 영상 해석을 행할 경우애도, 어안 화상의 내용과 관계 없는 위치에 외접 사각형이 중첩되므로, 클라이언트 장치(101)에 송신되는 화상에 대해 검출 기능이 무효로 되어 버린다.
이와 같은 불편을 해소하기 위해, 본 실시형태에 따른 촬영장치(100)는, 촬영장치(100)가 영상 해석을 행하고 있는 화상 종별과 분배 화상의 화상 종별을 취득한다. 그리고, 촬영장치(100)는, 분배 화상의 화상 종별과 영상화상을 행하고 있는 영상 종별이 불일치한 경우, 송신할 화상을 검출부(302)의 검출 기능이 무효인 것으로서 취급하고, 물체가 검출되지 않는 것을 나타내는 정보를 메타데이터에 추가하고, 클라이언트 장치(101)에 송신한다. 이와 같은 조작에 의해, 클라이언트 장치(101)가 무효인 물체 정보를 유지하는 것을 억제할 수 있다.
스텝 S601에서, 본 실시형태에 따른 제어부(301)는, 분배 화상의 화상 종별과, 영상 해석이 행해지는 화상 종별에 근거하여, 통신부(303)가 송신하는 화상에 대해 검출 기능이 유효인지 아닌지를 판단하여 검출 기능의 정보를 취득하지만, 이것에 한정되지 않는다.
예를 들면, 제어부(301)는, 송신할 화상에 대해서, 촬영장치(100)가 검출부(302)에 의해 물체를 검출하는 처리를 실행하도록 설정되어 있는지 아닌지를 나타내는 정보를 취득하도록 구성해도 된다. 이 경우, 제어부(301)는, 촬영장치(100)가 검출부(302)에 의해 물체를 검출하는 처리를 실행하도록 설정되어 있을 경우, 송신할 화상에 대해 검출부(302)의 검출 기능이 유효하다고 판단한다. 그리고, 제어부(301)는, 촬영장치(100)가 검출부(302)에 의해 물체를 검출하는 처리를 실행하지 않도록 설정되어 있을 경우, 송신할 화상에 대해 검출부(302)의 검출 기능이 무효라고 판단한다.
스텝 S602에서, 본 실시형태에 따른 기억부(304)는, 통신부(303)가 송신하는 화상의 송신 순서를 나타내는 화상 ID와, 이 화상에 관한 검출 기능이 유효인지 무효인지를 나타내는 정보를 관련시켜서 기억하지만, 이것에 한정되지 않는다. 예를 들면, 기억부(304)는, 통신부(303)가 전회 송신한 화상에 관한 검출 기능의 정보와, 통신부(303)가 현재 송신하는 화상에 관한 검출 기능의 정보를 기억하도록 구성하여도 된다.
다음에, 도 7을 참조하여, ONVIF 규격을 만족하는 메타데이터를 예로 들어, 물체가 검출되지 않는다는 것을 나타내는 정보에 대해 설명한다. 도7은, ONVIF 규격에 준한 메타데이터의 기술 예를 도시한 도면이다.
ONVIF는 메타데이터를 Extensible Markup Language(XML)로 정의하고 있고, 데이터는 계층구조로 되어 있다. 메타데이터 700은, 스텝 S605에서 물체 정보가 추가된 메타데이터의 일례다. 메타데이터 700에 있어서, <MetadataStream> 태그는 메타데이터 전체를 나타내고, 영상 해석 결과인 물체의 물체 정보, 촬영장치(100)의 팬/틸트/줌(PTZ) 위치, 이벤트 등을 포함한다. <VideoAnalytics>에 있어서의 <Frame> 태그는, 영상 해석의 결과를 나타낸다. 또한, <Frame> 태그에 있어서의 <Object> 태그는, 검출부(302)가 화상에 있어서 검출한 물체의 물체 정보를 나타낸다.
또한, <Object> 태그 내의 <BoundingBox> 태그는 물체의 위치를 나타내는 외접 사각형을 나타내고, 분배 화상에 있어서의 x, 및y 좌표 상에, left 및 top 점과 right 및 bottom 점의 2점을 사용하여 표시된다.
메타데이터 701은, 스텝 S607에서 검출부(302)가 물체를 검출하지 않고 있는 것을 나타내는 정보가 추가된 메타데이터의 일례다. 이 경우, 메타데이터 701에는, 영상 해석 결과를 나타내는 <Frame> 태그는 존재하지만, <Frame> 태그 내에 <Object> 태그가 없어, 물체가 검출되지 않고 있는 것을 나타내고 있다.
스텝 S604 또는 스텝 S606에서의 판단이 NO인 경우, <VideoAnalytics> 태그를 포함하지 않는 메타데이터가 생성되어, 클라이언트 장치(101)에 송신된다. 클라이언트 장치(101)가 그 메타데이터를 수신해도, 과거에 수신한 물체 정보가 있으면, 클라이언트 장치(101)는 이 물체 정보를 계속해서 유지한다.
도 7에 나타내는 메타데이터는 본 실시형태에 따른 일례이며, 그 포맷을 제한하는 것은 아니다. ONVIF나 감시 카메라 독자의 포맷을 사용해도 되고, 사용된 포맷이 물체를 검출하고 있는 것을 나타내는 메타데이터와, 물체를 검출하지 않고 있는 것을 나타내는 메타데이터를 표시할 수 있으면 어떤 포맷이 사용되어도 된다.
이상에서 설명한 바와 같이, 본 실시형태에 따른 제어부(301)는, 통신부(303)가 송신하는 제1 화상에 대해 검출부(302)의 검출 기능이 유효이고, 제1 화상 후에 통신부(303)가 송신하는 제2 화상에 대해 검출 기능이 무효인지를 판단한다. 그리고, 제2 화상에 대해 검출 기능이 무효가 되면, 제어부(301)는, 제2 화상에 대해 물체를 검출하지 않고 있는 것을 나타내는 정보를 메타데이터에 추가하고, 통신부(303)를 통해 그 메타데이터를 클라이언트 장치(101)에 송신한다. 이와 같은 동작에 의해, 클라이언트 장치(101)가 무효인 물체 정보를 계속해서 유지하는 것을 억제할 수 있다.
이하의 설명에서는, 실시형태2에 대해 설명한다. 실시형태 2에 따른 촬영장치(100)의 제어부(301)는, 통신부(303)를 제어하여, 검출 기능이 유효로부터 무효로 변화한 것의 발생을 이벤트 통지로서 클라이언트 장치(101)에 송신하게 한다. 이하, 도 8 및 도 9를 참조하여, 실시형태 2에 따른 촬영장치(100) 및 클라이언트 장치(101)에 의해 행해지는 처리에 대해 설명한다. 실시형태 1과 동일 또는 유사한 기능 구성과 처리에는 동일한 부호를 붙이는 동시에, 중복하는 설명은 적절히 생략한다.
본 실시형태에 따른 통신부(303)는, 다음과 같은 처리를 행한다. 즉, 통신부(303)가 송신하는 제1 화상에 대해 검출부(302)의 검출 기능이 유효이고, 제1 화상 후에 통신부(303)가 송신하는 제2 화상에 대해 검출 기능이 무효인 경우, 통신부(303)는 제2 화상에 대해 물체를 검출하지 않고 있는 것을 나타내는 무효 정보를 송신한다. 이때, 본 실시형태에 따른 무효 정보는, 검출 기능이 유효로부터 무효로 변화한 것을 나타내는 이벤트 통지이다.
도 8을 참조하여, 클라이언트 장치(101)가 촬영장치(100)로부터 화상과 메타데이터를 수신하는 시퀀스에 대해 설명한다. 도8은, 클라이언트 장치(101)가 촬영장치(100)로부터 화상과 메타데이터를 수신하는 시퀀스를 도시한 도면이다.
클라이언트 장치(101)의 제어부(330)는, 통신부(331)를 제어하여, 촬영장치(100)로부터의 화상 분배와 메타데이터 분배를 받기 위해서, 분배 화상의 화상 종별을 지정하기 위한 정보와, 화상 분배와 메타데이터 분배를 요구하는 지시를 포함하는 코맨드를 송신시킨다.
촬영장치(100)의 통신부(303)는, 화상 분배와 메타데이터 분배를 요구하는 코맨드를 수신한다. 그리고, 제어부(301)는, 클라이언트 장치(101)에 의해 지정된 화상 종별에 근거하는 분배 화상의 생성과, 정보 추가 처리(800)에 따라 메타데이터에 물체 정보를 추가하는 처리에 의한 메타데이터의 생성을 행한다.
제어부(301)는, 통신부(303)를 제어하여, 생성된 분배 화상과 메타데이터를 클라이언트 장치(101)에 송신시킨다. 그리고, 클라이언트 장치(101)의 통신부(331)는, 송신된 분배 화상과 메타데이터를 수신한다.
또한, 정보 추가 처리(800)에서, 촬영장치(100)의 제어부(301)는, 촬영장치(100)가 송신하는 화상에 대해 검출부(302)의 검출 기능이 유효로부터 무효로 변화한 것을 판단하여, 검출 기능이 유효로부터 무효로 변화한 경우, 검출 기능이 변화한 것을 나타내는 이벤트의 통지를 행한다. 이때, 제어부(301)는, 통신부(303)를 제어하여, 이벤트 통지를 클라이언트 장치(101)에 대하여 행한다.
클라이언트 장치(101)의 통신부(331)는, 송신된 이벤트 통지를 수신한다.
클라이언트 장치(101)의 제어부(330)는, 물체 정보를 포함하는 메타데이터, 또는, 이벤트 통지를 수신했을 경우, 정보 갱신 처리(801)를 행한다.
도 8에 나타내는 클라이언트 장치(101)와 촬영장치(100) 사이의 통신에 사용하는 코맨드의 프로토콜은 ONVIF이어도 되고, 각 메이커가 준비하는 감시 카메라 독자의 제어 프로토콜이어도 된다.
다음에, 도 9a 및 도 9b를 참조하여, 본 실시형태에 따른 정보 추가 처리(800)에 대해 설명한다. 도9a는, 본 실시형태에 따른, 촬영장치(100)에 의go 행해진 정보 추가 처리(800)의 흐름을 나타내는 흐름도다. 도 9b는, 본 실시형태에 따른, 클라이언트 장치(101)에 의해 행해지는 정보 갱신 처리(801)의 흐름을 나타내는 흐름도다.
도9a에 나타내는 흐름도에 따른 처리는, 촬영장치(100)의 ROM(203)에 격납된 컴퓨터 프로그램을 CPU(200)이 실행함으로써 실현되는 도3a의 각 기능 블록에 의해 실행되는 것으로서 가정하여 설명한다.
또한, 도 9b에 나타내는 흐름도의 처리는, 클라이언트 장치(101)의 HDD(213)에 격납된 컴퓨터 프로그램을 CPU(210)이 실행함으로써 실현되는 도3b의 각 기능 블록에 의해 실행되는 것으로 가정하여 설명한다.
우선, 도9a에 나타내는 정보 추가 처리에 대해 설명한다.
스텝 S601 내지 스텝 S606의 처리는, 실시형태 1과 유사하기 때문에, 설명을 생략한다.
스텝 S901에서, 본 실시형태에 따른 제어부(301)는, 촬영장치(100)가 송신하는 화상에 대해 검출부(302)의 검출 기능이 유효로부터 무효로 변화한 것을 나타내는 이벤트 통지를 행한다.
그리고, 도 8을 참조해서 설명한 바와 같이, 클라이언트 장치(101)의 통신부(331)는, 이벤트 통지를 수신한다.
스텝 S604 또는 스텝 S606에서의 판정이 NO이거나 스텝 S606에서의 판정이 YES인 경우, <VideoAnalytics> 태그를 갖지 않는 메타데이터가 생성되어, 클라이언트 장치(101)에 송신된다. 클라이언트 장치(101)가 메타데이터를 수신하지만 과거에 수신한 물체 정보가 있는 경우, 클라이언트 장치(101)는 이 물체 정보를 계속해서 유지한다.
다음에, 도 9b에 나타내는 클라이언트 장치(101)에 의해 행해지는 정보 갱신 처리(801)에 대해 설명한다. 도 9b에 나타내는 정보 갱신 처리는, 클라이언트 장치(101)가 촬영장치(100)로부터 물체 정보를 포함하는 메타데이터, 또는, 이벤트 통지를 수신했을 경우에 행해진다.
스텝 S902에서 클라이언트 장치(101)가 이벤트 통지를 수신한 경우에는(스텝 S902에서 YES) 스텝 S611로 처리를 진행한다. 스텝 S902에서 클라이언트 장치(101)가 이벤트 통지를 수신하지 않은 경우에는(스텝 S902에서 NO) 스텝 S609로 처리를 진행한다.
스텝 S609 내지 스텝 S613의 처리는, 실시형태 1과 유사하기 때문에 설명을 생략한다.
이상에서 설명한 바와 같이, 실시형태 2에 따른 클라이언트 장치(101)는, 촬영장치(100)의 검출 기능이 유효로부터 무효로 변화한 것을 이벤트 통지로서 수신하고, 물체 정보를 물체가 검출되지 않은 것으로 나타내는 정보로 갱신한다. 이오 같은 동작에 의해, 분배 화상과 메타데이터를 수신하는 클라이언트 장치(101)가 무효인 물체 정보를 유지하는 것을 억제할 수 있다.
이하의 설명에서는, 실시형태3에 대해 설명한다. 실시형태 3에 따른 클라이언트 장치(101)는, 촬영장치(100)의 검출 기능이 유효로부터 무효로 변화한 것의 발생을 촬영장치(100)에 문의한다(폴링). 이하의 설명에서는, 도 10 및 도 11을 참조하여, 실시형태 3에 따른 클라이언트 장치(101)가 물체 정보를 갱신하는 정보 갱신 처리(1002)에 대해 설명한다. 실시형태 1과 동일 또는 유사한 기능 구성 및 처리에 관해서는 동일한 부호를 붙이는 동시에, 중복하는 설명은 적절히 생략한다.
도 10을 참조하여, 클라이언트 장치(101)가 촬영장치(100)로부터 화상과 메타데이터를 수신하는 시퀀스에 대해 설명한다. 도10은, 클라이언트 장치(101)가 촬영장치(100)로부터 화상과 메타데이터를 수신하는 시퀀스를 도시한 도면이다.
클라이언트 장치(101)의 제어부(330)는, 통신부(331)를 제어하여, 촬영장치(100)로부터 화상 분배와 메타데이터 분배를 받기 위해서, 화상의 종별을 지정한 화상 분배와 메타데이터 분배를 요구하는 코맨드를 송신한다.
촬영장치(100)의 통신부(303)는, 클라이언트 장치(101)로부터 송신된 화상 분배와 메타데이터 분배를 요구하는 코맨드를 수신한다.
촬영장치(100)의 제어부(301)는, 수신한 코맨드에 근거하여, 클라이언트 장치(101)가 지정한 화상 종별에 따른 분배 화상과, 정보 추가 처리(1000)에 따라 메타데이터에 물체 정보를 추가하는 처리에 의해 메타데이터를 생성한다. 본 실시형태에 따른 정보 추가 처리(1000)는, 전회 송신한 물체 정보에 변화가 있었을 경우, 물체 정보를 메타데이터에 추가한다. 한편, 전회 송신한 물체 정보에 변화가 없을 경우, <VideoAnalytics> 태그를 갖지 않는 메타데이터가 생성되어, 클라이언트 장치(101)에 송신된다. 클라이언트 장치(101)가 이 메타데이터를 수신해도, 클라이언트 장치(101)는 과거에 수신한 물체 정보가 있으면, 이 물체 정보를 계속해서 유지한다. 단, 전회 송신한 물체 정보가 없을 경우, 즉 촬영장치(100)가 화상 분배 및 메타데이터 분배 요구를 클라이언트 장치(101)로부터 수신한 후 처음으로 정보 추가 처리(1000)를 행했을 경우, 물체 정보를 메타데이터에 추가한다.
촬영장치(100)의 제어부(301)는, 통신부(303)를 제어하여, 생성된 화상과 메타데이터를 클라이언트 장치(101)에 송신한다. 그리고, 클라이언트 장치(101)의 통신부(331)는, 송신된 화상과 메타데이터를 수신한다.
통신부(331)가 송신된 화상과 메타데이터를 수신한 후, 제어부(330)는, 통신부(331)를 제어하여, 수신한 화상에 대해 검출부(302)의 검출 기능이 유효인지 무효인지를 나타내는 정보의 취득을 요구하는 코맨드를 송신한다. 이때, 본 실시형태에 따른 제어부(330)는, 통신부(331)를 제어하여, 영상 해석이 행해진 화상 종별을 요구하는 코맨드를 송신한다.
촬영장치(100)의 통신부(303)는, 이 코맨드를 수신하고, 취득 처리(1001)에 의해 제어부(301)가 검출 기능이 유효인지 무효인지를 나타내는 정보를 취득한다. 이때, 본 실시형태에 따른 취득 처리(1001)에 의해, 제어부(301)는, 영상 해석을 행하는 화상 종별을 취득한다. 이 경우, 제어부(301)는, 기억부(304)로부터, 영상 해석이 행해지는 화상 종별의 설정값을 취득하도록 구성되거나, 촬영장치(100)의 설치 상태에 근거하여 영상 해석이 행해진 화상 종별을 취득하도록 구성되어 된다.
취득 처리(1001)에서, 제어부(301)는, 촬영장치(100)가 검출부(302)에 의해 물체를 검출하는 처리를 실행하도록 설정이 되어 있는지 아닌지를 나타내는 정보를 취득하도록 구성해도 된다. 이 경우, 제어부(301)는, 촬영장치(100)가 검출부(302)에 의해 물체를 검출하는 처리를 실행하도록 설정되어 있을 경우, 분배 화상에 대해 검출부(302)의 검출 기능이 유효라고 판단한다. 그리고, 제어부(301)는, 촬영장치(100)가 검출부(302)에 의해 물체를 검출하는 처리를 실행하지 않도록 설정되어 있을 경우, 분배 화상에 대해 검출부(302)의 검출 기능이 무효라고 판단한다.
제어부(301)는, 취득한 검출 기능에 관한 정보를 코맨드에 대한 응답으로 설정하고, 리스폰스로서 통신부(303)로부터 클라이언트 장치(101)에 그것을 송신한다. 이때, 본 실시형태에 있어서, 제어부(301)는, 영상 해석이 행해진 취득한 화상 종별을 코맨드의 응답으로 설정한다.
클라이언트 장치(101)의 통신부(331)는 이 리스폰스를 수신하고, 물체 정보의 갱신 처리(1002)를 행한다.
도 10에 나타내는 클라이언트 장치(101)와 촬영장치(100) 사이의 통신에 사용하는 코맨드의 프로토콜은 ONVIF이거나, 각 메이커가 준비하는 감시 카메라 독자의 제어 프로토콜이어도 된다.
다음에, 도 11을 참조하여, 본 실시형태에 따른 클라이언트 장치(101)에 의해 행해지는 물체 정보의 갱신 처리(1002)에 대해 설명한다. 도11은, 클라이언트 장치(101)에 의해 행해지는 물체 정보의 갱신 처리(1002)의 흐름을 나타내는 흐름도다.
도 11에 나타내는 흐름도의 처리는, 클라이언트 장치(101)의 HDD(213)에 격납된 컴퓨터 프로그램을 CPU(210)이 실행함으로써 실현되는 도3b의 각 기능 블록에 의해 실행되는 것으로 가정하여 설명한다.
스텝 S1101에서, 제어부(330)는, 수신한 화상에 대해 검출부(302)의 검출 기능이 유효인지 무효인지를 나타내는 정보를 취득한다. 본 실시형태에 따른 제어부(330)는, 통신부(331)가 수신한 분배 화상의 화상 종별과, 검출부(302)가 물체를 검출하는 처리를 행하는 화상의 화상 종별이 일치하고 있을 경우, 검출 기능이 유효라고 판단하고, 이들 화상 종별이 불일치의 경우, 검출 기능이 무효라고 판단한다.
이 경우, 스텝 S1101에서, 본 실시형태에 따른 제어부(330)는, 분배 화상의 화상 종별과, 영상 해석이 행해지는 화상의 화상 종별을 취득한다. 제어부(330)는, 화상의 종별을 지정한 화상 분배를 촬영장치(100)에 요구하는 코맨드로부터 분배 화상의 화상 종별의 설정값을 취득한다. 또한, 제어부(330)는, 수신한 화상에 대해 검출부(302)의 검출 기능이 유효인지 무효인지를 나타내는 정보의 취득을 요구하는 코맨드에 대한 리스폰스로부터, 영상 해석이 행해지는 화상의 화상 종별을 취득한다.
그리고, 본 실시형태에 따른 제어부(330)는, 취득한 분배 화상의 화상 종별과, 영상 해석이 행해지는 화상 종별에 근거하여, 통신부(303)가 송신하는 화상에 대해 검출부(302)의 검출 기능이 유효인지 아닌지를 판단한다.
스텝 S1102에서, 기억부(333)는, 통신부(331)가 수신한 화상의 수신 순서를 나타내는 화상 ID와, 이 화상에 대해 제어부(330)에 의해 판단된 검출부(302)의 검출 기능이 유효인가 무효화를 나타내는 정보를 관련시켜 기억한다.
스텝 S1103에서, 제어부(330)는, 통신부(331)가 수신한 화상에 대해 검출부(302)의 검출 기능이 유효인지 아닌지를 판단한다. 검출 기능이 유효한 경우에는(스텝 S1103에서 YES) 스텝 S609로 처리를 진행한다. 검출 기능이 무효인 경우에는(스텝 S1103에서 NO) 스텝 S1104로 처리를 진행한다.
스텝 S609 및 스텝 S610은 실시형태 1과 유사하기 때문에 설명을 생략한다.
스텝 S1104에서, 제어부(330)는, 기억부(333)에 기억된, 수신한 화상의 수신 순서를 나타내는 화상 ID와, 이 화상에 대해 검출 기능이 유효인지 무효인지를 나타내는 정보에 근거하여, 전회 수신한 화상에 대해 검출부(302)의 검출 기능이 유효인지 무효인지를 판단한다. 이때, 통신부(331)가 전회 수신한 화상에 대해 검출 기능이 유효인 경우(스텝 S1104에서 YES), 스텝 S611로 처리를 진행한다. 검출 기능이 무효인 경우(스텝 S1104에서 NO), 처리를 종료한다. 전회 수신한 화상이 없을 경우, 즉, 클라이언트 장치(101)가 화상 분배와 메타데이터 분배를 요구하는 코맨드를 촬영장치(100)에 송신한 후 처음으로 정보 추가 처리(1000)가 행해지고 있을 경우, 스텝 S1104에서는 NO로 처리를 진행하여 처리를 종료한다.
스텝 S611 내지 스텝 S613의 처리는, 실시형태 1과 유사하기 때문에 설명을 생략한다.
이상에서 설명한 바와 같이, 실시형태 3에 따른 클라이언트 장치(101)는, 수신한 화상에 대해 영상 해석을 행하고 있는 검출부(302)의 검출 기능이 유효인지 아닌지를 나타내는 정보를 촬영장치(100)로부터 취득한다. 그리고, 클라이언트 장치(101)는, 통신부(331)가 수신한 제1 화상에 대해 검출부(302)의 검출 기능이 유효이고, 제1 화상 후에 수신하는 제2 화상에 대해 검출 기능이 무효인지를 판단한다. 그리고, 제2 화상에 대해 검출 기능이 무효가 되면, 제어부(330)는, 물체를 검출하지 않고 있는 것을 나타내는 정보로 물체 정보를 갱신한다. 이와 같은 동작에 의해, 클라이언트 장치(101)가 무효인 물체 정보를 유지하는 것을 억제할 수 있다.
이상의 각 실시형태에 의하면, 클라이언트 장치(101)가 무효인 물체 정보를 계속해서 유지하는 것을 억제할 수 있다.
기타 실시형태
본 발명의 실시형태는, 본 발명의 전술한 실시형태(들)의 1개 이상의 기능을 수행하기 위해 기억매체('비일시적인 컴퓨터 판독가능한 기억매체'로서 더 상세히 언급해도 된다)에 기록된 컴퓨터 실행가능한 명령(예를 들어, 1개 이상의 프로그램)을 판독하여 실행하거나 및/또는 전술한 실시예(들)의 1개 이상의 기능을 수행하는 1개 이상의 회로(예를 들어, 주문형 반도체 회로(ASIC)를 포함하는 시스템 또는 장치의 컴퓨터나, 예를 들면, 전술한 실시형태(들)의 1개 이상의 기능을 수행하기 위해 기억매체로부터 컴퓨터 실행가능한 명령을 판독하여 실행함으로써, 시스템 또는 장치의 컴퓨터에 의해 수행되는 방법에 의해 구현될 수도 있다. 컴퓨터는, 1개 이상의 중앙처리장치(CPU), 마이크로 처리장치(MPU) 또는 기타 회로를 구비하고, 별개의 컴퓨터들의 네트워크 또는 별개의 컴퓨터 프로세서들을 구비해도 된다. 컴퓨터 실행가능한 명령은, 예를 들어, 기억매체의 네트워크로부터 컴퓨터로 주어져도 된다. 기록매체는, 예를 들면, 1개 이상의 하드디스크, 랜덤 액세스 메모리(RAM), 판독 전용 메모리(ROM), 분산 컴퓨팅 시스템의 스토리지, 광 디스크(콤팩트 디스크(CD), 디지털 다기능 디스크(DVD), 또는 블루레이 디스크(BD)TM 등), 플래시 메모리소자, 메모리 카드 등을 구비해도 된다.
본 발명은, 상기한 실시형태의 1개 이상의 기능을 실현하는 프로그램을, 네트워크 또는 기억매체를 개입하여 시스템 혹은 장치에 공급하고, 그 시스템 혹은 장치의 컴퓨터에 있어서 1개 이상의 프로세서가 프로그램을 읽어 실행하는 처리에서도 실행가능하다. 또한, 1개 이상의 기능을 실현하는 회로(예를 들어, ASIC)에 의해서도 실행가능하다.
예시적인 실시형태들을 참조하여 본 발명을 설명하였지만, 본 발명이 이러한 실시형태에 한정되지 않는다는 것은 자명하다. 이하의 청구범위의 보호범위는 가장 넓게 해석되어 모든 변형, 동등물 구조 및 기능을 포괄하여야 한다.

Claims (14)

  1. 화상을 취득하도록 구성된 화상 취득부와,
    상기 화상 취득부가 취득한 상기 화상으로부터 물체를 검출하도록 구성된 검출부와,
    분배 화상과 메타 데이터를 요구하는 제어 코맨드를 수신하도록 구성된 수신부 - 상기 제어 코맨드는 상기 분배 화상의 화상 종별을 지정함 - 와,
    상기 지정된 화상 종별에 따라 상기 분배 화상을 취득하도록 구성된 제어부와,
    상기 분배 화상과, 상기 화상으로부터 상기 검출부에 의해 검출되는 상기 물체의 위치에 관한 물체 정보를 포함하는 상기 메타데이터를, 정보 처리장치에 송신하도록 구성된 송신부를 구비하고,
    상기 제어부는, 상기 분배 화상의 화상 종별과, 상기 검출부가 상기 물체를 검출하는 처리를 행하는 상기 화상의 화상 종별이 일치하면 상기 검출부의 검출 기능이 유효인 것으로 판정하고, 상기 분배 화상의 화상 종별과, 상기 검출부가 상기 처리를 행하는 상기 화상의 화상 종별이 불일치하면 상기 검출 기능이 무효인 것으로 판정하도록 구성되며, 상기 분배 화상의 화상 종별은 어안 화상 또는 파노라마 화상에 대응하고, 상기 검출부가 상기 처리를 행하는 상기 화상의 화상 종별은 어안 화상 또는 파노라마 화상에 대응하며,
    상기 송신부가 송신하는 제1 분배 화상에 대해 상기 검출 기능이 유효인 것으로 판정되고, 상기 송신부가 상기 제1 분배 화상 후에 송신하는 제2 분배 화상에 대해 상기 검출 기능이 무효인 것으로 판정된 경우, 상기 송신부는 상기 물체가 검출되지 않는 것을 나타내는 무효 정보를, 상기 정보 처리장치에 송신하도록 구성된 화상 처리장치.
  2. 삭제
  3. 제 1항에 있어서,
    상기 제어부는, 상기 검출부에 의해 상기 물체를 검출하는 처리가 행해지는 화상의 화상 종별이 상기 어안 화상이고, 상기 송신부가 송신하는 상기 제2 분배 화상의 화상 종별이 상기 어안 화상이 아닌 경우, 상기 송신부가 송신하는 상기 제2 분배 화상에 대해 상기 검출 기능이 무효인 것으로 판단하도록 구성되고, 상기 송신부는 상기 제2 분배 화상에 대해 상기 물체가 검출되지 않는 것을 나타내는 상기 무효 정보를 상기 정보 처리장치에 송신하도록 구성된 화상 처리장치.
  4. 제 1항에 있어서,
    상기 제어부는, 상기 검출부에 의해 상기 물체를 검출하는 처리가 행해지는 화상의 화상 종별이 상기 파노라마 화상이고, 상기 송신부가 송신하는 상기 제2 분배 화상의 화상 종별이 상기 파노라마 화상이 아닌 경우, 상기 송신부가 송신하는 상기 제2 분배 화상에 대해 상기 검출 기능이 무효인 것으로 판단하도록 구성되고, 상기 송신부는 상기 제2 분배 화상에 대해 상기 물체가 검출되지 않는 것을 나타내는 상기 무효 정보를 상기 정보 처리장치에 송신하도록 구성된 화상 처리장치.
  5. 삭제
  6. 제 1항, 제3항 및 제4항 중 어느 한 항에 있어서,
    상기 무효 정보는 <Frame> 태그를 구비하고 <Object> 태그를 구비하지 않는 메타데이터이고, 상기 <Frame> 태그는 영상 해석의 결과를 나타내며, 상기 <Object> 태그는, 상기 검출부가 검출한 상기 물체의 상기 물체 정보를 나타내는 화상 처리장치.
  7. 삭제
  8. 삭제
  9. 제 1항에 있어서,
    상기 화상을 촬영하도록 구성된 촬영장치를 더 구비한 화상 처리장치.
  10. 삭제
  11. 화상을 취득하는 단계와,
    상기 화상으로부터 물체를 검출하는 단계와,
    분배 화상과 메타 데이터를 요구하는 제어 코맨드를 수신하는 단계 - 상기 제어 코맨드는 상기 분배 화상의 화상 종별을 지정함 - 와,
    상기 지정된 화상 종별에 따라 상기 분배 화상을 취득하는 단계와,
    상기 분배 화상과, 상기 화상으로부터 검출되는 상기 물체의 위치에 관한 물체 정보를 포함하는 상기 메타데이터를, 정보 처리장치에 송신하는 단계와,
    상기 분배 화상의 화상 종별과, 상기 물체를 검출하는 처리를 행하는 상기 화상의 화상 종별이 일치하면 상기 검출하는 단계의 검출 기능이 유효인 것으로 판정하고, 상기 분배 화상의 화상 종별과, 상기 처리를 행하는 상기 화상의 화상 종별이 불일치하면 상기 검출 기능이 무효인 것으로 판정하는 단계를 포함하고, 상기 분배 화상의 화상 종별은 어안 화상 또는 파노라마 화상에 대응하고, 상기 처리를 행하는 상기 화상의 화상 종별은 어안 화상 또는 파노라마 화상에 대응하며,
    송신하는 제1 분배 화상에 대해 상기 검출 기능이 유효인 것으로 판정되고, 상기 제1 분배 화상 후에 송신하는 제2 분배 화상에 대해 상기 검출 기능이 무효인 것으로 판정된 경우, 상기 송신하는 단계에서는 상기 물체가 검출되지 않는 것을 나타내는 무효 정보를, 상기 정보 처리장치에 송신하는 화상 처리방법.
  12. 삭제
  13. 컴퓨터를,
    화상을 취득하도록 구성된 화상 취득부와,
    상기 화상 취득부가 취득한 상기 화상으로부터 물체를 검출하도록 구성된 검출부와,
    분배 화상과 메타 데이터를 요구하는 제어 코맨드를 수신하도록 구성된 수신부 - 상기 제어 코맨드는 상기 분배 화상의 화상 종별을 지정함 - 와,
    상기 지정된 화상 종별에 따라 상기 분배 화상을 취득하도록 구성된 제어부와,
    상기 분배 화상과, 상기 화상으로부터 상기 검출부에 의해 검출되는 상기 물체의 위치에 관한 물체 정보를 포함하는 상기 메타데이터를, 정보 처리장치에 송신하도록 구성된 송신부로서 기능시키는 프로그램을 기억한 컴퓨터로 판독가능한 기록매체로서,
    상기 제어부는, 상기 분배 화상의 화상 종별과, 상기 검출부가 상기 물체를 검출하는 처리를 행하는 상기 화상의 화상 종별이 일치하면 상기 검출부의 검출 기능이 유효인 것으로 판정하고, 상기 분배 화상의 화상 종별과, 상기 검출부가 상기 처리를 행하는 상기 화상의 화상 종별이 불일치하면 상기 검출 기능이 무효인 것으로 판정하도록 구성되며, 상기 분배 화상의 화상 종별은 어안 화상 또는 파노라마 화상에 대응하고, 상기 검출부가 상기 처리를 행하는 상기 화상의 화상 종별은 어안 화상 또는 파노라마 화상에 대응하며,
    상기 송신부가 송신하는 제1 분배 화상에 대해 상기 검출 기능이 유효인 것으로 판정되고, 상기 송신부가 상기 제1 분배 화상 후에 송신하는 제2 분배 화상에 대해 상기 검출 기능이 무효인 것으로 판정된 경우, 상기 송신부는 상기 물체가 검출되지 않는 것을 나타내는 무효 정보를, 상기 정보 처리장치에 송신하도록 구성된 기록매체.
  14. 삭제
KR1020190060370A 2018-05-31 2019-05-23 화상 처리장치, 정보 처리장치, 정보 처리방법, 및 기록매체 KR102427095B1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JPJP-P-2018-104906 2018-05-31
JP2018104906A JP7250440B2 (ja) 2018-05-31 2018-05-31 撮影装置、情報処理装置、情報処理方法、およびプログラム

Publications (2)

Publication Number Publication Date
KR20190136943A KR20190136943A (ko) 2019-12-10
KR102427095B1 true KR102427095B1 (ko) 2022-07-29

Family

ID=66770174

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020190060370A KR102427095B1 (ko) 2018-05-31 2019-05-23 화상 처리장치, 정보 처리장치, 정보 처리방법, 및 기록매체

Country Status (5)

Country Link
US (1) US11170520B2 (ko)
EP (1) EP3576419A1 (ko)
JP (1) JP7250440B2 (ko)
KR (1) KR102427095B1 (ko)
CN (1) CN110557607B (ko)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6968610B2 (ja) * 2017-08-01 2021-11-17 キヤノン株式会社 撮像装置、情報処理方法及びプログラム
US11227007B2 (en) * 2019-07-23 2022-01-18 Obayashi Corporation System, method, and computer-readable medium for managing image
TWI714318B (zh) * 2019-10-25 2020-12-21 緯創資通股份有限公司 人臉辨識方法及裝置

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110317037A1 (en) * 2010-06-28 2011-12-29 Canon Kabushiki Kaisha Image pickup apparatus
US20130201338A1 (en) 2012-02-07 2013-08-08 Sensormatic Electronics, LLC Method and System for Monitoring Portal to Detect Entry and Exit
JP5999395B1 (ja) 2015-03-19 2016-09-28 パナソニックＩｐマネジメント株式会社 撮像装置、録画装置および映像出力制御装置

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101500084B (zh) * 2008-01-30 2011-04-20 富士胶片株式会社 图像摄取设备和用于图像摄取的控制方法
JP2012227832A (ja) 2011-04-21 2012-11-15 Canon Inc 監視システム、監視装置及びその処理方法
JP2013165413A (ja) 2012-02-13 2013-08-22 Nikon Corp 画像表示装置
CN106165393A (zh) * 2014-04-03 2016-11-23 皮克索洛特公司 用于自动电视制作的方法和系统
JP2015210702A (ja) * 2014-04-28 2015-11-24 キヤノン株式会社 画像処理装置及び画像処理方法
US10586114B2 (en) * 2015-01-13 2020-03-10 Vivint, Inc. Enhanced doorbell camera interactions
JP6501257B2 (ja) 2015-05-18 2019-04-17 シャープ株式会社 画像処理装置、画像処理方法、及びプログラム
JP6011833B1 (ja) 2015-09-14 2016-10-19 パナソニックＩｐマネジメント株式会社 ウェアラブルカメラシステム及び人物報知方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110317037A1 (en) * 2010-06-28 2011-12-29 Canon Kabushiki Kaisha Image pickup apparatus
US20130201338A1 (en) 2012-02-07 2013-08-08 Sensormatic Electronics, LLC Method and System for Monitoring Portal to Detect Entry and Exit
JP5999395B1 (ja) 2015-03-19 2016-09-28 パナソニックＩｐマネジメント株式会社 撮像装置、録画装置および映像出力制御装置

Also Published As

Publication number Publication date
CN110557607B (zh) 2022-02-11
JP2019212963A (ja) 2019-12-12
CN110557607A (zh) 2019-12-10
JP7250440B2 (ja) 2023-04-03
EP3576419A1 (en) 2019-12-04
KR20190136943A (ko) 2019-12-10
US11170520B2 (en) 2021-11-09
US20190370992A1 (en) 2019-12-05

Similar Documents

Publication Publication Date Title
KR102427095B1 (ko) 화상 처리장치, 정보 처리장치, 정보 처리방법, 및 기록매체
TWI425828B (zh) 攝影裝置、圖像區域之判定方法以及電腦可讀取之記錄媒體
US10270977B2 (en) Imaging apparatus and a method of tracking a subject in the imaging apparatus
JP2008206018A (ja) 撮像装置およびプログラム
JP6521626B2 (ja) 被写体追跡装置、方法およびプログラム
JP2010141847A (ja) 画像処理装置及び画像処理方法
JP6700706B2 (ja) 情報処理装置、情報処理方法及びプログラム
JP2013172312A (ja) 撮影支援システムおよび撮影支援プログラム
JP2016081095A (ja) 被写体追跡装置、その制御方法、撮像装置、表示装置及びプログラム
US11064103B2 (en) Video image transmission apparatus, information processing apparatus, system, information processing method, and recording medium
JP2014236313A (ja) 表示制御装置、表示制御システム、及び、プログラム
JP7191663B2 (ja) 撮像装置、制御方法及びプログラム
JP5222429B2 (ja) 被写体追跡装置及びその制御方法
JP2011135227A (ja) 被写体追跡装置及びその制御方法
JP2016158663A (ja) 情報処理装置、情報処理方法及びプログラム
JP2014216694A (ja) 高解像度化処理付き追尾雲台装置
WO2017212796A1 (ja) 制御装置、通信装置、制御方法及びプログラム
JP2014165639A (ja) 情報端末装置、通信システム及び方法
JP2018112991A (ja) 画像処理装置、画像処理システム、画像処理方法、及びプログラム
WO2022226930A1 (zh) 数据处理方法、终端设备、无人机、系统及存储介质
JP6746399B2 (ja) 制御装置、制御方法及びプログラム
JP2017059974A (ja) 撮像装置、制御方法、及びプログラム
JP6121004B2 (ja) 撮影装置、その制御方法、及びプログラム
JP6234200B2 (ja) 画像処理装置、画像処理方法およびプログラム
JP6335064B2 (ja) 撮像装置、撮像装置の制御方法およびコンピュータプログラム

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant