KR20230145749A - 저전력을 사용하여 물체를 감지하는 방법 및 그에 따른 감시장치 - Google Patents

저전력을 사용하여 물체를 감지하는 방법 및 그에 따른 감시장치 Download PDF

Info

Publication number
KR20230145749A
KR20230145749A KR1020220044503A KR20220044503A KR20230145749A KR 20230145749 A KR20230145749 A KR 20230145749A KR 1020220044503 A KR1020220044503 A KR 1020220044503A KR 20220044503 A KR20220044503 A KR 20220044503A KR 20230145749 A KR20230145749 A KR 20230145749A
Authority
KR
South Korea
Prior art keywords
monitoring device
camera unit
unit
image
low power
Prior art date
Application number
KR1020220044503A
Other languages
English (en)
Other versions
KR102601637B1 (ko
KR102601637B9 (ko
Inventor
정창수
Original Assignee
주식회사 스마트아이캠
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 스마트아이캠 filed Critical 주식회사 스마트아이캠
Priority to KR1020220044503A priority Critical patent/KR102601637B1/ko
Priority to PCT/KR2023/004340 priority patent/WO2023200159A1/ko
Publication of KR20230145749A publication Critical patent/KR20230145749A/ko
Application granted granted Critical
Publication of KR102601637B1 publication Critical patent/KR102601637B1/ko
Publication of KR102601637B9 publication Critical patent/KR102601637B9/ko

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/188—Capturing isolated or intermittent images triggered by the occurrence of a predetermined event, e.g. an object reaching a predetermined position
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00—Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/02—Systems using reflection of radio waves, e.g. primary radar systems; Analogous systems
    • G01S13/50—Systems of measurement based on relative movement of target
    • G01S13/58—Velocity or trajectory determination systems; Sense-of-movement determination systems
    • G01S13/62—Sense-of-movement determination
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/65—Control of camera operation in relation to power supply
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/667—Camera operation mode switching, e.g. between still and video, sport and normal or high- and low-resolution modes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/91—Television signal processing therefor
    • H04N5/917—Television signal processing therefor for bandwidth reduction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Burglar Alarm Systems (AREA)
  • Geophysics And Detection Of Objects (AREA)

Abstract

저전력을 사용하여 물체를 감지하는 방법이 개시된다. 본 발명에 따르면, 감시장치가 저전력을 사용하여 물체를 감지하는 방법에 있어서, 상기 감시장치 내에 포함된 모션센서가 물체를 감지하는 물체 감지 단계; 상기 물체 감지 단계에서 상기 모션센서가 감시대상물체를 판명하는 경우, 상기 모션센서가 상기 감시장치 내에 포함된 카메라부의 구동 전원을 인가 하기 위한 웨이크업(wakeup) 신호를 상기 카메라부에 송신하는 단계; 상기 카메라부가 상기 감시장치 내에 포함된 이미지 센서부, 영상을 인코딩하는 미디어 처리부 및 컴퓨터 비전(Computer Vision) 분류 처리부의 구동전원을 인가하는 카메라부 구동전원 인가 단계; 상기 카메라부가 AF, AE , AWB 중 어느 하나 이상을 포함하여 이미지 센서부를 초기화하는 단계; 상기 미디어 처리부가 상기 이미지 센서부에 입력된 영상을 인코딩하여 생성된 영상 데이터를 임시 메모리에 저장하는 영상 인코딩 및 저장 단계; 상기 컴퓨터 비전 분류 처리부가 상기 임시 메모리에 저장된 영상 데이터를 분석하여 감시대상물체의 존재 또는 범위 중 어느 하나 이상을 판명하는 경우, 감시장치의 운영 체제(OS)가 부팅하는 운영체제 부팅 단계를 포함하는 방법이 제안될 수 있다. 이를 통해, 차량 등에 설치되는 블랙박스나 사무실이나 가정 등에 설치되는 CCTV와 달리, 별도의 케이블을 통한 전원 공급 없이, 구비된 배터리를 통해 빈번한 충전 없이 장기간 독립적으로 주변을 효율적으로 감시할 수 있다.

Description

저전력을 사용하여 물체를 감지하는 방법 및 그에 따른 감시장치 {Method for detecting an object using low power and monitoring device thereof}
본 발명은 저전력을 사용하여 물체를 감지하는 방법 및 그에 따른 감시장치 에 관한 것이다. 더욱 구체적으로 본 발명은 저전력으로 물체 등의 동작을 감지하고 녹화할 수 있는 장치 및 방법에 관한 것이다.
본 발명은 차량, 가게, 가정 등 실내와 도로, 인도, 개활지 등 실외 어디에서든 물체의 동작을 정확히 감지하고 이에 따라 녹화 및 녹음 등 물체를 추적할 수 있는 장치 및 방법에 관한 것이다. 종래에도 차량 등 내에 설치되어 차량 외부의 물체나 차량 내부의 승객 등의 움직임을 관찰하여 녹화 및 녹음 등을 하는 블랙박스 등의 장비가 널리 사용되어 왔다. 그런데, 이런 종래의 감시 장치 등은 비교적 큰 용량의 배터리에 상시 연결되어 동작해야 하므로 배터리 용량에 민감하며, 경우에 따라, 예를 들어, 자동차에 장착된 블랙박스와 같은 감시 장치는 차량의 전체 배터리를 소모시켜 급기야 차량에 시동이 걸리지 않는 문제점을 발생시켜왔다. 또한, 이런 종래의 감시 장치는 상시 전원을 입력 받아야 하므로 전력 공급을 받기 어려운 들판이나 산속 같은 곳에서는 사용하기가 어려웠다. 상시 전력을 공급받기 어려운 환경에서 태양광 발전 모듈을 포함하는 감시장치가 사용되기도 하나, 태양광 발전 모듈의 경우, 날이 흐리거나 야간 등에는 발전량이 적어 제대로 동작하지 않는 경우가 태반이다. 그러므로 배터리 소모가 적은 감시장치가 필요한 실정이다.
한편, 이러한 종래의 감시장치 경우, 실제 감시되어 녹화 등이 된 메모리를 검토하면 감시할 필요가 없는 경우가 대부분이었다. 즉, 불필요한 감시대상에 대해 녹화 등 감시하여, 불필요하게 배터리를 소모시키고, 궁극적으로는 사용자가 번거롭게 이를 일일이 확인해서 삭제해 줘야 하는 수고가 존재하였다.
특히, 더욱 상세하게, 감시장치의 카메라부 내에 이미지 센서 등의 동작은 가장 크게 전력을 소모시키는데, 종래의 감시장치는 앞서 언급한 것과 같이 불필요한 감시대상까지 모두 감시하므로 무의미하게 전력을 소모시키는 문제점이 있었다.
즉, 본격적인 카메라부의 동작에 앞서 감시대상을 정확히 판단할 수 있는 구성이 필요하다.
본 발명의 배경기술은 대한민국 공개특허공보 제10-2015-0107931호(2015.09.24. 발명의 명칭: 저전력 소비 구조의 카메라 영상 저장 장치)에 개시되어 있다. 또한, 대한민국 공개특허공보 제10-2015-0107929호(2015.9.24. 발명의 명칭: 차량용 블랙박스의 영상 저장 방법)에 개시되어 있다. 또한, 미국 등록특허 제11,182,319호 (2021.11.23. 발명의 명칭: Camera system with PWM-activated, burst-self-refresh, DRAM to reduce standby power consumption)에 개시되어 있다.
대한민국 공개특허공보 제10-2015-0107931호 대한민국 공개특허공보 제10-2015-0107929호 미국 등록특허 제11,182,319호
본 발명의 목적은 저전력을 사용하여 물체를 감지하는 방법을 제공하는 것이다.
또한, 본 발명의 목적은 저전력을 사용하여 물체를 감지하는 감시장치를 제공하는 것이다.
본 발명의 일 측면에 따르면, 감시장치가 저전력을 사용하여 물체를 감지하는 방법에 있어서, 상기 감시장치 내에 포함된 모션센서가 물체를 감지하는 물체 감지 단계; 상기 물체 감지 단계에서 상기 모션센서가 감시대상물체를 판명하는 경우, 상기 모션센서가 상기 감시장치 내에 포함된 카메라부의 구동 전원을 인가 하기 위한 웨이크업(wakeup) 신호를 상기 카메라부에 송신하는 단계; 상기 카메라부가 상기 감시장치 내에 포함된 이미지 센서부, 영상을 인코딩하는 미디어 처리부 및 컴퓨터 비전(Computer Vision) 분류 처리부의 구동전원을 인가하는 카메라부 구동전원 인가 단계; 상기 카메라부가 AF, AE , AWB 중 어느 하나 이상을 포함하여 이미지 센서부를 초기화하는 단계; 상기 미디어 처리부가 상기 이미지 센서부에 입력된 영상을 인코딩하여 생성된 영상 데이터를 임시 메모리에 저장하는 영상 인코딩 및 저장 단계; 상기 컴퓨터 비전 분류 처리부가 상기 임시 메모리에 저장된 영상 데이터를 분석하여 감시대상물체의 존재 또는 범위 중 어느 하나 이상을 판명하는 경우, 감시장치의 운영 체제(OS)가 부팅하는 운영체제 부팅 단계를 포함하는 방법이 제공된다.
또한, 본 발명의 다른 측면에 따르면, 감시장치가 저전력을 사용하여 물체를 감지하는 방법에 있어서, 상기 감시장치 내에 포함된 모션센서가 물체를 감지하는 물체 감지 단계; 상기 물체 감지 단계에서 상기 모션센서가 감시대상물체를 판명하는 경우, 상기 모션센서가 상기 감시장치 내에 포함된 카메라부의 구동 전원을 인가 하기 위한 웨이크업(wakeup) 신호를 상기 카메라부에 송신하는 단계; 상기 카메라부가 상기 감시장치 내에 포함된 이미지 센서부, 영상을 인코딩하는 미디어 처리부 및 컴퓨터 비전(Computer Vision) 분류 처리부의 구동전원을 인가하는 카메라부 구동전원 인가 단계; 상기 이미지 센서부가 AF, AE , AWB 제어를 포함하여 이미지 센서부를 초기화하는 단계; 상기 미디어 처리부가 상기 이미지 센서부에 입력된 영상을 인코딩하여 생성된 영상 데이터를 임시 메모리에 저장하는 영상 인코딩 및 저장 단계; 상기 컴퓨터 비전 분류 처리부가 상기 임시 메모리에 저장된 영상 데이터를 분석하여 감시대상물체의 존재 및 범위를 판명하지 못하는 경우, 상기 카메라부는 대기 모드로 전환하는 방법이 제공된다.
그 밖에 본 발명은 상기 물체 감지 단계에서, 카메라부에는 전원이 인가되지 않는 상태일 수 있다.
또한, 상기 물체 감지 단계에서, 상기 모션센서는 감지된 물체의 크기, 물체의 움직이는 속도, 물체의 움직이는 방향 중 어느 하나 이상을 기반으로 상기 물체가 사람 혹은 차량 혹은 그 밖의 물체인지 판단할 수 있다.
또한, 상기 카메라부의 구동전원 인가 단계에서, 카메라부의 작동을 위해 필요한 부품에 전원을 공급하는 실시간 동작 시스템(RTOS) 모드에서 상기 카메라부가 동작할 수 있다.
또한, 상기 영상 인코딩 및 저장 단계에서, 상기 임시 메모리는 사용자 편의에 따라 분리가능한 메모리가 아닐 수 있다.
또한, 상기 운영체제 부팅 단계 이후, 상기 감시장치는 상기 감시대상물체가 상기 감시장치로부터 소정의 범위 내에 있거나 상기 감시대상물체의 이미지가 이미지 센서부의 촬상영역 내에 존재하는 경우, 소정의 동작을 수행하는 단계를 더 포함할 수 있다.
또한, 상기 운영체제 부팅 단계 이후, 상기 감시장치는 상기 감시대상물체가 상기 감시장치로부터 소정의 범위에서 벗어나거나 상기 감시대상물체의 이미지가 이미지 센서부의 촬상영역에서 벗어날 때까지 동작하는 단계를 더 포함할 수 있다.
또한, 상기 동작은 영상을 녹화 또는 음성을 녹음하는 것일 수 있다.
또한, 상기 소정의 동작을 수행하는 단계 이후, 상기 감시장치는 상기 감시대상물체가 제2 소정의 조건에 해당하는 경우, 상기 카메라부는 대기 모드로 전환하는 것일 수 있다.
또한, 상기 제2 소정의 조건은, 상기 감시대상물체가 상기 감시대상물체가 상기 감시장치로부터 소정의 범위 내에 있거나 상기 감시대상물체의 이미지가 이미지 센서부의 촬상영역 내에 존재하면서, 소정의 시간 동안 움직이지 않는 것으로 상기 감시장치가 판단하는 경우일 수 있다.
또한, 상기 운영체제 부팅 단계 이후, 상기 카메라부가 이벤트 발생 정보를 상기 감시장치의 제어부에 전달하는 단계; 및 상기 감시장치는 상기 감시장치 내에 포함된 통신부를 통해 외부로 상기 이벤트 발생 정보를 송신하는 단계를 더 포함할 수 있다.
또한, 상기 모션센서는 레이더 센서인 것일 수 있다.
본 발명의 또 다른 측면에 따르면, 상기 기재된 저전력을 사용하여 물체를 감지하는 방법을 실행시키는 기록매체에 저장된 컴퓨터 프로그램일 수 있다.
본 발명의 또 다른 측면에 따르면, 저전력을 사용하여 물체를 감지하는 감시장치에 있어서, 상기 감시장치는 감시대상물체를 감지하고, 감시대상물체를 판명하는 경우, 상기 감시장치 내에 포함된 카메라부의 구동 전원을 인가 하기 위한 웨이크업(wakeup) 신호를 상기 카메라부에 송신하는 모션센서; 이미지 센서부, 영상을 인코딩하는 미디어 처리부, 컴퓨터 비전(Computer Vision) 분류 처리부 및 임시메모리를 포함하는 카메라부를 포함하되, 상기 카메라부는 AF, AE, AWB 중 어느 하나 이상을 포함하여 이미지 센서부를 초기화하고, 상기 이미지 센서부에 입력된 영상을 인코딩하여 생성된 영상 데이터를 임시 메모리에 저장하고, 상기 컴퓨터 비전 분류 처리부가 상기 임시 메모리에 저장된 영상 데이터를 분석하여 감시대상물체의 존재 또는 범위 중 어느 하나 이상을 판명하는 경우, 감시장치의 운영 체제(OS)가 부팅할 수 있다.
본 발명의 실시예에 따르면 저전력을 사용하여 물체를 감지하는 방법을 제공할 수 있다.
본 발명의 또다른 실시예에 따르면 저전력을 사용하여 물체를 감지하는 방법을 제공할 수 있다.
본 발명의 또다른 실시예에 따르면 차량 등에 설치되는 블랙박스나 사무실이나 가정 등에 설치되는 CCTV와 달리, 별도의 케이블을 통한 전원 공급 없이, 구비된 배터리를 통해 빈번한 충전 없이 장기간 독립적으로 주변을 효율적으로 감시할 수 있다.
본 발명의 또다른 실시예에 따르면, 실제 감시의 필요성이 있는 감시대상물체를 판별하여, 감시의 필요성이 있는 상황에 대해서만 녹화 등을 통하여 감시하므로 소비전력을 크게 줄일 수 있다.
도 1은 본 발명의 일 실시예에 따른 저전력을 사용하여 물체를 감시하는 장비의 구성을 나타낸 구성도.
도 2 내지 4은 본 발명의 다른 실시예에 따른 저전력을 사용하여 물체를 감시하는 장비의 동작을 나타낸 순서도.
도 5는 본 발명의 다른 실시예에 따른 감시장치를 나타낸 도면.
도 6는 본 발명의 다른 실시예에 따른 감시장치와 사용자 단말기의 사용 형태를 나타낸 개념도.
본 발명은 다양한 변환을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 특정 실시예들을 도면에 예시하고 상세한 설명에 상세하게 설명하고자 한다. 그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변환, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다. 본 발명을 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다.
제1, 제2 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되어서는 안 된다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다.
본 출원에서 사용한 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
이하, 본 발명에 따른 실시예를 첨부도면을 참조하여 상세히 설명하기로 하며, 첨부 도면을 참조하여 설명함에 있어, 동일하거나 대응하는 구성 요소는 동일한 도면번호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다.
또한, 이하 사용되는 제1, 제2 등과 같은 용어는 동일 또는 상응하는 구성 요소들을 구별하기 위한 식별 기호에 불과하며, 동일 또는 상응하는 구성 요소들이 제1, 제2 등의 용어에 의하여 한정되는 것은 아니다.
또한, 결합이라 함은, 각 구성 요소 간의 접촉 관계에 있어, 각 구성 요소 간에 물리적으로 직접 접촉되는 경우만을 뜻하는 것이 아니라, 다른 구성이 각 구성 요소 사이에 개재되어, 그 다른 구성에 구성 요소가 각각 접촉되어 있는 경우까지 포괄하는 개념으로 사용하도록 한다.
또한, 컴퓨터 프로그램과 관련하여, 구성요소에 대한 접미사 "모듈" 및/또는 "부"는 컴퓨터를 특정 기능의 수단으로 기능시키기 위한 컴퓨터 프로그램의 일부이거나, 컴퓨터에서 특정 기능을 실현시키기 위한 컴퓨터 프로그램의 일부일 수 있다. 예를 들어, 모듈 A는 컴퓨터를 수단 A로 기능시키기 위한 컴퓨터 프로그램 또는 컴퓨터에 기능 A를 실현시키기 위한 컴퓨터 프로그램으로 해석될 수 있다. 방법으로서 "단계"는 컴퓨터에 컴퓨터 프로그램으로 구현되어 실행될 수 있다. 또한, "모듈" 및/또는 "부"가 모여 "군"을 이룰 수 있다.
한편, 애플리케이션(Application)이란 특정한 업무를 수행하기 위해 고안된 일련의 컴퓨터 프로그램의 집합을 가리키는 것으로, 응용프로그램이라고도 한다. 사용자는 본 발명의 실시예에 따른 애플리케이션을 자신의 전자기기에 인스톨하는 것으로 관련 기능을 추가할 수 있다.
애플리케이션이 인스톨되는 사용자의 전자기기란 컴퓨터, 태블릿PC, 스마트폰과 같이 CPU, RAM, ROM, 저장장치 등으로 구성되고, Windows, ios, 안드로이드, 리눅스 등의 그래픽 운영체제로 전체 시스템이 제어되는 환경인 것이 바람직하며, 특히 등록된 연락처로 전화 및 문자를 주고받을 수 있는 스마트폰에 특화되었다.
또한, 본 명세서에 첨부된 도면의 순서도는 발명을 설명하기 위한 순서도에 불과하며, 컴퓨터 상에 버그 없이 완벽히 구현되기 위한 순서도일 필요는 없다.
또한, 본 명세서에서 언급된 단말기는 일반적인 사용자 단말기로서 스마트폰, 퍼스널 컴퓨터, 태블릿 PC 등이 될 수 있다.
도 1은 본 발명의 일 실시예에 따른 저전력을 사용하여 물체를 감시하는 장비의 구성을 나타낸 구성도이다. 도 1을 참조하면, 본 발명에 따른 구성이 도시되어 있다.
본 발명에 따른 감시장치는 모션센서(110), 카메라부(120), 메모리(140) 및 제어부(130)를 포함할 수 있다.
또한, 카메라부는 다시 마이크, 이미지센서부, 미디어처리부, 카메라 프로세서, 임시메모리, 컴퓨터 비전 분류 처리부 구성을 포함할 수 있다. 또한, 제어부는 마이크로콘트롤러, 배터리, 통신부 구성을 포함할 수 있다.
모션센서는 감시해야 할 대상을 감지하고, 감시해야 할 물체로 판명하는 경우, 감시장치 내에 포함된 카메라 구동 전원을 인가 하기 위한 웨이크업(wakeup) 신호를 생성하여 카메라부에 전송하는 역할을 할 수 있다. 또한, 감지된 물체의 크기, 물체의 움직이는 속도, 물체와 본 발명에 따른 감시장치와의 거리, 물체의 움직이는 방향 중 어느 하나 이상을 기반으로 상기 물체가 사람 혹은 차량 혹은 반려동물 등 동물 혹은 그 밖의 물체인지 판단할 수 있다. 상기 모션센서는 레이더 센서가 될 수 있다.
카메라부는 이미지 센서부, 미디어 처리부, 컴퓨터 비전 분류 처리부를 구동하기 위한 전원을 인가할 수 있다. 본 카메라부의 동작은 실시간 운영체제(RTOS : Real-Time Operating System) 하에서 동작할 수 있다. 전원이 인가된 카메라부는 신속히 감시대상물체를 촬영하기 위한 동작을 수행할 수 있다.
미디어 처리부는 이미지 센서부에 촬상된 영상의 데이터를 수신받아 인코딩하여 임시 메모리에 저장을 할 수 있다.
임시 메모리는 메모리가 본 감시장치에 자유롭게 삽입되거나 분리되는 형태의 외장메모리가 아닐 수 있다.
컴퓨터 비전 분류 처리부(Computer Vision Classification processor)는 임시 메모리에 저장된 영상 데이터를 분석하여 감시대상 물체의 존재 또는 범위 중 어느 하나 이상을 판명하는 경우, 감시장치의 운영 체제(OS)가 부팅할 수 있다.
카메라 프로세서는 카메라부의 전체적인 동작을 제어할 수 있다.
제어부의 마이크로콘트롤러는 본 감시장치의 전체적인 동작을 제어할 수 있으며, 배터리는 본 감시장치의 전체적인 전원을 공급하는 역할을 한다. 바람직하게 본 배터리는 본 감시장치에 탈부착 가능한 형태일 수 있고, 혹은 별도의 전원공급선을 통해 충전되는 형태일 수 있다. 예를 들어, USB (Universal Serial Bus) 케이블을 이용하여 본 발명의 감시장치에 에너지가 충전되는 형태여도 무방하다.
통신부는 물체를 감지한 이벤트에 관한 정보를 외부로 송신하는 역할을 한다. 상기 이벤트에 관한 정보는 이벤트 발생 여부, 이벤트 발생 장소, 시각 등에 대한 정보뿐만 아니라 경우에 따라 이벤트를 녹화한 영상 정보일 수 있다. 한편, 바람직하게 본 발명의 통신부는 저전력에서 동작할 수 있는 BLE 통신 방식의 통신모듈을 채택하는 것이 바람직하다.
본 발명에 따른 감시장치의 각 구성은 도 2 내지 도 4와 함께 추가로 더 설명될 수 있다.
도 2는 본 발명의 일 실시예에 따른 저전력을 사용하여 물체를 감시하는 방법의 순서를 나타낸 순서도이다. 도 2를 참조하면, 본 발명에 따른 순서들이 도시되어 있다.
좀 더 상세하게, 감시장치 내에 포함된 모션센서가 감시해야 할 대상을 감지하고(S402)하고, 모션센서가 감시해야 할 물체로 판명하는 경우, 모션센서가 감시장치 내에 포함된 카메라 구동 전원을 인가 하기 위한 웨이크업(wakeup) 신호를 생성하여 카메라부에 전송을 한다(S404). 이때, 카메라부에는 전원이 인가되지 않는 상태일 수 있다. 모션센서가 물체를 감지할 수 있을 정도의 필요한 전원이 모션센서에 인가되어 있으면 족하고, 카메라부에는 전원이 인가되어 있지 않아도 족하다. 이를 통해, 종래발명과 같이 감시를 위해 필요한 모든 부분에 전원을 인가하여 전력을 낭비하지 않을 수 있다. 참고로, 감시장치 내의 마이크로콘트롤러가 모션센서가 발생한 데이터를 처리하여 감시대상물체의 동작 등을 판단할 수 있다.
또한, 모션센서는 감지된 물체의 크기, 물체의 움직이는 속도, 물체와 본 발명의 따른 감시장치와의 거리, 물체의 움직이는 방향 중 어느 하나 이상을 기반으로 상기 물체가 사람 혹은 차량 혹은 반려동물 등 동물 혹은 그 밖의 물체인지 판단할 수 있다. 좀 더 구체적으로, 상기 모션센서는 레이더 센서가 될 수 있으며, Socionext(상표)의 SC1233AR3 칩 등이 사용될 수 있다. 상기 레이더 센서는 5 내지 10 Hz로 물체를 감지할 수 있으며, 이는 사용자의 설정이나 배터리 잔존 용량 혹은 추후 배터리 충전 계획 등에 따라 달리할 수 있다. 한편, 상기 모션센서에 레이더 센서가 한정되는 것이 아니며 감지되는 물체를 식별하여 판단할 수 있는 어떠한 종류의 센서, 예를 들어, 초음파 센서, 마이크로파 센서, 단층 모션 센서 등이 사용될 수 있다. 또한, 상기 모션센서는 물체가 물리적 공간에서 변화를 바탕으로 감지하였으나 이에 한정되지 않고, 물체의 색깔이나 밝기 변화 등 물체의 시각적 변화를 감지하여도 무방하다. 참고로, 모션센서는 모션센서 콘트롤 엔진((Motion Control Engine, 미도시)을 통해 상기 웨이크업 신호를 생성할 수 있다.
웨이크업 신호를 수신한 카메라부는 이미지 센서부, 미디어 처리부, 컴퓨터 비전 분류 처리부를 구동하기 위한 전원을 인가한다(S406). 인가되는 전원은 감시장치 내에 구비된 배터리를 통해서 끌어올 수 있다. 이를 통해, 카메라부가 영상을 분석하기 위해 필요한 구성들을 모두 부팅하여 준비 상태에 돌입할 수 있다. 한편, 상기 이미지 센서부, 미디어 처리부 및 컴퓨터 비전 분류 처리부는 카메라부 내부에 구비될 수 있다. 한편, 본 카메라부의 동작은 실시간 운영체제 하에서 동작하는 것이 바람직하다.
전원이 인가된 카메라부는 신속히 감시대상물체를 촬영하기 위한 동작을 수행한다. 구체적으로, 먼저 자동 노출로 광량 조건에 따라 셔터 속도와 조리개 값을 조절함으로써 적정한 노출을 자동적으로 얻는 AE(Autoexposure), 자동 초점으로 자동적으로 카메라 렌즈의 초점을 조절하는 AF(Autofocus), 자동적으로 화이트 밸런스를 조절하는 AWB (Automatic White Balance)를 초기화하여 촬영할 수 있는 상태에 이를 수 있다. 한편, 카메라부는 상기 AE, AF, AWB를 모두 초기할 수 있지만, 이에 한정되지 않고, 경우에 따라, AE 및 AWB만을 초기화하여도 무방하다. 카메라부는 촬영을 할 수 있도록 초기화하면 족하다. 또한, 카메라부는 미디어 처리부의 비디오 인코더 등을 초기화할 수 있다. 또한, 카메라부는 사용을 위해 마이크로폰을 초기화할 수 있다.
미디어 처리부는 이미지 센서부에 촬상된 영상의 데이터를 수신받아 인코딩하여 임시 메모리에 저장을 할 수 있다(S410). 상기 임시 메모리는 메모리가 본 감시장치에 자유롭게 삽입되거나 분리되는 형태의 외장메모리가 아니며, 구체적으로 상기 임시 메모리는 낸드 플래쉬(NAND Flash)계열의 메모리가 아니다. 이와 같이, 임시 메모리로 삽입과 분리가 가능한 낸드 플래쉬 메모리 계열의 메모리를 사용하지 않음으로써, 감시장치가 상대적으로 빠르게 동작하고, 전력을 효율적으로 사용할 수 있다.
다음으로, 컴퓨터 비전 분류 처리부(Computer Vision Classification processor)가 상기 임시 메모리에 저장된 영상 데이터를 분석하여 감시대상 물체의 존재 또는 범위 중 어느 하나 이상을 판명하는 경우, 감시장치의 운영 체제(OS)가 부팅할 수 있다(S414). 만약 컴퓨터 비전 분류 처리부가 임시 메모리에 저장된 영상을 분석한 결과, 어떠한 물체도 감지하지 않다고 판단하면, 카메라부는 대기 모드로 돌아가고 전력 소비를 차단한다. 아울러, 재차 모션센서가 물체를 감지하는 단계(S402)로 돌아가게 된다. 한편, 만약 컴퓨터 비전 분류 처리부가 감지할 물체가 존재한다고 판단하면, 본 감시장치를 관장하는 전체 운영체제가 부팅되고 작업처리를 준비한다. 본 명세서에서는 이를 전체 운영체제 모드(Full OS mode)에서의 동작이라 칭할 수 있다. 상기 감시장치를 관장하는 전체 운영체제는 리눅스(Linux)가 사용될 수 있는데, 이에 한정되지 않고, 본 감시장치의 전체 부품 등을 관장할 수 있는 운영체제이면 족하다.
좀 더 구체적으로 컴퓨터 비전 분류 처리부는 이미지센서부로부터 수신된 감시대상물체에 대한 초기 몇 장의 이미지를 처리할 수 있다. 또한, 컴퓨터 비전 분류 처리부는 인공지능학습을 통해 장착된 알고리즘을 통해 이미지 상에 감시대상물체가 사람인지, 차량인지, 동물인지 혹은 그 밖의 물체인지 판단할 수 있고, 이런 감시대상물체가 본 감시장치에서 얼마나 멀리 떨어져 있는지도 판단할 수 있다. 본 발명의 컴퓨터 비전 분류 처리부는 원근법 및 인공지능학습을 통해 이를 판단할 수 있다. 앞서 설명한 바와 같이, 이렇게 처리된 데이터는 임시메모리에 저장될 수 있다.
한편, 컴퓨터 비전 분류 처리부는 실시간 운영체제 하에서 동작하는 것이 바람직하다. 다만, 본 발명이 컴퓨터 비전 분류 처리부가 반드시 실시간 운영체제 상에서 동작하는 것에 한정되지는 않는다. 실시간 운영체제에 대한 특징 및 설명 등은 생략한다.
다음으로, 본 감시장치는 전체 운영체제 모드에서 영상을 녹화하거나 주어진 동작을 수행할 수 있다(S416). 좀 더 구체적으로 카메라부를 통해 입력된 영상이나 마이크 등을 통해 입력되는 음성을 임시메모리가 아닌 외부 외장 메모리나 하드 드라이브 등에 저장될 수 있다. 상기 외장메모리는 낸드 플래쉬 메모리 계열일 수 있고, 상업적인 분류나 상품명에 따라 Secure Digital, CompactFlash, 메모리스틱, UFS 카드, XQD, USB 메모리 등이 될 수 있다. 한편, 상기 언급한 메모리 카드 형태의 플래쉬 메모리 뿐만 아니라 SSD(solid-state storage) 형태의 메모리여도 무방하다.
또한, 본 감시장치는 전체 운영체제 모드에서 녹화하거나 처리하는 영상 분석 방법은 실시간 운영체제에서 컴퓨터 비전 분류 처리부가 사용한 방법과 동일할 수도 있고 사람 얼굴 감지나 차량 번호판 인식 등과 같은 다른 방법이 추가로 사용되거나 다른 방법만 사용될 수도 있다.
또한, 본 감시장치는 통신부를 통해 상기 데이터 등을 외부로 전송할 수 있다. 한편, 본 감시장치의 동작은 영상을 녹화하거나 음성을 녹음하는 것에 한정되지 않으며, 본 감시장치가 수집할 수 있는 모든 정보를 저장하거나 수집된 정보를 외부로 전달할 수 있다. 예를 들어, 감시장치가 포함할 수 있는 GPS 센서 등 측위센서 등을 통해 입수한 본 감시장치의 위치나 전체 운영체제 모드에 돌입한 시각 등을 저장하고 이를 외부로 전송할 수 있다. 물론 본 발명이 이에 한정되는 것은 아님을 밝혀둔다.
한편, 본 감시장치는 전체 운영체제 모드에 돌입하여 동작을 시작하면, 카메라부가 이벤트 발생 정보를 감시장치의 제어부에 전달할 수 있고, 이를 감시장치 내에 포함된 통신부를 통해 외부로 상기 이벤트 발생 정보를 송신할 수 있다(S422). 상기 이벤트 발생 정보에 있어서 이벤트는, 본 감시장치의 모션센서와 카메라부를 통해 감시대상이 존재한다고 판단할 때 발생하며, 이를 이벤트가 발생했다고 칭할 수 있다.
한편, 본 S416 단계와 S422 간에는 어떤 단계가 선행될 필요는 없으며, S416 단계 동작 후 S422 단계가 동작하거나 혹은 그 반대거나 혹은 S416 단계와 S422 단계가 동시에 동작하여도 무방하다.
본 감시장치는 감시대상이 되는 물체가 소정의 거리나 공간 상에서 벗어날 때까지, 혹은 소정의 조건에 이르기까지 여부를 판단하며(S418) 지속적으로 감시장치는 소정의 정해진 동작을 수행한다. 더욱 구체적으로, 감시장치는 감시대상물체를 감지한 후 감시해야 할 대상으로 판단한 경우, 감시대상물체가 이미지 센서부에 더 이상 촬영되지 않거나 거리가 충분히 멀어질 때까지 트래킹(tracking)할 수 있다. 본 명세서의 트래킹이라는 개념은 감시할 대상의 의미상으로 중요한 주요부를 중심으로 지속적으로 촬영한다는 개념이 될 수 있다. 예를 들어, 감시 대상이 차량인 경우, 차량 번호판 또는 차량 운전석을 중심으로 지속적으로 촬영할 수 있다. 또한, 트래킹은 감시장치와 소정의 거리 내에 감시대상물체가 존재하는 경우, 지속적으로 촬영하는 개념이 될 수 있다.
소정의 정해진 동작은 앞서 설명한 바와 같이 감시대상의 영상을 녹화 또는 녹음하는 동작일 수 있다. 한편, 도 2의 순서도 상에서는 물체가 범위에서 벗어나는지 여부를 판단하는 것으로(S418)으로 개시하였으나 본 발명은 이에 한정되지 않으며, 앞서 설명한 바와 마찬가지로 소정의 조건에 이르는지 여부를 판단할 수 있다. 예를 들어, 감시장치의 모션센서의 감지 영역 내에 차량이 출현한 경우, 본 감시장치는 전체 운영체제 모드에서 상기 차량의 영상을 녹화할 수 있지만, 본 차량이 감시장치의 감시 범위에 출현한 후 단순히 정차한 후 지속적으로 같은 지점에 주차된 상태라면 본 발명에 따른 감시장치는 감시대상 물체이 더 이상 감시 조건에 해당하지 않는다고 판단하고 영상 녹화 등을 중지할 수 있다. 이를 통하여, 불필요하게 사용되는 소비전력의 손실을 막을 수 있으며, 또한, 추후에 사용자가 검토해야 할 영상 데이터의 양을 줄일 수 있다.
한편, 도 4를 참조하면, 상기 소정의 조건(제2의 소정의 조건)은 상기 감시대상물체가 상기 감시장치로부터 소정의 범위 내에 있거나 상기 감시대상물체의 이미지가 이미지 센서부의 촬상영역 내에 존재하면서, 소정의 시간 동안 움직이지 않는 것으로 상기 감시장치가 판단하는 경우(S421)이다. 소정의 시간은 예를 들어, 5분이 될 수 있으나 이에 한정되지 않고, 사용자의 선택에 따라 조절할 수 있다.
한편, 상기 제2의 소정의 조건에 따라 본 발명에 따른 감시장치가 카메라부를 대기모드로 전환할 수 있으나, 상기 감시장치가 감시대상물체의 움직임이나 변화 등을 재차 감지하는 경우, S402 단계로 분기하여 동작을 수행할 수 있다. 상기 변화 등은 화재로 인한 불꽃 발생이나 연기 발생 또는 캠코더나 녹음기 등의 각종 기기의 동작 여부를 표시하는 시각적 인디케이터(indicator)의 색깔이나 밝기 변화 등이 될 수 있다. 이를 통해, 본 발명에 따른 감지장치의 내에 존재하지만 가만히 움직이지 않아 감시의 필요성이 낮아진 감시대상물체라도 그 감시대상물체의 변화나 동작 의도를 감지하여 면밀히 감시할 수 있다.
경우에 따라 본 발명의 감시장치가 무선신호를 센싱할 수 있는 라디오 신호 감지 모듈(도면에 미도시)을 포함하고, 상기 감시대상물체가 특정 라디오 신호를 생성하고 있다고 판단하는 경우, 본 발명에 따른 감시장치는 카메라부를 통한 녹화, 상기 특정 라디오 신호 수신 및 저장 등 미리 정해진 동작을 수행할 수 있다.
도 5를 참조하면, 본 발명에 따른 감시장치는 배터리(131), 카메라부(120), 고정부(129), 접속부(128) 등을 포함하여 구성될 수 있다. 상기 고정부는 차량의 앞 유리창이나 상기 감시장치가 고정되어야 할 곳에 접착하여 고정하는 역할을 할 수 있으며, 배터리는 카메라부와 접속부를 통해 전력을 공급할 수 있다. 배터리는 카메라부에 자력 등을 통해 통해 고정될 수 있으나 이에 한정된 것은 아니다. 한편, 도 1의 구성도에는 배터리가 제어부에 포함되어 있는 것으로 도시하였으나, 배터리부를 도 5의 실시예와 같이 별도로 착탈식의 분리되도록 구성할 수 있다.
도 6을 참조하면, 본 발명에 따른 감시장치를 블루투스 등 무선통신을 통해 사용자 단말기가 통신하는 개념을 표시한 것이다. 이를 통해, 종래의 차량용 감시장치와 같이 입출력을 하기 위한 작은 크기의 디스플레이를 통해 명령을 입력하는 것 대신에 사용자 단말기와 직접 통신을 통해 편리하게 사용자 단말기에서 상기 감시장치에 필요한 명령 및 제어를 송출하고, 그 결과를 수신할 수 있다.
본 발명의 실시예에 따르면, 본 발명에 따른 감시장치는 차량용 블랙박스에 사용될 수 있다. 더욱 구체적으로 본 발명에 따른 감시장치는 종래의 차량용 블랙박스 등과 달리 차량에 장착된 차량용 배터리로부터 전력을 끌어 쓰는 것이 아닌 본 발명에 따른 감시장치에 별도로 구비된 배터리를 통해 물체를 감지하여 판단하고 촬영을 할 수 있다.
본 발명의 또 다른 실시예에 따르면, 본 발명에 따른 감시장치는 가정이나 사무실, 각종 매장 등의 설치되어 사용될 수 있다. 예를 들어, 가정이나 사무실의 적절한 위치에 본 발명에 따른 감시장치를 배치하고, 가정이나 사무실이나 창고 등에 부정한 목적을 가진 사람이 침입하는 경우, 그 사람을 감지한 후 감지대상물체로 판단하여 그 감시대상물체를 촬영 또는 녹음 등을 할 수 있다. 아울러, 촬영이나 녹화가 종료되거나 촬영이나 녹화가 시작되는 시점에 감시장치의 사용자에게 알람 메시지를 무선 통신 등을 통해 송신할 수 있다. 또한, 경우에 따라, 촬영 또는 녹화된 데이터도 본 감시장치 내의 통신부를 통해 BLE, WIFI, 3G, 4G LTE 등 다양한 방법으로 다양한 네트워크 토폴리지를 활용하여 원하는 목적지까지 송신할 수 있다. 다양한 방법은 종래의 방법을 통하며, 본 명세서에서는 그 설명을 생략한다.
본 발명에 따른 또 다른 실시예에 따르면, 본 발명에 따른 감시장치는 저전력을 소비하기 위하여, 감시대상물체에 대한 이벤트 정보를 포함하는 데이터를 축적한 후 이를 사용자의 디바이스에 한 번에 송신할 수 있다. 좀 더 상세하게, 본 발명에 따른 감시장치는 양산성과 소비전력을 낮추기 위해 2.4 기가헤르츠 UHF 및 5 기가헤르츠 SHF ISM 무선 대역 등을 사용하는 와이파이(WiFi) 통신모듈을 포함하지 않을 수 있다. 대신 본 발명에 따른 감시장치는 아무런 물체를 감지하지 않은 상태인 대기 모드 혹은 사용자 조작에 따른 명령에 따라 사용자의 모바일 디바이스가 본 감시장치에 근접하면, 자동으로 BLE(Bluetooth Low Energy) 방식으로 사용자 모바일 디바이스와 본 감시장치 간에 통신이 확립되어 데이터를 송수신할 수 있다. 상기 데이터 중에는 타임스탬프, 위치정보, 감시대상물체의 종류, 이벤트 마다의 스냅샷 이미지 등이 될 수 있다.
상술된 방법 및 처리는, 예를 들어, 프로세서, 컨트롤러, 또는 다른 처리 디바이스에 의한 실행을 위한 명령들로서, 인코딩되거나, 컴팩트 디스크 판독 전용 메모리 (CDROM), 자기 또는 광학 디스크, 플래시 메모리, 랜덤 액세스 메모리 (RAM) 또는 판독 전용 메모리 (ROM), 소거가능 프로그램가능 판독 전용 메모리(EPROM) 또는 다른 머신-판독가능 매체와 같은 머신 판독가능 또는 컴퓨터 판독가능 매체에 저장될 수도 있다.
이러한 매체는, 명령 실행가능 시스템, 장치 또는 디바이스에 의해 또는 이와 연결하여 사용하기 위한 실행가능한 명령들을 포함, 저장, 통신, 전파 또는 이동시키는 임의의 디바이스로서 구현될 수도 있다. 대안으로 또는 추가적으로, 하나 이상의 집적 회로, 또는 하나 이상의 프로세서 실행 명령들과 같은 하드웨어를 이용하여 아날로그 또는 디지털 로직으로서; 또는 API (application programming interface) 또는 DLL (Dynamic Link Library), 로컬 또는 원격 절차 호출로서 정의된 또는 공유 메모리에서 이용가능한 기능들의 소프트웨어로; 또는 하드웨어 및 소프트웨어의 조합으로서 구현될 수도 있다.
다른 구현에서, 방법은 신호 또는 전파-신호 매체로 나타내어질 수도 있다. 예를 들어, 임의의 소정의 프로그램의 로직을 구현하는 명령들은 전기, 자기, 광학, 전자기, 적외선 또는 다른 타입의 신호의 형태를 취할 수도 있다. 상술된 시스템은 광섬유 인터페이스, 안테나, 또는 다른 아날로그 또는 디지털 신호 인터페이스와 같은 통신 인터페이스에서 이러한 신호를 수신하고, 그 신호로부터 명령들을 복원하고, 이들을 머신 판독 가능 메모리에 저장하고, 그리고/또는 프로세서를 이용하여 이들을 실행시킬 수도 있다.
또한, 상기 본 발명은 하드웨어 또는 소프트웨어에서 구현될 수 있다. 구현은 상기 본 발명은 또한 컴퓨터로 읽을 수 있는 기록매체에 컴퓨터가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 기록매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 컴퓨터가 읽을 수 있는 기록매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피 디스크, 광 데이터 저장장치 등이 있으며, 또한 캐리어 웨이브(예를 들어 인터넷을 통한 전송)의 형태로 구현되는 것도 포함한다. 또한 컴퓨터가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 컴퓨터가 읽을 수 있는 코드가 저장되고 실행될 수 있다. 그리고 본 발명을 구현하기 위한 기능적인(functional) 프로그램, 코드 및 코드 세그먼트들은 본 발명이 속하는 기술분야의 프로그래머들에 의해 용이하게 추론될 수 있다.
본 발명의 실시예들은 여기에 설명된 방법들 중 하나가 실행되는 프로그램가능 컴퓨터 시스템으로 운영될 수 있는, 전자적으로 판독가능한 제어 신호들을 갖는 캐리어 웨이브를 포함할 수 있다. 본 발명의 실시예들은 프로그램 코드를 갖는 컴퓨터 프로그램 제품으로서 구현될 수 있으며, 프로그램 코드는 컴퓨터 프로그램이 컴퓨터 상에서 구동될 때 방법들 중 하나를 실행하기 위하여 운영된다. 프로그램 코드는 예를 들면 기계 판독가능 캐리어 상에 저장될 수 있다. 본 발명의 일실시예는 컴퓨터 프로그램이 컴퓨터 상에 구동될 때, 여기에 설명된 방법들 중 하나를 실행하기 위한 프로그램 코드를 갖는 컴퓨터 프로그램일 수 있다. 본 발명은 위에서 설명한 방법들 중 하나를 실행하기 위한 컴퓨터, 또는 프로그램가능 논리 장치를 포함할 수 있다. 위에서 설명한 방법들의 일부 또는 모든 기능을 실행하기 위하여 프로그램가능 논리 장치(예를 들면, 필드 프로그램가능 게이트 어레이, 상보성 금속 산화물 반도체 기반 논리 회로)가 사용될 수 있다.
이상, 본 발명의 일 실시예에 대하여 설명하였으나, 해당 기술 분야에서 통상의 지식을 가진 자라면 특허청구범위에 기재된 본 발명의 사상으로부터 벗어나지 않는 범위 내에서, 구성 요소의 부가, 변경, 삭제 또는 추가 등에 의해 본 발명을 다양하게 수정 및 변경시킬 수 있을 것이며, 이 또한 본 발명의 권리범위 내에 포함된다고 할 것이다.
100 : 감시장치
110 : 모션센서
120 : 카메라부
130 : 제어부
140 : 메모리

Claims (15)

  1. 감시장치가 저전력을 사용하여 물체를 감지하는 방법에 있어서,
    상기 감시장치 내에 포함된 모션센서가 물체를 감지하는 물체 감지 단계;
    상기 물체 감지 단계에서 상기 모션센서가 감시대상물체를 판명하는 경우, 상기 모션센서가 상기 감시장치 내에 포함된 카메라부의 구동 전원을 인가 하기 위한 웨이크업(wakeup) 신호를 상기 카메라부에 송신하는 단계;
    상기 카메라부가 상기 감시장치 내에 포함된 이미지 센서부, 영상을 인코딩하는 미디어 처리부 및 컴퓨터 비전(Computer Vision) 분류 처리부의 구동전원을 인가하는 카메라부 구동전원 인가 단계;
    상기 카메라부가 AF, AE, AWB 중 어느 하나 이상을 포함하여 이미지 센서부를 초기화하는 단계;
    상기 미디어 처리부가 상기 이미지 센서부에 입력된 영상을 인코딩하여 생성된 영상 데이터를 임시 메모리에 저장하는 영상 인코딩 및 저장 단계;
    상기 컴퓨터 비전 분류 처리부가 상기 임시 메모리에 저장된 영상 데이터를 분석하여 감시대상물체의 존재 또는 범위 중 어느 하나 이상을 판명하는 경우, 감시장치의 운영 체제(OS)가 부팅하는 운영체제 부팅 단계를 포함하는 것을 특징으로 하는 것을 특징으로 하는 저전력을 사용하여 물체를 감지하는 방법.
  2. 제1항에 있어서, 상기 물체 감지 단계에서,
    카메라부에는 전원이 인가되지 않는 상태인 것을 특징으로 하는 저전력을 사용하여 물체를 감지하는 방법.
  3. 제1항에 있어서, 상기 물체 감지 단계에서,
    상기 모션센서는 감지된 물체의 크기, 물체의 움직이는 속도, 물체의 움직이는 방향 중 어느 하나 이상을 기반으로 상기 물체가 사람 혹은 차량 혹은 그 밖의 물체인지 판단하는 것을 특징으로 하는 저전력을 사용하여 물체를 감지하는 방법.
  4. 제1항에 있어서, 상기 카메라부의 구동전원 인가 단계에서,
    카메라부의 작동을 위해 필요한 부품에 전원을 공급하는 실시간 동작 시스템(RTOS) 모드에서 상기 카메라부가 동작하는 것을 특징으로 하는 저전력을 사용하여 물체를 감지하는 방법.
  5. 제1항에 있어서, 상기 영상 인코딩 및 저장 단계에서,
    상기 임시 메모리는 사용자 편의에 따라 분리가능한 메모리가 아닌 것을 특징으로 하는 저전력을 사용하여 물체를 감지하는 방법.
  6. 제1항에 있어서, 상기 운영체제 부팅 단계 이후,
    상기 감시장치는 상기 감시대상물체가 상기 감시장치로부터 소정의 범위 내에 있거나 상기 감시대상물체의 이미지가 이미지 센서부의 촬상영역 내에 존재하는 경우, 소정의 동작을 수행하는 단계를 더 포함하는 것을 특징으로 하는 저전력을 사용하여 물체를 감지하는 방법.
  7. 제1항에 있어서, 상기 운영체제 부팅 단계 이후,
    상기 감시장치는 상기 감시대상물체가 상기 감시장치로부터 소정의 범위에서 벗어나거나 상기 감시대상물체의 이미지가 이미지 센서부의 촬상영역에서 벗어날 때까지 동작하는 단계를 더 포함하는 것을 특징으로 하는 저전력을 사용하여 물체를 감지하는 방법.
  8. 제6항에 있어서, 상기 동작은 영상을 녹화 또는 음성을 녹음하는 것임을 특징으로 하는 저전력을 사용하여 물체를 감지하는 방법.
  9. 제6항에 있어서, 상기 소정의 동작을 수행하는 단계 이후,
    상기 감시장치는 상기 감시대상물체가 제2 소정의 조건에 해당하는 경우, 상기 카메라부는 대기 모드로 전환하는 것을 특징으로 하는 저전력을 사용하여 물체를 감지하는 방법.
  10. 제9항에 있어서,
    상기 제2 소정의 조건은, 상기 감시대상물체가 상기 감시대상물체가 상기 감시장치로부터 소정의 범위 내에 있거나 상기 감시대상물체의 이미지가 이미지 센서부의 촬상영역 내에 존재하면서, 소정의 시간 동안 움직이지 않는 것으로 상기 감시장치가 판단하는 경우인 것을 특징으로 하는 저전력을 사용하여 물체를 감지하는 방법.
  11. 제1항에 있어서, 상기 운영체제 부팅 단계 이후,
    상기 카메라부가 이벤트 발생 정보를 상기 감시장치의 제어부에 전달하는 단계; 및
    상기 감시장치는 상기 감시장치 내에 포함된 통신부를 통해 외부로 상기 이벤트 발생 정보를 송신하는 단계를 더 포함하는 것을 특징으로 하는 저전력을 사용하여 물체를 감지하는 방법.
  12. 제1항에 있어서,
    상기 모션센서는 레이더 센서인 것을 특징으로 하는 저전력을 사용하여 물체를 감지하는 방법.
  13. 감시장치가 저전력을 사용하여 물체를 감지하는 방법에 있어서,
    상기 감시장치 내에 포함된 모션센서가 물체를 감지하는 물체 감지 단계;
    상기 물체 감지 단계에서 상기 모션센서가 감시대상물체를 판명하는 경우, 상기 모션센서가 상기 감시장치 내에 포함된 카메라부의 구동 전원을 인가 하기 위한 웨이크업(wakeup) 신호를 상기 카메라부에 송신하는 단계;
    상기 카메라부가 상기 감시장치 내에 포함된 이미지 센서부, 영상을 인코딩하는 미디어 처리부 및 컴퓨터 비전(Computer Vision) 분류 처리부의 구동전원을 인가하는 카메라부 구동전원 인가 단계;
    상기 이미지 센서부가 AF, AE , AWB 제어를 포함하여 이미지 센서부를 초기화하는 단계;
    상기 미디어 처리부가 상기 이미지 센서부에 입력된 영상을 인코딩하여 생성된 영상 데이터를 임시 메모리에 저장하는 영상 인코딩 및 저장 단계;
    상기 컴퓨터 비전 분류 처리부가 상기 임시 메모리에 저장된 영상 데이터를 분석하여 감시대상물체의 존재 및 범위를 판명하지 못하는 경우, 상기 카메라부는 대기 모드로 전환하는 것을 특징으로 하는 저전력을 사용하여 물체를 감지하는 방법.
  14. 제1 항 내지 제13 항 중 어느 항에 기재된 저전력을 사용하여 물체를 감지하는 방법을 실행시키는 기록매체에 저장된 컴퓨터 프로그램.
  15. 저전력을 사용하여 물체를 감지하는 감시장치에 있어서,
    상기 감시장치는 감시대상물체를 감지하고, 감시대상물체를 판명하는 경우, 상기 감시장치 내에 포함된 카메라부의 구동 전원을 인가 하기 위한 웨이크업(wakeup) 신호를 상기 카메라부에 송신하는 모션센서;
    이미지 센서부, 영상을 인코딩하는 미디어 처리부, 컴퓨터 비전(Computer Vision) 분류 처리부 및 임시메모리를 포함하는 카메라부를 포함하되,
    상기 카메라부는 AF, AE, AWB 중 어느 하나 이상을 포함하여 이미지 센서부를 초기화하고, 상기 이미지 센서부에 입력된 영상을 인코딩하여 생성된 영상 데이터를 임시 메모리에 저장하고, 상기 컴퓨터 비전 분류 처리부가 상기 임시 메모리에 저장된 영상 데이터를 분석하여 감시대상물체의 존재 또는 범위 중 어느 하나 이상을 판명하는 경우, 감시장치의 운영 체제(OS)가 부팅하는 것을 특징으로 하는,
    저전력을 사용하여 물체를 감지하는 감시장치.
KR1020220044503A 2022-04-11 2022-04-11 저전력을 사용하여 물체를 감지하는 방법 및 그에 따른 감시장치 KR102601637B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020220044503A KR102601637B1 (ko) 2022-04-11 2022-04-11 저전력을 사용하여 물체를 감지하는 방법 및 그에 따른 감시장치
PCT/KR2023/004340 WO2023200159A1 (ko) 2022-04-11 2023-03-31 저전력을 사용하여 물체를 감지하는 방법 및 그에 따른 감시장치

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020220044503A KR102601637B1 (ko) 2022-04-11 2022-04-11 저전력을 사용하여 물체를 감지하는 방법 및 그에 따른 감시장치

Publications (3)

Publication Number Publication Date
KR20230145749A true KR20230145749A (ko) 2023-10-18
KR102601637B1 KR102601637B1 (ko) 2023-11-13
KR102601637B9 KR102601637B9 (ko) 2024-03-15

Family

ID=88329865

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020220044503A KR102601637B1 (ko) 2022-04-11 2022-04-11 저전력을 사용하여 물체를 감지하는 방법 및 그에 따른 감시장치

Country Status (2)

Country Link
KR (1) KR102601637B1 (ko)
WO (1) WO2023200159A1 (ko)

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20090112979A (ko) * 2008-04-25 2009-10-29 주식회사 옥타컴 저전력 무선 카메라시스템 및 그 장치
KR20150107931A (ko) 2014-03-13 2015-09-24 재단법인 다차원 스마트 아이티 융합시스템 연구단 저전력 소비 구조의 카메라 영상 저장 장치
KR20150107929A (ko) 2014-03-13 2015-09-24 재단법인 다차원 스마트 아이티 융합시스템 연구단 차량용 블랙박스의 영상 저장 방법
KR20180101848A (ko) * 2017-03-06 2018-09-14 콘텔라 주식회사 고속 부팅이 가능한 차량용 블랙박스 및 그 이미지 촬영방법
KR20190072703A (ko) * 2017-12-15 2019-06-26 진영배 재난사고 비상 신호의 전송 안전시스템 및 전송안전 관리방법
KR20210065639A (ko) * 2019-11-27 2021-06-04 넥서스텍(주) 모션과 감성 감지를 통한 cctv 시스템 및 그 운영 방법
US11182319B1 (en) 2020-10-13 2021-11-23 Omnivision Technologies, Inc. Camera system with PWM-activated, burst-self-refresh, DRAM to reduce standby power consumption

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102369793B1 (ko) * 2015-12-03 2022-03-03 한화테크윈 주식회사 감시 방법 및 장치

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20090112979A (ko) * 2008-04-25 2009-10-29 주식회사 옥타컴 저전력 무선 카메라시스템 및 그 장치
KR20150107931A (ko) 2014-03-13 2015-09-24 재단법인 다차원 스마트 아이티 융합시스템 연구단 저전력 소비 구조의 카메라 영상 저장 장치
KR20150107929A (ko) 2014-03-13 2015-09-24 재단법인 다차원 스마트 아이티 융합시스템 연구단 차량용 블랙박스의 영상 저장 방법
KR20180101848A (ko) * 2017-03-06 2018-09-14 콘텔라 주식회사 고속 부팅이 가능한 차량용 블랙박스 및 그 이미지 촬영방법
KR20190072703A (ko) * 2017-12-15 2019-06-26 진영배 재난사고 비상 신호의 전송 안전시스템 및 전송안전 관리방법
KR20210065639A (ko) * 2019-11-27 2021-06-04 넥서스텍(주) 모션과 감성 감지를 통한 cctv 시스템 및 그 운영 방법
US11182319B1 (en) 2020-10-13 2021-11-23 Omnivision Technologies, Inc. Camera system with PWM-activated, burst-self-refresh, DRAM to reduce standby power consumption

Also Published As

Publication number Publication date
KR102601637B1 (ko) 2023-11-13
WO2023200159A1 (ko) 2023-10-19
KR102601637B9 (ko) 2024-03-15

Similar Documents

Publication Publication Date Title
US7218993B2 (en) Robot system and autonomous mobile robot
US20180322751A1 (en) Security devices and associated audio/video communication methods
KR20140128885A (ko) 전력 효율적인 이미지 감지 장치, 이미지 감지 장치의 작동 방법 및 눈/시선 추적 시스템
KR20190051594A (ko) 복수의 카메라들을 이용하여 영상을 촬영하는 전자 장치와 이의 동작 방법
WO2018139752A1 (ko) 복수의 카메라를 제어하는 방법 및 전자 장치
US11019272B2 (en) Automatic dynamic range control for audio/video recording and communication devices
US11570358B1 (en) Using remote sensors to resolve start up latency in battery-powered cameras and doorbell cameras
US11563888B2 (en) Image obtaining and processing apparatus including beacon sensor
US20210152750A1 (en) Information processing apparatus and method for controlling the same
KR102512839B1 (ko) 외부 장치의 자세 조정을 통해 복수의 카메라들을 이용하여 이미지를 획득하는 전자 장치 및 방법
KR102668233B1 (ko) 관심 영역을 통해 움직이는 외부 객체에 대해 프레임 레이트를 제어하여 이미지들을 획득하는 전자 장치 및 그의 동작 방법
KR102601637B1 (ko) 저전력을 사용하여 물체를 감지하는 방법 및 그에 따른 감시장치
JP2020126535A (ja) 情報処理装置、情報処理装置の制御方法およびプログラム
US9264613B2 (en) Apparatus and method for controlling current consumption of mobile terminal
US10778887B1 (en) Security application using camera SOC with multi-sensor capabilities
CN112202990A (zh) 视频预录方法及摄像机、电子设备
JP2004220224A (ja) 物体検知装置および方法
CN116095497B (zh) 曝光控制方法、装置和终端设备
US20220337740A1 (en) Image capturing apparatus, control method of image capturing apparatus, and storage medium
KR20240044110A (ko) 모니터링 디바이스 및 그 제어 방법
CN113706807B (zh) 发出报警信息的方法、装置、设备及存储介质
KR102227517B1 (ko) IoT 기반의 IP 카메라 시스템 및 그의 제어 방법
KR101971477B1 (ko) 영상획득장치 및 영상처리장치
KR101793810B1 (ko) 방향이동 스마트 조명장치
KR20210037179A (ko) 움직임 검출 장치 및 방법

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
G170 Re-publication after modification of scope of protection [patent]