KR102631928B1 - 재난 및 안전사고시 구조자의 위치정보를 제공하는실시간 영상 복원 시스템 - Google Patents
재난 및 안전사고시 구조자의 위치정보를 제공하는실시간 영상 복원 시스템 Download PDFInfo
- Publication number
- KR102631928B1 KR102631928B1 KR1020230103617A KR20230103617A KR102631928B1 KR 102631928 B1 KR102631928 B1 KR 102631928B1 KR 1020230103617 A KR1020230103617 A KR 1020230103617A KR 20230103617 A KR20230103617 A KR 20230103617A KR 102631928 B1 KR102631928 B1 KR 102631928B1
- Authority
- KR
- South Korea
- Prior art keywords
- real
- unit
- time
- image
- sensor unit
- Prior art date
Links
- 238000001514 detection method Methods 0.000 claims abstract description 48
- 230000004927 fusion Effects 0.000 claims abstract description 27
- 238000001931 thermography Methods 0.000 claims abstract description 13
- 239000000463 material Substances 0.000 claims description 4
- 239000004615 ingredient Substances 0.000 claims description 2
- CURLTUGMZLYLDI-UHFFFAOYSA-N Carbon dioxide Chemical compound O=C=O CURLTUGMZLYLDI-UHFFFAOYSA-N 0.000 description 14
- 230000017525 heat dissipation Effects 0.000 description 8
- 229910002092 carbon dioxide Inorganic materials 0.000 description 7
- 239000001569 carbon dioxide Substances 0.000 description 7
- 238000012545 processing Methods 0.000 description 6
- 239000000779 smoke Substances 0.000 description 6
- 238000000034 method Methods 0.000 description 5
- 230000005540 biological transmission Effects 0.000 description 4
- 238000010586 diagram Methods 0.000 description 4
- 238000005259 measurement Methods 0.000 description 4
- 238000004140 cleaning Methods 0.000 description 3
- 238000011109 contamination Methods 0.000 description 3
- 239000007788 liquid Substances 0.000 description 3
- 238000004891 communication Methods 0.000 description 2
- 238000013480 data collection Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 230000007613 environmental effect Effects 0.000 description 2
- 230000010363 phase shift Effects 0.000 description 2
- 230000035943 smell Effects 0.000 description 2
- 230000036760 body temperature Effects 0.000 description 1
- 239000011248 coating agent Substances 0.000 description 1
- 238000000576 coating method Methods 0.000 description 1
- 238000012790 confirmation Methods 0.000 description 1
- 230000005021 gait Effects 0.000 description 1
- 239000004519 grease Substances 0.000 description 1
- 238000012806 monitoring device Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000005192 partition Methods 0.000 description 1
- 230000035515 penetration Effects 0.000 description 1
- 229920001296 polysiloxane Polymers 0.000 description 1
- 239000012925 reference material Substances 0.000 description 1
- 230000029058 respiratory gaseous exchange Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000035945 sensitivity Effects 0.000 description 1
- 230000003595 spectral effect Effects 0.000 description 1
- 239000000126 substance Substances 0.000 description 1
- 238000002366 time-of-flight method Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/50—Image enhancement or restoration by the use of more than one image, e.g. averaging, subtraction
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/25—Fusion techniques
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
- G06T11/60—Editing figures and text; Combining figures or text
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
- G06T17/05—Geographic models
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/20—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from infrared radiation only
- H04N23/23—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from infrared radiation only from thermal infrared radiation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/45—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from two or more image sensors being of different type or operating in different modes, e.g. with a CMOS sensor for moving images in combination with a charge-coupled device [CCD] for still images
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R1/00—Details of transducers, loudspeakers or microphones
- H04R1/20—Arrangements for obtaining desired frequency or directional characteristics
- H04R1/32—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only
- H04R1/326—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only for microphones
Abstract
본 발명의 재난 및 안전사고시 구조자의 위치정보를 제공하는 실시간 영상 복원 시스템은, 미리 설정된 감시영역을 촬영하는 카메라부와, 상기 감시영역의 열상을 감지하는 열화상센서부와, 소정의 주파수 영역의 신호를 송수신하여 상기 감시영역의 객체를 검출하는 객체감지센서부와, 상기 열화상센서부의 감지 데이터와 상기 객체감지센서부의 검출결과를 토대로 구조를 요하는 구조자인지를 판단한 후, 사물이 시각적으로 식별되는 과거시점의 상기 카메라부의 촬영영상에 상기 구조자의 영상을 함께 융합하여 실시간 융합영상을 생성하는 영상 복원부를 포함하는 것을 특징으로 한다.
Description
본 발명은 감시 카메라 영상 제공장치에 관한 것으로서, 더 상세하게는 재난 및 안전사고시 구조자의 위치정보를 제공하는 실시간 영상 복원 시스템에 관한 것이다.
감시 카메라는 감시영역의 영상을 모니터링 장치로 전송하여, 감시영역의 상황을 신속하게 파악할 수 있는 장치이다.
종래의 감시 카메라는 시야가 확보되지 않은(화재, 연기, 폭설, 침수, 붕괴 어둠) 상황이 발생했을 경우, 촬영영상이 시각적으로 확인이 되지 않아 문제상황을 파악할 수 없는 경우가 발생하고 있다. 따라서 열상센서를 추가로 구비하여, 구조가 필요한 사람이 있는지를 확인하는 시스템이 출시되고 있다.
하지만, 종래의 시스템의 경우, 열상센서의 감지 데이터로 사람의 존재 유무만 파악할 수 있을 뿐이며, 건물구조에 익숙하지 않은 119 구조팀에게 구조자의 위치를 정확하게 제공할 수 없는 단점이 있다.
본 발명은 상기와 같은 기술적 과제를 해결하기 위해 제안된 것으로, 시각적으로 식별되는 과거시점의 촬영영상에 구조자의 검출정보를 함께 융합하여 실시간 융합영상을 생성할 수 있는 실시간 영상 복원 시스템을 제공한다.
상기 문제점을 해결하기 위한 본 발명의 일 실시예에 따르면, 미리 설정된 감시영역을 촬영하는 카메라부와, 상기 감시영역의 열상을 감지하는 열화상센서부와, 소정의 주파수 영역의 신호를 송수신하여 상기 감시영역의 객체를 검출하는 객체감지센서부와, 상기 열화상센서부의 감지 데이터와 상기 객체감지센서부의 검출결과를 토대로 구조를 요하는 구조자인지를 판단한 후, 사물이 시각적으로 식별되는 과거시점의 상기 카메라부의 촬영영상에 상기 구조자의 검출정보를 함께 융합하여 실시간 융합영상을 생성하는 영상 복원부를 포함하는 실시간 영상 복원 시스템이 제공된다.
또한, 본 발명에 포함되는 영상 복원부는, 상기 실시간 융합영상을 설정된 주기마다 미리 등록된 외부 단말기로 송신하는 것을 특징으로 한다.
또한, 본 발명에 포함되는 객체감지센서부는, 레이더 센서, 라이다 센서, 적외선 센서 및 초음파 센서 중 적어도 어느 하나 이상을 포함하는 것을 특징으로 한다.
또한, 본 발명은 감시영역에서 발생하는 소리의 위치를 식별하기 위한 적어도 하나 이상의 지향성 마이크를 더 포함하는 것을 특징으로 한다.
또한, 본 발명은 카메라부, 열화상센서부 및 객체감지센서부를 수용하는 케이스부를 더 포함하는 것을 특징으로 한다.
또한, 본 발명에 포함되는 영상 복원부는, 카메라의 촬영영상을 바탕으로 가상의 3차원 공간지도를 생성한 후, 상기 구조자의 검출정보를 함께 융합하여 3차원 실시간 융합영상을 생성하는 것을 특징으로 한다.
본 발명의 실시예에 따른 재난 및 안전사고시 구조자의 위치정보를 제공하는 실시간 영상 복원 시스템은, 시각적으로 식별되는 과거시점의 촬영영상에 구조자의 영상을 함께 융합하여 실시간 융합영상을 생성하여 외부로 제공할 수 있다.
즉, 본 발명의 실시간 영상 복원 시스템은 실시간 감시 카메라 영상이 재난 및 안전사고(화재, 연기, 폭설, 침수, 붕괴, 어둠) 등의 환경조건에 의해 카메라 영상이 시각적으로 보이지 않을 경우, 최근 시간의 선명한 영상을 재생/표출하고 각종센서(레이더, 라이다, 적외선, 초음파, 마이크, 연기, 불꽃 , 냄새, 열화상)를 이용하여 실시간 감시 카메라 투시 방향의 움직임, 물체의 형태, 기존 영상과의 변화, 객체인식 등을 수행한다.
도 1은 본 발명의 실시간 영상 복원 시스템(1)의 개념도
도 2는 도 1의 실시간 영상 복원 시스템(1)의 실시예에 따른 구성도
도 3은 본 발명의 실시간 영상 복원 시스템(1)을 통해 생성된 실시간 융합영상의 예시도
도 2는 도 1의 실시간 영상 복원 시스템(1)의 실시예에 따른 구성도
도 3은 본 발명의 실시간 영상 복원 시스템(1)을 통해 생성된 실시간 융합영상의 예시도
이하, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 본 발명의 기술적 사상을 용이하게 실시할 수 있을 정도로 상세히 설명하기 위하여, 본 발명의 실시예를 첨부한 도면을 참조하여 설명하기로 한다.
도 1은 본 발명의 실시간 영상 복원 시스템(1)의 개념도이고, 도 2는 도 1의 실시간 영상 복원 시스템(1)의 실시예에 따른 구성도이고, 도 3은 본 발명의 실시간 영상 복원 시스템(1)을 통해 생성된 실시간 융합영상의 예시도이다.
본 실시예에 따른 실시간 영상 복원 시스템(1)은 제안하고자 하는 기술적인 사상을 명확하게 설명하기 위한 간략한 구성만을 포함하고 있다.
도 1 내지 도 3을 참조하면, 본 발명의 실시예에 따른 실시간 영상 복원 시스템(1)은 카메라부(110), 열화상센서부(120), 객체감지센서부(130), 지향성 마이크(140), 영상 복원부(200), 네트워크 허브(310), 실시간 영상출력부(320), 실시간 융합영상출력부(330), 영상 저장부(340), 영상원격전송부(350) 및 외부 단말기(360)를 포함하여 구성된다.
상기와 같이 구성되는 실시간 영상 복원 시스템(1)의 주요동작을 살펴보면 다음과 같다.
카메라부(110)는 최소 30fps 이상으로 미리 설정된 감시영역을 촬영하도록 설치된다. 예를 들어 특정 사무실 공간에 복수 개의 카메라(카메라 그룹)를 포함하는 카메라부(110)가 설치될 수 있으며, 각 카메라는 자신에게 할당된 감시영역을 촬영한다. 이때, 각 카메라는 이웃하는 카메라와 소정의 중복된 영역을 촬영하도록 설정되는 것이 바람직하다. 각 카메라는 구동부가 설치되어 촬영방향을 변경할 수 있도록 구성될 수 있다.
참고적으로 카메라부(110)는 자체적으로 촬영영상을 저장할 수 있는 영상저장부와 영상처리를 수행하거나 객체인식을 수행하는 영상처리부를 포함한다.
열화상센서부(120)는 감시영역의 열상을 감지하는데, 내장된 제어부에서 센싱 데이터를 기반으로 화재가 발생했을 경우 화염에 따른 온도 분포를 파악할 수 있을 뿐만 아니라 체온에 따른 사람(구조자)의 형체를 식별하여 구조자를 식별할 수 있다.
열화상센서부(120)는 초광대역/저전력의 매우 좁은 펄스를 송신하고 정밀한 해상도로 수신 펄스 신호를 복원하기 위한 임펄스 레이더용 RF 송수신 칩셋과 수신된 레이더 신호로부터 클러터 제거, 움직이는 물체에 대한 특징수집(속도), 자세 추정(걸음걸이) 그리고 정지한 물체의 특성(호흡) 등을 추정할 수 있는 레이더 신호처리 알고리즘을 적용하여 활용할 수도 있다.
참고적으로 열화상센서부(120)는 각각의 카메라와 동일한 수로 구비되고, 각 카메라와 동일한 감시영역을 감지하도록 설정되는 것이 바람직하다. 기본적으로 실시간 영상 복원 시스템(1)에서는 각 카메라의 구동부를 통해 촬영각도가 조절될 경우, 열화상센서부(120)의 감지범위도 그에 대응되도록 자동조절된다.
객체감지센서부(130)는 소정의 주파수 영역의 신호를 송수신하여 감시영역의 객체를 검출하는 한다. 객체감지센서부(130)는 레이더 센서, 라이다 센서, 적외선 센서 및 초음파 센서 중 적어도 어느 하나 이상을 포함할 수 있다. 객체감지센서부(130)는 감지된 데이터를 처리하는 신호 처리부를 포함한다.
또한, 객체감지센서부(130)는 마이크, 연기센서, 불꽃센서, 후각센서 중 적어도 어느 하나 이상을 더 포함할 수 있다.
특히, 라이다(LiDAR, Laser Detection And Ranging) 센서는 레이저를 목표물에 비춤으로써 사물까지의 거리, 방향, 속도, 온도, 물질 분포 및 농도 특성 등을 감지할 수 있는 장치이다. 라이다 센서의 구성은 레이저 송신부, 레이저 검출부, 신호 수집 및 처리와 데이터를 송수신하기 위한 부분으로 구분될 수 있다. 아울러 라이다 센서는 레이저 신호의 변조 방법에 따라 time-of-flight(TOF) 방식과 phaseshift 방식으로 구분될 수 있다. TOF 방식은 레이저가 펄스 신호를 방출하여 측정 범위 내에 있는 물체들로부터의 반사 펄스 신호들이 수신기에 도착하는 시간을 측정함으로써 거리를 측정하는 것이 가능하다. Phase-shift 방식은 특정 주파수를 가지고 연속적으로 변조되는 레이저 빔을 방출하고 측정 범위 내에 있는 물체로부터 반사되어 되돌아오는 신호의 위상 변화량을 측정하여 시간 및 거리를 계산하는 방식이다.
레이저 광원은 250nm부터 11μm까지의 파장 영역에서 특정 파장을 가지거나 파장 가변이 가능한 레이저 광원들이 사용되며, 최근에는 소형, 저전력이 가능한 반도체 레이저 다이오드가 많이 사용된다. 특히, 레이저의 파장은 대기, 구름, 비 등에 대한 투과성과 eye-safety 에 직접적인 영향을 준다. 기본적으로 레이저 출력, 파장, 스펙트럼 특성, 펄스 폭 및 모양 등과 함께 수신기의 수신감도 및 다이내믹 레인지, 그리고 광학필터 및 렌즈의 특성이 라이다의 성능을 결정하는 주요 요인이다. 이와 함께 수신기의 측정 각도를 나타내는 Field Of View(FOV), 측정 범위를 선택하기 위한 field stop, 레이저빔과 수신기의 FOV overlap 특성 등도 중요한 항목이다. 광속에 대하여 단위 데이터 수집을 위한 최소 시간은 거리 분해능(range resolution)을 결정하는 요인이며, 따라서 1m 이하의 거리 분해능을 위해서는 수 ns 이내의 데이터 수집 및 처리가 요구된다. 본 발명에서는 이와 같은 라이다(LiDAR) 센서가 사용됨으로서 미리 설정된 촬영영역의 3차원 영상을 실시간으로 확보할 수 있다. 이때 사용되는 파장은 가변될 수 있다.
지향성 마이크(140)는 적어도 어느 하나 이상이 구비될 수 있으며, 감시영역에서 발생하는 소리의 위치를 식별하기 위해 배치된다. 본 실시예에서 복수의 지향성 마이크는 미리 설정된 각 방향에서 감지되는 소리를 인식한다.
예를 들어 4개의 마이크가 동일한 위치에 배치될 경우 각 마이크 사이에는 격벽이 설치되어 소리의 진원지를 파악하는데 보조적인 도움을 줄 수 있다. 마이크의 제어부 또는 영상 복원부(200)는 수집된 소리에서 긴급 음성 패턴이 검출될 때, 카메라부(110), 열화상센서부(120), 객체감지센서부(130)를 소리가 수집된 방향으로 촬영하도록 제어할 수 있다.
영상 복원부(200)는 열화상센서부(120)의 감지 데이터와 객체감지센서부(130)의 검출결과를 토대로 구조를 요하는 구조자인지를 판단한 후, 사물이 시각적으로 식별되는 과거시점의 카메라부(110)의 촬영영상에 구조자의 검출정보를 함께 융합하여 실시간 융합영상을 생성한다.
이때, 영상 복원부(200)는 실시간 융합영상을 설정된 주기 또는 실시간으로 미리 등록된 외부 단말기(360)로 전송할 수 있다. 또한, 외부 단말기(360)는 긴급 자동차, 긴급 상황실, 기타 원격지 또는 관리자 단말로 정의될 수 있다.
또한, 영상 복원부(200)는 카메라의 촬영영상을 바탕으로 가상의 3차원 공간지도를 생성한 후, 구조자의 검출정보를 함께 융합하여 3차원 실시간 융합영상을 생성하고, 외부 단말기(360) 전송할 수도 있다.
본 발명의 실시예에서 네트워크 허브(310)는 시스템의 각 구성들의 통신을 담당하는 유선 및 무선 네트워크 장치로 정의되고, 실시간 영상출력부(320)는 카메라부(110)의 실시간 영상을 표시하는 모니터로 정의되고, 실시간 융합영상 출력부(330)는 구조자의 검출정보를 함께 융합하여 생성된 실시간 융합영상을 표시하는 모니터로 정의된다. 영상 저장부(340)는 실시간 영상 및 실시간 융합영상을 저장하고, 영상원격전송부(350)는 사전에 설정된 긴급 자동차, 긴급 상황실, 기타 원격로 유선 또는 무선으로 실시간 융합영상을 전송한다.
참고적으로 실시간 융합영상을 전송하는 구성은 실시예마다 달라질 수 있다. 즉, 영상 복원부(200)에서 실시간 융합영상을 생성한 후 내장된 통신모듈을 통해 외부 단말기 또는 미리 설정된 단말기(모니터)에 실시간 융합영상을 전송할 수도 있다.
한편, 도면에는 미도시되었으나, 실시간 영상 복원 시스템(1)은 카메라부(110), 열화상센서부(120) 및 객체감지센서부(130)를 수용하는 케이스부를 더 포함하여 구성될 수 있다.
케이스부에는 일단면에 형성되는 개구부 및 상기 개구부로부터 유입되는 수분을 차단하기 위한 분리막이 구비될 수 있다.
또한, 케이스부는, 타단면에 밀착되어 결합될 수 있도록 형성되는 방열커버를 포함하고, 방열커버는 외부공기와 접촉하는 복수의 방열핀을 포함하며, 복수의 방열핀은 각각, 각 방열핀 내부에 소정의 빈공간이 형성되고 빈공간 내에 방열액이 구비될 수 있다.
특히, 방열커버는 소정의 양각패턴과 소정의 음각패턴이 반복되면서 형성되는 접촉면과, 케이스의 타단면과 접촉면의 일단면 사이에서 열을 확산 및 전도시키는 전도부재와, 접촉면의 타단면에 형성되어 외부공기와 접촉하는 복수의 방열핀을 구비하여 구성될 수 있다.
상술한 바와 같이, 특히 소정의 양각패턴과 소정의 음각패턴이 반복되면서 형성되는 접촉면은 접촉면적이 확대될 뿐만 아니라 실리콘 서멀패드, 서멀 그리스, 방열코팅액 등과 같은 전도부재가 더 부가됨으로서 방열 효율성이 증가되는 효과가 발생한다.
또한, 카메라부(110), 열화상센서부(120), 객체감지센서부(130)는 외부 이물질에 오염될 수 있으므로, 케이스부 내부에는 카메라부(110), 열화상센서부(120), 객체감지센서부(130)를 세척액을 이용하여 세척하는 센서 자동 세척부가 각각 구비될 수 있다. 센서 자동 세척부는, 각 센서부의 오염상태를 촬영하는 내부 카메라와, 각 센서부의 외곽둘레를 따라 회전하면서 진동을 출력하는 초음파 진동자를 포함하고, 초음파 진동자는 내부 카메라의 촬영 데이터를 기반으로 파악된 오염정도 및 오염형태를 바탕으로 회전경로의 각 지점마다 서로 다른 세기의 진동을 출력할 수 있다.
또한, 영상 복원부(200)는 감시영역에 비치된 비품들의 재질정보를 저장하고 있는데, 재질정보는 발화온도 및 발화시 발생하는 예상유해성분정보를 포함하고 있다.
따라서, 영상 복원부(200)는 카메라부(110)의 촬영정보, 열화상센서부(120)의 감지온도 및 객체감지센서부(130)의 비품형태정보를 토대로 비품들이 발화하고 있는지와 그에 따른 유해성분정보를 실시간 융합영상과 함께 외부 단말기(360)로 전송할 수 있다.
또한, 카메라부(110) 또는 영상 복원부(200)는 감시영역의 촬영영상에서 공간의 상주인원 및 내부면적을 자동 감지하고, 상주인원 및 내부면적을 고려하여 이산화탄소 누적량 추정하고 경고를 출력하는 지연시간을 자동조절할 수 있다. 특히, 즉, 카메라부(110) 또는 영상 복원부(200)는 상주인원의 객체인식을 바탕으로 여성, 남성, 키, 체격을 구분하여 이산화탄소 배출량을 구분할 수 있다.
즉, 실시간 영상 복원 시스템(1)에 이산화탄소 농도 예측모드가 설정되면,
카메라부(110) 또는 영상 복원부(200)는 촬영영상에서 감지영역 내 공간의 상주인원과, 내부면적을 자동 감지하고, 상주인원 및 내부면적을 고려하여 이산화탄소 누적량 추정하고 경고를 출력하는 지연시간을 자동조절 할 수 있다. 즉, 객체인식을 바탕으로 이산화탄소의 배출량을 추정한 후, 밀폐된 공간에서 이산화탄소가 소정의 위험수치에 도달하기까지의 시간인, 경고를 출력하는 지연시간을 자동조절할 수 있다. 이때 감시영역은 밀폐공간으로 가정하며, 카메라부(110) 또는 영상 복원부(200)는 카메라 영상을 토대로 출입문 및 창문의 개방정도, 개방시간, 출입문 및 창문 면적을 모두 고려하여 이산화탄소 누적량을 추정할 수도 있다.
또한, 카메라부(110)는 도플러 센서를 포함하여 구성될 수 있다. 예를 들어, 감시영역에 제1 카메라부 및 제2 카메라부는 서로 대각선 방향으로 마주보는 위치에 각각 설치된다. 도플러 센서는 마이크로파 신호가 움직이는 대상에 부딪히면, 이 신호의 주파수는 도플러 효과에 의해 주파수 변화가 발생한다. 만약, 움직임이 발생한다면, 움직임에 따라 마이크로파 신호의 위상변화가 있게 된다. 도플러 센서는 송신부 및 수신부가 쌍으로 구성되며, 주파수 또는 출력전원을 조절하여 감지거리를 조절할 수 있도록 구성될 수 있다.
따라서 제1 및 제2 카메라부의 도플러 센서는 장애물에 의한 사각지역에 객체(사람)가 위치할 경우, 사람이 존재유무 및 움직임 상태를 검출하기 위해 구비된다. 이때, 대각선 방향으로 마주보고 배치되는 제1 및 제2 카메라부의 도플러 센서의 검출결과가 서로 동일할 때, 객체의 움직임이 발생했다고 판단하여 감지 신뢰도를 향상시킬 수 있다
본 발명의 실시예에 따른 재난 및 안전사고시 구조자의 위치정보를 제공하는 실시간 영상 복원 시스템은,시각적으로 식별되는 과거시점의 촬영영상에 구조자의 영상을 함께 융합하여 실시간 융합영상을 생성하여 외부로 제공할 수 있다.
즉, 본 발명의 실시간 영상 복원 시스템은 실시간 감시 카메라 영상이 재난 및 안전사고(화재, 연기, 폭설, 침수, 붕괴, 어둠) 등의 환경조건에 의해 카메라 영상이 시각적으로 보이지 않을 경우, 최근 시간의 선명한 영상을 재생/표출하고 각종센서(레이더, 라이다, 적외선, 초음파, 마이크, 연기, 불꽃 , 냄새, 열화상)를 이용하여 실시간 감시 카메라 투시 방향의 움직임, 물체의 형태, 기존 영상과의 변화, 객체인식 등을 수행한다.
또한, 실시간 영상 복원 시스템은 감지분석 프로그램을 통해 현재 실시간 감시 카메라의 실시간 영상은 보이지 보이지 않더라도 과거 최근 시간의 선명한 영상을 가져온 화면에 각종 변화 모습을 복원/표출하여 실시간 융합영상으로서 실시간 영상과 동일한 모습을 화면에 표출하므로, 내부공간의 배치형태와 인명의 위치, 상태 확인 등의 참고 자료로 신속 정확한 구조에 도움을 줄 수 있다.
이와 같이, 본 발명이 속하는 기술분야의 당업자는 본 발명이 그 기술적 사상이나 필수적 특징을 변경하지 않고서 다른 구체적인 형태로 실시될 수 있다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적인 것이 아닌 것으로서 이해해야만 한다. 본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구범위의 의미 및 범위 그리고 그 등가개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.
110 : 카메라부
120 : 열화상센서부
130 : 객체감지센서부
140 : 지향성 마이크
200 : 영상 복원부
310 : 네트워크 허브
320 : 실시간 영상출력부
330 : 실시간 융합영상출력부
340 : 영상 저장부
350 : 영상원격전송부
360 : 외부 단말기
120 : 열화상센서부
130 : 객체감지센서부
140 : 지향성 마이크
200 : 영상 복원부
310 : 네트워크 허브
320 : 실시간 영상출력부
330 : 실시간 융합영상출력부
340 : 영상 저장부
350 : 영상원격전송부
360 : 외부 단말기
Claims (6)
- 미리 설정된 감시영역을 촬영하는 카메라부;
상기 감시영역의 열상을 감지하는 열화상센서부;
소정의 주파수 영역의 신호를 송수신하여 상기 감시영역의 객체를 검출하는 객체감지센서부; 및
상기 열화상센서부의 감지 데이터와 상기 객체감지센서부의 검출결과를 토대로 구조를 요하는 구조자인지를 판단한 후, 사물이 시각적으로 식별되는 과거시점의 상기 카메라부의 촬영영상에 상기 구조자의 검출정보를 함께 융합하여 실시간 융합영상을 생성하는 영상 복원부;를 포함하고,
상기 영상 복원부는, 상기 카메라의 촬영영상을 바탕으로 가상의 3차원 공간지도를 생성한 후, 상기 구조자의 검출정보를 함께 융합하여 3차원 실시간 융합영상을 생성함에 있어서, 상기 영상 복원부는 상기 감시영역에 비치된 비품들의 재질정보 - 발화온도 및 발화시 발생하는 예상유해성분정보를 포함함 - 를 저장하고 있으며, 상기 카메라부의 촬영정보, 상기 열화상센서부의 감지온도 및 상기 객체감지센서부의 비품형태정보를 토대로 비품들이 발화하고 있는지와 그에 따른 유해성분정보를 실시간 융합영상과 함께 전송하는 것을 특징으로 하는 실시간 영상 복원 시스템.
- 제1항에 있어서,
상기 영상 복원부는,
상기 실시간 융합영상을 설정된 주기마다 미리 등록된 외부 단말기로 송신하는 것을 특징으로 하는 실시간 영상 복원 시스템.
- 제1항에 있어서,
상기 객체감지센서부는,
레이더 센서, 라이다 센서, 적외선 센서 및 초음파 센서 중 적어도 어느 하나 이상을 포함하는 것을 특징으로 하는 실시간 영상 복원 시스템.
- 제1항에 있어서,
상기 감시영역에서 발생하는 소리의 위치를 식별하기 위한 적어도 하나 이상의 지향성 마이크;를 더 포함하는 것을 특징으로 하는 실시간 영상 복원 시스템.
- 제1항에 있어서,
상기 카메라부, 상기 열화상센서부 및 상기 객체감지센서부를 수용하는 케이스부;를 더 포함하는 것을 특징으로 하는 실시간 영상 복원 시스템.
- 삭제
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020230103617A KR102631928B1 (ko) | 2023-08-08 | 2023-08-08 | 재난 및 안전사고시 구조자의 위치정보를 제공하는실시간 영상 복원 시스템 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020230103617A KR102631928B1 (ko) | 2023-08-08 | 2023-08-08 | 재난 및 안전사고시 구조자의 위치정보를 제공하는실시간 영상 복원 시스템 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| KR102631928B1 true KR102631928B1 (ko) | 2024-01-31 |
Family
ID=89717332
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020230103617A KR102631928B1 (ko) | 2023-08-08 | 2023-08-08 | 재난 및 안전사고시 구조자의 위치정보를 제공하는실시간 영상 복원 시스템 |
Country Status (1)
| Country | Link |
|---|---|
| KR (1) | KR102631928B1 (ko) |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20190072015A (ko) * | 2017-12-15 | 2019-06-25 | 전자부품연구원 | 융합 센서 데이터 시각화 장치 및 방법 |
| KR102069094B1 (ko) * | 2018-10-24 | 2020-01-22 | 주식회사 인포웍스 | 라이다 센서를 이용한 연기 상황 속 공간탐지 방법 |
| KR20210061182A (ko) * | 2019-11-19 | 2021-05-27 | 주식회사 디티앤바이오 | 아이피 카메라를 기반으로 환경센서와 연동 동작하는 보안 경보시스템 |
| KR20230061998A (ko) | 2021-10-29 | 2023-05-09 | 주식회사 와이앤에이치 | 열화상/실화상 융합형 카메라를 적용한 화재 감지 시스템 |
-
2023
- 2023-08-08 KR KR1020230103617A patent/KR102631928B1/ko active IP Right Grant
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20190072015A (ko) * | 2017-12-15 | 2019-06-25 | 전자부품연구원 | 융합 센서 데이터 시각화 장치 및 방법 |
| KR102069094B1 (ko) * | 2018-10-24 | 2020-01-22 | 주식회사 인포웍스 | 라이다 센서를 이용한 연기 상황 속 공간탐지 방법 |
| KR20210061182A (ko) * | 2019-11-19 | 2021-05-27 | 주식회사 디티앤바이오 | 아이피 카메라를 기반으로 환경센서와 연동 동작하는 보안 경보시스템 |
| KR20230061998A (ko) | 2021-10-29 | 2023-05-09 | 주식회사 와이앤에이치 | 열화상/실화상 융합형 카메라를 적용한 화재 감지 시스템 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US10161866B2 (en) | Particle detector, system and method | |
| US6826117B2 (en) | Tracking, safety and navigation system for firefighters | |
| US9677986B1 (en) | Airborne particle detection with user device | |
| TWI659397B (zh) | 利用動作感應的侵入偵測技術 | |
| KR101700395B1 (ko) | 경호용 드론 및 이를 이용한 이동식 경호 시스템 | |
| JP4805991B2 (ja) | レーザ距離測定機を用いた保安システムおよびレーザ距離測定機を用いた侵入者検出方法 | |
| KR100998339B1 (ko) | 선로 감시 시스템 | |
| CN108291967A (zh) | 使用激光雷达的工地安全装置 | |
| KR102151002B1 (ko) | 영상번역 카메라 시스템 | |
| EP2824418A1 (en) | Surround sensing system | |
| EP2466560A1 (en) | Method and system for monitoring the accessibility of an emergency exit | |
| JP2006171944A (ja) | 複合型防犯センサ | |
| KR102631928B1 (ko) | 재난 및 안전사고시 구조자의 위치정보를 제공하는실시간 영상 복원 시스템 | |
| KR102397131B1 (ko) | 아이피 카메라를 기반으로 환경센서와 연동 동작하는 보안 경보시스템 | |
| KR102361488B1 (ko) | 서라운드 아이피 카메라 | |
| KR20180085336A (ko) | 통합기상검지기 | |
| JPWO2005024746A1 (ja) | センサ・カメラ連動型侵入検知装置 | |
| KR102472366B1 (ko) | 360도 감시카메라 | |
| Ladstädter et al. | Multi-Sensor Visibility Study based on a Hot Smoke Experiment in a Tunnel | |
| Tuteja et al. | Detailed Survey on Motion Sensing | |
| KR20140054755A (ko) | 환경 정보를 반영하는 센서 융합 시스템 및 그 방법 | |
| KR20210046965A (ko) | Ict기반 감염병 자가격리자 감시시스템 | |
| JP2004268839A (ja) | 電子光学装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| E701 | Decision to grant or registration of patent right | ||
| GRNT | Written decision to grant |