KR102489557B1 - 영상 처리 장치 및 그 제어 방법 - Google Patents

영상 처리 장치 및 그 제어 방법 Download PDF

Info

Publication number
KR102489557B1
KR102489557B1 KR1020160057816A KR20160057816A KR102489557B1 KR 102489557 B1 KR102489557 B1 KR 102489557B1 KR 1020160057816 A KR1020160057816 A KR 1020160057816A KR 20160057816 A KR20160057816 A KR 20160057816A KR 102489557 B1 KR102489557 B1 KR 102489557B1
Authority
KR
South Korea
Prior art keywords
event
video
still image
camera
metadata
Prior art date
Application number
KR1020160057816A
Other languages
English (en)
Other versions
KR20170127315A (ko
Inventor
이준성
차일황
Original Assignee
한화테크윈 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한화테크윈 주식회사 filed Critical 한화테크윈 주식회사
Priority to KR1020160057816A priority Critical patent/KR102489557B1/ko
Publication of KR20170127315A publication Critical patent/KR20170127315A/ko
Application granted granted Critical
Publication of KR102489557B1 publication Critical patent/KR102489557B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/45—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from two or more image sensors being of different type or operating in different modes, e.g. with a CMOS sensor for moving images in combination with a charge-coupled device [CCD] for still images
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/667—Camera operation mode switching, e.g. between still and video, sport and normal or high- and low-resolution modes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/40—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled
    • H04N25/41—Extracting pixel data from a plurality of image sensors simultaneously picking up an image, e.g. for increasing the field of view by combining the outputs of a plurality of sensors

Abstract

본 발명의 일 실시 예에 따른 영상 처리 장치는 일반 모드에서 비디오를 획득하고, 이벤트 모드에서 스틸 이미지를 획득하는 이미지 센서; 상기 일반 모드에서 상기 비디오를 고압축 인코딩하는 비디오 인코더; 상기 이벤트 모드에서 상기 스틸 이미지를 저압축 인코딩하는 스틸 이미지 인코더; 이벤트를 감지하는 이벤트 센서; 상기 이벤트가 감지되지 않으면 상기 일반 모드를 선택하고, 상기 이벤트가 감지되면 상기 이벤트 모드를 선택하며, 상기 이벤트 모드에서 상기 스틸 이미지의 메타데이터를 생성하는 프로세서; 및 상기 비디오, 상기 스틸 이미지, 및 상기 메타데이터를 저장하는 메모리;를 포함한다.

Description

영상 처리 장치 및 그 제어 방법{Image processing apparatus and controlling method thereof}
본 발명은 영상 처리 장치 및 그 제어 방법에 관한 것이다.
카메라는 촬영된 영상을 다양한 방식으로 압축하여 저장한 후 사용자에게 제공한다. 특히, 휴대용 카메라가 비디오를 압축하는 경우, 영상의 화질과 정보가 손상될 수 있다.
다만, 차량 번호를 인식하거나 보안을 이유로, 압축에 따른 화질과 정보의 손상이 없거나 최소화된 스틸 이미지 및 메타데이터가 필요한 경우가 있다.
국내 특허공보 제0940237호
본 발명이 해결하고자 하는 과제는 배터리 소모가 적은 영상 처리 장치 및 그 제어 방법을 제공하는데 있다.
본 발명의 일 실시 예에 따른 영상 처리 장치는 일반 모드에서 비디오를 획득하고, 이벤트 모드에서 스틸 이미지를 획득하는 이미지 센서; 상기 일반 모드에서 상기 비디오를 고압축 인코딩하는 비디오 인코더; 상기 이벤트 모드에서 상기 스틸 이미지를 저압축 인코딩하는 스틸 이미지 인코더; 이벤트를 감지하는 이벤트 센서; 상기 이벤트가 감지되지 않으면 상기 일반 모드를 선택하고, 상기 이벤트가 감지되면 상기 이벤트 모드를 선택하며, 상기 이벤트 모드에서 상기 스틸 이미지의 메타데이터를 생성하는 프로세서; 및 상기 비디오, 상기 스틸 이미지, 및 상기 메타데이터를 저장하는 메모리;를 포함한다.
본 실시예에서, 상기 이벤트는 소정 음성, 소정 범위의 변위, 소정 냄새, 소정 날씨 또는 사용자 입력일 수 있다.
본 발명의 다른 실시 예에 따른 영상 처리 장치는 비디오를 획득하는 이미지 센서; 상기 비디오를 인코딩하는 인코더; 이벤트를 감지하는 이벤트 센서; 상기 이벤트가 감지되면 필드 마크를 추가하여 상기 비디오를 인코딩하도록 상기 인코더의 동작을 제어하는 프로세서; 및 상기 비디오를 저장하는 메모리;를 포함한다.
본 실시예에서, 상기 인코더는 H.264 표준을 따르며, 상기 필드 마크는 상기 인코더가 출력하는 비디오 인코딩 비트스트림의 NAL(Network Abstraction Layer) unit에 추가될 수 있다.
본 실시예에서, 상기 비디오 인코딩 비트스트림의 SPS(Sequence Parameter Set)는 상기 이벤트를 식별하기 위한 이벤트 정보를 포함할 수 있다.
본 발명의 일 실시 예에 따른 영상 처리 장치의 제어 방법은 제1 스틸 이미지, 메타데이터 및/또는 비디오를 수신하는 단계; 상기 제1 스틸 이미지를 수신한 경우에는, 상기 제1 스틸 이미지 및 상기 메타데이터를 저장하는 단계; 상기 메타데이터의 텍스트 데이터를 음성 데이터로 변환하는 단계; 및 상기 음성 데이터를 출력하는 단계;를 포함하고, 상기 비디오를 수신한 경우에는, 상기 비디오를 디코딩하여 이벤트 발생에 대응하는 필드 마크가 추출되면, 상기 비디오로부터 제2 스틸 이미지를 추출하는 단계; 및 상기 제2 스틸 이미지를 저장하는 단계;를 포함한다.
본 발명의 실시 예들에 따르면, 일반 모드에서는 고압축 인코딩을 수행함으로써 자원을 절약하고, 이벤트 모드에서는 저압축 인코딩을 수행함으로써 사용자에게 압축에 따른 화질과 정보의 손상이 최소화된 영상을 제공할 수 있다.
따라서, 본 발명의 실시 예들에 따르면, 비용을 절감하면서 경우에 따라 사용자에게 적절한 화질의 영상 및 필요한 정보를 제공할 수 있다.
도 1은 일 실시예에 따른 영상 처리 시스템을 설명하기 위한 도면이다.
도 2는 일 실시예에 따른 영상 처리 시스템에 포함된 카메라(100)의 구성을 나타내는 블록도이다.
도 3a 및 도 3b는 도 2의 인코더(120)의 각기 다른 실시예를 나타내는 블록도이다.
도 4a 내지 도 4c는 도 3b의 인코더(120)가 출력하는 비디오 인코딩 비트스트림을 설명하기 위한 도면이다.
도 5는 일 실시예에 따른 카메라(100)의 제어 방법을 설명하기 위한 흐름도이다.
도 6은 도 5의 S200 단계를 설명하기 위한 흐름도이다.
도 7a 및 도 7b는 도 5의 S400 단계의 각기 다른 실시예를 설명하기 위한 흐름도이다.
도 8a 및 도 8b는 각각 도 7a의 S407 단계 및 도 7b의 S415 단계를 통해 카메라(100)로부터 전송된 스틸 이미지 및/또는 메타데이터, 및 비디오를 처리하기 위한 모니터링 장치(300)의 제어 방법을 설명하기 위한 흐름도이다.
본 발명은 다양한 변환을 가할 수 있고 여러 가지 실시 예들을 가질 수 있는바, 특정 실시 예들을 도면에 예시하고 상세한 설명에 상세하게 설명하고자 한다. 그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변환, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다. 본 발명을 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다.
이하, 본 발명에 따른 실시 예들을 첨부 도면을 참조하여 상세히 설명하기로 하며, 첨부 도면을 참조하여 설명함에 있어, 동일하거나 대응하는 구성 요소는 동일한 도면번호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다.
도 1은 일 실시예에 따른 영상 처리 시스템을 설명하기 위한 도면이다.
도 1을 참조하면, 일 실시예에 따른 영상 처리 시스템은 카메라(100), 네트워크(200), 모니터링 장치(300)를 포함한다.
영상 처리 시스템은 카메라(100)의 데이터가 네트워크(200)를 통해 중앙 서버(미도시)로 전송되면, 관리자가 모니터링 장치(300)를 이용하여 중앙 서버(미도시)에 전송된 데이터를 모니터링할 수 있는 구성을 제공할 수 있다.
카메라(100)는 감시 영역을 촬영하여 감시 영역에 대한 영상을 획득한다. 카메라(100)는 감시 또는 보안의 목적으로 감시 영역을 실시간으로 촬영할 수 있다. 카메라(100)는 패닝(panning)과 틸팅(tilting)이 가능하며 렌즈의 줌 배율이 조절 가능한 PTZ 카메라 또는 이동 가능한 휴대용 카메라일 수 있다.
카메라(100)는 배터리로 구동되는 저전력 카메라일 수 있다. 일 실시예에 따른 저전력 카메라는 평상시 일반 모드(normal mode)를 유지하고, 이벤트가 발생한 경우 이벤트 모드(event mode)로 전환되고, 이벤트가 종료한 경우 다시 일반 모드로 복귀한다. 이와 같이, 저전력 카메라는 이벤트가 발생한 경우에만 이벤트 모드를 유지함으로써 전력 소모를 줄일 수 있다.
카메라(100)는 이더넷(Ethernet), 와이파이(Wi-Fi), 블루투스(Bluetooth) 등 다양한 유무선 통신 방식을 이용하여 중앙 서버(미도시)에 정보를 전송할 수도 있고, 중앙 서버(미도시)로부터 명령을 수신할 수도 있다.
네트워크(200)는 유선 네트워크 또는 무선 네트워크를 포함할 수 있다. 무선 네트워크는 2G(Generation) 또는 3G 셀룰러 통신 시스템, 3GPP(3rd Generation Partnership Project), 4G 통신 시스템, LTE(Long-Term Evolution), WiMAX(World Interoperability for Microwave Access) 등이 될 수 있다.
모니터링 장치(300)는 중앙 서버(미도시)로부터 전송된 정보를 처리할 수 있다. 예를 들면, 모니터링 장치(300)는 중앙 서버(미도시)로부터 전송된 영상을 디스플레이할 수 있고, 저장할 수도 있다. 모니터링 장치(300)는 개인용 컴퓨터, 이동 단말 등과 같은 단말(301) 또는 클라우드 서버(303)일 수 있다.
도 2는 일 실시예에 따른 영상 처리 시스템에 포함된 카메라(100)의 구성을 나타내는 블록도이다.
도 2를 참조하면, 카메라(100)는 이미지 센서(110), 인코더(120), 메모리(130), 이벤트 센서(140), 통신 인터페이스(150), 배터리(160), 및 프로세서(170)를 포함한다.
이미지 센서(110)는 감시 영역을 촬영하여 영상을 획득한다. 일 실시예에 따른 이미지 센서(110)는 일반 모드에서 비디오를 획득하고, 이벤트 모드에서 스틸 이미지를 획득할 수 있다. 다른 실시예에 따른 이미지 센서(110)는 일반 모드 및 이벤트 모드에서 각각 비디오를 획득할 수 있다. 이미지 센서(110)는 예컨대, CCD(Charge-Coupled Device) 센서, CMOS(Complementary Metal-Oxide-Semiconductor) 센서 등일 수 있다.
인코더(120)는 이미지 센서(110)를 통해 획득한 영상을 디지털 신호로 부호화한다. 인코더(120)는 예컨대, H.264, H.265, MPEG(Moving Picture Experts Group), M-JPEG(Motion Joint Photographic Experts Group) 표준 등을 따를 수 있다. 이하에서, 도 3a 및 도 3b를 참조하여, 실시예들에 따른 인코더(120)를 상세하게 설명한다.
도 3a 및 도 3b는 도 2의 인코더(120)의 각기 다른 실시예를 나타내는 블록도이다.
도 3a를 참조하면, 일 실시예에 따른 인코더(120)는 비디오 인코더(121) 및 스틸 이미지 인코더(123)를 포함한다. 일 실시예에 따른 비디오 인코더(121)는 일반 모드에서 동작하며, 비디오를 고압축 인코딩할 수 있다. 일 실시예에 따른 스틸 이미지 인코더(123)는 이벤트 모드에서 동작하며, 스틸 이미지를 저압축 인코딩할 수 있다.
본 실시예에서, 스틸 이미지 인코더(123)는 이벤트 종류 또는 이벤트 순위에 따라 각기 다른 압축률로 스틸 이미지를 인코딩할 수 있다. 예컨대, 이벤트 순위가 높을수록 스틸 이미지 인코더(123)의 압축률이 낮아질 수 있다.
도 3b를 참조하면, 다른 실시예에 따른 인코더(120)는 비디오 인코더(121)를 포함한다. 다른 실시예에 따른 비디오 인코더(121)는 일반 모드 및 이벤트 모드에서 각각 동작하며, 비디오를 고압축 인코딩할 수 있다. 이벤트 모드에서, 다른 실시예에 따른 비디오 인코더(121)는 이벤트 발생에 대응하는 필드 마크를 포함하는 비디오 인코딩 비트스트림을 출력할 수 있다.
본 실시예에서, 비디오 인코더(121)는 이벤트 종류 또는 이벤트 순위에 따라 각기 다른 압축률로 비디오를 인코딩할 수 있다. 예컨대, 이벤트 순위가 높을수록 비디오 인코더(121)의 압축률이 낮아질 수 있다.
도 4a 내지 도 4c는 도 3b의 인코더(120)가 출력하는 비디오 인코딩 비트스트림을 설명하기 위한 도면이다.
도 4a를 참조하면, 도 3b의 인코더(120)가 출력하는 비디오 인코딩 비트스트림은 Start 필드, NAL(Network Abstraction Layer) unit 필드, RBSP(Raw Byte Sequence Payload) 필드를 포함할 수 있다.
NAL unit 필드에는 NAL header가 포함될 수 있다. 도 4b를 참조하면, NAL header는 다양한 NAL type을 정의할 수 있고, NAL type 6가 정의하는 SEI(Supplemenatal Enhancement Information)는 이벤트 발생에 대응하는 필드 마크일 수 있다. 즉, 도 3b의 인코더(120)는 이벤트 발생에 대응하여 NAL header의 값이 6인 비트스트림을 출력할 수 있다.
RBSP 필드에는 SPS(Sequence Parameter Set), PPS(Picture Parameter Set), Frame이 포함될 수 있다. SPS는 이벤트를 식별하기 위한 이벤트 정보를 나타낼 수 있다. 도 4c를 참조하면, SPS는 다양한 이벤트를 정의할 수 있다. SPS 식별번호 1이 정의하는 이벤트는 음성 인식이고, SPS 식별번호 2가 정의하는 이벤트는 변위 감지이고, SPS 식별번호 3이 정의하는 이벤트는 냄새 감지이고, SPS 식별번호 4가 정의하는 이벤트는 날씨 감지일 수 있다.
예를 들어, 카메라(100)의 온도 센서 및/또는 습도 센서가 소정 날씨를 감지한 경우, 도 3b의 인코더(120)는 이벤트 발생에 대응하여 SPS의 값이 4인 비트스트림을 출력할 수 있다. 다른 예를 들어, 카메라(100)의 오디오 센서가 소정 음성을 감지한 경우, 도 3b의 인코더(120)는 이벤트 발생에 대응하여 SPS의 값이 1인 비트스트림을 출력할 수 있다.
다시 도 2를 참조하면, 메모리(130)는 비디오, 스틸 이미지, 메타데이터 등을 저장한다.
이벤트 센서(140)는 이벤트를 감지한다. 이벤트 센서(140)는 적외선 센서, 오디오 센서, 모션 센서, 가스 센서, 누수 센서, 온도 센서, 습도 센서, 가속도 센서, 자이로 센서, 촉각 센서, 압력 센서, 진동 센서, 냄새 센서 등으로 이루어질 수 있다. 이벤트는 소정 음성, 소정 범위의 변위, 소정 냄새, 소정 날씨 등과 같은 보안 이벤트(Security Event) 또는 사용자 입력과 같은 전용 이벤트(Private Evnet)일 수 있다.
통신 인터페이스(150)는 비디오, 스틸 이미지, 및/또는 메타데이터를 중앙 서버(미도시) 또는 모니터링 장치(300)에 전송한다.
일 실시예에 따른 통신 인터페이스(150)는 비디오, 스틸 이미지, 및/또는 메타데이터를 중앙 서버(미도시) 또는 모니터링 장치(300)에 실시간으로 전송할 수 있다. 예컨대, 일 실시예에 따른 통신 인터페이스(150)는 인코더(120)에서 저압축 인코딩된 스틸 이미지 및 프로세서(170)에서 생성된 상기 스틸 이미지의 메타데이터를 중앙 서버(미도시) 또는 모니터링 장치(300)에 실시간으로 전송할 수 있다. 다른 실시예에 따른 통신 인터페이스(150)는 메모리(130)에 저장된 비디오, 스틸 이미지, 및/또는 메타데이터를 중앙 서버(미도시) 또는 모니터링 장치(300)에 전송할 수 있다.
통신 인터페이스(150)는 유무선 LAN(Local Area Network), 와이파이(Wi-Fi), 지그비(ZigBee), 블루투스(Bluetooth), 근거리 통신(Near Field Communication) 중 적어도 하나의 통신 기능을 수행할 수 있다.
배터리(160)는 카메라(100)에 전원을 공급한다.
프로세서(170)는 카메라(100)의 전반적인 동작을 제어한다. 프로세서(170)는 이벤트가 감지되지 않으면 일반 모드를 선택하고, 이벤트 센서(140)를 통해 이벤트가 감지되면 이벤트 모드를 선택한다.
이벤트 모드에서, 일 실시예에 따른 프로세서(170)는 이미지 센서(140)를 통해 획득한 스틸 이미지의 메타데이터를 생성한다. 스틸 이미지의 메타데이터는 이벤트 종류, 스틸 이미지 수량, 스틸 이미지 획득 일시, GPS 정보, 스틸 이미지에서 추출된 텍스트 데이터 등을 포함할 수 있다.
이벤트 모드에서, 다른 실시예에 따른 프로세서(170)는 이미지 센서(140)를 통해 획득한 비디오가 이벤트 발생에 대응하는 필드 마크를 추가하여 인코딩되도록 인코더(120)의 동작을 제어할 수 있다. 그 결과, 인코더(120)는 필드 마크를 포함하는 NAL(Network Abstraction Layer) unit 및 이벤트를 식별하기 위한 이벤트 정보를 포함하는 SPS(Sequence Parameter Set)를 포함하는 비디오 인코딩 비트스트림을 출력할 수 있다.
도 5는 일 실시예에 따른 카메라(100)의 제어 방법을 설명하기 위한 흐름도이다.
도 5를 참조하면, 카메라(100)는 이벤트를 설정한다(S100). 이벤트는 사업자 입력 또는 사용자 입력에 의해 설정될 수 있다.
사업자 입력에 의해 설정된 이벤트는 보안 이벤트일 수 있다. 보안 이벤트는 음성 인식, 변위 감지, 냄새 감지, 날씨 감지 등일 수 있다. 음성 인식은 예컨대, 비명 소리, 울음, 총소리, 폭발음, 경보음, 마찰음, 파열음, 비정상 음성 등에 대한 인식일 수 있다. 변위 감지는 예컨대, 충격 또는 미등록 경로에서의 소정 시간 이상 위치 고정 등에 대한 감지일 수 있다. 냄새 감지는 담배, 화재, 유해한 화할 물질 등에 대한 감지일 수 있다. 날씨 감지는 예컨대, 소정 범위를 벗어난 온도 및/또는 습도에 대한 감지일 수 있다.
사용자 입력에 의해 설정된 이벤트는 전용 이벤트일 수 있다. 전용 이벤트는 카메라(100)의 외부 스위치에 대한 선택 입력, 소정의 음성 인식, 카메라(100)의 디스플레이를 구성하는 터치 스크린에 대한 선택 입력 등일 수 있다.
한편, 이벤트 순위가 사업자 입력 또는 사용자 입력에 의해 설정될 수 있다. 예를 들면, 보안 이벤트는 사업자 입력에 따라, 음성 인식, 변위 감지, 냄새 감지, 및 날씨 감지 순으로 그 순위가 설정될 수 있다. 다른 예를 들면, 사용자 입력에 따라, 전용 이벤트가 보안 이벤트보다 우선순위로 설정될 수도 있다.
이어서, 카메라(100)의 전원이 켜지면, 카메라(100)는 일반 모드로 동작한다(S200). 이하에서, 도 6을 참조하여, 카메라(100)의 일반 모드에 대하여 상세하게 설명한다.
도 6은 도 5의 S200 단계를 설명하기 위한 흐름도이다.
도 6을 참조하면, 일반 모드에서 동작하는 카메라(100)는 비디오를 획득한다(S201).
이어서, 카메라(100)는 획득된 비디오를 인코딩한다(S203). 이때, 카메라(100)는 도 3a의 비디오 인코더(121)를 통해 비디오를 고압축 인코딩할 수 있다. 고압축 인코딩된 비디오는 저해상도, 저화질의 특징을 가진다.
이어서, 카메라(100)는 인코딩된 비디오를 저장한다(S205).
도시하지 않았으나, 일 실시예에 따른 카메라(100)는 통신 인터페이스(150)를 통해 고압축 인코딩된 비디오를 중앙 서버(미도시) 또는 모니터링 장치(300)에 실시간으로 전송할 수 있다. 다른 실시예에 따른 카메라(100)는 통신 인터페이스(150)를 통해 메모리(130)에 저장된 비디오를, 주기적으로 또는 요청에 따라, 중앙 서버(미도시) 또는 모니터링 장치(300)에 전송할 수 있다.
다시 도 5를 참조하면, 카메라(100)는 이벤트 센서(140)를 통해 이벤트가 감지되면, 일반 모드에서 이벤트 모드로 전환된다(S400). 이벤트는 예컨대, 파열음과 같은 음성 인식일 수 있다.
이하에서, 도 7a 및 도 7b를 참조하여, 카메라(100)의 이벤트 모드에 대하여 상세하게 설명한다.
도 7a 및 도 7b는 도 5의 S400 단계의 각기 다른 실시예를 설명하기 위한 흐름도이다.
도 7a를 참조하면, 일 실시예에 따른 카메라(100)는 이벤트 모드에서 스틸 이미지를 획득한다(S401).
이어서, 카메라(100)는 획득된 스틸 이미지를 인코딩한다(S403). 이때, 카메라(100)는 도 3a의 스틸 이미지 인코더(123)를 통해 스틸 이미지를 저압축 인코딩할 수 있다. 저압축 인코딩된 스틸 이미지는 고해상도, 고화질의 특징을 가진다.
아울러, 카메라(100)는 획득된 스틸 이미지의 메타데이터를 생성한다(S405). 스틸 이미지의 메타데이터는 예컨대, 음성 인식이라는 이벤트 종류, 스틸 이미지에서 추출된 차량 번호와 같은 텍스트 데이터 등을 포함할 수 있다.
이어서, 카메라(100)는 스틸 이미지 및/또는 메타데이터를 전송한다(S407).
일 실시예에 따른 카메라(100)는 통신 인터페이스(150)를 통해 저압축 인코딩된 스틸 이미지 및/또는 메타데이터를 중앙 서버(미도시) 또는 모니터링 장치(300)에 실시간으로 전송할 수 있다.
아울러, 카메라(100)는 스틸 이미지 및/또는 메타데이터를 저장한다(S409).
다른 실시예에 따른 카메라(100)는 통신 인터페이스(150)를 통해 메모리(130)에 저장된 스틸 이미지 및/또는 메타데이터를, 주기적으로 또는 요청에 따라, 중앙 서버(미도시) 또는 모니터링 장치(300)에 전송할 수 있다.
도 7b를 참조하면, 다른 실시예에 따른 카메라(100)는 이벤트 모드에서 비디오를 획득한다(S411).
이어서, 카메라(100)는 획득된 비디오 인코딩시, 이벤트 발생에 대응하는 필드 마크를 추가한다(S413). 예컨대, 카메라(100)는 NAL unit 필드에 포함된 NAL header의 값이 6이고, RBSP 필드에 SPS 식별번호 1이 포함된 비디오 인코딩 비트스트림을 출력할 수 있다.
이어서, 카메라(100)는 비디오를 전송한다(S415).
아울러, 카메라(100)는 비디오를 저장한다(S417).
본 실시예 따른 카메라(100)는 통신 인터페이스(150)를 통해 메모리(130)에 저장된 비디오를, 주기적으로 또는 요청에 따라, 중앙 서버(미도시) 또는 모니터링 장치(300)에 전송할 수 있다.
도 8a 및 도 8b는 각각 도 7a의 S407 단계 및 도 7b의 S415 단계를 통해 카메라(100)로부터 전송된 스틸 이미지 및/또는 메타데이터, 및 비디오를 처리하기 위한 모니터링 장치(300)의 제어 방법을 설명하기 위한 흐름도이다.
도 8a를 참조하면, 모니터링 장치(300)는 카메라(100)에서 전송된 제1 스틸 이미지 및/또는 메타데이터를 수신한다(S501). S501 단계의 모니터링 장치(300)가 수신하는 제1 스틸 이미지 및/또는 메타데이터는, S407 단계의 카메라(100)로부터 전송될 수 있다.
아울러, 모니터링 장치(300)는 제1 스틸 이미지 및/또는 메타데이터를 저장한다(S503).
이어서, 모니터링 장치(300)는 메타데이터의 텍스트 데이터를 음성 데이터로 변환한다(S505). 예컨대, 모니터링 장치(300)는 메타데이터로부터 제1 스틸 이미지에서 추출된 차량 번호와 같은 텍스트 데이터를 추출하고, 상기 차량 번호를 음성 데이터로 변환할 수 있다.
이어서, 모니터링 장치(300)는 음성 데이터를 출력한다(S507). 음성 데이터는 예컨대, 단말(301)의 스피커를 통해 외부로 출력될 수 있다.
도 8b를 참조하면, 모니터링 장치(300)는 카메라(100)에서 전송된 비디오를 수신한다(S511). S511 단계의 모니터링 장치(300)가 수신하는 비디오는, S415 단계의 카메라(100)로부터 전송될 수 있다.
이어서, 모니터링 장치(300)는 비디오를 디코딩한다(S513). 비디오 디코딩 결과, 이벤트 발생에 대응하는 필드마크가 추출되면(S514), 비디오로부터 제2 스틸 이미지를 추출한다(S515). 예컨대, 모니터링 장치(300)는 NAL unit 필드를 파싱(parsing)하여 6의 값을 갖는 NAL header를 추출한 경우, 비디오로부터 제2 스틸 이미지를 추출할 수 있다. 제2 스틸 이미지는 카메라(100)에서 전송된 제1 스틸 이미지와 구별되며, 모니터링 장치(300)에서 추출된 스틸 이미지를 의미한다.
이어서, 모니터링 장치(300)는 제2 스틸 이미지 및 비디오를 저장한다(S517, S519). 다만, 비디오 디코딩 결과, 이벤트 발생에 대응하는 필드마크가 추출되지 않으면(S514), 모니터링 장치(300)는 카메라(100)에서 전송된 비디오를 저장한다(S519).
한편, 본 발명은 컴퓨터로 읽을 수 있는 기록 매체에 컴퓨터가 읽을 수 있는 코드로 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 기록 매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록 장치를 포함한다.
컴퓨터가 읽을 수 있는 기록 매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피디스크, 광 데이터 저장장치 등이 있으며, 또한 캐리어 웨이브(예를 들어 인터넷을 통한 전송)의 형태로 구현하는 것을 포함한다. 또한, 컴퓨터가 읽을 수 있는 기록 매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산 방식으로 컴퓨터가 읽을 수 있는 코드가 저장되고 실행될 수 있다. 그리고 본 발명을 구현하기 위한 기능적인(functional) 프로그램, 코드 및 코드 세그먼트들은 본 발명이 속하는 기술 분야의 프로그래머들에 의하여 용이하게 추론될 수 있다.
이제까지 본 발명에 대하여 실시 예를 중심으로 살펴보았다. 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자는 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 본 발명을 구현할 수 있음을 이해할 것이다. 그러므로 상기 개시된 실시 예들은 한정적인 관점이 아니라 설명적인 관점에서 고려되어야 한다. 본 발명의 범위는 전술한 설명이 아니라 특허청구범위에 나타나 있으며, 그와 동등한 범위 내에 있는 모든 차이점은 본 발명에 포함된 것으로 해석되어야 한다.
100: 카메라
200: 네트워크
300: 모니터링 장치
301: 단말
303: 클라우드 서버

Claims (6)

  1. 일반 모드에서 비디오를 획득하고, 이벤트 모드에서 스틸 이미지를 획득하는 이미지 센서;
    상기 일반 모드에서 상기 비디오를 고압축 인코딩하는 비디오 인코더;
    상기 이벤트 모드에서 상기 스틸 이미지를 저압축 인코딩하는 스틸 이미지 인코더;
    이벤트를 감지하는 이벤트 센서;
    상기 이벤트가 감지되지 않으면 상기 일반 모드를 선택하고, 상기 이벤트가 감지되면 상기 이벤트 모드를 선택하며, 상기 이벤트 모드에서 상기 스틸 이미지의 메타데이터를 생성하는 프로세서; 및
    상기 비디오, 상기 스틸 이미지, 및 상기 메타데이터를 저장하는 메모리;를 포함하는, 영상 처리 장치.
  2. 제1항에 있어서,
    상기 이벤트는 소정 음성, 소정 범위의 변위, 소정 냄새, 소정 날씨 또는 사용자 입력인, 영상 처리 장치.
  3. 삭제
  4. 삭제
  5. 삭제
  6. 제1 스틸 이미지, 메타데이터 및/또는 비디오를 수신하는 단계;
    상기 제1 스틸 이미지를 수신한 경우에는,
    상기 제1 스틸 이미지 및 상기 메타데이터를 저장하는 단계;
    상기 메타데이터의 텍스트 데이터를 음성 데이터로 변환하는 단계; 및
    상기 음성 데이터를 출력하는 단계;를 포함하고,
    상기 비디오를 수신한 경우에는,
    상기 비디오를 디코딩하여 이벤트 발생에 대응하는 필드 마크가 추출되면, 상기 비디오로부터 제2 스틸 이미지를 추출하는 단계; 및
    상기 제2 스틸 이미지를 저장하는 단계;를 포함하는, 영상 처리 장치의 제어 방법.
KR1020160057816A 2016-05-11 2016-05-11 영상 처리 장치 및 그 제어 방법 KR102489557B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020160057816A KR102489557B1 (ko) 2016-05-11 2016-05-11 영상 처리 장치 및 그 제어 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020160057816A KR102489557B1 (ko) 2016-05-11 2016-05-11 영상 처리 장치 및 그 제어 방법

Publications (2)

Publication Number Publication Date
KR20170127315A KR20170127315A (ko) 2017-11-21
KR102489557B1 true KR102489557B1 (ko) 2023-01-17

Family

ID=60808602

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020160057816A KR102489557B1 (ko) 2016-05-11 2016-05-11 영상 처리 장치 및 그 제어 방법

Country Status (1)

Country Link
KR (1) KR102489557B1 (ko)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102407327B1 (ko) * 2020-01-30 2022-06-10 주식회사 소이넷 화재감지장치 및 이를 포함하는 화재감지시스템

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012123460A (ja) * 2010-12-06 2012-06-28 Toshiba Corp 映像検索装置、及び映像検索方法

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100940237B1 (ko) 2003-03-06 2010-02-04 삼성테크윈 주식회사 이벤트 발생과 연동하여 모니터링 및 레코딩 제어가가능한 감시시스템 및 그 제어방법
KR101012158B1 (ko) * 2009-03-05 2011-02-07 (주)모비루스 무인 카메라와 ｔｔｓ 모듈을 이용한 양방향 정보 제공 시스템 및 방법
KR20140124497A (ko) * 2013-04-17 2014-10-27 (주)정직한기술 이벤트에 따라 적응적으로 가변 화질 영상을 전송하는 감시 카메라 시스템

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012123460A (ja) * 2010-12-06 2012-06-28 Toshiba Corp 映像検索装置、及び映像検索方法

Also Published As

Publication number Publication date
KR20170127315A (ko) 2017-11-21

Similar Documents

Publication Publication Date Title
JP6240642B2 (ja) イメージ撮影装置のイメージを提供する方法及びその装置
CN105491353B (zh) 一种远程监控方法和装置
WO2014001381A2 (en) System and method for encoding video content using virtual intra-frames
US11538316B2 (en) Surveillance system and control method thereof
US10574991B2 (en) Apparatus and method for processing image
CA2814995C (en) Method and apparatus for adjusting video compression parameters for encoding source video based on a viewer's environment
US10313628B2 (en) Apparatus and method for processing a plurality of video data captured by a plurality of devices
KR20160142200A (ko) Mjpeg 압축방식을 이용하는 영상촬영장치
KR20110114957A (ko) 데이터 송신 장치와 방법, 이를 이용한 네트워크 데이터 전송 시스템 및 방법
KR100555012B1 (ko) 영상 신호 기록 및 송신 장치
US20190191210A1 (en) Systems and methods for transmitting a high quality video image from a low power sensor
KR102489557B1 (ko) 영상 처리 장치 및 그 제어 방법
US9578233B2 (en) Imaging apparatus and method for controlling the same
KR102369796B1 (ko) 네트워크 카메라 시스템 및 그 동작 방법
JP6261191B2 (ja) 表示制御装置、表示制御方法、プログラム
WO2015125420A1 (en) Imaging apparatus and imaging system
KR101424237B1 (ko) 채널감지에 의한 ｓｖｃ 코덱 기반 이동단말기용 감시시스템
CN110351484A (zh) 物体防拍照方法及装置
JP5672320B2 (ja) デコーダ装置
KR102393336B1 (ko) 감시 시스템 및 그 동작 방법
JP2006246051A (ja) 映像送信システム、映像送信方法、及びカメラ装置
US20130243086A1 (en) Wireless transmission terminal and wireless transmission method, encoder and encoding method therefor, and computer programs
KR20150095080A (ko) 영상 데이터 전송 장치 및 방법
CN117336596A (zh) 摄像设备及其控制方法和存储介质
KR20160069429A (ko) 메타데이터 기반 비디오 데이터의 전송조건 변경장치 및 방법

Legal Events

Date Code Title Description
N231 Notification of change of applicant
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant