KR102216874B1 - Data collet method using multi sensor data collect system - Google Patents

Data collet method using multi sensor data collect system Download PDF

Info

Publication number
KR102216874B1
KR102216874B1 KR1020190127549A KR20190127549A KR102216874B1 KR 102216874 B1 KR102216874 B1 KR 102216874B1 KR 1020190127549 A KR1020190127549 A KR 1020190127549A KR 20190127549 A KR20190127549 A KR 20190127549A KR 102216874 B1 KR102216874 B1 KR 102216874B1
Authority
KR
South Korea
Prior art keywords
data
sensor unit
unit
image data
vehicle
Prior art date
Application number
KR1020190127549A
Other languages
Korean (ko)
Inventor
장봉주
임상훈
Original Assignee
한국건설기술연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국건설기술연구원 filed Critical 한국건설기술연구원
Priority to KR1020190127549A priority Critical patent/KR102216874B1/en
Application granted granted Critical
Publication of KR102216874B1 publication Critical patent/KR102216874B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C5/00—Registering or indicating the working of vehicles
    • G07C5/08—Registering or indicating performance data other than driving, working, idle, or waiting time, with or without registering driving, working, idle or waiting time
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C5/00—Registering or indicating the working of vehicles
    • G07C5/008—Registering or indicating the working of vehicles communicating information to a remotely located station
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/667—Camera operation mode switching, e.g. between still and video, sport and normal or high- and low-resolution modes
    • H04N5/23245—

Abstract

The present invention relates to a data collection method through a multi-data collection system, and more specifically, to the data collection method through a multi-data collection system where a multi-sensor device installed in a vehicle collects image data of a front side of the vehicle and at least one type of sensing data in real-time, converts at least one type sensing data into a watermark to be hidden in the image data, and transmits the image data to a DB server through digital pairing.

Description

다중 데이터 수집시스템을 통한 데이터 수집방법{Data collet method using multi sensor data collect system}Data collet method using multi sensor data collect system}

본 발명은 다중 데이터 수집시스템을 통한 데이터 수집방법에 관한 것으로, 더욱 상세하게는 차량에 설치되는 다중 센서 장치가 실시간으로 차량 전방의 영상데이터 및 적어도 한 종류 이상의 감지데이터를 수집하고, 상기 영상데이터에 적어도 한 종류 이상의 감지데이터를 워터마크로 변환하여 은닉하고 디지털 페어링을 통해 DB서버로 전송해주는 다중 데이터 수집시스템을 통한 데이터 수집방법에 관한 것이다.The present invention relates to a data collection method through a multiple data collection system, and more particularly, a multiple sensor device installed in a vehicle collects image data in front of the vehicle and at least one type of sensing data in real time, and the image data It relates to a data collection method through a multiple data collection system that converts at least one type of sensing data into a watermark, hides it, and transmits it to a DB server through digital pairing.

블랙박스(Black Box) 장치의 경우 차량에 설치되어 차량의 전방을 촬영하여 차량사고 또는 차량의 치안을 감시하는 역할을 한다. In the case of a black box device, it is installed on a vehicle and takes a picture of the front of the vehicle to monitor a vehicle accident or the security of the vehicle.

하지만 최근 들어 기상데이터 수집의 중요성이 증대함에 따라, 상기한 기능 외에 기상데이터를 수집할 수 있는 장치의 필요성이 대두되고 있는 상황이다.However, as the importance of collecting meteorological data has recently increased, the need for a device capable of collecting meteorological data in addition to the above-described functions has emerged.

등록특허 10-1752593, 등록일자 2017년 06월 23일, '지능형 차량 관리 시스템'Registered Patent 10-1752593, Registration Date June 23, 2017,'Intelligent Vehicle Management System' 등록특허 10-1413634, 등록일자 2014년 06월 24일, '공증 기록 영상 제공 시스템 및 방법'Registered Patent 10-1413634, Registration date June 24, 2014,'Notarized Recorded Video Provision System and Method'

본 발명은 이와 같은 필요성에 의해 창출된 것으로, 본 발명의 목적은 차량에 설치되는 다중 센서 장치가 실시간으로 차량 전방의 영상데이터 및 적어도 한 종류 이상의 감지데이터를 수집하고, 상기 영상데이터에 적어도 한 종류 이상의 감지데이터를 워터마크로 변환하여 은닉하고 디지털 페어링을 통해 DB서버로 전송해주는 다중 데이터 수집시스템을 통한 데이터 수집방법을 제공하는데 있다.The present invention was created by such a necessity, and an object of the present invention is that a multi-sensor device installed in a vehicle collects image data in front of the vehicle and at least one type of sensing data in real time, and at least one type of the image data The objective is to provide a data collection method through a multiple data collection system that converts the above sensing data into a watermark, hides it, and transmits it to a DB server through digital pairing.

상기와 같은 목적을 달성하기 위한 본 발명에 따른 다중 데이터 수집시스템을 통한 데이터 수집방법은 다중 센서 장치(100)가 차량에 설치되어 실시간으로 차량의 주변상태를 감지하여 차량 전방의 영상데이터 및 적어도 한 종류 이상의 감지데이터를 수집하여, 상기 적어도 한 종류 이상의 감지데이터를 워터마크로 변환한 후 상기 영상데이터에 은닉하고 디지털 페어링을 통해 DB서버(200)로 전송하는 A 단계; 및 DB서버(200)가 상기 다중 센서 장치(100)로부터 디지털 페어링을 통해 상기 적어도 한 종류 이상의 감지데이터가 은닉된 영상데이터를 전송받아 디스플레이 하는 B 단계를 포함하는 것을 특징으로 한다.In the data collection method through the multiple data collection system according to the present invention for achieving the above object, a multi-sensor device 100 is installed in the vehicle to detect the surrounding state of the vehicle in real time, A step of collecting more than one type of sensing data, converting the at least one type of sensing data into a watermark, hiding it in the image data, and transmitting it to the DB server 200 through digital pairing; And a step B of the DB server 200 receiving and displaying the image data in which the at least one or more types of sensing data are hidden through digital pairing from the multi-sensor device 100.

본 발명의 바람직한 실시예에 따르면, 상기 A 단계는, 카메라 센서부(101)가 차량 전방의 영상데이터, GPS부(102)가 위치데이터, 온습도센서부(103)가 온습도데이터, 우적센서부(104)가 우적데이터, 대기압센서부(105)가 대기압데이터, 진동센서부(107) 진동데이터 및 자이로센서부(108)가 기울기데이터를 생성하는 단계; 워터마킹부(109)가 상기 카메라 센서부(101)가 생성한 영상데이터에 상기 위치데이터, 온습도데이터, 우적데이터, 대기압데이터, 진동데이터 및 기울기데이터 중 적어도 한 종류 이상의 감지데이터를 워터마크로 변환한후 은닉하는 단계; 및 제어부(110)가 상기 워터마킹부(109)가 생성한 적어도 한 종류 이상의 감지데이터가 워터마크로 은닉된 영상데이터를 디지털 페어링을 통해 상기 DB서버(200)로 전송하는 단계를 포함하는 것을 특징으로 한다.According to a preferred embodiment of the present invention, in step A, the camera sensor unit 101 is the image data in front of the vehicle, the GPS unit 102 is the location data, the temperature and humidity sensor unit 103 is the temperature and humidity data, the rain sensor unit ( 104) generating rain data, atmospheric pressure sensor unit 105 atmospheric pressure data, vibration sensor unit 107, vibration data, and gyro sensor unit 108 generating tilt data; The watermarking unit 109 converts at least one type of sensing data among the location data, temperature and humidity data, raindrop data, atmospheric pressure data, vibration data, and tilt data to the image data generated by the camera sensor unit 101 into a watermark. Concealing after; And transmitting, by the control unit 110, image data in which at least one type of sensing data generated by the watermarking unit 109 is concealed as a watermark, to the DB server 200 through digital pairing. do.

본 발명의 바람직한 실시예에 따르면, 상기 제어부(110)는, 평상시에는 카메라부(101)를 노멀 감지 모드(Normal Detect Mode)로 제어하여 카메라부(101)가 차량의 전방을 컬러로 원거리 촬영하도록 하는 것을 특징으로 한다.According to a preferred embodiment of the present invention, the control unit 110 controls the camera unit 101 in a normal detection mode to allow the camera unit 101 to photograph the front of the vehicle from a distance in color. Characterized in that.

본 발명의 바람직한 실시예에 따르면, 상기 제어부(110)는, W밴드레이더부(106)가 현재 대기상태가 강수라고 판단할 경우, 카메라부(101)를 강수 감지 모드(Rain Detect Mode)로 제어하여 카메라부(101)가 차량의 전방을 초근접 고속 촬영하도록 하는 것을 특징으로 한다.According to a preferred embodiment of the present invention, when the W band radar unit 106 determines that the current standby state is precipitation, the control unit 110 controls the camera unit 101 to a rain detection mode. Thus, the camera unit 101 is characterized in that the front of the vehicle is photographed in an ultra close-up speed.

본 발명의 바람직한 실시예에 따르면, 상기 제어부(110)는, 진동센서부(107) 및 자이로센서부(108)로부터 진동데이터 및 기울기데이터를 전송받아 지진을 감지했다고 판단한 경우, 카메라부(101)를 지진 감지 모드(Earthquake Detect Mode)로 제어하여 카메라부(101)가 차량의 전방을 컬러로 근거리 촬영하도록 하는 것을 특징으로 한다.According to a preferred embodiment of the present invention, the controller 110 receives vibration data and tilt data from the vibration sensor unit 107 and the gyro sensor unit 108 and determines that an earthquake is detected, the camera unit 101 It is characterized in that the camera unit 101 photographs the front of the vehicle in a short distance in color by controlling it in the Earthquake Detect Mode.

본 발명의 바람직한 실시예에 따르면, 상기 제어부(110)는, 워터마킹부(109)를 제어하여 카메라부(101)로부터 영상데이터를 입력 받은 시점에서 가장 최근 입력된 위치데이터, 온습도데이터, 우적데이터, 대기압데이터, 진동데이터 및 기울기데이터 중 적어도 한 종류 이상의 감지데이터를 워터마크로 변환하여 영상데이터에 은닉하는 것을 특징으로 한다.According to a preferred embodiment of the present invention, the control unit 110 controls the watermarking unit 109 to receive the most recently input location data, temperature and humidity data, and raindrop data at the time of receiving image data from the camera unit 101. , At least one of atmospheric pressure data, vibration data, and gradient data is converted into a watermark and hidden in the image data.

본 발명의 바람직한 실시예에 따르면, 상기 DB서버(200)는, 다중 센서 장치(100)로부터 디지털 페어링을 통해 적어도 한 종류 이상의 감지데이터가 워터마크로 은닉된 영상데이터를 전송받고, 상기 영상데이터의 워터마크를 검출하여 영상데이터에 상기 적어도 한 종류 이상의 감지데이터를 동기화 시키는 것을 특징으로 한다.According to a preferred embodiment of the present invention, the DB server 200 receives image data in which at least one or more types of sensing data are hidden as a watermark through digital pairing from the multi-sensor device 100, and the water of the image data And synchronizing the at least one type of sensing data with image data by detecting a mark.

본 발명에 따른 다중 데이터 수집시스템을 통한 데이터 수집방법은 차량에 설치되는 다중 센서 장치가 실시간으로 차량 전방의 영상데이터 및 적어도 한 종류 이상의 감지데이터를 수집하고, 상기 영상데이터에 적어도 한 종류 이상의 감지데이터를 워터마크로 변환하여 은닉하고 디지털 페어링을 통해 DB서버로 전송해주어 영상데이터 외 다중 감지데이터를 수집할 수 있는 효과가 있다.In the data collection method through the multiple data collection system according to the present invention, a multiple sensor device installed in a vehicle collects image data in front of the vehicle and at least one type of sensing data in real time, and at least one type of sensing data is included in the image data. Is converted into a watermark, concealed, and transmitted to the DB server through digital pairing, which has the effect of collecting multiple sensing data other than image data.

도 1은 본 발명의 일실시예에 따른 다중 데이터 수집시스템의 블록구성도
도 2는 본 발명의 일실시예에 따른 다중 센서 장치의 블록구성도
도 3은 본 발명의 일실시예에 따른 다중 데이터 수집시스템을 통한 다중 데이터 수집 방법 순서도
도 4는 본 발명의 일실시예에 따른 다중 센서 장치의 다중 데이터 수집 및 전송 순서도
도 5는 본 발명의 일실시예에 따른 제어부의 카메라부 제어 순서도1 is a block diagram of a multi-data collection system according to an embodiment of the present invention
2 is a block diagram of a multi-sensor device according to an embodiment of the present invention
3 is a flow chart of a method for collecting multiple data through a multiple data collection system according to an embodiment of the present invention
4 is a flow chart of collecting and transmitting multiple data of a multiple sensor device according to an embodiment of the present invention
5 is a flowchart illustrating a camera unit control of a controller according to an embodiment of the present invention.

아래에서는 첨부한 도면을 참조하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 본 발명의 실시예를 상세히 설명한다. 그러나 본 발명은 여러 가지 상이한 형태로 구성될 수 있으며 여기에서 설명하는 실시예에 한정되지 않는다. 그리고 도면에서 본 발명을 설명하기 위해서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 유사한 부분에 대해서는 유사한 도면 부호를 붙였다.Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings so that those of ordinary skill in the art can easily implement the present invention. However, the present invention may be configured in various different forms and is not limited to the embodiments described herein. In addition, in the drawings, parts irrelevant to the description are omitted to describe the present invention, and similar reference numerals are assigned to similar parts throughout the specification.

명세서 전체에서, 어떤 부분이 다른 부분과 “연결”되어 있다고 할 때, 이는 “직접적으로 연결”되어 있는 경우만이 아니라, 다른 부분을 통해 “간접적으로 연결”되는 경우도 포함하여 어떤 부분이 구성요소를 “포함”한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미한다.Throughout the specification, when a part is said to be “connected” with another part, it is not only the case that it is “directly connected”, but also a part that is “indirectly connected” through another part. When "included", it means that other components may be further included rather than excluding other components unless otherwise specified.

이하, 본 발명의 바람직한 실시 예를 도면을 참조하여 설명하면 다음과 같다.Hereinafter, a preferred embodiment of the present invention will be described with reference to the drawings.

도 1은 본 발명의 일실시예에 따른 다중 데이터 수집시스템의 블록구성도이며, 도 2는 본 발명의 일실시예에 따른 다중 센서 장치의 블록구성도이다. 도 1과 2에 도시된 바와 같이, 본 발명에 따른 다중 데이터 수집시스템은 차량에 설치되어 실시간으로 차량의 주변상태를 감지하여 차량 전방의 영상데이터 및 적어도 한 종류 이상의 감지데이터를 수집하여, 상기 적어도 한 종류 이상의 감지데이터를 워터마크로 변환한 후 상기 영상데이터에 은닉하고 디지털 페어링을 통해 DB서버(200)로 전송하는 다중 센서 장치(100) 및 상기 다중 센서 장치(100)로부터 디지털 페어링을 통해 상기 적어도 한 종류 이상의 감지데이터가 은닉된 영상데이터를 전송받아 디스플레이 하는 DB서버(200)를 포함하여서 구성된다.1 is a block diagram of a multiple data collection system according to an embodiment of the present invention, and FIG. 2 is a block diagram of a multiple sensor device according to an embodiment of the present invention. As shown in Figs. 1 and 2, the multiple data collection system according to the present invention is installed in a vehicle to detect the surrounding state of the vehicle in real time to collect image data in front of the vehicle and at least one type of sensing data, and the at least After converting one or more types of sensing data into a watermark, the at least one multi-sensor device 100 is concealed in the image data and transmitted to the DB server 200 through digital pairing, and through digital pairing from the multi-sensor device 100. It is configured to include a DB server 200 for receiving and displaying image data in which one or more types of sensing data are hidden.

또한 상기 다중 센서 장치(100)는 차량 전방의 영상을 촬영하여 영상데이터를 생성하는 카메라 센서부(101)와 차량의 위치를 감지하여 위치데이터를 생성하는 GPS부(102)와 차량 주변의 온습도를 감지하여 온습도데이터를 생성하는 온습도센서부(103)와 차량 주변에 비가 내리고 있는지를 감지하여 우적데이터를 생성하는 우적센서부(104)와 차량 주변의 대기압을 감지하여 대기압데이터를 생성하는 대기압센서부(105)와 상기 우적센서부(104)와 대기압센서부(105)로부터 우적데이터 및 대기압데이터를 전송받아 현재 대기상태가 강수인지를 판단하는 W밴드레이더부(106)와 차량 주변의 진동을 감지하여 진동데이터를 생성하는 진동센서부(107)와 차량의 기울어진 정도를 감지하여 기울기데이터를 생성하는 자이로센서부(108)와 상기 카메라 센서부(101)가 생성한 영상데이터에 상기 위치데이터, 온습도데이터, 우적데이터, 대기압데이터, 진동데이터 및 기울기데이터 중 적어도 한 종류 이상의 감지데이터를 워터마크로 변환한후 은닉하는 워터마킹부(109) 및 상기 워터마킹부(109)를 제어하여 생성한 적어도 한 종류 이상의 감지데이터가 워터마크로 은닉된 영상데이터를 디지털 페어링을 통해 상기 DB서버(200)로 전송하는 제어부(110)를 포함하여서 구성된다. 또한 상기 다중 센서 장치(100)는 도면에는 도시되어 있지 않으나, 상기 DB서버(200)와 통신하는 통신부(미부호)와 수집된 영상데이터 및 감지데이터를 저장하는 메모리부(미부호)와 고휘도LED부(미부호)를 더 포함한다.In addition, the multi-sensor device 100 includes a camera sensor unit 101 that generates image data by photographing an image in front of the vehicle, a GPS unit 102 that detects the position of the vehicle and generates location data, and the temperature and humidity around the vehicle. A temperature-humidity sensor unit 103 that detects and generates temperature and humidity data, a rain drop sensor unit 104 that detects whether rain is falling around the vehicle and generates rain drop data, and an atmospheric pressure sensor unit that generates atmospheric pressure data by detecting atmospheric pressure around the vehicle. (105) and the raindrop sensor unit 104 and the atmospheric pressure sensor unit 105 receives raindrop data and atmospheric pressure data and detects the vibration around the vehicle and the W-band radar unit 106 that determines whether the current atmospheric state is precipitation The position data in the image data generated by the vibration sensor unit 107 for generating vibration data and the gyro sensor unit 108 for generating tilt data by detecting the degree of inclination of the vehicle and the camera sensor unit 101, At least one generated by controlling the watermarking unit 109 and the watermarking unit 109 that converts at least one type of sensing data among temperature and humidity data, raindrop data, atmospheric pressure data, vibration data, and slope data into a watermark It is configured to include a control unit 110 for transmitting the image data concealed as a watermark of sensing data of a kind or more to the DB server 200 through digital pairing. In addition, the multi-sensor device 100 is not shown in the drawing, but a communication unit (uncoded) for communicating with the DB server 200, a memory unit (uncoded) for storing collected image data and sensing data, and a high-brightness LED It further includes a negative (unsigned).

또한 바람직하게, 상기 다중 센서 장치(100)와 DB서버(200)의 통신은 근거리 통신망(Local Area Network; LAN), 광역 통신망(Wide Area Network; WAN), 부가가치 통신망(Value Added Network; VAN), 개인 근거리 무선통신(Personal Area Network; PAN), 이동 통신망(mobile radio communication network) 또는 위성 통신망 등과 같은 모든 종류의 유무선 네트워크로 구현될 수 있다.In addition, preferably, the communication between the multi-sensor device 100 and the DB server 200 is a local area network (LAN), a wide area network (WAN), a value added network (VAN), Personal Area Network (PAN), mobile radio communication network (mobile radio communication network), it can be implemented in all kinds of wired and wireless networks, such as a satellite communication network.

또한 바람직하게 상기 DB서버(200)는 일반적인 컴퓨팅 기능을 하는 것이라면 특별히 제한되지 않는다. 즉, 휴대폰, 스마트 폰(smart phone), 테블릿 컴퓨터(tablet computer), 노트북 컴퓨터(notebook computer), 디지털방송용 단말기, PDA(Personal Digital Assistants), PMP(Portable Multimedia Player) 등과 같은 단말기가 될 수도 있다.In addition, preferably, the DB server 200 is not particularly limited as long as it performs a general computing function. That is, it may be a mobile phone, a smart phone, a tablet computer, a notebook computer, a digital broadcasting terminal, a personal digital assistant (PDA), a portable multimedia player (PMP), and the like. .

이하에서는 상기와 같이 구성되는 본 발명에 따른 다중 데이터 수집시스템을 통한 다중 데이터 수집방법에 대해서 도 3 내지 5를 통해서 상세하게 설명하도록 한다.Hereinafter, a method of collecting multiple data through a multiple data collection system according to the present invention configured as described above will be described in detail with reference to FIGS. 3 to 5.

도 3은 본 발명의 일실시예에 따른 다중 데이터 수집시스템을 통한 다중 데이터 수집 방법 순서도이다. 도 3에 도시된 바와 같이, 본 발명에 따른 다중 데이터 수집시스템을 통한 다중 데이터 수집방법은 다중 센서 장치(100)가 실시간으로 차량의 주변상태를 감지하여 차량 전방의 영상데이터 및 적어도 한 종류 이상의 감지데이터를 수집하여, 상기 적어도 한 종류 이상의 감지데이터를 워터마크로 변환한 후 상기 영상데이터에 은닉하고 디지털 페어링을 통해 DB서버(200)로 전송하는 단계(S100)와 DB서버(200)가 다중 센서 장치(100)로부터 디지털 페어링을 통해 적어도 한 종류 이상의 감지데이터가 워터마크로 은닉된 영상데이터를 전송받아 디스플레이 하는 단계(S200)를 포함한다.3 is a flowchart illustrating a method of collecting multiple data through a multiple data collection system according to an embodiment of the present invention. As shown in FIG. 3, in the method for collecting multiple data through the multiple data collection system according to the present invention, the multiple sensor device 100 detects the surrounding state of the vehicle in real time, and detects image data in front of the vehicle and at least one or more types. Collecting data, converting the at least one type of sensing data into a watermark, concealing the image data and transmitting it to the DB server 200 through digital pairing (S100) and the DB server 200 is a multi-sensor device And receiving and displaying image data in which at least one type of sensing data is hidden as a watermark through digital pairing from (100) (S200).

상기 단계(S100)에 대해서 좀 더 상세하게 살펴보면, 도 4와 같다. 도 4는 본 발명의 일실시예에 따른 다중 센서 장치의 다중 데이터 수집 및 전송 순서도이다. 도 4에 도시된 바와 같이, 먼저 상기 단계(S100)는 먼저 카메라 센서부(101)가 차량 전방의 영상데이터, GPS부(102)가 위치데이터, 온습도센서부(103)가 온습도데이터, 우적센서부(104)가 우적데이터, 대기압센서부(105)가 대기압데이터, 진동센서부(107)가 진동데이터 및 자이로센서부(108)가 기울기데이터를 생성하는 단계(S110)를 포함한다.Looking at the step (S100) in more detail, as shown in FIG. 4 is a flow chart of collecting and transmitting multiple data of a multiple sensor device according to an embodiment of the present invention. As shown in Fig. 4, the first step (S100) is first, the camera sensor unit 101 is the image data in front of the vehicle, the GPS unit 102 is the location data, the temperature and humidity sensor unit 103 is the temperature and humidity data, the rain sensor. The unit 104 generates rain data, the atmospheric pressure sensor unit 105 is atmospheric pressure data, the vibration sensor unit 107 generates vibration data, and the gyro sensor unit 108 generates tilt data (S110).

상기 단계(S110)에서 제어부(110)는 일정조건에 따라 상기 카메라부(101)의 제어모드를 변경하여 영상데이터를 수집하는데 이는 도 5와 같다. 도 5는 본 발명의 일실시예에 따른 제어부의 카메라부 제어 순서도이다. 도 5에 도시된 바와 같이, 상기 제어부(110)는 먼저 상기 카메라부(101)를 어떤 제어모드로 제어할 지 판단하는 단계(S10)를 수행한다.In the step S110, the control unit 110 changes the control mode of the camera unit 101 according to a predetermined condition to collect image data, as shown in FIG. 5. 5 is a flowchart illustrating a control process of a camera unit of a controller according to an embodiment of the present invention. As shown in FIG. 5, the control unit 110 first performs a step (S10) of determining in which control mode the camera unit 101 is to be controlled.

이 때, 상기 단계(S10)에서 상기 제어부(110)는 상기 W밴드레이더부(106)가 상기 우적센서부(104)와 대기압센서부(105)로부터 우적데이터 및 대기압데이터를 전송받아 상기 현재 대기상태가 강수라고 판단할 경우, 상기 카메라부(101)를 강수 감지 모드(Rain Detect Mode)로 제어하여 상기 카메라부(101)가 차량의 전방을 초근접 고속 촬영하도록 제어하여 영상데이터를 수집한다. (S11) 상기 초근접 고속 촬영이라 함은 바람직하게 적어도 하나 이상의 프레임을 0.1초 내지 1분 미만의 시간동안 1/1000초의 셔터스피드를 통해 촬영하는 것을 의미한다. (1 frame per < 1 min)At this time, in the step (S10), the control unit 110 receives the rain drop data and atmospheric pressure data from the W band radar unit 106 from the rain drop sensor unit 104 and the atmospheric pressure sensor unit 105, and When it is determined that the state is precipitation, the camera unit 101 is controlled in a rain detection mode, and the camera unit 101 controls the front of the vehicle to be photographed at high speed and close proximity to collect image data. (S11) The ultra-close-up high-speed photographing preferably means photographing at least one or more frames at a shutter speed of 1/1000 second for a time of 0.1 seconds to less than 1 minute. (1 frame per <1 min)

또한, 상기 단계(S10)에서 상기 제어부(110)는 상기 진동센서부(107) 및 자이로센서부(108)로부터 진동데이터 및 기울기데이터를 전송받아 지진을 감지했다고 판단한 경우, 상기 카메라부(101)를 지진 감지 모드(Earthquake Detect Mode)로 제어하여 상기 카메라부(101)가 차량의 전방을 컬러로 근거리 촬영하도록 제어하여 영상데이터를 수집한다. (S13) 상기 근거리 촬영이라 함은 바람직하게 1초에 15 내지 30 프레임을 촬영하는 것을 의미한다. (15~30 frames per 1 sec)In addition, in the step (S10), the controller 110 receives vibration data and tilt data from the vibration sensor unit 107 and the gyro sensor unit 108 and determines that an earthquake is detected, the camera unit 101 Is controlled in Earthquake Detect Mode so that the camera unit 101 captures the front of the vehicle in a short distance in color to collect image data. (S13) The short-range photographing preferably means photographing 15 to 30 frames per second. (15~30 frames per 1 sec)

또한, 상기 단계(S10)에서 상기 제어부(110)는 강수 또는 지진이 없다고 판단할 경우 평상시에는 상기 카메라부(101)를 노멀 감지 모드(Normal Detect Mode)로 제어하여 상기 카메라부(101)가 차량의 전방을 컬러로 원거리 촬영하도록 제어하여 영상데이터를 수집한다. (S12) 상기 원거리 촬영이라 함은 바람직하게 적어도 하나 이상의 프레임을 1분 내지 5분 미만의 시간동안 1/1000초의 셔터스피드를 통해 촬영하는 것을 의미한다. (1 frame per 1~5 min)In addition, when the controller 110 determines that there is no precipitation or earthquake in the step (S10), the camera unit 101 controls the camera unit 101 in a normal detection mode so that the camera unit 101 The image data is collected by controlling the front of the camera to take a long distance in color. (S12) The long-distance photographing preferably means photographing at least one or more frames through a shutter speed of 1/1000 second for a time of 1 minute to less than 5 minutes. (1 frame per 1~5 min)

다음으로 상기 단계(S100)는 제어부(110)가 워터마킹부(109)를 제어하여 영상데이터에 위치데이터, 온습도데이터, 우적데이터, 대기압데이터, 진동데이터 및 기울기데이터 중 적어도 한 종류 이상의 감지데이터를 워터마크로 변환한 후 은닉하는 단계(S120)를 포함한다.Next, in the step (S100), the control unit 110 controls the watermarking unit 109 to store at least one type of sensing data among position data, temperature and humidity data, raindrop data, atmospheric pressure data, vibration data, and tilt data in the image data. Converting to a watermark and then concealing it (S120).

상기 단계(S120)에서 상기 제어부(110)는 상기 카메라부(101)로부터 영상데이터를 입력 받은 시점에서 가장 최근 입력된 위치데이터, 온습도데이터, 우적데이터, 대기압데이터, 진동데이터 및 기울기데이터 중 적어도 한 종류 이상의 감지데이터를 워터마크로 변환하여 영상데이터에 은닉하는데, 이는 상기 카메라부(101), GPS부(102), 온습도센서부(103), 우적센서부(104), 대기압센서부(105), 진동센서부(107) 및 자이로센서부(108)가 생성하는 데이터의 생성주기가 모두 달라 상기 카메라부(101)가 생성하는 영상데이터의 시점에 상기 각 센서부들이 생성하는 감지데이터를 동기화 시키기 위함이다.In the step (S120), the control unit 110 includes at least one of the most recently input position data, temperature and humidity data, rain data, atmospheric pressure data, vibration data, and inclination data at the time the image data is input from the camera unit 101. Sensing data of more than a type is converted into a watermark and hidden in image data, which is the camera unit 101, GPS unit 102, temperature and humidity sensor unit 103, rain sensor unit 104, atmospheric pressure sensor unit 105, To synchronize the sensing data generated by the respective sensor units at the time point of the image data generated by the camera unit 101 because the generation periods of the data generated by the vibration sensor unit 107 and the gyro sensor unit 108 are all different. to be.

마지막으로 상기 단계(S100)는 제어부(110)가 디지털 페어링을 통해 적어도 한 종류 이상의 감지데이터가 워터마크로 은닉된 영상데이터를 DB서버(200)로 전송하는 단계(S130)를 포함한다.Finally, the step (S100) includes a step (S130) of the control unit 110 transmitting image data in which at least one type of sensing data is concealed as a watermark to the DB server 200 through digital pairing.

상기 단계(S130) 이 후 상기 DB서버(200)는 상기 다중 센서 장치(100)로부터 디지털 페어링을 통해 적어도 한 종류 이상의 감지데이터가 워터마크로 은닉된 영상데이터를 전송받고 이를 디스플레이 하는 단계(S200)를 수행한다.After the step (S130), the DB server 200 receives and displays the image data in which at least one or more types of sensing data is hidden as a watermark through digital pairing from the multi-sensor device 100 (S200). Perform.

이 때 상기 단계(S200)에서 상기 DB서버(200)는 영상데이터를 디스플레이 하기 전에 상기 영상데이터의 워터마크를 검출하는 작업을 수행하는데, 워터마크가 검출되며 상기 영상데이터에 워터마크로 은닉되었던 감지데이터가 자동으로 동기화되어 영상데이터에 감지데이터가 동기화된 영상데이터를 디스플레이 하게 된다.At this time, in the step (S200), the DB server 200 performs a task of detecting a watermark of the image data before displaying the image data, and the watermark is detected and the detection data that has been hidden in the image data as a watermark. Is automatically synchronized to display the image data in which the sensing data is synchronized with the image data.

따라서, 상기한 바와 같이 본 발명에 따른 다중 데이터 수집시스템은 차량에 설치되는 다중 센서 장치가 실시간으로 차량 전방의 영상데이터 및 적어도 한 종류 이상의 감지데이터를 수집하고, 상기 영상데이터에 적어도 한 종류 이상의 감지데이터를 워터마크로 변환하여 은닉하고 디지털 페어링을 통해 DB서버로 전송해주어 실시간으로 영상데이터 외 다중 감지데이터를 수집할 수 있는 효과가 있다.Accordingly, as described above, in the multi-data collection system according to the present invention, a multi-sensor device installed in a vehicle collects image data in front of the vehicle and at least one type of sensing data in real time, and detects at least one type or more in the image data. The data is converted into a watermark, hidden, and transmitted to the DB server through digital pairing, which has the effect of collecting multiple sensing data in addition to image data in real time.

본 발명은 도면에 도시된 실시 예(들)를 참고로 설명되었으나 이는 예시적인 것에 불과하며, 본 기술 분야의 통상의 지식을 가진 자라면 이로부터 다양한 변형이 이루어질 수 있으며, 상기 설명된 실시 예(들)의 전부 또는 일부가 선택적으로 조합되어 구성될 수도 있다는 점을 이해할 것이다. 따라서, 본 발명의 진정한 기술적 보호 범위는 첨부된 특허청구범위의 기술적 사상에 의해 정해져야 할 것이다.The present invention has been described with reference to the embodiment(s) shown in the drawings, but this is merely exemplary, and various modifications may be made therefrom by those of ordinary skill in the art, and the above-described embodiment ( It will be appreciated that all or some of the s) may be optionally combined and configured. Therefore, the true technical scope of the present invention should be determined by the technical spirit of the appended claims.

100 : 다중 센서 장치
101 : 카메라부
102 : GPS부
103 : 온습도센서부
104 : 우적센서부
105 : 대기압센서부
106 : W밴드레이더부
107 : 진동센서부
108 : 자이로센서부
109 : 워터마킹부
110 : 제어부
200 : DB서버100: multiple sensor device
101: camera unit
102: GPS unit
103: temperature and humidity sensor unit
104: rain sensor unit
105: atmospheric pressure sensor unit
106: W band radar unit
107: vibration sensor unit
108: gyro sensor unit
109: watermarking part
110: control unit
200: DB server

Claims (7)

다중 센서 장치(100)가 차량에 설치되어 실시간으로 차량의 주변상태를 감지하여 차량 전방의 영상데이터 및 적어도 한 종류 이상의 감지데이터를 수집하여, 상기 적어도 한 종류 이상의 감지데이터를 워터마크로 변환한 후 상기 영상데이터에 은닉하고 디지털 페어링을 통해 DB서버(200)로 전송하는 A 단계; 및
DB서버(200)가 상기 다중 센서 장치(100)로부터 디지털 페어링을 통해 상기 적어도 한 종류 이상의 감지데이터가 은닉된 영상데이터를 전송받아 디스플레이 하는 B 단계;
를 포함하되,
상기 A 단계는,
카메라 센서부(101)가 차량 전방의 영상데이터, GPS부(102)가 위치데이터, 온습도센서부(103)가 온습도데이터, 우적센서부(104)가 우적데이터, 대기압센서부(105)가 대기압데이터, 진동센서부(107) 진동데이터 및 자이로센서부(108)가 기울기데이터를 생성하는 단계;
워터마킹부(109)가 상기 카메라 센서부(101)가 생성한 영상데이터에 상기 위치데이터, 온습도데이터, 우적데이터, 대기압데이터, 진동데이터 및 기울기데이터 중 적어도 한 종류 이상의 감지데이터를 워터마크로 변환한후 은닉하는 단계; 및
제어부(110)가 상기 워터마킹부(109)가 생성한 적어도 한 종류 이상의 감지데이터가 워터마크로 은닉된 영상데이터를 디지털 페어링을 통해 상기 DB서버(200)로 전송하는 단계;
를 포함하되,
상기 제어부(110)는,
평상시에는 카메라 센서부(101)를 노멀 감지 모드(Normal Detect Mode)로 제어하여 카메라 센서부(101)가 차량의 전방을 촬영하되 적어도 하나 이상의 프레임을 1분 내지 5분 미만의 시간동안 1/1000초의 셔터스피드를 통해 촬영하며,
W밴드레이더부(106)가 현재 대기상태가 강수라고 판단할 경우, 카메라 센서부(101)를 강수 감지 모드(Rain Detect Mode)로 제어하여 카메라 센서부(101)가 차량의 전방을 촬영하되 적어도 하나 이상의 프레임을 0.1초 내지 1분 미만의 시간동안 1/1000초의 셔터스피드를 통해 촬영하며,
진동센서부(107) 및 자이로센서부(108)로부터 진동데이터 및 기울기데이터를 전송받아 지진을 감지했다고 판단한 경우, 카메라 센서부(101)를 지진 감지 모드(Earthquake Detect Mode)로 제어하여 카메라 센서부(101)가 차량의 전방을 컬러로 근거리 촬영하되, 1초에 15 내지 30 프레임을 촬영하는 것을 특징으로 하는 다중 데이터 수집시스템을 통한 데이터 수집방법.
A multi-sensor device 100 is installed in the vehicle to detect the surrounding state of the vehicle in real time, collect image data in front of the vehicle and at least one type of sensing data, convert the at least one type of sensing data into a watermark, and then A step of concealing the image data and transmitting it to the DB server 200 through digital pairing; And
A step B of the DB server 200 receiving and displaying image data in which the at least one or more types of sensing data are hidden through digital pairing from the multi-sensor device 100;
Including,
The step A,
The camera sensor unit 101 is the image data in front of the vehicle, the GPS unit 102 is the location data, the temperature and humidity sensor unit 103 is the temperature and humidity data, the rain drop sensor unit 104 is rain data, the atmospheric pressure sensor unit 105 is atmospheric pressure. Generating data, the vibration sensor unit 107 vibration data, and the gyro sensor unit 108 tilt data;
The watermarking unit 109 converts at least one type of sensing data among the location data, temperature and humidity data, raindrop data, atmospheric pressure data, vibration data, and tilt data to the image data generated by the camera sensor unit 101 into a watermark. Concealing after; And
Transmitting, by the control unit 110, image data in which at least one type of sensing data generated by the watermarking unit 109 is concealed as a watermark to the DB server 200 through digital pairing;
Including,
The control unit 110,
Normally, the camera sensor unit 101 is controlled in a normal detection mode, so that the camera sensor unit 101 photographs the front of the vehicle, but at least one or more frames are taken for a period of less than 1 minute to 5 minutes. Shooting with a shutter speed of seconds,
When the W band radar unit 106 determines that the current standby state is precipitation, the camera sensor unit 101 controls the rain detection mode to allow the camera sensor unit 101 to photograph the front of the vehicle. One or more frames are taken at a shutter speed of 1/1000 second for a time of 0.1 seconds to less than 1 minute,
When it is determined that an earthquake has been detected by receiving vibration data and tilt data from the vibration sensor unit 107 and the gyro sensor unit 108, the camera sensor unit 101 is controlled in the Earthquake Detect Mode to control the camera sensor unit. A data collection method through a multi-data collection system, characterized in that (101) photographs the front of the vehicle in a short distance in color, and photographs 15 to 30 frames per second.
 삭제delete 삭제delete 삭제delete 삭제delete 제1항에 있어서,
상기 제어부(110)는,
워터마킹부(109)를 제어하여 카메라 센서부(101)로부터 영상데이터를 입력 받은 시점에서 가장 최근 입력된 위치데이터, 온습도데이터, 우적데이터, 대기압데이터, 진동데이터 및 기울기데이터 중 적어도 한 종류 이상의 감지데이터를 워터마크로 변환하여 영상데이터에 은닉하는 것을 특징으로 하는 다중 데이터 수집시스템을 통한 데이터 수집방법.
The method of claim 1,
The control unit 110,
Control the watermarking unit 109 to detect at least one of the most recently input position data, temperature and humidity data, rain data, atmospheric pressure data, vibration data, and tilt data at the time the image data is input from the camera sensor unit 101 A data collection method through a multiple data collection system, characterized in that the data is converted into a watermark and hidden in image data.
 제1항에 있어서,
상기 DB서버(200)는,
다중 센서 장치(100)로부터 디지털 페어링을 통해 적어도 한 종류 이상의 감지데이터가 워터마크로 은닉된 영상데이터를 전송받고, 상기 영상데이터의 워터마크를 검출하여 영상데이터에 상기 적어도 한 종류 이상의 감지데이터를 동기화 시키는 것을 특징으로 하는 다중 데이터 수집시스템을 통한 데이터 수집방법.The method of claim 1,
The DB server 200,
Receives image data in which at least one type of sensing data is hidden as a watermark through digital pairing from the multi-sensor device 100, detects a watermark of the image data, and synchronizes the at least one type of sensing data with image data. Data collection method through a multiple data collection system, characterized in that.
KR1020190127549A 2019-10-15 2019-10-15 Data collet method using multi sensor data collect system KR102216874B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020190127549A KR102216874B1 (en) 2019-10-15 2019-10-15 Data collet method using multi sensor data collect system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020190127549A KR102216874B1 (en) 2019-10-15 2019-10-15 Data collet method using multi sensor data collect system

Publications (1)

Publication Number Publication Date
KR102216874B1 true KR102216874B1 (en) 2021-02-18

Family

ID=74688433

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020190127549A KR102216874B1 (en) 2019-10-15 2019-10-15 Data collet method using multi sensor data collect system

Country Status (1)

Country Link
KR (1) KR102216874B1 (en)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20100076831A (en) * 2008-12-26 2010-07-06 동의대학교 산학협력단 Anti forgery system for vehicle black box
KR101234347B1 (en) * 2012-06-04 2013-02-15 주식회사 아이서티 Black box service providing method for vehicles enhanced security based on watermarking technique
KR101303580B1 (en) * 2013-06-13 2013-09-09 주식회사그린티 Black box for car
KR101413634B1 (en) 2013-11-08 2014-07-04 한영택 System and method for providing notarized video record
KR101752593B1 (en) 2016-04-05 2017-06-29 주식회사 드론오렌지 VR Motion Kiosk for Traveling Guide

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20100076831A (en) * 2008-12-26 2010-07-06 동의대학교 산학협력단 Anti forgery system for vehicle black box
KR101234347B1 (en) * 2012-06-04 2013-02-15 주식회사 아이서티 Black box service providing method for vehicles enhanced security based on watermarking technique
KR101303580B1 (en) * 2013-06-13 2013-09-09 주식회사그린티 Black box for car
KR101413634B1 (en) 2013-11-08 2014-07-04 한영택 System and method for providing notarized video record
KR101752593B1 (en) 2016-04-05 2017-06-29 주식회사 드론오렌지 VR Motion Kiosk for Traveling Guide

Similar Documents

Publication Publication Date Title
CN107566529B (en) Photographing method, mobile terminal and cloud server
CN110177221B (en) Shooting method and device for high dynamic range image
CN109361865B (en) Shooting method and terminal
CN108848308B (en) Shooting method and mobile terminal
CN106125767B (en) Aircraft control method and device and aircraft
CN108055402B (en) Shooting method and mobile terminal
KR20130036702A (en) Apparatus and method for automatic white balance with supplementary sensors
CN107623818B (en) Image exposure method and mobile terminal
CN109639969B (en) Image processing method, terminal and server
CN110930329B (en) Star image processing method and device
WO2013136399A1 (en) Information provision system, information provision device, photographing device, and computer program
CN111414598B (en) Monitoring method, device and equipment based on block chain and storage medium
CN102857685A (en) Image capturing method and image capturing system
CN111127509A (en) Target tracking method, device and computer readable storage medium
CN108616687B (en) Photographing method and device and mobile terminal
CN111447365B (en) Shooting method and electronic equipment
CN110855901A (en) Camera exposure time control method and electronic equipment
CN111050069B (en) Shooting method and electronic equipment
CN110881105B (en) Shooting method and electronic equipment
CN111131722A (en) Image processing method, electronic device, and medium
CN107734269B (en) Image processing method and mobile terminal
CN111247787A (en) Photographing method and photographing terminal
CN112714294B (en) Alarm preview method, device and computer readable storage medium
KR102216874B1 (en) Data collet method using multi sensor data collect system
CN115880213A (en) Display abnormity detection method, device and system

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant