KR102313711B1 - Artificial intelligence black box system with ambient detection and danger alarm functions - Google Patents
Artificial intelligence black box system with ambient detection and danger alarm functions Download PDFInfo
- Publication number
- KR102313711B1 KR102313711B1 KR1020210057014A KR20210057014A KR102313711B1 KR 102313711 B1 KR102313711 B1 KR 102313711B1 KR 1020210057014 A KR1020210057014 A KR 1020210057014A KR 20210057014 A KR20210057014 A KR 20210057014A KR 102313711 B1 KR102313711 B1 KR 102313711B1
- Authority
- KR
- South Korea
- Prior art keywords
- unit
- vehicle
- identification unit
- facility
- user
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G07—CHECKING-DEVICES
- G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
- G07C5/00—Registering or indicating the working of vehicles
- G07C5/08—Registering or indicating performance data other than driving, working, idle, or waiting time, with or without registering driving, working, idle or waiting time
- G07C5/0841—Registering performance data
- G07C5/085—Registering performance data using electronic data carriers
- G07C5/0866—Registering performance data using electronic data carriers the electronic data carrier being a digital video recorder in combination with video camera
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60Q—ARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
- B60Q1/00—Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor
- B60Q1/26—Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to indicate the vehicle, or parts thereof, or to give signals, to other traffic
- B60Q1/50—Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to indicate the vehicle, or parts thereof, or to give signals, to other traffic for indicating other intentions or conditions, e.g. request for waiting or overtaking
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W10/00—Conjoint control of vehicle sub-units of different type or different function
- B60W10/04—Conjoint control of vehicle sub-units of different type or different function including control of propulsion units
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W10/00—Conjoint control of vehicle sub-units of different type or different function
- B60W10/04—Conjoint control of vehicle sub-units of different type or different function including control of propulsion units
- B60W10/06—Conjoint control of vehicle sub-units of different type or different function including control of propulsion units including control of combustion engines
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W10/00—Conjoint control of vehicle sub-units of different type or different function
- B60W10/18—Conjoint control of vehicle sub-units of different type or different function including control of braking systems
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
- B60W40/02—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W50/08—Interaction between the driver and the control system
- B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
-
- G—PHYSICS
- G07—CHECKING-DEVICES
- G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
- G07C5/00—Registering or indicating the working of vehicles
- G07C5/008—Registering or indicating the working of vehicles communicating information to a remotely located station
-
- G—PHYSICS
- G07—CHECKING-DEVICES
- G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
- G07C9/00—Individual registration on entry or exit
- G07C9/00174—Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys
- G07C9/00563—Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys using personal physical data of the operator, e.g. finger prints, retinal images, voicepatterns
-
- G—PHYSICS
- G07—CHECKING-DEVICES
- G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
- G07C9/00—Individual registration on entry or exit
- G07C9/30—Individual registration on entry or exit not involving the use of a pass
- G07C9/32—Individual registration on entry or exit not involving the use of a pass in combination with an identity check
- G07C9/37—Individual registration on entry or exit not involving the use of a pass in combination with an identity check using biometric data, e.g. fingerprints, iris scans or voice recognition
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B7/00—Signalling systems according to more than one of groups G08B3/00 - G08B6/00; Personal calling systems according to more than one of groups G08B3/00 - G08B6/00
- G08B7/06—Signalling systems according to more than one of groups G08B3/00 - G08B6/00; Personal calling systems according to more than one of groups G08B3/00 - G08B6/00 using electric transmission, e.g. involving audible and visible signalling through the use of sound and light sources
Abstract
Description
본 발명은 주변 감지 및 위험 알람 기능이 구비된 인공지능 블랙박스 시스템에 관한 것으로, 보다 상세하게는 차량 또는 시설물에 설치되어 주변 상황을 촬영하고, 촬영된 영상에서 사람, 동물, 구조물 등과 같은 대상물을 특정하고, 특정된 대상물의 종류와 대상물과 차량 또는 시설물의 거리에 따라 외부로 조명 또는 소리를 배출하여 운전자는 물론 차량 주변에서 이동하거나 작업 중인 작업자의 주의를 환기시켜 사고 발생을 미연에 방지할 수 있도록 한 주변 감지 및 위험 알람 기능이 구비된 인공지능 블랙박스 시스템에 관한 것이다.The present invention relates to an artificial intelligence black box system equipped with a surrounding detection and danger alarm function, and more particularly, it is installed in a vehicle or facility to photograph the surrounding situation, and to capture an object such as a person, an animal, a structure, etc. from the captured image. Depending on the type of specific and specified object and the distance between the object and the vehicle or facility, it is possible to prevent accidents in advance by emitting light or sound to the outside to draw the attention of not only the driver but also workers who are moving or working around the vehicle. It relates to an artificial intelligence black box system equipped with surrounding detection and danger alarm functions.
통상 블랙박스는 차량의 전방, 측방, 후방의 상황을 촬영하여 주행 중 또는 주차 중 발생하는 다양한 사건 및 사고에 대한 증거자료로서 사용되는 것으로, 보다 정확하게는 대시보드 카메라(Dashboard Camera)라고 하며, 줄여서 대시캠(Dashcam)이라고 한다.A black box is usually used as evidence for various events and accidents that occur while driving or parking by photographing the front, side, and rear conditions of the vehicle. It's called Dashcam.
이를 위해 일반적인 차량용 블랙박스는 차량에 설치되는 개수 및 위치에 따라 단일채널, 2채널, 4채널로 구분되고, 단일채널은 차량의 전방만을 촬영하는 것이며, 2채널은 차량의 전방과 후방을 촬영하고 4채널은 차량의 전방, 후방 그리고 좌우 양측에서 전방을 촬영하는 것을 의미한다.For this purpose, a typical vehicle black box is divided into single channel, 2 channel, and 4 channel depending on the number and location of the vehicle installed. 4-channel means to shoot the front of the vehicle from the front, rear and left and right sides.
이어서 상기 4채널에 더하여 차량의 운전석과 적재물이 적재되는 적재공간을 각각 촬영하는 2채널이 추가되어 전체 6채널로 구성될 수 있다.Subsequently, in addition to the 4 channels, 2 channels for photographing the driver's seat of the vehicle and the loading space in which the load is loaded are added, so that a total of 6 channels may be added.
한편 차량이외에 소형 요트를 포함한 다양한 레저용 요트, 화물 운송용 선박, 낚시용 배와 같은 해상 이동수단의 조타실과 기관실 및 요트의 외주면에 설치될 수 있고, 레저용 차량인 캠핑카에서는 캠핑카의 외부는 물론 운전석과 생활 및 수면을 위해 형성된 생활공간을 촬영할 수 있도록 배치된다.On the other hand, in addition to vehicles, it can be installed in the wheelhouse, engine room, and outer periphery of yachts in various leisure yachts including small yachts, cargo transport ships, and fishing boats. It is arranged to photograph the living space formed for living and sleeping.
종래의 차량용 블랙박스는 단순히 설치된 위치의 주변을 촬영하고, 촬영한 영상을 순차적으로 저장하며 특정 이벤트 발생시 이를 별도로 저장하고, 필요시 이를 로드하여 별도의 동영상프로그램을 통해 확인하였다.The conventional vehicle black box simply takes pictures of the surroundings of the installed location, sequentially stores the captured images, separately stores them when a specific event occurs, loads them when necessary, and confirms them through a separate video program.
즉, 종래의 차량용 블랙박스는 촬영한 영상을 단순 저장하는 것으로 차량의 주변에서 발생하는 상황에 실시간으로 대응하여 이를 운전자에게 전달할 수 없는 문제점이 있었다.That is, the conventional black box for a vehicle simply stores the captured image, and there is a problem in that it cannot respond to situations occurring in the vicinity of the vehicle in real time and deliver it to the driver.
따라서 상기의 문제점을 해결하기 위해 다양한 기술이 제안되었는데, 일예로 대한민국 등록특허 제10-0868415호가 있다.Therefore, various techniques have been proposed to solve the above problems, as an example of the Republic of Korea Patent Registration No. 10-0868415.
상기 종래기술은 ‘영상카메라 및 센서를 연동한 후진경보시스템’으로서, 차량의 후진등이 점등할 때 검출신호를 발생하는 차량후진 검출부와, 검출신호 발생시 후방 물체의 위치를 감지하는 센서부와, 검출 신호 발생시 후방의 영상을 촬영하는 카메라부와, 센서부에서 감지한 신호에 대응하여 상기 카메라부의 촬영 방향을 조정하는 제어부를 포함한다.The prior art is a 'reversing warning system interlocking a video camera and a sensor', comprising: a vehicle reversing detection unit that generates a detection signal when the vehicle's reversing lamp is turned on; a sensor unit that detects the position of a rear object when the detection signal is generated; It includes a camera unit for photographing a rear image when a detection signal is generated, and a control unit for adjusting a photographing direction of the camera unit in response to a signal detected by the sensor unit.
상기와 같이 이루어진 종래기술은 차량이 후진하는 것을 감지하여 차량의 후진 방향으로 카메라의 촬영 방향을 이동시켜 차량 후방의 사각지대에 있는 장애물을 실시간으로 감시하는 것이다.The prior art made as described above detects that the vehicle is moving backwards and moves the camera in the reverse direction of the vehicle to monitor obstacles in the blind spot at the rear of the vehicle in real time.
이때 상기 종래기술은 다수 개의 센서가 고정된 위치에서 설정된 감지각을 감시하는 것이기 때문에 차량이 후방으로 이동해야만 차량의 후방측에 위치하는 대상물을 감지할 수 있는 것이다.At this time, since the prior art monitors a sensing angle set at a fixed position by a plurality of sensors, the vehicle must move backward to detect an object located at the rear side of the vehicle.
한편 지게차, 굴삭기 등과 같이 상부선회체가 수평 방향으로 회전하면서 다양한 작업을 진행하는 특수차량의 경우 차량의 위치는 정지된 상태에서 상부선회체가 회전하기 때문에 상부선회체의 회전 반경내에서 작업 중이거나 보행 중인 작업자를 감지하여 운전자에게 알려 줌으로써 사고를 방지해야 하는데, 이러한 목적을 달성하기 위한 구조는 상술한 선행기술에 제안된 바 없다.On the other hand, in the case of special vehicles such as forklifts and excavators that perform various tasks while the upper revolving body rotates in the horizontal direction, the position of the vehicle is stopped and the upper revolving body rotates within the rotation radius of the upper revolving body. An accident should be prevented by detecting the operator and notifying the driver, and a structure for achieving this purpose has not been proposed in the prior art.
즉, 차량의 운전자에게 조명 또는 소리를 통해 주변 대상물의 존재를 확인시켜줌과 동시에 차량 주변에서 작업 중인 작업자 또는 보행자에게 조명 또는 소리를 제공하여 자신에게 근접한 차량의 존재를 확인시켜 안전사고를 방지할 수 있는 기술의 개발이 요구되고 있다.In other words, it is possible to prevent a safety accident by confirming the existence of a nearby object to the driver of the vehicle through lighting or sound and at the same time providing light or sound to a worker or pedestrian working around the vehicle to confirm the presence of a nearby vehicle. There is a need for the development of technology.
또한 상술한 차량용 블랙박스를 차량에 설치하지 않고 공장이나 시설물 등과 같은 구조물에 설치하여 출입자를 확인하거나 야간시 방범용으로 활용할 수 있는데, 종래의 방범용 카메라인 CCTV는 최초 설치된 위치에서 설정된 방향만 촬영하고, 촬영된 영상을 일정 시간만큼 저장하는 용도로 사용된다.In addition, the above-described vehicle black box can be installed in a structure such as a factory or facility without installing it in the vehicle to check the occupants or use it for crime prevention at night. It is used to store the captured image for a certain amount of time.
즉, 단순히 카메라를 설치하여 설정된 방향만을 촬영하기 때문에 촬영 가능 범위를 벗어난 사각지대에서 접근하는 대상물을 확인할 수 없는 문제점이 있다.That is, there is a problem in that it is impossible to check an object approaching from a blind spot out of a photographing range because a camera is installed and only a set direction is photographed.
이를 보완하기 위하여 카메라의 각도가 일정 시간마다 자동으로 변경되는 방범용 카메라가 제안되었으나 이러한 각도조절이 가능한 방범용 카메라는 매우 고가이며 유지 보수 비용도 높기 때문에 소규모 현장에서는 사용하기 어려운 문제점이 있었다.In order to compensate for this, a security camera in which the angle of the camera is automatically changed at regular intervals has been proposed.
본 발명은 상기와 같은 문제점을 해결하기 위해 제안된 것으로, 차량 또는 시설물에 설치되어 주변 상황을 촬영하고, 촬영된 영상에서 사람, 동물, 구조물 등과 같은 대상물을 특정하고, 특정된 대상물의 종류와 대상물과 차량 또는 시설물의 거리에 따라 외부로 조명 또는 소리를 배출하여 운전자는 물론 차량 주변에서 이동하거나 작업 중인 작업자의 주의를 환기시켜 사고 발생을 미연에 방지할 수 있는 주변 감지 및 위험 알람 기능이 구비된 인공지능 블랙박스 시스템을 제공하는데 목적이 있다.The present invention has been proposed to solve the above problems, is installed in a vehicle or facility to photograph a surrounding situation, specifies an object such as a person, an animal, a structure, etc. By emitting lights or sounds to the outside depending on the distance from the vehicle or facility to the driver as well as workers moving or working around the vehicle, it is equipped with an ambient detection and danger alarm function that can prevent accidents in advance. It aims to provide an artificial intelligence black box system.
또한 본 발명은 사용자의 체온을 측정하여 기준값에 비해 높은 체온을 가진 사용자의 출입을 제한하고, 제한된 사용자의 정보를 관리자에게 전송함과 동시에 사용자에게도 전송하여 신속한 후속조치가 이루어질 수 있도록 한 주변 감지 및 위험 알람 기능이 구비된 인공지능 블랙박스 시스템을 제공하는데 목적이 있다.In addition, the present invention measures the user's body temperature to restrict the access of a user with a higher body temperature than the reference value, and transmits the restricted user information to the administrator and also to the user at the same time to enable rapid follow-up actions. An object of the present invention is to provide an artificial intelligence black box system equipped with a danger alarm function.
상기의 목적을 달성하기 위하여 본 발명은, 차량의 주변 또는 시설물의 주변을 촬영하는 카메라와 차량의 주변 또는 시설물의 주변에 피사체를 측정하는 라이다를 포함한 촬영부;In order to achieve the above object, the present invention includes: a photographing unit including a camera for photographing the periphery of a vehicle or a perimeter of a facility and a lidar for measuring a subject in the periphery of a vehicle or a periphery of a facility;
상기 촬영부를 통해 촬영된 영상을 기 저장된 정보와 대비하여 촬영된 영상에서 대상물을 특정하는 식별부;an identification unit for specifying an object in the photographed image by comparing the image photographed through the photographing unit with pre-stored information;
상기 식별부를 통해 특정된 대상물의 정보에 따라 외부로 조명 또는 소리를 방출하는 알람부;an alarm unit for emitting light or sound to the outside according to the information on the object specified through the identification unit;
상기 식별부를 통해 특정된 대상물의 정보에 대응하여 차량의 구동모듈을 제어하는 동작제어부;an operation control unit for controlling the driving module of the vehicle in response to the information of the target specified through the identification unit;
상기 촬영부의 카메라에서 촬영한 동영상과 상기 라이다에서 감지한 감지값을 저장하는 영상저장부;an image storage unit for storing the video captured by the camera of the photographing unit and the detection value detected by the lidar;
상기 차량 또는 시설물의 운전 및 출입이 가능한 출입 명단에 대한 정보가 저장되고, 상기 식별부와 통신 가능하게 연결되어 식별부를 통해 특정된 대상물에 대한 출입 승인을 제어하는 관리서버부;를 포함한 것을 특징으로 한다.and a management server unit that stores information on an access list in which driving and entry of the vehicle or facility is possible, and is communicatively connected with the identification unit to control access approval for a specified object through the identification unit; characterized in that it includes a do.
또한 상기 알람부는, 상기 식별부를 통해 특정된 대상물의 종류와 위치에 대응하여 상호 다른 색상을 외부로 조사하는 다수 개의 LED와, 상기 식별부를 통해 특정된 대상물의 종류와 위치에 대응하여 서로 다른 소리 또는 내용을 방출하는 스피커를 포함한 것을 특징으로 한다.In addition, the alarm unit, a plurality of LEDs irradiating different colors to the outside in response to the type and position of the object specified through the identification unit, and different sounds or It is characterized by including a speaker for emitting content.
또한 상기 동작제어부는, 상기 식별부를 통해 특정된 대상물의 위치에 따라 차량의 구동모듈을 제어하되, 상기 식별부에서 특정된 대상물의 위치가 차량과 5~3M 범위인 경우 차량의 가속페달라인에 신호를 전송하여 차량의 가속을 차단하고, 상기 식별부에서 특정된 대상물의 위치가 차량과 3~2M 범위인 경우 차량의 브레이크라인에 동작 신호를 전송하고, 상기 식별부에서 특정된 대상물의 위치가 차량과 2~1M 범위인 경우 차량의 엔진을 정지시키는 신호를 전송하는 것을 특징으로 한다.In addition, the operation control unit, but controls the driving module of the vehicle according to the position of the object specified through the identification unit, when the position of the object specified in the identification unit is in the range of 5 to 3M from the vehicle, a signal to the accelerator pedal line of the vehicle to block the acceleration of the vehicle, and when the position of the object specified in the identification unit is in the range of 3 to 2M from the vehicle, an operation signal is transmitted to the brake line of the vehicle, and the position of the object specified in the identification unit is the vehicle And it is characterized in that it transmits a signal to stop the engine of the vehicle in the range of 2 ~ 1M.
나아가 상기 관리서버부는, 얼굴 이미지가 포함된 출입 허가 명단이 입력된 상태로 상기 식별부와 통신하며, 상기 출입 허가 명단을 제공하고 통행이 불허된 출입자의 명단을 신규 생성하여 관리하는 관리 서버와, 출입 권한의 발급을 위한 절차를 안내하는 등록용 웹페이지를 사용자에게 제공하고, 개인 정보의 입력 및 발급된 출입 권한의 관리를 위한 관리용 웹페이지를 관리자에게 제공하는 웹 서버를 포함하고, 상기 관리 서버는, 상기 등록용 웹페이지의 주소가 포함된 메시지를 휴대전화로 전송하고, 등록용 웹페이지에 업로드되는 사용자의 얼굴 사진을 기반으로 하여 얼굴이 인식된 사용자에게 얼굴 이미지가 포함된 출입 권한을 발급하며, 발급된 출입 권한을 관리하도록 구성되는 것을 특징으로 한다.Furthermore, the management server unit communicates with the identification unit in a state in which an access permission list including a face image is input, provides the access permission list, and a management server that newly creates and manages a list of entrants who are not permitted to pass; A web server that provides a web page for registration to a user that guides a procedure for issuing access rights, and a web server that provides a management web page for input of personal information and management of the issued access rights to an administrator, wherein the management The server transmits a message including the address of the registration web page to the mobile phone, and grants access rights including the face image to the user whose face is recognized based on the user's face photo uploaded to the registration web page It is characterized in that it is configured to manage the issued access rights.
이때 상기 관리 서버는, 전화번호를 포함한 개인정보가 저장되는 데이터 베이스와, 개인정보에 포함된 전화번호를 이용하여 상기 웹 서버가 제공하는 등록용 웹 페이지의 주소가 포함된 메시지를 휴대전화로 전송하는 메시지 전송부와, 전송된 문자를 통해 등록용 웹페이지에 접속한 휴대전화로부터 업로드된 사진에서 사용자의 얼굴을 식별하여 하나의 얼굴 이미지를 추출하는 추출부와, 상기 추출부에 의한 사용자 얼굴의 식별 또는 하나의 얼굴 이미지 추출에 오류가 발생하면 사용자에게 사진의 재업로드를 요청하기 위한 요청 신호를 상기 웹 서버로 전송하는 신호 전송부와, 추출된 얼굴 이미지를 등록하여 출입 권한을 부여하는 등록부를 포함한 것을 특징으로 한다.In this case, the management server transmits a message including the address of the web page for registration provided by the web server to the mobile phone using a database in which personal information including a phone number is stored and a phone number included in the personal information. a message transmission unit, an extraction unit for extracting one face image by identifying a user's face from a photo uploaded from a mobile phone accessing a web page for registration through a transmitted text message; When an error occurs in identification or extraction of one face image, a signal transmitter for transmitting a request signal for requesting the user to re-upload a photo to the web server, and a registration unit for registering the extracted face image and granting access characterized by including.
상기와 같이 이루어진 본 발명은, 차량에 설치되어 차량 주변 상황을 촬영하고, 촬영된 영상을 분석하여 영상에 사람, 동물, 구조물이 촬영된 경우 이를 특정하고, 특정된 대상물과 차량 사이의 거리를 확인하여 거리에 따른 경고 신호를 운전자는 물론 차량의 외부에서 작업 중인 사람 또는 이동 중인 동물에게 전달함으로써 충돌에 의한 사고를 미연에 방지할 수 있는 효과가 있다.The present invention made as described above is installed in a vehicle to photograph the surroundings of the vehicle, analyzes the captured image, specifies when a person, animal, or structure is photographed in the image, and confirms the distance between the specified object and the vehicle Thus, it is possible to prevent accidents caused by a collision in advance by transmitting a warning signal according to the distance to the driver as well as to a person working outside the vehicle or an animal in motion.
또한 본 발명은 차량 또는 시설물에 설치된 상황에서 차량 또는 시설물에 출입 허가 권한을 가진 사용자를 관리함으로써 특수 차량 및 시설물의 사용과 출입에 대한 관리 감독의 편의성을 향상시킬 수 있는 효과가 있다.In addition, the present invention has the effect of improving the convenience of managing and supervising the use and access of special vehicles and facilities by managing the user who has permission to access the vehicle or facility in a situation where it is installed in the vehicle or facility.
도 1은 본 발명에 따른 주변 감지 및 위험 알람 기능이 구비된 인공지능 블랙박스 시스템을 도시한 예시도.
도 2는 본 발명에 따른 주변 감지 및 위험 알람 기능이 구비된 인공지능 블랙박스 시스템을 도시한 블록도.
도 3은 본 발명에 따른 주변 감지 및 위험 알람 기능이 구비된 인공지능 블랙박스 시스템의 다른 실시예를 도시한 예시도.
도 4는 본 발명을 구성하는 관리서버부를 도시한 블록도.1 is an exemplary diagram illustrating an artificial intelligence black box system equipped with a surrounding detection and danger alarm function according to the present invention.
Figure 2 is a block diagram showing an artificial intelligence black box system equipped with a peripheral detection and danger alarm function according to the present invention.
3 is an exemplary diagram illustrating another embodiment of an artificial intelligence black box system equipped with a surrounding detection and danger alarm function according to the present invention.
4 is a block diagram showing a management server unit constituting the present invention.
이하, 상기 목적 외에 본 발명의 다른 목적 및 특징들은 첨부 도면을 참조한 실시 예에 대한 설명을 통하여 명백히 드러나게 될 것이다.Hereinafter, in addition to the above objects, other objects and features of the present invention will become apparent through the description of the embodiments with reference to the accompanying drawings.
다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가지고 있다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥상 가지는 의미와 일치하는 의미를 가진 것으로 해석되어야 하며, 본 출원에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.Unless defined otherwise, all terms used herein, including technical or scientific terms, have the same meaning as commonly understood by one of ordinary skill in the art to which this invention belongs. Terms such as those defined in a commonly used dictionary should be interpreted as having a meaning consistent with the meaning in the context of the related art, and should not be interpreted in an ideal or excessively formal meaning unless explicitly defined in the present application. does not
이하, 첨부된 도면을 참조하여 본 발명에 따른 주변 감지 및 위험 알람 기능이 구비된 인공지능 블랙박스 시스템의 바람직한 구현예를 설명하도록 한다.Hereinafter, with reference to the accompanying drawings, a preferred embodiment of the artificial intelligence black box system equipped with the surrounding detection and danger alarm functions according to the present invention will be described.
먼저 본 발명에 따른 주변 감지 및 위험 알람 기능이 구비된 인공지능 블랙박스 시스템(1)은, 도 1 및 도 2에 도시된 바와 같이 차량의 주변 또는 시설물의 주변을 촬영하는 카메라(11)와 차량의 주변 또는 시설물의 주변에 피사체를 측정하는 라이다(12)를 포함한 촬영부(10)와, 상기 촬영부(10)를 통해 촬영된 영상을 기 저장된 정보와 대비하여 촬영된 영상에서 대상물을 특정하는 식별부(20)와, 상기 식별부(20)를 통해 특정된 대상물의 정보에 따라 외부로 조명 또는 소리를 방출하는 알람부(30)와, 상기 식별부(20)를 통해 특정된 대상물의 정보에 대응하여 차량의 구동모듈을 제어하는 동작제어부(40)와, 상기 촬영부(10)의 카메라에서 촬영한 동영상과 상기 라이다에서 감지한 감지값을 저장하는 영상저장부(50) 및 상기 차량 또는 시설물의 운전 및 출입이 가능한 출입 명단에 대한 정보가 저장되고, 상기 식별부(20)와 통신 가능하게 연결되어 식별부를 통해 특정된 대상물에 대한 출입 승인을 제어하는 관리서버부(60)를 포함한다.First, the artificial intelligence
상기의 구성을 상세히 살펴보면, 먼저 상기 촬영부(10)는 인가된 전원 및 신호에 의해 동작하는 카메라(11)와, 차량의 주변 또는 시설물의 주변에 피사체를 측정하는 라이다(12)를 포함한 것으로, 여기서 상기 카메라(11)는 동영상 또는 이미지를 촬영할 수 있는 것으로, 동영상 촬영시 녹화 해상도가 200만 화소 이상이고 카메라 센서는 240~400만 픽셀의 제품을 사용하여 주간은 물론 야간에도 촬영된 동영상의 높은 화질을 보장하는 것이 바람직하나 상기의 조건에 한정되지 않음은 물론이다.Looking at the above configuration in detail, first, the photographing
한편 상기 촬영부(10)는 설치되는 차량 또는 시설물에 다수 개가 상호 이격된 위치 또는 다수 개가 상호 다른 각도를 향하도록 배치되고, 각각의 촬영부(10)는 하나 이상의 카메라(11)가 상호 이격된 위치 또는 상호 다른 각도를 향하도록 배치될 수 있다.On the other hand, the photographing
그리고 상기 촬영부(10)에는 상기 카메라(11)가 동작하는 것을 외부에 표시하기 위한 램프(도면 중 미도시됨)가 더 구비될 수 있다.In addition, the photographing
한편 상기 라이다(12)는 인가된 전원 및 신호에 의해 동작하면서 차량의 주변 또는 시설물의 주위에서 이동하거나 배치된 피사체를 인식하는 것이다.Meanwhile, the
상기 라이다(LIDAR)는 라이다 센서를 이용하여 피사체를 인식하는 것으로, 알려진 바와 같이 라이다는 센서를 이용한 전방 물체 감지 기술로서 주변의 사물을 인식하기 위해 레이저 신호를 이용하는 기술이며, 쏘아진 펄스 레이저 신호가 주변의 사물과 부딪힌 후 되돌아오면 이를 분석해 사물의 위치나 운동 방향, 속도 등을 확인하는 것이다.The lidar (LIDAR) is to recognize a subject using a lidar sensor, as is known, lidar is a forward object detection technology using a sensor, a technology that uses a laser signal to recognize a surrounding object, and a pulse When the laser signal collides with a nearby object and returns, it is analyzed to check the object's position, movement direction, and speed.
이러한 라이다(12)는 ToF(Time of Flight)방식, PS(Phase Shift)방식이 있는데 본 발명에서는 탐지거리가 길고 정확도가 높은 ToF 방식을 사용하는 것이 바람직하나 이에 한정되지 않음은 물론이다.The
한편, 상기 촬영부(10)에는 상기 카메라의 동작 상태를 외부로 표시하고 동시에 후술하는 알람부의 LED(31)와 연동하는 다수 개의 발광램프(14)가 구비된다.On the other hand, the photographing
상기 발광램프(14)는 상기 카메라의 주위에 다수 개가 상호 이격된 위치에 배치되고, 다수 개 중 어느 하나는 상기 카메라의 동작과 연동하여 점등되고, 다른 발광램프는 후술하는 알람부의 LED와 연동하여 대상물과 카메라 사이의 거리에 따라 점등되되 각각이 서로 다른 색상을 외부에 조사하도록 구성되어 시인성을 높이는 것이 바람직하다.A plurality of the light-emitting
그리고 상기 촬영부(10)에는 후술하는 스피커(32)와 연동하여 동작하면서 외부로 저장된 알람음을 배출하는 버저(buzzer)(15)가 더 구비될 수 있다.In addition, the photographing
이러한 버저는 후술하는 스피커가 전원의 공급 문제 또는 신호 전송의 문제에 의해 오동작시에도 외부로 알람음을 배출하여 차량과 보행자의 충돌 사고를 방지할 수 있는 것이다.Such a buzzer can prevent a collision between a vehicle and a pedestrian by emitting an alarm sound to the outside even when a speaker, which will be described later, malfunctions due to a power supply problem or a signal transmission problem.
상기 식별부(20)는 상기 촬영부(10)를 통해 촬영한 동영상 또는 이미지와 상기 라이다(12)에서 인식한 피사체를 분석하여 해당 피사체의 종류 및 위치를 분석한 후 차량 또는 시설물과의 거리를 확인하는 것이다.The
이러한 식별부(20)는 상기 촬영부를 통해 촬영한 동영상과 라이다에서 인식한 피사체의 측정 정보를 분석하여 해당 동영상에서 동적(動的)인 피사체를 특정하고, 특정된 피사체가 사람인지 동물인지 식별하고, 식별된 피사체의 거리를 확인한다.The
상술한 식별부(20)는 동영상에서 동적 피사체를 특정하고 특정된 동적 피사체와의 거리를 확인하기 위해 동적 피사체의 정보가 저장된 데이터베이스와, 상기 데이터베이스에 저장된 정보와 상기 촬영부로부터 수신한 정보를 비교하여 촬영부로부터 수신한 정보를 대비하여 연산부를 포함하며, 상술한 동적 피사체 특정과 특정된 피사체와의 거리를 측정하는 기능을 구현할 수 있는 소프트웨어를 포함한다.The above-described
이하의 설명에서는 본 발명이 차량 중 지게차, 크레인 등과 같은 상부가 선회하는 특수차량에 배치된 실시예를 설명한다.In the following description, an embodiment in which the present invention is arranged in a special vehicle in which the upper part of the vehicle turns, such as a forklift, a crane, etc. will be described.
상기 식별부(20)는 상기 카메라(11)에서 동영상을 전달 받고, 상기 라이다(12)로부터 피사체 정보를 각각 전달 받은 후 이를 취합 및 분석하여 촬영된 동영상에서 대상물을 특정한다.The
이러한 식별부(20)의 구성 및 동작 관계는 대한민국 등록특허 제10-1829556호(2018.02.08., 등록)에서 개시한 기술에 공지된 기술을 참고한다.For the configuration and operation relationship of the
다만 본 발명의 상기 식별부(20)는 특정된 대상물이 사람 또는 동물일 때, 특정된 대상물과 차량과의 거리에 대한 결과값을 산출한다.However, when the specified object is a human or an animal, the
그리고 상기 식별부(20)는 산출한 결과값에 따라 후술하는 알람부(30)의 동작을 제어하는 제어신호와, 후술하는 동작제어부(40)의 동작을 제어하는 제어신호를 각각 생성하고 이를 알람부(30)와 동작제어부(40)로 전송한다.In addition, the
상기 알람부(30)는 상기 식별부(20)를 통해 특정된 대상물의 정보에 따라 외부로 조명 또는 소리를 방출하여 차량의 운전자 또는 차량의 주변에서 이동하거나 작업 중인 작업자의 주의를 환기시키는 것이다.The
이를 위해 상기 알람부(30)는 상기 식별부(20)를 통해 특정된 대상물의 종류와 위치에 대응하여 상호 다른 색상을 외부로 조사하는 다수 개의 LED(31)와, 상기 식별부(20)를 통해 특정된 대상물의 종류와 위치에 대응하여 서로 다른 소리 또는 내용을 방출하는 스피커(32)를 포함한다.To this end, the
상기 LED(31)는 서로 다른 색상을 표시하는 다수 개의 LED로 구성될 수 있는데, 일예로 다수 개의 LED(31)가 상하로 배치되는 타워 형태로 이루어질 수 있고 다른 실시예로서 다수 개의 LED(31)가 상호 이격 배치된 형태로 이루어질 수 있다.The
물론 상기 LED(31)는 다양한 색상의 LED를 하나로 묶은 형태로 구성되는 다색 LED로 구성될 수 있다.Of course, the
상기 스피커(32)는 상기 식별부(20)를 통해 동작이 제어되면서 외부로 소리를 배출하는 것으로, 다수 개가 상호 이격된 위치에 배치된다.The
상기 동작제어부(40)는 상기 식별부(20)를 통해 특정된 대상물의 정보에 대응하여 차량의 구동모듈을 제어하는 것이다. 이를 위해 상기 동작제어부(40)는, 상기 식별부(20)에서 특정된 대상물의 위치가 차량과 5~3M 범위인 경우 차량의 가속페달라인에 신호를 전송하여 차량의 가속을 차단하고, 상기 식별부(20)에서 특정된 대상물의 위치가 차량과 3~2M 범위인 경우 차량의 브레이크라인에 동작 신호를 전송하고, 상기 식별부(20)에서 특정된 대상물의 위치가 차량과 2~1M 범위인 경우 차량의 엔진을 정지시키는 신호를 전송한다.The
즉 상기 동작제어부(40)는 상기 식별부(20)를 통해 제어신호를 전달 받아 차량의 구동계통을 제어하는 신호를 생성하고 이를 실행시킨다.That is, the
특히 상기 동작제어부(40)는 상기 식별부(20)를 통해 전달된 제어신호에 의해 3단계로 동작하는데, 먼저 식별부에서 특정된 대상물의 위치가 차량과 5~3M 범위로 인식될 때, 차량의 엔진을 동작시키는 가속페달라인에 신호를 전송하여 강제적으로 차량의 가속을 차단한다.In particular, the
다음으로 식별부에서 특정된 대상물의 위치가 차량과 3~2M 범위일 때, 차량의 바퀴를 제동(制動)시키는 브레이크라인에 동작 신호를 전송하여 차량의 이동을 제한한다.Next, when the position of the object specified in the identification unit is in the range of 3 to 2M from the vehicle, an operation signal is transmitted to the brake line that brakes the wheels of the vehicle to limit the movement of the vehicle.
그리고 식별부에서 특정된 대상물의 위치가 차량과 2~1M 이내일 때, 차량의 엔진 및 동력계통을 정지시키는 신호를 차량에 전송한다.And when the position of the object specified by the identification unit is within 2 to 1M of the vehicle, a signal for stopping the engine and power system of the vehicle is transmitted to the vehicle.
상기의 동작제어부(40)에서 설정된 대상물과 차량의 거리 설정은 하나의 실시예이며 필요에 따라 상기 거리 설정은 다양하게 변경 가능함은 물론이다.Setting the distance between the object and the vehicle set in the
상기와 같이 이루어진 동작제어부(40)는 차량의 이동을 담당하는 악셀라인, 브레이크라인 및 엔진의 동작을 제어함으로써 이동하는 차량과 대상물의 충돌 사고를 최소화한다.The
한편 상기 동작제어부(40)는 상기 식별부(20)로부터 차량의 제어 기준이 되는 제어신호를 전송 받는 수신부와, 상기 수신부에서 수신한 제어신호를 기 저장된 제어신호값과 비교하여 결과값을 산출하는 연산부와, 상기 연산부에서 산출한 결과값On the other hand, the
상기 영상저장부(50)는 상기 촬영부(10)의 카메라에서 촬영한 동영상 및 라이다에서 감지한 감지값을 저장하는 것으로, 이러한 영상저장부(50)는 상기 촬영부(10)에서 전송된 정보를 전송된 날짜, 시간을 포함한 테이블 형태로 저장하여 필요시 원활한 호출이 가능하도록 이루어진다. 이러한 영상저장부의 구조 및 동작관계는 기존의 블랙박스의 데이터 저장과 관련한 기술에서 다양한 형태로 공지된 것이므로 상세한 도시 및 설명은 생략하도록 한다.The
상기 관리서버부(60)는 상기 차량 또는 시설물의 운전 및 출입이 가능한 출입 명단에 대한 정보가 저장되고, 상기 식별부(20)와 통신 가능하게 연결되어 식별부를 통해 특정된 대상물에 대한 출입 승인을 제어하는 것이다.The
즉, 상기 관리서버부(60)는 차량 또는 시설물에 설치되어 차량을 운전할 수 있도록 허가된 사용자만 차량에 출입 가능하도록 하거나 시설물에 출입이 허가된 사용자를 식별하는 용도로 활용할 수 있는 것이다.That is, the
이러한 관리서버부(60)는 차량 또는 시설물의 운전 및 출입이 가능한 출입 명단을 위한 용도로 개발된 하나 이상의 프로그램이 설치된 것으로, 상기 카메라를 통해 촬영된 출입자의 얼굴을 인식하여 기 저장된 출입 허가 명단의 정보와 확인하여 출입 가능 여부를 확인하고, 신규 출입자의 등록을 위한 정보 입력용 웹페이지 주소를 전송하여 신규 출입자의 등록 편의성을 향상시킨다.The
이를 위한 관리서버부(60)는, 얼굴 이미지가 포함된 출입 허가 명단이 입력된 상태로 상기 식별부(20)와 통신하며, 상기 출입 허가 명단을 제공하고 통행이 불허된 출입자의 명단을 신규 생성하여 관리하는 관리 서버(61)와, 출입 권한의 발급을 위한 절차를 안내하는 등록용 웹페이지를 사용자에게 제공하고, 개인 정보의 입력 및 발급된 출입 권한의 관리를 위한 관리용 웹페이지를 관리자에게 제공하는 웹 서버(62)를 포함하고, 상기 관리 서버(61)는, 상기 등록용 웹페이지의 주소가 포함된 메시지를 휴대전화로 전송하고, 등록용 웹페이지에 업로드되는 사용자의 얼굴 사진을 기반으로 하여 얼굴이 인식된 사용자에게 얼굴 이미지가 포함된 출입 권한을 발급하며, 발급된 출입 권한을 관리하도록 구성된다.For this purpose, the
한편 상기 관리 서버(61)는, 전화번호를 포함한 개인정보가 저장되는 데이터 베이스(611)와, 개인정보에 포함된 전화번호를 이용하여 상기 웹 서버가 제공하는 등록용 웹 페이지의 주소가 포함된 메시지를 휴대전화로 전송하는 메시지 전송부(612)와, 전송된 문자를 통해 등록용 웹페이지에 접속한 휴대전화로부터 업로드된 사진에서 사용자의 얼굴을 식별하여 하나의 얼굴 이미지를 추출하는 추출부(613)와, 상기 추출부(613)에 의한 사용자 얼굴의 식별 또는 하나의 얼굴 이미지 추출에 오류가 발생하면 사용자에게 사진의 재업로드를 요청하기 위한 요청 신호를 상기 웹 서버로 전송하는 신호 전송부(614)와, 추출된 얼굴 이미지를 등록하여 출입 권한을 부여하는 등록부(615)를 포함한다.Meanwhile, the
상기와 같이 이루어진 관리서버부(60)는 PC 또는 스마트폰 등 유선 또는 무선 통신망을 통해 인터넷 접속이 가능한 장치를 이용하여 상기 관리용 웹페이제 접속 후 로그인할 수 있고, 관리용 웹페이지에서 제공하는 양식에 따라 연락 또는 문자 전송이 가능한 전화번호 또는 소셜네트워크의 고유식별정보(ID)를 포함한 직원의 개인정보를 입력할 수 있고, 관리자에 의하여 입력된 직원 개인정보는 상기 데이터 베이스(611)에 저장되는 구성이다.The
이후 관리자는 상기 관리용 웹페이지에서 제공하는 기능을 통해 출입 관리 권한을 요청하는 신규 등록을 위한 출입자의 스마트폰으로 신규 등록 절차의 실시를 요청하는 메시지가 전송되도록 입력할 수 있고, 상기 메시지 전송부(612)는 관리자에 의한 입력이 발생하는 즉시 상기 데이터 베이스(611)에 저장된 출입자의 개인정보에 포함된 전화번호 또는 고유식별정보를 이요하여 상기 등록용 웹페이지의 주소가 포함된 메시지를 출입자의 스마트폰으로 전송한다.Thereafter, the administrator may input a message requesting execution of the new registration procedure to be transmitted to the smart phone of the visitor for new registration requesting access management authority through the function provided by the management web page, and the message transmission unit (612) uses the phone number or unique identification information included in the personal information of the visitor stored in the
이때 상기 관리용 웹페이지는 관리자에게 직원 중 리스트에 포함된 어느 하나의 사용자를 직접 선택하여 메시지가 전송되도록 하는 기능을 제공할 수 있고, 직원 중 얼굴인식 기술에 필요한 출입 권한이 부여되지 않은 모든 사용자를 일괄적으로 선택하여 메시지가 전송하는 기능을 제공할 수 있으며, 사용자 중 출입 권한이 부여된 이후 일정기간이 경과한 모든 직원을 일괄적으로 선택하여 메시지가 전송되도록 하는 기능을 제공할 수 있다.In this case, the management web page may provide the manager with a function to directly select any one user included in the list among the staff to transmit the message, and all users who are not granted access rights required for face recognition technology among the staff. It is possible to provide a function to send a message by selecting all of the users, and a function to send a message can be provided by selecting all employees who have passed a certain period of time after being granted access rights among users.
이와 같이 관리자의 입력에 의해 본인의 휴대전화에 상기 메시지 전송부(612)로부터 메시지가 전송된 사용자는 그 메시지에 포함된 주소를 통해 상기 등록용 웹페이지에 접속할 수 있으며, 안내에 따라 사용자는 본인 인증 후 자신의 얼굴 사진을 업로드하는 등록 절차를 실시할 수 있다.As described above, a user who has transmitted a message from the
이후, 상기 추출부(613)는 상기 등록용 웹페이지에 접속한 휴대전화로부터 업로된 사진에서 사용자의 얼굴을 식별하여 하나의 얼굴 이미지를 추출하고, 상기 등록부(615)는 추출된 얼굴 이미지를 등록하여 출입 권한을 부여하게 되며, 출입 권한이 부여되는 경우에는 등록용 웹페이지에 접속한 상태인 휴대전화의 화면에 등록 완료를 통보하는 메시지가 표시될 수 있다.Thereafter, the
여기서 사용자가 업로드하는 사진은 사용자의 얼굴을 근접 촬영하여 얼굴 정면의 전체가 선명하게 나타난 단독 사진이어야 하는데, 업로된 사진에는 다양한 문제가 있을 수 있고, 발생한 문제가 직원의 얼굴 식별에 관계되는 것일 때 상기 추출부(613)에 의한 얼굴 이미지의 추출이 불가하여 등록이 완료될 수 없다.Here, the photo uploaded by the user should be a single photo that shows the entire front of the face clearly by taking a close-up of the user's face. Since the extraction of the face image by the
따라서 상기 신호 전송부(614)는 상기 추출부(613)에 의한 사용자 얼굴의 식별 또는 하나의 얼굴 이미지 추출에 오류가 발생하면 직원에게 사진의 재업로드를 요청하기 위한 요청 신호를 상기 웹 서버(62)로 전송함으로써 상기 등록용 웹페이지에 접속한 상태인 휴대전화의 화면에 사진의 재업로드를 요청하는 요청 메시지가 표시되도록 할 수 있다.Therefore, when an error occurs in the identification of the user's face or the extraction of one face image by the
또한 본 발명의 추출부(613)에서는 사용자의 얼굴을 업로드하는 과정에서 사용자의 얼굴 정면 이외에도 측면 또는 사용자의 얼굴이 포함된 사원증을 촬영하여 정보를 전달 받아 이를 추출하여 상기 데이터 베이스(611)에 저장할 수 있다.In addition, in the process of uploading the user's face, the
즉 본 발명의 추출부(613)에서는 사용자가 업로드 하는 사진이 휴대전화를 통해 직접 촬영한 얼굴의 정면 사진이거나 사업자가 정상적으로 발급한 사원증 중 적어도 어느 하나를 인식할 수 있도록 구성되고, 인식한 정보를 데이터 베이스(611)에 저장한다.That is, in the
한편 본 발명의 관리자는 출입이 예정된 상태이거나 현재 출입한 상태인 임사사용자의 전화번호를 포함한 개인정보를 상기 관리 서버(61)에 입력할 수 있고, 입력에 의한 등록 절차의 진행 과정은 상술한 사용자와 동일하다.On the other hand, the administrator of the present invention can input personal information including the phone number of the near-death user who is in a state of scheduled access or is currently in and out of the
또한 상기 관리 서버(61)는 사용자의 출입 권한 관리의 운용을 위해서는 얼굴 이미지가 포함된 출입 허가 명단이 입력된 상태로 상기 식별부(20)와 통신하며, 출입 허가 명단을 식별부(20)로 제공하여 출입이 허가된 사용자가 식별된 경우 차량의 도어 또는 시설물의 도어에 설치된 락(lock)장치의 잠금을 해제하는 신호를 생성 후 이를 상기 동작제어부(40)로 전송한다.In addition, the
상기 동작제어부(40)는 전달 받은 제어신호를 차량의 도어락 장치에 신호를 전송하여 도어의 잠금을 해제하고, 시설물의 도어에 설치된 도어락 장치에 신호를 전송하여 도어의 잠금을 해제한다.The
이러한 도어락의 잠금 해제와 이를 구성하는 구조와 동작 관계는 공지의 것이므로 이에 대한 상세한 도시 및 설명은 생략하도록 한다.Since the unlocking of the door lock and the structure and operation relation constituting it are well known, detailed illustration and description thereof will be omitted.
한편 본 발명은 상기 촬영부(10)가 시설물의 출입을 관리하도록 설치된 경우 시설물에 접근하는 사용자의 식별과 해당 사용자의 체온을 확인하여 기 저장된 기준 체온에 비해 높은 것으로 확인된 사용자는 시설물의 출입을 제한함과 동시에 해당 사용자를 추적 관리할 수 있다.On the other hand, in the present invention, when the photographing
이를 위해 상기 촬영부(10)에는 열화상 영상을 촬영하는 열화상카메라(13)로 구성되고, 상기 열화상카메라(13)를 통해 촬영된 열화상 영상은 식별부(20)로 전송되고 상기 식별부(20)는 수신 받은 열화상 영상에서 대상물을 식별하고, 상기 촬영부(10)의 라이다(12)를 통해 확인된 사용자와의 거리를 확인한다.To this end, the photographing
그리고 상기 열화상 영상에서 확인된 사용자의 체온을 기 저장된 기준값과 비교하되, 이때 상기 라이다(12)를 통해 확인된 사용자와의 거리값을 보정값으로 제공하여 사용자의 정확한 체온을 확인한다.And the user's body temperature confirmed in the thermal image is compared with a pre-stored reference value, and at this time, the user's exact body temperature is confirmed by providing the distance value from the user confirmed through the
상기 식별부(20)를 통해 확인된 사용자의 체온이 기 저장된 기준값에 비해 높은 경우 시설물의 출입을 제한하는 제어신호를 생성한 후 이를 동작제어부(40)로 전송하고, 상기 동작제어부(40)는 수신한 제어신호를 통해 시설물에 설치된 도어락을 잠금으로써 체온이 기준값에 비해 높은 사용자의 출입을 제한한다.When the user's body temperature confirmed through the
한편 상기 식별부(20)를 통해 기준값에 비해 높은 체온을 가진 사용자가 확인된 경우 해당 사용자의 얼굴을 식별하여 사용자가 특정되면 상기 데이터 베이스(611)에 저장된 해당 사용자의 휴대전화 번호로 측정된 체온을 메시지로 전송하고 동시에 관리자에게 해당 사용자의 개인정보(이름, 전화번호 등)와 측정된 체온 정보를 전송한다.On the other hand, when a user having a higher body temperature than the reference value is identified through the
상기의 관리 서버(61)를 통해 사용자의 출입 권한을 확인한 후 출입이 허가된 사용자만이 출입 가능하도록 구성되고, 열화상 영상을 촬영할 수 있는 열화상카메라(13)를 통해 사용자의 체온을 확인하여 기준값에 비해 높은 체온으로 확인된 사용자의 출입을 제한함과 동시에 이를 관리자 및 해당 사용자의 휴대전화로 메시지를 통해 전송함으로써 신속한 후속조치가 이루어질 수 있도록 한다.After confirming the user's access right through the
이상과 같이 본 발명에서는 구체적인 구성 요소 등과 같은 특정 사항들과 한정된 실시예 및 도면에 의해 설명되었으나 이는 본 발명의 보다 전반적인 이해를 돕기 위해서 제공된 것일 뿐, 본 발명은 상기의 실시예에 한정되는 것은 아니며, 본 발명이 속하는 분야에서 통상적인 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형이 가능하다.As described above, the present invention has been described with specific matters such as specific components and limited embodiments and drawings, but these are provided to help a more general understanding of the present invention, and the present invention is not limited to the above embodiments. , various modifications and variations are possible from these descriptions by those of ordinary skill in the art to which the present invention pertains.
따라서, 본 발명의 사상은 설명된 실시예에 국한되어 정해져서는 아니 되며, 후술하는 특허청구범위뿐 아니라 이 특허청구범위와 균등하거나 등가적변형이 있는 모든 것들은 본 발명 사상의 범주에 속한다고 할 것이다.Therefore, the spirit of the present invention should not be limited to the described embodiments, and not only the claims to be described later, but also all those with equivalent or equivalent modifications to the claims will be said to belong to the scope of the spirit of the present invention. .
1 : 주변 감지 및 위험 알람 기능이 구비된 인공지능 블랙박스 시스템
10 : 촬영부
11 : 카메라 12 : 라이다
13 : 열화상카메라 14 : 발광램프
20 : 식별부
30 : 알람부
31 : LED 32 : 스피커
40 : 동작제어부
50 : 영상저장부
60 : 관리서버부
61 : 관리 서버 62 : 웹 서버
611 : 데이터베이스 612 : 메시지 전송부
613 : 추출부 614 : 신호 전송부
615 : 등록부1: Artificial intelligence black box system with surrounding detection and danger alarm function
10: filming department
11: camera 12: lidar
13: thermal imaging camera 14: luminous lamp
20: identification unit
30: alarm unit
31: LED 32: speaker
40: operation control unit
50: image storage unit
60: management server unit
61: management server 62: web server
611: database 612: message transmission unit
613: extraction unit 614: signal transmission unit
615 : Register
Claims (5)
상기 촬영부(10)를 통해 촬영된 영상을 기 저장된 정보와 대비하여 촬영된 영상에서 대상물을 특정하는 식별부(20);
상기 식별부(20)를 통해 특정된 대상물의 정보에 따라 외부로 조명 또는 소리를 방출하는 알람부(30);
상기 식별부(20)를 통해 특정된 대상물의 정보에 대응하여 차량의 구동모듈을 제어하는 동작제어부(40);
상기 촬영부(10)의 카메라에서 촬영한 동영상과 상기 라이다에서 감지한 감지값을 저장하는 영상저장부(50);
상기 차량 또는 시설물의 운전 및 출입이 가능한 출입 명단에 대한 정보가 저장되고, 상기 식별부(20)와 통신 가능하게 연결되어 식별부를 통해 특정된 대상물에 대한 출입 승인을 제어하는 관리서버부(60);를 포함하고,
상기 알람부(30)는,
상기 식별부(20)를 통해 특정된 대상물의 종류와 위치에 대응하여 상호 다른 색상을 외부로 조사하는 다수 개의 LED(31)와,
상기 식별부(20)를 통해 특정된 대상물의 종류와 위치에 대응하여 서로 다른 소리 또는 내용을 방출하는 스피커(32)를 포함하고,
상기 동작제어부(40)는,
상기 식별부(20)를 통해 특정된 대상물의 위치에 따라 차량의 구동모듈을 제어하되,
먼저 상기 식별부(20)에서 특정된 대상물의 위치가 차량과 5~3M 범위인 경우 차량의 가속페달라인에 신호를 전송하여 차량의 가속을 차단하고,
다음으로 상기 식별부(20)에서 특정된 대상물의 위치가 차량과 3~2M 범위인 경우 차량의 브레이크라인에 동작 신호를 전송하고,
그리고 상기 식별부(20)에서 특정된 대상물의 위치가 차량과 2~1M 범위인 경우 차량의 엔진을 정지시키는 신호를 전송하는 3단계의 단계로 동작되도록 구성되고,
상기 관리서버부(60)는,
얼굴 이미지가 포함된 출입 허가 명단이 입력된 상태로 상기 식별부(20)와 통신하며, 상기 출입 허가 명단을 제공하고 통행이 불허된 출입자의 명단을 신규 생성하여 관리하는 관리 서버(61)와,
출입 권한의 발급을 위한 절차를 안내하는 등록용 웹페이지를 사용자에게 제공하고, 개인 정보의 입력 및 발급된 출입 권한의 관리를 위한 관리용 웹페이지를 관리자에게 제공하는 웹 서버(62)를 포함하고,
상기 관리 서버(61)는,
상기 등록용 웹페이지의 주소가 포함된 메시지를 휴대전화로 전송하고, 등록용 웹페이지에 업로드되는 사용자의 얼굴 사진을 기반으로 하여 얼굴이 인식된 사용자에게 얼굴 이미지가 포함된 출입 권한을 발급하며, 발급된 출입 권한을 관리하도록 구성되는 것을 특징으로 하는 주변 감지 및 위험 알람 기능이 구비된 인공지능 블랙박스 시스템.a camera 11 for photographing the surroundings of a vehicle or a facility, and a photographing unit 10 including a lidar 12 for detecting a subject in the vicinity of the vehicle or around a facility;
an identification unit 20 for specifying an object in the photographed image by comparing the image photographed by the photographing unit 10 with pre-stored information;
an alarm unit 30 for emitting light or sound to the outside according to the information on the object specified through the identification unit 20;
an operation control unit 40 for controlling the driving module of the vehicle in response to the information on the target specified through the identification unit 20;
an image storage unit 50 for storing the video captured by the camera of the photographing unit 10 and the detection value detected by the lidar;
A management server unit (60) that stores information on an access list that allows driving and access of the vehicle or facility, is communicatively connected with the identification unit (20), and controls access approval for a specified object through the identification unit (60) including;
The alarm unit 30,
A plurality of LEDs (31) for irradiating different colors to the outside in response to the type and position of the object specified through the identification unit (20);
and a speaker 32 that emits different sounds or contents in response to the type and location of the object specified through the identification unit 20,
The operation control unit 40,
Control the drive module of the vehicle according to the position of the object specified through the identification unit 20,
First, when the position of the object specified in the identification unit 20 is in the range of 5 to 3M from the vehicle, a signal is transmitted to the accelerator pedal line of the vehicle to block the acceleration of the vehicle,
Next, when the position of the object specified in the identification unit 20 is in the range of 3 to 2M from the vehicle, an operation signal is transmitted to the brake line of the vehicle,
And when the position of the object specified in the identification unit 20 is in the range of 2 to 1M from the vehicle, it is configured to operate in a three-step step of transmitting a signal to stop the engine of the vehicle,
The management server unit 60,
A management server 61 that communicates with the identification unit 20 in a state in which an access permission list including a face image is input, provides the access permission list, and newly creates and manages a list of people who are not allowed to pass;
A web server 62 that provides a web page for registration that guides the procedure for issuance of access rights to the user, and provides a management web page for input of personal information and management of the issued access rights to the administrator, ,
The management server 61,
Sends a message including the address of the registration web page to the mobile phone, and issues an access right including a face image to a user whose face is recognized based on the user's face photo uploaded to the registration web page, Artificial intelligence black box system with surrounding detection and danger alarm functions, characterized in that it is configured to manage the issued access rights.
전화번호를 포함한 개인정보가 저장되는 데이터 베이스(611)와,
개인정보에 포함된 전화번호를 이용하여 상기 웹 서버가 제공하는 등록용 웹 페이지의 주소가 포함된 메시지를 휴대전화로 전송하는 메시지 전송부(612)와,
전송된 문자를 통해 등록용 웹페이지에 접속한 휴대전화로부터 업로드된 사진에서 사용자의 얼굴을 식별하여 하나의 얼굴 이미지를 추출하는 추출부(613)와,
상기 추출부(613)에 의한 사용자 얼굴의 식별 또는 하나의 얼굴 이미지 추출에 오류가 발생하면 사용자에게 사진의 재업로드를 요청하기 위한 요청 신호를 상기 웹 서버로 전송하는 신호 전송부(614)와,
추출된 얼굴 이미지를 등록하여 출입 권한을 부여하는 등록부(615)를 포함한 것을 특징으로 하는 주변 감지 및 위험 알람 기능이 구비된 인공지능 블랙박스 시스템.
The method according to claim 1, The management server 61,
A database 611 in which personal information including phone numbers is stored, and
A message transmitting unit 612 for transmitting a message including the address of the web page for registration provided by the web server to the mobile phone by using the phone number included in the personal information;
An extraction unit 613 that identifies a user's face from a photo uploaded from a mobile phone accessing the registration web page through the transmitted text and extracts one face image;
When an error occurs in identification of a user's face or extraction of one face image by the extraction unit 613, a signal transmitter 614 for transmitting a request signal for requesting the user to re-upload a photo to the web server;
An artificial intelligence black box system equipped with a surrounding detection and danger alarm function, characterized in that it includes a registration unit (615) that registers the extracted face image and grants access rights.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020210057014A KR102313711B1 (en) | 2021-05-03 | 2021-05-03 | Artificial intelligence black box system with ambient detection and danger alarm functions |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020210057014A KR102313711B1 (en) | 2021-05-03 | 2021-05-03 | Artificial intelligence black box system with ambient detection and danger alarm functions |
Publications (1)
Publication Number | Publication Date |
---|---|
KR102313711B1 true KR102313711B1 (en) | 2021-10-18 |
Family
ID=78271138
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020210057014A KR102313711B1 (en) | 2021-05-03 | 2021-05-03 | Artificial intelligence black box system with ambient detection and danger alarm functions |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR102313711B1 (en) |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR100868415B1 (en) | 2007-08-09 | 2008-11-11 | 현대자동차주식회사 | Back warning system with display camera and sensor |
JP2014008814A (en) * | 2012-06-28 | 2014-01-20 | Mitsubishi Motors Corp | Collision avoidance device |
KR20180106704A (en) * | 2017-03-21 | 2018-10-01 | 현대자동차주식회사 | Alram System For Protecting Pedestrian and Animal, Alarm Method Using It |
KR102227611B1 (en) * | 2020-09-17 | 2021-03-15 | 주식회사 유유랑컴퍼니 | Face recognition system for easy registration |
-
2021
- 2021-05-03 KR KR1020210057014A patent/KR102313711B1/en active IP Right Grant
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR100868415B1 (en) | 2007-08-09 | 2008-11-11 | 현대자동차주식회사 | Back warning system with display camera and sensor |
JP2014008814A (en) * | 2012-06-28 | 2014-01-20 | Mitsubishi Motors Corp | Collision avoidance device |
KR20180106704A (en) * | 2017-03-21 | 2018-10-01 | 현대자동차주식회사 | Alram System For Protecting Pedestrian and Animal, Alarm Method Using It |
KR102227611B1 (en) * | 2020-09-17 | 2021-03-15 | 주식회사 유유랑컴퍼니 | Face recognition system for easy registration |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10386835B2 (en) | System and method for externally interfacing with an autonomous vehicle | |
CN105632183B (en) | A kind of method and its system that rule-breaking vehicle behavior is put to the proof | |
KR101777008B1 (en) | parking guidance image camera, system for parking guidance using the same and method for parking guidance by parking guidance system | |
EP3016815B1 (en) | Operator drowsiness detection in surface mines | |
KR101717080B1 (en) | Vehicle control system for passenger protection and method thereof | |
KR101651008B1 (en) | Monitoring device of a handicapped person's parking zone | |
KR20110136056A (en) | Parking guidance and parking location inquiry system | |
KR100970278B1 (en) | An integrated system for parking guide and security | |
JP2020004088A (en) | Gate device and system | |
CN112785846A (en) | Vehicle monitoring method and device | |
KR20050003664A (en) | A Vehicle base photographing device and a control system of an in-out vehicle using thereof | |
KR102313711B1 (en) | Artificial intelligence black box system with ambient detection and danger alarm functions | |
KR100501769B1 (en) | Monitoring system and method for the handicapped parking zone | |
JP7445441B2 (en) | Parking lot control system, parking lot control method, and program | |
JP2019116773A (en) | Foreign object detection system and method | |
JP2000295598A (en) | Remote monitor system | |
US9840258B1 (en) | System, method, and apparatus for detecting vehicle operator conduct | |
TWM560675U (en) | Apparatus for displaying information about parking site, and management system thereof | |
KR20140062900A (en) | Portable car number plate recognition system | |
KR20210148007A (en) | Vehicle Parking Service Device | |
CN211087353U (en) | Airport road vehicle security check management system | |
US20210380039A1 (en) | Method and Apparatus for identifying objects | |
KR102507497B1 (en) | an autonomous mobile transport service robot with protect a customer | |
JPH1063999A (en) | Method and device for managing parking | |
KR20190061548A (en) | Four-row belt structure lifter of automatic cargo loading and unloading system |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant |