WO2021118304A1 - 이동형 iot 통합 기반 안전 운행 지원 시스템 및 그의 처리 방법 - Google Patents

이동형 iot 통합 기반 안전 운행 지원 시스템 및 그의 처리 방법 Download PDF

Info

Publication number
WO2021118304A1
WO2021118304A1 PCT/KR2020/018185 KR2020018185W WO2021118304A1 WO 2021118304 A1 WO2021118304 A1 WO 2021118304A1 KR 2020018185 W KR2020018185 W KR 2020018185W WO 2021118304 A1 WO2021118304 A1 WO 2021118304A1
Authority
WO
WIPO (PCT)
Prior art keywords
information
driver
vehicle
driving
accident
Prior art date
Application number
PCT/KR2020/018185
Other languages
English (en)
French (fr)
Inventor
노희섭
김기홍
홍성권
임상일
박영기
구자덕
김병석
김경종
Original Assignee
제이아이엔시스템 주식회사
제주특별자치도
주식회사 싸인텔레콤
에이케이티공간정보 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 제이아이엔시스템 주식회사, 제주특별자치도, 주식회사 싸인텔레콤, 에이케이티공간정보 주식회사 filed Critical 제이아이엔시스템 주식회사
Publication of WO2021118304A1 publication Critical patent/WO2021118304A1/ko
Priority to US17/835,150 priority Critical patent/US20220297644A1/en

Links

Images

Classifications

    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/09—Arrangements for giving variable traffic instructions
    • G08G1/0962—Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
    • G08G1/0967—Systems involving transmission of highway information, e.g. weather, speed limits
    • G08G1/096733—Systems involving transmission of highway information, e.g. weather, speed limits where a selection of the information might take place
    • G08G1/09675—Systems involving transmission of highway information, e.g. weather, speed limits where a selection of the information might take place where a selection from the received information takes place in the vehicle
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/59—Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60Q—ARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q9/00—Arrangement or adaptation of signal devices not provided for in one of main groups B60Q1/00 - B60Q7/00, e.g. haptic signalling
    • B60Q9/008—Arrangement or adaptation of signal devices not provided for in one of main groups B60Q1/00 - B60Q7/00, e.g. haptic signalling for anti-collision purposes
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R11/00—Arrangements for holding or mounting articles, not otherwise provided for
    • B60R11/04—Mounting of cameras operative during drive; Arrangement of controls thereof relative to the vehicle
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60T—VEHICLE BRAKE CONTROL SYSTEMS OR PARTS THEREOF; BRAKE CONTROL SYSTEMS OR PARTS THEREOF, IN GENERAL; ARRANGEMENT OF BRAKING ELEMENTS ON VEHICLES IN GENERAL; PORTABLE DEVICES FOR PREVENTING UNWANTED MOVEMENT OF VEHICLES; VEHICLE MODIFICATIONS TO FACILITATE COOLING OF BRAKES
    • B60T17/00—Component parts, details, or accessories of power brake systems not covered by groups B60T8/00, B60T13/00 or B60T15/00, or presenting other characteristic features
    • B60T17/18—Safety devices; Monitoring
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60T—VEHICLE BRAKE CONTROL SYSTEMS OR PARTS THEREOF; BRAKE CONTROL SYSTEMS OR PARTS THEREOF, IN GENERAL; ARRANGEMENT OF BRAKING ELEMENTS ON VEHICLES IN GENERAL; PORTABLE DEVICES FOR PREVENTING UNWANTED MOVEMENT OF VEHICLES; VEHICLE MODIFICATIONS TO FACILITATE COOLING OF BRAKES
    • B60T17/00—Component parts, details, or accessories of power brake systems not covered by groups B60T8/00, B60T13/00 or B60T15/00, or presenting other characteristic features
    • B60T17/18—Safety devices; Monitoring
    • B60T17/22—Devices for monitoring or checking brake systems; Signal devices
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60T—VEHICLE BRAKE CONTROL SYSTEMS OR PARTS THEREOF; BRAKE CONTROL SYSTEMS OR PARTS THEREOF, IN GENERAL; ARRANGEMENT OF BRAKING ELEMENTS ON VEHICLES IN GENERAL; PORTABLE DEVICES FOR PREVENTING UNWANTED MOVEMENT OF VEHICLES; VEHICLE MODIFICATIONS TO FACILITATE COOLING OF BRAKES
    • B60T7/00—Brake-action initiating means
    • B60T7/12—Brake-action initiating means for automatic initiation; for initiation not subject to will of driver or passenger
    • B60T7/14—Brake-action initiating means for automatic initiation; for initiation not subject to will of driver or passenger operated upon collapse of driver
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60T—VEHICLE BRAKE CONTROL SYSTEMS OR PARTS THEREOF; BRAKE CONTROL SYSTEMS OR PARTS THEREOF, IN GENERAL; ARRANGEMENT OF BRAKING ELEMENTS ON VEHICLES IN GENERAL; PORTABLE DEVICES FOR PREVENTING UNWANTED MOVEMENT OF VEHICLES; VEHICLE MODIFICATIONS TO FACILITATE COOLING OF BRAKES
    • B60T7/00—Brake-action initiating means
    • B60T7/12—Brake-action initiating means for automatic initiation; for initiation not subject to will of driver or passenger
    • B60T7/16—Brake-action initiating means for automatic initiation; for initiation not subject to will of driver or passenger operated by remote control, i.e. initiating means not mounted on vehicle
    • B60T7/18—Brake-action initiating means for automatic initiation; for initiation not subject to will of driver or passenger operated by remote control, i.e. initiating means not mounted on vehicle operated by wayside apparatus
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60T—VEHICLE BRAKE CONTROL SYSTEMS OR PARTS THEREOF; BRAKE CONTROL SYSTEMS OR PARTS THEREOF, IN GENERAL; ARRANGEMENT OF BRAKING ELEMENTS ON VEHICLES IN GENERAL; PORTABLE DEVICES FOR PREVENTING UNWANTED MOVEMENT OF VEHICLES; VEHICLE MODIFICATIONS TO FACILITATE COOLING OF BRAKES
    • B60T7/00—Brake-action initiating means
    • B60T7/12—Brake-action initiating means for automatic initiation; for initiation not subject to will of driver or passenger
    • B60T7/22—Brake-action initiating means for automatic initiation; for initiation not subject to will of driver or passenger initiated by contact of vehicle, e.g. bumper, with an external object, e.g. another vehicle, or by means of contactless obstacle detectors mounted on the vehicle
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18—Eye characteristics, e.g. of the iris
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18—Eye characteristics, e.g. of the iris
    • G06V40/19—Sensors therefor
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/01—Detecting movement of traffic to be counted or controlled
    • G08G1/0104—Measuring and analyzing of parameters relative to traffic conditions
    • G08G1/0108—Measuring and analyzing of parameters relative to traffic conditions based on the source of data
    • G08G1/0112—Measuring and analyzing of parameters relative to traffic conditions based on the source of data from the vehicle, e.g. floating car data [FCD]
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/01—Detecting movement of traffic to be counted or controlled
    • G08G1/0104—Measuring and analyzing of parameters relative to traffic conditions
    • G08G1/0125—Traffic data processing
    • G08G1/0129—Traffic data processing for creating historical data or processing based on historical data
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/01—Detecting movement of traffic to be counted or controlled
    • G08G1/0104—Measuring and analyzing of parameters relative to traffic conditions
    • G08G1/0137—Measuring and analyzing of parameters relative to traffic conditions for specific applications
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/09—Arrangements for giving variable traffic instructions
    • G08G1/0962—Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
    • G08G1/0967—Systems involving transmission of highway information, e.g. weather, speed limits
    • G08G1/096766—Systems involving transmission of highway information, e.g. weather, speed limits where the system is characterised by the origin of the information transmission
    • G08G1/096775—Systems involving transmission of highway information, e.g. weather, speed limits where the system is characterised by the origin of the information transmission where the origin of the information is a central station
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/09—Arrangements for giving variable traffic instructions
    • G08G1/0962—Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
    • G08G1/0968—Systems involving transmission of navigation instructions to the vehicle
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/123—Traffic control systems for road vehicles indicating the position of vehicles, e.g. scheduled vehicles; Managing passenger vehicles circulating according to a fixed timetable, e.g. buses, trains, trams
    • G08G1/127—Traffic control systems for road vehicles indicating the position of vehicles, e.g. scheduled vehicles; Managing passenger vehicles circulating according to a fixed timetable, e.g. buses, trains, trams to a central station ; Indicators in a central station
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/16—Anti-collision systems
    • G08G1/166—Anti-collision systems for active traffic, e.g. moving vehicles, pedestrians, bikes
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60T—VEHICLE BRAKE CONTROL SYSTEMS OR PARTS THEREOF; BRAKE CONTROL SYSTEMS OR PARTS THEREOF, IN GENERAL; ARRANGEMENT OF BRAKING ELEMENTS ON VEHICLES IN GENERAL; PORTABLE DEVICES FOR PREVENTING UNWANTED MOVEMENT OF VEHICLES; VEHICLE MODIFICATIONS TO FACILITATE COOLING OF BRAKES
    • B60T2201/00—Particular use of vehicle brake systems; Special systems using also the brakes; Special software modules within the brake system controller
    • B60T2201/02—Active or adaptive cruise control system; Distance control
    • B60T2201/022—Collision avoidance systems
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60T—VEHICLE BRAKE CONTROL SYSTEMS OR PARTS THEREOF; BRAKE CONTROL SYSTEMS OR PARTS THEREOF, IN GENERAL; ARRANGEMENT OF BRAKING ELEMENTS ON VEHICLES IN GENERAL; PORTABLE DEVICES FOR PREVENTING UNWANTED MOVEMENT OF VEHICLES; VEHICLE MODIFICATIONS TO FACILITATE COOLING OF BRAKES
    • B60T2210/00—Detection or estimation of road or environment conditions; Detection or estimation of road shapes
    • B60T2210/30—Environment conditions or position therewithin
    • B60T2210/32—Vehicle surroundings
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60T—VEHICLE BRAKE CONTROL SYSTEMS OR PARTS THEREOF; BRAKE CONTROL SYSTEMS OR PARTS THEREOF, IN GENERAL; ARRANGEMENT OF BRAKING ELEMENTS ON VEHICLES IN GENERAL; PORTABLE DEVICES FOR PREVENTING UNWANTED MOVEMENT OF VEHICLES; VEHICLE MODIFICATIONS TO FACILITATE COOLING OF BRAKES
    • B60T2210/00—Detection or estimation of road or environment conditions; Detection or estimation of road shapes
    • B60T2210/30—Environment conditions or position therewithin
    • B60T2210/36—Global Positioning System [GPS]
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60T—VEHICLE BRAKE CONTROL SYSTEMS OR PARTS THEREOF; BRAKE CONTROL SYSTEMS OR PARTS THEREOF, IN GENERAL; ARRANGEMENT OF BRAKING ELEMENTS ON VEHICLES IN GENERAL; PORTABLE DEVICES FOR PREVENTING UNWANTED MOVEMENT OF VEHICLES; VEHICLE MODIFICATIONS TO FACILITATE COOLING OF BRAKES
    • B60T2220/00—Monitoring, detecting driver behaviour; Signalling thereof; Counteracting thereof
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2420/00—Indexing codes relating to the type of sensors based on the principle of their operation
    • B60W2420/40—Photo or light sensitive means, e.g. infrared sensors
    • B60W2420/403—Image sensing, e.g. optical camera
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/59—Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • G06V20/597—Recognising the driver's state or behaviour, e.g. attention or drowsiness

Definitions

  • the present invention relates to a mobile IoT integration-based safe driving support system, and more specifically, by using a high-precision location-based platform, various information such as driver status and vehicle driving status according to vehicle operation are collected in real time or periodically based on sensors and It collects, analyzes and learns the collected information to detect various driver states, such as drowsy driving state and the driver's mental and physical state, that occur while driving a vehicle, and analyzes and learns the collected information to prevent traffic accidents that respond to drowsy driving, etc. It relates to a mobile IoT integration-based safe driving support system that provides accident response services to drivers in advance, and a method for handling the same.
  • An object of the present invention is to provide an accident response service that can prevent traffic accidents by detecting and collecting various information on the driver's state and vehicle driving state during vehicle operation, and analyzing and learning it to support safe driving based on mobile IoT integration. To provide a system and a method for processing the same.
  • Another object of the present invention is to use a high-precision GNSS platform to measure and correct high-precision location information according to the operation of the vehicle in real time, and to inform the driver in advance about an event occurring during the operation of the vehicle or to generate an alarm.
  • An object of the present invention is to provide a mobile IoT integration-based safe driving support system that prevents traffic accidents in advance, and a method for handling the same.
  • Another object of the present invention is to provide a mobile IoT integration-based safe driving support system that detects a driver's drowsy driving state and alerts the driver, and a processing method thereof.
  • the mobile IoT integration-based safe driving support system of the present invention detects various information according to vehicle operation in real time based on a sensor, collects and collects it through an IoT agent, and analyzes the collected information to obtain a vehicle It has one characteristic of notifying the driver or generating an alarm in response to various events occurring during driving.
  • a mobile IoT integration-based safe driving support system detects, for example, the driver's drowsy driving, sudden changes in mental and physical condition, speeding, sudden starts, sudden stops, sudden lane changes, and road risk situations, and informs the driver in real time. You can prevent traffic accidents.
  • the mobile IoT integration-based safe driving support system of the present invention includes: a smart band worn by a driver of a driving vehicle and sensing heart rate information and acceleration information according to movement of the driver; a driver condition monitoring device installed inside the vehicle, having a first camera module, and detecting driver condition information by acquiring an image including the driver's iris and face; It is installed in the vehicle, includes a second camera module to acquire a surrounding image while driving the vehicle, and includes a radar module to detect the presence or absence of an object and a distance to the object in the surrounding situation of the vehicle, and to operate the vehicle a driver assistance device that receives vehicle driving information according to vehicle operation from the recording self-diagnosis device in real time, generates driver assistance information, and transmits a notification command to the driving record self-diagnosis device when an event occurs in the driver assistance information; an automatic emergency braking device for generating emergency braking information and transmitting the emergency braking information to the driver assistance device when the driving record self-diagnosis device receives a notification command from the
  • a satellite navigation terminal that receives driver assistance information and emergency braking information from a driver assistance device and transmits location information of the vehicle, driver status information, vehicle operation information, and emergency braking information; And, the vehicle location information, driver state information, and vehicle operation information transmitted from the satellite navigation terminal provided in each of the plurality of vehicles are collected and collected, and the collected information is analyzed and learned to detect the driver's drowsy driving. Or, when an event occurs while driving the vehicle, it includes an accident response service server that transmits notification information to the driver's terminal to inform or warn the driver of the event occurrence situation to provide an accident response service to prevent a traffic accident.
  • the satellite navigation terminal corrects the location information acquired in real time by automatically switching channel connections with neighboring base stations while the vehicle is driving.
  • the accident response service server performs statistical analysis on the collected information to determine whether an event has occurred according to the driver's state and vehicle driving state, and analyzes and processes the images obtained from the first camera module to process the driver of the drowsy driving state or by analyzing the patterns of the driver state information and the vehicle driving information to predict whether an accident has occurred.
  • the accident response service server provides an accident response service by repeatedly learning to at least determine the driver status, vehicle driving status, accident type prediction, and road risk using the collected information and analysis processing results Build big data for
  • the accident response service server calculates the risk index of the road on which the vehicle is driving through the location information of the vehicle and the vehicle operation information, and informs the driver of the vehicle in real time of the calculated road risk index provide a catalog
  • the accident response service server determines whether the driver is in a drowsy driving state through pattern learning of the driver state information, and provides, if the driver is in the drowsy driving state, to inform the driver of the driving vehicle in real time.
  • the mobile IoT integration-based safe driving support system of the present invention acquires GNSS-based location information of each vehicle, and collects and aggregates various information on the driver state and vehicle operation state of the vehicle in real time. By building big data, analyzing and learning it repeatedly, it is possible to provide accident response services in advance, such as preventing traffic accidents.
  • the mobile IoT integration-based safe driving support system of the present invention acquires short-period driving information using the GNSS platform and analyzes it to apply it to traffic safety and accident prevention activities, or to apply to various fields such as map guidance service.
  • a data operation platform that can provide information, it is provided not only to related organizations such as the National police Agency and the Road Traffic Authority, but also to the private sector such as navigation companies and public data portals, laying the foundation for providing various services that can reduce traffic accidents. can do.
  • the mobile IoT integration-based safe operation support system of the present invention is open to be applied to various applications as public data, so it is possible to secure data quality and standards, support various data amounts and formats, and provide various forms and uses, and continuous management is possible
  • the mobile IoT integration-based safe operation support system of the present invention provides information related to an accident response service to an incident support system such as the Road Traffic Authority, traffic fatal accident information received to the police, traffic weakness, and accidents by accident characteristics Local information, traffic accident location information and traffic accident information through traffic accident analysis systems and public data portals such as the National police Agency and the Road Traffic Authority in real time by performing convergence analysis with regional information, data on past traffic accidents and accidents caused by weather and sudden events , information on accident-prone areas, road risk index, etc., can be opened to provide a variety of services that can reduce traffic accidents in various industries.
  • an incident support system such as the Road Traffic Authority, traffic fatal accident information received to the police, traffic weakness, and accidents by accident characteristics
  • Local information, traffic accident location information and traffic accident information through traffic accident analysis systems and public data portals such as the National police Agency and the Road Traffic Authority in real time by performing convergence analysis with regional information, data on past traffic accidents and accidents caused by weather and sudden events , information on accident-prone areas, road risk index, etc.
  • private industries such as navigation companies can improve accident guidance accuracy and expand the diversity of guidance content by providing a differentiated road risk index according to road type and driver vehicle type through a more three-dimensional map guidance service. For example, when a vehicle passes a specific area at a specific time, it notifies that the area is a high-risk area where fatal accidents are concentrated between 00:00 and 00:00, or provides an automatic notification service to the driver when passing through an area where fatal accidents are frequent. It can be expected to have a preemptive accident reduction effect.
  • FIG. 1 is a block diagram illustrating a network configuration of a mobile IoT integration-based safe driving support system according to the present invention
  • FIG. 2 is a block diagram showing the configuration of the vehicle shown in Figure 1;
  • FIG. 3 is a block diagram showing the configuration of the incident response service server shown in Figure 1, and
  • FIG. 4 is a flowchart illustrating a processing procedure of a mobile IoT integration-based safe driving support system according to the present invention.
  • Embodiments of the present invention may be modified in various forms, and the scope of the present invention should not be construed as being limited by the embodiments described below. This example is provided to more completely explain the present invention to those of ordinary skill in the art. Accordingly, the shapes of the components in the drawings are exaggerated to emphasize a clearer description.
  • FIG. 1 is a block diagram showing a network configuration of a mobile IoT integration-based safe driving support system according to the present invention
  • FIG. 2 is a block diagram showing the configuration of a vehicle and a GNSS terminal shown in FIG. 1
  • FIG. 3 is FIG. It is a block diagram showing the configuration of the incident response service server shown in 1 .
  • the mobile IoT integration-based safe driving support system 2 of the present invention detects various information according to vehicle operation in real time based on a sensor, and collects and collects it through an IoT Agent. Detects various events that occur while driving the vehicle, such as driver's drowsy driving, sudden change of mental and physical condition, speeding, sudden start, sudden stop, sudden lane change, road hazard situation, etc. or raise an alarm to prevent traffic accidents.
  • the mobile IoT integration-based safe driving support system (2) of the present invention acquires driving information of a short cycle by using the GNSS platform and analyzes it to apply it to traffic safety and accident prevention activities, or to various fields such as map guidance service
  • a data operation platform that can provide relevant information to the extent possible, it provides various services that can reduce traffic accidents by providing it not only to related organizations such as the National Police Agency and the Road Traffic Authority, but also to the private sector such as navigation companies and public data portals. foundation can be laid.
  • the mobile IoT integration-based safe driving support system 2 of the present invention includes a communication network 4 , a smart band 110 worn by the driver, a DSM device 120 installed in the vehicle 100 , and an ADAS device. 130 , and an AEBS device 140 , a GNSS terminal 150 and an incident response service server 200 .
  • the mobile IoT integration-based safe driving support system 2 of the present invention may include an accident support system 300 , an application system 400 , and a driver terminal 500 .
  • the communication network 4 includes, for example, a wireless communication network such as Wi-Fi and Bluetooth, a mobile communication network such as LTE and 5G, a dedicated communication network, and the like, and may be provided as a single communication network or a mixed complex communication network, respectively.
  • the communication network 4 is connected so that data communication is made between the GNSS terminal 150 of the vehicle 100 and the accident response service server 200 .
  • the communication network 4 may be connected so that data communication is made between the accident support system 300 , the application system 400 , each of the driver terminals 500 , and the accident response service servers 200 .
  • the vehicle 100 includes a plurality of sensors, a camera, and a radar in order to detect a driver's state and a vehicle running state while driving the vehicle based on the sensor.
  • the vehicle 100 includes the smart band 110 and the DSM device 120 for detecting the driver's state, and the ADAS device 130 and the AEBS device 140 for detecting the driving state of the vehicle.
  • the vehicle 100 includes a GNSS terminal 150 for real-time tracking of the vehicle location and data communication with the accident response service server 200 .
  • the smart band 110 is a wearable device worn by the driver and detects heart rate information and acceleration information according to movement of the driver.
  • the smart band 110 transmits the detected heart rate information and acceleration information to the GNSS terminal 150 .
  • the smart band 110 includes a heart rate sensor 116 , an acceleration sensor 118 , a communication module 114 and a controller 112 as shown in FIG. 2 .
  • the heart rate sensor 116 detects, for example, the driver's heart rate in real time or periodically (in seconds and minutes) in order to determine the driver's mental and physical state or physical state, and transmits heart rate information to the controller 112 . .
  • the acceleration sensor 118 measures acceleration information according to the driver's movement and transmits it to the controller 112 in order to determine the driver's drowsy driving.
  • the communication module 114 transmits heart rate information and acceleration information to the GNSS terminal 150 through, for example, a wireless communication network such as Wi-Fi or Bluetooth, or a mobile communication network such as LTE or 5G. And the controller 112 controls the heart rate sensor 116 , the acceleration sensor 118 , and the communication module 114 to process the functions of the smart band 110 .
  • the driver status monitoring (DSM) device 120 is installed inside the vehicle 100 , detects driver status information, and transmits the detected driver status information to the GNSS terminal 150 .
  • the DSM device 120 of this embodiment includes a camera module 126 , a communication module 124 , and a controller 122 .
  • the camera module 126 acquires an image including the driver's iris and face, recognizes the driver's iris and face, and transmits the image to the controller 122 .
  • the communication module 124 transmits driver status information to the GNSS terminal 150 through a wired interface such as a USB port or a serial port, for example.
  • the controller 122 controls the camera module 126 and the communication module 124 to process the functions of the DSM device 120 .
  • the DSM device 120 includes not only iris and face recognition using the camera module 126 but also various sensors for detecting the driver's biometric and health status, for example, a vehicle seat, steering wheel, seat belt, gear transmission, etc. Equipped with an electrocardiogram sensor, a pulse wave sensor, an electroencephalogram sensor, etc., through which the driver's heart map, pulse wave, electroencephalogram, etc. are detected, the driver's health and mental and physical conditions are monitored, and the driver's drowsy driving state and fatigue state , it is also possible to determine whether an event such as a state of reduced attention has occurred. Accordingly, the present invention detects driver state information so that the driver's drowsy driving state, mental and physical state, etc. can be determined through the smart band 110 and the DSM device 120 .
  • the Advanced Driver Assistance Systems (ADAS) device 130 is connected to the On-Board Diagnostics-II (OBD2) device 142 of the vehicle 100 through CAN communication, OBD2 port, etc., ADAS information is generated by receiving various vehicle operation information according to vehicle operation from the OBD2 device 142 in real time.
  • the ADAS device 130 transmits the generated ADAS information to the GNSS terminal 150 .
  • the vehicle operation information includes, for example, vehicle information, vehicle speed, revolution per minute (RPM), accelerator operation status, brake operation status, and various information related to vehicle operation such as digital driving record
  • the ADAS information includes information determined through vehicle driving information, for example, lane recognition, forward vehicle recognition, pedestrian recognition, forward object detection, and distance measurement.
  • the ADAS device 130 of this embodiment includes a camera module 136 , a radar module 138 , a communication module 134 , and a controller 132 as shown in FIG. 2 .
  • the camera module 136 acquires an image around the vehicle while the vehicle is driving and transmits it to the controller 132 .
  • the radar module 138 detects the presence or absence of a vehicle before and after the movement of the vehicle 100 , a distance from another vehicle, the presence of pedestrians, etc.
  • the communication module 134 transmits ADAS information to the GNSS terminal 150 through a wired interface such as, for example, a USB port or a serial port.
  • the controller 132 controls the camera module 136 , the radar module 138 , and the communication module 134 to process the functions of the ADAS device 130 .
  • the controller 132 performs image processing and analysis of the image transmitted from the camera module 136 or determines the object detected from the radar module 138 to recognize lanes, forward vehicle recognition, pedestrian recognition, forward object detection and distance measurement, etc. Create ADAS information.
  • the controller 132 controls to transmit the generated ADAS information to the GNSS terminal 150 through the communication module 134 .
  • the controller 132 transmits a notification command according to the occurrence of the event to the OBD2 device 142 of the vehicle 100 through a universal unsynchronized transceiver (UART).
  • UART universal unsynchronized transceiver
  • the ADAS device 130 is a device that assists the driver in safe driving, and performs functions such as forward collision avoidance, lane departure warning, blind spot monitoring, driver drowsiness detection, and rear monitoring using radar and a camera. ADAS device 130, when it is necessary to convey the event occurrence state to the driver, for example, to give a sound warning, visually display on the rearview mirror, etc., or give a vibration to the seat or steering wheel so that the driver can tactilely recognize it. can
  • AEBS Automatic emergency braking
  • AEBS Advanced Emergency Braking System
  • OBD2 On-Board Diagnostics-2
  • B/A brake actuator
  • 130 ADAS device
  • the OBD2 device 142 automatically operates the brake actuator (B/A) 144 control as much as possible. Accordingly, the OBD2 device 142 transmits emergency braking information related to the AEBS device 140 to the ADAS device 130 .
  • the global navigation satellite system (GNSS) terminal 150 is installed in the vehicle 100 and is connected to a plurality of base stations to collect information with higher precision than general GPS to provide real-time location information according to vehicle operation (eg, , in units of 1 second, etc.).
  • the GNSS terminal 150 automatically switches channel connections with adjacent base stations to correct location information between adjacent base stations during vehicle operation.
  • the GNSS terminal 150 covers a plurality of base stations having a radius of about 10 km in a corresponding area while driving a vehicle, and thereby acquires and corrects location information in both directions in real time.
  • the GNSS terminal 150 is connected to the smart band 110 and the accident response service server 200 through a wireless communication network, a mobile communication network, etc.
  • the GNSS terminal 150 includes a GNSS antenna 154 , a GNSS module 156 , a communication module 158 , a memory 159 and a controller 152 as shown in FIG. 2 .
  • the GNSS antenna 154 is connected to a plurality of base stations through artificial satellites.
  • the GNSS module 156 acquires high-precision location information in real time from the GNSS antenna 154 while driving the vehicle, and transmits the obtained location information to the controller 152 in real time or periodically (eg, in units of seconds, etc.) do.
  • the location information transmitted to the controller 152 is transmitted as, for example, NMEA (National Marine Electronics Association) data including information such as time, location, and orientation.
  • NMEA National Marine Electronics Association
  • the communication module 158 is connected to the smart band 110 , the DSM device 120 , and the ADAS device 130 through a wireless communication network, a mobile communication network, a wired interface, etc., and a communication network such as a wireless communication network, a mobile communication network, and a dedicated communication network It is connected to the incident response service server 200 through (4).
  • the memory 159 receives location information, for example, NMEA (National Marine Electronics Association) data from the controller 152 , temporarily stores it, and updates it in real time. And the controller 152 controls the GNSS module 156 , the communication module 158 and the memory 159 to process the functions of the GNSS terminal 150 .
  • the controller 152 transmits the location information obtained through the GNSS module 156, the driver state information and vehicle operation information collected through the communication module 158 to the accident response service server 200 through the communication network 4 control to do
  • the GNSS terminal 150 acquires and corrects location information according to the movement of the vehicle 100 in real time, and receives driver state information and vehicle operation information in real time from various sensors installed in the vehicle 100 and worn by the driver.
  • the detected information is transmitted to the accident response service server 200 that provides a traffic accident prevention service.
  • the accident response service server 200 collects and collects various information according to vehicle operation to produce mobile IoT-based driving data according to vehicle operation in real time, thereby preventing drowsy driving and traffic accidents.
  • a standardized system related to the safe operation of vehicles such as prevention, notification and alarm generation according to the occurrence of events. That is, the accident response service server 200 collects and collects various information such as location information transmitted from each of the plurality of GNSS terminals 150, the driver's state according to vehicle operation, and the vehicle operation state, and analyzes and learns it.
  • an accident response service is provided to prevent traffic accidents.
  • the accident response service server 200 provides various data related to the accident response service to the accident support system 300 of related organizations, for example, the National Police Agency, the Road Management Corporation and local governments, or insurance companies, navigation companies, etc. It can be provided to the application system 400 of the private company of , so that it can be utilized for various purposes.
  • the incident response service server 200 includes a server 210 and a database 250 as shown in FIG. 3 .
  • the server 210 transmits a standard RTCM (Radio Technical Committee for Maritime Service) signal by correcting location information based on the Internet using an IoT platform, for example, an NTRIP server for authenticating a user, time synchronization and data processing. and an interface server for managing IoT devices, and a connection server for managing IoT devices, and the database 250 includes, for example, a vehicle information DB, a sensor collection DB, an accident response DB, and the like.
  • RTCM Radio Technical Committee for Maritime Service
  • the server 210 of this embodiment includes a control unit 212, a communication unit 214, a location determination unit 216, an information collection unit 218, an analysis unit 220, a big data learning unit 222, a risk calculation unit ( 224 ), a drowsiness detection unit 226 , a monitoring unit 228 , and a notification unit 230 .
  • the control unit 212 interworks with the GNSS terminal 150 of each of the plurality of vehicles 100 to process the overall functions of the accident response service server 200 , the communication unit 214 , the location determination unit 216 , and the information collection unit 218 , the analysis unit 220 , the big data learning unit 222 , the risk calculation unit 224 , the drowsiness detection unit 226 , the monitoring unit 228 , the notification unit 230 , and the database 250 , respectively. to control
  • the communication unit 214 is connected to the communication network 4 , and receives location information, driver state information, vehicle operation information, and images from the GNSS terminal 150 of the vehicle 100 in real time. When an event occurs, the communication unit 214 transmits notification information to the driver terminal 500 through the communication network 4 . In addition, the communication unit 214 may provide various information related to the accident response service to the accident support system 300 , the application system 400 , and the like through the communication network 4 .
  • the location determination unit 216 monitors the location of the vehicle 100 in real time by determining location information transmitted from the GNSS terminal 150 in real time while the vehicle is running. The location determining unit 216 corrects location information of the vehicle 100 in response to adjacent base stations while the vehicle is running.
  • the information collection unit 218 collects and collects location information, driver state information, and vehicle operation information transmitted from the GNSS terminal 150 of each of the plurality of vehicles 100 , and stores it in the database 250 to big data to build
  • the government collection unit 218 collects, for example, GNSS information, OBD2 information, smart band information, DSM information, ADAS information, emergency braking information, driver information, vehicle location information, and vehicle operation information in real time or periodically repeatedly and Collect.
  • the information collection unit 218 stores the collected information in the database 250 .
  • the information collection unit 218 collects various information according to vehicle operation through the GNSS terminal 150 in real time or periodically (eg, once per second, etc.).
  • the analysis unit 220 statistically analyzes the information collected by the information collection unit 218 to determine whether an event has occurred according to the driver's condition and the vehicle driving condition.
  • the analysis unit 220 analyzes and processes the images obtained from the camera module 126 of the DSM device 120 to determine the drowsy driving state.
  • the analysis unit 220 predicts whether an accident occurs by analyzing a pattern according to the driver's state and the vehicle driving state.
  • the big data learning unit 222 repeats the collected information and analysis processing results to determine the driver state, vehicle driving state, accident type prediction, road risk index calculation, etc. through artificial intelligence (AI), deep learning learning, etc. Learn to build big data to provide incident response services.
  • AI artificial intelligence
  • the risk calculation unit 224 calculates the risk index of the road on which the vehicle is driving through location information and vehicle operation information.
  • the risk calculation unit 224 provides the calculated road risk index to inform the driver of the vehicle 100 in real time.
  • the drowsiness detector 226 determines whether the driver's heart rate, acceleration, iris, and face, etc. sensed through pattern learning of driver state information is a drowsy driving state. When the driver is in a drowsy driving state, the drowsiness detection unit 226 transmits the corresponding information to the notification unit 230 .
  • the monitoring unit 228 displays driver state information and vehicle operation information to monitor in real time.
  • the monitoring unit 228 displays the location of the vehicle 100 on the electronic map, and applies a road condition according to the operation of the vehicle 100 or a road risk index according to the location of the vehicle 100 to monitor the road condition in real time. can also guide you.
  • the notification unit 230 receives from the analysis unit 220 , the big data learning unit 222 , the risk calculation unit 224 , and the drowsiness detection unit 226 , the drowsy driving state, the vehicle driving state, and the road while the vehicle 100 is being driven.
  • notification information for the corresponding event is generated and transmitted to the driver terminal 500 in order to notify or alert the event.
  • the database 250 stores and manages various information collected and generated according to the process of processing various functions of the incident response service server 200 under the control of the control unit 212 .
  • the database 250 includes driver information 252 , vehicle information 254 , driver state information 256 , vehicle location information 258 , vehicle operation information 260 , ADAS information 262 , and emergency provision information. 264 , analysis information 266 , correspondence information 268 , and notification information 270 are stored at least.
  • This database 250 is included in the incident response service server 200, but may be provided independently.
  • the above-described accident response service server 200 obtains GNSS-based location information of each of the vehicles 100, collects and collects various information about the driver state and vehicle operation state of the vehicle 100 in real time, By constructing data, analyzing and learning it repeatedly, it is possible to provide accident response services in advance, such as preventing traffic accidents.
  • the mobile IoT integration-based safe operation support system (2) of the present invention is open to be applied to various applications as public data, so it is possible to secure data quality and standards, support various data amounts and formats, and provide various forms and uses. , continuous management is possible.
  • FIG. 4 is a flowchart illustrating a processing procedure of the mobile IoT integration-based safe driving support system according to the present invention.
  • the mobile IoT integration-based safe driving support system 2 of the present invention includes various sensors installed in the vehicle 100 or installed on the driver, for example, the heart rate sensor 116 of the smart band 110 in step S600. ) and the acceleration sensor 118, the camera module 126 of the DSM device 120, the camera module 136 and the radar module 138 of the ADAS device 130, etc.
  • Various types of information including driver status information, vehicle location information, ADAS information, and vehicle operation information such as emergency braking information are detected in real time, and in step S602, various types of detection information are GNSS through wireless communication network, mobile communication network, wired interface, etc. It is transmitted to the terminal 150 .
  • step S604 the GNSS terminal 150 acquires location information in real time while driving the vehicle, and transmits various information transmitted from the vehicle to the accident response service server 200 through the communication network 4 in step S606 .
  • step S608 the accident response service server 200 determines the location information transmitted from the GNSS terminal 150, and corrects the location information in real time by switching the automatic channel between the base stations for the location information of the vehicle 100 in operation. .
  • step S610 the incident response service server 200 collects and collects various types of information transmitted from the GNSS terminal 150, and analyzes the information collected in step S612 to determine whether an event has occurred.
  • step S614 the accident response service server 200 generates notification information according to the occurrence of the event and transmits the notification information to the driver terminal 500 in step S616 when an event occurs.
  • step S618 the driver terminal 500 receives notification information from the accident response service server 200 to guide or alert the driver.
  • step S620 the incident response service server 200 builds big data for the incident response service by learning the collected information based on the analysis result.
  • the mobile IoT integration-based safe driving support system collects and aggregates various information on the driver status and vehicle driving status of the vehicle in real time to build big data, analyzes and repeats it, and provides an accident response service. By providing it, it can be applied to traffic safety and accident prevention.
  • the mobile IoT integration-based safe operation support system provides various data related to the accident response service to be used for various purposes, and is applied to the accident support system of related organizations such as the National Police Agency, Road Management Corporation, and local governments. Alternatively, it can be applied to application systems of private companies such as insurance companies, navigation companies, and public data portals.

Abstract

본 발명은 이동형 IoT 통합 기반 안전 운행 지원 시스템 및 그 처리 방법에 관한 것이다. 본 발명의 이동형 IoT 통합 기반 안전 운행 지원 시스템은 차량들 각각의 GNSS(Global Navigation Satellite System) 기반 위치 정보를 획득하고, 실시간으로 운행 중인 차량의 운전자 상태와 차량 운행 상태에 대한 다양한 정보를 수집 및 취합하여 빅데이터를 구축하고, 이를 분석 및 반복 학습하여 교통사고 예방 등 사전에 사고 대응 서비스를 제공할 수 있다.

Description

이동형 IoT 통합 기반 안전 운행 지원 시스템 및 그의 처리 방법
본 발명은 이동형 IoT 통합 기반 안전 운행 지원 시스템에 관한 것으로, 좀 더 구체적으로 고정밀의 위치 기반 플랫폼을 이용하여 차량 운행에 따른 운전자 상태와 차량 운행 상태 등 다양한 정보들을 센서 기반으로 실시간 또는 주기적으로 수집 및 취합하고, 수집된 정보들을 분석 및 학습하여 차량 운행 중 발생되는 졸음 운전 상태, 운전자의 심신 상태 등 다양한 운전자 상태를 감지하고, 수집된 정보들을 분석 및 학습 처리하여 졸음 운전에 대응하는 교통사고 예방 등의 사고 대응 서비스를 사전에 운전자에게 제공하는 이동형 IoT 통합 기반 안전 운행 지원 시스템 및 그의 처리 방법에 관한 것이다.
승용차, 버스, 택시 등의 차량 운행 중에 차대차 간, 차대사람 간 등 다양한 형태의 교통사고가 발생하고 있다. 최근에는 급속히 늘어난 자동차로 인해, 교통사고의 발생률이 급속히 증가되고 있는 추세이다. 교통사고는 심각한 사회적 경제적 피해를 주고 있다. 특히 졸음 운전으로 인한 교통사고의 발생률은 일반 교통사고보다 약 8배 정도 높게 나타나고 있으며, 사고 발생 시점에 운전자가 사고 발생을 인지하지 못한 상황이 대부분이므로, 대형 사고의 발생 확률이 더욱 높다.
일반적으로 교통사고가 발생되면, 사고 이후 보험사를 통하여 신고를 접수하고, 경찰에 도움을 요청하거나, 도로교통공단 등을 통해 사고 정보가 접수되고, 이를 기반으로 종합적인 사고 경위와 사고 규모 등을 정리한 결과를 기반으로 교통사고 정보를 집계하여 발표하고 있다.
이에 경찰청, 도로교통공단 등에서는 사고의 집계 후 공공 데이터 포털에 사고 정보를 공개하고, 도로별 위험지수 등을 토대로 정책적 의사를 결정하거나, 이를 통해 도로의 개선, 사고에 대한 알림 정보 등을 공유하고 있다. 하지만, 현재에는 경찰에 접수된 신고와, 사고 이후에 정리된 데이터를 기반으로 하고 있으며, 사고에 대한 후처리 결과를 제공하는 정보의 범위 내에서 교통사고 정보를 제공하고 있는 수준이다.
따라서 교통사고 발생 이전에 운전자의 상태나 차량 운행 상태를 실시간 감지하여 운전자에게 알려주거나 경보하여 교통사고를 예방할 수 있는 대응이 필요하다.
본 발명의 목적은 차량 운행 시의 운전자 상태와 차량 운행 상태에 대한 다양한 정보를 감지 및 수집하고, 이를 분석 및 학습하여 교통사고를 예방할 수 있는 사고 대응 서비스를 제공하기 위한 이동형 IoT 통합 기반 안전 운행 지원 시스템 및 그의 처리 방법을 제공하는 것이다.
본 발명의 다른 목적은 고정밀도의 GNSS 플랫폼을 이용하여 차량의 운행에 따른 고정밀의 위치 정보를 실시간으로 측정 및 보정하고, 차량의 운행 중에 발생되는 이벤트에 대해 운전자에게 사전에 안내하거나 경보를 발생시켜서 교통사고를 미연에 방지하도록 하는 이동형 IoT 통합 기반 안전 운행 지원 시스템 및 그의 처리 방법을 제공하는 것이다.
본 발명의 또 다른 목적은 운전자의 졸음 운전 상태를 감지하여 운전자에게 경보하는 이동형 IoT 통합 기반 안전 운행 지원 시스템 및 그의 처리 방법을 제공하는 것이다.
상기 목적들을 달성하기 위한, 본 발명의 이동형 IoT 통합 기반 안전 운행 지원 시스템은 실시간으로 차량 운행에 따른 다양한 정보들을 센서 기반으로 감지하여 사물인터넷 에이전트를 통해 수집 및 취합하고, 수집된 정보들을 분석하여 차량 운행 중에 발생되는 다양한 이벤트에 대응하여 운전자에게 알려주거나 경보를 발생시키는데 그 한 특징이 있다. 이와 같은 이동형 IoT 통합 기반 안전 운행 지원 시스템은 예를 들어, 운전자의 졸음 운전, 급격한 심신 상태 변화, 과속, 급출발, 급정지, 급차선 변경, 도로 위험도 상황 등을 감지하고, 이를 운전자에게 실시간으로 알려주어서 교통사고를 예방할 수 있다.
이 특징에 따른 본 발명의 이동형 IoT 통합 기반 안전 운행 지원 시스템은, 운행 중인 차량의 운전자가 착용하고, 운전자의 심박수 정보와 움직임에 따른 가속도 정보를 감지하는 스마트 밴드; 상기 차량의 내부에 설치되고, 제1 카메라 모듈을 구비하고 운전자의 홍채와 얼굴이 포함된 영상을 획득하여 운전자 상태 정보를 감지하는 운전자 상태 모니터링 장치; 상기 차량에 설치되고, 제2 카메라 모듈을 구비하여 차량 운행 중에 주변 영상을 획득하고, 레이더 모듈을 구비하여 상기 차량의 주변 상황에 대한 객체의 유무와 객체와의 거리를 감지하고, 상기 차량의 운행 기록 자기 진단 장치로부터 차량 운행에 따른 차량 운행 정보를 실시간으로 전송받아서 운전자 지원 정보를 생성하고, 운전자 지원 정보에 이벤트가 발생되면 알림 명령을 상기 운행 기록 자기 진단 장치로 전송하는 운전자 지원 장치; 상기 운행 기록 자기 진단 장치가 상기 운전자 지원 장치로부터 알림 명령을 받아서 브레이크 엑츄에이터를 작동시키면 긴급 제동 정보를 생성하여 상기 운전자 지원 장치로 전송하는 자동 비상 제동 장치; 상기 차량에 설치되고 인공 위성을 통해 복수 개의 기지국들과 연결되어 상기 차량의 위치 정보를 실시간으로 획득하고, 상기 스마트 밴드와 상기 운전자 상태 모니터링 장치로부터 심박수 정보와 가속도 정보 및 운전자 상태 정보를 전송받고 상기 운전자 지원 장치로부터 운전자 지원 정보와 긴급 제동 정보를 전송받아서 상기 차량의 위치 정보와 운전자 상태 정보 및 차량 운행 정보 및 긴급 제동 정보를 전송하는 위성 항법 단말기; 및, 복수 개의 차량들 각각에 구비되는 상기 위성 항법 단말기로부터 전송된 상기 차량의 위치 정보와 운전자 상태 정보 및 차량 운행 정보를 수집 및 취합하고, 수집된 정보들을 분석 및 학습하여 운전자의 졸음 운전을 탐지하거나, 차량 운행 중에 이벤트가 발생되면, 운전자 단말기로 알림 정보를 전송하여 이벤트 발생 상황을 운전자에게 알려주거나 경고하여 교통사고를 예방하도록 사고 대응 서비스를 제공하는 사고 대응 서비스 서버를 포함한다.
이 특징에 있어서, 상기 위성 항법 단말기는, 차량 운행 중에 인접하는 기지국들과의 채널 연결을 자동으로 전환하여 실시간으로 획득된 위치 정보를 보정한다.
이 특징에 있어서, 상기 사고 대응 서비스 서버는, 수집된 정보들을 통계 분석 처리하여 운전자의 상태, 차량 운행 상태에 따른 이벤트 발생 여부를 판별하고, 상기 제1 카메라 모듈로부터 획득된 영상들을 분석 처리하여 운전자의 졸음 운전 상태를 판별하거나, 상기 운전자 상태 정보와 상기 차량 운행 정보의 패턴을 분석하여 사고 발생 여부를 예측한다.
이 특징에 있어서, 상기 사고 대응 서비스 서버는, 수집된 정보들과 분석 처리 결과를 이용하여 운전자 상태, 차량 운행 상태, 사고 유형 예측 및 도로 위험도를 적어도 판별할 수 있도록 반복 학습하여 사고 대응 서비스를 제공하기 위한 빅데이터를 구축한다.
이 특징에 있어서, 상기 사고 대응 서비스 서버는, 상기 차량의 위치 정보와 차량 운행 정보를 통해 차량 운행 중인 도로의 위험도 지수를 산출하고, 산출된 도로 위험도 지수를 운행 중인 상기 차량의 운전자에게 실시간으로 알려주도록 제공한다.
이 특징에 있어서, 상기 사고 대응 서비스 서버는, 상기 운전자 상태 정보의 패턴 학습을 통해 졸음 운전 상태인지를 판별하고, 운전자가 졸음 운전 상태이면, 운행 중인 상기 차량의 운전자에게 실시간으로 알려주도록 제공한다.
상술한 바와 같이, 본 발명의 이동형 IoT 통합 기반 안전 운행 지원 시스템은 차량들 각각의 GNSS 기반 위치 정보를 획득하고, 실시간으로 운행 중인 차량의 운전자 상태와 차량 운행 상태에 대한 다양한 정보를 수집 및 취합하여 빅데이터를 구축하고, 이를 분석 및 반복 학습하여 교통사고 예방 등 사전에 사고 대응 서비스를 제공할 수 있다.
또 본 발명의 이동형 IoT 통합 기반 안전 운행 지원 시스템은 GNSS 플랫폼을 이용하여 짧은 주기의 주행 정보를 획득하고 이를 분석하여 교통 안전 및 사고 예방 활동에 적용하거나, 지도 안내 서비스 등 다양한 분야에 적용 가능하도록 관련 정보를 제공할 수 있는 데이터 운영 플랫폼을 구축하여 경찰청, 도로교통공단 등 관련 기관들 뿐만 아니라, 네비게이션 업체, 공공 데이터 포털 등의 민간에게도 제공하여 교통사고를 줄일 수 있는 다양한 서비스를 제공하는 토대를 마련할 수 있다.
또 본 발명의 이동형 IoT 통합 기반 안전 운행 지원 시스템은 공공 데이터로 다양한 응용에 적용할 수 있도록 개방하여 데이터의 품질과 표준 확보, 다양한 데이터 양과 포맷 지원 및 다양한 형태 및 용도로 제공이 가능하며, 지속적인 관리가 가능하다.
또한 본 발명의 이동형 IoT 통합 기반 안전 운행 지원 시스템은 도로교통공단 등과 같은 사건 지원 시스템에 사고 대응 서비스와 관련된 정보를 제공하는 경우, 경찰에 접수된 교통 사망 사고 정보, 교통 약자 및 사고 특성별 사고 다발 지역 정보, 과거 발생한 교통사고와 기상 및 돌발 등에 의한 사고에 대한 데이터와 융복합 분석하여 실시간으로 경찰청과 도로교통공단 등에서 교통사고 분석 시스템과 공공 데이터 포털 등을 통해 교통 사망 사고 위치 정보, 교통사고 정보, 사고 다발지 정보, 도로 위험도 지수 등의 정보를 개방하고, 이를 통해 다양한 업계에서 교통사고를 줄일 수 있는 다양한 서비스를 제공할 수 있다.
또한 네비게이션 업체 등 민간 업계에서는 보다 입체적인 지도 안내 서비스를 통해 도로 유형 및 운전자 차량 유형에 따른 차별화된 도로 위험도 지수를 제공하여 사고 안내 정확도를 향상시키고 안내 내용의 다양성을 확대할 수 있다. 예를 들어, 차량이 특정 시간대에 특정 지역을 통과할 때, 해당 지역은 00시 ~ 00시 사이에 사망사고가 집중되는 고위험 지역임을 알려주거나, 또한 사망사고 빈발 지역 통과 시, 운전자에게 자동 알림 서비스를 제공해 선제적인 사고 감소 효과를 기대할 수 있다.
또한 보험업계에서는 개방한 데이터를 활용한 다양한 특약 및 할증 옵션 상품을 통해 보험 계약자들의 만족도를 상승시킬 수 있다.
또한 연구기관들은 교통 안전을 위한 연구 시, 기존에 제공 중인 교통 소통 정보에 교통사고 정보를 활용하여 연구의 다양성을 확보할 수 있으며, 사고 분석 및 통계 자료의 정확도를 향상 시킬 수 있을 것으로 기대된다.
뿐만 아니라, 지방 자치 단체에서는 교통사고 빈발 지역에 대한 도로 구조 개편 및 신호 체계 개선 등의 공익사업 활성화에 적용할 수 있으며, 무엇보다도 교통 사망 사고 위치 정보 활용으로 교통사고 발생율 감소에 따른 사회적 비용 절감의 효과와 데이터 산업 발전에 따른 일자리 창출 증대 효과를 통해 국민의 안정과 편의를 향상시킬 것으로 기대된다.
도 1은 본 발명에 따른 이동형 IoT 통합 기반 안전 운행 지원 시스템의 네트워크 구성을 도시한 블록도,
도 2는 도 1에 도시된 차량의 구성을 나타내는 블록도,
도 3은 도 1에 도시된 사고 대응 서비스 서버의 구성을 나타내는 블록도, 그리고
도 4는 본 발명에 따른 이동형 IoT 통합 기반 안전 운행 지원 시스템의 처리 수순을 도시한 흐름도이다.
본 발명의 실시예는 여러 가지 형태로 변형될 수 있으며, 본 발명의 범위가 아래에서 서술하는 실시예로 인해 한정되어지는 것으로 해석되어서는 안된다. 본 실시예는 당업계에서 평균적인 지식을 가진 자에게 본 발명을 보다 완전하게 설명하기 위해서 제공되는 것이다. 따라서 도면에서의 구성 요소의 형상 등은 보다 명확한 설명을 강조하기 위해서 과장되어진 것이다.
이하 첨부된 도 1 내지 도 4를 참조하여 본 발명의 실시예를 상세히 설명한다.
도 1은 본 발명에 따른 이동형 IoT 통합 기반 안전 운행 지원 시스템의 네트워크 구성을 도시한 블록도이고, 도 2는 도 1에 도시된 차량과 GNSS 단말기의 구성을 나타내는 블록도이며, 그리고 도 3은 도 1에 도시된 사고 대응 서비스 서버의 구성을 나타내는 블록도이다.
도 1을 참조하면, 본 발명의 이동형 IoT 통합 기반 안전 운행 지원 시스템(2)은 실시간으로 차량 운행에 따른 다양한 정보들을 센서 기반으로 감지하여 사물인터넷 에이전트(IoT Agent)를 통해 수집 및 취합하고, 수집된 정보들을 분석하여 차량 운행 중에 발생되는 다양한 이벤트 예를 들어, 운전자의 졸음 운전, 급격한 심신 상태 변화, 과속, 급출발, 급정지, 급차선 변경, 도로 위험도 상황 등을 감지하고, 이에 대응하여 운전자에게 알려주거나 경보를 발생시켜서 교통사고를 예방하도록 처리한다.
이러한 본 발명의 이동형 IoT 통합 기반 안전 운행 지원 시스템(2)은 GNSS 플랫폼을 이용하여 짧은 주기의 주행 정보를 획득하고 이를 분석하여 교통 안전 및 사고 예방 활동에 적용하거나, 지도 안내 서비스 등 다양한 분야에 적용 가능하도록 관련 정보를 제공할 수 있는 데이터 운영 플랫폼을 구축하여 경찰청, 도로교통공단 등 관련 기관들 뿐만 아니라, 네비게이션 업체, 공공 데이터 포털 등의 민간에게도 제공하여 교통사고를 줄일 수 있는 다양한 서비스를 제공하는 토대를 마련할 수 있다.
이를 위해 본 발명의 이동형 IoT 통합 기반 안전 운행 지원 시스템(2)은 통신망(4)과, 운전자가 착용하는 스마트 밴드(110)와, 차량(100)에 설치되는 DSM 장치(120)와, ADAS 장치(130)와, AEBS 장치(140)와, GNSS 단말기(150) 및 사고 대응 서비스 서버(200)를 포함한다. 또 본 발명의 이동형 IoT 통합 기반 안전 운행 지원 시스템(2)은 사고 지원 시스템(300)과, 응용 시스템(400) 및 운전자 단말기(500)를 포함할 수 있다.
구체적으로, 통신망(4)은 예를 들어, 와이파이, 블루투스 등의 무선 통신망, LTE, 5G 등의 이동 통신망, 전용 통신망 등을 포함하고, 이들 각각의 단일 통신망 또는 혼합된 복합 통신망으로 제공될 수 있다. 통신망(4)은 차량(100)의 GNSS 단말기(150)와 사고 대응 서비스 서버(200) 간에 데이터 통신이 이루어지도록 연결된다. 또 통신망(4)은 사고 지원 시스템(300)과, 응용 시스템(400) 및 운전자 단말기(500)들 각각과 사고 대응 서비스 서버(200)들 간에 데이터 통신이 이루어지도록 연결될 수 있다.
차량(100)은 센서 기반으로 차량 운행 중의 운전자 상태와 차량 운행 상태를 감지하기 위하여, 복수 개의 센서, 카메라 및 레이더를 구비한다. 이 실시예에서 차량(100)은 운전자 상태를 감지하는 스마트 밴드(110)와 DSM 장치(120), 차량 운행 상태를 감지하는 ADAS 장치(130)와 AEBS 장치(140)를 구비한다. 또 차량(100)은 차량 위치를 실시간 추적하고, 사고 대응 서비스 서버(200)와의 데이터 통신을 위한 GNSS 단말기(150)를 포함한다.
스마트 밴드(110)는 운전자가 착용하는 웨어러블 디바이스로, 운전자의 심박수 정보와 움직임에 따른 가속도 정보를 감지한다. 스마트 밴드(110)는 감지된 심박수 정보와 가속도 정보를 GNSS 단말기(150)로 전달한다. 이를 위해 스마트 밴드(110)는 도 2에 도시된 바와 같이, 심박 센서(116), 가속도 센서(118), 통신 모듈(114) 및 컨트롤러(112)를 포함한다.
심박 센서(116)는 운전자의 심신 상태나 신체 상태를 판별할 수 있도록 하기 위해 예를 들어, 운전자의 심박수를 실시간 또는 주기적(초, 분 단위)으로 감지하여 심박수 정보를 컨트롤러(112)로 전달한다. 가속도 센서(118)는 운전자의 졸음 운전을 판별할 수 있도록 하기 위해 운전자의 움직임에 따른 가속도 정보를 측정하여 컨트롤러(112)로 전달한다. 통신 모듈(114)은 예를 들어, 와이파이, 블루투스 등의 무선 통신망, LTE, 5G 등의 이동 통신망을 통해 GNSS 단말기(150)로 심박수 정보와 가속도 정보를 전송한다. 그리고 컨트롤러(112)는 스마트 밴드(110)의 기능을 처리하도록 심박 센서(116), 가속도 센서(118) 및 통신 모듈(114)을 제어한다.
운전자 상태 모니터링(Driver Status Monitoring : DSM) 장치(120)는 차량(100)의 내부에 설치되어 운전자 상태 정보를 감지하고 감지된 운전자 상태 정보를 GNSS 단말기(150)로 전달한다. 이 실시예의 DSM 장치(120)는 도 2에 도시된 바와 같이, 카메라 모듈(126), 통신 모듈(124) 및 컨트롤러(122)를 포함한다.
카메라 모듈(126)은 운전자의 홍채와 얼굴이 포함되는 영상을 획득하고, 운전자의 홍채와 안면을 인식하여 컨트롤러(122)로 전달한다. 통신 모듈(124)은 예를 들어, USB 포트, 직렬 포트 등의 유선 인터페이스를 통하여 GNSS 단말기(150)로 운전자 상태 정보를 전송한다. 그리고 컨트롤러(122)는 DSM 장치(120)의 기능을 처리하도록 카메라 모듈(126)와 통신 모듈(124)을 제어한다.
이러한 DSM 장치(120)는 카메라 모듈(126)을 이용한 홍채 및 안면 인식 뿐만 아니라, 운전자의 생체 및 건강 상태를 감지하는 다양한 센서들 예를 들어, 차량의 시트, 스티어링 휠, 좌석 벨트, 기어 변속기 등에 심전도 센서, 맥파 센서, 뇌전도 센서 등을 구비하고, 이를 통해 운전자의 심선도, 맥파, 뇌전도 등의 생체 정보를 감지하여 운전자의 건강 상태, 심신 상태 등을 모니터링하고, 운전자의 졸음 운전 상태, 피로 상태, 주의력 저하 상태 등의 이벤트 발생 여부를 판별할 수도 있다. 따라서 본 발명은 스마트 밴드(110)와 DSM 장치(120)를 통해 운전자의 졸음 운전 상태, 심신 상태 등을 판별할 수 있도록 운전자 상태 정보를 감지한다.
운전자 지원(Advanced Driver Assistance Systems : ADAS) 장치(130)는 차량(100)의 운행 기록 자기 진단(On-Board Diagnostics-Ⅱ : OBD2) 장치(142)와 CAN 통신, OBD2 포트 등을 통해 연결되고, OBD2 장치(142)로부터 차량 운행에 따른 다양한 차량 운행 정보를 실시간으로 전송받아서 ADAS 정보를 생성한다. ADAS 장치(130)는 생성된 ADAS 정보를 GNSS 단말기(150)로 전달한다. 여기서 차량 운행 정보에는 예를 들어, 차량 정보와, 차량 속도, 엔진 회전수(Revolution Per Minute : RPM), 엑셀레이터 작동 상태, 브레이트 작동 여부, 디지털 운행 기록 등의 차량 운행과 관련된 다양한 정보들이 포함되고, ADAS 정보에는 차량 운행 정보를 통해 판별된 정보들 예를 들어, 차선 인식, 전방 차량 인식, 보행자 인지, 전방 객체 검출 및 거리 측정 등에 따른 정보가 포함된다. 이 실시예의 ADAS 장치(130)는 도 2에 도시된 바와 같이, 카메라 모듈(136), 레이더 모듈(138), 통신 모듈(134) 및 컨트롤러(132)를 포함한다.
카메라 모듈(136)은 차량 운행 중에 차량 주변의 영상을 획득하여 컨트롤러(132)로 전달한다. 레이더 모듈(138)은 차량(100)의 이동에 따른 전후 차량 유무 및 다른 차량과의 거리, 보행자 유무 등을 감지하여 컨트롤러(132)로 전달한다. 통신 모듈(134)은 예를 들어, USB 포트, 직렬 포트 등의 유선 인터페이스를 통하여 GNSS 단말기(150)로 ADAS 정보를 전송한다. 그리고 컨트롤러(132)는 ADAS 장치(130)의 기능을 처리하도록 카메라 모듈(136), 레이더 모듈(138) 및 통신 모듈(134)을 제어한다. 컨트롤러(132)는 카메라 모듈(136)로부터 전송된 영상을 영상 처리 및 분석하거나 레이더 모듈(138)로부터 감지된 객체를 판별하여 차선 인식, 전방 차량 인식, 보행자 인지, 전방 객체 검출 및 거리 측정 등에 따른 ADAS 정보를 생성한다. 컨트롤러(132)는 생성된 ADAS 정보를 통신 모듈(134)을 통해 GNSS 단말기(150)로 전송하도록 제어한다. 또 컨트롤러(132)는 ADAS 정보에 이벤트가 발생되면, 범용 비동기화 송수신기(UART)을 통해 차량(100)의 OBD2 장치(142)로 이벤트 발생에 따른 알림 명령을 전송한다.
이러한 ADAS 장치(130)는 운전자의 안전 운행을 보조하는 장치로서, 레이더와 카메라 등을 이용하여 전방 충돌 회피, 차선 이탈 경고, 사각 지대 감시, 운전자 졸음 감지, 후방 감시 등의 기능을 수행한다. ADAS 장치(130)는 운전자에게 이벤트 발생 상태를 전달할 필요가 있는 경우, 예를 들어, 소리로 경고하거나, 후사경 등에 시각적으로 표시하거나, 시트나 스티어링 휠에 떨림을 주어 운전자가 촉각적으로 인지하도록 할 수 있다.
자동 비상 제동(Advanced Emergency Braking System : AEBS) 장치(140)는 OBD2(On-Board Diagnostics-2) 장치(142)와 브레이크 엑츄에이터(Break Actuator : B/A)(144)를 포함하고, ADAS 장치(130)로부터 이벤트 예컨대, 전방 충돌, 차선 이탈, 보행자 인식 등이 감지되어 OBD2 장치(142)로 알림 명령이 전송되면, OBD2 장치(142)가 브레이크 엑츄에이터(B/A)(144)를 자동으로 작동되도록 제어한다. 이에 따라 OBD2 장치(142)는 AEBS 장치(140)와 관련된 긴급 제동 정보를 ADAS 장치(130)로 전송한다.
위성 항법(Global Navigation Satellite System : GNSS) 단말기(150)는 차량(100)에 설치되고, 일반 GPS 보다 고정밀의 정보 수집을 위하여 복수의 기지국과 연결되어 차량 운행에 따른 위치 정보를 실시간(예를 들어, 1초 단위 등)으로 획득한다. GNSS 단말기(150)는 차량 운행 중에 인접하는 기지국들 간의 위치 정보를 보정하도록 인접된 기지국들과의 채널 연결을 자동으로 전환한다. 예를 들어, GNSS 단말기(150)는 차량 운행 중에 해당 지역의 약 10Km 반경의 복수 개의 기지국들을 커버리지(coverage)하고, 이를 통해 실시간 양방향으로 위치 정보를 획득 및 보정한다. 또 GNSS 단말기(150)는 차량 운행 중에 초정밀 위치 기반으로 데이터를 수집하기 위하여, 무선 통신망, 이동 통신망 등을 통해 스마트 밴드(110) 및 사고 대응 서비스 서버(200)와 연결되고, 유선 인터페이스 등을 통해 DSM 장치(120)와 ADAS 장치(130)와 연결된다. 이를 위해 GNSS 단말기(150)는 도 2에 도시된 바와 같이, GNSS 안테나(154), GNSS 모듈(156), 통신 모듈(158), 메모리(159) 및 컨트롤러(152)를 포함한다.
GNSS 안테나(154)는 인공 위성을 통해 복수 개의 기지국들과 연결된다. GNSS 모듈(156)은 GNSS 안테나(154)로부터 차량 운행 중 실시간으로 고정밀도의 위치 정보를 획득하고, 획득된 위치 정보를 실시간 또는 주기적(예를 들어, 초 단위 등)으로 컨트롤러(152)로 전달한다. 여기서 컨트롤러(152)로 전달되는 위치 정보는 예컨대, 시간, 위치, 방위 등의 정보를 포함하는 NMEA(National Marine Electronics Association) 데이터로 전송된다. 통신 모듈(158)은 무선 통신망, 이동 통신망, 유선 인터페이스 등을 통해 스마트 밴드(110), DSM 장치(120), ADAS 장치(130)들과 연결되고, 무선 통신망, 이동 통신망, 전용 통신망 등의 통신망(4)을 통해 사고 대응 서비스 서버(200)와 연결된다. 메모리(159)는 컨트롤러(152)로부터 위치 정보 예컨대, NMEA(National Marine Electronics Association) 데이터를 받아서 임시로 저장하고 실시간으로 업데이트한다. 그리고 컨트롤러(152)는 GNSS 단말기(150)의 기능을 처리하도록 GNSS 모듈(156), 통신 모듈(158) 및 메모리(159)를 제어한다. 컨트롤러(152)는 GNSS 모듈(156)을 통해 획득된 위치 정보와, 통신 모듈(158)을 통해 수집된 운전자 상태 정보 및 차량 운행 정보를 통신망(4)을 통하여 사고 대응 서비스 서버(200)로 전송하도록 제어한다.
이러한 GNSS 단말기(150)는 차량(100)의 이동에 따른 위치 정보를 실시간으로 획득 및 보정하고, 차량(100)에 설치되고 운전자가 착용하는 각종 센서들로부터 실시간으로 운전자 상태 정보와 차량 운행 정보를 감지하여, 교통사고 예방 서비스를 제공하는 사고 대응 서비스 서버(200)로 감지된 정보를 전송한다.
다시 도 1을 참조하면, 사고 대응 서비스 서버(200)는 차량 운행에 따른 다양한 정보들을 수집 및 취합하여 실시간으로 차량 운행에 따른 이동형 IoT 기반의 주행 데이터를 생산하고, 이를 통해 졸음 운전 방지, 교통사고 예방, 이벤트 발생에 따른 알림 및 경보 발생 등 차량의 안전 운행과 관련된 표준화된 시스템을 구현한다. 즉, 사고 대응 서비스 서버(200)는 복수 개의 GNSS 단말기(150)들 각각으로부터 전송되는 위치 정보와 차량 운행에 따른 운전자의 상태, 차량 운행 상태 등의 다양한 정보를 수집 및 취합하고, 이를 분석 및 학습하여 운전자의 졸음 운전을 탐지하거나, 차량 운행 중에 다양한 이벤트 중 어느 하나가 발생되면, 사전에 운전자에게 알려주거나 경고하여 교통사고를 예방하기 위한 사고 대응 서비스를 제공한다.
이러한 사고 대응 서비스 서버(200)는 사고 대응 서비스와 관련된 다양한 데이터들을 관련 기관 예를 들어, 경찰청, 도로관리공단 및 지방자치단체 등의 사고 지원 시스템(300)에 제공하거나, 보험업체, 네비게이션 업체 등의 민간기업의 응용 시스템(400)에 제공하여, 다양한 용도로 활용하도록 할 수 있다.
구체적으로, 사고 대응 서비스 서버(200)는 도 3에 도시된 바와 같이, 서버(210)와 데이터베이스(250)를 포함한다. 서버(210)는 예를 들어, IoT 플랫폼을 이용하여 인터넷 기반으로 위치 정보를 보정하여 표준 RTCM(Radio Technical Committee for Maritime Service) 신호를 전송하며 사용자를 인증하기 위한 NTRIP 서버, 시간 동기화와 데이터 처리를 위한 인터페이스 서버, IoT 기기를 관리하기 위한 접속 서버 등을 포함하고, 데이터베이스(250)는 예를 들어, 차량 정보 DB, 센서 수집 DB, 사고 대응 DB 등을 포함한다.
이 실시예의 서버(210)는 제어부(212), 통신부(214), 위치 판별부(216), 정보 수집부(218), 분석부(220), 빅데이터 학습부(222), 위험도 산출부(224), 졸음 탐지부(226), 모니터링부(228) 및 알림부(230)를 포함한다.
제어부(212)는 복수 개의 차량(100)들 각각의 GNSS 단말기(150)와 연동해서 사고 대응 서비스 서버(200)의 제반 기능을 처리하도록 통신부(214), 위치 판별부(216), 정보 수집부(218), 분석부(220), 빅데이터 학습부(222), 위험도 산출부(224), 졸음 탐지부(226), 모니터링부(228), 알림부(230) 및 데이터베이스(250)들 각각을 제어한다.
통신부(214)는 통신망(4)에 연결되고, 차량(100)의 GNSS 단말기(150)로부터 위치 정보와 운전자 상태 정보, 차량 운행 정보 및 영상 등을 실시간으로 전송받는다. 통신부(214)는 이벤트 발생 시, 통신망(4)을 통해 운전자 단말기(500)로 알림 정보를 전송한다. 또 통신부(214)는 통신망(4)을 통해 사고 지원 시스템(300), 응용 시스템(400) 등으로 사고 대응 서비스와 관련된 다양한 정보들을 제공할 수 있다.
위치 판별부(216)는 GNSS 단말기(150)로부터 차량 운행 중에 실시간으로 전송된 위치 정보를 판별하여 차량(100)의 위치를 실시간으로 모니터링한다. 위치 판별부(216)는 차량 운행 중에 인접하는 기지국들에 대응하여 차량(100)의 위치 정보를 보정한다.
정보 수집부(218)는 복수 개의 차량(100)들 각각의 GNSS 단말기(150)로부터 전송된 위치 정보, 운전자 상태 정보 및 차량 운행 정보를 수집 및 취합하고, 이를 데이터베이스(250)에 저장하여 빅데이터를 구축한다. 정부 수집부(218)는 예를 들어, GNSS 정보, OBD2 정보, 스마트 밴드 정보, DSM 정보, ADAS 정보, 긴급 제동 정보, 운전자 정보, 차량 위치 정보 및 차량 운행 정보 등을 실시간 또는 주기적으로 반복 수집 및 취합한다. 정보 수집부(218)는 수집된 정보들을 데이터베이스(250)에 저장한다. 이 실시예에서 정보 수집부(218)는 GNSS 단말기(150)를 통해 차량 운행에 따른 다양한 정보들을 실시간 또는 주기적(예를 들어, 초당 1회 등)으로 수집한다.
분석부(220)는 정보 수집부(218)에 의해 수집된 정보들을 통계 분석 처리하여 운전자의 상태, 차량 운행 상태에 따른 이벤트 발생 여부를 판별한다. 분석부(220)는 DSM 장치(120)의 카메라 모듈(126)로부터 획득된 영상들을 분석 처리하여 졸음 운전 상태를 판별한다. 분석부(220)는 운전자 상태 및 차량 운행 상태에 따른 패턴을 분석하여 사고 발생 여부를 예측한다.
빅데이터 학습부(222)는 수집된 정보와 분석 처리 결과를 인공 지능(AI), 딥러닝 학습 등을 통해 운전자 상태, 차량 운행 상태, 사고 유형 예측, 도로 위험도 지수 산출 등을 판별할 수 있도록 반복 학습하여 사고 대응 서비스를 제공하기 위한 빅데이터를 구축한다.
위험도 산출부(224)는 위치 정보와 차량 운행 정보 등을 통해 차량 운행 중인 도로의 위험도 지수를 산출한다. 위험도 산출부(224)는 산출된 도로 위험도 지수를 운행 중인 차량(100)의 운전자에게 실시간으로 알려주도록 제공한다.
졸음 탐지부(226)는 운전자 상태 정보의 패턴 학습을 통해 감지된 운전자의 심박수, 가속도, 홍채 및 안면 등의 상태가 졸음 운전 상태인지를 판별한다. 졸음 탐지부(226)는 운전자가 졸음 운전 상태이면, 알림부(230)로 해당 정보를 전달한다.
모니터링부(228)는 운전자 상태 정보와 차량 운행 정보를 표시하여 실시간으로 모니터링한다. 모니터링부(228)는 전자 지도 상에 차량(100)의 위치를 표시하고, 차량(100)의 운행에 따른 도로 상황이나, 차량(100)의 위치에 따른 도로 위험도 지수를 적용하여 도로 상황을 실시간으로 안내할 수도 있다.
알림부(230)는 분석부(220)와 빅데이터 학습부(222)와 위험도 산출부(224) 및 졸음 탐지부(226)로부터 차량(100)의 운행 중에 졸음 운전 상태, 차량 운행 상태 및 도로 위험도 등에 따른 이벤트가 발생되면, 이를 알려주거나 경보하기 위하여 해당 이벤트에 대한 알림 정보를 생성하여 운전자 단말기(500)로 전송한다.
그리고 데이터베이스(250)는 제어부(212)의 제어를 받아서 사고 대응 서비스 서버(200)의 제반 기능을 처리하는 과정에 따라 수집 및 생성되는 다양한 정보들을 저장 및 관리한다. 이 실시예의 데이터베이스(250)는 운전자 정보(252), 차량 정보(254), 운전자 상태 정보(256), 차량 위치 정보(258), 차량 운행 정보(260), ADAS 정보(262), 긴급 제공 정보(264), 분석 정보(266), 대응 정보(268) 및 알림 정보(270)를 적어도 저장한다. 이러한 데이터베이스(250)는 사고 대응 서비스 서버(200)에 포함되어 있으나, 독립적으로 구비될 수도 있다.
상술한 사고 대응 서비스 서버(200)는 차량(100)들 각각의 GNSS 기반 위치 정보를 획득하고, 실시간으로 운행 중인 차량(100)의 운전자 상태와 차량 운행 상태에 대한 다양한 정보를 수집 및 취합하여 빅데이터를 구축하고, 이를 분석 및 반복 학습하여 교통사고 예방 등 사전에 사고 대응 서비스를 제공할 수 있다.
따라서 본 발명의 이동형 IoT 통합 기반 안전 운행 지원 시스템(2)은 공공 데이터로 다양한 응용에 적용할 수 있도록 개방하여 데이터의 품질과 표준 확보, 다양한 데이터 양과 포맷 지원 및 다양한 형태 및 용도로 제공이 가능하며, 지속적인 관리가 가능하다.
그리고 도 4는 본 발명에 따른 이동형 IoT 통합 기반 안전 운행 지원 시스템의 처리 수순을 도시한 흐름도이다.
도 4를 참조하면, 본 발명의 이동형 IoT 통합 기반 안전 운행 지원 시스템(2)은 단계 S600에서 차량(100)에 설치되거나 운전자에 창착한 각종 센서들 예컨대, 스마트 밴드(110)의 심박 센서(116)와 가속도 센서(118), DSM 장치(120)의 카메라 모듈(126), ADAS 장치(130)의 카메라 모듈(136)과 레이더 모듈(138) 등으로부터 차량 운행에 따른 운전자의 심박수, 가속도 등의 운전자 상태 정보와, 차량 위치 정보, ADAS 정보, 긴급 제동 정보 등의 차량 운행 정보를 포함하는 각종 정보들을 실시간으로 감지하고, 단계 S602에서 각종 감지 정보를 무선 통신망, 이동 통신망, 유선 인터페이스 등을 통해 GNSS 단말기(150)로 전송한다.
단계 S604에서 GNSS 단말기(150)는 차량 운행 중에 실시간으로 위치 정보를 획득하고, 단계 S606에서 차량으로부터 전송된 각종 정보들을 통신망(4)을 통하여 사고 대응 서비스 서버(200)로 전송한다.
단계 S608에서 사고 대응 서비스 서버(200)는 GNSS 단말기(150)로부터 전송된 위치 정보를 판별하고, 운행 중인 차량(100)의 위치 정보를 기지국들 간의 자동 채널을 전환하여 실시간으로 위치 정보를 보정한다.
단계 S610에서 사고 대응 서비스 서버(200)는 GNSS 단말기(150)로부터 전송된 각종 정보들을 수집 및 취합하고, 단계 S612에서 수집된 정보를 분석하여 이벤트 발생 여부를 판별한다.
단계 S614에서 사고 대응 서비스 서버(200)는 분석 결과, 이벤트가 발생되면, 단계 S616에서 이벤트 발생에 따른 알림 정보를 생성하여 운전자 단말기(500)로 알림 정보를 전송한다. 그러나 분석 결과, 이벤트가 발생되지 않으면, 단계 S620으로 진행한다. 단계 S618에서 운전자 단말기(500)는 사고 대응 서비스 서버(200)로부터 알림 정보를 전송받아서 운전자에게 안내하거나 경보한다. 이어서 단계 S620에서 사고 대응 서비스 서버(200)는 분석 결과를 토대로 수집된 정보들을 학습하여 사고 대응 서비스를 위한 빅데이터를 구축한다.
이상에서, 본 발명에 따른 이동형 IoT 통합 기반 안전 운행 지원 시스템의 구성 및 작용을 상세한 설명과 도면에 따라 도시하였지만, 이는 실시예를 들어 설명한 것에 불과하며, 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 다양한 변화 및 변경이 가능하다.
본 발명에 따른 이동형 IoT 통합 기반 안전 운행 지원 시스템은 실시간으로 운행 중인 차량의 운전자 상태와 차량 운행 상태에 대한 다양한 정보를 수집 및 취합하여 빅데이터를 구축하고, 이를 분석 및 반복 학습하여 사고 대응 서비스를 제공함으로써, 교통 안전 및 사고 예방에 적용할 수 있다.
또 본 발명에 따른 이동형 IoT 통합 기반 안전 운행 지원 시스템은 사고 대응 서비스와 관련된 다양한 데이터들을 다양한 용도로 활용할 수 있도록 제공함으로써, 경찰청, 도로관리공단 및 지방자치단체 등의 관련 기관의 사고 지원 시스템에 적용하거나, 보험업체, 네비게이션 업체, 공공 데이터 포털 등의 민간기업의 응용 시스템에 적용할 수 있다.

Claims (6)

  1. 이동형 IoT 통합 기반 안전 운행 지원 시스템에 있어서:
    운행 중인 차량의 운전자가 착용하고, 운전자의 심박수 정보와 움직임에 따른 가속도 정보를 감지하는 스마트 밴드;
    상기 차량의 내부에 설치되고, 제1 카메라 모듈을 구비하고 운전자의 홍채와 얼굴이 포함된 영상을 획득하여 운전자 상태 정보를 감지하는 운전자 상태 모니터링 장치;
    상기 차량에 설치되고, 제2 카메라 모듈을 구비하여 차량 운행 중에 주변 영상을 획득하고, 레이더 모듈을 구비하여 상기 차량의 주변 상황에 대한 객체의 유무와 객체와의 거리를 감지하고, 상기 차량의 운행 기록 자기 진단 장치로부터 차량 운행에 따른 차량 운행 정보를 실시간으로 전송받아서 운전자 지원 정보를 생성하고, 운전자 지원 정보에 이벤트가 발생되면 알림 명령을 상기 운행 기록 자기 진단 장치로 전송하는 운전자 지원 장치;
    상기 운행 기록 자기 진단 장치가 상기 운전자 지원 장치로부터 알림 명령을 받아서 브레이크 엑츄에이터를 작동시키면 긴급 제동 정보를 생성하여 상기 운전자 지원 장치로 전송하는 자동 비상 제동 장치;
    상기 차량에 설치되고 인공 위성을 통해 복수 개의 기지국들과 연결되어 상기 차량의 위치 정보를 실시간으로 획득하고, 상기 스마트 밴드와 상기 운전자 상태 모니터링 장치로부터 심박수 정보와 가속도 정보 및 운전자 상태 정보를 전송받고 상기 운전자 지원 장치로부터 운전자 지원 정보와 긴급 제동 정보를 전송받아서 상기 차량의 위치 정보와 운전자 상태 정보 및 차량 운행 정보 및 긴급 제동 정보를 전송하는 위성 항법 단말기; 및
    복수 개의 차량들 각각에 구비되는 상기 위성 항법 단말기로부터 전송된 상기 차량의 위치 정보와 운전자 상태 정보 및 차량 운행 정보를 수집 및 취합하고, 수집된 정보들을 분석 및 학습하여 운전자의 졸음 운전을 탐지하거나, 차량 운행 중에 이벤트가 발생되면, 운전자 단말기로 알림 정보를 전송하여 이벤트 발생 상황을 운전자에게 알려주거나 경고하여 교통사고를 예방하도록 사고 대응 서비스를 제공하는 사고 대응 서비스 서버를 포함하는 것을 특징으로 하는 이동형 IoT 통합 기반 안전 운행 지원 시스템.
  2. 청구항 1에 있어서,
    상기 위성 항법 단말기는,
    차량 운행 중에 인접하는 기지국들과의 채널 연결을 자동으로 전환하여 실시간으로 획득된 위치 정보를 보정하는 것을 특징으로 하는 이동형 IoT 통합 기반 안전 운행 지원 시스템.
  3. 청구항 1에 있어서,
    상기 사고 대응 서비스 서버는,
    수집된 정보들을 통계 분석 처리하여 운전자의 상태, 차량 운행 상태에 따른 이벤트 발생 여부를 판별하고, 상기 제1 카메라 모듈로부터 획득된 영상들을 분석 처리하여 운전자의 졸음 운전 상태를 판별하거나, 상기 운전자 상태 정보와 상기 차량 운행 정보의 패턴을 분석하여 사고 발생 여부를 예측하는 것을 특징으로 하는 이동형 IoT 통합 기반 안전 운행 지원 시스템.
  4. 청구항 3에 있어서,
    상기 사고 대응 서비스 서버는,
    수집된 정보들과 분석 처리 결과를 이용하여 운전자 상태, 차량 운행 상태, 사고 유형 예측 및 도로 위험도를 적어도 판별할 수 있도록 반복 학습하여 사고 대응 서비스를 제공하기 위한 빅데이터를 구축하는 것을 특징으로 하는 이동형 IoT 통합 기반 안전 운행 지원 시스템.
  5. 청구항 4에 있어서,
    상기 사고 대응 서비스 서버는,
    상기 차량의 위치 정보와 차량 운행 정보를 통해 차량 운행 중인 도로의 위험도 지수를 산출하고, 산출된 도로 위험도 지수를 운행 중인 상기 차량의 운전자에게 실시간으로 알려주도록 제공하는 것을 특징으로 하는 이동형 IoT 통합 기반 안전 운행 지원 시스템.
  6. 청구항 4에 있어서,
    상기 사고 대응 서비스 서버는,
    상기 운전자 상태 정보의 패턴 학습을 통해 졸음 운전 상태인지를 판별하고, 운전자가 졸음 운전 상태이면, 운행 중인 상기 차량의 운전자에게 실시간으로 알려주도록 제공하는 것을 특징으로 하는 이동형 IoT 통합 기반 안전 운행 지원 시스템.
PCT/KR2020/018185 2019-12-13 2020-12-11 이동형 iot 통합 기반 안전 운행 지원 시스템 및 그의 처리 방법 WO2021118304A1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US17/835,150 US20220297644A1 (en) 2019-12-13 2022-06-08 Safe driving support system based on mobile iot agent and method for processing thereof

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2019-0166388 2019-12-13
KR1020190166388A KR102150034B1 (ko) 2019-12-13 2019-12-13 이동형 IoT 통합 기반 안전 운행 지원 시스템 및 그의 처리 방법

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US17/835,150 Continuation US20220297644A1 (en) 2019-12-13 2022-06-08 Safe driving support system based on mobile iot agent and method for processing thereof

Publications (1)

Publication Number Publication Date
WO2021118304A1 true WO2021118304A1 (ko) 2021-06-17

Family

ID=72234044

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2020/018185 WO2021118304A1 (ko) 2019-12-13 2020-12-11 이동형 iot 통합 기반 안전 운행 지원 시스템 및 그의 처리 방법

Country Status (3)

Country Link
US (1) US20220297644A1 (ko)
KR (1) KR102150034B1 (ko)
WO (1) WO2021118304A1 (ko)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102150034B1 (ko) * 2019-12-13 2020-08-31 제주특별자치도 이동형 IoT 통합 기반 안전 운행 지원 시스템 및 그의 처리 방법
KR102370079B1 (ko) * 2020-09-01 2022-03-07 주식회사 인포카 운전 지원 방법 및 장치
US11763677B2 (en) * 2020-12-02 2023-09-19 International Business Machines Corporation Dynamically identifying a danger zone for a predicted traffic accident
KR102501818B1 (ko) * 2021-02-17 2023-02-21 주식회사 이에스피 IoT 기반의 차량용 통합 디지털 클러스터 시스템
CN113076999B (zh) * 2021-04-06 2024-01-30 宁波职业技术学院 基于人工智能信息数据采集方法
KR102643541B1 (ko) * 2022-03-03 2024-03-05 최종훈 인공지능을 이용한 졸음 운전 방지 시스템
CN117275180B (zh) * 2023-09-26 2024-04-05 南京智慧交通信息股份有限公司 一种智能公交车辆驾驶行为警示系统及其方法

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20130077074A (ko) * 2011-12-29 2013-07-09 경희대학교 산학협력단 Ｄｇｐｓ 기반의 차선 이탈 방지 시스템 및 그의 제어 방법
KR20150007536A (ko) * 2013-07-11 2015-01-21 현대자동차주식회사 운전자 보조 시스템의 경고 기준 설정 방법
KR20180023369A (ko) * 2016-08-25 2018-03-07 유교열 안전 운행을 위한 차량 관제 시스템 및 방법
KR20180105055A (ko) * 2017-03-14 2018-09-27 현대모비스 주식회사 차량 안전 지원 장치 및 방법
KR101984284B1 (ko) * 2017-11-28 2019-05-30 주식회사 제네시스랩 기계학습모델을 이용한 자동화된 운전자관리 시스템
KR102150034B1 (ko) * 2019-12-13 2020-08-31 제주특별자치도 이동형 IoT 통합 기반 안전 운행 지원 시스템 및 그의 처리 방법

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20150106986A (ko) 2014-03-12 2015-09-23 주식회사 아이디프라임 서버기반 졸음감지 시스템 및 그 방법
US9818239B2 (en) * 2015-08-20 2017-11-14 Zendrive, Inc. Method for smartphone-based accident detection
KR101705888B1 (ko) 2015-09-23 2017-02-13 주식회사 스마트비전 차량감지장치 및 단거리 전용 통신을 이용한 차량 과속 및 졸음 운전 경고 시스템 및 방법
KR20180086976A (ko) 2017-01-24 2018-08-01 콘텔라 주식회사 저전력 광대역 통신망을 이용하여 운전자에게 졸음 및 과속 방지 서비스를 제공하는 서비스 단말기 및 그 서비스 제공방법
TWM557690U (zh) * 2017-09-15 2018-04-01 Horn Enterprise Co Ltd 疲勞駕駛監測裝置
KR20190090742A (ko) 2019-07-11 2019-08-02 엘지전자 주식회사 운전자 졸음 방지 방법 및 운전자 졸음 방지 시스템

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20130077074A (ko) * 2011-12-29 2013-07-09 경희대학교 산학협력단 Ｄｇｐｓ 기반의 차선 이탈 방지 시스템 및 그의 제어 방법
KR20150007536A (ko) * 2013-07-11 2015-01-21 현대자동차주식회사 운전자 보조 시스템의 경고 기준 설정 방법
KR20180023369A (ko) * 2016-08-25 2018-03-07 유교열 안전 운행을 위한 차량 관제 시스템 및 방법
KR20180105055A (ko) * 2017-03-14 2018-09-27 현대모비스 주식회사 차량 안전 지원 장치 및 방법
KR101984284B1 (ko) * 2017-11-28 2019-05-30 주식회사 제네시스랩 기계학습모델을 이용한 자동화된 운전자관리 시스템
KR102150034B1 (ko) * 2019-12-13 2020-08-31 제주특별자치도 이동형 IoT 통합 기반 안전 운행 지원 시스템 및 그의 처리 방법

Also Published As

Publication number Publication date
US20220297644A1 (en) 2022-09-22
KR102150034B1 (ko) 2020-08-31

Similar Documents

Publication Publication Date Title
WO2021118304A1 (ko) 이동형 iot 통합 기반 안전 운행 지원 시스템 및 그의 처리 방법
US10332401B2 (en) Running vehicle alerting system and method
CN107608388B (zh) 自主警车
CN112885144B (zh) 一种施工作业区车辆撞入事件预警方法及系统
CN111524362B (zh) 基于多数据融合的车辆安全行驶保障系统与方法
CN112428952A (zh) 一种基于物联网的车辆安全预警系统
CN108877234A (zh) 四维实景交通仿真的车辆违规占道跟踪检测系统及方法
US20020105438A1 (en) Vehicular black box monitoring system
US9251707B2 (en) Highly accurate system for wrong-way driving detection and deterrence
KR20140055817A (ko) 텔레매틱스 시스템 및 상기 시스템에서의 텔레매틱스 서비스 제공 방법
CN111033517A (zh) 用于经改进的事故重建和解决方案的智能城市数据分析
CN109255957B (zh) 一种隧道内车辆行驶监测的方法及系统
CN113724531B (zh) 一种车联网环境下路口人车路协作预警系统及方法
CN111477011A (zh) 一种用于道路路口预警的检测装置及检测方法
KR20200068776A (ko) 자율주행 및 커넥티드 자동차용 통신 서비스 제공방법
CN108510749A (zh) 交通监测装置及方法
CN109144059A (zh) 一种具有智能预警救援功能的导航系统
CN116229728A (zh) 一种4d毫米波雷达与视频传感器阵列的道路交通监测系统
KR102149175B1 (ko) 데이터 기반의 사고 감지 및 긴급 대응 서비스 시스템 및 그 처리 방법
RU2540816C1 (ru) Система обеспечения безопасности движения транспортных средств и пешеходов на дорогах
EP3827419A2 (en) Monitoring, controlling and reporting driver actions by automatically following traffic rules
CN114419925B (zh) 一种车路协同的防碰预警系统和方法
CN115762174A (zh) 一种基于图像处理的智能交通系统
CN115662154A (zh) 一种基于视频监测的智能信号灯系统
CN113327086A (zh) 大数据行踪轨迹监管系统

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 20898067

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 20898067

Country of ref document: EP

Kind code of ref document: A1