KR20230022386A - Method and device for handling driver's coma, and readable storage medium - Google Patents

Method and device for handling driver's coma, and readable storage medium Download PDF

Info

Publication number
KR20230022386A
KR20230022386A KR1020210178929A KR20210178929A KR20230022386A KR 20230022386 A KR20230022386 A KR 20230022386A KR 1020210178929 A KR1020210178929 A KR 1020210178929A KR 20210178929 A KR20210178929 A KR 20210178929A KR 20230022386 A KR20230022386 A KR 20230022386A
Authority
KR
South Korea
Prior art keywords
driver
vehicle
coma
motion
information
Prior art date
Application number
KR1020210178929A
Other languages
Korean (ko)
Inventor
하이타오 쉬에
팅팅 우
리앙 장
딩동 반
리엔송 천
Original Assignee
에스에이아이씨-지엠-우링 오토모빌 컴퍼니 리미티드
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 에스에이아이씨-지엠-우링 오토모빌 컴퍼니 리미티드 filed Critical 에스에이아이씨-지엠-우링 오토모빌 컴퍼니 리미티드
Publication of KR20230022386A publication Critical patent/KR20230022386A/en

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q9/00Arrangement or adaptation of signal devices not provided for in one of main groups B60Q1/00 - B60Q7/00, e.g. haptic signalling
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/10Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to vehicle motion
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W60/00Drive control systems specially adapted for autonomous road vehicles
    • B60W60/001Planning or execution of driving tasks
    • B60W60/0015Planning or execution of driving tasks specially adapted for safety
    • B60W60/0016Planning or execution of driving tasks specially adapted for safety of the vehicle or its occupants
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W60/00Drive control systems specially adapted for autonomous road vehicles
    • B60W60/005Handover processes
    • B60W60/0051Handover processes from occupants to vehicle
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W60/00Drive control systems specially adapted for autonomous road vehicles
    • B60W60/007Emergency override
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B60W2040/0818Inactivity or incapacity of driver
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B60W2040/0872Driver physiology
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W2050/0001Details of the control system
    • B60W2050/0002Automatic control, details of type of controller or control system architecture
    • B60W2050/0004In digital systems, e.g. discrete-time systems involving sampling
    • B60W2050/0005Processor details or data handling, e.g. memory registers or chip architecture
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/143Alarm means
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2556/00Input parameters relating to data
    • B60W2556/45External transmission of data to or from the vehicle

Abstract

Disclosed are a method for handling a situation when a driver becomes comatose, a device for the same, and a readable storage medium. The method for handling a situation when a driver becomes comatose includes: a step of detecting movements of a driver in real time; a step of determining the driver's body condition as comatose when a dropped movement of a hand and/or the head of the driver is detected and when the time of the dropped movement exceeds a predetermined time; a step of changing a vehicle driving mode to an autonomous driving mode; and a step of uploading rescue request information on a remote monitoring platform. The method for handling a situation when a driver becomes comatose provides a method for emergency treatment to deal with an unexpected situation in which the driver becomes comatose. Moreover, the method for handling a situation when a driver becomes comatose can guarantee safety of the life of the driver and reduce traffic accidents which may occur due to the comatose driver.

Description

운전자 혼수 처리 방법, 장치 및 판독 가능한 저장 매체 {METHOD AND DEVICE FOR HANDLING DRIVER'S COMA, AND READABLE STORAGE MEDIUM}Driver coma processing method, device and readable storage medium

본 발명은 차량 안전 분야에 관한 것으로, 특히는 운전자 혼수 처리 방법, 장치 및 판독 가능한 저장 매체에 관한 것이다.The present invention relates to the field of vehicle safety, and more particularly to a method, apparatus and readable storage medium for handling driver lethargy.

사회가 진보하고 과학 기술이 발전함에 따라, 주행 도로 상에는 점점 더 많은 차량들이 나타나게 되었고, 이로 인해 더욱 더 많은 교통 사고가 초래되고 있으며, 그중에서 운전자가 주행 과정에 혼수에 처하는 뉴스도 계속하여 발생하고 있다. 운전자의 혼수는 쉽게 차량의 통제 불능을 초래하여, 교통 상황을 악화시키며, 심지어는 인명사고를 초래하게 되며, 운전자 혼수상태에 대한 실시간 모니터링 및 응급 처리 방법이 상대적으로 결핍하여, 운전자가 혼수에 처하는 돌발 상황인 경우 인명 안전에 대한 보장이 결핍하게 된다.As society progresses and science and technology develop, more and more vehicles appear on the driving roads, which leads to more and more traffic accidents, among which news that drivers fall into a coma while driving continues to occur. there is. The driver's coma easily causes loss of control of the vehicle, worsening the traffic situation, and even causing fatal accidents. In the case of an emergency situation, the guarantee of life safety is lacking.

본 발명의 주요한 목적으로서, 운전자가 혼수에 처하는 돌발 상황인 경우 인명 안전에 대한 보장이 결핍한 기술적 문제점을 해결하기 위한 운전자 혼수 처리 방법, 장치 및 판독 가능한 저장 매체를 제공하고자 한다.As a main object of the present invention, it is to provide a driver's coma treatment method, apparatus, and readable storage medium to solve the technical problem of lack of life safety guarantee in case of an unexpected situation in which the driver is in a coma.

상술한 목적을 실현하기 위하여, 본 발명은 운전자 혼수 처리 방법을 제공하며, 상기 운전자 혼수 처리 방법은, In order to realize the above object, the present invention provides a driver coma processing method, which includes:

운전자의 동작을 실시간으로 검출하는 단계; detecting a driver's motion in real time;

운전자의 머리 및/또는 손의 처짐 동작이 검출되고, 상기 처짐 동작의 지속 시간이 기설정된 시간보다 클 경우, 운전자의 신체 상태를 혼수 상태로 확정하는 단계; determining that the body state of the driver is in a coma state when the drooping motion of the driver's head and/or hands is detected and the duration of the drooping motion is longer than a preset time;

차량 주행 모드를 자율 운전 모드로 변화시키는 단계; 및 changing a vehicle driving mode to an autonomous driving mode; and

구조 요청 정보를 원격 모니터링 플랫폼에 업로드하는 단계;를 포함한다. Uploading the rescue request information to the remote monitoring platform; includes.

바람직하게, 상기 운전자의 동작을 실시간으로 검출하는 단계는, Preferably, detecting the driver's motion in real time comprises:

차량용 적외선 센서로 실시간으로 모니터링된 운전자의 신체 윤곽 정보를 획득하는 단계와, Acquiring body contour information of a driver monitored in real time by an in-vehicle infrared sensor;

상기 신체 윤곽 정보로부터 머리 영역 및 손 영역을 인식하고, 상기 차량용 적외선 센서로 실시간으로 모니터링된 상기 머리 영역 및 상기 손 영역의 이동 정보를 획득하는 단계와, Recognizing a head region and a hand region from the body contour information, and acquiring movement information of the head region and the hand region monitored in real time by the vehicle infrared sensor;

상기 이동 정보에 따라 운전자의 동작을 분석해내는 단계를 포함한다. and analyzing the driver's motion according to the movement information.

바람직하게, 상기 운전자의 머리 및/또는 손의 처짐 동작이 검출되고, 상기 처짐 동작의 지속 시간이 기설정된 시간보다 클 경우, 운전자의 신체 상태를 혼수 상태로 확정하는 단계는, Preferably, when the drooping motion of the driver's head and/or hands is detected, and the duration of the drooping motion is longer than a preset time, determining the driver's physical condition as a coma comprises:

운전자의 머리 및/또는 손의 처짐 동작이 검출되고, 상기 처짐 동작의 지속 시간이 제1 기설정된 시간보다 클 경우, 운전자를 깨우는 단계와, waking the driver when a drooping motion of the driver's head and/or hand is detected and a duration of the drooping motion is greater than a first preset time period;

운전자의 동작을 획득하고, 제2 기설정된 시간 내에 운전자의 머리 및/또는 손의 드는 동작이 검출되지 않을 경우, 운전자의 신체 상태를 혼수 상태로 확정하는 단계를 포함한다. acquiring the driver's motion, and determining that the driver's body state is in a coma state when no lifting motion of the driver's head and/or hand is detected within a second preset time period.

바람직하게, 상기 운전자를 깨우는 단계는, Preferably, the step of waking the driver,

차량용 음향 장치를 켜고, 상기 차량용 음향 장치가 기설정된 음향 볼륨으로 경고음을 재생하도록 제어하는 단계를 포함한다. Turning on the vehicle acoustic device and controlling the vehicle acoustic device to reproduce a warning sound at a preset sound volume.

바람직하게, 상기 차량 주행 모드를 자율 운전 모드로 변화시키는 단계 이후에, Preferably, after changing the vehicle driving mode to the autonomous driving mode,

도로 환경 정보를 검출하고, 상기 도로 환경 정보를 기반으로 차량을 제어하여 길 옆에 세우는 단계;를 더 포함한다. The method further includes detecting road environment information and controlling the vehicle based on the road environment information to park the vehicle on the side of the road.

바람직하게, 상기 차량 주행 모드를 자율 운전 모드로 변화시키는 단계 이후에, Preferably, after changing the vehicle driving mode to the autonomous driving mode,

모든 차량 조명을 켜서 기타 차량에게 경고를 전하는 단계;를 더 포함한다. and turning on all vehicle lights to give a warning to other vehicles.

바람직하게, 상기 구조 요청 정보를 원격 모니터링 플랫폼에 업로드하는 단계는, Preferably, the step of uploading the rescue request information to a remote monitoring platform,

운전자의 생체 특징 수집 장치에 연결하여 운전자의 생체 특징 정보를 획득하는 단계와, acquiring biometric feature information of the driver by connecting to a driver's biometric feature collection device;

차량용 단말기에 저장된 차량 정보를 획득하는 단계와, obtaining vehicle information stored in a vehicle terminal;

상기 생체 특징 정보, 상기 차량 정보 및 구조 요청 정보를 원격 모니터링 플랫폼에 업로드하는 단계를 포함한다. and uploading the biometric characteristic information, the vehicle information, and rescue request information to a remote monitoring platform.

바람직하게, 상기 운전자의 동작을 실시간으로 검출하는 단계 이전에, Preferably, before the step of detecting the driver's motion in real time,

차량의 주행 상태가 주행 중인지를 판단하는 단계; 및 determining whether the driving state of the vehicle is driving; and

차량의 주행 상태가 주행 중일 경우, 운전자의 동작을 실시간으로 검출하는 단계;를 더 포함한다. The method further includes detecting the driver's motion in real time when the driving state of the vehicle is driving.

또한, 상술한 목적을 실현하기 위하여, 본 발명은 운전자 혼수 처리 장치를 더 제공하며, 상기 운전자 혼수 처리 장치는 저장 장치, 프로세서, 및 상기 저장 장치 상에 저장되고 상기 프로세서에서 운행 가능한 컴퓨터 프로그램을 포함하되, 상기 컴퓨터 프로그램이 상기 프로세서에 의해 운전자 혼수 처리 방법을 수행할 경우, 상술한 운전자 혼수 처리 방법의 단계들을 실현한다. In addition, in order to realize the above object, the present invention further provides a driver's lethargy processing device, wherein the driver's lethargy processing device includes a storage device, a processor, and a computer program stored on the storage device and operable by the processor. However, when the computer program executes the driver's coma processing method by the processor, the steps of the driver's coma processing method described above are realized.

또한, 상술한 목적을 실현하기 위하여, 본 발명은 판독 가능한 저장 매체를 더 제공하며, 상기 판독 가능한 저장 매체는 컴퓨터 판독 가능한 저장 매체이고, 상기 컴퓨터 판독 가능한 저장 매체 상에는 운전자 혼수 처리 방법 프로그램이 저장되고, 상기 운전자 혼수 처리 방법 프로그램이 프로세서에 의해 수행될 경우, 상술한 운전자 혼수 처리 방법의 단계들을 실현한다.In addition, in order to realize the above object, the present invention further provides a readable storage medium, wherein the readable storage medium is a computer readable storage medium, and a driver coma processing method program is stored on the computer readable storage medium , When the driver coma processing method program is executed by a processor, it realizes the steps of the driver coma processing method described above.

본 발명의 실시예에서 제출하는 운전자 혼수 처리 방법은, 운전자의 동작을 실시간으로 검출함으로써, 주행 과정에서 운전자가 신체 상태에 이상이 있는지에 대해 전면적이고 시기적절한 모니터링을 진행하는 것을 실현하고, 운전자 머리 및/또는 손의 처짐 동작이 검출되면 운전자의 신체 상태를 혼수 상태로 확정함으로써, 주행 과정에서 운전자가 혼수에 처해 있는지에 대한 정확한 판단을 실현하고, 운전자의 이상 상태가 제때에 검출되고, 이러한 이상 상태가 혼수 상태로 정확하게 판단될 경우, 차량 주행 모드를 자율 운전 모드로 변화시킴으로써, 운전자 혼수 상태에서 차량의 정상적인 주행을 실현하여, 도로 상태의 양호한 소통을 보장하고, 교통 사고의 발생을 감소시켜, 해당 차량의 운전자 및 주변 기타 차량 상의 인원의 생명 안전을 보장하고, 구조 요청 정보를 원격 모니터링 플랫폼에 업로드함으로써, 원격 모니터링 플랫폼으로 운전자의 혼수 상태를 제때에 발견할 수 있고, 경찰에 신고하고, 도움을 요청하고, 일부의 차량 기능을 인수하는 등의 방식을 통해 응급 처리를 취하여, 운전자의 생명 안전을 보장할 수 있다.The driver's coma treatment method presented in the embodiment of the present invention realizes comprehensive and timely monitoring of the driver's physical condition during driving by detecting the driver's motion in real time, and the driver's head and/or determine the driver's body state to be in a coma when the drooping motion of the hand is detected, thereby realizing an accurate judgment as to whether the driver is in a coma during the driving process, and the driver's abnormal state is detected in time, and such an abnormal state is realized. When the state is accurately determined to be coma, the vehicle driving mode is changed to autonomous driving mode, thereby realizing normal driving of the vehicle in the driver's coma state, ensuring good communication in road conditions, reducing the occurrence of traffic accidents, To ensure the life safety of the driver of the vehicle and other personnel on other vehicles around, and upload the rescue request information to the remote monitoring platform, so that the remote monitoring platform can timely detect the driver's coma, report to the police, and provide assistance. It is possible to ensure the safety of the driver's life by taking emergency treatment through a method such as requesting a vehicle and taking over some vehicle functions.

도 1은 본 발명의 실시예의 방안에 해당되는 하드웨어 운행 환경의 장치의 구조 개략도이다.
도 2는 본 발명의 운전자 혼수 처리 방법의 일 실시예의 흐름 개략도이다.
도 3은 도 2 중의 단계(S10)의 세분화 흐름 개략도이다.
도 4는 도 2 중의 단계(S20)의 세분화 흐름 개략도이다.
본 발명의 목적의 실현, 기능 특점 및 장점은 실시예들을 결부하고 첨부된 도면을 참조하여 진일보로 설명하고자 한다.
1 is a structural schematic diagram of a device in a hardware operating environment corresponding to a scheme of an embodiment of the present invention;
2 is a flow schematic diagram of an embodiment of the method for handling driver coma of the present invention.
Fig. 3 is a schematic diagram of the segmentation flow in step S10 in Fig. 2;
Fig. 4 is a schematic diagram of the segmentation flow in step S20 in Fig. 2;
Realization of the object of the present invention, functional features and advantages will be further described with reference to the accompanying drawings in conjunction with embodiments.

여기에 설명된 구체적인 실시예는 단지 본 발명을 설명하기 위한 것일 뿐, 본 발명을 한정하기 위한 것이 아님을 이해하여야 한다. It should be understood that the specific embodiments described herein are merely for illustrative purposes and are not intended to limit the present invention.

본 발명의 실시예의 주요한 해결 방안은, 운전자의 동작을 실시간으로 검출하고, 이로써 운전자가 혼수인지를 판단하고, 운전자가 혼수일 경우, 차량 주행 모드를 자율 운전 모드로 변화시키고, 구조 요청 정보를 원격 모니터링 플랫폼에 업로드하는 것이다. The main solution in the embodiments of the present invention is to detect the driver's motion in real time, thereby determining whether the driver is in a coma, and if the driver is in a coma, change the vehicle driving mode to an autonomous driving mode, and transmit rescue request information remotely. Upload to the monitoring platform.

사회적 리듬이 빨라지고 일상 생활에서 사람들의 압력이 증가함으로 인해, 갑자기 혼수에 빠지는 경우가 점점 더 흔해지며, 운전자가 주행 과정에서 갑자기 혼수에 빠지게 될 경우, 첫째로 차량의 통제 불능을 초래하게 되어, 도로 교통 상황에 영향을 미칠 가능성이 있으며, 심지어는 차사고를 발생시켜, 인명 사상을 초래하게 되며, 둘째로 주변에 차량과 행인이 상대적으로 적을 경우, 차사고 및 인명 사상을 초래하지 않을 수는 있으나, 동시에 운전자의 혼수 상황이 사람들에게 발견되기 어려워, 제때에 경찰에 신고할 수 없게 된다. With the speeding up of social rhythm and the increasing pressure of people in daily life, cases of sudden falling into a coma are becoming more and more common. There is a possibility of affecting the traffic situation, and even causing a car accident, resulting in casualties, and secondly, if there are relatively few vehicles and pedestrians around, it may not cause a car accident and fatalities, but at the same time The driver's comatose state is difficult to find out from people, making it impossible to report to the police in time.

본 발명은, 운전자 갑자기 혼수에 빠지는 경우가 발생할 때 제때에 발견되어 제때에 응급 처리를 취하여, 해당 차량, 기타 차량 및 행인의 생명 안전을 더욱 잘 보장하기 위한 해결 방안을 제공한다. The present invention provides a solution to timely detect when a driver suddenly falls into a coma and take emergency treatment in time to better ensure the life safety of the vehicle, other vehicles and passers-by.

도 1에 도시된 바와 같이, 도 1은 본 발명의 실시예의 방안에 해당되는 하드웨어 운행 환경의 단말기의 구조 개략도이다. As shown in Fig. 1, Fig. 1 is a structural schematic diagram of a terminal in a hardware operating environment corresponding to a scheme of an embodiment of the present invention.

본 발명의 실시예의 단말기는 PC일 수 있으며, 스마트폰, 태블릿 PC, 휴대용 컴퓨터 등의 표시 기능을 구비하는 이동 가능한 단말기 장치일 수도 있다. The terminal of the embodiment of the present invention may be a PC, or may be a mobile terminal device having a display function such as a smart phone, a tablet PC, or a portable computer.

도 1에 도시된 바와 같이, 해당 단말기는, 프로세서(1001)(예컨대, CPU), 네트워크 인터페이스(1004), 사용자 인터페이스(1003), 저장 장치(1005), 통신 버스(1002)를 포함할 수 있다. 여기서, 통신 버스(1002)는 이러한 부재들 사이의 연결 통신을 실현하도록 구성된다. 사용자 인터페이스(1003)는 표시 스크린(Display), 키보드(Keyboard)와 같은 입력 유닛을 포함할 수 있으며, 선택적인 사용자 인터페이스(1003)는 표준 유선 인터페이스, 무선 인터페이스를 더 포함할 수 있다. 네트워크 인터페이스(1004)는 선택적으로 표준 유선 인터페이스, 무선 인터페이스(예컨대, WI-FI 인터페이스)를 포함할 수 있다. 저장 장치(1005)는 고속 RAM 저장 장치일 수 있으며, 안정적인 저장 장치(non-volatile memory), 예컨대 자기 디스크 저장 장치일 수도 있다. 저장 장치(1005)는 선택적으로 전술한 프로세서(1001)와 별도인 저장 장치일 수도 있다. As shown in FIG. 1 , a corresponding terminal may include a processor 1001 (eg, CPU), a network interface 1004, a user interface 1003, a storage device 1005, and a communication bus 1002. . Here, the communication bus 1002 is configured to realize connection communication between these members. The user interface 1003 may include an input unit such as a display screen and a keyboard, and the optional user interface 1003 may further include a standard wired interface and a wireless interface. The network interface 1004 may optionally include a standard wired interface, a wireless interface (eg, a WI-FI interface). The storage device 1005 may be a high-speed RAM storage device, or may be a non-volatile memory device, such as a magnetic disk storage device. The storage device 1005 may optionally be a storage device separate from the processor 1001 described above.

선택적으로, 단말기는, 카메라, RF(Radio Frequency) 회로, 센서, 음성 회로, WiFi 모듈 등을 더 포함할 수 있다. 여기서, 센서는 예컨대 광 센서, 모션 센서 및 기타 센서가 있다. 구체적으로, 광 센서는 환경 광 센서 및 접근 센서를 포함할 수 있으며, 여기서, 환경 광 센서는 환경 광선의 명암도에 따라 표시 스크린의 휘도를 조절할 수 있으며, 접근 센서는 이동 단말기가 귓가에 이동될 때 표시 스크린 및/또는 백라이트를 끌 수 있다. 모션 센서의 한가지로서, 중력 가속도 센서는 각 방향(일반적으로 3축임)에서의 가속도의 크기를 검출할 수 있으며, 정지될 경우 중력의 크기 및 방향을 검출할 수 있으며, 이동 단말기의 자세를 인식하는 애플리케이션(예컨대 수평 및 수직 화면 전환, 관련 게임, 자력계 자세 교정), 진동 인식 관련 기능(예컨대 만보기, 타악기) 등에 이용될 수 있으며, 물론, 이동 단말기는 자이로스코프, 기압계, 습도계, 온도계, 적외선 센서 등의 기타 센세를 더 구비할 수 있으며, 여기서 이에 대한 설명은 반복하지 않기로 한다. Optionally, the terminal may further include a camera, a radio frequency (RF) circuit, a sensor, an audio circuit, a WiFi module, and the like. Here, the sensor includes, for example, a light sensor, a motion sensor, and other sensors. Specifically, the light sensor may include an ambient light sensor and a proximity sensor, wherein the ambient light sensor may adjust the luminance of the display screen according to the intensity of ambient light, and the proximity sensor may adjust the brightness of the display screen when the mobile terminal is moved to the ear. The display screen and/or backlight can be turned off. As one of the motion sensors, the gravitational acceleration sensor can detect the magnitude of acceleration in each direction (generally three axes), detect the magnitude and direction of gravity when stopped, and recognize the posture of the mobile terminal. It can be used for applications (eg horizontal and vertical screen switching, related games, magnetometer posture correction), vibration recognition related functions (eg pedometer, percussion instrument), etc. Of course, mobile terminals include gyroscopes, barometers, hygrometers, thermometers, infrared sensors, etc. Other sensors of may be further provided, and the description thereof will not be repeated here.

도 1에 도시된 단말기 구조는 단말기에 대한 한정을 구성하지 않으며, 도시된 것보다 많거나 적은 부재를 포함하거나, 일부의 부재를 조합시키거나, 상이한 부재 배치를 구비할 수 있음을 당해 기술 분야의 기술자는 이해할 수 있을 것이다. The terminal structure shown in FIG. 1 does not constitute a limitation on the terminal, and may include more or less members than shown, combine some members, or have different member arrangements. Technicians will understand.

도 1에 도시된 바와 같이, 컴퓨터 저장 매체인 저장 장치(1005)에는 운영 체제, 네트워크 통신 모듈, 사용자 인터페이스 모듈 및 운전자 혼수 처리 프로그램이 포함될 수 있다. As shown in FIG. 1 , the storage device 1005, which is a computer storage medium, may include an operating system, a network communication module, a user interface module, and a driver coma processing program.

도 1에 도시된 단말기에 있어서, 네트워크 인터페이스(1004)는 주요하게 백엔드 서버에 연결하여 백엔드 서버와 데이터 통신을 진행하도록 구성되며, 사용자 인터페이스(1003)는 주요하게 클라이언트(사용자측)에 연결하여 클라이언트와 데이터 통신을 진행하도록 구성되며, 프로세서(1001)는 저장 장치(1005)에 저장된 운전자 혼수 처리 프로그램을 호출하여 아래와 같은 조작들을 수행하도록 구성될 수 있다. In the terminal shown in Fig. 1, the network interface 1004 is mainly configured to connect to the backend server to perform data communication with the backend server, and the user interface 1003 is mainly connected to the client (user side) to communicate with the client. It is configured to perform data communication, and the processor 1001 may be configured to call a driver comatose processing program stored in the storage device 1005 to perform the following operations.

운전자의 동작을 실시간으로 검출하고, Detect the driver's motion in real time,

운전자의 머리 및/또는 손의 처짐 동작이 검출되고, 상기 처짐 동작의 지속 시간이 기설정된 시간보다 클 경우, 운전자의 신체 상태를 혼수 상태로 확정하고, When the drooping motion of the driver's head and/or hands is detected and the duration of the drooping motion is longer than a preset time, the driver's physical condition is determined to be in a coma state;

차량 주행 모드를 자율 운전 모드로 변화시키고, Change the vehicle driving mode to autonomous driving mode,

구조 요청 정보를 원격 모니터링 플랫폼에 업로드한다. Upload rescue request information to the remote monitoring platform.

나아가, 프로세서(1001)는 저장 장치(1005)에 저장된 네트워크 조작 제어 애플리케이션을 호출하여 아래와 같은 조작들을 더 수행할 수 있다. Furthermore, the processor 1001 may call a network operation control application stored in the storage device 1005 to further perform the following operations.

상기 운전자의 동작을 실시간으로 검출하는 단계는, The step of detecting the driver's motion in real time,

차량용 적외선 센서로 실시간으로 모니터링된 운전자의 신체 윤곽 정보를 획득하는 단계와, Acquiring body contour information of a driver monitored in real time by an in-vehicle infrared sensor;

상기 신체 윤곽 정보로부터 머리 영역 및 손 영역을 인식하고, 상기 차량용 적외선 센서로 실시간으로 모니터링된 상기 머리 영역 및 상기 손 영역의 이동 정보를 획득하는 단계와, Recognizing a head region and a hand region from the body contour information, and acquiring movement information of the head region and the hand region monitored in real time by the vehicle infrared sensor;

상기 이동 정보에 따라 운전자의 동작을 분석해내는 단계를 포함한다. and analyzing the driver's motion according to the movement information.

나아가, 프로세서(1001)는 저장 장치(1005)에 저장된 네트워크 조작 제어 애플리케이션을 호출하여 아래와 같은 조작들을 더 수행할 수 있다. Furthermore, the processor 1001 may call a network operation control application stored in the storage device 1005 to further perform the following operations.

상기 운전자의 머리 및/또는 손의 처짐 동작이 검출되고, 상기 처짐 동작의 지속 시간이 기설정된 시간보다 클 경우, 운전자의 신체 상태를 혼수 상태로 확정하는 단계는, When the drooping motion of the driver's head and/or hand is detected, and the duration of the drooping motion is longer than a predetermined time, determining the driver's physical condition as a coma,

운전자의 머리 및/또는 손의 처짐 동작이 검출되고, 상기 처짐 동작의 지속 시간이 제1 기설정된 시간보다 클 경우, 운전자를 깨우는 단계와, waking the driver when a drooping motion of the driver's head and/or hand is detected and a duration of the drooping motion is greater than a first preset time period;

운전자의 동작을 획득하고, 제2 기설정된 시간 내에 운전자의 머리 및/또는 손의 드는 동작이 검출되지 않을 경우, 운전자의 신체 상태를 혼수 상태로 확정하는 단계를 포함한다. acquiring the driver's motion, and determining that the driver's body state is in a coma state when no lifting motion of the driver's head and/or hand is detected within a second preset time period.

나아가, 프로세서(1001)는 저장 장치(1005)에 저장된 네트워크 조작 제어 애플리케이션을 호출하여 아래와 같은 조작들을 더 수행할 수 있다. Furthermore, the processor 1001 may call a network operation control application stored in the storage device 1005 to further perform the following operations.

상기 운전자를 깨우는 단계는, Waking up the driver,

차량용 음향 장치를 켜고, 상기 차량용 음향 장치가 기설정된 음향 볼륨으로 경고음을 재생하도록 제어하는 단계를 포함한다. Turning on the vehicle acoustic device and controlling the vehicle acoustic device to reproduce a warning sound at a preset sound volume.

나아가, 프로세서(1001)는 저장 장치(1005)에 저장된 네트워크 조작 제어 애플리케이션을 호출하여 아래와 같은 조작들을 더 수행할 수 있다. Furthermore, the processor 1001 may call a network operation control application stored in the storage device 1005 to further perform the following operations.

상기 차량 주행 모드를 자율 운전 모드로 변화시키는 단계 이후에, After changing the vehicle driving mode to the autonomous driving mode,

도로 환경 정보를 검출하고, 상기 도로 환경 정보를 기반으로 차량을 제어하여 길 옆에 세우는 단계를 더 포함한다. The method further includes detecting road environment information, and controlling the vehicle based on the road environment information to park the vehicle on the side of the road.

나아가, 프로세서(1001)는 저장 장치(1005)에 저장된 네트워크 조작 제어 애플리케이션을 호출하여 아래와 같은 조작들을 더 수행할 수 있다. Furthermore, the processor 1001 may call a network operation control application stored in the storage device 1005 to further perform the following operations.

상기 차량 주행 모드를 자율 운전 모드로 변화시키는 단계 이후에, After changing the vehicle driving mode to the autonomous driving mode,

모든 차량 조명을 켜서 기타 차량에게 경고를 전하는 단계를 더 포함한다. and turning on all vehicle lights to give a warning to other vehicles.

나아가, 프로세서(1001)는 저장 장치(1005)에 저장된 네트워크 조작 제어 애플리케이션을 호출하여 아래와 같은 조작들을 더 수행할 수 있다. Furthermore, the processor 1001 may call a network operation control application stored in the storage device 1005 to further perform the following operations.

상기 구조 요청 정보를 원격 모니터링 플랫폼에 업로드하는 단계는, Uploading the rescue request information to the remote monitoring platform,

운전자의 생체 특징 수집 장치에 연결하여 운전자의 생체 특징 정보를 획득하는 단계와, acquiring biometric feature information of the driver by connecting to a driver's biometric feature collection device;

차량용 단말기에 저장된 차량 정보를 획득하는 단계와, obtaining vehicle information stored in a vehicle terminal;

상기 생체 특징 정보, 상기 차량 정보 및 구조 요청 정보를 원격 모니터링 플랫폼에 업로드하는 단계를 포함한다. and uploading the biometric characteristic information, the vehicle information, and rescue request information to a remote monitoring platform.

나아가, 프로세서(1001)는 저장 장치(1005)에 저장된 네트워크 조작 제어 애플리케이션을 호출하여 아래와 같은 조작들을 더 수행할 수 있다. Furthermore, the processor 1001 may call a network operation control application stored in the storage device 1005 to further perform the following operations.

상기 운전자의 동작을 실시간으로 검출하는 단계 이전에, Prior to the step of detecting the driver's motion in real time,

차량의 주행 상태가 주행 중인지를 판단하는 단계; 및 determining whether the driving state of the vehicle is driving; and

차량의 주행 상태가 주행 중일 경우, 운전자의 동작을 실시간으로 검출하는 단계;를 더 포함한다. The method further includes detecting the driver's motion in real time when the driving state of the vehicle is driving.

도 2를 참조하면, 본 발명은 운전자 혼수 처리 방법의 제1 실시예는 운전자 혼수 처리 방법을 제공하며, 상기 운전자 혼수 처리 방법은 아래와 같은 단계들을 포함한다. Referring to FIG. 2 , a first embodiment of a method for processing driver's coma of the present invention provides a method for processing driver's coma, which includes the following steps.

단계(S10)에서, 운전자의 동작을 실시간으로 검출하며, In step S10, the driver's motion is detected in real time;

본 실시예의 실행 본체는 차량이며, 방법에 해당되는 기기, 장치는 차량 상에 장착되거나 네트워크를 통해 연결, 물리적 연결되거나, 기타의 통신 방식을 통해 차량과 연결될 수 있으며, 본 실시예는 이에 대한 제한을 진행하지 않는다. The execution body of this embodiment is a vehicle, and devices and devices corresponding to the method may be mounted on the vehicle, connected or physically connected through a network, or connected to the vehicle through other communication methods, and this embodiment is limited thereto. do not proceed

실시간 검출은 운전자 바로 전방 또는 운전자 동작을 완전하게 기록할 수 있는 기타의 지점에 카메라를 장착하여 동영상 또는 사진을 촬영하고, 센서를 설치하고, 적외선 이미징 장치 등을 설치하는 방식 중의 하나 또는 다수의 조합 방식을 통해 운전자의 외형, 신체 부분의 이동, 방출하는 에너지 등의 하나 또는 다수의 정보를 수집하여, 수집된 데이터에 대해 분석을 진행하여 운전자의 동작을 획득할 수 있다. Real-time detection is one or a combination of several methods, such as mounting a camera directly in front of the driver or at another point that can completely record the driver's motion to take a video or photo, installing a sensor, installing an infrared imaging device, etc. Through this method, one or more pieces of information such as the driver's appearance, movement of body parts, and emitted energy may be collected, and the driver's motion may be obtained by analyzing the collected data.

상기 동작은 신체의 전반적인 동작, 예컨대 신체 정지, 신체 떨림 등일 수 있으며, 신체 각 부위 각각의 동작, 예컨대 머리, 손, 팔, 다리, 발, 몸통 등 부위의 들림, 처짐, 좌우 이동, 굽힘 등일 수도 있다. The motion may be an overall motion of the body, such as body stilling, body shaking, and the like, and may be a motion of each part of the body, such as lifting, sagging, left-right movement, bending, etc. of the head, hands, arms, legs, feet, and torso. there is.

운전자의 상이한 신체 부위의 동작을 검출하는 방법은, 이미지 특징, 위치, 포지셔닝 또는 센서 중의 하나 또는 다수의 방식을 통해 운전자의 신체 부위를 인식하고, 이어서 이미지 특징 매칭, 동작 인식 모델, 위치 변화 또는 에너지 변화 중의 하나 또는 다수의 방식에 따라 상이한 부위의 동작을 분석할 수 있으며, 동작이 경유할 것으로 예측되는 위치에 하나 또는 다수의 검출기(예컨대, 적외선 센서, 레이저 검출기, 광선 센서 등)를 설치하고, 검출된 파라미터(예컨대, 시간, 순서 등)를 통해 동작 및 동작이 발생되는 부위를 분석할 수도 있다. 예를 들어, 적외선 이미징 기술을 통해 운전자의 신체 윤곽 정보를 획득하고, 모델에 매칭시켜 신체의 상이한 부위를 확정하고, 상이한 부위의 이동 정보를 획득하여 모델에 매칭시켜 상이한 부위의 동작을 확정하며, 손에 착용된 압력 센서로 손 동작을 검출하며, 카메라를 통해 운전자의 신체 특징을 획득하고 특징 모델에 매칭시켜 신체 부위를 확정하고, 이어서 동영상 촬영 또는 연속적인 사진 촬영을 통해 동작 인식 모델에 매칭시켜 각 부위의 동작을 판단하며, 적외선으로 발에 상대적으로 많은 양의 열에너지가 방출되는 것을 검출하여 발이 움직이는 등을 판단하며, 핸들에 센서를 장착하여 운전자의 양손이 행들에서 이탈되는지를 모니터링하며, 목 양측, 허리 바깥쪽, 어깨 바깥쪽 등의 위치에 광선 세서를 장착하여 운전자가 혼수로 인해 머리가 처지거나 및/또는 손이 처지는지 등을 검출한다. A method of detecting motion of different body parts of a driver includes recognizing the driver's body part through one or more of image features, position, positioning or sensors, and then image feature matching, motion recognition model, position change or energy. It is possible to analyze the motion of different parts according to one or more of the changes, and install one or more detectors (eg, infrared sensors, laser detectors, light sensors, etc.) at a location where the motion is predicted to pass, Motions and regions where motions occur may be analyzed through detected parameters (eg, time, sequence, etc.). For example, the driver's body contour information is acquired through infrared imaging technology, matched to a model to determine different parts of the body, movement information of different parts is acquired and matched to a model to determine the motion of different parts, The hand motion is detected by the pressure sensor worn on the hand, the driver's body characteristics are obtained through the camera and matched to the feature model to determine the body part, and then the motion recognition model is matched through video recording or continuous photo taking. It determines the movement of each part, detects that a relatively large amount of thermal energy is emitted from the foot with infrared rays to determine whether the foot is moving, and monitors whether the driver's hands are separated from the rows by mounting a sensor on the handle, Light sensors are installed on both sides, on the outside of the waist, on the outside of the shoulder, etc. to detect whether the driver's head is drooping and/or hands are drooping due to coma.

상기 실시간 검출은 상시 온 상태를 항상 유지할 수 있으며, 스위치를 설치하여 수동으로 가동시키거나 또는 가동 조건(예컨대, 시동, 차량 속도가 기정치에 달하는 것, 운전석에 압력 센서를 설치하는 것 등)을 설치하여 유발 가동을 진행할 수 있다. The real-time detection can always maintain an always-on state, and can be operated manually by installing a switch or operating conditions (eg, starting, vehicle speed reaching a predetermined value, installing a pressure sensor in the driver's seat, etc.) It can be installed and triggered operation can proceed.

구체적으로, 상기 운전자의 동작을 실시간으로 검출하는 단계 이전에, 아래와 같은 단계들을 더 포함한다. Specifically, before the step of detecting the driver's motion in real time, the following steps are further included.

차량의 주행 상태가 주행 중인지를 판단하며, Determine whether the driving state of the vehicle is running,

차량 속도, 포지셔닝 변화 등의 정보 중의 하나 또는 다수에 따라 차량이 주행 중인지를 판단하고, 주차 시간, 시동을 멈추는 등의 정보 중의 하나 또는 다수에 따라 차량이 주행 중인 상태를 유지하는지를 판단할 수 있다. It is possible to determine whether the vehicle is driving according to one or more pieces of information such as vehicle speed and positioning change, and to determine whether the vehicle maintains a running state according to one or more pieces of information such as parking time and starting stop.

차량의 주행 상태가 주행 중일 경우, 운전자의 동작을 실시간으로 검출한다. When the driving state of the vehicle is running, the driver's motion is detected in real time.

차량의 주행 상태가 주행 중일 경우, 실시간 검출 장치를 가동시켜, 운전자의 동작을 실시간으로 검출하고, 차량의 주행 상태가 주행 중이 아닐 경우, 실시간 검출 장치를 끈다. 주행 중에서만 실시간 검출을 가동시킴으로써, 운전자 혼수 상태 판단의 정확성을 향상시켜, 운전자 혼수의 오판을 감소시킬 수 있으며, 에너지를 절약하고 장치의 수명을 연장시킬 수도 있다. When the driving state of the vehicle is running, the real-time detection device is activated to detect the driver's motion in real time, and when the driving state of the vehicle is not driving, the real-time detection device is turned off. By enabling real-time detection only while driving, the accuracy of determining the driver's lethargic state can be improved, thereby reducing erroneous determination of the driver's coma, saving energy and prolonging the life of the device.

단계(S20)에서, 운전자의 머리 및/또는 손의 처짐 동작이 검출되고, 상기 처짐 동작의 지속 시간이 기설정된 시간보다 클 경우, 운전자의 신체 상태를 혼수 상태로 확정하며, In step S20, the drooping motion of the driver's head and/or hands is detected, and if the duration of the drooping motion is longer than a predetermined time, the driver's physical condition is determined to be in a coma state;

운전자 머리 및/또는 손의 처짐 동작이 검출될 경우, 동작의 지속 시간을 판단하고, 상기 지속 시간은 하나의 동작의 시작으로부터 다음 동작의 시작 사이의 시간 길이이며, 따라서, 처짐 동작 지속 시간은 처짐 동작의 변위 시간 및 처짐 동작 변위가 완료된 후와 다음 동작이 시작하기 전의 정지 시간의 총합을 포함하고, 예를 들어, 손의 처짐 변위 시간은 1초이고, 처진 후 손이 움직이지 않고 10초 동안 정지한 후, 손이 수평으로 이동하면, 이때의 처짐 동작 지속 시간은 11초이다. When the drooping motion of the driver's head and/or hands is detected, determine the duration of the motion, the duration being the length of time between the start of one motion and the start of the next motion, and thus the drooping motion duration It includes the sum of the displacement time of the motion and the stop time after the deflection motion displacement is completed and before the next motion starts, for example, the deflection displacement time of the hand is 1 second, and the hand does not move after sagging for 10 seconds. After stopping, when the hand moves horizontally, the duration of the deflection operation at this time is 11 seconds.

상기 처짐 동작의 지속 시간이 기설정된 시간보다 클 경우, 운전자의 신체 상태를 혼수 상태로 확정한다. When the duration of the drooping operation is longer than a preset time, the driver's physical condition is determined to be in a coma state.

단계(S30)에서, 차량 주행 모드를 자율 운전 모드로 변화시키며, In step S30, the vehicle driving mode is changed to an autonomous driving mode,

운전자가 혼수 상태에 진입한 것으로 확정될 경우, 차량은 자율 운전 모드 전환 요청을 송신하고, 서버는 요청에 응답하여 차량 주행 상태를 변화시킨다. When it is determined that the driver has entered a coma state, the vehicle transmits a request for switching the autonomous driving mode, and the server changes the driving state of the vehicle in response to the request.

자율 운전 모드는, 차량이 안전하고 신뢰성 있게 도로에서 주행하도록, 차량용 센서를 이용하여 차량 주변 환경을 감지하고, 감지로 획득한 도로, 차량 위치 및 장애물 정보에 따라 차량의 조향 및 속도를 제어하는 것이다. In the autonomous driving mode, the vehicle's steering and speed are controlled according to the road, vehicle location, and obstacle information obtained by sensing the environment around the vehicle using the vehicle sensor and controlling the vehicle's steering and speed so that the vehicle can safely and reliably drive on the road. .

차량은 자율 운전 모드에서 차량에 연결된 내비게이션의 정보에 따라 차량을 목적지로 계속하여 제어하거나, 도로에서 계속하여 주행하거나, 길 옆에 세워지는 등을 진행할 수 있으며, 여기서 본 실시예는 이에 대한 제한을 진행하지 않는다. In the autonomous driving mode, the vehicle may continue to control the vehicle to the destination according to information from a navigation system connected to the vehicle, continue to drive on the road, or be parked on the side of the road. do not proceed

상기 자율 운전 모드는 안전 경고 조치를 더 포함할 수 있으며, 예컨대 차량 조명, 사이렌 등을 켜는 방식으로 주변 차량 및 행인에게 해당 차량이 자율 운전 모드에 처해 있음을 제시한다. The self-driving mode may further include a safety warning measure, for example, by turning on a vehicle light or a siren, to inform surrounding vehicles and passers-by that the vehicle is in the autonomous driving mode.

선택적으로, 상기 차량 주행 모드를 자율 운전 모드로 변화시키는 단계 이후에, 아래와 같은 단계를 더 포함한다. Optionally, after the step of changing the vehicle driving mode to the autonomous driving mode, the following steps are further included.

도로 환경 정보를 검출하고, 상기 도로 환경 정보를 기반으로 차량을 제어하여 길 옆에 세운다. Road environment information is detected, and based on the road environment information, the vehicle is controlled and parked next to the road.

카메라, 레이더, 센서, 내비게이션 등의 장치를 통해, 도로 환경 정보를 검출하고, 차량을 자율 운전 모드에서 제어하여, 도로 환경 정보에 따라 적당한 위치를 찾아 길 옆에 세우고, 구조를 기다리게 한다. Through devices such as cameras, radars, sensors, and navigation devices, road environment information is detected, and the vehicle is controlled in autonomous driving mode to find a suitable location according to the road environment information, park it on the side of the road, and wait for rescue.

상기 도로 환경 정보는 차량 주변의 도로 환경 상황이며, 예컨대, 교통 혼잡, 전방에 장애물 또는 행인이 있는지 여부, 현재 위치, 차선, 신호등 지역, 횡단보도 지역 등이다. The road environment information is road environment conditions around the vehicle, for example, traffic congestion, whether there are obstacles or pedestrians ahead, current location, lane, traffic light area, crosswalk area, and the like.

도로 환경 정보의 검출을 통해 길 옆에 차량을 세우기에 적합한 위치를 확정함으로써, 정상적인 교통 상황에 영향을 미치지 않고 교통 규칙을 위반하지 않도록 보장할 수 있을 뿐만 아니라, 차량과 행인을 보다 잘 피하여 교통 사고가 발생하는 것을 피면할 수도 있으며, 차량을 제어하여 제때에 길 옆에 세움으로써, 교통에 미치는 영향을 최소화시킬 수 있을 뿐만 아니라, 후속적인 구조자가 차량의 위치를 더 잘 파악하여 혼수에 빠진 운전자를 더욱 신속하게 찾아 구조를 실시할 수도 있다. Through the detection of road environment information, it is possible to determine a suitable location for parking a vehicle on the side of the road, thereby ensuring that the normal traffic situation is not affected and traffic rules are not violated, as well as better avoiding vehicles and pedestrians to avoid traffic accidents. Not only can the impact on traffic be minimized by controlling the vehicle to pull it over to the side of the road in time, but it also allows subsequent rescuers to better locate the vehicle and rescue the comatose driver. You can find and rescue more quickly.

선택적으로, 상기 차량 주행 모드를 자율 운전 모드로 변화시키는 단계 이후에, 아래와 같은 단계를 더 포함한다. Optionally, after the step of changing the vehicle driving mode to the autonomous driving mode, the following steps are further included.

모든 차량 조명을 켜서 기타 차량에게 경고를 전한다. All vehicle lights are turned on to warn other vehicles.

운전자가 혼수 상태에 진입한 것으로 확정될 경우, 차량이 자율 운전 모드로 변화된 후, 차량 속도, 방향 등의 차량의 제어와 정상적인 운전 사이에는 예컨대 차량 속도가 상대적으로 낮은 등의 일정한 차이가 존재하며, 이는 기타 차량의 정상적인 주행에 영향을 미칠 수 있으므로, 모든 차량 조명을 켜서 주변 차량에게 해당 차량에 이상 상황이 발생하고 차량 주행이 비정상 상태인 것을 제시할 수 있으며, 주변 차량은 경고 차량 조명을 보게된 후 제때에 주행 로선을 조절하여, 이상 차량과 적당한 차량 거리를 유지하거나 우회하여 주행할 수 있으며, 이로써 교통 사고를 효과적으로 피면하고, 차량 및 사람들의 생명 안전을 보장할 수 있다. 또한, 차량 조명을 켬으로써, 주변 차량 및 행인의 주의를 일으켜, 운전자의 혼수 상태가 발견될 확율을 대폭으로 향상시킬 수 있으며, 통신 이상 등의 기타의 이상 상황이 발생할 경우에도, 행인을 통해 경찰 신고에 도움을 받아 운전자의 생명 안전을 보다 잘 지킬 수도 있다. When it is determined that the driver has entered a coma state, after the vehicle changes to autonomous driving mode, there is a certain difference between normal driving and control of the vehicle, such as vehicle speed and direction, for example, the vehicle speed is relatively low, This may affect the normal driving of other vehicles, so all vehicle lights can be turned on to suggest to surrounding vehicles that the vehicle has an abnormal situation and the vehicle driving is abnormal, and the surrounding vehicles see the warning vehicle lights. After that, by adjusting the driving route in time, it is possible to maintain an appropriate vehicle distance from the abnormal vehicle or drive around, thereby effectively avoiding traffic accidents and ensuring the life safety of vehicles and people. In addition, by turning on the vehicle lights, it is possible to raise the attention of surrounding vehicles and passers-by, greatly improving the probability that the driver's comatose state is discovered, and even when other abnormal situations such as communication abnormality occur, police With the help of reporting, you can better protect the life safety of drivers.

단계(S40)에서, 구조 요청 정보를 원격 모니터링 플랫폼에 업로드한다. In step S40, rescue request information is uploaded to the remote monitoring platform.

상기 구조 요청 정보는 원격 모니터링 플랫폼에 이상 상황을 설명하고 구조를 요청하는 정보이며, 원격 모니터링 플랫폼의 직원이 제때에 경찰에 신고하고 구급차에 신고하여 구조를 진행하기에 편리하도록 구조 요청 문구, 상황 설명, 운전자 생체 특징, 차량 포지셔닝, 차량 정보 등의 하나 또는 다수를 포함한다. The rescue request information describes an abnormal situation to the remote monitoring platform and requests rescue, and the rescue request phrase and situation description are convenient for the remote monitoring platform staff to report to the police and report to the ambulance in time to proceed with the rescue. , driver biometric characteristics, vehicle positioning, vehicle information, and the like.

구체적으로, 상기 구조 요청 정보를 원격 모니터링 플랫폼에 업로드하는 단계는 아래와 같은 단계들을 포함한다. Specifically, the step of uploading the rescue request information to the remote monitoring platform includes the following steps.

운전자의 생체 특징 수집 장치에 연결하여 운전자의 생체 특징 정보를 획득하며, Connecting to the driver's biometric feature collection device to obtain the driver's biometric feature information;

운전자 착용한 스포츠 팔찌, 시계 등에 연결하여 생체 특징을 수집하는 장치를 통해 운전자의 맥박, 심박수 등의 생체 특징을 검출한다. The driver's biometric characteristics, such as pulse rate and heart rate, are detected through a device that collects biometric characteristics by connecting to a sports bracelet worn by the driver, a watch, etc.

차량용 단말기에 저장된 차량 정보를 획득하며, Obtain vehicle information stored in the vehicle terminal;

상기 차량 정보는 차량 모델 정보, 차량 식별 코드, 차량용 단말기 식별 코드, 차주인 정보, 차량 포지셔닝 등의 원격 모니터링 플랫폼으로 차량의 일부 기능을 인수하여 구조를 수행하기에 필요한 정보를 포함한다. The vehicle information includes vehicle model information, vehicle identification code, vehicle terminal identification code, vehicle owner information, and information necessary to perform rescue by taking over some functions of a vehicle with a remote monitoring platform such as vehicle positioning.

상기 생체 특징 정보, 상기 차량 정보 및 구조 요청 정보를 원격 모니터링 플랫폼에 업로드한다. The biometric characteristic information, the vehicle information, and the rescue request information are uploaded to the remote monitoring platform.

운전자의 생체 특징 정보를 획득함으로써, 혼수에 빠진 운전자의 신체 상태를 일차적으로 확인할 수 있으므로, 후속적인 구조 작업에 참고와 도움을 제공하며, 차량 정보를 획득함으로써, 이상 차량을 정확하게 확인할 수 있으므로, 아상 차량을 신속하게 찾아 구조를 실시하기에 도움되고, 구조 시간을 대폭으로 단축시켜, 운전자가 제때에 구조를 받을 수 있게 된다. By acquiring the driver's biometric information, the physical condition of the driver in a coma can be primarily confirmed, providing reference and assistance in subsequent rescue operations, and acquiring vehicle information to accurately identify the abnormal vehicle. It is helpful to find the vehicle quickly and carry out rescue, and the rescue time is greatly shortened, so that the driver can be rescued in time.

나아가, 도 3을 참조하면, 본 발명의 운전자 혼수 처리 방법의 일 실시예에 있어서, 운전자의 동작을 실시간으로 검출하는 단계는 아래와 같은 단계들을 더 포함한다. Furthermore, referring to FIG. 3 , in an embodiment of the driver coma processing method of the present invention, the step of detecting the driver's motion in real time further includes the following steps.

단계(S11)에서, 차량용 적외선 센서로 실시간으로 모니터링된 운전자의 신체 윤곽 정보를 획득하며, In step S11, the body contour information of the driver monitored in real time by the vehicle infrared sensor is obtained;

상기 차량용 적외선 센서는, 차량 상에 장착되거나 차량 상에 설치되고 차량과 통신 연결되어 적외선의 물리적 특성을 이용하여 측정을 진행하는 센서이다. The vehicle infrared sensor is a sensor that is mounted on or installed on a vehicle and communicates with the vehicle to perform measurement using physical characteristics of infrared rays.

적외선 센서로 실시간으로 모니터링된 운전자의 적외선 열에너지를 통해 적외선 이미지를 생성하고, 상기 적외선 이미지를 통해 운전자의 신체 윤곽 정보를 획득한다. An infrared image is generated through the driver's infrared thermal energy monitored in real time by the infrared sensor, and body contour information of the driver is obtained through the infrared image.

단계(S12)에서, 상기 신체 윤곽 정보로부터 머리 영역 및 손 영역을 인식하고, 상기 차량용 적외선 센서로 실시간으로 모니터링된 상기 머리 영역 및 상기 손 영역의 이동 정보를 획득하며, In step S12, a head region and a hand region are recognized from the body contour information, and movement information of the head region and the hand region monitored in real time by the vehicle infrared sensor is obtained;

사전에 저장된 이미지 특징, 이미지 모델 등과 매칭을 진행하는 방법 또는 부위와 신체의 위치 관계를 결부하여, 획득한 신체 윤곽 정보로부터 머리 영역 및/또는 손 영역을 인식하고, 예컨대, 팔과 다리의 윤곽 특징이 비교적 유사하나, 팔은 신체 상반부분에 위치하고 몸통의 측면에 연결되며, 양 다리는 신체 하반부분에 위치하고 몸통의 하부에 연결되는 것을 결부하여, 머리 영역 및/또는 손 영역의 이동을 실시간으로 모니터링 및 추적하고, 이동 정보를 획득할 수 있으며, 상기 이동 정보는 변위, 방향, 경로, 시간, 이미지, 동영상 등을 포함하나, 이에 한정되지 않는다. Recognize the head region and/or hand region from the acquired body contour information by associating a method of matching with previously stored image features, image models, etc., or a positional relationship between parts and the body, and, for example, contour features of arms and legs This is relatively similar, but the arms are located in the upper half of the body and connected to the side of the torso, and both legs are located in the lower half of the body and connected to the lower part of the torso, in conjunction with which the movement of the head region and/or the hand region is monitored in real time. and tracking, and may obtain movement information, wherein the movement information includes displacement, direction, path, time, image, video, etc., but is not limited thereto.

단계(S13)에서, 상기 이동 정보에 따라 운전자의 동작을 분석해낸다. In step S13, the driver's motion is analyzed according to the movement information.

동작이 포함하는 파라미터 정보를 사전에 설정하고, 상기 이동 정보가 임의의 하나의 동작의 파라미터 정보와 매칭될 경우, 상기 이동을 매칭되는 해당 동작으로 판단한다. Parameter information included in an action is set in advance, and when the movement information matches the parameter information of any one action, the movement is determined as a matching action.

예를 들어, 처짐 동작이 수직 하향 방향에서 10cm보다 큰 변위가 발생하고, 수평 방향에서의 변위에 대한 요구 사항은 없으며(변위가 있어도 되고 없어도 될 수 있음), 변위 시간이 1초보다 작은것으로 사전에 설정될 경우, 손이 수직 방향에서 변위 시간이 800 밀리초인 5cm의 변위가 검출될 경우, 처짐 동작으로 판정되지 않으며, 이는 주머니에서 물건을 꺼내거나 기어 시프팅일 수 있으며, 구체적인 동작의 판정은 사전에 설정된 동작의 파라미터 정보와 매칭을 진행하여야 하며, 손이 수직 방향에서 18cm의 변위가 발생하고, 수평 방향에서 3cm의 변위가 발생하고, 변위 시간이 600 밀리초인 것이 검출될 경우, 처짐 동작으로 판정한다. For example, the deflection motion produces a displacement greater than 10 cm in the vertical downward direction, there is no requirement for displacement in the horizontal direction (with or without displacement), and a displacement time of less than 1 second is pre-determined. When set to , when a displacement of 5 cm with a displacement time of 800 milliseconds in the vertical direction of the hand is detected, it is not determined as a sagging operation, which may be taking an object out of a pocket or gear shifting, and the determination of a specific operation is determined in advance. Matching should be performed with the parameter information of the operation set in , and if it is detected that the hand experiences a displacement of 18 cm in the vertical direction, a displacement of 3 cm in the horizontal direction, and a displacement time of 600 milliseconds, it is determined as a deflection operation. do.

본 실시예에 있어서, 적외선 이미징 기술을 통해 운전자의 손 및/또는 머리 영역의 동작에 대한 정확하고 실시간의 검출, 인식 및 분석을 실현함으로써, 운전자가 혼수에 빠지는 이상 경우를 제때에 발견할 수 있도록 확보하고, 이로써 제때에 대응 처리를 진행할 수 있으며, 적외선 센서는 광선의 영향을 받지 않으며, 야간, 주차장 또는 기타 조명이 약한 경우에서도 혼수에 빠지는 경우를 정확하게 검출할 수 있으므로, 혼수 경우에 대한 검출의 전면성을 확보하고, 운전자 및 영향을 받을 수 있는 다른 사람들의 생명 안전을 더욱 잘 보호하게 된다. In this embodiment, accurate and real-time detection, recognition and analysis of the driver's hand and/or head region motion is realized through infrared imaging technology, so that the driver can timely detect an abnormal case of falling into a coma. The infrared sensor is not affected by light rays and can accurately detect the case of falling into a coma even at night, in a parking lot or other low-light conditions, so the detection of coma cases is It will ensure omnipresence and better protect the life safety of drivers and others who may be affected.

나아가, 도 4를 참조하면, 본 발명의 운전자 혼수 처리 방법의 일 실시예에 있어서, 상기 상기 운전자의 머리 및/또는 손의 처짐 동작이 검출되고, 상기 처짐 동작의 지속 시간이 기설정된 시간보다 클 경우, 운전자의 신체 상태를 혼수 상태로 확정하는 단계는 아래와 같은 단계들을 포함한다. Furthermore, referring to FIG. 4 , in one embodiment of the driver lethargy treatment method of the present invention, the drooping motion of the driver's head and/or hand is detected, and the duration of the drooping motion is longer than a preset time. In this case, the step of determining the driver's physical state as a coma includes the following steps.

단계(S21)에서, 운전자의 머리 및/또는 손의 처짐 동작이 검출되고, 상기 처짐 동작의 지속 시간이 제1 기설정된 시간보다 클 경우, 운전자를 깨우며, In step S21, when the drooping motion of the driver's head and/or hand is detected, and the duration of the drooping motion is longer than a first preset time, waking the driver;

운전자의 머리 및/또는 손의 처짐 동작이 검출되고, 상기 처짐 동작의 지속 시간이 제1 기설정된 시간보다 클 경우, 운전자는 혼수 또는 수면에 처해 있을 수 있으나, 혼수와 수면의 차이점으로서, 수면일 경우 소리, 떨림 등과 같은 외부 자극을 통해 깨울 수 있다. When the drooping motion of the driver's head and/or hands is detected, and the duration of the drooping motion is greater than the first preset time, the driver may be in a coma or sleep, but as a difference between coma and sleep, sleep days In some cases, it can be awakened by external stimuli such as sound or vibration.

구체적으로, 상기 운전자를 깨우는 단계는, Specifically, the step of waking the driver,

차량용 음향 장치를 켜고, 상기 차량용 음향 장치가 기설정된 음향 볼륨으로 경고음을 재생하도록 제어하는 단계를 포함한다. Turning on the vehicle acoustic device and controlling the vehicle acoustic device to reproduce a warning sound at a preset sound volume.

기존의 차량에는 일반적으로 음향 장치 또는 외부 음향 장치가 장착되고, 차량용 음향 장치로 경고음을 재생하는 방식을 통해 운전자를 깨움으로써, 차량에 대해 하드웨어 개선을 진행할 필요가 없이 운전자에게 무해한 자극을 진행하여 깨우는 효과를 실현할 수 있으며, 이는 하나의 간단하고 효과적인 깨우기 방법이다. Existing vehicles are generally equipped with a sound device or an external sound device, and by waking the driver through a method of playing a warning sound with the vehicle sound device, harmless stimulation is performed to wake the driver without the need to improve the hardware of the vehicle. effect can be realized, which is one simple and effective wake-up method.

단계(S22)에서, 운전자의 동작을 획득하고, 제2 기설정된 시간 내에 운전자의 머리 및/또는 손의 드는 동작이 검출되지 않을 경우, 운전자의 신체 상태를 혼수 상태로 확정한다. In step S22, the driver's motion is acquired, and if the driver's head and/or hand lifting motion is not detected within a second preset time period, the driver's body state is determined to be in a coma state.

운전자를 깨운 후, 실시간으로 검출된 운전자의 동작을 획득하고, 운전자 머리 및/또는 손의 드는 동작이 검출되지 않을 경우, 즉, 원래 처졌던 머리 및/또는 손이 깨움을 통해 들려지지 않을 경우, 운전자가 깨여나지 않아 수면 상태가 아닌 것이므로, 혼수 상태로 확정하며, 운전자 머리 및/또는 손의 드는 동작이 검출될 경우, 운전자는 수면에 처하였었고, 이미 깨여났음을 설명한다. After waking the driver, the detected driver's motion is acquired in real time, and when the lifting motion of the driver's head and/or hand is not detected, that is, when the originally drooping head and/or hand is not lifted through awakening; Since the driver has not woken up and is not in a sleep state, the coma state is determined, and if the movement of the driver's head and/or hand is detected, it is explained that the driver has been asleep and has already been awakened.

본 실시예에 있어서, 운전자를 깨우는 방법을 통해 운전자가 수면인지 아니면 혼수인지를 판단함으로써, 운전자 수면 상태를 혼수 상태로 오판하여 소모되는 시간 및 자원을 감소시키고, 운전자가 주행 과정에 수면에 처해 있어도 아주 위험한 것이므로, 제때에 깨움으로써, 운전자 수면으로 인해 초래될 수 있는 교통 사고, 인명 사상 등을 효과적으로 피면하여, 재산과 생명 안전을 보호할 수 있다. In this embodiment, by determining whether the driver is sleeping or comatose through a method of waking the driver, time and resources consumed by misdiagnosing the driver's sleeping state as a coma are reduced, and even if the driver is asleep during the driving process, Because it is very dangerous, by waking up in time, traffic accidents, human casualties, etc. that may be caused by the driver's sleep can be effectively avoided, and property and life safety can be protected.

또한, 본 발명의 실시예는 운전자 혼수 처리 장치를 더 제출하며, 이의 특징으로서, 상기 운전자 혼수 처리 장치는 저장 장치, 프로세서, 및 상기 저장 장치 상에 저장되고 상기 프로세서에서 운행 가능한 컴퓨터 프로그램을 포함하되, 상기 컴퓨터 프로그램이 상기 프로세서에 의해 운전자 혼수 처리 방법을 수행할 경우, 상술한 바와 같은 운전자 혼수 처리 방법의 단계들을 실현한다. In addition, an embodiment of the present invention further provides a driver's coma processing device, as a feature of which, the driver's coma processing device includes a storage device, a processor, and a computer program stored on the storage device and operable by the processor; , When the computer program executes the driver's confusion processing method by the processor, the steps of the driver's confusion processing method as described above are realized.

또한, 본 발명의 실시예는 판독 가능한 저장 매체를 더 제출하며, 상기 판독 가능한 저장 매체는 컴퓨터 판독 가능한 저장 매체이고, 이의 특징으로서, 상기 컴퓨터 판독 가능한 저장 매체 상에는 운전자 혼수 처리 방법 프로그램이 저장되고, 상기 운전자 혼수 처리 방법 프로그램이 프로세서에 의해 수행될 경우, 상술한 바와 같은 운전자 혼수 처리 방법의 단계들을 실현한다. In addition, an embodiment of the present invention further provides a readable storage medium, wherein the readable storage medium is a computer readable storage medium, and as a feature thereof, a driver coma processing method program is stored on the computer readable storage medium, When the driver's coma processing method program is executed by a processor, it realizes the steps of the driver's coma processing method as described above.

본 명세서에서, 용어 "포함하다", "구비하다" 또는 임의의 기타의 변형은 비배타적인 포함을 포괄하고자 하며, 이로써 일련의 요소들을 포함하는 과정, 방법, 물품 또는 시스템은 이러한 요소들을 포함할 뿐만 아니라, 명확하게 나열되지 않은 기타의 요소들을 더 포함하며, 또는 이러한 과정, 방법, 물품 또는 시스템 고유의 요소들을 더 포함하는 것을 설명하고자 한다. 보다 많은 제한이 없을 경우, 표현 "하나의 ......를 포함한다"로 한정된 요소는, 해당 요소를 포함하는 과정, 방법, 물품 또는 시스템에 또 다른 동일한 요소가 더 존재하는 것을 배제하지 않는다. As used herein, the terms “comprise,” “comprise,” or any other variation are intended to encompass a non-exclusive inclusion, such that a process, method, article, or system that includes a set of elements will include those elements. In addition, it is intended to further include other elements not explicitly listed, or to further include elements inherent in such a process, method, article, or system. In the absence of further limitations, an element defined by the expression "comprises a ..." does not preclude the presence of other identical elements in the process, method, article or system containing the element. don't

상술한 본 발명의 실시예의 서열은 단지 설명을 위한 것일 뿐, 실시예의 우열을 대표하는 것이 아니다. The sequence of the above-described embodiments of the present invention is only for explanation, and does not represent superiority or inferiority of the embodiments.

이상의 실시예에 대한 설명을 통해, 상술한 실시예의 방법은 소프트웨어 및 필요한 범용의 하드웨어 플랫폼의 도움으로 실현될 수 있으며, 물론 하드웨어를 통해 실현될 수도 있으나, 많은 경우에 전자가 후자보다 나은 구현방식인 것을 당해 기술 분야의 기술자는 명확하게 이해할 수 있을 것이다. 이러한 이해를 기반으로, 본 발명의 기술적 방안은 본질적으로 또는 기존의 기술에 기여하는 부분은 소프트웨어 제품의 형태로 구현될 수 있으며, 해당 컴퓨터 소프트웨어 제품은 상술한 바와 같은 하나의 저장 매체(예컨대, ROM/RAM, 자기 디스크, CD) 상에 저장되며, 하나의 단말기 기기(휴대폰, 컴퓨터, 서버, 에어컨, 네트워크 장치 등일 수 있음)로 본 발명의 각 실시예의 방법을 수행하도록 하는 여러 명령어를 포함한다. Through the description of the above embodiments, the method of the above-described embodiment can be realized with the help of software and a necessary general-purpose hardware platform, and of course it can also be realized through hardware, but in many cases the former is a better implementation than the latter. Those skilled in the art will be able to clearly understand. Based on this understanding, the technical solution of the present invention may be implemented in the form of a software product essentially or contributing to the existing technology, and the computer software product may be implemented in one storage medium (eg, ROM) as described above. / RAM, magnetic disk, CD), and includes several instructions that allow one terminal device (which may be a mobile phone, computer, server, air conditioner, network device, etc.) to perform the method of each embodiment of the present invention.

이상의 설명은 본 발명의 바람직한 실시예일 뿐, 이로써 본 발명의 특허 범위를 제한하는 것이 아니며, 본 발명의 명세서 및 도면 내용을 이용하여 진행한 균등한 구조 또는 균등한 흐름 변환은 기타의 관련된 기술 분야에 직접적으로 또는 간접적으로 운용되며, 마찬가지로 모두 본 발명의 특허 보호 범위 내에 포함된다.The above description is only a preferred embodiment of the present invention, and thus does not limit the scope of the patent of the present invention, and the equivalent structure or equivalent flow conversion carried out using the specification and drawings of the present invention is applied to other related technical fields. Operated directly or indirectly, all of them likewise fall within the patent protection scope of the present invention.

Claims (10)

운전자 혼수 처리 방법에 있어서,
운전자의 동작을 실시간으로 검출하는 단계;
운전자의 머리 및/또는 손의 처짐 동작이 검출되고, 상기 처짐 동작의 지속 시간이 기설정된 시간보다 클 경우, 운전자의 신체 상태를 혼수 상태로 확정하는 단계;
차량 주행 모드를 자율 운전 모드로 변화시키는 단계; 및
구조 요청 정보를 원격 모니터링 플랫폼에 업로드하는 단계;를 포함하는 것을 특징으로 하는 운전자 혼수 처리 방법.
In the driver coma treatment method,
detecting a driver's motion in real time;
determining that the body state of the driver is in a coma state when the drooping motion of the driver's head and/or hands is detected and the duration of the drooping motion is longer than a preset time;
changing a vehicle driving mode to an autonomous driving mode; and
Uploading rescue request information to a remote monitoring platform; driver coma handling method comprising the.
제1항에 있어서,
상기 운전자의 동작을 실시간으로 검출하는 단계는,
차량용 적외선 센서로 실시간으로 모니터링된 운전자의 신체 윤곽 정보를 획득하는 단계와,
상기 신체 윤곽 정보로부터 머리 영역 및/또는 손 영역을 인식하고, 상기 차량용 적외선 센서로 실시간으로 모니터링된 상기 머리 영역 및 상기 손 영역의 이동 정보를 획득하는 단계와,
상기 이동 정보에 따라 운전자의 동작을 분석해내는 단계;를 포함하는 것을 특징으로 하는 운전자 혼수 처리 방법.
According to claim 1,
The step of detecting the driver's motion in real time,
Acquiring body contour information of a driver monitored in real time by an in-vehicle infrared sensor;
Recognizing a head region and/or a hand region from the body contour information, and acquiring movement information of the head region and the hand region monitored in real time by the vehicle infrared sensor;
A driver coma processing method comprising the step of analyzing the driver's motion according to the movement information.
제1항에 있어서,
상기 운전자의 머리 및/또는 손의 처짐 동작이 검출되고, 상기 처짐 동작의 지속 시간이 기설정된 시간보다 클 경우, 운전자의 신체 상태를 혼수 상태로 확정하는 단계는,
운전자의 머리 및/또는 손의 처짐 동작이 검출되고, 상기 처짐 동작의 지속 시간이 제1 기설정된 시간보다 클 경우, 운전자를 깨우는 단계와,
운전자의 동작을 획득하고, 제2 기설정된 시간 내에 운전자의 머리 및/또는 손의 드는 동작이 검출되지 않을 경우, 운전자의 신체 상태를 혼수 상태로 확정하는 단계;를 포함하는 것을 특징으로 하는 운전자 혼수 처리 방법.
According to claim 1,
When the drooping motion of the driver's head and/or hand is detected, and the duration of the drooping motion is longer than a predetermined time, determining the driver's physical condition as a coma,
waking the driver when a drooping motion of the driver's head and/or hand is detected and a duration of the drooping motion is greater than a first preset time period;
acquiring the driver's motion, and determining that the driver's physical state is coma if the driver's head and/or hand lifting motion is not detected within a second predetermined period of time; processing method.
제3항에 있어서,
상기 운전자를 깨우는 단계는,
차량용 음향 장치를 켜고, 상기 차량용 음향 장치가 기설정된 음향 볼륨으로 경고음을 재생하도록 제어하는 단계를 포함하는 것을 특징으로 하는 운전자 혼수 처리 방법.
According to claim 3,
Waking up the driver,
A method for treating driver lethargy, comprising turning on a vehicle sound device and controlling the vehicle sound device to reproduce a warning sound at a preset sound volume.
제1항에 있어서,
상기 차량 주행 모드를 자율 운전 모드로 변화시키는 단계 이후에,
도로 환경 정보를 검출하고, 상기 도로 환경 정보를 기반으로 차량을 제어하여 길 옆에 세우는 단계;를 더 포함하는 것을 특징으로 하는 운전자 혼수 처리 방법.
According to claim 1,
After changing the vehicle driving mode to the autonomous driving mode,
Detecting road environment information, and controlling the vehicle based on the road environment information to park the vehicle on the side of the road.
제1항에 있어서,
상기 차량 주행 모드를 자율 운전 모드로 변화시키는 단계 이후에,
모든 차량 조명을 켜서 기타 차량에게 경고를 전하는 단계;를 더 포함하는 것을 특징으로 하는 운전자 혼수 처리 방법.
According to claim 1,
After changing the vehicle driving mode to the autonomous driving mode,
Turning on all vehicle lights to give a warning to other vehicles.
제1항에 있어서,
상기 구조 요청 정보를 원격 모니터링 플랫폼에 업로드하는 단계는,
운전자의 생체 특징 수집 장치에 연결하여 운전자의 생체 특징 정보를 획득하는 단계와,
차량용 단말기에 저장된 차량 정보를 획득하는 단계와,
상기 생체 특징 정보, 상기 차량 정보 및 구조 요청 정보를 원격 모니터링 플랫폼에 업로드하는 단계를 포함하는 것을 특징으로 하는 운전자 혼수 처리 방법.
According to claim 1,
Uploading the rescue request information to the remote monitoring platform,
acquiring biometric feature information of the driver by connecting to a driver's biometric feature collection device;
obtaining vehicle information stored in a vehicle terminal;
and uploading the biometric characteristic information, the vehicle information and rescue request information to a remote monitoring platform.
제1항에 있어서,
상기 운전자의 동작을 실시간으로 검출하는 단계 이전에,
차량의 주행 상태가 주행 중인지를 판단하는 단계; 및
차량의 주행 상태가 주행 중일 경우, 운전자의 동작을 실시간으로 검출하는 단계;를 더 포함하는 것을 특징으로 하는 운전자 혼수 처리 방법.
According to claim 1,
Prior to the step of detecting the driver's motion in real time,
determining whether the driving state of the vehicle is driving; and
A method for treating driver coma, further comprising: detecting a driver's motion in real time when the driving state of the vehicle is driving.
운전자 혼수 처리 장치에 있어서,
저장 장치, 프로세서, 및 상기 저장 장치 상에 저장되고 상기 프로세서에서 운행 가능한 컴퓨터 프로그램을 포함하되,
상기 컴퓨터 프로그램이 상기 프로세서에 의해 운전자 혼수 처리 방법을 수행할 경우, 제1항 내지 제8항 중의 임의의 한 항의 운전자 혼수 처리 방법의 단계들을 실현하는 것을 특징으로 하는 운전자 혼수 처리 장치.
In the driver coma processing device,
A storage device, a processor, and a computer program stored on the storage device and executable by the processor,
When the computer program executes the method for processing driver's coma by the processor, the steps of the method for processing driver's coma according to any one of claims 1 to 8 are realized.
컴퓨터 판독 가능한 저장 매체인 판독 가능한 저장 매체에 있어서,
상기 컴퓨터 판독 가능한 저장 매체 상에는 운전자 혼수 처리 방법 프로그램이 저장되고,
상기 운전자 혼수 처리 방법 프로그램이 프로세서에 의해 수행될 경우, 제1항 내지 제8항 중의 임의의 한 항의 운전자 혼수 처리 방법의 단계들을 실현하는 것을 특징으로 하는 판독 가능한 저장 매체.
In the readable storage medium that is a computer readable storage medium,
A driver coma processing method program is stored on the computer readable storage medium,
A readable storage medium, characterized in that, when the program of the method for processing driver's coma is executed by a processor, it realizes the steps of the method for processing driver's coma according to any one of claims 1 to 8.
KR1020210178929A 2021-08-06 2021-12-14 Method and device for handling driver's coma, and readable storage medium KR20230022386A (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN202110902975.3A CN113561982A (en) 2021-08-06 2021-08-06 Driver coma processing method and device and readable storage medium
CN202110902975.3 2021-08-06

Publications (1)

Publication Number Publication Date
KR20230022386A true KR20230022386A (en) 2023-02-15

Family

ID=78170723

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020210178929A KR20230022386A (en) 2021-08-06 2021-12-14 Method and device for handling driver's coma, and readable storage medium

Country Status (4)

Country Link
JP (1) JP2023024237A (en)
KR (1) KR20230022386A (en)
CN (1) CN113561982A (en)
WO (1) WO2023010911A1 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113561982A (en) * 2021-08-06 2021-10-29 上汽通用五菱汽车股份有限公司 Driver coma processing method and device and readable storage medium

Family Cites Families (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7099774B2 (en) * 2003-01-21 2006-08-29 Byron King GPS based vehicle warning and location system
US8344894B2 (en) * 2009-04-02 2013-01-01 GM Global Technology Operations LLC Driver drowsy alert on full-windshield head-up display
CN103419716B (en) * 2012-05-14 2016-06-22 博世汽车部件(苏州)有限公司 Vehicle and the murky state warning system of driver thereof and method
CN102715912A (en) * 2012-05-25 2012-10-10 苏州市职业大学 Abnormal state detection device for driver
JP6372388B2 (en) * 2014-06-23 2018-08-15 株式会社デンソー Driver inoperability detection device
CN105818684A (en) * 2016-04-13 2016-08-03 乐视控股(北京)有限公司 Traffic safety control method, vehicle processor and vehicle
US20180093675A1 (en) * 2016-09-30 2018-04-05 Ford Global Technologies, Llc Wake Alarm For Vehicles With An Autonomous Mode
CN108122371A (en) * 2016-11-29 2018-06-05 比亚迪股份有限公司 Vehicle help-asking system, vehicle-mounted emergency device and vehicle
CN207266712U (en) * 2016-12-08 2018-04-24 合肥芯福传感器技术有限公司 For monitoring the vehicle-mounted monitor and alarm system of automobile driver physical condition
CN107103731A (en) * 2017-02-10 2017-08-29 北京羽扇智信息科技有限公司 A kind of traffic accident automatic alarm call-for-help device and method
WO2019030855A1 (en) * 2017-08-09 2019-02-14 三菱電機株式会社 Drive incapability state determination device and drive incapability state determination method
JP7024332B2 (en) * 2017-11-07 2022-02-24 トヨタ自動車株式会社 Driver monitor system
CN108230635A (en) * 2018-01-02 2018-06-29 深圳市威米通讯有限公司 Method for seeking help and device
JP7102850B2 (en) * 2018-03-28 2022-07-20 マツダ株式会社 Driver status judgment device
CN108438000A (en) * 2018-05-15 2018-08-24 北京兴科迪电子技术研究院 Driver's burst disease discovers device, method and system
CN209022757U (en) * 2018-10-29 2019-06-25 成都云科新能汽车技术有限公司 A kind of safe driving monitoring system
CN111369705A (en) * 2018-12-26 2020-07-03 上海擎感智能科技有限公司 SOS method, SOS system, SOS terminal and computer readable storage medium
JP2020135733A (en) * 2019-02-25 2020-08-31 ダイハツ工業株式会社 Driver abnormality detector
JP2021105958A (en) * 2019-12-27 2021-07-26 マツダ株式会社 Driver state estimation device and driver state estimation method
CN112455453A (en) * 2020-12-08 2021-03-09 安徽江淮汽车集团股份有限公司 Driver state detection method, driver state detection device and computer-readable storage medium
CN113128443A (en) * 2021-04-28 2021-07-16 珠海市魅族科技有限公司 Method and device for detecting driving state of driver, electronic equipment and medium
CN113561982A (en) * 2021-08-06 2021-10-29 上汽通用五菱汽车股份有限公司 Driver coma processing method and device and readable storage medium

Also Published As

Publication number Publication date
JP2023024237A (en) 2023-02-16
CN113561982A (en) 2021-10-29
WO2023010911A1 (en) 2023-02-09

Similar Documents

Publication Publication Date Title
KR102552285B1 (en) Portable electronic device and method thereof
Chang et al. Design and implementation of an intelligent assistive system for visually impaired people for aerial obstacle avoidance and fall detection
CN112660157B (en) Multifunctional remote monitoring and auxiliary driving system for barrier-free vehicle
CN101223561A (en) Sleep alert device
JP2019021229A (en) Vehicle control device and vehicle control method
WO2019196625A1 (en) Monitoring device, vehicle, monitoring method, and information processing device
WO2022077805A1 (en) Pedestrian-road interaction method, zebra crossing system, and zebra crossing system interaction method
US20210345069A1 (en) Personal monitoring system
CN109104689B (en) Safety warning method and terminal
KR20230022386A (en) Method and device for handling driver's coma, and readable storage medium
JP4436814B2 (en) Communication device and server
CN114078308A (en) Context aware security alerts
JP4517666B2 (en) Driving support device
CN209788727U (en) Embedded multifunctional crutch
JP2018136776A (en) Information processing method, information processing device and program
JP7397575B2 (en) Traffic light control device and traffic light control method
TWI629455B (en) Hazard detection system and hazard monitoring module using relative altitude
KR20110052453A (en) Method and apparatus for driver sleepiness detecting and warning
US20230150545A1 (en) Vehicle control device
JP7418683B2 (en) Evaluation device, evaluation method
JP7363378B2 (en) Driving support device, driving support method, and driving support program
KR102607430B1 (en) Bracelet apparatus for the elderly and disabled
JP7224958B2 (en) Notification device and notification method
CN111802761A (en) Intelligent walking stick
Gaikwad et al. Accident Detection and Prevention for Advanced Driver Assistance System

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E601 Decision to refuse application