KR101526408B1 - Apparatus for rescuing emergency situation using head-up display of vehicle - Google Patents

Apparatus for rescuing emergency situation using head-up display of vehicle Download PDF

Info

Publication number
KR101526408B1
KR101526408B1 KR1020130137864A KR20130137864A KR101526408B1 KR 101526408 B1 KR101526408 B1 KR 101526408B1 KR 1020130137864 A KR1020130137864 A KR 1020130137864A KR 20130137864 A KR20130137864 A KR 20130137864A KR 101526408 B1 KR101526408 B1 KR 101526408B1
Authority
KR
South Korea
Prior art keywords
emergency
driver
information
vehicle
image
Prior art date
Application number
KR1020130137864A
Other languages
Korean (ko)
Other versions
KR20150055460A (en
Inventor
유희안
이경노
Original Assignee
현대자동차 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 현대자동차 주식회사 filed Critical 현대자동차 주식회사
Priority to KR1020130137864A priority Critical patent/KR101526408B1/en
Publication of KR20150055460A publication Critical patent/KR20150055460A/en
Application granted granted Critical
Publication of KR101526408B1 publication Critical patent/KR101526408B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B25/00—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems
    • G08B25/01—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems characterised by the transmission medium
    • G08B25/10—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems characterised by the transmission medium using wireless transmission systems
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00—Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/02—Alarms for ensuring the safety of persons

Abstract

본 발명은 차량용 헤드 업 디스플레이를 이용한 긴급 상황 구조 장치에 관한 것이다. 본 발명은 긴급 지원 요청에 따라 차량 내의 운전자 및 동승자 각각의 영상을 촬상한 영상 정보로부터 운전자 및 동승자 각각의 제1 및 제2 얼굴 영역 영상을 검출하는 영상 검출부, 제1 및 제2 얼굴 영역 영상으로부터 운전자 및 동승자 각각의 제1 및 제2 시인 영역을 추출하고, 제1 시인 영역과 제2 시인 영역 간의 위치 차이에 대응하는 숨김 영역을 추출하는 영역 추출부, 및 긴급 구조 정보에 대응하는 가상 이미지를 생성하여 숨김 영역에 조사하는 영상 조사부를 포함한다.BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to an emergency situation structure device using a head-up display for a vehicle. According to the present invention, there is provided an emergency assistance system, comprising: an image detection unit for detecting first and second face region images of a driver and a passenger, respectively, from image information of an image of a driver and a passenger in the vehicle according to an emergency assistance request; A region extracting unit for extracting first and second visibility regions of the driver and the passenger respectively and extracting a hidden region corresponding to a position difference between the first and second visibility regions and a virtual image corresponding to the emergency structure information And irradiates the hidden area with an image inspection unit.

Description

차량용 헤드 업 디스플레이를 이용한 긴급 상황 구조 장치{APPARATUS FOR RESCUING EMERGENCY SITUATION USING HEAD-UP DISPLAY OF VEHICLE}BACKGROUND OF THE INVENTION 1. Field of the Invention [0001] The present invention relates to an emergency rescue apparatus using a head-

본 발명은 긴급 상황 구조 장치에 관한 것으로, 특히 차량용 헤드 업 디스플레이를 이용한 긴급 상황 구조 장치에 관한 기술이다.BACKGROUND OF THE INVENTION 1. Field of the Invention [0002] The present invention relates to an emergency situation structure device, and more particularly, to an emergency situation structure device using a head-up display for a vehicle.

차량의 운전 중 운전자의 안전을 제공하기 위하여 차량 주행 정보와 주변상황 정보 등을 효과적으로 운전자에게 전달해주는 매체로 개발중인 여러 시스템이 있는데, 그 중 헤드 업 디스플레이(HUD; Head-Up Display) 장치가 주요 관심사가 되고 있다. In order to provide safety of the driver during driving of the vehicle, various systems under development are being developed as a medium for effectively transmitting the vehicle driving information and the surrounding information to the driver. Among them, a head-up display (HUD) It is becoming a concern.

헤드 업 디스플레이 장치는 차량이나 항공기 주행 중 운전자의 정면, 즉 운전자의 주시야 선을 벗어나지 않는 범위 내에서 차량의 주행 정보나 네비게이션 정보 등과 같은 차량의 운행 정보를 제공하는 장치이다. 이러한 헤드 업 디스플레이 장치는 운전자 전방의 윈드실드(windshield) 글라스 부분에 차량의 운행 정보를 그래픽 이미지로 투영시킨다. The head-up display device is a device that provides driving information of the vehicle such as driving information and navigation information of the vehicle within a range that does not depart from the front of the driver, that is, the main visual line of the driver, during driving of the vehicle or the airplane. This head-up display device projects the driving information of the vehicle into a graphic image in a windshield glass portion in front of the driver.

한편, 차량은 일상 생활에 필요한 운송 수단이나, 반 사회적인 범죄에 이용되기도 한다. 예컨대, 차량을 이용하여 타인을 납치한다거나, 승객으로 가장하여 택시에 탑승한 후 운전자를 가해하는 등의 범죄 행위를 들 수 있다. 이와 같은 긴급 상황에서 차량 내부의 운전자가 외부에 긴급 상황 구조 요청을 하기 위한 수단이 필요하다. On the other hand, vehicles are often used for transportation in daily life, or for anti-social crimes. For example, a criminal act such as kidnapping another person by using a vehicle, impersonating a passenger, boarding a taxi, and then attacking a driver may be mentioned. In such an emergency situation, there is a need for a means for the driver in the vehicle to make an emergency call to the outside.

본 발명의 실시 예는 헤드 업 디스플레이를 이용하여 긴급 상황 하에서 외부에 구조를 요청할 수 있는 긴급 상황 구조 장치를 제공한다.An embodiment of the present invention provides an emergency situation structure device capable of requesting an external structure under an emergency situation using a head-up display.

본 발명의 실시 예에 따른 운전자의 주 시야선 상에 가상 이미지를 투영하는 차량용 헤드 업 디스플레이를 이용한 긴급 상황 구조 장치에 있어서, 긴급 지원 요청에 따라 차량 내의 상기 운전자 및 동승자 각각의 영상을 촬상한 영상 정보로부터 상기 운전자 및 상기 동승자 각각의 제1 및 제2 얼굴 영역 영상을 검출하는 영상 검출부; 상기 제1 및 제2 얼굴 영역 영상으로부터 상기 운전자 및 상기 동승자 각각의 제1 및 제2 시인 영역을 추출하고, 상기 제1 시인 영역과 상기 제2 시인 영역 간의 위치 차이에 대응하는 숨김 영역을 추출하는 영역 추출부; 및 긴급 구조 정보에 대응하는 상기 가상 이미지를 생성하여 상기 숨김 영역에 조사하는 영상 조사부를 포함한다.In accordance with an embodiment of the present invention, there is provided an emergency situation management system using a head-up display for a vehicle for projecting a virtual image on a main visual field of a driver, the apparatus comprising: An image detector for detecting the first and second face region images of the driver and the passenger from the information, respectively; Extracting first and second visibility regions of the driver and the passenger from the first and second face region images and extracting a hidden region corresponding to the position difference between the first and second visibility regions A region extracting unit; And an image inspection unit for generating the virtual image corresponding to the emergency structure information and irradiating the hidden area with the virtual image.

그리고, 상기 영역 추출부는 상기 제1 및 제2 얼굴 영역 영상으로부터 상기 운전자 및 동승자 각각의 눈 위치를 검출하고, 상기 운전자 및 동승자 각각의 눈 위치에 따라 상기 제1 및 제2 시인 영역을 추출한다. The region extracting unit detects an eye position of each of the driver and the passenger from the first and second face region images and extracts the first and second visible regions according to the eyes positions of the driver and the passenger.

또한, 상기 영역 추출부는 상기 제1 시인 영역으로부터 상기 제1 시인 영역과 상기 제2 시인 영역 간의 중첩 영역을 제외한 영역을 상기 숨김 영역으로 추출한다. 그리고, 상기 숨김 영역의 크기에 따라 상기 제1 시인 영역의 이동 위치를 설정하고, 상기 이동 위치에 따라 상기 운전자의 시트 위치를 조절하는 시트 위치 조절 정보를 생성하는 제어부를 더 포함한다. 여기서, 상기 제어부는 상기 중첩 영역의 크기를 감소시키는 방향으로 상기 이동 위치를 설정한다.The area extracting unit extracts, from the first visible area, an area excluding the overlap area between the first visible area and the second visible area into the hidden area. The controller may further include a controller for setting the movement position of the first visible region according to the size of the hidden area and generating seat position adjustment information for adjusting the seat position of the driver according to the movement position. Here, the controller sets the movement position in a direction to reduce the size of the overlap region.

그리고, 상기 시트 위치 조절 정보는 상기 시트의 좌측, 우측, 상측 및 하측 위치 중 적어도 어느 하나를 포함한다. 또한, 상기 제어부와 통신하여 상기 긴급 지원 요청을 전송하는 긴급 지원 버튼부를 더 포함한다.The seat position adjustment information includes at least one of left, right, upper and lower positions of the seat. The emergency support button unit may further include an emergency support button unit for communicating with the control unit to transmit the emergency support request.

그리고, 상기 긴급 지원 버튼부는 상기 차량 내의 핸들에 배치된 트립 버튼 및 리셋 버튼을 포함하고, 상기 트립 버튼 및 리셋 버튼이 동시에 조작되는 경우 상기 긴급 지원 요청을 생성한다.The emergency support button unit includes a trip button and a reset button disposed on a handle in the vehicle, and generates the emergency assistance request when the trip button and the reset button are operated simultaneously.

또한, 상기 긴급 지원 요청에 따라 상기 차량의 마이크 및 GPS(Global Positioning System)로부터 상기 차량 내부의 음성 정보 및 상기 차량의 위치 정보를 수신 받아 상기 차량 외부의 모젠 센터에 전송하는 AVN(Audio-Video-Navigation)을 더 포함한다.In addition, in response to the urgent support request, an audio-video-broadcasting (AVN) system receives audio information of the inside of the vehicle and position information of the vehicle from a microphone and GPS (Global Positioning System) Navigation).

그리고, 상기 모젠 센터는 상기 음성 정보 및 상기 위치 정보에 따라 상기 긴급 구조 정보를 생성하여 상기 AVN에 전송한다. 또한, 상기 영상 정보를 생성하는 영상 촬상부를 더 포함한다.The mobile center generates the emergency structure information according to the voice information and the location information, and transmits the emergency structure information to the AVN. The apparatus further includes an image pickup unit for generating the image information.

본 발명의 실시 예는 차량 내부의 긴급 구조 버튼을 통해 차량 외부에 긴급구조 요청을 할 수 있고, 동승자가 시인할 수 없는 운전자의 시야 영역에만 긴급 구조 정보에 대응하는 가상 이미지를 조사함으로써 납치 또는 가해 상황에서 동승자 모르게 외부의 도움을 받아 긴급 상황을 벗어날 수 있다.The embodiment of the present invention can make an emergency rescue request to the outside of the vehicle through the emergency rescue button in the vehicle and can detect a virtual image corresponding to the emergency rescue information only in the field of view of the driver who can not be seen by the passenger, You can escape from the emergency situation with help from outside without knowing your passengers.

도 1은 본 발명의 실시 예에 따른 긴급 상황 구조 시스템(1)을 도시한 도면.
도 2는 도 1에 도시된 헤드 업 디스플레이 장치(50)를 도시한 도면.
도 3은 운전자 및 동승자의 시인 영역을 설명하기 위해 도시한 도면.
도 4는 본 발명의 실시 예에 따른 긴급 상황 구조 방법을 도시한 순서도.1 shows an emergency situation structure system 1 according to an embodiment of the present invention.
Fig. 2 shows the head-up display device 50 shown in Fig. 1; Fig.
Fig. 3 is a view for explaining a view area of a driver and a passenger; Fig.
4 is a flowchart showing an emergency situation structure method according to an embodiment of the present invention;

아래에서는 첨부한 도면을 참고로 하여 본 발명의 실시 예에 대하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 상세히 설명한다. 그러나 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시 예에 한정되지 않는다. 도면에서 본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였다. 명세서 전체를 통하여 유사한 부분에 대해서는 유사한 도면 부호를 붙였다. Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings so that those skilled in the art can easily carry out the present invention. The present invention may, however, be embodied in many different forms and should not be construed as limited to the embodiments set forth herein. In order to clearly illustrate the present invention in the drawings, parts not related to the description are omitted. Like numbers refer to like parts throughout the specification.

명세서 전체에서, 어떤 부분이 다른 부분과 "연결"되어 있다고 할 때, 이는 "직접적으로 연결"되어 있는 경우뿐 아니라 그 중간에 다른 소자를 사이에 두고 "전기적으로 연결"되어 있는 경우도 포함한다. 또한, 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미한다. Throughout the specification, when a part is referred to as being "connected" to another part, it includes not only "directly connected" but also "electrically connected" with another part in between. Also, when a part is referred to as "including " an element, it does not exclude other elements unless specifically stated otherwise.

이하, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 본 발명을 용이하게 실시할 수 있는 실시 예를 첨부된 도면을 참조로 하여 상세히 설명한다.DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings.

도 1은 본 발명의 실시 예에 따른 긴급 상황 구조 시스템(1)을 도시한 도면이다.1 is a diagram showing an emergency situation management system 1 according to an embodiment of the present invention.

도 1을 참조하면, 본 발명의 실시 예에 다른 긴급 상황 구조 시스템(1)은 AVN(Audio-Video-Navigation)(10), 마이크(20), GPS(Global Positioning System) (30), 모젠 센터(40), 헤드 업 디스플레이 장치(50), 긴급 지원 버튼부(60) 및 영상 촬상부(70)를 포함한다.1, an emergency response system 1 according to an embodiment of the present invention includes an AVN (Audio-Video-Navigation) 10, a microphone 20, a GPS (Global Positioning System) 30, A head-up display device 50, an urgent support button unit 60, and a video image pickup unit 70.

여기서, AVN(10)은 헤드 업 디스플레이 장치(50)를 통해 긴급 지원 요청 수신 시 마이크(20) 및 GPS(30) 각각으로부터 음성 정보 및 차량의 위치 정보를 전달 받는다.Here, the AVN 10 receives voice information and vehicle location information from the microphone 20 and the GPS 30, respectively, upon reception of the emergency support request through the head-up display device 50.

AVN(10)은 모젠 센터(40)에 음성 정보 및 차량의 위치 정보를 포함하는 긴급 지원 요청을 송신한다. 그리고, AVN(10)은 모젠 센터(40)로부터 긴급 구조 정보를 수신 받고, 긴급 구조 정보를 헤드 업 디스플레이 장치(50)에 송신한다.The AVN 10 transmits an emergency assistance request including voice information and vehicle location information to the mobile center 40. [ Then, the AVN 10 receives the emergency structure information from the mobile center 40 and transmits the emergency structure information to the head-up display device 50.

마이크(20)는 차량 내부의 음성을 감지하여 음성 정보를 생성한다. GPS(30)는 적어도 3개 이상의 위성(미도시)으로부터 거리 정보 및 시간 정보를 산출하고, 거리 정보 및 시간 정보를 이용하여 차량의 현재 위치를 산출한다. GPS(30)는 산출된 차량의 현재 위치를 위치 정보로 생성한다.The microphone 20 detects voice inside the vehicle and generates voice information. The GPS 30 calculates distance information and time information from at least three or more satellites (not shown), and calculates the current position of the vehicle using the distance information and the time information. The GPS 30 generates the current position of the calculated vehicle as positional information.

모젠 센터(40)는 긴급 지원 요청 수신 시 음성 신호 및 차량의 위치 정보를 분석하여 차량 내부의 상황 및 위치를 추적하고, 운전자의 구조에 필요한 긴급 구조 정보를 생성한다. 그리고, 모젠 센터(40)는 생성된 긴급 구조 정보를 AVN(10)에 송신한다. 여기서, 모젠 센터(40)는 긴급 지원 요청에 대응하여 경찰에 구조 요청을 할 수 있다.The mobile center 40 analyzes the voice signal and the location information of the vehicle at the time of receiving the emergency support request, tracks the situation and position in the vehicle, and generates the emergency structure information necessary for the structure of the driver. Then, the migen center 40 transmits the generated emergency structure information to the AVN 10. Here, the mozen center 40 can request a rescue to the police in response to the emergency assistance request.

헤드 업 디스플레이 장치(50)는 긴급 지원 버튼부(60)로부터 긴급 지원 요청 수신 시 영상 촬상부(70)로부터 운전자 및 동승자 각각의 영상 정보를 수신 받는다. The head-up display device 50 receives the image information of the driver and the passenger from the image pickup section 70 upon receiving the emergency support request from the emergency support button section 60. [

그리고, 헤드 업 디스플레이 장치(50)는 운전자 및 동승자 각각의 영상 정보를 분석하여 운전자의 시트 위치를 조절하고, 긴급 구조 정보에 따라 가상 이미지를 생성하여 운전자의 시인 영역과 동승자의 시인 영역이 중첩되는 영역을 제외한 영상 조사 영역에 조사한다. The head-up display device 50 analyzes the image information of each of the driver and the passenger to adjust the seat position of the driver, generates a virtual image according to the emergency structure information, and overlaps the visibility area of the driver and the visually- And irradiates the image irradiation area excluding the area.

여기서, 헤드 업 디스플레이 장치(50)는 운전자의 주 시야선 상에 가상 이미지를 투영하는 장치로서, 가상 이미지를 생성하여 조사하는 프로젝터 모듈(미도시), 프로젝터 모듈로부터 조사된 가상 이미지를 차량의 윈드실드 글라스 방향으로 반사하는 비구면 또는 구면 미러(미도시)를 포함할 수 있다.Here, the head-up display device 50 is a device for projecting a virtual image on a driver's main visual line, and includes a projector module (not shown) for generating and illuminating a virtual image, a virtual image irradiated from the projector module, And an aspherical surface or a spherical mirror (not shown) that reflects in the shield glass direction.

본 발명의 실시 예에 따른 헤드 업 디스플레이 장치(50)는 긴급 지원 요청에 따라 미러의 각도를 조절하여 동승자의 시인 영역을 제외한 운전자의 시인 영역에만 가상 이미지를 조사시킨다.The head-up display device 50 according to the embodiment of the present invention adjusts the angle of the mirror according to the urgent support request, and irradiates the virtual image only to the driver's view area except for the passenger's visibility area.

긴급 지원 버튼부(60)는 운전자에 의해 조작되어 헤드 업 디스플레이 장치(50)에 긴급 지원 요청을 송신한다. 여기서, 긴급 지원 버튼부(60)는 스티어링 휠(미도시)에 배치된 트립(trip) 버튼(미도시) 및 리셋(reset) 버튼(미도시)이 동시에 조작되는 경우 긴급 지원 요청을 생성할 수 있다.The urgent support button unit 60 is operated by the driver to transmit an urgent support request to the head-up display device 50. [ Here, the emergency assistance button unit 60 can generate an emergency assistance request when a trip button (not shown) and a reset button (not shown) disposed in a steering wheel have.

영상 촬상부(70)는 운전자 및 동승자 각각의 영상을 촬상하여 영상 정보를 생성한다. 영상 촬상부(70)는 광학 카메라 등을 포함할 수 있다. The image pickup section (70) picks up an image of each of the driver and the passenger and generates image information. The image pickup section 70 may include an optical camera or the like.

도 2는 도 1에 도시된 헤드 업 디스플레이 장치(50)를 도시한 도면이고, 도 3은 운전자 및 동승자의 시인 영역을 설명하기 위해 도시한 도면이다.Fig. 2 is a view showing the head-up display device 50 shown in Fig. 1, and Fig. 3 is a view for explaining a view area of a driver and a passenger.

도 2를 참조하면, 본 발명의 실시 예에 따른 헤드 업 디스플레이 장치(50)는 영상 검출부(501), 영역 추출부(503), 시트 위치 조절부(505), 영상 조사부(507), 제어부(509) 및 통신부(511)를 포함한다.2, a head-up display device 50 according to an embodiment of the present invention includes an image detecting unit 501, a region extracting unit 503, a sheet position adjusting unit 505, an image irradiating unit 507, 509 and a communication unit 511. [

영상 검출부(501)는 운전자 및 동승자 각각의 영상 정보를 분석하여 운전자 및 동승자 각각의 얼굴 영역의 영상을 검출한다.The image detecting unit 501 analyzes the image information of each of the driver and the passenger, and detects an image of the face region of each of the driver and the passenger.

영역 추출부(503)는 영상 검출부(501)로부터 운전자 및 동승자 각각의 얼굴 영역 영상을 수신받고, 얼굴 영역 영상으로부터 운전자 및 동승자 각각의 눈 위치를 검출한다. 영역 추출부(503)는 운전자 및 동승자 각각의 눈 위치에 대응하는 시인 영역을 추출한다.The region extracting unit 503 receives the face region images of the driver and the passenger from the image detecting unit 501 and detects the eye positions of the driver and the passenger from the face region images. The region extracting unit 503 extracts a visible region corresponding to the eye position of each of the driver and the passenger.

예컨대, 동승자가 차량의 뒷자석에 탑승한 상황인 경우 도 3에 도시된 바와 같이, 차량의 윈드쉴드(미도시)에 대응하는 영역(A) 중 운전자의 눈 위치에 대응하는 시인 영역(B) 및 동승자의 눈 위치에 대응하는 시인 영역(C)이 추출된다.For example, as shown in FIG. 3, when the passenger is on the rear seat of the vehicle, the visibility area B corresponding to the driver's eye position in the area A corresponding to the windshield (not shown) And the view area C corresponding to the eye position of the passenger are extracted.

그리고, 영역 추출부(503)는 운전자의 시인 영역(B)과 동승자의 시인 영역(C)이 중첩되는 영역을 제외한 영역(D, 이하 숨김 영역이라 함)을 운전자만 긴급 구조 정보를 시인할 수 있는 숨김 영역으로 추출한다. The area extracting unit 503 can recognize the emergency structure information only in the area D (hereinafter referred to as a hidden area) except for the area where the driver's visibility area B and the passenger visibility area C overlap each other Extract to hidden area.

시트 위치 조절부(505)는 시트 위치 조절 정보에 따라 운전자의 시트 위치를 조절한다. 여기서, 시트 위치 조절 정보는 시트의 상/하/좌/우 위치를 포함한다. The seat position adjustment unit 505 adjusts the seat position of the driver according to the seat position adjustment information. Here, the sheet position adjustment information includes an upper / lower / left / right position of the seat.

영상 조사부(507)는 긴급 구조 정보에 따라 가상 이미지를 생성하고, 가상 이미지를 영역 추출부(503)를 통해 추출된 숨김 영역에 조사한다. The image inspection unit 507 generates a virtual image according to the emergency structure information, and irradiates the hidden image extracted through the area extraction unit 503 to the hidden image.

제어부(509)는 긴급 지원 버튼부(60)로부터 긴급 지원 요청 수신 시 AVN(10)에 송신하고, 영상 촬상부(70)로부터 운전자 및 동승자 각각의 영상 정보를 전달받는다. 제어부(509)는 운전자 및 동승자 각각의 영상 정보를 영상 검출부(501)에 전달한다. The control unit 509 transmits the emergency information to the AVN 10 upon receiving the emergency support request from the emergency support button unit 60 and receives the image information of the driver and the passenger from the image sensing unit 70. The control unit 509 transmits the image information of the driver and the passenger to the image detector 501.

그리고, 제어부(509)는 영역 추출부(503)로부터 숨김 영역(D)에 대한 정보를 수신받고, 숨김 영역(D)의 크기에 따라 운전석의 시트 위치를 제어하는 시트 위치 조절 정보를 생성한다.The controller 509 receives the information about the hidden area D from the area extractor 503 and generates seat position adjustment information for controlling the seat position of the driver's seat in accordance with the size of the hidden area D.

여기서, 제어부(509)는 숨김 영역(D)의 크기를 증가시키기 위해 운전자의 시인 영역(B)의 이동 위치(B')를 설정하고, 이동 위치(B')에 대응하는 시트 위치 조절 정보를 생성할 수 있다. 즉, 시인 영역이 B' 위치로 이동함에 따라 숨김 영역(D)의 크기가 x 및 y만큼 증가한다.Here, the controller 509 sets the movement position B 'of the driver's visibility area B to increase the size of the hidden area D, and sets the seat position adjustment information corresponding to the movement position B' Can be generated. That is, as the view area moves to the B 'position, the size of the hidden area D increases by x and y.

또한, 제어부(509)는 AVN(10)으로부터 긴급 구조 정보를 수신 받아 영상 조사부(507)에 전달한다. 여기서, 제어부(509)는 영역 추출부(503)로부터 추출된 숨김 영역(D)에만 긴급 구조 정보가 표시되도록 영상 조사부(507)의 미러 각도를 제어할 수 있다.In addition, the control unit 509 receives the emergency structure information from the AVN 10 and delivers the emergency structure information to the video examination unit 507. [ The control unit 509 may control the mirror angle of the image irradiating unit 507 so that the emergency structure information is displayed only in the hidden area D extracted from the area extracting unit 503. [

통신부(511)는 AVN(10), 긴급 지원 버튼부(60) 및 영상 촬상부(70) 각각과 통신한다. The communication unit 511 communicates with the AVN 10, the emergency support button unit 60, and the image pickup unit 70, respectively.

도 4는 본 발명의 실시 예에 따른 긴급 상황 구조 방법을 도시한 순서도이다.4 is a flowchart illustrating an emergency situation structure method according to an embodiment of the present invention.

도 4를 참조하면, 먼저 차량의 뒷자석에 동승자가 탑승하여 운전자에게 가해를 하는 상황인 경우 운전자는 긴급 지원 버튼부(60)를 통해 긴급 지원 요청을 한다(단계 S1). Referring to FIG. 4, if the passenger is present in the rear seat of the vehicle and the driver is injured, the driver makes an emergency assistance request through the emergency assistance button unit 60 (step S1).

그러면, 제어부(509)는 AVN(10)에 긴급 지원 요청을 한다. AVN(10)은 마이크(20) 및 GPS(30)로부터 음성 정보 및 차량의 위치 정보를 수신 받아 모젠 센터(40)에 긴급 지원 요청과 함께 음성 정보 및 차량의 위치 정보를 송신한다. Then, the control unit 509 makes an emergency support request to the AVN 10. The AVN 10 receives voice information and location information of the vehicle from the microphone 20 and the GPS 30 and transmits voice information and location information of the vehicle together with an urgent support request to the mobile center 40. [

모젠 센터(40)는 긴급 지원 요청에 따라 긴급 상황을 판단하여 경찰에 신고하고, 음성 정보 및 차량의 위치 정보를 분석하여 현재 차량의 내부 상황 및 위치를 추적하고(단계 S2), 경찰과 협업하여 긴급 구조 정보를 생성한다.The mozen center 40 determines the emergency situation according to the emergency support request, reports it to the police, analyzes the voice information and the location information of the vehicle to track the current internal situation and location of the vehicle (step S2) Emergency structure information is generated.

이때, 영상 검출부(501)는 영상 촬상부(70)로부터 촬상된 운전자 및 동승자 각각의 영상 정보를 분석하여 얼굴 영역 영상을 검출한다. 그리고, 영역 추출부(503)는 운전자 및 동승자 각각의 얼굴 영역 영상으로부터 운전자 및 동승자 각각의 시인 영역을 추출한다. 영역 추출부(503)는 동승자의 시인 영역과 중첩되지 않는 운전자의 시인 영역을 숨김 영역으로 추출한다(단계 S3).At this time, the image detecting unit 501 analyzes the image information of each of the driver and the passenger picked up by the image pickup unit 70 and detects the face region image. The region extracting unit 503 extracts the visibility regions of the driver and the passenger from the face region images of the driver and the passenger. The region extracting unit 503 extracts the driver's visibility area that is not overlapped with the passenger's visibility area as a hidden area (step S3).

그러면, 제어부(509)는 추출된 숨김 영역의 크기가 운전자가 정보를 인식할 수 있는 크기인지 여부를 판단하고, 숨김 영역의 크기를 최대한 증가시킬 수 있는 위치로 운전자의 시인 영역을 이동시킨다. 이를 위해, 제어부(509)는 운전자의 시트를 상/하/좌/우 방향 중 어느 하나로 이동시킨다. 이에 따라, 숨김 영역의 크기가 확장된다(단계 S4).Then, the controller 509 determines whether the size of the extracted hidden area is large enough for the driver to recognize the information, and moves the visibility area of the driver to a position where the size of the hidden area can be increased as much as possible. To this end, the control unit 509 moves the driver's seat in any of the up / down / left / right directions. Thus, the size of the hidden area is expanded (step S4).

그 다음, 제어부(509)는 AVN(10)으로부터 수신된 긴급 구조 정보를 영상 조사부(507)에 전달하고, 영상 조사부(507)의 미러 각도를 제어하여 숨김 영역에만 긴급 구조 정보에 대응하는 가상 이미지를 표시시킨다(단계 S5).Next, the control unit 509 transmits the emergency structure information received from the AVN 10 to the image irradiation unit 507, and controls the mirror angle of the image irradiation unit 507 to generate a virtual image corresponding to the emergency structure information (Step S5).

즉, 운전자는 납치 또는 가해 상황에서 동승자가 눈치챌 수 없게 긴급 상황을 외부에 알릴 수 있고, 동승자가 시인할 수 없는 숨김 영역에서 긴급 구조 정보를 확인할 수 있다. 이로 인해, 운전자는 긴급 상황을 벗어날 수 있다. That is, the driver can inform the outside of the emergency situation so that the passenger can not be noticed in the abduction or harassment situation, and can confirm the emergency structure information in the hidden area that the passenger can not recognize. As a result, the driver can escape from the emergency situation.

이상에서 본 발명의 실시 예에 대하여 상세하게 설명하였지만 본 발명의 권리범위는 이에 한정되는 것은 아니고 다음의 청구범위에서 정의하고 있는 본 발명의 기본 개념을 이용한 당업자의 여러 변형 및 개량 형태 또한 본 발명의 권리범위에 속하는 것이다.While the present invention has been particularly shown and described with reference to exemplary embodiments thereof, it is to be understood that the invention is not limited to the disclosed exemplary embodiments, It belongs to the scope of right.

10: AVN
20: 마이크
30: GPS
40: 모젠 센터
50: 헤드 업 디스플레이 장치
60: 긴급 지원 버튼부
70: 영상 촬상부10: AVN
20: microphone
30: GPS
40: Mosen Center
50: Head-up display device
60: emergency support button section
70:

Claims (11)

운전자의 주 시야선 상에 가상 이미지를 투영하는 차량용 헤드 업 디스플레이를 이용한 긴급 상황 구조 장치에 있어서,
긴급 지원 요청에 따라 차량 내의 상기 운전자 및 동승자 각각의 영상을 촬상한 영상 정보로부터 상기 운전자 및 상기 동승자 각각의 제1 및 제2 얼굴 영역 영상을 검출하는 영상 검출부;
상기 제1 및 제2 얼굴 영역 영상으로부터 상기 운전자 및 상기 동승자 각각의 제1 및 제2 시인 영역을 추출하고, 상기 제1 시인 영역과 상기 제2 시인 영역 간의 위치 차이에 대응하는 숨김 영역을 추출하는 영역 추출부; 및
긴급 구조 정보에 대응하는 상기 가상 이미지를 생성하여 상기 숨김 영역에 조사하는 영상 조사부
를 포함하는 차량용 헤드 업 디스플레이를 이용한 긴급 상황 구조 장치.1. An emergency situation structure device using a head-up display for a vehicle for projecting a virtual image on a main visual field of a driver,
An image detecting unit for detecting first and second face region images of the driver and the passenger from the image information of the image of the driver and the passenger in the vehicle according to the emergency assistance request;
Extracting first and second visibility regions of the driver and the passenger from the first and second face region images and extracting a hidden region corresponding to the position difference between the first and second visibility regions A region extracting unit; And
An image inspection unit for generating the virtual image corresponding to the emergency structure information and irradiating the hidden area with the virtual image,
Up display using a head-up display for a vehicle. 제1 항에 있어서,
상기 영역 추출부는
상기 제1 및 제2 얼굴 영역 영상으로부터 상기 운전자 및 동승자 각각의 눈 위치를 검출하고, 상기 운전자 및 동승자 각각의 눈 위치에 따라 상기 제1 및 제2 시인 영역을 추출하는 차량용 헤드 업 디스플레이를 이용한 긴급 상황 구조 장치.The method according to claim 1,
The region extracting unit
An emergency position detecting unit for detecting an eye position of each of the driver and the passenger based on the first and second face region images and extracting the first and second visibility regions according to eye positions of the driver and the passenger, Situation rescue device. 제1 항에 있어서,
상기 영역 추출부는
상기 제1 시인 영역으로부터 상기 제1 시인 영역과 상기 제2 시인 영역 간의 중첩 영역을 제외한 영역을 상기 숨김 영역으로 추출하는 차량용 헤드 업 디스플레이를 이용한 긴급 상황 구조 장치.The method according to claim 1,
The region extracting unit
And extracts an area excluding the overlap area between the first visible area and the second visible area as the hidden area from the first visible area. 제1 항에 있어서,
상기 숨김 영역의 크기에 따라 상기 제1 시인 영역의 이동 위치를 설정하고, 상기 이동 위치에 따라 상기 운전자의 시트 위치를 조절하는 시트 위치 조절 정보를 생성하는 제어부를 더 포함하는 차량용 헤드 업 디스플레이를 이용한 긴급 상황 구조 장치.The method according to claim 1,
Further comprising a controller for setting the movement position of the first visible region according to the size of the hidden area and generating seat position adjustment information for adjusting the seat position of the driver according to the movement position, Emergency rescue equipment. 제4 항에 있어서,
상기 제어부는,
상기 제1 시인 영역과 상기 제2 시인 영역 간의 중첩 영역의 크기를 감소시키는 방향으로 상기 이동 위치를 설정하는 차량용 헤드 업 디스플레이를 이용한 긴급 상황 구조 장치.5. The method of claim 4,
Wherein,
And sets the moving position in a direction to reduce the size of the overlap area between the first visible area and the second visible area. 제4 항에 있어서,
상기 시트 위치 조절 정보는
상기 시트의 좌측, 우측, 상측 및 하측 위치 중 적어도 어느 하나를 포함하는 차량용 헤드 업 디스플레이를 이용한 긴급 상황 구조 장치.5. The method of claim 4,
The seat position adjustment information
Wherein the seat includes at least one of left, right, upper and lower positions of the seat. 제4 항에 있어서,
상기 제어부와 통신하여 상기 긴급 지원 요청을 전송하는 긴급 지원 버튼부를 더 포함하는 차량용 헤드 업 디스플레이를 이용한 긴급 상황 구조 장치.5. The method of claim 4,
And an emergency support button unit for communicating with the control unit to transmit the emergency support request. 제7 항에 있어서,
상기 긴급 지원 버튼부는
상기 차량 내의 핸들에 배치된 트립 버튼 및 리셋 버튼을 포함하고,
상기 트립 버튼 및 리셋 버튼이 동시에 조작되는 경우 상기 긴급 지원 요청을 생성하는 차량용 헤드 업 디스플레이를 이용한 긴급 상황 구조 장치.8. The method of claim 7,
The emergency support button unit
A trip button and a reset button disposed on a handle in the vehicle,
And generates the emergency support request when the trip button and the reset button are simultaneously operated. 제1 항에 있어서,
상기 긴급 지원 요청에 따라 상기 차량의 마이크 및 GPS(Global Positioning System)로부터 상기 차량 내부의 음성 정보 및 상기 차량의 위치 정보를 수신 받아 상기 차량 외부의 모젠 센터에 전송하는 AVN(Audio-Video-Navigation)을 더 포함하는 차량용 헤드 업 디스플레이를 이용한 긴급 상황 구조 장치.The method according to claim 1,
An AVN (Audio-Video-Navigation) system for receiving voice information of the inside of the vehicle and position information of the vehicle from a microphone and GPS (Global Positioning System) of the vehicle according to the emergency support request and transmitting the voice information to a mobile center outside the vehicle, Further comprising a head-up display for a vehicle. 제9 항에 있어서,
상기 모젠 센터는
상기 음성 정보 및 상기 위치 정보에 따라 상기 긴급 구조 정보를 생성하여 상기 AVN에 전송하는 차량용 헤드 업 디스플레이를 이용한 긴급 상황 구조 장치.10. The method of claim 9,
The Mozen Center
And generating the emergency structure information according to the voice information and the location information, and transmits the emergency structure information to the AVN. 제1 항에 있어서,
상기 영상 정보를 생성하는 영상 촬상부를 더 포함하는 차량용 헤드 업 디스플레이를 이용한 긴급 상황 구조 장치.The method according to claim 1,
Further comprising an image pickup unit for generating the image information.
KR1020130137864A 2013-11-13 2013-11-13 Apparatus for rescuing emergency situation using head-up display of vehicle KR101526408B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020130137864A KR101526408B1 (en) 2013-11-13 2013-11-13 Apparatus for rescuing emergency situation using head-up display of vehicle

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020130137864A KR101526408B1 (en) 2013-11-13 2013-11-13 Apparatus for rescuing emergency situation using head-up display of vehicle

Publications (2)

Publication Number Publication Date
KR20150055460A KR20150055460A (en) 2015-05-21
KR101526408B1 true KR101526408B1 (en) 2015-06-05

Family

ID=53391052

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020130137864A KR101526408B1 (en) 2013-11-13 2013-11-13 Apparatus for rescuing emergency situation using head-up display of vehicle

Country Status (1)

Country Link
KR (1) KR101526408B1 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115457792B (en) * 2021-06-08 2024-01-09 丰田自动车株式会社 Information processing apparatus, non-transitory medium, and information processing method

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR19990025543U (en) * 1997-12-17 1999-07-05 양재신 Car emergency display
US7126583B1 (en) * 1999-12-15 2006-10-24 Automotive Technologies International, Inc. Interactive vehicle display system
KR100851571B1 (en) * 2007-04-11 2008-08-12 현대자동차주식회사 Driver front view angle decision device and it's method for vehicle
KR20100026466A (en) * 2008-08-29 2010-03-10 엘지전자 주식회사 Head up display system and method for adjusting video display angle thereof

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR19990025543U (en) * 1997-12-17 1999-07-05 양재신 Car emergency display
US7126583B1 (en) * 1999-12-15 2006-10-24 Automotive Technologies International, Inc. Interactive vehicle display system
KR100851571B1 (en) * 2007-04-11 2008-08-12 현대자동차주식회사 Driver front view angle decision device and it's method for vehicle
KR20100026466A (en) * 2008-08-29 2010-03-10 엘지전자 주식회사 Head up display system and method for adjusting video display angle thereof

Also Published As

Publication number Publication date
KR20150055460A (en) 2015-05-21

Similar Documents

Publication Publication Date Title
EP3378722B1 (en) Drive assistance device and drive assistance method, and moving body
KR102552285B1 (en) Portable electronic device and method thereof
US20180229743A1 (en) Automated driving assistance apparatus, automated driving assistance system, automated driving assistance method, program, and recording medium
US9517776B2 (en) Systems, methods, and apparatus for controlling devices based on a detected gaze
KR101867915B1 (en) Method for executing vehicle function using wearable device and vehicle for carrying out the same
EP3424756A1 (en) Integrated vehicle monitoring system
JP5169884B2 (en) Head-up display device
JP6451101B2 (en) Vehicle communication device
JP2007249364A (en) Safe driving support system and device
CN113841191B (en) Pedestrian apparatus and traffic safety assisting method
JP2009113621A (en) Occupant picture photographing device, and driving assisting device
EP3226105A1 (en) Electronic device and control method therefor
JPWO2013051306A1 (en) Armpit detector
KR20160147559A (en) Driver assistance apparatus for vehicle and Vehicle
CN111273765B (en) Vehicle display control device, vehicle display control method, and storage medium
US20190073546A1 (en) Driver state recognition apparatus, driver state recognition system, and driver state recognition method
CN112534487B (en) Information processing apparatus, moving body, information processing method, and program
JP2014019390A (en) Emergency evacuation device
WO2018150676A1 (en) Driving switching assist device, and driving switching assist method
WO2018180579A1 (en) Imaging control device, control method for imaging control device, and mobile object
JP2010143411A (en) Head-up display device
JPWO2019176391A1 (en) Drive recorder, display control method and program
JP2009183473A (en) Visual line direction detection device, and visual line direction detection method
JP2017117194A (en) Vehicular emergency call system
TW201328340A (en) Noticing system and method for looking for passengers

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20180530

Year of fee payment: 4

LAPS Lapse due to unpaid annual fee