KR20120085973A - 차량의 어라운드 뷰 제공 방법 - Google Patents

차량의 어라운드 뷰 제공 방법 Download PDF

Info

Publication number
KR20120085973A
KR20120085973A KR1020110007128A KR20110007128A KR20120085973A KR 20120085973 A KR20120085973 A KR 20120085973A KR 1020110007128 A KR1020110007128 A KR 1020110007128A KR 20110007128 A KR20110007128 A KR 20110007128A KR 20120085973 A KR20120085973 A KR 20120085973A
Authority
KR
South Korea
Prior art keywords
vehicle
image
around view
displayed
gear
Prior art date
Application number
KR1020110007128A
Other languages
English (en)
Other versions
KR101305310B1 (ko
Inventor
하수영
나경진
김종효
Original Assignee
아진산업(주)
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 아진산업(주) filed Critical 아진산업(주)
Priority to KR1020110007128A priority Critical patent/KR101305310B1/ko
Publication of KR20120085973A publication Critical patent/KR20120085973A/ko
Application granted granted Critical
Publication of KR101305310B1 publication Critical patent/KR101305310B1/ko

Links

Images

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/12—Mirror assemblies combined with other articles, e.g. clocks
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60Q—ARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q11/00—Arrangement of monitoring devices for devices provided for in groups B60Q1/00 - B60Q9/00
    • B60Q11/005—Arrangement of monitoring devices for devices provided for in groups B60Q1/00 - B60Q9/00 for lighting devices, e.g. indicating if lamps are burning or not
    • B60Q11/007—Arrangement of monitoring devices for devices provided for in groups B60Q1/00 - B60Q9/00 for lighting devices, e.g. indicating if lamps are burning or not the lighting devices indicating change of drive direction
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R21/00—Arrangements or fittings on vehicles for protecting or preventing injuries to occupants or pedestrians in case of accidents or other traffic risks
    • B60R21/01—Electrical circuits for triggering passive safety arrangements, e.g. airbags, safety belt tighteners, in case of vehicle accidents or impending vehicle accidents
    • B60R21/013—Electrical circuits for triggering passive safety arrangements, e.g. airbags, safety belt tighteners, in case of vehicle accidents or impending vehicle accidents including means for detecting collisions, impending collisions or roll-over
    • B60R21/0134—Electrical circuits for triggering passive safety arrangements, e.g. airbags, safety belt tighteners, in case of vehicle accidents or impending vehicle accidents including means for detecting collisions, impending collisions or roll-over responsive to imminent contact with an obstacle, e.g. using radar systems
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00—Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units, or advanced driver assistance systems for ensuring comfort, stability and safety or drive control systems for propelling or retarding the vehicle
    • B60W30/08—Active safety systems predicting or avoiding probable or impending collision or attempting to minimise its consequences
    • B60W30/095—Predicting travel path or likelihood of collision
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/10—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used
    • B60R2300/105—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used using multiple cameras
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • B60R2300/303—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing using joined images, e.g. multiple camera images
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/60—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by monitoring and displaying vehicle exterior scenes from a transformed perspective
    • B60R2300/602—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by monitoring and displaying vehicle exterior scenes from a transformed perspective with an adjustable viewpoint
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/60—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by monitoring and displaying vehicle exterior scenes from a transformed perspective
    • B60R2300/607—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by monitoring and displaying vehicle exterior scenes from a transformed perspective from a bird's eye viewpoint
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/802—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for monitoring and displaying vehicle exterior blind spot views
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/806—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for aiding parking

Abstract

본 발명은 운행 전에 차량의 각종 상태 정보를 화면에 표시하고, 초기 또는 주차 모드시 사용자의 모션이 입력, 방향 지시등의 조작 신호가 입력 또는 장애물과의 충돌이 예상되는 경우 특정 영역의 화면을 확대 디스플레이하여 운전자의 안전을 확보할 수 있도록 하는 차량의 어라운드 뷰 제공 방법에 관한 것이다.
이를 위한 본 발명의 차량의 어라운드 뷰 제공 방법은, 시동 신호가 감지되면 차량에 설치된 각 센서로부터 차량 정보를 수신하는 단계와, 수신된 차량 정보를 디스플레이하는 단계와, 차량의 각 부분에 설치된 복수의 카메라로부터 촬영 영상을 수신하는 단계와, 수신된 복수의 촬영 영상을 조합하여 어라운드 뷰 영상를 생성하는 단계 및 생성된 어라운드 뷰 영상를 디스플레이하는 단계를 포함한다.

Description

차량의 어라운드 뷰 제공 방법{METHOD FOR PROVIDING AROUND VIEW OF VEHICLE}
본 발명은 차량의 어라운드 뷰 제공 방법에 관한 것으로서, 특히 운행 전에 차량의 각종 상태 정보를 화면에 표시하고, 초기 또는 주차 모드시 사용자의 모션이 입력, 방향 지시등의 조작 신호가 입력 또는 장애물과의 충돌이 예상되는 경우 특정 영역의 화면을 확대 디스플레이함으로써, 사용자가 간편하게 원하는 영역의 영상을 확대 관찰할 수 있는 차량의 어라운드 뷰 제공 방법에 관한 것이다.
일반적으로, 주차시 또는 후진시와 같이 차량의 후방 상황을 파악하기 위해 운전자는 좌/우측의 외부 사이드 미러와 내부 룸 미러를 이용하고 있다. 그러나, 운전자가 외부 사이드 미러와 내부 룸 미러를 통하여 차량의 후방을 파악할 수 있는 방향은 한정되어 사각지대가 생기게 된다. 이에 차량의 주차시 및 후진시 시계가 충분히 확보되지 않아 차량 후방의 상황을 정확히 인식하지 못하는 문제점이 있다.
이러한 단점을 해소하기 위하여 최근에는 차량의 후방에만 카메라를 설치하고 카메라를 통해 촬영된 영상을 차량 내부에서 모니터링 할 수 있도록 하는 후방 감시 카메라를 이용한 모니터링 시스템이 이용되고 있다. 그런데, 후방 감시 카메라를 이용한 모니터링 시스템은 후방 영상만을 제공하기 때문에 차량의 좌우측 또는 전방 영상을 모니터링 할 수 없는 단점이 있다.
이에 최근에는 차량의 전방, 후방, 좌측 및 우측에 장착된 카메라를 이용하여 가상 시점에서 차량을 부감(상공으로부터 내려다 본 상태)시킨 화면을 제공하여 운전자가 볼 수 없는 시야를 확보할 수 있도록 하는 어라운드 뷰(Around view) 모니터링 시스템이 제공되고 있다.
그러나, 종래의 어라운드 뷰 모니터링 시스템은 단순히 자동차의 전후좌우의 영상만을 모니터를 통해 운전자에게 제공하거나 운전자의 조작에 의해 선택된 방향의 영상만을 표시해주는 것으로서, 자동차 운행시 발생될 수 있는 다양한 정보를 운전자에게 제공하지 못하고 있다는 문제점이 있다.
예를 들어, 차량의 진행방향에 있는 장애물이 카메라의 촬상 범위에 포함되지 않을 때 운전자가 화면을 주시하며 운행할 경우 차량의 진행방향에 있는 장애물과 접촉할 우려가 있다.
또한, 운전자가 운행 도중에 특정 방향의 화면 정보만을 보고 싶을 경우 운행을 하면서 특정 화면이 표시되도록 조작을 해야 하므로 운행시 주의력이 저하되어 사고로 이어질 수 있는 문제가 있다.
배경기술의 단점을 해소하기 위한 본 발명의 목적은 차량 시동이 감지되면 차량 각부의 상태 정보를 화면에 표시하여, 운전자가 차량 운행 이전에 차량 정보를 확인할 수 있도록 하는 차량의 어라운드 뷰 제공 방법을 제공함에 있다.
또한, 본 발명의 다른 목적은 차량 외부에 복수의 장애물 감지 센서를 설치하고, 장애물 감지 센서의 센싱 결과에 기초로 장애물과의 충돌이 예상될 경우 충돌 예상 방향과 충돌 예상 거리 및 충돌 예상 시간 정보와 함께 충돌 예상 방향의 영상을 확대 디스플레이하는 차량의 어라운드 뷰 제공 방법을 제공함에 있다.
또한 본 발명의 또 다른 목적은 차량의 초기 주행 또는 주차 모드시 방향 지시등의 조작 신호가 입력되면 기어의 상태 및 방향 지시등의 상태 정보에 따라 기설정된 영역의 영상을 확대 디스플레이함으로써, 사용자가 간편하게 원하는 영역의 영상을 확대 관찰 할 수 있는 차량의 어라운드 뷰 제공 방법을 제공함에 있다.
또한, 본 발명의 또 다른 목적은 차량의 초기 주행 또는 주차 모드시 근접 센서로부터의 센싱 신호에 기초하여 사용자 모션 입력 여부를 판단하고, 사용자 모션이 입력되면 기 설정된 사용자 모션 패턴에 대응하는 영역의 영상을 확대 디스플레이함으로써, 사용자가 간편하게 원하는 영역의 영상을 확대 관찰 할 수 있는 차량의 어라운드 뷰 제공 방법을 제공함에 있다.
과제를 해결하기 위한 본 발명의 차량의 어라운드 뷰 제공 방법은, 시동 신호가 감지되면 차량에 설치된 각 센서로부터 차량 정보를 수신하는 단계와, 수신된 차량 정보를 디스플레이하는 단계와, 차량의 각 부분에 설치된 복수의 카메라로부터 촬영 영상을 수신하는 단계와, 수신된 복수의 촬영 영상을 조합하여 어라운드 뷰 영상를 생성하는 단계 및 생성된 어라운드 뷰 영상를 디스플레이하는 단계를 포함한다.
여기서, 차량 정보는 어라운드 뷰 영상 생성이 완료되기 이전까지 디스플레이된다.
또한, 영상 확대 영역을 분할하고 방향 지시등 상태와 기어 상태 정보를 조합하여 영상 확대 영역을 지정하는 단계와, 차량이 초기 주행 또는 주차 모드로 진입하는 단계와, 방향 지시등 조작 신호 입력 여부를 판단하는 단계 및 방향 지시등 조작 신호의 입력이 있을 경우 기어의 상태 및 방향 지시등의 상태 정보에 따라 기설정된 영역의 영상을 확대 디스플레이하는 단계를 더 포함할 수 있다.
이때, 방향 지시등 조작 신호에 따른 영상 확대 디스플레이는 기어가 전진 상태이고 좌측 방향 지시등이 켜진 경우 전방 좌측 영상을 확대 디스플레이하고, 기어가 전진 상태이고 우측 방향 지시등이 켜진 경우 전방 우측 영상을 확대 디스플레이하고, 기어가 후진 상태이고 좌측 방향 지시등이 켜진 경우 후방 좌측 영상을 확대 디스플레이하며, 기어가 후진 상태이고 우측 방향 지시등이 켜진 경우 후방 우측 영상을 확대 디스플레이한다.
또한, 차량이 초기 주행 또는 주차 모드로 진입하는 단계와, 차량이 주변의 장애물과의 충돌이 예상되는지 판단하는 단계 및 충돌이 예상될 경우 충돌 예상 방향의 영상을 확대 디스플레이하는 단계를 더 포함할 수 있다.
또한, 차량이 초기 주행 또는 주차 모드로 진입하는 단계와, 근접 센서로부터의 센싱 신호에 기초하여 사용자 모션 입력 여부를 판단하는 단계 및 사용자 모션이 입력되면 기 설정된 사용자 모션 패턴에 대응하는 영역의 영상을 확대 디스플레이하는 단계를 더 포함할 수 있다.
본 발명은 시동이 감지되면 차량의 각부 상태 정보를 화면에 디스플레이하여, 운전자가 운행 이전에 차량의 이상 여부를 확인할 수 있도록 함으로써, 차량 이상에 따라 주행중 발생할 수 있는 사고를 미연에 방지하여 안전성을 확보할 수 있는 이점이 있다.
또한, 본 발명은 장애물과의 충돌이 예상될 경우 충돌 예상 방향과 충돌 예상 거리 및 충돌 예상 시간 정보와 함께 충돌 예상 방향의 영상을 확대 디스플레이하여, 사용자가 장애물과의 충돌에 미리 대처할 수 있도록 함으로써 안전성을 확보할 수 있는 이점이 있다.
또한, 본 발명은 사용자가 터치 화면을 직접 조작하지 않아도 방향 지시등을 조작하거나, 근접 센서 근처에서 특정 모션을 취할 경우 이를 감지하여 기설정 패턴에 대응되는 영역의 영상을 확대 디스플레이하도록 함으로써, 주행 중 터치 화면을 조작하지 않아도 간편하게 원하는 영역의 영상을 확대 관찰할 수 있으므로 운전자의 주의력 분산을 방지하여 안전성을 확보할 수 있는 이점이 있다.
도 1은 본 발명의 차량의 어라운드 뷰 제공 시스템을 개략적으로 나타낸 구성 블록도.
도 2 및 도 3은 본 발명의 실시예에 따라 데이터 저장부에 저장되는 확대 디스플레이 분할 영역의 예시도.
도 4는 본 발명의 제 1 실시예에 따른 차량의 어라운드 뷰 제공 방법을 설명하기 위한 흐름도.
도 5는 본 발명의 제 2 실시예에 따른 차량의 어라운드 뷰 제공 방법을 설명하기 위한 흐름도.
도 6은 본 발명의 제 3 실시예에 따른 차량의 어라운드 뷰 제공 방법을 설명하기 위한 흐름도.
이하에서는 첨부된 도면을 참조하여 본 발명의 바람직한 실시예를 상세하게 설명하기로 한다.
도 1은 본 발명의 차량의 어라운드 뷰 제공 시스템을 개략적으로 나타낸 구성 블록도로서, 차량 정보 획득부(100), 복수의 장애물 감지 센서(200), 터치 센서(300), 근접 센서(400), 복수의 카메라(500), ECU(600), 디스플레이장치(700) 및 스피커(800)를 포함한다.
차량 정보 획득부(100)는 차량의 각부에 설치된 센서로서, 차량의 각부의 상태정보를 검출한 후 검출 정보를 CAN(Controller Area Network)으로 연결된 ECU(600)로 전송한다. 이때, 차량 정보 획득부(100)는 드로틀 각도, 점화 시기, 부하, 연료 트립 등과 같은 엔진 상태를 검출하는 엔진 센서(110)와, 냉각수의 온도를 검출하는 냉각수 센서(120), 흡기 압력과 온도를 검출하는 흡기 센서(130), 타이어의 공기압을 검출하는 타이어 공압 센서(140), 배터리 상태를 검출하는 배터리 센서(150), 시동 입력 여부를 감지하는 시동 감지 센서(160), 기어 스위치로부터 기어의 상태를 검출하는 기어 위치 감지 센서(170), 차량의 속도를 검출하는 속도 센서(180), 방향 지시등 상태를 검출하는 방향 지시등 감지 센서(190)를 포함한다.
장애물 감지 센서(200)는 차량 외부의 전후좌우에 설치되어 주변 장애물의 접근을 감지하는 것으로서, 본 발명의 실시예에서는 차량의 전후좌우에 설치된 것으로 설명하였으나 센서의 개수나 장착 위치는 변형이 가능하다.
터치 센서(300)는 디스플레이장치(700)에 일체화되어 사용자의 터치를 감지하는 것으로서, 스피커 음량과 모드 선택과 같은 각종 메뉴 정보를 입력받을 수 있다.
근접 센서(400)는 디스플레이장치(700)의 상하좌우에 복수로 설치되어 사용자의 모션을 감지하는 것으로서, 근접 센서(400)의 개수와 설치 위치는 여기에 한정되지 않고 다양하게 변형할 수 있다.
복수의 카메라(500)는 차량의 전방과 양측 사이드미러와 후방에 설치되어 차량 주변의 영상을 촬영하는 것으로서, 카메라(500)의 위치와 개수는 여기에 한정되지 않고 차량의 다른 부분에 설치될 수 있다.
한편, ECU(600)는 차량의 각부에 설치된 센서로부터 전송되는 검출 정보에 디스플레이장치(700)나 스피커(800) 제어 및 차량의 구동 전반을 제어한다. 여기서, ECU(600)는 영상 처리부(610), 충돌 위험 판단부(620), 터치 좌표 산출부(630), 사용자 모션 패턴 판독부(640), 운행 모드 판단부(650), 데이터 저장부(660) 및 제어부(670)를 포함한다.
영상 처리부(610)는 복수의 카메라(500)로부터 전송되는 영상 정보를 조합하여 어라운드 뷰 영상을 생성한다. 이때, 왜곡 보정, 시점 변환, 합성 처리를 하여 어라운드 뷰 영상을 생성한다.
충돌 위험 판단부(620)는 장애물 감지 센서(200)와 속도 센서(180)로부터 전송되는 신호를 기초로 장애물과의 거리를 산출하여 충돌 예상 여부를 판단하고, 충돌이 예상될 경우 충돌 예상 시간을 산출한다.
터치 좌표 산출부(630)는 터치 센서(300)로부터 전송되는 터치 정보를 분석하여 해당 터치 위치의 좌표를 산출한다.
사용자 모션 패턴 판독부(640)는 복수의 근접 센서로부터 감지 신호가 입력되면, 입력된 감지 신호를 분석하여 데이터베이스에 기 설정된 사용자 모션 패턴과 비교하여 입력된 모션 패턴을 판독한다. 이때, 모션 패턴은 사용자의 손이 특정 방향으로 이동하는 것을 기준으로 설정될 수 있다.
운행 모드 판단부(650)는 시동 감지 센서(160)와, 기어 위치 감지 센서(170)와 속도 센서(180)로부터 전송되는 신호에 기초하여 초기 주행 모드 또는 일반 주행 모드 또는 주차 모드 인지를 판단한다. 예를 들어, 시동이 감지된 직후 차량의 속도가 일정 속도 이하일 경우에는 초기 주행 모드인 것으로 판단하고, 일정 속도 이상으로 속도가 증가하면 주행 모드인 것으로 판단하며, 일정 속도 이상의 주행 모드에서 변속 기어가 "R" 상태가 되고 속도가 일정 속도 이하가 되면 주차 모드인 것으로 판단한다.
데이터 저장부(660)는 영상 처리부(610)에서 처리된 영상 정보를 실시간으로 저장하여 사고 발생시 등에 증거 자료로 활용할 수 있도록 하며, 각종 센서로부터 입력되는 신호에 대응하여 확대 디스플레이할 영역을 분할 설정한다.
도 2 및 도 3은 본 발명의 실시예에 따라 데이터 저장부에 저장되는 확대 디스플레이 분할 영역의 예시도이다.
도 2는 방향 지시등 상태와 기어 상태에 대응하여 분할 설정되는 디스플레이 영역을 도시한 예시도로서, 분할 영역을 전방 좌측과, 전방 우측, 후방 좌측과, 후방 우측으로 분할 설정할 수 있다. 그리고, 기어가 전진 상태이고 좌측 방향 지시등이 켜진 경우 전방 좌측 영상을 확대 디스플레이하고, 기어가 전진 상태이고 우측 방향 지시등이 켜진 경우 전방 우측 영상을 확대 디스플레이하고, 기어가 후진 상태이고 좌측 방향 지시등이 켜진 경우 후방 좌측 영상을 확대 디스플레이하며, 기어가 후진 상태이고 우측 방향 지시등이 켜진 경우 후방 우측 영상을 확대 디스플레이할 수 있다. 여기서, 본 발명은 방향 지시등 상태와 기어 상태에 따른 조합 및 확대 디스플레이 영역을 다르게 설정하는 것으로 변형 실시할 수 있다.
도 3은 근접 센서(400)에서 전송되는 사용자 모션 패턴에 대응하여 분할 설정되는 디스플레이 영역을 도시한 예시도로서, 분할 영역을 전방과 후방 및 좌측과 우측으로 분할 설정할 수 있다. 그리고, 좌측 근접 센서 감지 신호 입력 후 우측 근접 센서 감지 신호가 입력되면 우측 영상을 확대 디스플레이하고, 우측 근접 센서 감지 신호 입력 후 좌측 근접 센서 감지 신호가 입력되면 좌측 영상을 확대 디스플레이하고, 상부 근접 센서 감지 신호 입력 후 하부 근접 센서 감지 신호가 입력되면 후방 영상을 확대 디스플레이하며, 하부 근접 센서 감지 신호 입력 후 상부 근접 센서 감지 신호가 입력되면 상부 영상을 확대 디스플레이 하도록 설정될 수 있다. 여기서, 본 발명은 사용자 모션 패턴 및 확대 디스플레이 영역을 다르게 설정하는 것으로 변형 실시할 수 있다.
제어부(670)는 영상 처리부(610)에서 조합된 어라운드 뷰 영상과 차량 정보 획득부(100)의 각 센서로부터 전송되는 각종 차량 정보가 디스플레이 되도록 디스플레이장치(700)를 구동을 제어하는 것으로서, 충돌 위험 판단부(620)와, 사용자 모션 패턴 판단부(640), 운행 모드 판단부(650)에서 입력되는 신호에 기초하여 하고, 디스플레이장치(700) 구동을 제어한다. 또한, 제어부(670)는 장애물과의 충돌이 예상될 경우 경고음이 출력되도록 스피커(800)의 구동을 제어한다.
구체적으로, 제어부(670)는 충돌 위험 판단부(620)에서 충돌 위험이 있는 것으로 판단하면, 디스플레이장치(700)에 충돌 예상 방향 정보와 장애물과의 거리 정보 및 줌 배율 정보를 포함하도록, 충돌 예상 방향의 영상 확대 디스플레이 신호를 전송하며, 스피커(800)에 경고음 출력 제어 신호를 전송한다.
또한, 제어부(670)는 터치 좌표 산출부(630)에서 산출된 좌표 정보를 기초로 해당 좌표에 대응되는 메뉴에 해당하는 제어 신호를 디스플레이장치(700) 또는 스피커(800)에 전송한다.
또한, 제어부(670)는 사용자 모션 패턴 판독부(640)에서 판독된 모션 정보를 데이터 저장부(660)에 설정된 모션 패턴에 대응하는 영역 정보를 독출하여 해당 영역의 영상이 디스플레이되도록 디스플레이장치(700)에 제어 신호를 전송한다.
또한, 제어부(670)는 방향 지시등 상태와 기어 상태에 따라 디스플레이장치(700)에 특정 영역의 영상을 확대 디스플레이하도록 제어 신호를 전송한다.
도 4는 본 발명의 제 1 실시예에 따른 차량의 어라운드 뷰 제공 방법을 설명하기 위한 흐름도로서, 본 발명의 제 1 실시예는 방향 지시등의 상태 정보와 기어 상태 정보를 기초로 특정 영역의 영상을 확대 디스플레이한다.
우선, 시동 감지 센서(160)로부터 시동 감지 신호가 입력되면(S100), 차량의 각부에 설치된 각 센서로부터 차량 정보를 수신하고(S110), 복수의 카메라(500)로부터 촬영 영상 정보를 수신한다(S120). 여기서, 차량 정보와 영상 정보 수신은 편의상 서로 다른 단계로 분리하였으나 차량 정보와 영상 정보 수신은 동시에 이루어질 수 있다.
이어서, 수신된 차량 정보를 판독하여 디스플레이장치(700)에 차량 정보가 디스플레이되도록 제어 신호를 전송한다(S130).
그리고, 복수의 카메라(500)로부터 전송되는 영상 정보에 대한 왜곡 보정, 시점 변환, 합성 처리를 하여 어라운드 뷰 영상을 생성하고(S140), 생성된 어라운드 뷰 영상이 디스플레이되도록 디스플레이장치(700)에 제어 신호를 전송한다(S160). 여기서, 차량 정보 표시 시간은 차량정보 표시시간을 어라운드뷰 형성시간 동안 또는 형성 후 일정 시간 경과까지 표시되도록 할 수 있다.
이를 위하여, 본 발명은 어라운드 뷰 이미지 생성이 완료되었는지 판단하는 단계(S150)를 더 포함할 수 있다. 즉, 차량 정보가 디스플레이되도록 함과 동시에 어라운드 뷰 영상을 생성하되, 어라운드 뷰 영상이 생성되기 이전에는 차량 정보가 디스플레이 되도록 하고, 어라운드 뷰 영상 생성이 완료된 후에는 차량 정보는 표시하지 않고 어라운드 뷰 영상만 표시하도록 하거나, 어라운드 뷰 영상 생성이 완료된 후에도 일정 시간 경과 할 때까지 차량 정보가 표시되도록 할 수 있다.
이어서, 기어의 상태와 차량 속도를 기초로 차량이 초기 주행 모드인지 주차 모드 인지를 판단하고(S170), 차량이 초기 주행 모드나 주차 모드가 아닐 경우에는 계속적으로 어라운드 뷰 영상 디스플레이되도록 한다. 이때, 차속이 설정값 이하이고 시동 감지 후 일정 시간 이내인 경우 초기 주행 모드인 것으로 판단한다. 그리고, 차량의 속도가 일정 속도 이하가 되고 기어의 상태가 "R"이 되면 주차 모드인 것으로 판단할 수 있다.
또한, 차량이 초기 주행 모드 또는 주차 모드인 것으로 판단되면, 방향 지시등 조작 신호가 입력되었는지 판단하고(S200), 방향 지시등 조작 신호가 입력되지 않으면 일반 주행 상태로 판단하여 어라운드 뷰 영상이 계속 디스플레이되도록 한다.
그리고, 방향 지시등 조작 신호가 입력되면 방향 지시등 상태와 기어 상태 정보에 기초하여 특정 영역의 영상이 확대 디스플레이 되도록 한다(S210). 이때, 데이터 저장부(660)에는 방향 지시등 상태와 기어 상태 정보의 조합에 의해 확대할 영역이 기 설정되어 있다.
이와 같이 본 발명의 제 1 실시예는 사용자가 터치 화면을 직접 조작하지 않아도 방향 지시등과 기어의 상태에 따라, 특정 영역에 대한 영상을 확대 디스플레이 함으로써, 사용자가 보다 편리하게 관찰하자 하는 영역의 영상을 관할할 수 있어 운전자의 주의력 분산을 방지하여 운전자의 안전을 확보할 수 있게 된다.
도 5는 본 발명의 제 2 실시예에 따른 차량의 어라운드 뷰 제공 방법을 설명하기 위한 흐름도로서, 본 발명의 제 2 실시예는 충돌 예상 여부를 기초로 특정 영역의 영상을 확대 디스플레이한다. 이때, 본 발명의 제 2 실시예의 설명에 있어서 상술한 본 발명의 제 1 실시예와 동일한 구성에 대해서는 간략하게 설명하도록 한다.
우선, 시동 감지 센서(160)로부터 시동 감지 신호가 입력되면(S100), 차량의 각부에 설치된 각 센서로부터 차량 정보를 수신하고(S110), 복수의 카메라(500)로부터 촬영 영상 정보를 수신한다(S120).
이어서, 수신된 차량 정보를 판독하여 디스플레이장치(700)에 차량 정보가 디스플레이되도록 제어 신호를 전송한다(S130).
그리고, 복수의 카메라(500)로부터 전송되는 촬영된 영상 정보를 왜곡 보정, 시점 변환, 합성 처리를 하여 어라운드 뷰 영상을 생성하고(S140), 생성된 어라운드 뷰 영상이 디스플레이되도록 제어 신호를 전송한다(S160).
그리고, 차량이 초기 주행 모드인지 주차 모드 인지를 판단하고(S170), 차량이 초기 주행 모드나 주차 모드가 아닐 경우에는 계속적으로 어라운드 뷰 영상 디스플레이되도록 한다.
또한, 차량이 초기 주행 모드 또는 주차 모드인 것으로 판단되면, 장애물과의 충돌 위험이 예상되는지 판단하고(S300), 충돌 위험이 예상되지 않으면 일반 주행 상태로 판단하여 어라운드 뷰 영상이 디스플레이되도록 한다.
그리고, 장애물과의 충돌 위험이 예상되면 충돌 위험 예상 방향의 영상이 확대 디스플레이 되도록 함(S310)과 동시에 스피커(800)를 통해 경고음이 출력되도록 한다. 이때, 충돌 위험 예상 방향의 영상 확대 디스플레이와 함께 화면상에 충돌 예상 방향과 줌 배율 정보를 표시하도록 할 수 있다. 또한, 장애물 감지 센서와 속도 센서로부터 검출된 정보를 기초로 충돌 예상 장애물과의 거리 및 충돌 예상 시간을 산출하여 이를 함께 화면상에 표시하도록 할 수 있다.
이와 같이 본 발명의 제 2 실시예는 장애물과의 충돌 위험 여부를 선 판단한 후 충돌이 예상될 경우 충돌 예상 방향 정보와 함께 충돌 예상 방향 영상을 확대 디스플레이하며 경고음을 출력함으로써, 운전자가 위험에 미리 대비할 수 있게된다.
도 6은 본 발명의 제 3 실시예에 따른 차량의 어라운드 뷰 제공 방법을 설명하기 위한 흐름도로서, 본 발명의 제 3 실시예는 근접 센서를 통해 운전자의 모션이 감지되면 기설정된 모션 패턴에 대응하는 영역의 영상을 확대 디스플레이한다. 이때, 본 발명의 제 2 실시예의 설명에 있어서 상술한 본 발명의 제 1 실시예와 동일한 구성에 대해서는 간략하게 설명하도록 한다.
우선, 시동 감지 센서(160)로부터 시동 감지 신호가 입력되면(S100), 차량의 각부에 설치된 각 센서로부터 차량 정보를 수신하고(S110), 복수의 카메라(500)로부터 촬영 영상 정보를 수신한다(S120).
이어서, 수신된 차량 정보를 판독하여 디스플레이장치(700)에 차량 정보가 디스플레이되도록 제어 신호를 전송한다(S130).
그리고, 복수의 카메라(500)로부터 전송되는 촬영된 영상 정보를 왜곡 보정, 시점 변환, 합성 처리를 하여 어라운드 뷰 영상을 생성하고(S140), 생성된 어라운드 뷰 영상이 디스플레이되도록 제어 신호를 전송한다(S160).
그리고, 차량이 초기 주행 모드인지 주차 모드 인지를 판단하고(S170), 차량이 초기 주행 모드나 주차 모드가 아닐 경우에는 계속적으로 어라운드 뷰 영상 디스플레이되도록 한다.
또한, 차량이 초기 주행 모드 또는 주차 모드인 것으로 판단되면, 근접 센서로부터의 센싱 신호에 기초하여 사용자 모션 입력 여부를 판단하고(S400), 근접 센서로부터 사용자 모션이 감지되지 않으면 일반 주행 상태로 판단하여 어라운드 뷰 영상이 디스플레이되도록 한다.
그리고, 사용자 모션이 입력되면 기 설정된 사용자 모션 패턴에 대응하는 영역의 영상이 확대 디스플레이되도록 한다(S410).
이와 같이 본 발명의 제 3 실시예는 사용자가 터치 화면을 직접 조작하지 않아도 사용자의 모션 패턴에 대응되는 영역의 영상을 확대 디스플레이 함으로써, 특정 영역에 대한 영상을 확대 디스플레이 함으로써 사용자가 보다 편리하게 관찰하자 하는 영역의 영상을 표시할 수 있어 운전자의 주의력 분산을 방지하여 운전자의 안전을 확보할 수 있게 된다.
이상에서는 방향 지시등과 기어의 상태, 충돌 예상 여부, 사용자 모션 입력을 각각의 경우로 나누어 설명하였으나, 각각의 경우를 조합 판단하여 특정 영역에 대한 영상을 확대 디스플레이하는 것으로 변형 실시할 수 있다.
비록 본 발명이 상기 언급된 바람직한 실시예와 관련하여 설명되어졌지만, 발명의 요지와 범위로부터 벗어남이 없이 다양한 수정이나 변형을 하는 것이 가능하다. 따라서 첨부된 특허청구의 범위는 본 발명의 요지에서 속하는 이러한 수정이나 변형을 포함할 것이다.
100 : 차량 정보 획득부 110 : 엔진 센서
120 : 냉각수 센서 130 : 흡기 센서
140 : 타이어 공압 센서 150 : 배터리 센서
160 : 시동 감지 센서 170 : 기어 위치 감지 센서
180 : 속도 센서 190 : 방향 지시등 감지 센서
200 : 장애물 감지 센서 300 : 터치 센서
400 : 근접 센서 500 : 카메라
600 : ECU 610 : 영상 처리부
620 : 충돌 위험 판단부 630 : 터치 좌표 산출부
640 : 사용자 모션 패턴 판독부 650 : 운행 모드 판단부
660 : 데이터 저장부 670 : 제어부
700 : 디스플레이장치 800 : 스피커

Claims (6)

  1. 시동 신호가 감지되면 차량에 설치된 각 센서로부터 차량 정보를 수신하는 단계;
    상기 수신된 차량 정보를 디스플레이하는 단계;
    상기 차량의 각 부분에 설치된 복수의 카메라로부터 촬영 영상을 수신하는 단계;
    상기 수신된 복수의 촬영 영상을 조합하여 어라운드 뷰 영상를 생성하는 단계; 및
    상기 생성된 어라운드 뷰 영상를 디스플레이하는 단계를 포함하는 것을 특징으로 하는 차량의 어라운드 뷰 제공 방법.
  2. 제 1항에 있어서,
    상기 차량 정보는 상기 어라운드 뷰 영상 생성이 완료되기 이전까지 디스플레이되는 것을 특징으로 하는 차량의 어라운드 뷰 제공 방법.
  3. 제 1 또는 제 2항에 있어서,
    영상 확대 영역을 분할하고 방향 지시등 상태와 기어 상태 정보를 조합하여 영상 확대 영역을 지정하는 단계;
    상기 차량이 초기 주행 또는 주차 모드로 진입하는 단계;
    방향 지시등 조작 신호 입력 여부를 판단하는 단계; 및
    상기 방향 지시등 조작 신호의 입력이 있을 경우 기어의 상태 및 방향 지시등의 상태 정보에 따라 기설정된 영역의 영상을 확대 디스플레이하는 단계를 더 포함하는 것을 특징으로 하는 차량의 어라운드 뷰 제공 방법.
  4. 제 3항에 있어서,
    상기 방향 지시등 조작 신호에 따른 영상 확대 디스플레이는,
    기어가 전진 상태이고 좌측 방향 지시등이 켜진 경우 전방 좌측 영상을 확대 디스플레이하고,
    기어가 전진 상태이고 우측 방향 지시등이 켜진 경우 전방 우측 영상을 확대 디스플레이하고,
    기어가 후진 상태이고 좌측 방향 지시등이 켜진 경우 후방 좌측 영상을 확대 디스플레이하며,
    기어가 후진 상태이고 우측 방향 지시등이 켜진 경우 후방 우측 영상을 확대 디스플레이함을 특징으로 하는 차량의 어라운드 뷰 제공 방법.
  5. 제 1 또는 제 2항에 있어서,
    상기 차량이 초기 주행 또는 주차 모드로 진입하는 단계;
    차량이 주변의 장애물과의 충돌이 예상되는지 판단하는 단계; 및
    상기 충돌이 예상될 경우 충돌 예상 방향의 영상을 확대 디스플레이하는 단계를 더 포함하는 것을 특징으로 하는 차량의 어라운드 뷰 제공 방법.
  6. 제 1 또는 제 2항에 있어서,
    상기 차량이 초기 주행 또는 주차 모드로 진입하는 단계;
    근접 센서로부터의 센싱 신호에 기초하여 사용자 모션 입력 여부를 판단하는 단계; 및
    상기 사용자 모션이 입력되면 기 설정된 사용자 모션 패턴에 대응하는 영역의 영상을 확대 디스플레이하는 단계를 더 포함함을 특징으로 하는 차량의 어라운드 뷰 제공 방법.
KR1020110007128A 2011-01-25 2011-01-25 차량의 어라운드 뷰 제공 방법 KR101305310B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020110007128A KR101305310B1 (ko) 2011-01-25 2011-01-25 차량의 어라운드 뷰 제공 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020110007128A KR101305310B1 (ko) 2011-01-25 2011-01-25 차량의 어라운드 뷰 제공 방법

Publications (2)

Publication Number Publication Date
KR20120085973A true KR20120085973A (ko) 2012-08-02
KR101305310B1 KR101305310B1 (ko) 2013-09-06

Family

ID=46871915

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020110007128A KR101305310B1 (ko) 2011-01-25 2011-01-25 차량의 어라운드 뷰 제공 방법

Country Status (1)

Country Link
KR (1) KR101305310B1 (ko)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101511610B1 (ko) * 2013-07-23 2015-04-13 현대오트론 주식회사 초음파 센서를 이용한 avm 시스템 및 어라운드뷰 이미지 제공 방법
KR20160095914A (ko) * 2015-02-04 2016-08-12 경일대학교산학협력단 차량 승하차 안전제어 시스템
KR20180074093A (ko) * 2016-12-23 2018-07-03 삼성전기주식회사 어라운드 뷰 영상 제공 시스템
WO2019124834A1 (ko) * 2017-12-21 2019-06-27 삼성전자 주식회사 주행 컨텍스트에 기반한 디스플레이 제어 방법 및 장치
KR20190078703A (ko) * 2017-12-14 2019-07-05 현대자동차주식회사 차량 버튼 디스플레이 시스템 및 그 방법
KR20230010111A (ko) * 2021-07-08 2023-01-18 이하준 차량의 후방영상 표시제어장치

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR940019202U (ko) * 1993-01-28 1994-08-19 최철락 자동차 외부 감시장치
JP2010064750A (ja) * 2009-12-25 2010-03-25 Fujitsu Ten Ltd 運転支援装置

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101511610B1 (ko) * 2013-07-23 2015-04-13 현대오트론 주식회사 초음파 센서를 이용한 avm 시스템 및 어라운드뷰 이미지 제공 방법
KR20160095914A (ko) * 2015-02-04 2016-08-12 경일대학교산학협력단 차량 승하차 안전제어 시스템
KR20180074093A (ko) * 2016-12-23 2018-07-03 삼성전기주식회사 어라운드 뷰 영상 제공 시스템
KR20190078703A (ko) * 2017-12-14 2019-07-05 현대자동차주식회사 차량 버튼 디스플레이 시스템 및 그 방법
WO2019124834A1 (ko) * 2017-12-21 2019-06-27 삼성전자 주식회사 주행 컨텍스트에 기반한 디스플레이 제어 방법 및 장치
KR20190084164A (ko) * 2017-12-21 2019-07-16 삼성전자주식회사 주행 컨텍스트에 기반한 디스플레이 제어 방법 및 장치
EP3712001A4 (en) * 2017-12-21 2021-01-06 Samsung Electronics Co., Ltd. METHOD AND DEVICE FOR CONTROLLING A DISPLAY ON THE BASIS OF DRIVING CONTEXT
US11718175B2 (en) 2017-12-21 2023-08-08 Samsung Electronics Co., Ltd Method and device for controlling display on basis of driving context
KR20230010111A (ko) * 2021-07-08 2023-01-18 이하준 차량의 후방영상 표시제어장치

Also Published As

Publication number Publication date
KR101305310B1 (ko) 2013-09-06

Similar Documents

Publication Publication Date Title
JP5099451B2 (ja) 車両周辺確認装置
CA3069114C (en) Parking assistance method and parking assistance device
KR101305310B1 (ko) 차량의 어라운드 뷰 제공 방법
JP4883977B2 (ja) 車両用画像表示装置
JP5765995B2 (ja) 画像表示システム
JP7069548B2 (ja) 周辺監視装置
JP6856126B2 (ja) 駐車制御方法及び駐車制御装置
CN110621550B (zh) 泊车控制方法以及泊车控制装置
JPWO2018235274A1 (ja) 駐車制御方法及び駐車制御装置
KR101270602B1 (ko) 차량 주변 영상 제공 방법
JP2018133072A (ja) 情報処理装置およびプログラム
US10872249B2 (en) Display control device, display control system, display control method, and non-transitory storage medium
KR20120130456A (ko) 차량의 어라운드 뷰 제공 방법
JP6673191B2 (ja) 警報出力装置
JP2010033106A (ja) 運転者支援装置、運転者支援方法および運転者支援処理プログラム
JP2010116086A (ja) 車載用表示装置、表示方法および表示プログラム
JP2011175508A (ja) 駐車支援システム
JPWO2016042713A1 (ja) 電子ミラー装置
JP7006460B2 (ja) 車両用表示制御装置、車両用表示システム、車両用表示制御方法、およびプログラム
WO2016042733A1 (ja) 電子ミラー装置
JP2007282098A (ja) 画像処理装置及び画像処理プログラム
JPWO2018042976A1 (ja) 画像生成装置、画像生成方法、記録媒体、および画像表示システム
KR20120130449A (ko) 차량의 주차 보조 영상 제공 방법 및 그의 제공 시스템
JP2007025739A (ja) 車両用画像表示装置
JP6552285B2 (ja) 車載表示装置及び車両後方映像表示方法

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E90F Notification of reason for final refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20160719

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20170704

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20190626

Year of fee payment: 7