KR20210082999A - 차량의 주변 감시 장치 - Google Patents

차량의 주변 감시 장치 Download PDF

Info

Publication number
KR20210082999A
KR20210082999A KR1020190175540A KR20190175540A KR20210082999A KR 20210082999 A KR20210082999 A KR 20210082999A KR 1020190175540 A KR1020190175540 A KR 1020190175540A KR 20190175540 A KR20190175540 A KR 20190175540A KR 20210082999 A KR20210082999 A KR 20210082999A
Authority
KR
South Korea
Prior art keywords
image
vehicle
display area
area
monitoring
Prior art date
Application number
KR1020190175540A
Other languages
English (en)
Inventor
배민수
최재현
김창주
홍현국
장석준
김진산
예정열
권석근
이민희
문지환
최수영
신영남
Original Assignee
주식회사 에스엘미러텍
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 에스엘미러텍 filed Critical 주식회사 에스엘미러텍
Priority to KR1020190175540A priority Critical patent/KR20210082999A/ko
Priority to US17/129,419 priority patent/US20210203890A1/en
Priority to CN202011516910.7A priority patent/CN113051997A/zh
Priority to DE102020134814.2A priority patent/DE102020134814A1/de
Publication of KR20210082999A publication Critical patent/KR20210082999A/ko

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/22Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
    • B60R1/23Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
    • B60R1/26Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view to the rear of the vehicle
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/02Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Arrangement of adaptations of instruments
    • B60K35/22
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/22Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
    • B60R1/28Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with an adjustable field of view
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/90Determination of colour characteristics
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G09G5/38Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory with means for controlling the display position
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/272Means for inserting a foreground image in a background image, i.e. inlay, outlay
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/183Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2370/00Details of arrangements or adaptations of instruments specially adapted for vehicles, not covered by groups B60K35/00, B60K37/00
    • B60K2370/15Output devices or features thereof
    • B60K2370/152Displays
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/20Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of display used
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • B60R2300/306Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing using a re-scaling of images
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/802Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for monitoring and displaying vehicle exterior blind spot views
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/8046Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for replacing a rear-view mirror system
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/146Display means
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00Aspects of interface with display user
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2380/00Specific applications
    • G09G2380/10Automotive applications

Abstract

본 발명은 차량의 주변 감시 장치에 관한 것으로서, 보다 상세하게는 운전자가 차량 주변을 용이하게 감시할 수 있도록 차량 주변의 영상을 제공하는 차량의 주변 감시 장치에 관한 것이다.
본 발명의 실시예에 따른 차량의 주변 감시 장치는, 차량 주변의 적어도 하나의 방향에 대한 원 영상을 획득하는 영상 획득부; 상기 원 영상 중 설정 영역에 대응되는 감시 영상을 추출하는 영상 처리부; 및 상기 추출된 감시 영상을 출력하는 영상 출력부를 포함하며, 상기 영상 처리부는, 상기 원 영상과 상기 감시 영상 사이의 상대적인 위치 관계를 나타내는 가이드 맵이 상기 감시 영상 상에 표시되도록 할 수 있다.

Description

차량의 주변 감시 장치{Environment monitoring apparatus for vehicle}
본 발명은 차량의 주변 감시 장치에 관한 것으로서, 보다 상세하게는 운전자가 차량 주변을 용이하게 감시할 수 있도록 차량 주변의 영상을 제공하는 차량의 주변 감시 장치에 관한 것이다.
일반적으로 차량에는 운전자가 차량의 후방 시야를 확보할 수 있도록 차량 내부에 인사이드 미러가 설치되고, 차량의 양측에 아웃 사이드 미러가 설치되어 있으며, 운전자는 인사이드 미러나 아웃 사이드 미러에 의해 확보되는 시야에 따라 차량의 후진, 추월 및 차선 변경 등과 같은 상황에서 주변 차량이나 보행자 등을 파악하게 된다.
최근에는 차량이 주행할 때 공기 저항을 감소시키고 외부 충격에 의한 파손 가능성이 감소되도록 차량에 아웃 사이드 미러 대신 카메라를 설치하고, 카메라에 의해 획득된 영상이 차량 내부에 구비된 디스플레이 장치를 통해 디스플레이되도록 하여 운전자로 하여금 차량의 주변 상황을 용이하게 파악할 수 있도록 하고 있다.
일반적으로 디스플레이 장치를 통해 디스플레이되는 영상은 카메라에 의해 획득된 영상 중 일부 영역이 추출되어 사용되며, 운전자는 카메라에 의해 획득된 영상 중 추출되는 영역을 변경하여 최적의 시야를 확보하게 되나, 카메라에 의해 획득되는 영상과 추출되는 영역 사이의 상대적인 위치 관계를 파악할 수 없기 때문에 원하는 영역이 추출될 때까지 반복적으로 추출되는 영역을 변경하는 것이 요구된다.
따라서, 운전자가 카메라에 의해 획득된 영상과 추출되는 영역 사이의 상대적인 위치 관계를 용이하게 파악할 수 있도록 하는 방안이 요구되고 있다.
공개특허공보 제10-2009-0031998호(2009.03.31)
본 발명은 상기한 문제점을 해결하기 위해 고안된 것으로서, 본 발명의 이루고자 하는 기술적 과제는 운전자가 카메라에 의해 획득되는 영상과 카메라에 의해 획득되는 영상으로부터 추출되는 영역 사이의 상대적인 위치 관계를 용이하게 파악할 수 있도록 하는 차량의 주변 감시 장치를 제공하는 것이다.
본 발명의 과제들은 이상에서 언급한 과제로 제한되지 않으며, 언급되지 않은 또 다른 과제들은 아래의 기재로부터 당업자에게 명확하게 이해될 수 있을 것이다.
상기 목적을 달성하기 위하여, 본 발명의 실시예에 따른 차량의 주변 감시 장치는, 차량 주변의 적어도 하나의 방향에 대한 원 영상을 획득하는 영상 획득부; 상기 원 영상 중 설정 영역에 대응되는 감시 영상을 추출하는 영상 처리부; 및 상기 추출된 감시 영상을 출력하는 영상 출력부를 포함하며, 상기 영상 처리부는, 상기 원 영상과 상기 감시 영상 사이의 상대적인 위치 관계를 나타내는 가이드 맵이 상기 감시 영상 상에 표시되도록 할 수 있다.
상기 가이드 맵은, 상기 원 영상에 대응되는 제1 표시 영역; 및 상기 감시 영상에 대응되는 제2 표시 영역을 포함하며, 상기 영상 처리부는, 상기 설정 영역의 위치에 따라 상기 제2 표시 영역이 상기 제1 표시 영역 내에서 이동되어 표시되도록 할 수 있다.
상기 제1 표시 영역은, 차체 라인을 포함할 수 있다.
상기 제1 표시 영역은, 상기 설정 영역의 위치가 조정되는 시점에서 상기 원 영상의 캡쳐 이미지가 표시될 수 있다.
상기 제1 표시 영역은, 상기 원 영상이 출력될 수 있다.
상기 영상 처리부는, 상기 제1 표시 영역 및 상기 제2 영역이 가로 방향 및 세로 방향 중 적어도 하나의 화각으로 표시되도록 할 수 있다.
상기 제1 표시 영역 및 상기 제2 표시 영역은, 이미지의 속성이 서로 다를 수 있다.
상기 이미지 속성은, 이미지의 색상, 채도, 명도, 투명도 중 적어도 하나를 포함할 수 있다.
상기 설정 영역의 위치를 조정하기 위한 조작부를 더 포함하며, 상기 영상 처리부는, 상기 조작부의 조작 신호 입력 시 상기 가이드 맵이 상기 감시 영역 상에 표시되도록 할 수 있다.
상기 영상 처리부는, 일정 시간 동안 상기 조작 신호 미입력 시 상기 감시 영상 상에서 상기 가이드 맵이 제거되도록 할 수 있다.
기타 실시예들의 구체적인 사항들은 상세한 설명 및 도면들에 포함되어 있다.
상기와 같은 본 발명의 차량의 주변 감시 장치에 따르면 다음과 같은 효과가 하나 혹은 그 이상 있다.
영상 획득부에 의해 획득된 원 영상 중 감시 영상에 대응되는 설정 영역의 위치에 따라 원 영상과 설정 영역의 상대적인 위치 관계가 표시되도록 하여 운전자의 편의가 향상될 수 있는 효과가 있다.
본 발명의 효과들은 이상에서 언급한 효과들로 제한되지 않으며, 언급되지 않은 또 다른 효과들은 청구범위의 기재로부터 당업자에게 명확하게 이해될 수 있을 것이다.
도 1은 본 발명의 실시예에 따른 차량의 주변 감시 장치가 도시된 블록도.
도 2는 본 발명의 실시예에 따른 영상 획득부가 설치된 차량이 도시된 개략도.
도 3은 본 발명의 실시예에 따른 영상 획득부의 가로 방향의 화각이 도시된 개략도.
도 4는 본 발명의 실시예에 따른 영상 획득부의 세로 방향의 화각이 도시된 개략도.
도 5는 본 발명의 실시예에 따른 감시 영상에 대응되는 설정 영역이 도시된 개략도.
도 6은 본 발명의 실시예에 따른 설정 영역의 가로 방향의 추출 각도가 도시된 개략도.
도 7은 본 발명의 실시예에 따른 설정 영역의 세로 방향의 추출 각도가 도시된 개략도.
도 8은 본 발명의 실시예에 따른 영상 출력부의 위치가 도시된 개략도.
도 9는 본 발명의 실시예에 따른 원 영상 중 설정 영역의 위치가 도시된 개략도.
도 10은 본 발명의 실시예에 따른 가이드 맵이 도시된 개략도.
도 11은 본 발명의 실시예에 따른 제1 표시 영역 내에서 위치가 이동되는 제2 표시 영역이 도시된 개략도.
도 12 내지 도 15는 본 발명의 다른 실시예에 따른 가이드 맵이 도시된 개략도.
본 발명의 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다. 그러나 본 발명은 이하에서 개시되는 실시예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 수 있으며, 단지 본 실시예들은 본 발명의 개시가 완전하도록 하고, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 발명은 청구항의 범주에 의해 정의될 뿐이다. 명세서 전체에 걸쳐 동일 참조 부호는 동일 구성 요소를 지칭한다.
따라서, 몇몇 실시예에서, 잘 알려진 공정 단계들, 잘 알려진 구조 및 잘 알려진 기술들은 본 발명이 모호하게 해석되는 것을 피하기 위하여 구체적으로 설명되지 않는다.
본 명세서에서 사용된 용어는 실시예들을 설명하기 위한 것이며 본 발명을 제한하고자 하는 것은 아니다. 본 명세서에서, 단수형은 문구에서 특별히 언급하지 않는 한 복수형도 포함한다. 명세서에서 사용되는 포함한다(comprises) 및/또는 포함하는(comprising)은 언급된 구성요소, 단계 및/또는 동작 이외의 하나 이상의 다른 구성요소, 단계 및/또는 동작의 존재 또는 추가를 배제하지 않는 의미로 사용한다. 그리고, "및/또는"은 언급된 아이템들의 각각 및 하나 이상의 모든 조합을 포함한다.
또한, 본 명세서에서 기술하는 실시예들은 본 발명의 이상적인 예시도인 사시도, 단면도, 측면도 및/또는 개략도들을 참고하여 설명될 것이다. 따라서, 제조 기술 및/또는 허용 오차 등에 의해 예시도의 형태가 변형될 수 있다. 따라서, 본 발명의 실시예들은 도시된 특정 형태로 제한되는 것이 아니라 제조 공정에 따라 생성되는 형태의 변화도 포함하는 것이다. 또한, 본 발명에 도시된 각 도면에 있어서 각 구성 요소들은 설명의 편의를 고려하여 다소 확대 또는 축소되어 도시된 것일 수 있다.
이하, 본 발명의 실시예들에 의하여 차량의 주변 감시 장치를 설명하기 위한 도면들을 참고하여 본 발명에 대해 설명하도록 한다.
도 1은 본 발명의 실시예에 따른 차량의 주변 감시 장치가 도시된 블럭도이다.
도 1을 참조하면, 본 발명의 실시예에 따른 차량의 카메라 모니터링 장치(1)는 영상 획득부(100), 영상 처리부(200), 영상 출력부(300) 및 조작부(400)를 포함할 수 있다.
영상 획득부(100)는 본 발명의 차량의 주변 감시 장치(1)가 아웃 사이드 미러의 역할을 대체할 수 있도록 도 2와 같이 차량의 양측 프론트 도어나 프론트 도어 부근에 설치되어 차량의 후방이나 측후방에 대한 영상을 획득하는 경우를 예를 들어 설명하기로 하나, 이에 한정되지 않고, 영상 획득부(100)는 운전자의 감시가 필요한 적어도 하나의 방향에 대한 영상을 획득할 수 있다.
본 발명의 실시예에서는 차량의 양측 중 운전석측에 설치되는 영상 획득부(100)를 예를 들어 설명하기로 하며, 운전석 반대측에 설치된 영상 획득부(100)도 설치 위치에서 일부 차이가 있을 뿐 유사하게 적용될 수 있다.
영상 획득부(100)는 운전자의 감시가 필요한 시야 범위에 따라 협각 카메라나 광각 카메라 등과 같이 다양한 화각을 가지는 적어도 하나의 카메라가 사용될 수 있으며, 본 발명의 실시예에서 영상 획득부(100)는 도 3과 같이 가로 방향으로 θ1의 화각을 가지며, 도 4와 같이 세로 방향으로 θ2의 화각을 가지는 영상을 획득하는 경우를 예를 들어 설명하기로 한다.
영상 획득부(100)에 의해 획득되는 영상의 크기는 가로 방향의 화각(θ1) 및 세로 방향의 화각(θ2)에 의해 정의될 수 있으며, 이하 본 발명의 실시예에서 영상 획득부(100)에 의해 획득되는 영상을 "원 영상"이라 칭하기로 한다.
영상 처리부(200)는 도 5와 같이 원 영상(A) 중 설정 영역(A')에 대응되는 감시 영상을 추출하고, 추출된 감시 영상이 영상 출력부(300)를 통해 출력되도록 할 수 있다.
설정 영역(A')은 감시 영상 내에 포함되는 주변 차량, 보행자, 고정 시설물 등과 같은 객체의 크기에 따라 결정될 수 있으며, 운전자가 감시 영상 내의 객체의 크기나 객체와의 거리 등에 대하여 오인이 방지되도록 하는 배율을 가지도록 하는 크기의 설정 영역(A')이 결정될 수 있다.
즉, 설정 영역(A')이 커질수록 감시 영상 내의 객체의 크기가 작아지게 되어 배율이 낮아지게 되고, 설정 영역(A')이 커질수록 감시 영상 내의 객체의 크기가 커지게 되어 배율이 높아지게 되며, 운전자가 감시 영상 내의 객체의 크기나 객체와의 거리를 적절하게 인지할 수 있는 배율을 가지도록 설정 영역(A')이 결정될 수 있는 것이다.
한편, 원 영상(A)은 설정 영역(A')에 비하여 큰 크기를 가지게 되는데, 이는 원 영상(A)의 테두리로 갈수록 영상 왜곡이 발생할 가능성이 높기 때문에 감시 영상에서 영상 왜곡이 나타나지 않도록 하고, 운전자의 취향에 따라 설정 영역(A')을 조정할 수 있도록 하기 위함이다.
설정 영역(A')은 도 6 및 도 7과 같이 가로 방향의 추출 각도(ah) 및 세로 방향의 추출 각도(av)에 의해 정의될 수 있으며, 가로 방향의 추출 각도(ah) 및 세로 방향의 추출 각도(av)에 따라 설정 영역(A')의 크기가 결정될 수 있다.
다시 말해서, 가로 방향의 추출 각도(ah) 및 세로 방향의 추출 각도(av) 중 적어도 하나가 커질수록 설정 영역(A')의 크기는 가로 방향 및 세로 방향 중 적어도 하나의 방향으로 증가하게 되고, 가로 방향의 추출 각도(ah) 및 세로 방향의 추출 각도(av) 중 적어도 하나가 작아질수록 설정 영역(A')의 크기는 가로 방향 및 세로 방향 중 적어도 하나의 방향으로 감소하게 되는 것이다.
이때, 가로 방향의 추출 각도(ah) 및 세로 방향의 추출 각도(av)는 영상 출력부(300)와 운전자의 아이포인트 사이의 거리, 각도 등에 따라 요구되는 배율을 가지도록 결정될 수 있다.
영상 출력부(300)는 감시 영상이 출력되는 소정 크기의 화면(310)을 포함할 수 있으며, 본 발명의 실시예에서는 영상 획득부(100)가 차량 양측에 각각 설치되는 경우를 예를 들어 설명하고 있으므로, 영상 출력부(300)도 운전석 및 운전석 반대측에 각각 설치될 수 있고, 일 예로 영상 출력부(300)는 대시 보드 양측의 A 필러 부근에 각각 설치될 수 있다.
조작부(400)는 운전자에 의해 설정 영역(A')의 위치의 조정이 가능하게 하는 역할을 할 수 있으며, 조작부(400)는 버튼, 스위치, 조이스틱 등의 형태로 차량에 구비될 수 있다.
예를 들어, 운전자는 현재 영상 출력부(300)를 통해 출력되는 감시 영상에서 차량 측방에 대한 시야를 더 확보하고자 하거나 감시 영상에서 차체에 대한 비중을 낮추고자 하는 경우 조작부(400)를 통해 설정 영역(A')의 위치를 조정할 수 있게 되는 것이다.
도 9는 본 발명의 실시예에 따른 조작부에 의해 위치가 조정되는 설정 영역이 도시된 개략도이다.
도 9를 참조하면, 운전자는 전술한 도 5의 설정 영역(A')을 기준으로 조작부(400)를 통해 설정 영역(A')의 위치를 상하좌우 방향으로 이동시킬 수 있으며, 영상 처리부(200)는 원 영상(A)으로부터 운전자에 의해 위치가 이동된 설정 영역(A')에 대응되는 감시 영상을 추출할 수 있게 되는 것이다.
이때, 도 9에서는 설정 영역(A')의 위치가 상하좌우 방향으로 이동되는 경우를 예를 들어 설명하고 있으나, 이에 한정되지 않고, 설정 영역(A')의 둘 이상의 방향이 조합된 대각선 방향으로 이동될 수도 있다.
전술한 바와 같이, 조작부(400)를 통해 운전자가 설정 영역(A')의 위치를 조정하는 경우, 운전자는 실제 원 영상(A)에 대한 설정 영역(A')의 상대적인 위치를 알기 어렵기 때문에 설정 영역(A')의 일측 테두리가 원 영상(A)의 일측 테두리에 위치하여 설정 영역(A')이 위치 조정이 더 이상 가능하지 않는 경우라도 조작부(400)를 통해 설정 영역(A')의 위치를 이동시키는 경우가 발생하여 불필요한 조작이 발생하게 되고, 이로 인해 운전자의 편의가 저하될 가능성이 있다.
다시 말해서, 운전자가 원 영상(A)과 설정 영역(A')의 사이의 상대적인 위치 관계를 알지 못하는 경우 설정 영역(A')의 위치를 더 이상 조정하지 못하는 경우에도 운전자에 의한 불필요한 조작이 입력되는 상황이 빈번하게 발생될 수 있는 것이다.
이를 위해, 본 발명의 실시예에서는 운전자가 원 영상(A)과 설정 영역(A') 사이의 상대적인 위치 관계를 알 수 있는 정보가 감시 영상 상에 표시되도록 하여 운전자의 편의를 도모할 수 있게 된다.
도 10은 본 발명의 실시예에 따른 감시 영상 상에 표시되는 가이드 맵이 도시된 개략도이다.
도 10을 참조하면, 영상 처리부(200)는 영상 출력부(300)를 통해 감시 영상이 이 출력될 때 감시 영상 상에 원 영상(A) 내에서 감시 영상에 대응되는 설정 영역(A')의 위치를 나타내는 가이드 맵(500)이 표시되도록 할 수 있다.
본 발명의 실시예에서 영상 처리부(200)는 조작부(400)에 의한 조작 신호 입력 시 가이드 맵(500)을 감시 영상에 합성하여 감시 영상 상에 가이드 맵(500)이 표시되도록 하고, 일정 시간 동안 조작 신호 미입력시 가이드 맵(500)이 표시되지 않도록 하는 경우를 예를 들어 설명하기로 하나, 이에 한정되지 않고, 조작 신호 미입력 시에도 가이드 맵(500)이 표시되도록 할 수도 있다.
가이드 맵(500)은 원 영상(A)을 나타내는 제1 표시 영역(510)과 감시 영상에 대응되는 설정 영역(A')을 나타내는 제2 표시 영역(520)을 포함할 수 있으며, 제2 표시 영역(520)은 도 11과 같이 운전자가 조작부(400)를 조작함에 따라 제1 표시 영역(510) 내에서 설정 영역(A')에 대응되는 위치로 이동되도록 표시될 수 있다.
이때, 도 11은 전술한 도 9와 같이 설정 영역(A')이 상하좌우 방향으로 이동되는 경우 제1 표시 영역(510) 내에서 제2 표시 영역(520)이 상하좌우 방향으로 이동되는 경우의 일 예로서, 이에 한정되지 않고 설정 영역(A')의 이동 방향에 따라 제2 표시 영역(520)은 상하좌우 방향 뿐만 아니라 대각선 방향으로도 이동될 수 있다.
제1 표시 영역(510) 및 제2 표시 영역(520)은 운전자의 시인성 확보를 위하여 서로 다른 이미지 속성, 예를 들어 색상, 채도, 명도, 투명도 등을 가질 수 있으며, 운전자는 가이드 맵(500)을 통해 원 영상(A)을 기준으로 설정 영역(A')의 위치를 확인하면서 조작부(400)를 조작하여 설정 영역(A')의 위치를 조정할 수 있게 된다.
전술한 실시예에서는 제1 표시 영역(510) 및 제2 표시 영역(520)이 서로 다른 이미지 속성을 가지는 경우를 예를 들어 설명하고 있으나, 이에 한정되지 않고, 도 12와 같이 제1 표시 영역(510)에 운전자가 조작부(400)를 조작하는 시점에서의 원 영상(A)의 캡쳐 이미지가 표시되어 운전자가 제2 표시 영역(520)의 위치를 보다 직관적으로 인지할 수 있도록 할 수도 있다.
따라서, 운전자는 설정 영역(A')에서 차체가 차지하는 비중을 확인하고, 운전자의 취향에 따라 설정 영역(A')에서 차체가 차지하는 비중이 높거나 낮아지도록 조작부(400)를 조작하여 전술한 도 11과 같이 제2 표시 영역(520)의 위치를 조정할 수 있다.
이때, 도 12에서는 제1 표시 영역(510)에 캡쳐 이미지가 표시되는 경우를 예를 들어 설명하고 있으나, 이에 한정되지 않고 제1 표시 영역(510)에 원 영상(A)이 PIP(Picture In Picture) 영상로 표시되도록 하여 원 영상(A)이 실시간으로 달라지는 것을 확인하면서 설정 영역(A')의 위치를 조정할 수도 있다.
전술한 실시예에서는 캡처 이미지가 PIP 영상을 통해 운전자가 차체 라인을 확인하면서 설정 영역(A')의 위치를 조정하는 경우를 예를 들어 설명하고 있으나, 이에 한정되지 않고, 도 13과 같이 제1 표시 영역(510)에 차체 라인이 표시되도록 할 수도 있다.
전술한 실시예들에서는 원 영역(A)과 설정 영역(A')의 상대적인 위치 관계를 제1 표시 영역(510) 내에서 위치가 이동되는 제2 표시 영역(520)을 통해 표시하는 경우를 예를 들어 설명하고 있으나, 이에 한정되지 않고, 가로 방향의 화각과 세로 방향의 화각으로 가이드 맵(500)이 표시될 수도 있다.
예를 들어, 운전자가 조작부(400)를 통해 가로 방향으로 설정 영역(A')의 위치를 조정하는 경우에는 도 14와 같이 가이드 맵(500)이 원 영상(A)의 가로 방향의 화각(531)에 대한 설정 영역(A')의 가로 방향(532)의 화각으로 표시될 수도 있고, 운전자가 세로 방향으로 설정 영역(A')의 위치를 조정하는 경우에는 도 15와 같이 가이드 맵(500)이 원 영상(A)의 세로 방향의 화각(541)에 대한 설정 영역(A')의 세로 방향의 화각(542)으로 표시될 수도 있는 것이다.
전술한 도 14 및 도 15는 운전석측에 설치되는 영상 획득부(100)에 의해 획득된 원 영상(A)에서 설정 영역(A')의 위치를 조정하는 경우의 일 예로서, 가이드 맵(500)이 차량 아이콘(V)을 기준으로 운전석측에 표시되는 경우를 예를 들어 설명하고 있으나, 이에 한정되지 않고, 운전석 반대측에 설치되는 영상 획득부에 의해 획득된 원 영상에서 설정 영역의 위치를 조정하는 경우에는 가이드 맵(500)이 차량 아이콘을 기준으로 운전석 반대측에 표시될 수 있다.
또한, 전술한 도 14 및 도 15에서는 가로 방향의 화각과 세로 방향의 화각을 나타내는 가이드 맵(500)이 각각 표시되는 경우를 예를 들어 설명하고 있으나, 이에 한정되지 않고, 운전자가 가로 방향 및 세로 방향 중 어느 하나로 설정 영역(A')의 위치를 조정하는 경우 가로 방향의 화각과 세로 방향의 화각을 나타내는 가이드 맵(500)이 함께 표시될 수도 있다.
전술한 바와 같이 본 발명의 차량의 주변 감지 장치(1)는 영상 획득부(100)에 획득되는 원 영상(A)과 운전자가 영상 출력부(300)를 통해 출력되는 감시 영상에 대응되는 설정 영역(A') 사이의 상대적인 위치 관계를 가이드 맵(500)를 통해 확인하면서 설정 영역(A')의 위치를 조정하기 때문에 운전자의 편의가 향상될 수 있게 된다.
본 발명이 속하는 기술분야의 통상의 지식을 가진 자는 본 발명이 그 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 실시될 수 있다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해해야만 한다. 본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구의 범위에 의하여 나타내어지며, 특허청구의 범위의 의미 및 범위 그리고 그 균등 개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.
100: 영상 입력부
200: 영상 처리부
300: 영상 출력부
400: 조작부
500: 가이드 맵

Claims (10)

  1. 차량 주변의 적어도 하나의 방향에 대한 원 영상을 획득하는 영상 획득부;
    상기 원 영상 중 설정 영역에 대응되는 감시 영상을 추출하는 영상 처리부; 및
    상기 추출된 감시 영상을 출력하는 영상 출력부를 포함하며,
    상기 영상 처리부는,
    상기 원 영상과 상기 감시 영상 사이의 상대적인 위치 관계를 나타내는 가이드 맵이 상기 감시 영상 상에 표시되도록 하는 차량의 주변 감시 장치.
  2. 제 1 항에 있어서,
    상기 가이드 맵은,
    상기 원 영상에 대응되는 제1 표시 영역; 및
    상기 감시 영상에 대응되는 제2 표시 영역을 포함하며,
    상기 영상 처리부는,
    상기 설정 영역의 위치에 따라 상기 제2 표시 영역이 상기 제1 표시 영역 내에서 이동되어 표시되도록 하는 차량의 주변 감시 장치.
  3. 제 2 항에 있어서,
    상기 제1 표시 영역은,
    차체 라인을 포함하는 차량의 주변 감시 장치.
  4. 제 2 항에 있어서,
    상기 제1 표시 영역은,
    상기 설정 영역의 위치가 조정되는 시점에서 상기 원 영상의 캡쳐 이미지가 표시되는 차량의 주변 감시 장치.
  5. 제 2 항에 있어서,
    상기 제1 표시 영역은,
    상기 원 영상이 출력되는 차량의 주변 감시 장치.
  6. 제 2 항에 있어서,
    상기 영상 처리부는,
    상기 제1 표시 영역 및 상기 제2 영역이 가로 방향 및 세로 방향 중 적어도 하나의 화각으로 표시되도록 하는 차량의 주변 감시 장치.
  7. 제 2 항에 있어서,
    상기 제1 표시 영역 및 상기 제2 표시 영역은,
    이미지의 속성이 서로 다른 차량의 주변 감시 장치.
  8. 제 7 항에 있어서,
    상기 이미지 속성은,
    이미지의 색상, 채도, 명도, 투명도 중 적어도 하나를 포함하는 차량의 주변 감시 장치.
  9. 제 1 항에 있어서,
    상기 설정 영역의 위치를 조정하기 위한 조작부를 더 포함하며,
    상기 영상 처리부는,
    상기 조작부의 조작 신호 입력 시 상기 가이드 맵이 상기 감시 영역 상에 표시되도록 하는 차량의 주변 감시 장치.
  10. 제 9 항에 있어서,
    상기 영상 처리부는,
    일정 시간 동안 상기 조작 신호 미입력 시 상기 감시 영상 상에서 상기 가이드 맵이 제거되도록 하는 차량의 주변 감시 장치.
KR1020190175540A 2019-12-26 2019-12-26 차량의 주변 감시 장치 KR20210082999A (ko)

Priority Applications (4)

Application Number Priority Date Filing Date Title
KR1020190175540A KR20210082999A (ko) 2019-12-26 2019-12-26 차량의 주변 감시 장치
US17/129,419 US20210203890A1 (en) 2019-12-26 2020-12-21 Apparatus for monitoring surrounding of vehicle
CN202011516910.7A CN113051997A (zh) 2019-12-26 2020-12-21 用于监视车辆周围环境的设备和非暂时性计算机可读介质
DE102020134814.2A DE102020134814A1 (de) 2019-12-26 2020-12-23 Vorrichtung zum Überwachen von Umgebungen eines Fahrzeugs

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020190175540A KR20210082999A (ko) 2019-12-26 2019-12-26 차량의 주변 감시 장치

Publications (1)

Publication Number Publication Date
KR20210082999A true KR20210082999A (ko) 2021-07-06

Family

ID=76310563

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020190175540A KR20210082999A (ko) 2019-12-26 2019-12-26 차량의 주변 감시 장치

Country Status (4)

Country Link
US (1) US20210203890A1 (ko)
KR (1) KR20210082999A (ko)
CN (1) CN113051997A (ko)
DE (1) DE102020134814A1 (ko)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114268728B (zh) * 2022-02-28 2022-07-08 杭州速玛科技有限公司 一种无人作业车辆协同记录被破坏现场的方法

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20090031998A (ko) 2007-09-26 2009-03-31 닛산 지도우샤 가부시키가이샤 차량용 주변 감시 장치 및 영상 표시 방법

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4902368B2 (ja) * 2007-01-24 2012-03-21 三洋電機株式会社 画像処理装置及び画像処理方法
WO2009141846A1 (ja) * 2008-05-19 2009-11-26 パナソニック株式会社 車両周囲監視装置および車両周囲監視方法
JP4840452B2 (ja) * 2009-01-22 2011-12-21 株式会社デンソー 車両周辺表示装置
JP5251947B2 (ja) * 2010-09-17 2013-07-31 日産自動車株式会社 車両用画像表示装置
JP5779959B2 (ja) * 2011-04-21 2015-09-16 株式会社リコー 撮像装置
WO2014156220A1 (ja) * 2013-03-28 2014-10-02 アイシン精機株式会社 周辺監視装置、及びプログラム
KR102395287B1 (ko) * 2017-05-08 2022-05-09 현대자동차주식회사 영상변환장치
US11363352B2 (en) * 2017-09-29 2022-06-14 International Business Machines Corporation Video content relationship mapping
JP7147255B2 (ja) * 2018-05-11 2022-10-05 トヨタ自動車株式会社 画像表示装置

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20090031998A (ko) 2007-09-26 2009-03-31 닛산 지도우샤 가부시키가이샤 차량용 주변 감시 장치 및 영상 표시 방법

Also Published As

Publication number Publication date
CN113051997A (zh) 2021-06-29
US20210203890A1 (en) 2021-07-01
DE102020134814A1 (de) 2021-07-01

Similar Documents

Publication Publication Date Title
JP4810953B2 (ja) 車両用死角映像表示装置
KR101544524B1 (ko) 차량용 증강현실 디스플레이 시스템 및 차량용 증강현실 디스플레이 방법
JP5013184B2 (ja) 運転支援装置及びコンピュータプログラム
JP5093611B2 (ja) 車両周辺確認装置
JP5874920B2 (ja) 車両周囲確認用モニター装置
US20170021770A1 (en) Image processing device, method for controlling image processing device, non-transitory computer readable medium recording program, and display device
JP2008301091A (ja) 車両用周辺監視装置
JP6196444B2 (ja) 周辺車の位置追跡装置及び方法
JP2014027353A (ja) 車両用視界支援装置
US20130300760A1 (en) Image display apparatus, image display program, and image display method
JP2004203126A (ja) 車両用周辺監視装置
US10829043B2 (en) Image display apparatus
JP2009183473A (ja) 視線方向検出装置及び視線方向検出方法
JP2003104145A (ja) 運転支援表示装置
JP2006044596A (ja) 車両用表示装置
WO2021208646A1 (zh) 车辆a柱显示组件的显示方法、系统、设备和存储介质
JP5718080B2 (ja) 車両用周辺監視装置
KR20210082999A (ko) 차량의 주변 감시 장치
DE102013203653A1 (de) Außenbildeinblendung für Center Display
JP5797155B2 (ja) リアウィンドウへの運転支援表示装置
JP2019116220A (ja) 車両用視認装置
JP2007290570A (ja) 車両用表示装置
CN112124434A (zh) 透明a柱的实现方法及装置
WO2016042714A1 (ja) 電子ミラー装置
WO2012164704A1 (ja) ヘッドアップディスプレイ、ヘッドアップディスプレイの画像表示方法及び画像表示プログラム