KR101295618B1 - Apparatus and method for displaying blind spot - Google Patents

Apparatus and method for displaying blind spot Download PDF

Info

Publication number
KR101295618B1
KR101295618B1 KR1020110132051A KR20110132051A KR101295618B1 KR 101295618 B1 KR101295618 B1 KR 101295618B1 KR 1020110132051 A KR1020110132051 A KR 1020110132051A KR 20110132051 A KR20110132051 A KR 20110132051A KR 101295618 B1 KR101295618 B1 KR 101295618B1
Authority
KR
South Korea
Prior art keywords
vehicle
image
display
blind spot
icon
Prior art date
Application number
KR1020110132051A
Other languages
Korean (ko)
Other versions
KR20130065268A (en
Inventor
박재홍
Original Assignee
주식회사 와이즈오토모티브
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 와이즈오토모티브 filed Critical 주식회사 와이즈오토모티브
Priority to KR1020110132051A priority Critical patent/KR101295618B1/en
Priority to EP11853246.4A priority patent/EP2660104B1/en
Priority to PCT/KR2011/010280 priority patent/WO2012091476A2/en
Priority to JP2013534836A priority patent/JP2013541915A/en
Priority to CN201180057909.5A priority patent/CN103237685B/en
Priority to US13/996,346 priority patent/US9418556B2/en
Publication of KR20130065268A publication Critical patent/KR20130065268A/en
Application granted granted Critical
Publication of KR101295618B1 publication Critical patent/KR101295618B1/en

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/20Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of display used
    • B60R2300/202Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of display used displaying a blind spot scene on the vehicle part responsible for the blind spot
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Mechanical Engineering (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Traffic Control Systems (AREA)

Abstract

카메라, 내비게이션, 거리뷰 수신기 중 적어도 하나를 포함하는 이미지 검출부가 제공하는 적어도 하나의 차량 주변 이미지를 디스플레이하여 차량이 주행함에 따라 차체에 가려져 운전자의 시야 확보가 어려운 차량의 전방, 후방 및 측면의 사각 지대 정보를 운전자에게 제공하는 사각 지대 표시 장치 및 방법을 제공하는 것을 목적으로 한다. 이를 위해 본 발명은 차량 주변 이미지를 검출하는 이미지 검출부; 상기 이미지 검출부가 임의의 시점 또는 상기 임의의 시점 이전에 촬영한 적어도 하나의 이미지를 디스플레이용 이미지로 출력하고, 상기 출력되는 디스플레이용 이미지에 차량의 현재 위치를 나타내는 차량 아이콘이 윤곽선 또는 반투명으로 표시되도록 하여 차량의 차체로 인해 가려진 사각지대가 디스플레이되도록 상기 디스플레이용 이미지와 차량 아이콘을 출력하는 제어부; 및 상기 제어부로부터 출력되는 디스플레이용 이미지와 차량 아이콘이 디스플레이되도록 하는 화면 표시부를 포함한다. 따라서 운전자의 시야 확보가 어려운 사각 지대를 확인할 수 있어서 운전자의 안전한 주행 환경을 제공할 수 있는 장점이 있다.Displaying at least one vehicle surrounding image provided by an image detector including at least one of a camera, navigation, and a distance view receiver to display a blind spot on the front, rear, and side surfaces of the vehicle that are hidden by the vehicle as the vehicle travels, thereby making it difficult for the driver to obtain a vision. It is an object of the present invention to provide a blind spot display device and method for providing zone information to a driver. To this end, the present invention is an image detection unit for detecting a vehicle surrounding image; The image detector outputs at least one image photographed at an arbitrary time point or before the predetermined time point as a display image, and the vehicle icon indicating the current position of the vehicle is displayed in outline or translucent on the output display image. A control unit for outputting the display image and the vehicle icon so that the blind spot hidden by the vehicle body is displayed; And a screen display unit for displaying a display image and a vehicle icon output from the controller. Therefore, it is possible to check a blind spot that is difficult to secure the driver's view has the advantage of providing a safe driving environment for the driver.

Description

사각 지대 표시 장치 및 방법 {APPARATUS AND METHOD FOR DISPLAYING BLIND SPOT}Blind spot display and method {APPARATUS AND METHOD FOR DISPLAYING BLIND SPOT}

본 발명은 차량의 주변 사각 지대를 표시하는 장치 및 방법에 관한 발명으로서, 더욱 상세하게는 카메라, 내비게이션, 거리뷰 수신기 등이 제공하는 적어도 하나의 차량 주변 이미지를 디스플레이하여 차량이 주행함에 따라 차체에 가려져 운전자의 시야 확보가 어려운 차량의 전방, 후방 및 측면의 사각 지대 정보를 운전자에게 제공하는 사각 지대 표시 장치 및 방법에 관한 것이다.
The present invention relates to an apparatus and method for displaying a blind spot around a vehicle, and more particularly, to display at least one vehicle surrounding image provided by a camera, a navigation device, a street view receiver, etc. The present invention relates to a blind spot display device and a method for providing blind spot information on the front, rear, and side surfaces of a vehicle that are obscured to secure a driver's view.

일반적으로, 차량은 차체에 장비한 엔진 등의 원동기를 동력원으로 하여 도로 등을 주행하며 사람이나 화물을 운반하거나 각종 작업을 수행하는 장치이고, 차량의 운전자는 주행 방향을 주시하면서 차량을 안전하게 운전한다. In general, a vehicle is a device for driving a road or the like and performing various tasks by driving a road, etc. using a prime mover such as an engine mounted on a vehicle body, and the driver of the vehicle drives the vehicle safely while watching the driving direction. .

그러나 일반적인 차량은 도 1에 나타낸 바와 같이 차량(10)의 구동에 필요한 엔진 등이 설치된 프론트부로 인하여 차량(10)에 인접한 전방부가 운전자의 시야에 들어오지 않아 사각지대(20)가 형성되며, 또한 차량(10)의 후미부에 형성된 트렁크로 인하여 후방 시야를 부분적으로 제한하는 사각지대(30)가 형성되고, 차량의 도어 등으로 인해 측면 시야를 부분적으로 제한하는 사각지대(40)가 형성된다.However, in the general vehicle, as shown in FIG. 1, a blind spot 20 is formed because the front part adjacent to the vehicle 10 does not enter the driver's field of view due to the front part in which the engine or the like necessary for driving the vehicle 10 is installed. Due to the trunk formed at the rear part of (10), the blind spot 30 is formed to partially limit the rear view, and the blind spot 40 is formed to partially limit the side view due to the door of the vehicle.

이러한 사각 지대(20, 30, 40)는 사물이 눈으로 보이지 아니하게 되는 각도에 위치한 영역을 말하는 것으로 운전자의 전방과 후방의 시야가 차량의 차체 일부에 의하여 제한되면 주행시에는 전방이 트인 도로를 주행하므로 운전에 장애를 유발하는 문제가 발생하지 않지만 차량의 주차시에는 차량(10) 주위에 여러 가지 장애물이 존재하게 되므로 사각 지대에 장애물이 위치하는 경우 운전자의 시야 확보가 곤란하여 주차에 어려움이 발생한다.The blind spots 20, 30, and 40 refer to areas located at angles at which objects are invisible, and when the driver's vision in front and rear is limited by a part of the vehicle's body, the vehicle travels on an open road when driving. Therefore, it does not cause a problem that causes a problem in driving, but when the vehicle is parked, there are various obstacles around the vehicle 10, so when the obstacle is located in the blind spot, it is difficult to secure the driver's field of vision, which causes difficulty in parking. do.

또한, 차량의 주차시에 운전이 익숙하지 못한 운전자는 전방 또는 후방의 장애물을 발견하지 못하여 장애물과 충돌하는 경우가 발생하고, 운전에 익숙한 운전자라 할지라도 운전자가 고개를 들어 전방 및 후방을 직접 살피면서 장애물을 피하여야 주차할 수 있지만 부분적인 시야 확보만 가능하기 때문에 주차가 매우 곤란한 문제점이 있다.In addition, a driver who is unfamiliar with driving when the vehicle is parked may not encounter an obstacle in front or rear, and may collide with an obstacle, and even if the driver is familiar with driving, the driver may lift his head and look directly ahead and backward. There is a problem that parking is very difficult because only obstacles can be parked, but only partial visibility can be secured.

또한, 운전자가 차량의 전방 또는 후방에 장애물이 존재하는 것을 인식하여도 운전 또는 주차에 집중하는 경우 인식된 장애물에 대한 기억을 일시적으로 잃어버려 장애물과의 충돌이 발생하는 문제점이 있다.
In addition, even when the driver recognizes that there is an obstacle in front of or behind the vehicle, when the driver concentrates on driving or parking, the memory of the recognized obstacle is temporarily lost and a collision with the obstacle occurs.

이러한 문제점을 해결하기 위하여, 본 발명은 카메라, 내비게이션, 거리뷰 수신기 중 적어도 하나를 포함하는 이미지 검출부가 제공하는 적어도 하나의 차량 주변 이미지를 디스플레이하여 차량이 주행함에 따라 차체에 가려져 운전자의 시야 확보가 어려운 차량의 전방, 후방 및 측면의 사각 지대 정보를 운전자에게 제공하는 사각 지대 표시 장치 및 방법을 제공하는 것을 목적으로 한다.
In order to solve this problem, the present invention displays at least one vehicle surrounding image provided by an image detector including at least one of a camera, a navigation, a distance view receiver to cover the vehicle body as the vehicle travels to secure the driver's view It is an object of the present invention to provide a blind spot display device and method for providing a driver with blind spot information on the front, rear, and side surfaces of a difficult vehicle.

상기한 목적을 달성하기 위하여 본 발명은 사각 지대 표시 장치로서, In order to achieve the above object, the present invention provides a blind spot display device,

차량 주변 이미지를 검출하는 이미지 검출부; 상기 이미지 검출부가 임의의 시점 또는 상기 임의의 시점 이전에 촬영한 적어도 하나의 이미지를 디스플레이용 이미지로 출력하고, 상기 출력되는 디스플레이용 이미지에 차량의 현재 위치를 나타내는 차량 아이콘이 윤곽선 또는 반투명으로 표시되도록 하여 차량의 차체로 인해 가려진 차량의 하부 및 사각지대와 카메라에 안 보이는 사각지대가 디스플레이되도록 상기 디스플레이용 이미지와 차량 아이콘을 출력하는 제어부; 및 상기 제어부로부터 출력되는 디스플레이용 이미지와 차량 아이콘이 디스플레이되도록 하는 화면 표시부를 포함하고, 상기 출력되는 디스플레이용 이미지는 상기 촬영된 이미지의 원본 이미지이거나 상기 원본 이미지의 시점을 변환한 이미지 중 어느 하나인 것을 특징으로 한다.An image detector detecting an image of the vehicle surroundings; The image detector outputs at least one image photographed at an arbitrary time point or before the predetermined time point as a display image, and the vehicle icon indicating the current position of the vehicle is displayed in outline or translucent on the output display image. A control unit for outputting the display image and the vehicle icon so that the lower and blind spots of the vehicle obscured by the vehicle body and the blind spot not visible to the camera are displayed; And a screen display unit for displaying a display image and a vehicle icon output from the controller, wherein the output display image is one of an original image of the photographed image or an image converted from a viewpoint of the original image. It is characterized by.

삭제delete

또한, 본 발명에 따른 상기 출력되는 디스플레이용 이미지는 상기 촬영된 이미지의 원본 이미지 또는 시점을 변환한 이미지 여러 개를 합성한 것이거나 여러 이미지의 일부를 조합한 것 중 어느 하나인 것을 특징으로 한다.In addition, the output image for display according to the present invention is characterized in that any one of a combination of a plurality of images or a combination of the original image or the viewpoint of the captured image.

또한, 본 발명에 따른 상기 차체로 인해 가려진 사각지대는 차량의 하부를 포함하는 것을 특징으로 한다.In addition, the blind spot obscured by the vehicle body according to the invention is characterized in that it comprises a lower portion of the vehicle.

또한, 본 발명에 따른 상기 이미지 검출부는 차량에 설치되어 차량의 주변 이미지를 촬영하여 제공하는 카메라, 상기 차량의 위치 정보를 검출하여 대응하는 위치의 주변 이미지를 제공하는 내비게이션 또는 상기 차량의 주변 도로 또는 건물에 설치된 카메라로부터 차량 주변의 이미지를 수신하여 제공하는 외부 정보 수신부 중 어느 하나인 것을 특징으로 한다.In addition, the image detection unit according to the present invention is installed in a vehicle for photographing and providing a peripheral image of the vehicle, the navigation to detect the location information of the vehicle to provide a peripheral image of the corresponding position or the surrounding road of the vehicle or Characterized in that it is any one of the external information receiving unit for receiving and providing the image of the vehicle surroundings from the camera installed in the building.

또한, 본 발명에 따른 상기 제어부는 차량의 외부에서 제공하는 차량의 위치 이동 정보 또는 차량으로부터 검출한 운전 제어 정보에 근거하여 상기 차량이 임의의 위치로부터 이동한 변위 정보를 연산하여 차량의 현재 위치 정보를 검출하는 것을 특징으로 한다.In addition, the control unit according to the present invention calculates the displacement information that the vehicle is moved from any position based on the position movement information of the vehicle provided from the outside of the vehicle or the driving control information detected from the vehicle current position information of the vehicle It is characterized in that for detecting.

또한, 본 발명에 따른 상기 제어부는 상기 차량의 이동에 따른 실시간 위치 정보를 반영하여, 디스플레이용 이미지상에 표시된 차량 아이콘의 위치가 변경되도록 표시하는 것을 특징으로 한다.In addition, the control unit according to the present invention is characterized by displaying the position of the vehicle icon displayed on the display image by reflecting the real-time location information according to the movement of the vehicle is changed.

또한, 본 발명에 따른 상기 차량 아이콘의 위치 변경은 디스플레이용 이미지상에 표시된 차량 아이콘의 위치 변경 표시가 디스플레이용 이미지를 고정하고 차량 아이콘의 위치만 변경하거나, 차량 아이콘의 위치를 고정하고 디스플레이용 이미지만 이동시키거나 또는 디스플레이용 이미지와 차량 아이콘의 위치를 모두 변경하는 것 중 어느 하나를 통해 변경하는 것을 특징으로 한다.In addition, the position change of the vehicle icon according to the present invention, the position change indication of the vehicle icon displayed on the display image to fix the display image and change the position of the vehicle icon only, or fix the position of the vehicle icon and display image Only by moving or changing the position of both the display image and the vehicle icon, characterized in that for changing.

또한, 본 발명은 사각지대 표시 방법으로서,In addition, the present invention is a blind spot display method,

a) 제어부가 임의의 시점 또는 상기 임의의 시점 이전에 이미지 검출부가 촬영한 적어도 하나의 이미지를 디스플레이용 이미지로 출력하는 단계; b) 상기 제어부가 차량의 외부에서 제공하는 차량의 위치 이동 정보 또는 차량으로부터 제공되는 운전 제어 정보에 근거하여 상기 차량이 임의의 위치로부터 이동한 변위 정보를 연산하여 차량의 현재 위치를 검출하는 단계; 및 c) 상기 제어부가 상기 b)단계에서 검출한 현재 위치와 변위 정보에 따라 차량의 현재 위치를 나타내는 차량 아이콘을 상기 a)단계에서 출력되는 디스플레이용 이미지상에 윤곽선 또는 반투명으로 표시되도록 하여 차량 주변의 사각지대와 차체로 인해 가려진 사각지대가 디스플레이되도록 상기 디스플레이용 이미지와 차량 아이콘을 출력하는 단계를 포함하고, 상기 a)단계의 디스플레이용 이미지는 상기 촬영된 이미지의 원본 이미지이거나 상기 원본 이미지의 시점을 변환한 이미지 중 어느 하나인 것을 특징으로 한다.a) outputting, by the controller, at least one image photographed by the image detector at an arbitrary viewpoint or before the arbitrary viewpoint, as an image for display; b) detecting, by the controller, a current position of the vehicle by calculating displacement information of the vehicle from an arbitrary position based on position movement information of the vehicle provided from the outside of the vehicle or driving control information provided from the vehicle; And c) allowing the control unit to display a vehicle icon indicating the current position of the vehicle according to the current position and displacement information detected in step b) in outline or translucent on the display image output in step a). And outputting the display image and the vehicle icon such that the blind spot hidden by the blind spot and the vehicle body is displayed, wherein the display image of step a) is an original image of the photographed image or a viewpoint of the original image. It is characterized in that any one of the converted image.

삭제delete

또한, 본 발명에 따른 상기 a)단계의 디스플레이용 이미지는 상기 촬영된 이미지의 원본 이미지 또는 시점을 변환한 이미지 여러 개를 합성한 것이거나 여러 이미지의 일부를 조합한 것 중 어느 하나인 것을 특징으로 한다.In addition, the display image of step a) according to the present invention is characterized in that any one of a combination of a plurality of images or a combination of the original image or the point of view conversion of the captured image, characterized in that do.

또한, 본 발명에 따른 상기 a)단계의 디스플레이용 이미지는 차량에 설치되어 차량의 주변 이미지를 촬영하여 제공하는 카메라, 상기 차량의 위치 정보를 검출하여 대응하는 위치의 주변 이미지를 제공하는 내비게이션 또는 상기 차량의 주변 도로 또는 건물에 설치된 카메라로부터 차량 주변의 이미지를 수신하여 제공하는 외부 정보 수신부 중 어느 하나로부터 촬영된 이미지인 것을 특징으로 한다.In addition, the display image of step a) according to the present invention is a camera installed in the vehicle to shoot and provide the surrounding image of the vehicle, the navigation to detect the position information of the vehicle and provide a peripheral image of the corresponding position or the Characterized in that the image is taken from any one of the external information receiving unit for receiving and providing an image of the surrounding of the vehicle from a camera installed in the road or building around the vehicle.

또한, 본 발명에 따른 상기 차량 아이콘은 상기 차량의 이동에 따른 실시간 위치 정보를 반영하여, 디스플레이용 이미지상에 표시된 차량 아이콘의 위치가 변경되도록 표시하는 것을 특징으로 한다.In addition, the vehicle icon according to the present invention is characterized by displaying so that the position of the vehicle icon displayed on the display image is reflected by reflecting real-time position information according to the movement of the vehicle.

또한, 본 발명에 따른 상기 차량 아이콘의 위치 변경은 디스플레이용 이미지상에 표시된 차량 아이콘의 위치 변경 표시가 디스플레이용 이미지를 고정하고 차량 아이콘의 위치만 변경하거나, 차량 아이콘의 위치를 고정하고 디스플레이용 이미지만 이동시키거나 또는 디스플레이용 이미지와 차량 아이콘의 위치를 모두 변경하는 것 중 어느 하나를 통해 변경하는 것을 특징으로 한다.
In addition, the position change of the vehicle icon according to the present invention, the position change indication of the vehicle icon displayed on the display image to fix the display image and change the position of the vehicle icon only, or fix the position of the vehicle icon and display image Only by moving or changing the position of both the display image and the vehicle icon, characterized in that for changing.

본 발명은 이미지 검출부가 제공하는 적어도 하나의 차량 주변 이미지를 디스플레이하여 차량이 주행함에 따라 차체에 가려져 운전자의 시야 확보가 어려운 차량의 전방, 후방 및 측면의 사각 지대 정보를 운전자에게 제공할 수 있는 장점이 있다.Advantageous Effects of the Invention The present invention provides an advantage of providing blind spot information on the front, rear, and side surfaces of a vehicle that is hidden by the vehicle body as the vehicle travels by displaying at least one vehicle surrounding image provided by the image detector. There is this.

또한, 본 발명은 운전자의 시야 확보가 어려운 사각 지대를 확인할 수 있어서 운전자의 안전한 주행 환경 제공과 안전한 주차 환경을 제공할 수 있는 장점이 있다.
In addition, the present invention can check the blind spots difficult to secure the driver's view has the advantage of providing a safe driving environment and a safe parking environment for the driver.

도 1 은 일반적인 차량의 전방 및 후방의 사각 지대를 나타낸 예시도.
도 2 는 본 발명에 따른 사각 지대 표시 장치의 일실시예를 나타낸 블록도.
도 3 은 본 발명에 따른 사각 지대 표시 장치의 동작 과정을 나타낸 예시도.
도 4 는 본 발명에 따른 사각 지대 표시 장치의 다른 동작 과정을 나타낸 예시도.
도 5 는 본 발명에 따른 사각 지대 표시 장치를 통해 검출되는 이미지상에 차량 아이콘을 표시하여 나타낸 예시도.
도 6 은 본 발명에 따른 사각 지대 표시 장치를 통해 검출되는 도로 이미지상에 차량 아이콘을 표시하여 나타낸 예시도.
도 7 은 본 발명에 따른 사각 지대 표시 과정을 나타낸 흐름도.
도 8 은 본 발명에 따른 사각 지대 표시 장치의 다른 실시예를 나타낸 블록도.
1 is an exemplary view showing the front and rear blind spots of a typical vehicle.
2 is a block diagram showing an embodiment of a blind spot display device according to the present invention;
3 is an exemplary view showing an operation process of a blind spot display device according to the present invention;
4 is an exemplary view showing another operation process of the blind spot display device according to the present invention;
5 is an exemplary view showing a vehicle icon on an image detected by the blind spot display device according to the present invention.
6 is an exemplary view showing a vehicle icon on a road image detected through the blind spot display device according to the present invention.
7 is a flowchart illustrating a blind spot display process according to the present invention.
8 is a block diagram showing another embodiment of a blind spot display device according to the present invention;

이하, 첨부된 도면을 참조하여 본 발명에 따른 사각 지대 표시 장치 및 방법의 바람직한 실시예를 상세하게 설명한다.
Hereinafter, exemplary embodiments of a blind spot display device and method according to the present invention will be described in detail with reference to the accompanying drawings.

(제 1 실시예)(Embodiment 1)

도 2는 본 발명에 따른 사각 지대 표시 장치의 일실시예를 나타낸 블록도이고, 도 3은 본 발명에 따른 사각 지대 표시 장치의 동작 과정을 나타낸 예시도이며, 도 4는 본 발명에 따른 사각 지대 표시 장치의 다른 동작 과정을 나타낸 예시도이고, 도 5는 본 발명에 따른 사각 지대 표시 장치를 통해 검출되는 이미지상에 차량 아이콘을 표시하여 나타낸 예시도이며, 도 6은 본 발명에 따른 사각 지대 표시 장치를 통해 검출되는 도로 이미지상에 차량 아이콘을 표시하여 나타낸 예시도이다.2 is a block diagram showing an embodiment of a blind spot display device according to the present invention, Figure 3 is an exemplary view showing an operation process of the blind spot display device according to the present invention, Figure 4 is a blind spot according to the present invention 5 is an exemplary view illustrating another operation process of the display device, and FIG. 5 is an exemplary view showing a vehicle icon on an image detected by the blind spot display device according to the present invention, and FIG. 6 is a blind spot display according to the present invention. Exemplary diagram showing a vehicle icon on the road image detected through the device.

도 2 내지 도 6에 나타낸 바와 같이, 본 발명에 따른 사각 지대 표시 장치(100)는 차량의 주변 이미지를 제공하는 이미지 검출수단으로서 제 1 카메라(110), 제 2 카메라(120) 및 제 n 카메라(150)를 구비하고, 제어부(130)와, 화면 표시부(140)를 포함하여 구성된다.2 to 6, the blind spot display device 100 according to the present invention is the first camera 110, the second camera 120 and the n-th camera as image detection means for providing a peripheral image of the vehicle And a control unit 130 and a screen display unit 140.

상기 제 1 카메라(110)는 차량(200)에 설치되어 주행중인 차량의 후방을 촬영한 이미지를 출력하는 구성으로서, 차량의 실내에 설치된 테일 램프, 후미등 또는 트렁크 도어 등에 설치된다.The first camera 110 is installed in the vehicle 200 and outputs an image of the rear of the vehicle being driven. The first camera 110 is installed in a tail lamp, a tail light or a trunk door installed in the interior of the vehicle.

상기 제 2 카메라(120)는 차량(200)에 설치되어 주행중인 차량의 전방을 촬영한 이미지를 출력하는 구성으로서, 차량의 실내에 설치된 룸미러, 헤드 램프 또는 라디에이터 그릴 등에 설치된다.The second camera 120 is installed in the vehicle 200 and outputs an image of the front of the driving vehicle. The second camera 120 is installed in a room mirror, a head lamp, a radiator grill, or the like installed inside the vehicle.

상기 제 n 카메라(150)는 차량(200)에 설치되어 주행중인 차량의 측면을 촬영한 이미지를 출력하는 구성으로서, 차량의 사이드 미러 등에 설치된다.The n-th camera 150 is installed in the vehicle 200 and outputs an image of the side of the vehicle being driven. The n-th camera 150 is installed in a side mirror of the vehicle.

상기 제 1, 제 2 및 제 n 카메라(110, 120 및 150)는 CMOS 타입의 영상 센서, CCD 타입의 영상 센서 또는 제 3 타입의 영상 센서 중 어느 것을 사용해도 무방하다.The first, second and n-th cameras 110, 120, and 150 may use any one of a CMOS type image sensor, a CCD type image sensor, and a third type image sensor.

또한, 본 실시예에서는 차량의 전방 또는 후방의 주행 방향 이미지를 촬영하기 위하여 각각 1 대의 카메라가 설치되어 동작하는 구성을 설명하고 있으나, 같은 주행 방향을 촬영하는 복수의 카메라를 설치하는 구성도 가능하다.In addition, in the present embodiment, a configuration in which one camera is installed and operated in order to photograph the driving direction image of the front or rear of the vehicle is described, but a plurality of cameras that capture the same driving direction may be installed. .

상기 제어부(130)는 제 1 카메라(110), 제 2 카메라(120) 또는 제 n 카메라(150)가 임의의 시점(이하, 현재 시점이라 함)에서 촬영한 적어도 하나의 이미지를 그대로 디스플레이되도록 하거나 또는 미리 저장된 이미지 처리 프로그램을 통해 합성/변환/조합 중 어느 하나를 수행하여 생성된 이미지가 디스플레이되도록 출력한다.The controller 130 may display at least one image captured by the first camera 110, the second camera 120, or the n-th camera 150 at an arbitrary time point (hereinafter, referred to as a current view point) as it is or as it is. Alternatively, the image is generated to be displayed by performing any one of the synthesis / conversion / combination through a pre-stored image processing program.

도 3과 같이 상기 제어부(130)는 차량(200)이 후방으로 주행하는 경우 차량 후방의 일정 영역을 촬영하는 제 1 카메라(110)가 임의의 시점에 촬영한 하나의 후방 이미지(A + B)를 검출하여 메모리(미도시) 등의 저장수단에 저장한다.As illustrated in FIG. 3, the controller 130 may include one rear image A + B photographed at an arbitrary time point by the first camera 110 photographing a certain area of the rear of the vehicle when the vehicle 200 travels rearward. Is detected and stored in a storage means such as a memory (not shown).

여기서 임의의 시점은 현재 시점이 될 수도 있고, 과거 시점과 현재 시점 사이의 임의의 시간 구간 중 어느 한 시점이 될 수도 있다.Here, the arbitrary time point may be the current time point or may be any one time point in any time interval between the past time point and the current time point.

또한, 상기 제어부(130)는 차량의 ECU, TCU, 속도 센서, 조향각 센서, 휠 센서, 카메라가 현재 촬영한 이미지와 직전에 쵤영한 이미지를 비교하여 산출한 이동 거리 정보 등으로부터 차량의 이동 거리, 속도, 주행 방향 및 조향각 정보를 검출하고, 상기 검출된 이동 거리, 속도, 주행 방향 및 조향각 정보를 포함한 운전 제어 정보로부터 차량의 이동 변위 정보를 검출하며, 상기 검출된 차량의 이동 변위 정보에 기초하여 임의의 위치로부터 이동한 단위 시간당 차량의 이동 위치를 산출하여 차량의 현재 위치 정보를 검출하며, 상기 검출된 차량의 현재 위치 정보에 대응하는 상기 후방 이미지(A + B)의 임의의 위치에 차량(200')의 현재 위치를 나타내기 위해 윤곽선 또는 반투명으로 차량 형상의 아이콘(400)이 표시되도록 한다.In addition, the control unit 130, the moving distance of the vehicle from the ECU, TCU, the speed sensor, the steering angle sensor, the wheel sensor, the moving distance information calculated by comparing the image taken by the camera with the image taken immediately before, Detecting speed, driving direction and steering angle information, detecting moving displacement information of the vehicle from driving control information including the detected moving distance, speed, driving direction and steering angle information, and based on the detected moving displacement information of the vehicle The current position information of the vehicle is detected by calculating a moving position of the vehicle per unit time moved from an arbitrary position, and the vehicle (at a predetermined position of the rear image A + B corresponding to the detected current position information of the vehicle) In order to indicate the current position of the '200', the icon 400 of the vehicle shape is displayed in the outline or translucent.

즉 상기 제어부(130)는 후방 이미지(A + B)를 검출한 후 상기 검출된 후방 이미지(A + B) 상에 실제 차량(200')을 대신하여 윤곽선 또는 반투명으로 차량 아이콘(400)을 표시하고, 차량의 속도센서 또는 TCU 등으로부터 검출한 속도 정보를 통해 임의의 위치로부터 일정 시간(예를 들면, 0.5초)이 경과하는 동안 차량(200')이 이동한 거리를 산출하며, 상기 산출된 차량의 이동 거리에 따라 상기 윤곽선 또는 반투명의 차량 아이콘 위치가 상기 후방 이미지(A + B) 상에서 미리 설정된 단위 픽셀 수 또는 일정 거리만큼 이동한 위치 예를 들면 A 영역에 표시되도록 한다.That is, the controller 130 detects the rear image A + B and then displays the vehicle icon 400 in outline or translucent on the detected rear image A + B instead of the actual vehicle 200 '. And calculating the distance traveled by the vehicle 200 'during a predetermined time (for example, 0.5 seconds) from an arbitrary position through speed information detected from a speed sensor or a TCU of the vehicle. According to the moving distance of the vehicle, the contour or semi-transparent vehicle icon position is displayed on the rear image A + B, for example, in the position A moved by a predetermined number of unit pixels or a predetermined distance.

상기 일정 시간은 설명의 편의상 0.5초로 예시한 것 일뿐 이에 한정되는 것은 아니다.The predetermined time is merely illustrated as 0.5 seconds for convenience of description and the present invention is not limited thereto.

또한, 차량이 전방으로 주행하는 경우 상기 제어부(130)는 도 4와 같이 임의의 시점에 제 2 카메라(120)가 촬영한 하나의 전방 이미지(C + D)의 검출하여 메모리(미도시) 등의 저장수단에 저장한다.In addition, when the vehicle travels forward, the controller 130 detects one front image C + D captured by the second camera 120 at an arbitrary time point as shown in FIG. 4, and then stores a memory (not shown). Store in storage means.

또한, 상기 제어부(130)는 차량으로부터 차량의 속도, 주행 방향 및 조향각 정보를 포함한 차량의 이동 변위 정보를 검출하고, 상기 검출된 차량의 이동 변위 정보에 기초하여 임의의 위치로부터 단위 시간당 차량이 이동한 위치를 산출하여 차량의 현재 위치를 검출하며, 상기 전방 이미지(C + D)의 임의의 위치에 차량(200')의 현재 위치를 나타내기 위해 윤곽선 또는 반투명으로 차량 형상의 아이콘(400)이 표시되도록 한다.In addition, the controller 130 detects movement displacement information of the vehicle including vehicle speed, driving direction, and steering angle information from the vehicle, and moves the vehicle per unit time from an arbitrary position based on the detected movement displacement information of the vehicle. One location is calculated to detect the current location of the vehicle, and the icon 400 in the shape of a vehicle is outlined or semi-transparent to indicate the current location of the vehicle 200 'at an arbitrary position in the front image C + D. To be displayed.

즉 상기 제어부(130)는 전방 이미지(C + D)를 검출한 후 상기 검출된 전방 이미지(C + D) 상에 실제 차량(200')을 대신하여 윤곽선 또는 반투명으로 차량 아이콘(400)을 표시하고, 차량의 속도 정보를 통해 일정 시간이 경과하는 동안 차량(200')이 이동한 거리를 산출하여 차량의 이동 거리에 따라 상기 윤곽선 또는 반투명의 차량 아이콘 위치가 상기 전방 이미지(C + D) 상에서 미리 설정된 단위 픽셀 수만큼 이동된 위치 예를 들면 C 영역에 표시되도록 한다.That is, the controller 130 detects the front image C + D and then displays the vehicle icon 400 on the detected front image C + D in outline or translucent instead of the actual vehicle 200 ′. The distance information of the vehicle 200 ′ is calculated based on the speed information of the vehicle, and the contour or translucent vehicle icon position is displayed on the front image C + D according to the moving distance of the vehicle. The position shifted by the preset unit pixel number, for example, is displayed in the C region.

도 5를 참조하여 차량의 차체에 가려진 사각 지대가 운전자에게 표시되는 것을 더욱 상세하게 설명한다.Referring to FIG. 5, the blind spots hidden by the vehicle body are displayed to the driver in more detail.

차량이 전방으로 주행하는 경우 제 2 카메라(120)가 임의의 시점에 과속 방지턱(300)이 포함된 전방 이미지(C + D)를 촬영하고 이후 차량이 주행을 계속하여 t초 후 차량의 현재 위치가 전방 이미지(C + D) 상의 C 영역이라고 하면, 운전자는 t초 전에 본 과속 방지턱(300)을 차량이 통과하고 있음을 알 수 있지만 실제 과속 방지턱(300)은 차체에 가려져 운전자의 시야 확보가 어려운 사각 지대에 위치하게 된다.When the vehicle travels forward, the second camera 120 photographs the front image C + D including the speed bump 300 at any point in time, and then the vehicle continues to travel, and after t seconds, the current position of the vehicle Is a C area on the front image (C + D), the driver can know that the vehicle is passing through the speed bump 300, which is seen t seconds ago, but the actual speed bump 300 is hidden by the vehicle body to secure the driver's view. It is located in a difficult blind spot.

상기 제어부(130)는 운전자가 사각 지대에 위치된 과속 방지턱(300)과 관련한 정보를 인식할 수 있도록 전방 이미지(C + D) 상의 C 영역에 차량의 현재 위치를 표시하는 가상의 차량 아이콘(400)을 차량의 이동 거리 정보, 속도 정보, 조향각 정보 등에 기초한 차량의 이동 변위 정보를 공지의 거리 및 위치 연산 프로그램을 통해 연산하여 차량이 임의의 시점부터 이동한 거리 및 위치 정보를 검출하고, 상기 검출된 거리 및 위치 정보에 따라 상기 전방 이미지(C+D) 상의 대응 영역(예를 들면, C 영역)에 차량의 현재 위치를 나타내는 차량 아이콘(400)의 위치를 차량 형상의 윤곽선 또는 반투명의 차량 형상으로 디스플레이함으로써 운전자가 차체에 의해 가려진 차량 하부의 사각지대를 인식할 수 있도록 한다.The controller 130 displays a virtual vehicle icon 400 displaying a current position of the vehicle in a region C on the front image C + D so that the driver can recognize information related to the speed bump 300 located in the blind spot. ) Is calculated using a known distance and position calculation program to calculate the displacement information of the vehicle based on the movement distance information, the speed information, the steering angle information, etc. of the vehicle, to detect the distance and the position information the vehicle has moved from an arbitrary time point, The contour of the vehicle shape or the translucent shape of the vehicle to indicate the position of the vehicle icon 400 indicating the current position of the vehicle in the corresponding area (for example, the C area) on the front image C + D according to the received distance and position information. The display allows the driver to recognize the blind spot under the vehicle, which is covered by the vehicle body.

또한, 상기 제어부(130)가 차량이 현재 위치하는 곳에 가상의 차량 아이콘(400)을 윤곽선 또는 반투명으로 표시함으로써, 운전자는 현재 과속 방지턱(300)이 설치된 구간을 통과하고 있음을 인식할 수 있게 되고, 차량 아이콘(400)을 중심으로 우측의 사각 지대 영역(C-1)과 좌측의 사각 지대 영역(C-2)을 확인할 수 있도록 한다.In addition, the controller 130 displays the virtual vehicle icon 400 as an outline or translucent place where the vehicle is currently located, so that the driver can recognize that the vehicle is passing through the section in which the speed bump 300 is installed. The blind spot area C-1 on the right side and the blind spot area C-2 on the left side of the vehicle icon 400 can be identified.

또한, 상기 제어부(130)는 가상의 차량 아이콘 정보(400)가 전방 이미지(C + D) 상에 차량 형상의 윤곽선 또는 반투명의 차량 형상 중 어느 하나로 표시되도록 하여 차량의 주변 도로상에 위치한 장애물 및 방향 안내 정보가 운전자에게 인식될 수 있도록 디스플레이한다.In addition, the controller 130 may display the virtual vehicle icon information 400 on the front image C + D as either an outline of a vehicle shape or a semi-transparent vehicle shape so as to display obstacles located on the surrounding roads of the vehicle. Display direction guidance information so that it can be recognized by the driver.

도 6을 참조하여 차량의 차체에 가려져 차량 하부와 주변 도로상에 위치한 장애물 및 방향 안내 정보가 운전자에게 표시되는 것을 더욱 상세하게 설명한다.Referring to FIG. 6, it will be described in more detail that obstacles and direction guide information that are hidden by the vehicle body and located on the lower side of the vehicle and the surrounding road are displayed to the driver.

운전자가 주행중에 도로상에 인쇄된 방향 안내 정보(500)를 미처 인식하지 못한 경우 상기 방향 안내 정보(500)가 운전자에게 인식될 수 있도록 제어부(130)는 전방 이미지(C + D) 상에 디스플레이되는 가상의 차량 아이콘(400)이 반투명 또는 차량의 윤곽선만 표시되도록 한다.If the driver does not recognize the direction guide information 500 printed on the road while driving, the controller 130 is displayed on the front image C + D so that the direction guide information 500 can be recognized by the driver. The virtual vehicle icon 400 is displayed so that only the translucent or outline of the vehicle is displayed.

또한, 상기 제어부(130)는 현재 이미지와 임의의 시점 이전 과거 이미지에 포함된 고정된 물체 또는 이동중인 물체의 유무를 확인하여 물체까지의 거리 정보도 함께 표시할 수 있다.In addition, the controller 130 may check whether there is a fixed object or a moving object included in the current image and a past image before a certain point in time, and display the distance information to the object together.

즉 상기 제어부(130)는 하나의 카메라를 이용하여 이미지를 촬영한 경우 촬영한 현재 시점의 이미지와 일정 시간 이전 과거 시점에 촬영한 이미지를 이미지 프로세싱하여 현재 이미지와 과거 이미지에서 유사한 특성(예를 들면, 픽셀의 밝기, 에지의 유무 등)을 갖는 물체(픽셀) 정보를 찾아서 변위가 발생한 임의의 물체 정보(픽셀 정보)을 각각 검출한다.That is, when the image is captured by using a single camera, the controller 130 processes the image of the current view taken and the image taken at a past time ago by a certain time to obtain similar characteristics in the current image and the past image (for example, Then, the object (pixel) information having the brightness of the pixel, the presence or absence of an edge, etc.) is found to detect arbitrary object information (pixel information) in which the displacement has occurred.

상기 제어부(130)는 이미지 프로세싱을 통해 관심 있는 두 개의 이미지 비교를 통해 벡터로 정의된 화소들의 이동 변위와 각도 변위 등을 통해 유사도를 검출하여 물체를 인식하거나, 물체의 경계선 또는 윤곽선 등의 에지나 물체의 윤곽에 근사하는 선분, 곡선 등을 구하여 이용하기도 하고, 이미지 내에 존재하는 모서리점, 불변인 점, 또는 회전변환이나 크기 변화 등에 대하여 불변인 특징점을 이용한 인식을 수행할 수도 있으며, 이미지에 포함된 물체의 특징점을 추출하여 인식을 수행할 수도 있다.The controller 130 recognizes an object by detecting similarity through moving displacements and angular displacements of pixels defined as vectors through comparing two images of interest through image processing, or recognizes an object such as an edge or an edge of an object, It can be used to obtain line segments, curves, etc. that approximate the outline of an object, and can recognize recognition using invariant feature points for corner points, invariant points, or rotational transformations or size changes that exist in an image. The recognition may be performed by extracting feature points of the object.

또한, 상기 제어부(130)는 상기 현재 이미지에서 검출된 현재의 물체 위치와 과거의 이미지에서 검출한 과거의 물체 위치 간의 이동 변위(벡터)를 검출하고, 차량의 ECU, TCU, 휠 센서 또는 스티어링 각도 센서 등으로부터 제공되는 차량의 조향각 정보, 거리 정보 및 속도 정보를 포함한 운행 정보를 검출하여 상기 두 물체의 이동 변위에 대응하는 이동 거리를 산출한다.In addition, the controller 130 detects a movement displacement (vector) between a current object position detected in the current image and a past object position detected in a past image, and detects an ECU, TCU, wheel sensor, or steering angle of the vehicle. The driving information including the steering angle information, the distance information and the speed information of the vehicle provided from the sensor is detected to calculate the moving distance corresponding to the moving displacement of the two objects.

즉 상기 제어부(130)는 현재의 이미지상에 현재의 물체 위치와 과거의 물체 위치가 표시되도록 하고, 두 물체 간의 차이 값은 차량이 이동한 거리를 이용하여 두 물체 간의 이동 거리로 설정되도록 한다.That is, the controller 130 allows the current object position and the past object position to be displayed on the current image, and the difference value between the two objects is set as the movement distance between the two objects using the distance traveled by the vehicle.

또한, 상기 제어부(130)는 현재 이미지상에 미리 설정된 기준점과 현재의 물체 및 과거의 물체까지의 변위를 검출하며, 상기 기준점과 현재의 물체 및 과거의 물체가 이루는 삼각형 정보 즉 상기 현재 물체와 과거 물체 간의 이동 변위를 기준변으로 하고, 상기 기준점이 현재 물체 및 과거 물체와 각각 이루는 변위를 다른 두 변으로 하며, 이들이 이루는 각을 각각 산출하여 기준점으로부터 현재 물체까지의 거리를 산출한다.In addition, the control unit 130 detects a predetermined reference point on the current image, a current object and a displacement to a past object, and triangular information formed by the reference point, the current object, and the past object, that is, the current object and the past. The displacement between the objects is a reference side, the displacement between the reference point and the current object and the past object are respectively two different sides, and the angle between them is calculated to calculate the distance from the reference point to the current object.

또한, 상기 제어부(130)는 산출되는 현재 물체의 위치가 이미지의 영역 중에서 과거 이미지의 영역 상에 위치하면, 물체의 이동 변위를 추정하여 추정된 예상 이동 변위와 차량의 속도와 상기 이동 변위로부터 검출한 현재 물체의 상대 속도 등에 기초하여 일정 시간 경과 후에 임의의 이미지 영역 상에 위치한 물체까지의 예상 위치와 거리를 산출하여 제공한다.In addition, when the calculated position of the current object is located on the area of the past image in the area of the image, the controller 130 estimates the movement displacement of the object and detects the estimated movement displacement, the speed of the vehicle, and the movement displacement. An estimated position and distance to an object located on an image area after a predetermined time are calculated and provided based on the relative velocity of a current object.

또한, 상기 제어부(130)는 적어도 두 대 이상의 스테레오 카메라를 이용하는 경우 스테레오 비전을 통해 물체까지의 거리 추출을 수행할 수 있고, 이때 상기 물체의 이동 변위를 추정하여 추정된 예상 이동 변위와 차량의 속도와 상기 이동 변위로부터 검출한 현재 물체의 상대 속도 등에 기초하여 일정 시간 경과 후에 이미지의 임의의 영역 상에 위치한 물체까지의 예상 위치와 거리를 산출하여 제공할 수 있다.In addition, when using at least two stereo cameras, the controller 130 may extract the distance to an object through stereo vision. In this case, the estimated displacement and the speed of the vehicle may be estimated by estimating the displacement of the object. And an estimated position and distance to an object located on an arbitrary region of the image after a predetermined time, based on the relative velocity of the current object detected from the moving displacement, and the like.

또한, 상기 제어부(130)는 상기 산출된 거리를 미리 설정된 충돌 판단용 기준 거리정보와 비교하고, 그 결과 충돌이 예상되면 경고음 또는 경고 화면이 표시되도록 경고 신호를 출력한다.In addition, the controller 130 compares the calculated distance with preset reference distance information for collision determination, and as a result, outputs a warning signal so that a warning sound or a warning screen is displayed when a collision is expected.

상기 스테레오 비전 프로그램은 차량의 전조등, 후미등 또는 사이드 미러의 좌측 및 우측에 각각 설치된 스테레오 카메라를 통해 좌측 및 우측의 이미지가 입력되면 좌측 및 우측 이미지에 대한 밝기 및 에피폴라 라인(epipolar line)을 일치시키는 스테레오 이미지 입력에 대한 전처리 과정을 수행하고, 동일한 물체로 판단되는 좌측 및 우측 이미지에서 겹쳐지는 영역의 픽셀간 양안차(disparity)를 생성하는 스테레오 매칭을 수행하며, 이러한 양안차의 결과에서 노이즈 성분을 제거한 후에 그 스테레오 이미지의 거리 정보에 대한 프로젝션(projection), 세그멘테이션(segmentation), 필터링(filtering) 등의 후처리 과정을 수행하여 스테레오 이미지를 획득함으로써 이러한 스테레오 이미지를 통해 물체의 거리, 모양, 방향 등의 정보를 검출하게 된다.The stereo vision program matches the brightness and the epipolar line for the left and right images when the left and right images are input through the stereo cameras installed on the left and right sides of the headlight, tail light or side mirror of the vehicle, respectively. Performs preprocessing on stereo image input, performs stereo matching to generate pixel-to-pixel disparity of overlapping regions in the left and right images determined to be the same object, and removes noise components from the result of the binocular difference. After removal, post-processing such as projection, segmentation, filtering, etc. of the distance information of the stereo image is performed to acquire a stereo image. Will be detected.

상기 스테레오 비전 프로그램은 하나의 실시예로서, 공지의 다양한 스테레오 비전 프로그램을 사용할 수도 있다.The stereo vision program may use various known stereo vision programs as an embodiment.

또한, 상기 제어부(130)는 카메라가 촬영한 원본 이미지를 그대로 디스플레이용 이미지로 출력할 수도 있지만, 상기 촬영된 원본 이미지를 시점 변환 프로그램을 통해 버드 아이뷰(Bird Eye View) 시점으로 변환한 이미지를 디스플레이용 이미지로 출력할 수도 있다.In addition, the controller 130 may output the original image photographed by the camera as an image for display, but converts the captured original image to a Bird Eye View viewpoint through a viewpoint conversion program. It can also be output as an image for display.

또한, 상기 제어부(130)는 상기 카메라가 촬영한 원본 이미지 또는 시점 변환된 이미지 여러 개를 이미지 처리 프로그램을 통해 합성(merge)하거나 또는 스티칭(stitching)하여 디스플레이용 이미지로 출력할 수도 있다.In addition, the controller 130 may output the image for display by merging or stitching the original image photographed by the camera or a plurality of viewpoint-converted images through an image processing program.

또한, 상기 제어부(130)는 상기 카메라가 촬영한 원본 이미지, 시점 변환된 이미지 또는 합성된 여러 이미지의 일부를 이미지 처리 프로그램을 통해 조합하여 디스플레이용 이미지로 출력할 수도 있다.In addition, the controller 130 may combine a portion of the original image photographed by the camera, a viewpoint converted image, or a plurality of synthesized images through an image processing program and output the combined image as a display image.

상기 화면 표시부(140)는 제어부(130)로부터 출력되는 이미지와 가상의 차량 윤곽선 또는 반투명의 차량 아이콘(400)이 함께 출력되도록 하고, LCD 등의 출력수단으로 구성된다.The screen display unit 140 outputs an image output from the controller 130 and a virtual vehicle outline or a semi-transparent vehicle icon 400 together, and is configured as an output means such as an LCD.

상기 차량 아이콘(400)은 반투명 또는 윤곽선 형태의 차량 형상으로 현재 위치의 차량을 디스플레이용 이미지에 가상으로 표시한다.The vehicle icon 400 virtually displays the vehicle at the current location in the image for display in a translucent or outlined vehicle shape.

또한, 상기 차량 아이콘(400)은 차량의 바퀴(미도시) 위치를 반투명 또는 윤곽선의 차량 형상과 함께 표시하는 것도 가능하여 차량의 주행시 차량의 차체에 의해 가려진 차량 하부와 도로에 표시된 주행 방향 표시와 도로 안내용 문자를 운전자에게 정확하게 전달할 수 있다.In addition, the vehicle icon 400 may display the position of the wheel (not shown) of the vehicle together with the translucent or contoured vehicle shape, and the driving direction display displayed on the lower part of the vehicle and the road that is covered by the vehicle body when the vehicle is driven. It is possible to accurately convey road guidance text to the driver.

또한, 상기 차량 아이콘(400)의 위치 변경은 디스플레이용 이미지상에 표시된 차량 아이콘의 위치 변경 표시가 디스플레이용 이미지를 고정하고 차량 아이콘(400)의 위치만 변경하거나, 차량 아이콘(400)의 위치를 고정하고 디스플레이용 이미지만 이동시키거나 또는 디스플레이용 이미지와 차량 아이콘의 위치를 모두 변경하는 것 중 어느 하나를 통해 변경한다.In addition, the position change of the vehicle icon 400 is a position change indication of the vehicle icon displayed on the display image to fix the display image and change only the position of the vehicle icon 400, or change the position of the vehicle icon 400 This can be fixed by either fixing and moving only the image for display or changing the position of both the image for display and the vehicle icon.

도 7은 본 발명에 따른 사각 지대를 표시하는 과정을 나타낸 흐름도로서, 도 2, 도 4 내지 도 7을 참조하여 본 발명에 따른 사각 지대 표시 방법을 설명한다.7 is a flowchart illustrating a process of displaying a blind spot according to the present invention, and with reference to FIGS. 2 and 4 to 7, a blind spot display method according to the present invention will be described.

차량(200)이 예를 들어 전방으로 주행(S100)하면, 차량에 설치된 제 2 카메라(120)는 차량(200)이 주행함에 따라 촬영을 시작하고, 제어부(130)는 임의의 시점에 제 2 카메라(120)가 촬영한 디스플레이용 이미지(C 또는 C + D)를 검출(S100)하여 임시 저장한다.When the vehicle 200 travels forward, for example, at step S100, the second camera 120 installed in the vehicle starts recording as the vehicle 200 travels, and the controller 130 performs the second operation at any time. The display image C or C + D captured by the camera 120 is detected (S100) and temporarily stored.

또한, 상기 S100단계에서 촬영된 디스플레이용 이미지는 카메라가 촬영한 원본 이미지를 그대로 디스플레이용 이미지로 저장하여 출력할 수도 있지만, 상기 촬영된 원본 이미지를 제어부(130)가 시점 변환 프로그램을 통해 버드 아이뷰(Bird Eye View) 시점으로 변환한 이미지를 디스플레이용 이미지로 출력할 수도 있다.In addition, the display image photographed in step S100 may be output by storing the original image photographed by the camera as an image for display as it is, but the controller 130 controls the bird's eye view through the viewpoint conversion program. You can also output an image converted to a (Bird Eye View) viewpoint as an image for display.

또한, 상기 S100단계에서 촬영된 디스플레이용 이미지는 상기 카메라가 촬영한 원본 이미지 또는 상기 시점 변환된 이미지 여러 개를 제어부(130)가 이미지 처리 프로그램을 통해 합성 또는 스티칭하거나 상기 촬영한 원본 이미지, 시점 변환된 이미지 또는 합성된 여러 이미지의 일부를 제어부(130)가 이미지 처리 프로그램을 통해 조합하여 디스플레이용 이미지로 출력할 수도 있다.In addition, the display image photographed in step S100 is synthesized or stitched by the control unit 130 through the image processing program or the original image photographed by the camera or the plurality of viewpoint-converted images, or the photographed original image and viewpoint transformed. The controller 130 may output the combined image or a part of the synthesized image as an image for display by combining them through an image processing program.

상기 S100단계를 수행한 후 제어부(130)는 차량으로부터 제공되는 차량의 ECU, TCU, 속도 센서, 조향각 센서, 휠 센서, 카메라가 현재 촬영한 이미지와 직전에 촬영한 이미지를 비교하여 산출한 운전 제어 정보로부터 차량의 이동 거리, 속도, 주행 방향 및 조향각 정보를 포함한 차량의 이동 변위 정보를 검출하고, 상기 검출된 이동 변위 정보에 기초하여 단위 시간당 차량의 이동 거리와 조향 방향에 따른 위치를 산출(S110)한다.After performing the step S100, the controller 130 controls the operation calculated by comparing the image captured by the ECU, the TCU, the speed sensor, the steering angle sensor, the wheel sensor, the camera, and the image taken immediately before. The vehicle detects the displacement information of the vehicle including the movement distance, the speed, the driving direction, and the steering angle information of the vehicle, and calculates the position according to the movement distance and the steering direction of the vehicle per unit time based on the detected movement displacement information (S110). )do.

상기 제어부(130)는 상기 산출된 이동 거리와 위치를 미리 설정된 단위 픽셀수에 따라 상기 S100단계에서 검출된 디스플레이용 이미지(C + D) 상에 대응시켜 차량의 현재 위치를 나타내는 가상의 차량 아이콘(400)을 차량의 윤곽선 또는 반투명으로 표시(S120)하여 화면 표시부(140)를 통해 출력되도록 한다.The controller 130 corresponds to the calculated moving distance and position on the display image C + D detected in step S100 according to a preset unit pixel number to indicate a virtual vehicle icon indicating a current position of the vehicle ( 400 is displayed in the outline or translucent of the vehicle (S120) to be output through the screen display unit 140.

상기 S120 단계에서 화면 표시부(140)를 통해 출력되는 상기 가상의 차량 아이콘(400)은 전방 이미지(C + D) 상에 반투명 또는 차량의 윤곽선 등으로 표시되도록 함으로써 사각지대에 있는 장애물(예를 들면, 과속 방지턱, 경계석, 분리대 등)이나 방향 안내 정보(500)가 차량의 현재 위치 정보와 함께 운전자에게 용이하게 인식될 수 있도록 한다.The virtual vehicle icon 400 output through the screen display unit 140 in step S120 is displayed as a translucent or outline of the vehicle on the front image C + D so that an obstacle (eg Speed bumps, boundary seats, separators, etc.) or direction guide information 500 may be easily recognized by the driver together with the current location information of the vehicle.

따라서 차량의 차체에 가려져 운전자의 시야 확보가 어려운 사각 지대와, 카메라가 촬영하는 현재의 이미지에는 보이지 않는 차량 주변의 사각지대를 확인할 수 있어서 운전자의 안전한 주행 환경 제공과 안전한 주차 환경을 제공하는 것이 가능하게 된다.Therefore, it is possible to check blind spots that are hidden by the body of the vehicle and difficult to secure the driver's vision, and blind spots around the vehicle which are not visible in the current image taken by the camera, thereby providing a safe driving environment and a safe parking environment for the driver. Done.

한편, 본 실시예에서는 디스플레이되는 이미지상에서 차량의 현재 위치를 나타내는 가상의 차량 아이콘이 차량의 이동에 따라 상기 디스플레이용 이미지상에 위치가 변경되며 표시되도록 하는 것을 설명하였으나, 복수의 이미지가 연속으로 배열된 디스플레이용 이미지상에서 상기 차량 아이콘이 차량의 이동에 따라 상기 연속으로 배열된 이미지상에서 위치가 변경되며 표시되도록 구성할 수 있음은 자명할 것이다.
Meanwhile, in the present exemplary embodiment, the virtual vehicle icon indicating the current position of the vehicle is displayed on the displayed image so that the position is changed and displayed on the display image according to the movement of the vehicle, but the plurality of images are continuously arranged. It will be apparent that the vehicle icon can be configured to be displayed on the continuously arranged image in accordance with the movement of the vehicle.

(제 2 실시예)(Second Embodiment)

도 8은 본 발명에 따른 사각 지대 표시 장치의 다른 실시예를 나타낸 블록도이다.8 is a block diagram illustrating another exemplary embodiment of a blind spot display device according to the present invention.

도 8에 나타낸 바와 같이, 본 발명에 따른 사각 지대 표시 장치(600)는 차량의 주변 이미지를 제공하는 이미지 검출수단으로서 내비게이션(610)과 외부 정보 수신부(620)를 구비하고, 제어부(630)와 화면 표시부(640)를 포함하여 구성된다.As shown in FIG. 8, the blind spot display device 600 according to the present invention includes a navigation unit 610 and an external information receiver 620 as image detection means for providing a peripheral image of a vehicle. It is configured to include a screen display unit 640.

상기 내비게이션(610)은 차량에 설치되어 GPS 수신기로부터 위치 정보를 수신하여 차량의 현재 위치 정보를 검출하며, 상기 검출된 차량의 위치 정보에 따라 메모리(미도시) 등에 미리 저장된 해당 위치의 지도 이미지(또는 실사 이미지)를 독출하여 제공한다.The navigation unit 610 is installed in a vehicle to receive location information from a GPS receiver to detect current location information of the vehicle, and a map image of a corresponding location previously stored in a memory (not shown) according to the detected location information of the vehicle ( Or a live-action image) is read out and provided.

상기 외부 정보 수신부(620)는 무선 네트워크를 통해 차량 주변의 도로 및 건물 등에 설치된 카메라(미도시)와 연결되고, 상기 카메라가 촬영하는 이미지를 수신하여 제어부(630)로 제공한다.The external information receiver 620 is connected to a camera (not shown) installed in roads and buildings around a vehicle through a wireless network, and receives an image captured by the camera and provides it to the controller 630.

현재의 지능형 도로망 시스템은 일부 도로구간이나 건물의 일부 영역을 고정 촬영하는 카메라를 구비하고 있으며, 상기 카메라들은 고유의 IP가 할당되어 무선 통신을 이용하여 상기 카메라에 접속함으로써 카메라가 촬영한 이미지를 사용자가 손쉽게 수신하여 확인할 수 있다.The current intelligent road network system includes a camera for capturing a part of a road section or a certain area of a building, and the cameras are assigned a unique IP and connected to the camera using wireless communication to use an image taken by the camera. Can easily receive and check.

즉 상기 외부 정보 수신부(620)는 도로 또는 도로 주변의 건물 등에 설치된 예를 들면, IP 카메라들과 무선 통신을 통해 접속하고, 상기 카메라가 제공하는 이미지들과 상기 카메라가 설치된 장소의 위치 정보를 수신하여 메모리(미도시)에 저장하며, 상기 수신된 이미지들은 제어부(630)에 제공한다.That is, the external information receiver 620 is connected to, for example, IP cameras installed on a road or a building around the road through wireless communication, and receives images provided by the camera and location information of a location where the camera is installed. The data is stored in a memory (not shown), and the received images are provided to the controller 630.

또한, 상기 외부 정보 수신부(620)는 상기 IP 카메라로부터 제공하는 카메라의 설치 위치 정보와 함께 상기 내비게이션(610)이나 GPS 수신기(미도시) 등으로부터 차량의 현재 위치를 검출하여 제어부(630)로 전송한다.In addition, the external information receiving unit 620 detects the current position of the vehicle from the navigation 610 or the GPS receiver (not shown) together with the installation position information of the camera provided from the IP camera and transmits it to the control unit 630. do.

상기 제어부(630)는 내비게이션(610) 또는 외부 정보 수신부(620)가 임의의 시점에 제공하는 해당 위치의 지도 이미지 또는 차량의 주변 이미지를 검출하고, 상기 검출된 적어도 하나의 이미지를 그대로 사용하여 디스플레이용 이미지를 생성하거나 또는 이미지 처리 프로그램을 통해 검출한 이미지들을 합성하거나, 시점 변환 프로그램을 통해 검출한 이미지의 시점을 변환하여 재구성하거나 또는 이미지 일부를 조합하여 재구성한 디스플레이용 이미지가 디스플레이되도록 출력한다.The controller 630 detects a map image of a corresponding location or a surrounding image of the vehicle provided by the navigation 610 or the external information receiver 620 at an arbitrary time point, and displays the image using the detected at least one image as it is. The image for display is generated by generating a user image or by synthesizing the images detected by the image processing program, by converting and reconstructing the viewpoint of the image detected by the viewpoint conversion program, or by reconstructing a combination of the images.

즉 상기 제어부(630)는 예를 들면, IP 카메라가 촬영한 원본 이미지를 그대로 디스플레이용 이미지로 출력할 수도 있지만, 상기 촬영된 원본 이미지를 시점 변환 프로그램을 통해 버드 아이뷰 시점으로 변환한 이미지를 디스플레이용 이미지로 출력할 수도 있다.That is, the controller 630 may output the original image photographed by the IP camera as a display image, for example, but display the image converted from the original image photographed to the bird eye view point of view through a viewpoint conversion program. It can also be output as an image.

또한, 상기 제어부(630)는 상기 IP 카메라가 촬영한 원본 이미지 또는 시점 변환된 이미지 여러 개를 이미지 처리 프로그램을 통해 합성하거나 또는 스티칭하여 디스플레이용 이미지로 출력할 수도 있고, 상기 IP 카메라가 촬영한 원본 이미지, 시점 변환된 이미지 또는 합성된 이미지의 일부를 이미지 처리 프로그램을 통해 조합하여 디스플레이용 이미지로 출력할 수도 있다.In addition, the controller 630 may combine the original image photographed by the IP camera or a plurality of viewpoint-converted images through an image processing program, or output the image for display, or the original image photographed by the IP camera. A part of an image, a viewpoint converted image, or a synthesized image may be combined through an image processing program and output as an image for display.

또한, 상기 제어부(630)는 차량의 ECU, TCU, 속도 센서, 조향각 센서, 휠 센서 등으로부터 검출한 운전 제어 정보를 임의의 시점 이전에 수신한 운전 제어 정보와 비교 연산하여 차량이 이동한 거리, 속도, 주행 방향 및 조향각 등 차량의 이동 변위 정보를 검출한다.In addition, the controller 630 compares the driving control information detected from the ECU, the TCU, the speed sensor, the steering angle sensor, the wheel sensor, etc. of the vehicle with the driving control information received before a certain point in time, The vehicle detects displacement information of the vehicle such as speed, driving direction and steering angle.

또한, 상기 제어부(630)는 내비게이션(610)이 GPS 등을 통해 차량의 외부에서 제공하는 위치 정보를 검출하여 출력하면, 상기 위치 정보에 대응하는 지도 이미지와, 임의의 시점 이전에 수신한 위치 정보 및 이미지를 비교 연산하여 차량의 이동 변위 정보를 검출할 수 있다.In addition, when the navigation unit 610 detects and outputs location information provided from the outside of the vehicle through the GPS or the like, the control unit 630 and the map image corresponding to the location information and location information received before an arbitrary time point. And comparing and calculating images to detect movement displacement information of the vehicle.

또한, 상기 제어부(630)는 거리뷰 수신기(620)가 검출한 카메라의 설치 위치 정보 및 주변 이미지와 내비게이션(610)을 통해 검출한 위치 이동 정보를 비교 연산하여 차량의 이동 변위 정보를 검출할 수 있다. In addition, the controller 630 may compare the installation position information of the camera detected by the distance view receiver 620 and the position movement information detected through the navigation 610 to detect movement displacement information of the vehicle. have.

또한, 상기 제어부(630)는 상기 검출된 차량의 이동 변위 정보에 기초하여 임의의 위치로부터 이동한 차량의 현재 위치 정보를 검출하고, 생성된 디스플레이용 이미지상에 상기 검출된 차량의 현재 위치를 나타내는 윤곽선 또는 반투명의 차량 아이콘이 표시되도록 한다.In addition, the controller 630 detects current position information of the vehicle moved from an arbitrary position based on the detected movement displacement information of the vehicle, and indicates the current position of the detected vehicle on the generated display image. Make sure that the outline or translucent vehicle icon is displayed.

상기 화면 표시부(640)는 제어부(630)로부터 출력되는 디스플레이용 이미지와 가상의 차량 윤곽선 또는 반투명의 차량 아이콘이 함께 출력되도록 하고, LCD 등의 출력수단으로 구성된다.
The screen display unit 640 outputs a display image output from the controller 630 and a virtual vehicle outline or a semi-transparent vehicle icon, and is configured as an output means such as an LCD.

따라서 차량의 주변 이미지를 통해 현재 위치에서 차량의 차체에 가려져 운전자의 시야 확보가 어려운 사각 지대의 장애물 배치를 용이하게 확인할 수 있어서 운전자의 안전한 주행 환경 제공과 안전한 주차 환경을 제공하는 것이 가능하게 된다.
Therefore, it is possible to easily check the obstruction of the blind spot that is difficult to secure the driver's view through the surrounding image of the vehicle from the current position, it is possible to provide a safe driving environment and a safe parking environment for the driver.

상기와 같이, 본 발명의 바람직한 실시 예를 참조하여 설명하였지만 해당 기술 분야의 숙련된 당업자라면 하기의 특허청구범위에 기재된 본 발명의 사상 및 영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경시킬 수 있음을 이해할 수 있을 것이다.
While the present invention has been particularly shown and described with reference to exemplary embodiments thereof, it will be understood by those of ordinary skill in the art that various changes in form and details may be made therein without departing from the spirit and scope of the invention as defined by the appended claims. It can be understood that

100 : 사각 지대 표시 장치 110 : 제 1 카메라
110' : t초 경과 후의 제 1 카메라 120 : 제 2 카메라
120' : t초 경과 후의 제 2 카메라 130 : 제어부
140 : 화면 표시부 150 : 제 n 카메라
200 : 차량 200' : t초 경과 후의 차량
300 : 과속 방지턱 400 : 차량 아이콘
500 : 방향 안내 정보 600 : 사각 지대 표시 장치
610 : 내비게이션 620 : 외부 정보 수신부
630 : 제어부 640 : 화면 표시부
100: blind spot display device 110: first camera
110 ′: first camera after t seconds elapsed 120: second camera
120 ': second camera after t seconds elapses 130: control part
140: screen display unit 150: n-th camera
200: vehicle 200 ': vehicle after t seconds
300: speed bump 400: vehicle icon
500: direction guide information 600: blind spot display device
610: navigation 620: external information receiver
630: control unit 640: screen display unit

Claims (14)

차량 주변 이미지를 검출하는 이미지 검출부;
상기 이미지 검출부가 임의의 시점 또는 상기 임의의 시점 이전에 촬영한 적어도 하나의 이미지를 디스플레이용 이미지로 출력하고, 상기 출력되는 디스플레이용 이미지에 차량의 현재 위치를 나타내는 차량 아이콘이 윤곽선 또는 반투명으로 표시되도록 하여 차량의 차체로 인해 가려진 차량의 하부 및 사각지대와, 카메라에 안 보이는 사각지대가 디스플레이되도록 상기 디스플레이용 이미지와 차량 아이콘을 출력하는 제어부; 및
상기 제어부로부터 출력되는 디스플레이용 이미지와 차량 아이콘이 디스플레이되도록 하는 화면 표시부를 포함하고,
상기 출력되는 디스플레이용 이미지는 상기 촬영된 이미지의 원본 이미지이거나 상기 원본 이미지의 시점을 변환한 이미지 중 어느 하나인 것을 특징으로 하는 사각 지대 표시 장치.
An image detector detecting an image of the vehicle surroundings;
The image detector outputs at least one image photographed at an arbitrary time point or before the predetermined time point as a display image, and the vehicle icon indicating the current position of the vehicle is displayed in outline or translucent on the output display image. A controller for outputting the display image and the vehicle icon so that the lower and blind spots of the vehicle obscured by the vehicle body and the blind spot not visible to the camera are displayed; And
A screen display unit configured to display a display image and a vehicle icon output from the controller,
The output image for display is a blind spot display device, characterized in that any one of the original image of the photographed image or the image converted from the viewpoint of the original image.
삭제delete 제 1 항에 있어서,
상기 출력되는 디스플레이용 이미지는 상기 촬영된 이미지의 원본 이미지 또는 시점을 변환한 이미지 여러 개를 합성한 것이거나 여러 이미지의 일부를 조합한 것 중 어느 하나인 것을 특징으로 하는 사각 지대 표시 장치.
The method of claim 1,
The output display image is a blind spot display device, characterized in that any one of a combination of the original image or a plurality of images converted from the viewpoint of the captured image or a combination of several images.
삭제delete 제 1 항에 있어서,
상기 이미지 검출부는 차량에 설치되어 차량의 주변 이미지를 촬영하여 제공하는 카메라, 상기 차량의 위치 정보를 검출하여 대응하는 위치의 주변 이미지를 제공하는 내비게이션 또는 상기 차량의 주변 도로 또는 건물에 설치된 카메라로부터 차량 주변의 이미지를 수신하여 제공하는 외부 정보 수신부 중 어느 하나인 것을 특징으로 하는 사각 지대 표시 장치.
The method of claim 1,
The image detection unit is installed in the vehicle to take a photograph of the surrounding image of the vehicle and provide the vehicle, the vehicle to detect the location information of the vehicle to provide a peripheral image of the corresponding location or the camera installed on the road or building surrounding the vehicle A blind spot display device, characterized in that any one of the external information receiving unit for receiving and providing an image of the surrounding.
제 5 항에 있어서,
상기 제어부는 차량의 외부에서 제공하는 차량의 위치 이동 정보 또는 차량으로부터 검출한 운전 제어 정보에 근거하여 상기 차량이 임의의 위치로부터 이동한 변위 정보를 연산하여 차량의 현재 위치 정보를 검출하는 것을 특징으로 하는 사각 지대 표시 장치.
The method of claim 5, wherein
The control unit detects current position information of the vehicle by calculating displacement information of the vehicle moved from an arbitrary position based on position movement information of the vehicle provided from the outside of the vehicle or driving control information detected from the vehicle. Blind spot display device.
제 5 항에 있어서,
상기 제어부는 상기 차량의 이동에 따른 실시간 위치 정보를 반영하여, 디스플레이용 이미지상에 표시된 차량 아이콘의 위치가 변경되도록 표시하는 것을 특징으로 하는 사각 지대 표시 장치.
The method of claim 5, wherein
And the controller reflects real-time location information according to the movement of the vehicle and displays the location of the vehicle icon displayed on the display image to be changed.
제 7 항에 있어서,
상기 차량 아이콘의 위치 변경은 디스플레이용 이미지상에 표시된 차량 아이콘의 위치 변경 표시가 디스플레이용 이미지를 고정하고 차량 아이콘의 위치만 변경하거나, 차량 아이콘의 위치를 고정하고 디스플레이용 이미지만 이동시키거나 또는 디스플레이용 이미지와 차량 아이콘의 위치를 모두 변경하는 것 중 어느 하나를 통해 변경하는 것을 특징으로 하는 사각 지대 표시 장치.
The method of claim 7, wherein
The position change of the vehicle icon may include changing the position of the vehicle icon displayed on the display image to fix the display image and changing only the position of the vehicle icon, fixing the position of the vehicle icon, and moving only the image for display or display. The blind spot display device, wherein the blind spot is changed by changing both the dragon image and the position of the vehicle icon.
a) 제어부가 임의의 시점 또는 상기 임의의 시점 이전에 이미지 검출부가 촬영한 적어도 하나의 이미지를 디스플레이용 이미지로 출력하는 단계;
b) 상기 제어부가 차량의 외부에서 제공하는 차량의 위치 이동 정보 또는 차량으로부터 제공되는 운전 제어 정보에 근거하여 상기 차량이 임의의 위치로부터 이동한 변위 정보를 연산하여 차량의 현재 위치를 검출하는 단계; 및
c) 상기 제어부가 상기 b)단계에서 검출한 현재 위치와 변위 정보에 따라 차량의 현재 위치를 나타내는 차량 아이콘을 상기 a)단계에서 출력되는 디스플레이용 이미지상에 윤곽선 또는 반투명으로 표시되도록 하여 차량 주변의 사각지대와 차체로 인해 가려진 사각지대가 디스플레이되도록 상기 디스플레이용 이미지와 차량 아이콘을 출력하는 단계를 포함하고,
상기 a)단계의 디스플레이용 이미지는 상기 촬영된 이미지의 원본 이미지이거나 상기 원본 이미지의 시점을 변환한 이미지 중 어느 하나인 것을 특징으로 하는 사각 지대 표시 방법.
a) outputting, by the controller, at least one image photographed by the image detector at an arbitrary viewpoint or before the arbitrary viewpoint, as an image for display;
b) detecting, by the controller, a current position of the vehicle by calculating displacement information of the vehicle from an arbitrary position based on position movement information of the vehicle provided from the outside of the vehicle or driving control information provided from the vehicle; And
c) the control unit displays a vehicle icon indicating the current position of the vehicle according to the current position and displacement information detected in step b) on the display image output in step a) as outline or translucent. And outputting the display image and the vehicle icon so that the blind spot hidden by the blind spot and the vehicle body is displayed.
And the image for display in step a) is one of an original image of the photographed image or an image obtained by converting a viewpoint of the original image.
삭제delete 제 9 항에 있어서,
상기 a)단계의 디스플레이용 이미지는 상기 촬영된 이미지의 원본 이미지 또는 시점을 변환한 이미지 여러 개를 합성한 것이거나 여러 이미지의 일부를 조합한 것 중 어느 하나인 것을 특징으로 하는 사각 지대 표시 방법.
The method of claim 9,
The display image of step a) is any one of a combination of a plurality of images of the original image or the point of view of the captured image or a combination of several images, the blind spot display method.
제 9 항 또는 제 11 항에 있어서,
상기 a)단계의 디스플레이용 이미지는 차량에 설치되어 차량의 주변 이미지를 촬영하여 제공하는 카메라, 상기 차량의 위치 정보를 검출하여 대응하는 위치의 주변 이미지를 제공하는 내비게이션 또는 상기 차량의 주변 도로 또는 건물에 설치된 카메라로부터 차량 주변의 이미지를 수신하여 제공하는 외부 정보 수신부 중 어느 하나로부터 촬영된 이미지인 것을 특징으로 하는 사각 지대 표시 방법.
The method according to claim 9 or 11,
The display image of step a) is a camera installed in the vehicle to photograph and provide the surrounding image of the vehicle, the navigation to detect the position information of the vehicle and provide the surrounding image of the corresponding position or the road or building surrounding the vehicle The blind spot display method characterized in that the image photographed from any one of the external information receiving unit for receiving and providing an image of the surrounding of the vehicle from the camera installed in the.
제 12 항에 있어서,
상기 차량 아이콘은 상기 차량의 이동에 따른 실시간 위치 정보를 반영하여, 디스플레이용 이미지상에 표시된 차량 아이콘의 위치가 변경되도록 표시하는 것을 특징으로 하는 사각 지대 표시 방법.
13. The method of claim 12,
And the vehicle icon reflects real-time location information according to the movement of the vehicle and displays the location of the vehicle icon displayed on the display image to be changed.
제 13 항에 있어서,
상기 차량 아이콘의 위치 변경은 디스플레이용 이미지상에 표시된 차량 아이콘의 위치 변경 표시가 디스플레이용 이미지를 고정하고 차량 아이콘의 위치만 변경하거나, 차량 아이콘의 위치를 고정하고 디스플레이용 이미지만 이동시키거나 또는 디스플레이용 이미지와 차량 아이콘의 위치를 모두 변경하는 것 중 어느 하나를 통해 변경하는 것을 특징으로 하는 사각 지대 표시 방법.
The method of claim 13,
The position change of the vehicle icon may include changing the position of the vehicle icon displayed on the display image to fix the display image and changing only the position of the vehicle icon, fixing the position of the vehicle icon, and moving only the image for display or display. A blind spot display method comprising changing the position of both a dragon image and a vehicle icon.
KR1020110132051A 2010-12-30 2011-12-09 Apparatus and method for displaying blind spot KR101295618B1 (en)

Priority Applications (6)

Application Number Priority Date Filing Date Title
KR1020110132051A KR101295618B1 (en) 2011-12-09 2011-12-09 Apparatus and method for displaying blind spot
EP11853246.4A EP2660104B1 (en) 2010-12-30 2011-12-29 Apparatus and method for displaying a blind spot
PCT/KR2011/010280 WO2012091476A2 (en) 2010-12-30 2011-12-29 Apparatus and method for displaying a blind spot
JP2013534836A JP2013541915A (en) 2010-12-30 2011-12-29 Blind Spot Zone Display Device and Method
CN201180057909.5A CN103237685B (en) 2010-12-30 2011-12-29 Blind area display device and method
US13/996,346 US9418556B2 (en) 2010-12-30 2011-12-29 Apparatus and method for displaying a blind spot

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020110132051A KR101295618B1 (en) 2011-12-09 2011-12-09 Apparatus and method for displaying blind spot

Publications (2)

Publication Number Publication Date
KR20130065268A KR20130065268A (en) 2013-06-19
KR101295618B1 true KR101295618B1 (en) 2013-08-12

Family

ID=48861936

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020110132051A KR101295618B1 (en) 2010-12-30 2011-12-09 Apparatus and method for displaying blind spot

Country Status (1)

Country Link
KR (1) KR101295618B1 (en)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20150072942A (en) * 2013-12-20 2015-06-30 엘지전자 주식회사 Driver assistance apparatus and Vehicle including the same
KR101611194B1 (en) * 2014-04-04 2016-04-11 주식회사 와이즈오토모티브 Apparatus and method for peripheral image generation of vehicle
KR102214604B1 (en) * 2014-09-05 2021-02-10 현대모비스 주식회사 Driving support image display method
KR102261312B1 (en) * 2015-04-21 2021-06-08 주식회사 만도 Multi Camera Driver Assistance System

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006074105A (en) 2004-08-31 2006-03-16 Equos Research Co Ltd Image display apparatus for vehicle periphery
KR100833603B1 (en) 2006-12-29 2008-05-30 주식회사 엠티오메가 Navigation system for providing bird view and method thereof
KR20090109437A (en) * 2008-04-15 2009-10-20 주식회사 만도 Method and System for Image Matching While Driving Vehicle
KR101097063B1 (en) * 2010-12-30 2011-12-22 주식회사 와이즈오토모티브 Apparatus and method for displaying blind spot

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006074105A (en) 2004-08-31 2006-03-16 Equos Research Co Ltd Image display apparatus for vehicle periphery
KR100833603B1 (en) 2006-12-29 2008-05-30 주식회사 엠티오메가 Navigation system for providing bird view and method thereof
KR20090109437A (en) * 2008-04-15 2009-10-20 주식회사 만도 Method and System for Image Matching While Driving Vehicle
KR101097063B1 (en) * 2010-12-30 2011-12-22 주식회사 와이즈오토모티브 Apparatus and method for displaying blind spot

Also Published As

Publication number Publication date
KR20130065268A (en) 2013-06-19

Similar Documents

Publication Publication Date Title
EP2660104B1 (en) Apparatus and method for displaying a blind spot
KR101097063B1 (en) Apparatus and method for displaying blind spot
US8717196B2 (en) Display apparatus for vehicle
KR101243108B1 (en) Apparatus and method for displaying rear image of vehicle
JP4497133B2 (en) Driving support method and driving support device
KR100936558B1 (en) Perimeter monitoring apparatus and image display method for vehicle
US8330816B2 (en) Image processing device
US8044781B2 (en) System and method for displaying a 3D vehicle surrounding with adjustable point of view including a distance sensor
JP4412380B2 (en) Driving support device, driving support method, and computer program
JP5099451B2 (en) Vehicle periphery confirmation device
US7710246B2 (en) Vehicle driving assist system
US9126533B2 (en) Driving support method and driving support device
KR102062923B1 (en) Parking assistance system
US20030060972A1 (en) Drive assist device
KR101611194B1 (en) Apparatus and method for peripheral image generation of vehicle
JP5408198B2 (en) Video display device and video display method
JP2006341641A (en) Image display apparatus and image display method
JP2006252389A (en) Circumference-monitoring device
JP2004240480A (en) Operation support device
JP2010028803A (en) Image displaying method for parking aid
KR101295618B1 (en) Apparatus and method for displaying blind spot
KR102031635B1 (en) Collision warning device and method using heterogeneous cameras having overlapped capture area
WO2017022262A1 (en) Surrounding monitoring device for operating machines
KR101190789B1 (en) Apparatus and method for measurementing distance of vehicle
JP4857159B2 (en) Vehicle driving support device

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20160711

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20170807

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20190805

Year of fee payment: 7