KR101295618B1 - Apparatus and method for displaying blind spot - Google Patents
Apparatus and method for displaying blind spot Download PDFInfo
- Publication number
- KR101295618B1 KR101295618B1 KR1020110132051A KR20110132051A KR101295618B1 KR 101295618 B1 KR101295618 B1 KR 101295618B1 KR 1020110132051 A KR1020110132051 A KR 1020110132051A KR 20110132051 A KR20110132051 A KR 20110132051A KR 101295618 B1 KR101295618 B1 KR 101295618B1
- Authority
- KR
- South Korea
- Prior art keywords
- vehicle
- image
- display
- blind spot
- icon
- Prior art date
Links
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
- B60R2300/20—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of display used
- B60R2300/202—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of display used displaying a blind spot scene on the vehicle part responsible for the blind spot
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
- B60R2300/30—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Mechanical Engineering (AREA)
- Closed-Circuit Television Systems (AREA)
- Traffic Control Systems (AREA)
Abstract
카메라, 내비게이션, 거리뷰 수신기 중 적어도 하나를 포함하는 이미지 검출부가 제공하는 적어도 하나의 차량 주변 이미지를 디스플레이하여 차량이 주행함에 따라 차체에 가려져 운전자의 시야 확보가 어려운 차량의 전방, 후방 및 측면의 사각 지대 정보를 운전자에게 제공하는 사각 지대 표시 장치 및 방법을 제공하는 것을 목적으로 한다. 이를 위해 본 발명은 차량 주변 이미지를 검출하는 이미지 검출부; 상기 이미지 검출부가 임의의 시점 또는 상기 임의의 시점 이전에 촬영한 적어도 하나의 이미지를 디스플레이용 이미지로 출력하고, 상기 출력되는 디스플레이용 이미지에 차량의 현재 위치를 나타내는 차량 아이콘이 윤곽선 또는 반투명으로 표시되도록 하여 차량의 차체로 인해 가려진 사각지대가 디스플레이되도록 상기 디스플레이용 이미지와 차량 아이콘을 출력하는 제어부; 및 상기 제어부로부터 출력되는 디스플레이용 이미지와 차량 아이콘이 디스플레이되도록 하는 화면 표시부를 포함한다. 따라서 운전자의 시야 확보가 어려운 사각 지대를 확인할 수 있어서 운전자의 안전한 주행 환경을 제공할 수 있는 장점이 있다.Displaying at least one vehicle surrounding image provided by an image detector including at least one of a camera, navigation, and a distance view receiver to display a blind spot on the front, rear, and side surfaces of the vehicle that are hidden by the vehicle as the vehicle travels, thereby making it difficult for the driver to obtain a vision. It is an object of the present invention to provide a blind spot display device and method for providing zone information to a driver. To this end, the present invention is an image detection unit for detecting a vehicle surrounding image; The image detector outputs at least one image photographed at an arbitrary time point or before the predetermined time point as a display image, and the vehicle icon indicating the current position of the vehicle is displayed in outline or translucent on the output display image. A control unit for outputting the display image and the vehicle icon so that the blind spot hidden by the vehicle body is displayed; And a screen display unit for displaying a display image and a vehicle icon output from the controller. Therefore, it is possible to check a blind spot that is difficult to secure the driver's view has the advantage of providing a safe driving environment for the driver.
Description
본 발명은 차량의 주변 사각 지대를 표시하는 장치 및 방법에 관한 발명으로서, 더욱 상세하게는 카메라, 내비게이션, 거리뷰 수신기 등이 제공하는 적어도 하나의 차량 주변 이미지를 디스플레이하여 차량이 주행함에 따라 차체에 가려져 운전자의 시야 확보가 어려운 차량의 전방, 후방 및 측면의 사각 지대 정보를 운전자에게 제공하는 사각 지대 표시 장치 및 방법에 관한 것이다.
The present invention relates to an apparatus and method for displaying a blind spot around a vehicle, and more particularly, to display at least one vehicle surrounding image provided by a camera, a navigation device, a street view receiver, etc. The present invention relates to a blind spot display device and a method for providing blind spot information on the front, rear, and side surfaces of a vehicle that are obscured to secure a driver's view.
일반적으로, 차량은 차체에 장비한 엔진 등의 원동기를 동력원으로 하여 도로 등을 주행하며 사람이나 화물을 운반하거나 각종 작업을 수행하는 장치이고, 차량의 운전자는 주행 방향을 주시하면서 차량을 안전하게 운전한다. In general, a vehicle is a device for driving a road or the like and performing various tasks by driving a road, etc. using a prime mover such as an engine mounted on a vehicle body, and the driver of the vehicle drives the vehicle safely while watching the driving direction. .
그러나 일반적인 차량은 도 1에 나타낸 바와 같이 차량(10)의 구동에 필요한 엔진 등이 설치된 프론트부로 인하여 차량(10)에 인접한 전방부가 운전자의 시야에 들어오지 않아 사각지대(20)가 형성되며, 또한 차량(10)의 후미부에 형성된 트렁크로 인하여 후방 시야를 부분적으로 제한하는 사각지대(30)가 형성되고, 차량의 도어 등으로 인해 측면 시야를 부분적으로 제한하는 사각지대(40)가 형성된다.However, in the general vehicle, as shown in FIG. 1, a
이러한 사각 지대(20, 30, 40)는 사물이 눈으로 보이지 아니하게 되는 각도에 위치한 영역을 말하는 것으로 운전자의 전방과 후방의 시야가 차량의 차체 일부에 의하여 제한되면 주행시에는 전방이 트인 도로를 주행하므로 운전에 장애를 유발하는 문제가 발생하지 않지만 차량의 주차시에는 차량(10) 주위에 여러 가지 장애물이 존재하게 되므로 사각 지대에 장애물이 위치하는 경우 운전자의 시야 확보가 곤란하여 주차에 어려움이 발생한다.The
또한, 차량의 주차시에 운전이 익숙하지 못한 운전자는 전방 또는 후방의 장애물을 발견하지 못하여 장애물과 충돌하는 경우가 발생하고, 운전에 익숙한 운전자라 할지라도 운전자가 고개를 들어 전방 및 후방을 직접 살피면서 장애물을 피하여야 주차할 수 있지만 부분적인 시야 확보만 가능하기 때문에 주차가 매우 곤란한 문제점이 있다.In addition, a driver who is unfamiliar with driving when the vehicle is parked may not encounter an obstacle in front or rear, and may collide with an obstacle, and even if the driver is familiar with driving, the driver may lift his head and look directly ahead and backward. There is a problem that parking is very difficult because only obstacles can be parked, but only partial visibility can be secured.
또한, 운전자가 차량의 전방 또는 후방에 장애물이 존재하는 것을 인식하여도 운전 또는 주차에 집중하는 경우 인식된 장애물에 대한 기억을 일시적으로 잃어버려 장애물과의 충돌이 발생하는 문제점이 있다.
In addition, even when the driver recognizes that there is an obstacle in front of or behind the vehicle, when the driver concentrates on driving or parking, the memory of the recognized obstacle is temporarily lost and a collision with the obstacle occurs.
이러한 문제점을 해결하기 위하여, 본 발명은 카메라, 내비게이션, 거리뷰 수신기 중 적어도 하나를 포함하는 이미지 검출부가 제공하는 적어도 하나의 차량 주변 이미지를 디스플레이하여 차량이 주행함에 따라 차체에 가려져 운전자의 시야 확보가 어려운 차량의 전방, 후방 및 측면의 사각 지대 정보를 운전자에게 제공하는 사각 지대 표시 장치 및 방법을 제공하는 것을 목적으로 한다.
In order to solve this problem, the present invention displays at least one vehicle surrounding image provided by an image detector including at least one of a camera, a navigation, a distance view receiver to cover the vehicle body as the vehicle travels to secure the driver's view It is an object of the present invention to provide a blind spot display device and method for providing a driver with blind spot information on the front, rear, and side surfaces of a difficult vehicle.
상기한 목적을 달성하기 위하여 본 발명은 사각 지대 표시 장치로서, In order to achieve the above object, the present invention provides a blind spot display device,
차량 주변 이미지를 검출하는 이미지 검출부; 상기 이미지 검출부가 임의의 시점 또는 상기 임의의 시점 이전에 촬영한 적어도 하나의 이미지를 디스플레이용 이미지로 출력하고, 상기 출력되는 디스플레이용 이미지에 차량의 현재 위치를 나타내는 차량 아이콘이 윤곽선 또는 반투명으로 표시되도록 하여 차량의 차체로 인해 가려진 차량의 하부 및 사각지대와 카메라에 안 보이는 사각지대가 디스플레이되도록 상기 디스플레이용 이미지와 차량 아이콘을 출력하는 제어부; 및 상기 제어부로부터 출력되는 디스플레이용 이미지와 차량 아이콘이 디스플레이되도록 하는 화면 표시부를 포함하고, 상기 출력되는 디스플레이용 이미지는 상기 촬영된 이미지의 원본 이미지이거나 상기 원본 이미지의 시점을 변환한 이미지 중 어느 하나인 것을 특징으로 한다.An image detector detecting an image of the vehicle surroundings; The image detector outputs at least one image photographed at an arbitrary time point or before the predetermined time point as a display image, and the vehicle icon indicating the current position of the vehicle is displayed in outline or translucent on the output display image. A control unit for outputting the display image and the vehicle icon so that the lower and blind spots of the vehicle obscured by the vehicle body and the blind spot not visible to the camera are displayed; And a screen display unit for displaying a display image and a vehicle icon output from the controller, wherein the output display image is one of an original image of the photographed image or an image converted from a viewpoint of the original image. It is characterized by.
삭제delete
또한, 본 발명에 따른 상기 출력되는 디스플레이용 이미지는 상기 촬영된 이미지의 원본 이미지 또는 시점을 변환한 이미지 여러 개를 합성한 것이거나 여러 이미지의 일부를 조합한 것 중 어느 하나인 것을 특징으로 한다.In addition, the output image for display according to the present invention is characterized in that any one of a combination of a plurality of images or a combination of the original image or the viewpoint of the captured image.
또한, 본 발명에 따른 상기 차체로 인해 가려진 사각지대는 차량의 하부를 포함하는 것을 특징으로 한다.In addition, the blind spot obscured by the vehicle body according to the invention is characterized in that it comprises a lower portion of the vehicle.
또한, 본 발명에 따른 상기 이미지 검출부는 차량에 설치되어 차량의 주변 이미지를 촬영하여 제공하는 카메라, 상기 차량의 위치 정보를 검출하여 대응하는 위치의 주변 이미지를 제공하는 내비게이션 또는 상기 차량의 주변 도로 또는 건물에 설치된 카메라로부터 차량 주변의 이미지를 수신하여 제공하는 외부 정보 수신부 중 어느 하나인 것을 특징으로 한다.In addition, the image detection unit according to the present invention is installed in a vehicle for photographing and providing a peripheral image of the vehicle, the navigation to detect the location information of the vehicle to provide a peripheral image of the corresponding position or the surrounding road of the vehicle or Characterized in that it is any one of the external information receiving unit for receiving and providing the image of the vehicle surroundings from the camera installed in the building.
또한, 본 발명에 따른 상기 제어부는 차량의 외부에서 제공하는 차량의 위치 이동 정보 또는 차량으로부터 검출한 운전 제어 정보에 근거하여 상기 차량이 임의의 위치로부터 이동한 변위 정보를 연산하여 차량의 현재 위치 정보를 검출하는 것을 특징으로 한다.In addition, the control unit according to the present invention calculates the displacement information that the vehicle is moved from any position based on the position movement information of the vehicle provided from the outside of the vehicle or the driving control information detected from the vehicle current position information of the vehicle It is characterized in that for detecting.
또한, 본 발명에 따른 상기 제어부는 상기 차량의 이동에 따른 실시간 위치 정보를 반영하여, 디스플레이용 이미지상에 표시된 차량 아이콘의 위치가 변경되도록 표시하는 것을 특징으로 한다.In addition, the control unit according to the present invention is characterized by displaying the position of the vehicle icon displayed on the display image by reflecting the real-time location information according to the movement of the vehicle is changed.
또한, 본 발명에 따른 상기 차량 아이콘의 위치 변경은 디스플레이용 이미지상에 표시된 차량 아이콘의 위치 변경 표시가 디스플레이용 이미지를 고정하고 차량 아이콘의 위치만 변경하거나, 차량 아이콘의 위치를 고정하고 디스플레이용 이미지만 이동시키거나 또는 디스플레이용 이미지와 차량 아이콘의 위치를 모두 변경하는 것 중 어느 하나를 통해 변경하는 것을 특징으로 한다.In addition, the position change of the vehicle icon according to the present invention, the position change indication of the vehicle icon displayed on the display image to fix the display image and change the position of the vehicle icon only, or fix the position of the vehicle icon and display image Only by moving or changing the position of both the display image and the vehicle icon, characterized in that for changing.
또한, 본 발명은 사각지대 표시 방법으로서,In addition, the present invention is a blind spot display method,
a) 제어부가 임의의 시점 또는 상기 임의의 시점 이전에 이미지 검출부가 촬영한 적어도 하나의 이미지를 디스플레이용 이미지로 출력하는 단계; b) 상기 제어부가 차량의 외부에서 제공하는 차량의 위치 이동 정보 또는 차량으로부터 제공되는 운전 제어 정보에 근거하여 상기 차량이 임의의 위치로부터 이동한 변위 정보를 연산하여 차량의 현재 위치를 검출하는 단계; 및 c) 상기 제어부가 상기 b)단계에서 검출한 현재 위치와 변위 정보에 따라 차량의 현재 위치를 나타내는 차량 아이콘을 상기 a)단계에서 출력되는 디스플레이용 이미지상에 윤곽선 또는 반투명으로 표시되도록 하여 차량 주변의 사각지대와 차체로 인해 가려진 사각지대가 디스플레이되도록 상기 디스플레이용 이미지와 차량 아이콘을 출력하는 단계를 포함하고, 상기 a)단계의 디스플레이용 이미지는 상기 촬영된 이미지의 원본 이미지이거나 상기 원본 이미지의 시점을 변환한 이미지 중 어느 하나인 것을 특징으로 한다.a) outputting, by the controller, at least one image photographed by the image detector at an arbitrary viewpoint or before the arbitrary viewpoint, as an image for display; b) detecting, by the controller, a current position of the vehicle by calculating displacement information of the vehicle from an arbitrary position based on position movement information of the vehicle provided from the outside of the vehicle or driving control information provided from the vehicle; And c) allowing the control unit to display a vehicle icon indicating the current position of the vehicle according to the current position and displacement information detected in step b) in outline or translucent on the display image output in step a). And outputting the display image and the vehicle icon such that the blind spot hidden by the blind spot and the vehicle body is displayed, wherein the display image of step a) is an original image of the photographed image or a viewpoint of the original image. It is characterized in that any one of the converted image.
삭제delete
또한, 본 발명에 따른 상기 a)단계의 디스플레이용 이미지는 상기 촬영된 이미지의 원본 이미지 또는 시점을 변환한 이미지 여러 개를 합성한 것이거나 여러 이미지의 일부를 조합한 것 중 어느 하나인 것을 특징으로 한다.In addition, the display image of step a) according to the present invention is characterized in that any one of a combination of a plurality of images or a combination of the original image or the point of view conversion of the captured image, characterized in that do.
또한, 본 발명에 따른 상기 a)단계의 디스플레이용 이미지는 차량에 설치되어 차량의 주변 이미지를 촬영하여 제공하는 카메라, 상기 차량의 위치 정보를 검출하여 대응하는 위치의 주변 이미지를 제공하는 내비게이션 또는 상기 차량의 주변 도로 또는 건물에 설치된 카메라로부터 차량 주변의 이미지를 수신하여 제공하는 외부 정보 수신부 중 어느 하나로부터 촬영된 이미지인 것을 특징으로 한다.In addition, the display image of step a) according to the present invention is a camera installed in the vehicle to shoot and provide the surrounding image of the vehicle, the navigation to detect the position information of the vehicle and provide a peripheral image of the corresponding position or the Characterized in that the image is taken from any one of the external information receiving unit for receiving and providing an image of the surrounding of the vehicle from a camera installed in the road or building around the vehicle.
또한, 본 발명에 따른 상기 차량 아이콘은 상기 차량의 이동에 따른 실시간 위치 정보를 반영하여, 디스플레이용 이미지상에 표시된 차량 아이콘의 위치가 변경되도록 표시하는 것을 특징으로 한다.In addition, the vehicle icon according to the present invention is characterized by displaying so that the position of the vehicle icon displayed on the display image is reflected by reflecting real-time position information according to the movement of the vehicle.
또한, 본 발명에 따른 상기 차량 아이콘의 위치 변경은 디스플레이용 이미지상에 표시된 차량 아이콘의 위치 변경 표시가 디스플레이용 이미지를 고정하고 차량 아이콘의 위치만 변경하거나, 차량 아이콘의 위치를 고정하고 디스플레이용 이미지만 이동시키거나 또는 디스플레이용 이미지와 차량 아이콘의 위치를 모두 변경하는 것 중 어느 하나를 통해 변경하는 것을 특징으로 한다.
In addition, the position change of the vehicle icon according to the present invention, the position change indication of the vehicle icon displayed on the display image to fix the display image and change the position of the vehicle icon only, or fix the position of the vehicle icon and display image Only by moving or changing the position of both the display image and the vehicle icon, characterized in that for changing.
본 발명은 이미지 검출부가 제공하는 적어도 하나의 차량 주변 이미지를 디스플레이하여 차량이 주행함에 따라 차체에 가려져 운전자의 시야 확보가 어려운 차량의 전방, 후방 및 측면의 사각 지대 정보를 운전자에게 제공할 수 있는 장점이 있다.Advantageous Effects of the Invention The present invention provides an advantage of providing blind spot information on the front, rear, and side surfaces of a vehicle that is hidden by the vehicle body as the vehicle travels by displaying at least one vehicle surrounding image provided by the image detector. There is this.
또한, 본 발명은 운전자의 시야 확보가 어려운 사각 지대를 확인할 수 있어서 운전자의 안전한 주행 환경 제공과 안전한 주차 환경을 제공할 수 있는 장점이 있다.
In addition, the present invention can check the blind spots difficult to secure the driver's view has the advantage of providing a safe driving environment and a safe parking environment for the driver.
도 1 은 일반적인 차량의 전방 및 후방의 사각 지대를 나타낸 예시도.
도 2 는 본 발명에 따른 사각 지대 표시 장치의 일실시예를 나타낸 블록도.
도 3 은 본 발명에 따른 사각 지대 표시 장치의 동작 과정을 나타낸 예시도.
도 4 는 본 발명에 따른 사각 지대 표시 장치의 다른 동작 과정을 나타낸 예시도.
도 5 는 본 발명에 따른 사각 지대 표시 장치를 통해 검출되는 이미지상에 차량 아이콘을 표시하여 나타낸 예시도.
도 6 은 본 발명에 따른 사각 지대 표시 장치를 통해 검출되는 도로 이미지상에 차량 아이콘을 표시하여 나타낸 예시도.
도 7 은 본 발명에 따른 사각 지대 표시 과정을 나타낸 흐름도.
도 8 은 본 발명에 따른 사각 지대 표시 장치의 다른 실시예를 나타낸 블록도.1 is an exemplary view showing the front and rear blind spots of a typical vehicle.
2 is a block diagram showing an embodiment of a blind spot display device according to the present invention;
3 is an exemplary view showing an operation process of a blind spot display device according to the present invention;
4 is an exemplary view showing another operation process of the blind spot display device according to the present invention;
5 is an exemplary view showing a vehicle icon on an image detected by the blind spot display device according to the present invention.
6 is an exemplary view showing a vehicle icon on a road image detected through the blind spot display device according to the present invention.
7 is a flowchart illustrating a blind spot display process according to the present invention.
8 is a block diagram showing another embodiment of a blind spot display device according to the present invention;
이하, 첨부된 도면을 참조하여 본 발명에 따른 사각 지대 표시 장치 및 방법의 바람직한 실시예를 상세하게 설명한다.
Hereinafter, exemplary embodiments of a blind spot display device and method according to the present invention will be described in detail with reference to the accompanying drawings.
(제 1 실시예)(Embodiment 1)
도 2는 본 발명에 따른 사각 지대 표시 장치의 일실시예를 나타낸 블록도이고, 도 3은 본 발명에 따른 사각 지대 표시 장치의 동작 과정을 나타낸 예시도이며, 도 4는 본 발명에 따른 사각 지대 표시 장치의 다른 동작 과정을 나타낸 예시도이고, 도 5는 본 발명에 따른 사각 지대 표시 장치를 통해 검출되는 이미지상에 차량 아이콘을 표시하여 나타낸 예시도이며, 도 6은 본 발명에 따른 사각 지대 표시 장치를 통해 검출되는 도로 이미지상에 차량 아이콘을 표시하여 나타낸 예시도이다.2 is a block diagram showing an embodiment of a blind spot display device according to the present invention, Figure 3 is an exemplary view showing an operation process of the blind spot display device according to the present invention, Figure 4 is a blind spot according to the present invention 5 is an exemplary view illustrating another operation process of the display device, and FIG. 5 is an exemplary view showing a vehicle icon on an image detected by the blind spot display device according to the present invention, and FIG. 6 is a blind spot display according to the present invention. Exemplary diagram showing a vehicle icon on the road image detected through the device.
도 2 내지 도 6에 나타낸 바와 같이, 본 발명에 따른 사각 지대 표시 장치(100)는 차량의 주변 이미지를 제공하는 이미지 검출수단으로서 제 1 카메라(110), 제 2 카메라(120) 및 제 n 카메라(150)를 구비하고, 제어부(130)와, 화면 표시부(140)를 포함하여 구성된다.2 to 6, the blind
상기 제 1 카메라(110)는 차량(200)에 설치되어 주행중인 차량의 후방을 촬영한 이미지를 출력하는 구성으로서, 차량의 실내에 설치된 테일 램프, 후미등 또는 트렁크 도어 등에 설치된다.The
상기 제 2 카메라(120)는 차량(200)에 설치되어 주행중인 차량의 전방을 촬영한 이미지를 출력하는 구성으로서, 차량의 실내에 설치된 룸미러, 헤드 램프 또는 라디에이터 그릴 등에 설치된다.The
상기 제 n 카메라(150)는 차량(200)에 설치되어 주행중인 차량의 측면을 촬영한 이미지를 출력하는 구성으로서, 차량의 사이드 미러 등에 설치된다.The n-
상기 제 1, 제 2 및 제 n 카메라(110, 120 및 150)는 CMOS 타입의 영상 센서, CCD 타입의 영상 센서 또는 제 3 타입의 영상 센서 중 어느 것을 사용해도 무방하다.The first, second and n-
또한, 본 실시예에서는 차량의 전방 또는 후방의 주행 방향 이미지를 촬영하기 위하여 각각 1 대의 카메라가 설치되어 동작하는 구성을 설명하고 있으나, 같은 주행 방향을 촬영하는 복수의 카메라를 설치하는 구성도 가능하다.In addition, in the present embodiment, a configuration in which one camera is installed and operated in order to photograph the driving direction image of the front or rear of the vehicle is described, but a plurality of cameras that capture the same driving direction may be installed. .
상기 제어부(130)는 제 1 카메라(110), 제 2 카메라(120) 또는 제 n 카메라(150)가 임의의 시점(이하, 현재 시점이라 함)에서 촬영한 적어도 하나의 이미지를 그대로 디스플레이되도록 하거나 또는 미리 저장된 이미지 처리 프로그램을 통해 합성/변환/조합 중 어느 하나를 수행하여 생성된 이미지가 디스플레이되도록 출력한다.The
도 3과 같이 상기 제어부(130)는 차량(200)이 후방으로 주행하는 경우 차량 후방의 일정 영역을 촬영하는 제 1 카메라(110)가 임의의 시점에 촬영한 하나의 후방 이미지(A + B)를 검출하여 메모리(미도시) 등의 저장수단에 저장한다.As illustrated in FIG. 3, the
여기서 임의의 시점은 현재 시점이 될 수도 있고, 과거 시점과 현재 시점 사이의 임의의 시간 구간 중 어느 한 시점이 될 수도 있다.Here, the arbitrary time point may be the current time point or may be any one time point in any time interval between the past time point and the current time point.
또한, 상기 제어부(130)는 차량의 ECU, TCU, 속도 센서, 조향각 센서, 휠 센서, 카메라가 현재 촬영한 이미지와 직전에 쵤영한 이미지를 비교하여 산출한 이동 거리 정보 등으로부터 차량의 이동 거리, 속도, 주행 방향 및 조향각 정보를 검출하고, 상기 검출된 이동 거리, 속도, 주행 방향 및 조향각 정보를 포함한 운전 제어 정보로부터 차량의 이동 변위 정보를 검출하며, 상기 검출된 차량의 이동 변위 정보에 기초하여 임의의 위치로부터 이동한 단위 시간당 차량의 이동 위치를 산출하여 차량의 현재 위치 정보를 검출하며, 상기 검출된 차량의 현재 위치 정보에 대응하는 상기 후방 이미지(A + B)의 임의의 위치에 차량(200')의 현재 위치를 나타내기 위해 윤곽선 또는 반투명으로 차량 형상의 아이콘(400)이 표시되도록 한다.In addition, the
즉 상기 제어부(130)는 후방 이미지(A + B)를 검출한 후 상기 검출된 후방 이미지(A + B) 상에 실제 차량(200')을 대신하여 윤곽선 또는 반투명으로 차량 아이콘(400)을 표시하고, 차량의 속도센서 또는 TCU 등으로부터 검출한 속도 정보를 통해 임의의 위치로부터 일정 시간(예를 들면, 0.5초)이 경과하는 동안 차량(200')이 이동한 거리를 산출하며, 상기 산출된 차량의 이동 거리에 따라 상기 윤곽선 또는 반투명의 차량 아이콘 위치가 상기 후방 이미지(A + B) 상에서 미리 설정된 단위 픽셀 수 또는 일정 거리만큼 이동한 위치 예를 들면 A 영역에 표시되도록 한다.That is, the
상기 일정 시간은 설명의 편의상 0.5초로 예시한 것 일뿐 이에 한정되는 것은 아니다.The predetermined time is merely illustrated as 0.5 seconds for convenience of description and the present invention is not limited thereto.
또한, 차량이 전방으로 주행하는 경우 상기 제어부(130)는 도 4와 같이 임의의 시점에 제 2 카메라(120)가 촬영한 하나의 전방 이미지(C + D)의 검출하여 메모리(미도시) 등의 저장수단에 저장한다.In addition, when the vehicle travels forward, the
또한, 상기 제어부(130)는 차량으로부터 차량의 속도, 주행 방향 및 조향각 정보를 포함한 차량의 이동 변위 정보를 검출하고, 상기 검출된 차량의 이동 변위 정보에 기초하여 임의의 위치로부터 단위 시간당 차량이 이동한 위치를 산출하여 차량의 현재 위치를 검출하며, 상기 전방 이미지(C + D)의 임의의 위치에 차량(200')의 현재 위치를 나타내기 위해 윤곽선 또는 반투명으로 차량 형상의 아이콘(400)이 표시되도록 한다.In addition, the
즉 상기 제어부(130)는 전방 이미지(C + D)를 검출한 후 상기 검출된 전방 이미지(C + D) 상에 실제 차량(200')을 대신하여 윤곽선 또는 반투명으로 차량 아이콘(400)을 표시하고, 차량의 속도 정보를 통해 일정 시간이 경과하는 동안 차량(200')이 이동한 거리를 산출하여 차량의 이동 거리에 따라 상기 윤곽선 또는 반투명의 차량 아이콘 위치가 상기 전방 이미지(C + D) 상에서 미리 설정된 단위 픽셀 수만큼 이동된 위치 예를 들면 C 영역에 표시되도록 한다.That is, the
도 5를 참조하여 차량의 차체에 가려진 사각 지대가 운전자에게 표시되는 것을 더욱 상세하게 설명한다.Referring to FIG. 5, the blind spots hidden by the vehicle body are displayed to the driver in more detail.
차량이 전방으로 주행하는 경우 제 2 카메라(120)가 임의의 시점에 과속 방지턱(300)이 포함된 전방 이미지(C + D)를 촬영하고 이후 차량이 주행을 계속하여 t초 후 차량의 현재 위치가 전방 이미지(C + D) 상의 C 영역이라고 하면, 운전자는 t초 전에 본 과속 방지턱(300)을 차량이 통과하고 있음을 알 수 있지만 실제 과속 방지턱(300)은 차체에 가려져 운전자의 시야 확보가 어려운 사각 지대에 위치하게 된다.When the vehicle travels forward, the
상기 제어부(130)는 운전자가 사각 지대에 위치된 과속 방지턱(300)과 관련한 정보를 인식할 수 있도록 전방 이미지(C + D) 상의 C 영역에 차량의 현재 위치를 표시하는 가상의 차량 아이콘(400)을 차량의 이동 거리 정보, 속도 정보, 조향각 정보 등에 기초한 차량의 이동 변위 정보를 공지의 거리 및 위치 연산 프로그램을 통해 연산하여 차량이 임의의 시점부터 이동한 거리 및 위치 정보를 검출하고, 상기 검출된 거리 및 위치 정보에 따라 상기 전방 이미지(C+D) 상의 대응 영역(예를 들면, C 영역)에 차량의 현재 위치를 나타내는 차량 아이콘(400)의 위치를 차량 형상의 윤곽선 또는 반투명의 차량 형상으로 디스플레이함으로써 운전자가 차체에 의해 가려진 차량 하부의 사각지대를 인식할 수 있도록 한다.The
또한, 상기 제어부(130)가 차량이 현재 위치하는 곳에 가상의 차량 아이콘(400)을 윤곽선 또는 반투명으로 표시함으로써, 운전자는 현재 과속 방지턱(300)이 설치된 구간을 통과하고 있음을 인식할 수 있게 되고, 차량 아이콘(400)을 중심으로 우측의 사각 지대 영역(C-1)과 좌측의 사각 지대 영역(C-2)을 확인할 수 있도록 한다.In addition, the
또한, 상기 제어부(130)는 가상의 차량 아이콘 정보(400)가 전방 이미지(C + D) 상에 차량 형상의 윤곽선 또는 반투명의 차량 형상 중 어느 하나로 표시되도록 하여 차량의 주변 도로상에 위치한 장애물 및 방향 안내 정보가 운전자에게 인식될 수 있도록 디스플레이한다.In addition, the
도 6을 참조하여 차량의 차체에 가려져 차량 하부와 주변 도로상에 위치한 장애물 및 방향 안내 정보가 운전자에게 표시되는 것을 더욱 상세하게 설명한다.Referring to FIG. 6, it will be described in more detail that obstacles and direction guide information that are hidden by the vehicle body and located on the lower side of the vehicle and the surrounding road are displayed to the driver.
운전자가 주행중에 도로상에 인쇄된 방향 안내 정보(500)를 미처 인식하지 못한 경우 상기 방향 안내 정보(500)가 운전자에게 인식될 수 있도록 제어부(130)는 전방 이미지(C + D) 상에 디스플레이되는 가상의 차량 아이콘(400)이 반투명 또는 차량의 윤곽선만 표시되도록 한다.If the driver does not recognize the direction guide
또한, 상기 제어부(130)는 현재 이미지와 임의의 시점 이전 과거 이미지에 포함된 고정된 물체 또는 이동중인 물체의 유무를 확인하여 물체까지의 거리 정보도 함께 표시할 수 있다.In addition, the
즉 상기 제어부(130)는 하나의 카메라를 이용하여 이미지를 촬영한 경우 촬영한 현재 시점의 이미지와 일정 시간 이전 과거 시점에 촬영한 이미지를 이미지 프로세싱하여 현재 이미지와 과거 이미지에서 유사한 특성(예를 들면, 픽셀의 밝기, 에지의 유무 등)을 갖는 물체(픽셀) 정보를 찾아서 변위가 발생한 임의의 물체 정보(픽셀 정보)을 각각 검출한다.That is, when the image is captured by using a single camera, the
상기 제어부(130)는 이미지 프로세싱을 통해 관심 있는 두 개의 이미지 비교를 통해 벡터로 정의된 화소들의 이동 변위와 각도 변위 등을 통해 유사도를 검출하여 물체를 인식하거나, 물체의 경계선 또는 윤곽선 등의 에지나 물체의 윤곽에 근사하는 선분, 곡선 등을 구하여 이용하기도 하고, 이미지 내에 존재하는 모서리점, 불변인 점, 또는 회전변환이나 크기 변화 등에 대하여 불변인 특징점을 이용한 인식을 수행할 수도 있으며, 이미지에 포함된 물체의 특징점을 추출하여 인식을 수행할 수도 있다.The
또한, 상기 제어부(130)는 상기 현재 이미지에서 검출된 현재의 물체 위치와 과거의 이미지에서 검출한 과거의 물체 위치 간의 이동 변위(벡터)를 검출하고, 차량의 ECU, TCU, 휠 센서 또는 스티어링 각도 센서 등으로부터 제공되는 차량의 조향각 정보, 거리 정보 및 속도 정보를 포함한 운행 정보를 검출하여 상기 두 물체의 이동 변위에 대응하는 이동 거리를 산출한다.In addition, the
즉 상기 제어부(130)는 현재의 이미지상에 현재의 물체 위치와 과거의 물체 위치가 표시되도록 하고, 두 물체 간의 차이 값은 차량이 이동한 거리를 이용하여 두 물체 간의 이동 거리로 설정되도록 한다.That is, the
또한, 상기 제어부(130)는 현재 이미지상에 미리 설정된 기준점과 현재의 물체 및 과거의 물체까지의 변위를 검출하며, 상기 기준점과 현재의 물체 및 과거의 물체가 이루는 삼각형 정보 즉 상기 현재 물체와 과거 물체 간의 이동 변위를 기준변으로 하고, 상기 기준점이 현재 물체 및 과거 물체와 각각 이루는 변위를 다른 두 변으로 하며, 이들이 이루는 각을 각각 산출하여 기준점으로부터 현재 물체까지의 거리를 산출한다.In addition, the
또한, 상기 제어부(130)는 산출되는 현재 물체의 위치가 이미지의 영역 중에서 과거 이미지의 영역 상에 위치하면, 물체의 이동 변위를 추정하여 추정된 예상 이동 변위와 차량의 속도와 상기 이동 변위로부터 검출한 현재 물체의 상대 속도 등에 기초하여 일정 시간 경과 후에 임의의 이미지 영역 상에 위치한 물체까지의 예상 위치와 거리를 산출하여 제공한다.In addition, when the calculated position of the current object is located on the area of the past image in the area of the image, the
또한, 상기 제어부(130)는 적어도 두 대 이상의 스테레오 카메라를 이용하는 경우 스테레오 비전을 통해 물체까지의 거리 추출을 수행할 수 있고, 이때 상기 물체의 이동 변위를 추정하여 추정된 예상 이동 변위와 차량의 속도와 상기 이동 변위로부터 검출한 현재 물체의 상대 속도 등에 기초하여 일정 시간 경과 후에 이미지의 임의의 영역 상에 위치한 물체까지의 예상 위치와 거리를 산출하여 제공할 수 있다.In addition, when using at least two stereo cameras, the
또한, 상기 제어부(130)는 상기 산출된 거리를 미리 설정된 충돌 판단용 기준 거리정보와 비교하고, 그 결과 충돌이 예상되면 경고음 또는 경고 화면이 표시되도록 경고 신호를 출력한다.In addition, the
상기 스테레오 비전 프로그램은 차량의 전조등, 후미등 또는 사이드 미러의 좌측 및 우측에 각각 설치된 스테레오 카메라를 통해 좌측 및 우측의 이미지가 입력되면 좌측 및 우측 이미지에 대한 밝기 및 에피폴라 라인(epipolar line)을 일치시키는 스테레오 이미지 입력에 대한 전처리 과정을 수행하고, 동일한 물체로 판단되는 좌측 및 우측 이미지에서 겹쳐지는 영역의 픽셀간 양안차(disparity)를 생성하는 스테레오 매칭을 수행하며, 이러한 양안차의 결과에서 노이즈 성분을 제거한 후에 그 스테레오 이미지의 거리 정보에 대한 프로젝션(projection), 세그멘테이션(segmentation), 필터링(filtering) 등의 후처리 과정을 수행하여 스테레오 이미지를 획득함으로써 이러한 스테레오 이미지를 통해 물체의 거리, 모양, 방향 등의 정보를 검출하게 된다.The stereo vision program matches the brightness and the epipolar line for the left and right images when the left and right images are input through the stereo cameras installed on the left and right sides of the headlight, tail light or side mirror of the vehicle, respectively. Performs preprocessing on stereo image input, performs stereo matching to generate pixel-to-pixel disparity of overlapping regions in the left and right images determined to be the same object, and removes noise components from the result of the binocular difference. After removal, post-processing such as projection, segmentation, filtering, etc. of the distance information of the stereo image is performed to acquire a stereo image. Will be detected.
상기 스테레오 비전 프로그램은 하나의 실시예로서, 공지의 다양한 스테레오 비전 프로그램을 사용할 수도 있다.The stereo vision program may use various known stereo vision programs as an embodiment.
또한, 상기 제어부(130)는 카메라가 촬영한 원본 이미지를 그대로 디스플레이용 이미지로 출력할 수도 있지만, 상기 촬영된 원본 이미지를 시점 변환 프로그램을 통해 버드 아이뷰(Bird Eye View) 시점으로 변환한 이미지를 디스플레이용 이미지로 출력할 수도 있다.In addition, the
또한, 상기 제어부(130)는 상기 카메라가 촬영한 원본 이미지 또는 시점 변환된 이미지 여러 개를 이미지 처리 프로그램을 통해 합성(merge)하거나 또는 스티칭(stitching)하여 디스플레이용 이미지로 출력할 수도 있다.In addition, the
또한, 상기 제어부(130)는 상기 카메라가 촬영한 원본 이미지, 시점 변환된 이미지 또는 합성된 여러 이미지의 일부를 이미지 처리 프로그램을 통해 조합하여 디스플레이용 이미지로 출력할 수도 있다.In addition, the
상기 화면 표시부(140)는 제어부(130)로부터 출력되는 이미지와 가상의 차량 윤곽선 또는 반투명의 차량 아이콘(400)이 함께 출력되도록 하고, LCD 등의 출력수단으로 구성된다.The
상기 차량 아이콘(400)은 반투명 또는 윤곽선 형태의 차량 형상으로 현재 위치의 차량을 디스플레이용 이미지에 가상으로 표시한다.The
또한, 상기 차량 아이콘(400)은 차량의 바퀴(미도시) 위치를 반투명 또는 윤곽선의 차량 형상과 함께 표시하는 것도 가능하여 차량의 주행시 차량의 차체에 의해 가려진 차량 하부와 도로에 표시된 주행 방향 표시와 도로 안내용 문자를 운전자에게 정확하게 전달할 수 있다.In addition, the
또한, 상기 차량 아이콘(400)의 위치 변경은 디스플레이용 이미지상에 표시된 차량 아이콘의 위치 변경 표시가 디스플레이용 이미지를 고정하고 차량 아이콘(400)의 위치만 변경하거나, 차량 아이콘(400)의 위치를 고정하고 디스플레이용 이미지만 이동시키거나 또는 디스플레이용 이미지와 차량 아이콘의 위치를 모두 변경하는 것 중 어느 하나를 통해 변경한다.In addition, the position change of the
도 7은 본 발명에 따른 사각 지대를 표시하는 과정을 나타낸 흐름도로서, 도 2, 도 4 내지 도 7을 참조하여 본 발명에 따른 사각 지대 표시 방법을 설명한다.7 is a flowchart illustrating a process of displaying a blind spot according to the present invention, and with reference to FIGS. 2 and 4 to 7, a blind spot display method according to the present invention will be described.
차량(200)이 예를 들어 전방으로 주행(S100)하면, 차량에 설치된 제 2 카메라(120)는 차량(200)이 주행함에 따라 촬영을 시작하고, 제어부(130)는 임의의 시점에 제 2 카메라(120)가 촬영한 디스플레이용 이미지(C 또는 C + D)를 검출(S100)하여 임시 저장한다.When the
또한, 상기 S100단계에서 촬영된 디스플레이용 이미지는 카메라가 촬영한 원본 이미지를 그대로 디스플레이용 이미지로 저장하여 출력할 수도 있지만, 상기 촬영된 원본 이미지를 제어부(130)가 시점 변환 프로그램을 통해 버드 아이뷰(Bird Eye View) 시점으로 변환한 이미지를 디스플레이용 이미지로 출력할 수도 있다.In addition, the display image photographed in step S100 may be output by storing the original image photographed by the camera as an image for display as it is, but the
또한, 상기 S100단계에서 촬영된 디스플레이용 이미지는 상기 카메라가 촬영한 원본 이미지 또는 상기 시점 변환된 이미지 여러 개를 제어부(130)가 이미지 처리 프로그램을 통해 합성 또는 스티칭하거나 상기 촬영한 원본 이미지, 시점 변환된 이미지 또는 합성된 여러 이미지의 일부를 제어부(130)가 이미지 처리 프로그램을 통해 조합하여 디스플레이용 이미지로 출력할 수도 있다.In addition, the display image photographed in step S100 is synthesized or stitched by the
상기 S100단계를 수행한 후 제어부(130)는 차량으로부터 제공되는 차량의 ECU, TCU, 속도 센서, 조향각 센서, 휠 센서, 카메라가 현재 촬영한 이미지와 직전에 촬영한 이미지를 비교하여 산출한 운전 제어 정보로부터 차량의 이동 거리, 속도, 주행 방향 및 조향각 정보를 포함한 차량의 이동 변위 정보를 검출하고, 상기 검출된 이동 변위 정보에 기초하여 단위 시간당 차량의 이동 거리와 조향 방향에 따른 위치를 산출(S110)한다.After performing the step S100, the
상기 제어부(130)는 상기 산출된 이동 거리와 위치를 미리 설정된 단위 픽셀수에 따라 상기 S100단계에서 검출된 디스플레이용 이미지(C + D) 상에 대응시켜 차량의 현재 위치를 나타내는 가상의 차량 아이콘(400)을 차량의 윤곽선 또는 반투명으로 표시(S120)하여 화면 표시부(140)를 통해 출력되도록 한다.The
상기 S120 단계에서 화면 표시부(140)를 통해 출력되는 상기 가상의 차량 아이콘(400)은 전방 이미지(C + D) 상에 반투명 또는 차량의 윤곽선 등으로 표시되도록 함으로써 사각지대에 있는 장애물(예를 들면, 과속 방지턱, 경계석, 분리대 등)이나 방향 안내 정보(500)가 차량의 현재 위치 정보와 함께 운전자에게 용이하게 인식될 수 있도록 한다.The
따라서 차량의 차체에 가려져 운전자의 시야 확보가 어려운 사각 지대와, 카메라가 촬영하는 현재의 이미지에는 보이지 않는 차량 주변의 사각지대를 확인할 수 있어서 운전자의 안전한 주행 환경 제공과 안전한 주차 환경을 제공하는 것이 가능하게 된다.Therefore, it is possible to check blind spots that are hidden by the body of the vehicle and difficult to secure the driver's vision, and blind spots around the vehicle which are not visible in the current image taken by the camera, thereby providing a safe driving environment and a safe parking environment for the driver. Done.
한편, 본 실시예에서는 디스플레이되는 이미지상에서 차량의 현재 위치를 나타내는 가상의 차량 아이콘이 차량의 이동에 따라 상기 디스플레이용 이미지상에 위치가 변경되며 표시되도록 하는 것을 설명하였으나, 복수의 이미지가 연속으로 배열된 디스플레이용 이미지상에서 상기 차량 아이콘이 차량의 이동에 따라 상기 연속으로 배열된 이미지상에서 위치가 변경되며 표시되도록 구성할 수 있음은 자명할 것이다.
Meanwhile, in the present exemplary embodiment, the virtual vehicle icon indicating the current position of the vehicle is displayed on the displayed image so that the position is changed and displayed on the display image according to the movement of the vehicle, but the plurality of images are continuously arranged. It will be apparent that the vehicle icon can be configured to be displayed on the continuously arranged image in accordance with the movement of the vehicle.
(제 2 실시예)(Second Embodiment)
도 8은 본 발명에 따른 사각 지대 표시 장치의 다른 실시예를 나타낸 블록도이다.8 is a block diagram illustrating another exemplary embodiment of a blind spot display device according to the present invention.
도 8에 나타낸 바와 같이, 본 발명에 따른 사각 지대 표시 장치(600)는 차량의 주변 이미지를 제공하는 이미지 검출수단으로서 내비게이션(610)과 외부 정보 수신부(620)를 구비하고, 제어부(630)와 화면 표시부(640)를 포함하여 구성된다.As shown in FIG. 8, the blind
상기 내비게이션(610)은 차량에 설치되어 GPS 수신기로부터 위치 정보를 수신하여 차량의 현재 위치 정보를 검출하며, 상기 검출된 차량의 위치 정보에 따라 메모리(미도시) 등에 미리 저장된 해당 위치의 지도 이미지(또는 실사 이미지)를 독출하여 제공한다.The
상기 외부 정보 수신부(620)는 무선 네트워크를 통해 차량 주변의 도로 및 건물 등에 설치된 카메라(미도시)와 연결되고, 상기 카메라가 촬영하는 이미지를 수신하여 제어부(630)로 제공한다.The
현재의 지능형 도로망 시스템은 일부 도로구간이나 건물의 일부 영역을 고정 촬영하는 카메라를 구비하고 있으며, 상기 카메라들은 고유의 IP가 할당되어 무선 통신을 이용하여 상기 카메라에 접속함으로써 카메라가 촬영한 이미지를 사용자가 손쉽게 수신하여 확인할 수 있다.The current intelligent road network system includes a camera for capturing a part of a road section or a certain area of a building, and the cameras are assigned a unique IP and connected to the camera using wireless communication to use an image taken by the camera. Can easily receive and check.
즉 상기 외부 정보 수신부(620)는 도로 또는 도로 주변의 건물 등에 설치된 예를 들면, IP 카메라들과 무선 통신을 통해 접속하고, 상기 카메라가 제공하는 이미지들과 상기 카메라가 설치된 장소의 위치 정보를 수신하여 메모리(미도시)에 저장하며, 상기 수신된 이미지들은 제어부(630)에 제공한다.That is, the
또한, 상기 외부 정보 수신부(620)는 상기 IP 카메라로부터 제공하는 카메라의 설치 위치 정보와 함께 상기 내비게이션(610)이나 GPS 수신기(미도시) 등으로부터 차량의 현재 위치를 검출하여 제어부(630)로 전송한다.In addition, the external
상기 제어부(630)는 내비게이션(610) 또는 외부 정보 수신부(620)가 임의의 시점에 제공하는 해당 위치의 지도 이미지 또는 차량의 주변 이미지를 검출하고, 상기 검출된 적어도 하나의 이미지를 그대로 사용하여 디스플레이용 이미지를 생성하거나 또는 이미지 처리 프로그램을 통해 검출한 이미지들을 합성하거나, 시점 변환 프로그램을 통해 검출한 이미지의 시점을 변환하여 재구성하거나 또는 이미지 일부를 조합하여 재구성한 디스플레이용 이미지가 디스플레이되도록 출력한다.The
즉 상기 제어부(630)는 예를 들면, IP 카메라가 촬영한 원본 이미지를 그대로 디스플레이용 이미지로 출력할 수도 있지만, 상기 촬영된 원본 이미지를 시점 변환 프로그램을 통해 버드 아이뷰 시점으로 변환한 이미지를 디스플레이용 이미지로 출력할 수도 있다.That is, the
또한, 상기 제어부(630)는 상기 IP 카메라가 촬영한 원본 이미지 또는 시점 변환된 이미지 여러 개를 이미지 처리 프로그램을 통해 합성하거나 또는 스티칭하여 디스플레이용 이미지로 출력할 수도 있고, 상기 IP 카메라가 촬영한 원본 이미지, 시점 변환된 이미지 또는 합성된 이미지의 일부를 이미지 처리 프로그램을 통해 조합하여 디스플레이용 이미지로 출력할 수도 있다.In addition, the
또한, 상기 제어부(630)는 차량의 ECU, TCU, 속도 센서, 조향각 센서, 휠 센서 등으로부터 검출한 운전 제어 정보를 임의의 시점 이전에 수신한 운전 제어 정보와 비교 연산하여 차량이 이동한 거리, 속도, 주행 방향 및 조향각 등 차량의 이동 변위 정보를 검출한다.In addition, the
또한, 상기 제어부(630)는 내비게이션(610)이 GPS 등을 통해 차량의 외부에서 제공하는 위치 정보를 검출하여 출력하면, 상기 위치 정보에 대응하는 지도 이미지와, 임의의 시점 이전에 수신한 위치 정보 및 이미지를 비교 연산하여 차량의 이동 변위 정보를 검출할 수 있다.In addition, when the
또한, 상기 제어부(630)는 거리뷰 수신기(620)가 검출한 카메라의 설치 위치 정보 및 주변 이미지와 내비게이션(610)을 통해 검출한 위치 이동 정보를 비교 연산하여 차량의 이동 변위 정보를 검출할 수 있다. In addition, the
또한, 상기 제어부(630)는 상기 검출된 차량의 이동 변위 정보에 기초하여 임의의 위치로부터 이동한 차량의 현재 위치 정보를 검출하고, 생성된 디스플레이용 이미지상에 상기 검출된 차량의 현재 위치를 나타내는 윤곽선 또는 반투명의 차량 아이콘이 표시되도록 한다.In addition, the
상기 화면 표시부(640)는 제어부(630)로부터 출력되는 디스플레이용 이미지와 가상의 차량 윤곽선 또는 반투명의 차량 아이콘이 함께 출력되도록 하고, LCD 등의 출력수단으로 구성된다.
The
따라서 차량의 주변 이미지를 통해 현재 위치에서 차량의 차체에 가려져 운전자의 시야 확보가 어려운 사각 지대의 장애물 배치를 용이하게 확인할 수 있어서 운전자의 안전한 주행 환경 제공과 안전한 주차 환경을 제공하는 것이 가능하게 된다.
Therefore, it is possible to easily check the obstruction of the blind spot that is difficult to secure the driver's view through the surrounding image of the vehicle from the current position, it is possible to provide a safe driving environment and a safe parking environment for the driver.
상기와 같이, 본 발명의 바람직한 실시 예를 참조하여 설명하였지만 해당 기술 분야의 숙련된 당업자라면 하기의 특허청구범위에 기재된 본 발명의 사상 및 영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경시킬 수 있음을 이해할 수 있을 것이다.
While the present invention has been particularly shown and described with reference to exemplary embodiments thereof, it will be understood by those of ordinary skill in the art that various changes in form and details may be made therein without departing from the spirit and scope of the invention as defined by the appended claims. It can be understood that
100 : 사각 지대 표시 장치 110 : 제 1 카메라
110' : t초 경과 후의 제 1 카메라 120 : 제 2 카메라
120' : t초 경과 후의 제 2 카메라 130 : 제어부
140 : 화면 표시부 150 : 제 n 카메라
200 : 차량 200' : t초 경과 후의 차량
300 : 과속 방지턱 400 : 차량 아이콘
500 : 방향 안내 정보 600 : 사각 지대 표시 장치
610 : 내비게이션 620 : 외부 정보 수신부
630 : 제어부 640 : 화면 표시부100: blind spot display device 110: first camera
110 ′: first camera after t seconds elapsed 120: second camera
120 ': second camera after t seconds elapses 130: control part
140: screen display unit 150: n-th camera
200: vehicle 200 ': vehicle after t seconds
300: speed bump 400: vehicle icon
500: direction guide information 600: blind spot display device
610: navigation 620: external information receiver
630: control unit 640: screen display unit
Claims (14)
상기 이미지 검출부가 임의의 시점 또는 상기 임의의 시점 이전에 촬영한 적어도 하나의 이미지를 디스플레이용 이미지로 출력하고, 상기 출력되는 디스플레이용 이미지에 차량의 현재 위치를 나타내는 차량 아이콘이 윤곽선 또는 반투명으로 표시되도록 하여 차량의 차체로 인해 가려진 차량의 하부 및 사각지대와, 카메라에 안 보이는 사각지대가 디스플레이되도록 상기 디스플레이용 이미지와 차량 아이콘을 출력하는 제어부; 및
상기 제어부로부터 출력되는 디스플레이용 이미지와 차량 아이콘이 디스플레이되도록 하는 화면 표시부를 포함하고,
상기 출력되는 디스플레이용 이미지는 상기 촬영된 이미지의 원본 이미지이거나 상기 원본 이미지의 시점을 변환한 이미지 중 어느 하나인 것을 특징으로 하는 사각 지대 표시 장치.An image detector detecting an image of the vehicle surroundings;
The image detector outputs at least one image photographed at an arbitrary time point or before the predetermined time point as a display image, and the vehicle icon indicating the current position of the vehicle is displayed in outline or translucent on the output display image. A controller for outputting the display image and the vehicle icon so that the lower and blind spots of the vehicle obscured by the vehicle body and the blind spot not visible to the camera are displayed; And
A screen display unit configured to display a display image and a vehicle icon output from the controller,
The output image for display is a blind spot display device, characterized in that any one of the original image of the photographed image or the image converted from the viewpoint of the original image.
상기 출력되는 디스플레이용 이미지는 상기 촬영된 이미지의 원본 이미지 또는 시점을 변환한 이미지 여러 개를 합성한 것이거나 여러 이미지의 일부를 조합한 것 중 어느 하나인 것을 특징으로 하는 사각 지대 표시 장치.The method of claim 1,
The output display image is a blind spot display device, characterized in that any one of a combination of the original image or a plurality of images converted from the viewpoint of the captured image or a combination of several images.
상기 이미지 검출부는 차량에 설치되어 차량의 주변 이미지를 촬영하여 제공하는 카메라, 상기 차량의 위치 정보를 검출하여 대응하는 위치의 주변 이미지를 제공하는 내비게이션 또는 상기 차량의 주변 도로 또는 건물에 설치된 카메라로부터 차량 주변의 이미지를 수신하여 제공하는 외부 정보 수신부 중 어느 하나인 것을 특징으로 하는 사각 지대 표시 장치.The method of claim 1,
The image detection unit is installed in the vehicle to take a photograph of the surrounding image of the vehicle and provide the vehicle, the vehicle to detect the location information of the vehicle to provide a peripheral image of the corresponding location or the camera installed on the road or building surrounding the vehicle A blind spot display device, characterized in that any one of the external information receiving unit for receiving and providing an image of the surrounding.
상기 제어부는 차량의 외부에서 제공하는 차량의 위치 이동 정보 또는 차량으로부터 검출한 운전 제어 정보에 근거하여 상기 차량이 임의의 위치로부터 이동한 변위 정보를 연산하여 차량의 현재 위치 정보를 검출하는 것을 특징으로 하는 사각 지대 표시 장치.The method of claim 5, wherein
The control unit detects current position information of the vehicle by calculating displacement information of the vehicle moved from an arbitrary position based on position movement information of the vehicle provided from the outside of the vehicle or driving control information detected from the vehicle. Blind spot display device.
상기 제어부는 상기 차량의 이동에 따른 실시간 위치 정보를 반영하여, 디스플레이용 이미지상에 표시된 차량 아이콘의 위치가 변경되도록 표시하는 것을 특징으로 하는 사각 지대 표시 장치.The method of claim 5, wherein
And the controller reflects real-time location information according to the movement of the vehicle and displays the location of the vehicle icon displayed on the display image to be changed.
상기 차량 아이콘의 위치 변경은 디스플레이용 이미지상에 표시된 차량 아이콘의 위치 변경 표시가 디스플레이용 이미지를 고정하고 차량 아이콘의 위치만 변경하거나, 차량 아이콘의 위치를 고정하고 디스플레이용 이미지만 이동시키거나 또는 디스플레이용 이미지와 차량 아이콘의 위치를 모두 변경하는 것 중 어느 하나를 통해 변경하는 것을 특징으로 하는 사각 지대 표시 장치.The method of claim 7, wherein
The position change of the vehicle icon may include changing the position of the vehicle icon displayed on the display image to fix the display image and changing only the position of the vehicle icon, fixing the position of the vehicle icon, and moving only the image for display or display. The blind spot display device, wherein the blind spot is changed by changing both the dragon image and the position of the vehicle icon.
b) 상기 제어부가 차량의 외부에서 제공하는 차량의 위치 이동 정보 또는 차량으로부터 제공되는 운전 제어 정보에 근거하여 상기 차량이 임의의 위치로부터 이동한 변위 정보를 연산하여 차량의 현재 위치를 검출하는 단계; 및
c) 상기 제어부가 상기 b)단계에서 검출한 현재 위치와 변위 정보에 따라 차량의 현재 위치를 나타내는 차량 아이콘을 상기 a)단계에서 출력되는 디스플레이용 이미지상에 윤곽선 또는 반투명으로 표시되도록 하여 차량 주변의 사각지대와 차체로 인해 가려진 사각지대가 디스플레이되도록 상기 디스플레이용 이미지와 차량 아이콘을 출력하는 단계를 포함하고,
상기 a)단계의 디스플레이용 이미지는 상기 촬영된 이미지의 원본 이미지이거나 상기 원본 이미지의 시점을 변환한 이미지 중 어느 하나인 것을 특징으로 하는 사각 지대 표시 방법.a) outputting, by the controller, at least one image photographed by the image detector at an arbitrary viewpoint or before the arbitrary viewpoint, as an image for display;
b) detecting, by the controller, a current position of the vehicle by calculating displacement information of the vehicle from an arbitrary position based on position movement information of the vehicle provided from the outside of the vehicle or driving control information provided from the vehicle; And
c) the control unit displays a vehicle icon indicating the current position of the vehicle according to the current position and displacement information detected in step b) on the display image output in step a) as outline or translucent. And outputting the display image and the vehicle icon so that the blind spot hidden by the blind spot and the vehicle body is displayed.
And the image for display in step a) is one of an original image of the photographed image or an image obtained by converting a viewpoint of the original image.
상기 a)단계의 디스플레이용 이미지는 상기 촬영된 이미지의 원본 이미지 또는 시점을 변환한 이미지 여러 개를 합성한 것이거나 여러 이미지의 일부를 조합한 것 중 어느 하나인 것을 특징으로 하는 사각 지대 표시 방법.The method of claim 9,
The display image of step a) is any one of a combination of a plurality of images of the original image or the point of view of the captured image or a combination of several images, the blind spot display method.
상기 a)단계의 디스플레이용 이미지는 차량에 설치되어 차량의 주변 이미지를 촬영하여 제공하는 카메라, 상기 차량의 위치 정보를 검출하여 대응하는 위치의 주변 이미지를 제공하는 내비게이션 또는 상기 차량의 주변 도로 또는 건물에 설치된 카메라로부터 차량 주변의 이미지를 수신하여 제공하는 외부 정보 수신부 중 어느 하나로부터 촬영된 이미지인 것을 특징으로 하는 사각 지대 표시 방법.The method according to claim 9 or 11,
The display image of step a) is a camera installed in the vehicle to photograph and provide the surrounding image of the vehicle, the navigation to detect the position information of the vehicle and provide the surrounding image of the corresponding position or the road or building surrounding the vehicle The blind spot display method characterized in that the image photographed from any one of the external information receiving unit for receiving and providing an image of the surrounding of the vehicle from the camera installed in the.
상기 차량 아이콘은 상기 차량의 이동에 따른 실시간 위치 정보를 반영하여, 디스플레이용 이미지상에 표시된 차량 아이콘의 위치가 변경되도록 표시하는 것을 특징으로 하는 사각 지대 표시 방법.13. The method of claim 12,
And the vehicle icon reflects real-time location information according to the movement of the vehicle and displays the location of the vehicle icon displayed on the display image to be changed.
상기 차량 아이콘의 위치 변경은 디스플레이용 이미지상에 표시된 차량 아이콘의 위치 변경 표시가 디스플레이용 이미지를 고정하고 차량 아이콘의 위치만 변경하거나, 차량 아이콘의 위치를 고정하고 디스플레이용 이미지만 이동시키거나 또는 디스플레이용 이미지와 차량 아이콘의 위치를 모두 변경하는 것 중 어느 하나를 통해 변경하는 것을 특징으로 하는 사각 지대 표시 방법.The method of claim 13,
The position change of the vehicle icon may include changing the position of the vehicle icon displayed on the display image to fix the display image and changing only the position of the vehicle icon, fixing the position of the vehicle icon, and moving only the image for display or display. A blind spot display method comprising changing the position of both a dragon image and a vehicle icon.
Priority Applications (6)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020110132051A KR101295618B1 (en) | 2011-12-09 | 2011-12-09 | Apparatus and method for displaying blind spot |
EP11853246.4A EP2660104B1 (en) | 2010-12-30 | 2011-12-29 | Apparatus and method for displaying a blind spot |
PCT/KR2011/010280 WO2012091476A2 (en) | 2010-12-30 | 2011-12-29 | Apparatus and method for displaying a blind spot |
JP2013534836A JP2013541915A (en) | 2010-12-30 | 2011-12-29 | Blind Spot Zone Display Device and Method |
CN201180057909.5A CN103237685B (en) | 2010-12-30 | 2011-12-29 | Blind area display device and method |
US13/996,346 US9418556B2 (en) | 2010-12-30 | 2011-12-29 | Apparatus and method for displaying a blind spot |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020110132051A KR101295618B1 (en) | 2011-12-09 | 2011-12-09 | Apparatus and method for displaying blind spot |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20130065268A KR20130065268A (en) | 2013-06-19 |
KR101295618B1 true KR101295618B1 (en) | 2013-08-12 |
Family
ID=48861936
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020110132051A KR101295618B1 (en) | 2010-12-30 | 2011-12-09 | Apparatus and method for displaying blind spot |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR101295618B1 (en) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20150072942A (en) * | 2013-12-20 | 2015-06-30 | 엘지전자 주식회사 | Driver assistance apparatus and Vehicle including the same |
KR101611194B1 (en) * | 2014-04-04 | 2016-04-11 | 주식회사 와이즈오토모티브 | Apparatus and method for peripheral image generation of vehicle |
KR102214604B1 (en) * | 2014-09-05 | 2021-02-10 | 현대모비스 주식회사 | Driving support image display method |
KR102261312B1 (en) * | 2015-04-21 | 2021-06-08 | 주식회사 만도 | Multi Camera Driver Assistance System |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006074105A (en) | 2004-08-31 | 2006-03-16 | Equos Research Co Ltd | Image display apparatus for vehicle periphery |
KR100833603B1 (en) | 2006-12-29 | 2008-05-30 | 주식회사 엠티오메가 | Navigation system for providing bird view and method thereof |
KR20090109437A (en) * | 2008-04-15 | 2009-10-20 | 주식회사 만도 | Method and System for Image Matching While Driving Vehicle |
KR101097063B1 (en) * | 2010-12-30 | 2011-12-22 | 주식회사 와이즈오토모티브 | Apparatus and method for displaying blind spot |
-
2011
- 2011-12-09 KR KR1020110132051A patent/KR101295618B1/en active IP Right Grant
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006074105A (en) | 2004-08-31 | 2006-03-16 | Equos Research Co Ltd | Image display apparatus for vehicle periphery |
KR100833603B1 (en) | 2006-12-29 | 2008-05-30 | 주식회사 엠티오메가 | Navigation system for providing bird view and method thereof |
KR20090109437A (en) * | 2008-04-15 | 2009-10-20 | 주식회사 만도 | Method and System for Image Matching While Driving Vehicle |
KR101097063B1 (en) * | 2010-12-30 | 2011-12-22 | 주식회사 와이즈오토모티브 | Apparatus and method for displaying blind spot |
Also Published As
Publication number | Publication date |
---|---|
KR20130065268A (en) | 2013-06-19 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP2660104B1 (en) | Apparatus and method for displaying a blind spot | |
KR101097063B1 (en) | Apparatus and method for displaying blind spot | |
US8717196B2 (en) | Display apparatus for vehicle | |
KR101243108B1 (en) | Apparatus and method for displaying rear image of vehicle | |
JP4497133B2 (en) | Driving support method and driving support device | |
KR100936558B1 (en) | Perimeter monitoring apparatus and image display method for vehicle | |
US8330816B2 (en) | Image processing device | |
US8044781B2 (en) | System and method for displaying a 3D vehicle surrounding with adjustable point of view including a distance sensor | |
JP4412380B2 (en) | Driving support device, driving support method, and computer program | |
JP5099451B2 (en) | Vehicle periphery confirmation device | |
US7710246B2 (en) | Vehicle driving assist system | |
US9126533B2 (en) | Driving support method and driving support device | |
KR102062923B1 (en) | Parking assistance system | |
US20030060972A1 (en) | Drive assist device | |
KR101611194B1 (en) | Apparatus and method for peripheral image generation of vehicle | |
JP5408198B2 (en) | Video display device and video display method | |
JP2006341641A (en) | Image display apparatus and image display method | |
JP2006252389A (en) | Circumference-monitoring device | |
JP2004240480A (en) | Operation support device | |
JP2010028803A (en) | Image displaying method for parking aid | |
KR101295618B1 (en) | Apparatus and method for displaying blind spot | |
KR102031635B1 (en) | Collision warning device and method using heterogeneous cameras having overlapped capture area | |
WO2017022262A1 (en) | Surrounding monitoring device for operating machines | |
KR101190789B1 (en) | Apparatus and method for measurementing distance of vehicle | |
JP4857159B2 (en) | Vehicle driving support device |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E902 | Notification of reason for refusal | ||
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant | ||
FPAY | Annual fee payment |
Payment date: 20160711 Year of fee payment: 4 |
|
FPAY | Annual fee payment |
Payment date: 20170807 Year of fee payment: 5 |
|
FPAY | Annual fee payment |
Payment date: 20190805 Year of fee payment: 7 |