KR20150102189A - Apparatus for correcting image of photographing apparatus in vehicle and method for correcting image thereof - Google Patents

Apparatus for correcting image of photographing apparatus in vehicle and method for correcting image thereof Download PDF

Info

Publication number
KR20150102189A
KR20150102189A KR1020140023755A KR20140023755A KR20150102189A KR 20150102189 A KR20150102189 A KR 20150102189A KR 1020140023755 A KR1020140023755 A KR 1020140023755A KR 20140023755 A KR20140023755 A KR 20140023755A KR 20150102189 A KR20150102189 A KR 20150102189A
Authority
KR
South Korea
Prior art keywords
vehicle
information
pitch angle
image
value
Prior art date
Application number
KR1020140023755A
Other languages
Korean (ko)
Inventor
박종민
Original Assignee
주식회사 만도
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 만도 filed Critical 주식회사 만도
Priority to KR1020140023755A priority Critical patent/KR20150102189A/en
Publication of KR20150102189A publication Critical patent/KR20150102189A/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformations in the plane of the image
    • G06T3/20Linear translation of whole images or parts thereof, e.g. panning
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/588Recognition of the road, e.g. of lane markings; Recognition of the vehicle driving pattern in relation to the road

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Image Processing (AREA)
  • Control Of Driving Devices And Active Controlling Of Vehicle (AREA)
  • Traffic Control Systems (AREA)

Abstract

Disclosed are an image correction apparatus of a photographing device for a vehicle, and an image correction method thereof. According to an embodiment of the present invention, the image correction apparatus comprises: an estimation unit for estimating suspension variation information of a vehicle by the current pitch motion occurring when the vehicle accelerates or decelerates; a calculation unit for calculating current pitch angle information of the vehicle based on the estimated suspension variation information, and calculating pitch angle correction information needed depending on the current pitch motion by using the calculated current pitch angle information and pitch angle information calculated based on a lane recognition from a photographing device of the vehicle; a correction unit for correcting the current image of the photographing device with image information which is previously set depending on the calculated pitch angle correction information; and a control unit for providing the calculated pitch angle correction information to the correction unit to control the correction unit to correct the current image with the previously set image information.

Description

차량용 촬영 장치의 영상 보정 장치 및 그 영상 보정 방법{Apparatus for correcting image of photographing apparatus in vehicle and method for correcting image thereof}BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to an image correcting apparatus for a vehicle photographing apparatus,

본 발명은 차량용 촬영 장치의 영상 보정 장치 및 그 영상 보정 방법에 관한 것이다.BACKGROUND OF THE INVENTION 1. Field of the Invention [0002] The present invention relates to an image correction apparatus and a method for correcting an image of a vehicle image pickup apparatus.

일반적으로, 종래 차량이 가속을 하거나 감속을 하는 상황에서는 차량의 가속도에 비례해서 오랜 시간 동안 차량의 앞 부분이 위로 들리거나, 아래로 숙여지는 상황이 오랜 시간 지속될 수가 있었다.Generally, in a situation where the conventional vehicle accelerates or decelerates, the situation where the front portion of the vehicle is lifted up or downward for a long time in proportion to the acceleration of the vehicle can be maintained for a long time.

이때, 차량용 촬영 장치는 차량이 평면 도로에 있다는 전제 하에 영상 교정(calibration)을 수행하였다.At this time, the vehicle image pickup apparatus performs image calibration on the assumption that the vehicle is on a flat road.

그런데, 차량용 촬영 장치는 차량이 도로를 주행할 때 가속이나 감속에 의해 피치 모션(pitch motion)이 발생하며, 피치 모션에 의해 영상 교정 결과의 피치 각에 오차가 발생하여 영상 인식 결과의 오차가 발생하였다.However, in the vehicle image pickup apparatus, pitch motion occurs due to acceleration or deceleration when the vehicle travels on the road, and an error occurs in the pitch angle of the image correction result due to the pitch motion, Respectively.

따라서, 최근에는 차량이 도로를 주행할 때 가속이나 감속에 의해 피치 모션이 발생할 경우, 차량의 피치 각도를 추정하여 차량용 촬영 장치의 영상을 보정함으로써, 차량용 촬영 장치의 영상을 안정적으로 제공할 수가 있는 개선된 차량용 촬영 장치의 영상 보정 장치 및 그 영상 보정 방법의 연구가 지속적으로 행해져 오고 있다.Therefore, in recent years, when the pitch motion occurs due to acceleration or deceleration when the vehicle travels on the road, the image of the vehicle image pickup apparatus can be stably provided by estimating the pitch angle of the vehicle and correcting the image of the vehicle image pickup apparatus An image correction apparatus and an image correction method for an improved vehicle image pickup apparatus have been continuously studied.

본 발명의 실시 예는, 차량용 촬영 장치의 영상을 안정적으로 제공할 수가 있는 차량용 촬영 장치의 영상 보정 장치 및 그 영상 보정 방법을 제공하는데에 있다.An embodiment of the present invention is to provide an image correction apparatus for a vehicle image pickup apparatus capable of stably providing an image of a vehicle image pickup apparatus and an image correction method therefor.

또한, 본 발명의 실시 예는, 운전자에게 주의 운전을 유도할 수가 있는 차량용 촬영 장치의 영상 보정 장치 및 그 영상 보정 방법을 제공하는데에 있다.In addition, an embodiment of the present invention is to provide an image correcting apparatus of a vehicle image pickup apparatus and a method of correcting the image, which can induce driver's attention driving.

본 발명의 일 측면에 따르면, 차량이 가속을 하거나 감속을 할 때에 발생하는 현재 피치 모션(pitch motion)에 의한 차량의 서스펜션(suspension) 변화 정보를 추정하는 추정부와; 추정한 서스펜션 변화 정보를 기초로 차량의 현재 피치 각도 정보를 산출하고, 산출한 현재 피치 각도 정보와 차량의 촬영 장치로부터 차선 인식을 기초로 산출한 피치 각도 정보를 이용하여 현재 피치 모션에 따라 필요한 피치 각도 보정 정보를 산출하는 산출부와; 촬영 장치의 현재 영상을 산출한 피치 각도 보정 정보에 따라 이미 설정된 영상 정보로 보정하는 보정부; 및 보정부에 산출한 피치 각도 보정 정보를 공급하여 현재 영상을 이미 설정된 영상 정보로 보정시키도록 보정부를 제어하는 제어부를 포함할 수가 있다.According to an aspect of the present invention, there is provided an information processing apparatus comprising: an estimator for estimating suspension change information of a vehicle caused by a current pitch motion occurring when a vehicle accelerates or decelerates; Calculates the current pitch angle information of the vehicle on the basis of the estimated suspension change information, and calculates the pitch angle information based on the calculated current pitch angle information and the pitch angle information calculated based on the lane recognition from the photographing apparatus of the vehicle, A calculation unit for calculating the angle correction information; A correcting unit correcting the current image of the photographing apparatus to preset image information according to the calculated pitch angle correction information; And a control unit for controlling the correcting unit to supply the corrected pitch angle correction information to the correcting unit and correct the current image to already set image information.

이때, 추정부는 차량의 서스펜션 변화 정보를 추정할 때에, 전후륜 휠의 하중값, 전후륜 휠의 서스펜션 스프링 상수값, 차량의 무게 중심값, 지면부터 무게 중심까지의 높이값, 휠 베이스값, 차량의 질량값, 차량의 중력 가속도값간의 상관 관계를 이용할 수가 있다.At this time, when estimating the suspension change information of the vehicle, the estimating unit estimates the suspension change information of the vehicle based on the load value of the front and rear wheels, the suspension spring constant value of the front and rear wheels, the center of gravity of the vehicle, The mass value of the vehicle, and the gravitational acceleration value of the vehicle.

또한, 산출부는 추정한 서스펜션 변화 정보를 기초로 차량의 현재 피치 각도 정보를 산출할 때에, 휠 베이스값, 전후륜 휠의 서스펜션 변화량간의 상관 관계를 이용할 수가 있다.In calculating the present pitch angle information of the vehicle based on the estimated suspension change information, the calculating unit can use the correlation between the wheel base value and the suspension change amount of the front and rear wheels.

또한, 산출부는 차선 인식을 기초로 피치 각도 정보를 산출할 때에, 차선 인식으로 추정한 지평선의 높이값, 촬영 장치로부터 획득한 소실점의 위치값, 촬영 장치의 초점 거리값간의 상관 관계를 이용할 수가 있다.Further, when calculating the pitch angle information based on the lane recognition, the calculating unit can use the correlation between the height value of the horizon estimated by the lane recognition, the position value of the vanishing point acquired from the photographing apparatus, and the focal distance value of the photographing apparatus .

또한, 산출부는 피치 각도 보정 정보를 산출할 때에, 차량의 가속도값, 차량의 중력가속도값, 차선 인식으로 추정한 지평선의 높이값, 촬영 장치로부터 획득한 소실점의 위치값, 촬영 장치의 초점 거리값간의 상관 관계를 이용할 수가 있다.In calculating the pitch angle correction information, the calculating unit calculates the pitch angle correction information based on the acceleration value of the vehicle, the gravitational acceleration value of the vehicle, the height value of the horizon line estimated by the lane recognition, the position value of the vanishing point acquired from the photographing apparatus, Can be used.

또한, 피치 각도 보정 정보를 산출할 때에, 현재 영상을 이미 설정된 영상 정보로 보정시킴을 식별시키는 제 1 식별부를 더 포함할 수가 있다.The apparatus may further include a first identifying unit for identifying, when calculating the pitch angle correction information, the correction of the current image to the already set image information.

또한, 현재 영상을 이미 설정된 영상 정보로 보정시킬 때에, 현재 영상이 이미 설정된 영상 정보로 보정됨을 식별시키는 제 2 식별부를 더 포함할 수가 있다.The image processing apparatus may further include a second identifying unit that identifies that the current image is corrected to image information that has already been set, when the current image is corrected to the previously set image information.

본 발명의 다른 측면에 따르면, 차량이 가속을 하거나 감속을 할 때에 발생하는 현재 피치 모션(pitch motion)에 의한 차량의 서스펜션(suspension) 변화 정보를 추정하는 서스펜션 변화 추정 단계; 추정한 서스펜션 변화 정보를 기초로 차량의 현재 피치 각도 정보를 산출하고, 산출한 현재 피치 각도 정보와 차량의 촬영 장치로부터 차선 인식을 기초로 산출한 피치 각도 정보를 이용하여 현재 피치 모션에 따라 필요한 피치 각도 보정 정보를 산출하는 피치 각도 산출 단계; 및 촬영 장치의 현재 영상을 산출한 피치 각도 보정 정보에 따라 이미 설정된 영상 정보로 보정하는 영상 보정 단계를 포함할 수가 있다.According to another aspect of the present invention, there is provided a suspension change estimation method for estimating suspension change information of a vehicle caused by a pitch motion occurring when a vehicle accelerates or decelerates; Calculates the current pitch angle information of the vehicle on the basis of the estimated suspension change information, and calculates the pitch angle information based on the calculated current pitch angle information and the pitch angle information calculated based on the lane recognition from the photographing apparatus of the vehicle, A pitch angle calculating step of calculating angle correction information; And an image correction step of correcting the current image of the photographing apparatus to image information already set according to the calculated pitch angle correction information.

이때, 서스펜션 변화 추정 단계는 차량의 서스펜션 변화 정보를 추정할 때에, 전후륜 휠의 하중값, 전후륜 휠의 서스펜션 스프링 상수값, 차량의 무게 중심값, 지면부터 무게 중심까지의 높이값, 휠 베이스값, 차량의 질량값, 차량의 중력 가속도값간의 상관 관계를 이용할 수가 있다.In estimating the suspension change information of the vehicle, the suspension change estimating step estimates the suspension change information of the vehicle based on the load value of the front and rear wheels, the suspension spring constant of the front and rear wheels, the center of gravity of the vehicle, Value of the vehicle, a mass value of the vehicle, and a gravitational acceleration value of the vehicle.

또한, 피치 각도 산출 단계는 추정한 서스펜션 변화 정보를 기초로 차량의 현재 피치 각도 정보를 산출할 때에, 휠 베이스값, 전후륜 휠의 서스펜션 변화량간의 상관 관계를 이용할 수가 있다.The pitch angle calculating step may use the correlation between the wheel base value and the suspension change amount of the front and rear wheels when calculating the current pitch angle information of the vehicle based on the estimated suspension change information.

또한, 피치 각도 산출 단계는 차선 인식을 기초로 피치 각도 정보를 산출할 때에, 차선 인식으로 추정한 지평선의 높이값, 촬영 장치로부터 획득한 소실점의 위치값, 촬영 장치의 초점 거리값간의 상관 관계를 이용할 수가 있다.In calculating the pitch angle information based on the lane recognition, the pitch angle calculating step calculates a correlation between the height value of the horizon estimated by the lane recognition, the position value of the vanishing point acquired from the photographing apparatus, and the focal distance value of the photographing apparatus Can be used.

또한, 피치 각도 산출 단계는 피치 각도 보정 정보를 산출할 때에, 차량의 가속도값, 차량의 중력가속도값, 차선 인식으로 추정한 지평선의 높이값, 촬영 장치로부터 획득한 소실점의 위치값, 촬영 장치의 초점 거리값간의 상관 관계를 이용할 수가 있다.In calculating the pitch angle correction information, the pitch angle calculating step calculates the pitch angle correction information based on the acceleration value of the vehicle, the gravitational acceleration value of the vehicle, the height value of the horizon estimated by the lane recognition, the position value of the vanishing point acquired from the photographing apparatus, A correlation between focal length values can be utilized.

또한, 피치 각도 보정 정보를 산출할 때에, 현재 영상을 이미 설정된 영상 정보로 보정시킴을 식별시키는 제 1 식별 단계를 더 수행할 수가 있다.Further, when the pitch angle correction information is calculated, it is possible to further perform a first identification step of identifying the correction of the current image to the already set image information.

또한, 현재 영상을 이미 설정된 영상 정보로 보정시킬 때에, 현재 영상이 이미 설정된 영상 정보로 보정됨을 식별시키는 제 2 식별 단계를 더 수행할 수가 있다.In addition, it is possible to further perform a second identification step of identifying that the current image is corrected to the already set image information when the current image is corrected to the already set image information.

상기한 바와 같이 이루어진 본 발명의 실시 예에 따른 차량용 촬영 장치의 영상 보정 장치 및 그 영상 보정 방법은, 다음과 같은 효과를 얻을 수 있다.The image correcting apparatus and the image correcting method of the vehicle image pickup apparatus according to the embodiment of the present invention as described above can achieve the following effects.

첫째, 차량용 촬영 장치의 영상을 안정적으로 제공할 수 있는 효과가 있다.First, there is an effect that the image of the vehicle photographing apparatus can be stably provided.

둘째, 운전자에게 주의 운전을 유도할 수 있는 다른 효과가 있다.Second, there are other effects that can drive driving attention to the driver.

도 1은 본 발명의 제 1 실시 예에 따른 영상 보정 장치가 촬영 장치에 연결된 상태를 나타낸 블럭 구성도.
도 2는 도 1에 도시한 영상 보정 장치를 일예로 나타낸 블럭 구성도.
도 3은 정적 상태에서 차량의 전후륜 휠에 걸리는 전후륜 휠의 하중값을 산출하기 위한 도면.
도 4는 차량이 가속 중일 때 차량의 전륜 휠에 걸리는 전륜 휠의 하중값을 산출하기 위한 도면.
도 5는 차량이 가속 중일 때 차량의 후륜 휠에 걸리는 후륜 휠의 하중값과 하중 변화량을 산출하기 위한 도면.
도 6은 휠 베이스값과 전후륜 휠의 서스펜션 변화량 및 차량의 현재 피치 각도 정보간의 상관 특성 그래프를 나타낸 도면.
도 7은 본 발명의 제 1 실시 예에 따른 영상 보정 장치의 영상 보정 방법을 나타낸 순서도.
도 8은 본 발명의 제 2 실시 예에 따른 영상 보정 장치를 일예로 나타낸 블럭 구성도.
도 9는 본 발명의 제 2 실시 예에 따른 영상 보정 장치의 영상 보정 방법을 나타낸 순서도.
도 10은 본 발명의 제 3 실시 예에 따른 영상 보정 장치를 일예로 나타낸 블럭 구성도.
도 11은 본 발명의 제 3 실시 예에 따른 영상 보정 장치의 영상 보정 방법을 나타낸 순서도.
1 is a block diagram showing a state in which an image correction apparatus according to a first embodiment of the present invention is connected to a photographing apparatus.
FIG. 2 is a block diagram showing an example of the image correction apparatus shown in FIG. 1; FIG.
3 is a diagram for calculating a load value of a front and rear wheel engaged with front and rear wheels of a vehicle in a static state.
4 is a diagram for calculating a load value of a front wheel wheel that is caught on a front wheel wheel of a vehicle when the vehicle is accelerating.
5 is a diagram for calculating a load value and a load variation amount of a rear wheel wheel engaged with a rear wheel of a vehicle when the vehicle is accelerating.
6 is a graph showing a correlation characteristic between the wheel base value, the suspension change amount of the front and rear wheels, and the current pitch angle information of the vehicle.
7 is a flowchart illustrating an image correction method of an image correction apparatus according to the first embodiment of the present invention.
8 is a block diagram of an image correction apparatus according to a second embodiment of the present invention.
9 is a flowchart illustrating an image correction method of an image correction apparatus according to a second embodiment of the present invention.
10 is a block diagram illustrating an image correction apparatus according to a third embodiment of the present invention.
11 is a flowchart illustrating an image correction method of an image correction apparatus according to a third embodiment of the present invention.

이하에서는 본 발명의 실시 예를 첨부 도면을 참조하여 상세히 설명한다. 이하의 실시 예는 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 본 발명의 사상을 충분히 전달하기 위해 제시하는 것이다. 본 발명은 여기서 제시한 실시 예만으로 한정되지 않고 다른 형태로 구체화될 수도 있다. 도면은 본 발명을 명확히 하기 위해 설명과 관계없는 부분의 도시를 생략하고, 이해를 돕기 위해 구성요소의 크기를 다소 과장하여 표현할 수 있다.Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings. The following embodiments are provided to fully convey the spirit of the present invention to a person having ordinary skill in the art to which the present invention belongs. The present invention is not limited to the embodiments shown herein but may be embodied in other forms. For the sake of clarity, the drawings are not drawn to scale, and the size of the elements may be slightly exaggerated to facilitate understanding.

<제 1 실시 예>&Lt; Embodiment 1 >

도 1은 본 발명의 제 1 실시 예에 따른 영상 보정 장치가 촬영 장치에 연결된 상태를 나타낸 블럭 구성도이고, 도 2는 도 1에 도시한 영상 보정 장치를 일예로 나타낸 블럭 구성도이다.FIG. 1 is a block diagram showing a state where an image correction apparatus according to a first embodiment of the present invention is connected to a photographing apparatus, and FIG. 2 is a block diagram showing an image correction apparatus shown in FIG. 1.

도 3은 정적 상태에서 차량의 전후륜 휠에 걸리는 전후륜 휠의 하중값을 산출하기 위한 도면이고, 도 4는 차량이 가속 중일 때 차량의 전륜 휠에 걸리는 전륜 휠의 하중값을 산출하기 위한 도면이다.Fig. 3 is a diagram for calculating a load value of a front wheel of a vehicle when the vehicle is accelerating in a static state, and Fig. 4 is a diagram for calculating a load value of a front wheel of the vehicle when the vehicle is accelerating. to be.

도 5는 차량이 가속 중일 때 차량의 후륜 휠에 걸리는 후륜 휠의 하중값과 하중 변화량을 산출하기 위한 도면이고, 도 6은 휠 베이스값과 전후륜 휠의 서스펜션 변화량 및 차량의 현재 피치 각도 정보간의 상관 특성 그래프를 나타낸 도면이다.5 is a diagram for calculating a load value and a load change amount of a rear wheel attached to a rear wheel of a vehicle when the vehicle is accelerating, And a correlation characteristic graph.

도 1 내지 도 6을 참조하면, 본 발명의 제 1 실시 예에 따른 영상 보정 장치(100)는 추정부(102)와 산출부(104) 및 보정부(106)와 제어부(108)를 포함한다.1 to 6, an image correction apparatus 100 according to the first embodiment of the present invention includes an estimation unit 102, a calculation unit 104, a correction unit 106, and a control unit 108 .

추정부(102)는 차량이 가속을 하거나 감속을 할 때에 발생하는 현재 피치 모션(pitch motion)에 의한 차량의 서스펜션(suspension) 변화 정보를 추정한다.The estimating unit 102 estimates suspension change information of the vehicle by the current pitch motion that occurs when the vehicle accelerates or decelerates.

이때, 추정부(102)는 차량의 서스펜션 변화 정보를 추정할 때에, 전후륜 휠의 하중값(

Figure pat00001
,
Figure pat00002
), 전후륜 휠의 서스펜션 스프링 상수값(
Figure pat00003
,
Figure pat00004
), 차량의 무게 중심값(CoG: Center of Gravity), 지면부터 무게 중심까지의 높이값(h), 휠 베이스값(L), 차량의 질량값(m), 차량의 중력 가속도값(g)간의 상관 관계를 이용할 수가 있다.At this time, when estimating the suspension change information of the vehicle, the estimating unit 102 calculates the load value of the front and rear wheels
Figure pat00001
,
Figure pat00002
), The suspension spring constant value of the front and rear wheels (
Figure pat00003
,
Figure pat00004
A center value of the vehicle CoG, a height h from the ground to the center of gravity h, a wheel base value L, a mass value m of the vehicle, a gravitational acceleration value g of the vehicle, Can be used.

일예로, 추정부(102)는 하기 <식 1> 내지 <식 4>에 의해 차량의 서스펜션 변화 정보를 추정할 수가 있다.For example, the estimating section 102 can estimate the suspension change information of the vehicle by the following equations (1) to (4).

도 3에 도시된 바와 같이, 정적 상태에서 차량의 전후륜 휠에 걸리는 전후륜 휠의 하중값(

Figure pat00005
,
Figure pat00006
)은 하기 <식 1>과 같다.As shown in Fig. 3, the load values of the front and rear wheel wheels engaged with the front and rear wheels of the vehicle in the static state
Figure pat00005
,
Figure pat00006
) Is as shown in the following Equation (1).

<식 1><Formula 1>

Figure pat00007
Figure pat00007

이때,

Figure pat00008
는 전체 휠의 하중값,
Figure pat00009
는 전륜 휠의 하중값,
Figure pat00010
은 후륜 휠의 하중값, CoG는 차량의 무게 중심값, h는 지면부터 무게 중심까지의 높이값, L은 휠 베이스값, a는 지면에서의 전륜 휠부터 무게 중심까지의 거리값, b는 지면에서의 후륜 휠부터 무게 중심까지의 거리값, m은 차량의 질량값, g는 차량의 중력 가속도값임.At this time,
Figure pat00008
The load value of the whole wheel,
Figure pat00009
The load value of the front wheel,
Figure pat00010
A is the distance from the front wheel to the center of gravity on the ground, b is the distance from the center of gravity to the center of gravity, , M is a mass value of the vehicle, and g is a gravitational acceleration value of the vehicle.

도 4에 도시된 바와 같이, 차량이 가속도

Figure pat00011
로 가속 중일 때, 차량의 전륜 휠에 걸리는 전륜 휠의 하중값(
Figure pat00012
)과 하중 변화량(
Figure pat00013
)은 하기 <식 2>와 같다.As shown in Fig. 4,
Figure pat00011
, The load value of the front wheel that is caught on the front wheel of the vehicle
Figure pat00012
) And load variation (
Figure pat00013
) Is as shown in the following Equation (2).

<식 2><Formula 2>

Figure pat00014
Figure pat00014

이때,

Figure pat00015
는 전륜 휠의 하중값,
Figure pat00016
는 전륜 휠의 하중 변화량, CoG는 차량의 무게 중심값, h는 지면부터 무게 중심까지의 높이값, L은 휠 베이스값, a는 지면에서의 전륜 휠부터 무게 중심까지의 거리값, b는 지면에서의 후륜 휠부터 무게 중심까지의 거리값, b'는 지면에서의 후륜 휠부터 무게 중심까지의 거리 변화량, m은 차량의 질량값, g는 차량의 중력 가속도값,
Figure pat00017
는 차량의 가속도값,
Figure pat00018
는 차량의 힘값임.At this time,
Figure pat00015
The load value of the front wheel,
Figure pat00016
A is the distance from the front wheel to the center of gravity on the ground, b is the distance from the ground to the center of gravity, B is the distance from the rear wheel to the center of gravity on the ground, m is the mass value of the vehicle, g is the acceleration value of the vehicle,
Figure pat00017
The acceleration value of the vehicle,
Figure pat00018
Is the power value of the vehicle.

도 5에 도시된 바와 같이, 차량이 가속도

Figure pat00019
로 가속 중일 때, 차량의 후륜 휠에 걸리는 후륜 휠의 하중값(
Figure pat00020
)과 하중 변화량(
Figure pat00021
)은 equivalent trailing arm analysis에 의해 산출되고, 산출 결과는 하기 <식 3>과 같다.As shown in Fig. 5,
Figure pat00019
The load value of the rear wheel of the vehicle that is caught by the rear wheel of the vehicle
Figure pat00020
) And load variation (
Figure pat00021
) Is calculated by equivalent trailing arm analysis, and the calculation result is as shown in Equation (3).

<식 3><Formula 3>

Figure pat00022
Figure pat00022

이때,

Figure pat00023
는 축이 되는 pivot A에 대한 moment들의 합,
Figure pat00024
은 후륜 휠의 하중값,
Figure pat00025
은 후륜 휠의 하중 변화량, r은 후륜 휠의 반지름, d는 지면에서의 후륜 휠부터 pivot A까지의 거리값, e는 지면부터 pivot A까지의 높이값, m은 차량의 질량값,
Figure pat00026
는 차량의 가속도값, h는 지면부터 무게 중심까지의 높이값, L은 휠 베이스값, h는 지면부터 무게 중심까지의 높이값,
Figure pat00027
는 차량의 힘값임.At this time,
Figure pat00023
Is the sum of the moments to the axis pivot A,
Figure pat00024
The load value of the rear wheel,
Figure pat00025
R is the radius of the rear wheel, d is the distance from the rear wheel to the pivot A on the ground, e is the height from the ground to the pivot A, m is the mass value of the vehicle,
Figure pat00026
H is the acceleration value of the vehicle, h is the height value from the ground to the center of gravity, L is the wheelbase value, h is the height value from the ground to the center of gravity,
Figure pat00027
Is the power value of the vehicle.

여기서, 전륜 휠의 하중 변화량(

Figure pat00028
)과 후륜 휠의 하중 변화량(
Figure pat00029
)은 하기 <식 4>와 같이 재전개할 수가 있다.Here, the load change amount of the front wheel (
Figure pat00028
) And the load change amount of the rear wheel (
Figure pat00029
) Can be re-developed as shown in the following Equation (4).

<식 4><Formula 4>

Figure pat00030
Figure pat00030

이때,

Figure pat00031
는 전륜 휠의 하중 변화량, h는 지면부터 무게 중심까지의 높이값, L은 휠 베이스값, m은 차량의 질량값,
Figure pat00032
는 차량의 가속도값, d는 지면에서의 후륜 휠부터 pivot A까지의 거리값, e는 지면부터 pivot A까지의 높이값,
Figure pat00033
는 차량의 힘값,
Figure pat00034
는 전륜 휠의 서스펜션 스프링 상수값,
Figure pat00035
은 후륜 휠의 서스펜션 스프링 상수값,
Figure pat00036
는 전륜 휠의 서스펜션 변화량,
Figure pat00037
은 후륜 휠의 서스펜션 변화량임.At this time,
Figure pat00031
H is the height change value from the ground to the center of gravity, L is the wheel base value, m is the mass value of the vehicle,
Figure pat00032
D is the distance from the rear wheel to pivot A on the ground, e is the height from ground to pivot A,
Figure pat00033
The power value of the vehicle,
Figure pat00034
Is the suspension spring constant value of the front wheel,
Figure pat00035
The value of the suspension spring constant of the rear wheel,
Figure pat00036
The change amount of the suspension of the front wheel,
Figure pat00037
Is the change in suspension of the rear wheel.

산출부(104)는 추정부(102)에서 추정한 서스펜션 변화 정보를 기초로 차량의 현재 피치 각도 정보(하기 <식 5> 내지 <식 7>의

Figure pat00038
)를 산출하고, 산출한 현재 피치 각도 정보(하기 <식 5> 내지 <식 7>의
Figure pat00039
)와 차량의 촬영 장치(10)로부터 차선 인식을 기초로 산출한 피치 각도 정보(하기 <식 8>의
Figure pat00040
)를 이용하여 현재 피치 모션에 따라 필요한 피치 각도 보정 정보(하기 <식 9>의
Figure pat00041
)를 산출한다.The calculating unit 104 calculates the current pitch angle information of the vehicle based on the suspension change information estimated by the estimating unit 102
Figure pat00038
), And calculates the current pitch angle information (the following equations (5) to (7)
Figure pat00039
And the pitch angle information calculated on the basis of the lane recognition from the photographing apparatus 10 of the vehicle
Figure pat00040
) Is used to calculate pitch angle correction information (hereinafter referred to as &quot; pitch angle correction information &quot;
Figure pat00041
).

이때, 산출부(104)는 추정부(102)에서 추정한 서스펜션 변화 정보를 기초로 차량의 현재 피치 각도 정보(하기 <식 5> 내지 <식 7>의

Figure pat00042
)를 산출할 때에, 휠 베이스값(L), 전후륜 휠의 서스펜션 변화량(
Figure pat00043
,
Figure pat00044
)간의 상관 관계를 이용할 수가 있다.At this time, the calculating unit 104 calculates the current pitch angle information of the vehicle based on the suspension change information estimated by the estimating unit 102 (see Equation (5) to Equation
Figure pat00042
), The wheel base value L, the suspension change amount of the front and rear wheel wheels (
Figure pat00043
,
Figure pat00044
) Can be used.

일예로, 도 2 및 도 6에 도시된 바와 같이 산출부(104)는 휠 베이스값(L)과 전후륜 휠의 서스펜션 변화량(

Figure pat00045
,
Figure pat00046
) 및 차량의 현재 피치 각도 정보(
Figure pat00047
)간의 상관 특성 그래프를 통해 하기 <식 5> 내지 <식 7>과 같이 차량의 현재 피치 각도 정보(
Figure pat00048
)를 산출할 수가 있다.For example, as shown in FIGS. 2 and 6, the calculation unit 104 calculates the suspension amount of the front and rear wheels
Figure pat00045
,
Figure pat00046
) And the current pitch angle information of the vehicle (
Figure pat00047
(5) to (7) through the correlation characteristic graph between the current pitch angle information
Figure pat00048
) Can be calculated.

<식 5>&Lt; EMI ID =

Figure pat00049
Figure pat00049

이때,

Figure pat00050
는 차량의 현재 피치 각도 정보, L은 휠 베이스값,
Figure pat00051
는 전륜 휠의 서스펜션 변화량,
Figure pat00052
은 후륜 휠의 서스펜션 변화량임.At this time,
Figure pat00050
Is the current pitch angle information of the vehicle, L is the wheel base value,
Figure pat00051
The change amount of the suspension of the front wheel,
Figure pat00052
Is the change in suspension of the rear wheel.

여기서, 차량의 현재 피치 각도 정보(

Figure pat00053
)는 하기 <식 6>과 같이 <식 4>를 이용하여 가속도
Figure pat00054
에 관한 식으로 재전개할 수가 있다.Here, the current pitch angle information of the vehicle
Figure pat00053
) Is calculated by using Equation (4) as < EMI ID =
Figure pat00054
It is possible to re-develop the equation.

이때, 피치 모션에 따른 피치 각도 보정 정보(S)는 차량의 탑승자에 따라 달라지는 차량의 질량 변화에 의해 변화된 변수 값이 되므로, 차량의 현재 피치 각도 정보(

Figure pat00055
)는 하기 <식 7>과 같이 단순화시켜 재전개할 수가 있다.At this time, the pitch angle correction information S according to the pitch motion becomes the variable value changed by the mass change of the vehicle depending on the passenger of the vehicle, so that the current pitch angle information
Figure pat00055
) Can be re-expanded as shown in Equation (7) below.

<식 6>&Lt; EMI ID =

Figure pat00056
Figure pat00056

<식 7>Equation (7)

Figure pat00057
Figure pat00057

이때,

Figure pat00058
는 차량의 현재 피치 각도 정보, L은 휠 베이스값,
Figure pat00059
는 전륜 휠의 서스펜션 변화량,
Figure pat00060
은 후륜 휠의 서스펜션 변화량,
Figure pat00061
는 전체 휠의 하중값,
Figure pat00062
는 차량의 가속도값, h는 지면부터 무게 중심까지의 높이값, d는 지면에서의 후륜 휠부터 pivot A까지의 거리값, e는 지면부터 pivot A까지의 높이값,
Figure pat00063
는 전륜 휠의 서스펜션 스프링 상수값,
Figure pat00064
은 후륜 휠의 서스펜션 스프링 상수값임.At this time,
Figure pat00058
Is the current pitch angle information of the vehicle, L is the wheel base value,
Figure pat00059
The change amount of the suspension of the front wheel,
Figure pat00060
The amount of suspension change of the rear wheel,
Figure pat00061
The load value of the whole wheel,
Figure pat00062
H is the height value from the ground to the center of gravity, d is the distance from the rear wheel to pivot A on the ground, e is the height value from ground to pivot A,
Figure pat00063
Is the suspension spring constant value of the front wheel,
Figure pat00064
Is the value of the suspension spring constant of the rear wheel.

또한, 산출부(104)는 차량의 촬영 장치(10)로부터 차선 인식을 기초로 피치 각도 정보(

Figure pat00065
)를 산출할 때에, 차선 인식으로 추정한 지평선의 높이값(
Figure pat00066
), 촬영 장치(10)로부터 획득한 소실점의 위치값(
Figure pat00067
), 촬영 장치(10)의 초점 거리값(
Figure pat00068
)간의 상관 관계를 이용할 수가 있다.Further, the calculating unit 104 calculates pitch angle information (e.g., pitch angle information) from the photographing apparatus 10 of the vehicle based on lane recognition
Figure pat00065
), The height value of the horizon estimated by the lane recognition (
Figure pat00066
), The position value of the vanishing point acquired from the photographing apparatus 10
Figure pat00067
), The focal distance value of the photographing apparatus 10 (
Figure pat00068
) Can be used.

일예로, 산출부(104)는 하기 <식 8>에 의해 차량의 촬영 장치(10)로부터 차선 인식을 기초로 피치 각도 정보(

Figure pat00069
)를 산출할 수가 있다.For example, the calculating unit 104 calculates pitch angle information (e.g., pitch angle information) based on lane recognition from the photographing apparatus 10 of the vehicle
Figure pat00069
) Can be calculated.

<식 8><Formula 8>

Figure pat00070
Figure pat00070

이때,

Figure pat00071
는 피치 각도 정보,
Figure pat00072
은 촬영 장치(10)로부터 획득한 소실점의 위치값,
Figure pat00073
은 차선 인식으로 추정한 지평선의 높이값,
Figure pat00074
는 촬영 장치(10)의 초점 거리값임.At this time,
Figure pat00071
Pitch angle information,
Figure pat00072
The position value of the vanishing point acquired from the photographing apparatus 10,
Figure pat00073
The height value of the horizon estimated by the lane recognition,
Figure pat00074
Is the focal length value of the photographing apparatus (10).

또한, 산출부(104)는 현재 피치 각도 정보(

Figure pat00075
)와 차선 인식을 기초로 산출한 피치 각도 정보(
Figure pat00076
)를 이용하여 현재 피치 모션에 따라 필요한 피치 각도 보정 정보(
Figure pat00077
)를 산출할 때에, 차량의 가속도값(
Figure pat00078
), 차량의 중력가속도값(g), 차선 인식으로 추정한 지평선의 높이값(
Figure pat00079
), 촬영 장치(10)로부터 획득한 소실점의 위치값(
Figure pat00080
), 촬영 장치(10)의 초점 거리값(
Figure pat00081
)간의 상관 관계를 이용할 수가 있다.Further, the calculating unit 104 calculates the current pitch angle information (
Figure pat00075
) And the pitch angle information calculated based on the lane recognition
Figure pat00076
), The necessary pitch angle correction information (
Figure pat00077
), The acceleration value of the vehicle (
Figure pat00078
), A gravitational acceleration value (g) of the vehicle, a height value of the horizon estimated by lane recognition
Figure pat00079
), The position value of the vanishing point acquired from the photographing apparatus 10
Figure pat00080
), The focal distance value of the photographing apparatus 10 (
Figure pat00081
) Can be used.

일예로, 산출부(104)는 현재 피치 각도 정보(<식 7>의

Figure pat00082
)와 차선 인식을 기초로 산출한 피치 각도 정보(<식 8>의
Figure pat00083
)를 이용하여 하기 <식 9>와 같이 현재 피치 모션에 따라 필요한 피치 각도 보정 정보(
Figure pat00084
)를 산출할 수가 있다.For example, the calculating unit 104 calculates the current pitch angle information (equation
Figure pat00082
) And the pitch angle information calculated on the basis of the lane recognition
Figure pat00083
), Pitch angle correction information (hereinafter referred to as &quot; pitch angle correction information &quot;) necessary for the current pitch motion
Figure pat00084
) Can be calculated.

<식 9>Equation (9)

Figure pat00085
Figure pat00085

이때,

Figure pat00086
는 피치 각도 정보,
Figure pat00087
은 촬영 장치(10)로부터 획득한 소실점의 위치값,
Figure pat00088
은 차선 인식으로 추정한 지평선의 높이값,
Figure pat00089
는 촬영 장치(10)의 초점 거리값,
Figure pat00090
는 차량의 가속도값, g는 차량의 중력가속도값, S는 피치 모션에 따른 피치 각도 보정 정보,
Figure pat00091
는 현재 피치 모션에 따라 필요한 피치 각도 보정 정보임.At this time,
Figure pat00086
Pitch angle information,
Figure pat00087
The position value of the vanishing point acquired from the photographing apparatus 10,
Figure pat00088
The height value of the horizon estimated by the lane recognition,
Figure pat00089
The focal length value of the photographing apparatus 10,
Figure pat00090
G is the gravitational acceleration value of the vehicle, S is the pitch angle correction information according to the pitch motion,
Figure pat00091
Is the pitch angle correction information required according to the current pitch motion.

보정부(106)는 촬영 장치(10)의 현재 영상을 산출부(104)에서 산출한 피치 각도 보정 정보(

Figure pat00092
)에 따라 이미 설정된 영상 정보로 보정한다.The correcting unit 106 corrects the current image of the photographing apparatus 10 based on the pitch angle correction information (
Figure pat00092
) To the image information already set.

제어부(108)는 보정부(106)에 산출부(104)에서 산출한 피치 각도 보정 정보(

Figure pat00093
)를 공급하여 촬영 장치(10)의 현재 영상을 이미 설정된 영상 정보로 보정시키도록 보정부(106)를 제어한다.The control unit 108 instructs the correcting unit 106 to calculate the pitch angle correction information (
Figure pat00093
To control the correcting unit 106 to correct the current image of the photographing apparatus 10 to already set image information.

이때, 추정부(102)와 산출부(104) 및 보정부(106)와 제어부(108)는 도시하지는 않았지만, 차량에 적용되는 메인 컴퓨터로 차량의 전체적인 동작을 제어하고 현재 피치 모션(pitch motion)에 의한 서스펜션 변화 정보를 추정하여 차량의 현재 피치 각도를 산출하면서 피치 각도를 보정하기 위한 통상적인 ECU(Electric Control Unit, 미도시)를 포함하여 제공될 수가 있다.At this time, the estimation unit 102, the calculation unit 104, the correction unit 106, and the control unit 108 control the overall operation of the vehicle with a main computer applied to the vehicle, And an ECU (Electric Control Unit) (not shown) for estimating the suspension change information by the pitch angle of the vehicle and correcting the pitch angle while calculating the current pitch angle of the vehicle.

또한, 추정부(102)와 산출부(104) 및 보정부(106)와 제어부(108)는 도시하지는 않았지만, 단일 칩 내부에 프로세서와 메모리 및 입출력 장치를 갖춰 차량의 전체적인 동작을 제어하고 현재 피치 모션(pitch motion)에 의한 서스펜션 변화 정보를 추정하여 차량의 현재 피치 각도를 산출하면서 피치 각도를 보정하기 위한 통상적인 MCU(Micro Control Unit, 미도시)를 포함하여 제공될 수가 있다.Although not shown, the estimating unit 102, the calculating unit 104, the correcting unit 106, and the controlling unit 108 are provided with a processor, a memory, and an input / output device in a single chip to control the overall operation of the vehicle, And a conventional MCU (Micro Control Unit) (not shown) for estimating the suspension change information by the pitch motion and correcting the pitch angle while calculating the current pitch angle of the vehicle.

또한, 추정부(102)와 산출부(104) 및 보정부(106)와 제어부(108)는 이에 한정하지 않고 도시하지는 않았지만, 차량의 전체적인 동작을 제어하고 현재 피치 모션(pitch motion)에 의한 서스펜션 변화 정보를 추정하여 차량의 현재 피치 각도를 산출하면서 피치 각도를 보정할 수 있는 모든 제어 수단과 추정 수단 및 산출 수단과 보정 수단이면 가능하다.The estimating unit 102, the calculating unit 104, the correcting unit 106, and the controlling unit 108 are not limited to this. The present invention is not limited to this, All of the control means, the estimating means, the calculating means, and the correcting means that can correct the pitch angle while estimating the change information and calculating the current pitch angle of the vehicle.

여기서, 추정부(102)와 산출부(104) 및 보정부(106)와 제어부(108)는 통합형으로 ECU(Electric Control Unit, 미도시) 또는 MCU(Micro Control Unit, 미도시)로 제공될 수가 있고, 분리형으로 ECU(Electric Control Unit, 미도시) 또는 MCU(Micro Control Unit, 미도시)로 제공될 수가 있다.Here, the estimation unit 102, the calculation unit 104, the correction unit 106, and the control unit 108 may be integrally provided with an ECU (Electric Control Unit) (not shown) or an MCU (Micro Control Unit And may be provided as a separate type in an ECU (Electric Control Unit, not shown) or an MCU (Micro Control Unit, not shown).

이러한, 본 발명의 제 1 실시 예에 따른 영상 보정 장치(100)를 이용하여 촬영 장치(10)의 영상을 보정하기 위한 영상 보정 방법을 살펴보면 다음 도 7과 같다.An image correction method for correcting an image of the photographing apparatus 10 using the image correction apparatus 100 according to the first embodiment of the present invention will be described with reference to FIG.

도 7은 본 발명의 제 1 실시 예에 따른 영상 보정 장치의 영상 보정 방법을 나타낸 순서도이다.7 is a flowchart illustrating an image correction method of an image correction apparatus according to the first embodiment of the present invention.

도 7을 참조하면, 본 발명의 제 1 실시 예에 따른 영상 보정 장치(100)의 영상 보정 방법(700)은 서스펜션 변화 추정 단계(S702)와 피치 각도 산출 단계(S704) 및 영상 보정 단계(S706)를 포함한다.7, an image correction method 700 of an image correction apparatus 100 according to the first embodiment of the present invention includes a suspension change estimation step S702, a pitch angle calculation step S704, and an image correction step S706 ).

먼저, 서스펜션 변화 추정 단계(S702)는 차량이 가속을 하거나 감속을 할 때에 발생하는 현재 피치 모션(pitch motion)에 의한 차량의 서스펜션(suspension) 변화 정보를 추정한다.First, the suspension change estimation step S702 estimates the suspension change information of the vehicle by the current pitch motion that occurs when the vehicle accelerates or decelerates.

이때, 서스펜션 변화 추정 단계(S702)는 추정부(102)에서 차량의 서스펜션 변화 정보를 추정할 때에, 전후륜 휠의 하중값(

Figure pat00094
,
Figure pat00095
), 전후륜 휠의 서스펜션 스프링 상수값(
Figure pat00096
,
Figure pat00097
), 차량의 무게 중심값(CoG: Center of Gravity), 지면부터 무게 중심까지의 높이값(h), 휠 베이스값(L), 차량의 질량값(m), 차량의 중력 가속도값(g)간의 상관 관계를 이용할 수가 있다.At this time, in the suspension change estimation step S702, when estimating the suspension change information of the vehicle by the estimating unit 102, the load value of the front and rear wheel
Figure pat00094
,
Figure pat00095
), The suspension spring constant value of the front and rear wheels (
Figure pat00096
,
Figure pat00097
A center value of the vehicle CoG, a height h from the ground to the center of gravity h, a wheel base value L, a mass value m of the vehicle, a gravitational acceleration value g of the vehicle, Can be used.

일예로, 서스펜션 변화 추정 단계(S702)는 하기 <식 1> 내지 <식 4>에 의해 차량의 서스펜션 변화 정보를 추정부(102)에서 추정할 수가 있다.For example, in the suspension change estimation step S702, the suspension change information of the vehicle can be estimated by the following equations (1) to (4).

먼저, 도 3에 도시된 바와 같이 정적 상태에서 차량의 전후륜 휠에 걸리는 전후륜 휠의 하중값(

Figure pat00098
,
Figure pat00099
)은 하기 <식 1>과 같다.First, as shown in Fig. 3, the load value of the front and rear wheels of the vehicle, which is applied to the front and rear wheels of the vehicle in the static state
Figure pat00098
,
Figure pat00099
) Is as shown in the following Equation (1).

<식 1><Formula 1>

Figure pat00100
Figure pat00100

이때,

Figure pat00101
는 전체 휠의 하중값,
Figure pat00102
는 전륜 휠의 하중값,
Figure pat00103
은 후륜 휠의 하중값, CoG는 차량의 무게 중심값, h는 지면부터 무게 중심까지의 높이값, L은 휠 베이스값, a는 지면에서의 전륜 휠부터 무게 중심까지의 거리값, b는 지면에서의 후륜 휠부터 무게 중심까지의 거리값, m은 차량의 질량값, g는 차량의 중력 가속도값임.At this time,
Figure pat00101
The load value of the whole wheel,
Figure pat00102
The load value of the front wheel,
Figure pat00103
A is the distance from the front wheel to the center of gravity on the ground, b is the distance from the center of gravity to the center of gravity, , M is a mass value of the vehicle, and g is a gravitational acceleration value of the vehicle.

이 후, 도 4에 도시된 바와 같이 차량이 가속도

Figure pat00104
로 가속 중일 때, 차량의 전륜 휠에 걸리는 전륜 휠의 하중값(
Figure pat00105
)과 하중 변화량(
Figure pat00106
)은 하기 <식 2>와 같다.Thereafter, as shown in Fig. 4,
Figure pat00104
, The load value of the front wheel that is caught on the front wheel of the vehicle
Figure pat00105
) And load variation (
Figure pat00106
) Is as shown in the following Equation (2).

<식 2><Formula 2>

Figure pat00107
Figure pat00107

이때,

Figure pat00108
는 전륜 휠의 하중값,
Figure pat00109
는 전륜 휠의 하중 변화량, CoG는 차량의 무게 중심값, h는 지면부터 무게 중심까지의 높이값, L은 휠 베이스값, a는 지면에서의 전륜 휠부터 무게 중심까지의 거리값, b는 지면에서의 후륜 휠부터 무게 중심까지의 거리값, b'는 지면에서의 후륜 휠부터 무게 중심까지의 거리 변화량, m은 차량의 질량값, g는 차량의 중력 가속도값,
Figure pat00110
는 차량의 가속도값,
Figure pat00111
는 차량의 힘값임.At this time,
Figure pat00108
The load value of the front wheel,
Figure pat00109
A is the distance from the front wheel to the center of gravity on the ground, b is the distance from the ground to the center of gravity, B is the distance from the rear wheel to the center of gravity on the ground, m is the mass value of the vehicle, g is the acceleration value of the vehicle,
Figure pat00110
The acceleration value of the vehicle,
Figure pat00111
Is the power value of the vehicle.

이 후, 도 5에 도시된 바와 같이, 차량이 가속도

Figure pat00112
로 가속 중일 때, 차량의 후륜 휠에 걸리는 후륜 휠의 하중값(
Figure pat00113
)과 하중 변화량(
Figure pat00114
)은 equivalent trailing arm analysis에 의해 산출되고, 산출 결과는 하기 <식 3>과 같다.Thereafter, as shown in Fig. 5,
Figure pat00112
The load value of the rear wheel of the vehicle that is caught by the rear wheel of the vehicle
Figure pat00113
) And load variation (
Figure pat00114
) Is calculated by equivalent trailing arm analysis, and the calculation result is as shown in Equation (3).

<식 3><Formula 3>

Figure pat00115
Figure pat00115

이때,

Figure pat00116
는 축이 되는 pivot A에 대한 moment들의 합,
Figure pat00117
은 후륜 휠의 하중값,
Figure pat00118
은 후륜 휠의 하중 변화량, r은 후륜 휠의 반지름, d는 지면에서의 후륜 휠부터 pivot A까지의 거리값, e는 지면부터 pivot A까지의 높이값, m은 차량의 질량값,
Figure pat00119
는 차량의 가속도값, h는 지면부터 무게 중심까지의 높이값, L은 휠 베이스값, h는 지면부터 무게 중심까지의 높이값,
Figure pat00120
는 차량의 힘값임.At this time,
Figure pat00116
Is the sum of the moments to the axis pivot A,
Figure pat00117
The load value of the rear wheel,
Figure pat00118
R is the radius of the rear wheel, d is the distance from the rear wheel to the pivot A on the ground, e is the height from the ground to the pivot A, m is the mass value of the vehicle,
Figure pat00119
H is the acceleration value of the vehicle, h is the height value from the ground to the center of gravity, L is the wheelbase value, h is the height value from the ground to the center of gravity,
Figure pat00120
Is the power value of the vehicle.

여기서, 전륜 휠의 하중 변화량(

Figure pat00121
)과 후륜 휠의 하중 변화량(
Figure pat00122
)은 하기 <식 4>와 같이 재전개할 수가 있다.Here, the load change amount of the front wheel (
Figure pat00121
) And the load change amount of the rear wheel (
Figure pat00122
) Can be re-developed as shown in the following Equation (4).

<식 4><Formula 4>

Figure pat00123
Figure pat00123

이때,

Figure pat00124
는 전륜 휠의 하중 변화량, h는 지면부터 무게 중심까지의 높이값, L은 휠 베이스값, m은 차량의 질량값,
Figure pat00125
는 차량의 가속도값, d는 지면에서의 후륜 휠부터 pivot A까지의 거리값, e는 지면부터 pivot A까지의 높이값,
Figure pat00126
는 차량의 힘값,
Figure pat00127
는 전륜 휠의 서스펜션 스프링 상수값,
Figure pat00128
은 후륜 휠의 서스펜션 스프링 상수값,
Figure pat00129
는 전륜 휠의 서스펜션 변화량,
Figure pat00130
은 후륜 휠의 서스펜션 변화량임.At this time,
Figure pat00124
H is the height change value from the ground to the center of gravity, L is the wheel base value, m is the mass value of the vehicle,
Figure pat00125
D is the distance from the rear wheel to pivot A on the ground, e is the height from ground to pivot A,
Figure pat00126
The power value of the vehicle,
Figure pat00127
Is the suspension spring constant value of the front wheel,
Figure pat00128
The value of the suspension spring constant of the rear wheel,
Figure pat00129
The change amount of the suspension of the front wheel,
Figure pat00130
Is the change in suspension of the rear wheel.

이 후, 피치 각도 산출 단계(S704)는 추정부(102)에서 추정한 서스펜션 변화 정보를 기초로 차량의 현재 피치 각도 정보(하기 <식 5> 내지 <식 7>의

Figure pat00131
)를 산출하고, 산출한 현재 피치 각도 정보(하기 <식 5> 내지 <식 7>의
Figure pat00132
)와 차량의 촬영 장치(10)로부터 차선 인식을 기초로 산출한 피치 각도 정보(하기 <식 8>의
Figure pat00133
)를 이용하여 현재 피치 모션에 따라 필요한 피치 각도 보정 정보(하기 <식 9>의
Figure pat00134
)를 산출한다.Thereafter, the pitch angle calculating step S704 calculates the pitch angle information of the vehicle based on the suspension change information estimated by the estimating unit 102 (see Equations 5 to 7 below)
Figure pat00131
), And calculates the current pitch angle information (the following equations (5) to (7)
Figure pat00132
And the pitch angle information calculated on the basis of the lane recognition from the photographing apparatus 10 of the vehicle
Figure pat00133
) Is used to calculate pitch angle correction information (hereinafter referred to as &quot; pitch angle correction information &quot;
Figure pat00134
).

이때, 피치 각도 산출 단계(S704)는 추정부(102)에서 추정한 서스펜션 변화 정보를 기초로 산출부(104)에서 차량의 현재 피치 각도 정보(하기 <식 5> 내지 <식 7>의

Figure pat00135
)를 산출할 때에, 휠 베이스값(L), 전후륜 휠의 서스펜션 변화량(
Figure pat00136
,
Figure pat00137
)간의 상관 관계를 이용할 수가 있다.At this time, the pitch angle calculating step S704 calculates the pitch angle information of the vehicle based on the suspension change information estimated by the estimating unit 102,
Figure pat00135
), The wheel base value L, the suspension change amount of the front and rear wheel wheels (
Figure pat00136
,
Figure pat00137
) Can be used.

일예로, 도 6 및 도 7에 도시된 바와 같이 피치 각도 산출 단계(S704)는 휠 베이스값(L)과 전후륜 휠의 서스펜션 변화량(

Figure pat00138
,
Figure pat00139
) 및 차량의 현재 피치 각도 정보(
Figure pat00140
)간의 상관 특성 그래프를 통해 하기 <식 5> 내지 <식 7>과 같이 차량의 현재 피치 각도 정보(
Figure pat00141
)를 산출부(104)에서 산출할 수가 있다.For example, as shown in FIGS. 6 and 7, the pitch angle calculating step S704 calculates the pitch angle of the front and rear wheels based on the wheel base value L and the suspension change amount
Figure pat00138
,
Figure pat00139
) And the current pitch angle information of the vehicle (
Figure pat00140
(5) to (7) through the correlation characteristic graph between the current pitch angle information
Figure pat00141
Can be calculated by the calculation unit 104. [

<식 5>&Lt; EMI ID =

Figure pat00142
Figure pat00142

이때,

Figure pat00143
는 차량의 현재 피치 각도 정보, L은 휠 베이스값,
Figure pat00144
는 전륜 휠의 서스펜션 변화량,
Figure pat00145
은 후륜 휠의 서스펜션 변화량임.At this time,
Figure pat00143
Is the current pitch angle information of the vehicle, L is the wheel base value,
Figure pat00144
The change amount of the suspension of the front wheel,
Figure pat00145
Is the change in suspension of the rear wheel.

여기서, 차량의 현재 피치 각도 정보(

Figure pat00146
)는 하기 <식 6>과 같이 <식 4>를 이용하여 가속도
Figure pat00147
에 관한 식으로 재전개할 수가 있다.Here, the current pitch angle information of the vehicle
Figure pat00146
) Is calculated by using Equation (4) as < EMI ID =
Figure pat00147
It is possible to re-develop the equation.

이때, 피치 모션에 따른 피치 각도 보정 정보(S)는 차량의 탑승자에 따라 달라지는 차량의 질량 변화에 의해 변화된 변수 값이 되므로, 차량의 현재 피치 각도 정보(

Figure pat00148
)는 하기 <식 7>과 같이 단순화시켜 재전개할 수가 있다.At this time, the pitch angle correction information S according to the pitch motion becomes the variable value changed by the mass change of the vehicle depending on the passenger of the vehicle, so that the current pitch angle information
Figure pat00148
) Can be re-expanded as shown in Equation (7) below.

<식 6>&Lt; EMI ID =

Figure pat00149
Figure pat00149

<식 7>Equation (7)

Figure pat00150
Figure pat00150

이때,

Figure pat00151
는 차량의 현재 피치 각도 정보, L은 휠 베이스값,
Figure pat00152
는 전륜 휠의 서스펜션 변화량,
Figure pat00153
은 후륜 휠의 서스펜션 변화량,
Figure pat00154
는 전체 휠의 하중값,
Figure pat00155
는 차량의 가속도값, h는 지면부터 무게 중심까지의 높이값, d는 지면에서의 후륜 휠부터 pivot A까지의 거리값, e는 지면부터 pivot A까지의 높이값,
Figure pat00156
는 전륜 휠의 서스펜션 스프링 상수값,
Figure pat00157
은 후륜 휠의 서스펜션 스프링 상수값임.At this time,
Figure pat00151
Is the current pitch angle information of the vehicle, L is the wheel base value,
Figure pat00152
The change amount of the suspension of the front wheel,
Figure pat00153
The amount of suspension change of the rear wheel,
Figure pat00154
The load value of the whole wheel,
Figure pat00155
H is the height value from the ground to the center of gravity, d is the distance from the rear wheel to pivot A on the ground, e is the height value from ground to pivot A,
Figure pat00156
Is the suspension spring constant value of the front wheel,
Figure pat00157
Is the value of the suspension spring constant of the rear wheel.

또한, 피치 각도 산출 단계(S704)는 산출부(104)에서 차량의 촬영 장치(10)로부터 차선 인식을 기초로 피치 각도 정보(

Figure pat00158
)를 산출할 때에, 차선 인식으로 추정한 지평선의 높이값(
Figure pat00159
), 촬영 장치(10)로부터 획득한 소실점의 위치값(
Figure pat00160
), 촬영 장치(10)의 초점 거리값(
Figure pat00161
)간의 상관 관계를 이용할 수가 있다.The pitch angle calculating step S704 calculates the pitch angle information (step S704) based on the lane recognition from the photographing apparatus 10 of the vehicle by the calculating unit 104
Figure pat00158
), The height value of the horizon estimated by the lane recognition (
Figure pat00159
), The position value of the vanishing point acquired from the photographing apparatus 10
Figure pat00160
), The focal distance value of the photographing apparatus 10 (
Figure pat00161
) Can be used.

일예로, 피치 각도 산출 단계(S704)는 산출부(104)에서 하기 <식 8>에 의해 차량의 촬영 장치(10)로부터 차선 인식을 기초로 피치 각도 정보(

Figure pat00162
)를 산출할 수가 있다.For example, the pitch angle calculating step S704 calculates the pitch angle information (hereinafter referred to as &quot; pitch angle information &quot;) based on lane recognition from the photographing apparatus 10 of the vehicle
Figure pat00162
) Can be calculated.

<식 8><Formula 8>

Figure pat00163
Figure pat00163

이때,

Figure pat00164
는 피치 각도 정보,
Figure pat00165
은 촬영 장치(10)로부터 획득한 소실점의 위치값,
Figure pat00166
은 차선 인식으로 추정한 지평선의 높이값,
Figure pat00167
는 촬영 장치(10)의 초점 거리값임.At this time,
Figure pat00164
Pitch angle information,
Figure pat00165
The position value of the vanishing point acquired from the photographing apparatus 10,
Figure pat00166
The height value of the horizon estimated by the lane recognition,
Figure pat00167
Is the focal length value of the photographing apparatus (10).

또한, 피치 각도 산출 단계(S704)는 산출부(104)에서 현재 피치 각도 정보(

Figure pat00168
)와 차선 인식을 기초로 산출한 피치 각도 정보(
Figure pat00169
)를 이용하여 현재 피치 모션에 따라 필요한 피치 각도 보정 정보(
Figure pat00170
)를 산출할 때에, 차량의 가속도값(
Figure pat00171
), 차량의 중력가속도값(g), 차선 인식으로 추정한 지평선의 높이값(
Figure pat00172
), 촬영 장치(10)로부터 획득한 소실점의 위치값(
Figure pat00173
), 촬영 장치(10)의 초점 거리값(
Figure pat00174
)간의 상관 관계를 이용할 수가 있다.In addition, the pitch angle calculating step S704 calculates the pitch angle information
Figure pat00168
) And the pitch angle information calculated based on the lane recognition
Figure pat00169
), The necessary pitch angle correction information (
Figure pat00170
), The acceleration value of the vehicle (
Figure pat00171
), A gravitational acceleration value (g) of the vehicle, a height value of the horizon estimated by lane recognition
Figure pat00172
), The position value of the vanishing point acquired from the photographing apparatus 10
Figure pat00173
), The focal distance value of the photographing apparatus 10 (
Figure pat00174
) Can be used.

일예로, 피치 각도 산출 단계(S704)는 산출부(104)에서 현재 피치 각도 정보(<식 7>의

Figure pat00175
)와 차선 인식을 기초로 산출한 피치 각도 정보(<식 8>의
Figure pat00176
)를 이용하여 하기 <식 9>와 같이 현재 피치 모션에 따라 필요한 피치 각도 보정 정보(
Figure pat00177
)를 산출할 수가 있다.For example, the pitch angle calculating step S704 calculates the pitch angle information (equation
Figure pat00175
) And the pitch angle information calculated on the basis of the lane recognition
Figure pat00176
), Pitch angle correction information (hereinafter referred to as &quot; pitch angle correction information &quot;) necessary for the current pitch motion
Figure pat00177
) Can be calculated.

<식 9>Equation (9)

Figure pat00178
Figure pat00178

이때,

Figure pat00179
는 피치 각도 정보,
Figure pat00180
은 촬영 장치(10)로부터 획득한 소실점의 위치값,
Figure pat00181
은 차선 인식으로 추정한 지평선의 높이값,
Figure pat00182
는 촬영 장치(10)의 초점 거리값,
Figure pat00183
는 차량의 가속도값, g는 차량의 중력가속도값, S는 피치 모션에 따른 피치 각도 보정 정보,
Figure pat00184
는 현재 피치 모션에 따라 필요한 피치 각도 보정 정보임.At this time,
Figure pat00179
Pitch angle information,
Figure pat00180
The position value of the vanishing point acquired from the photographing apparatus 10,
Figure pat00181
The height value of the horizon estimated by the lane recognition,
Figure pat00182
The focal length value of the photographing apparatus 10,
Figure pat00183
G is the gravitational acceleration value of the vehicle, S is the pitch angle correction information according to the pitch motion,
Figure pat00184
Is the pitch angle correction information required according to the current pitch motion.

이 후, 영상 보정 단계(S706)는 제어부(108)의 제어에 따라 산출부(104)에서 산출한 피치 각도 보정 정보(

Figure pat00185
)를 보정부(106)에 공급하고, 보정부(106)에서 촬영 장치(10)의 현재 영상을 산출부(104)에서 산출한 피치 각도 보정 정보(
Figure pat00186
)에 따라 이미 설정된 영상 정보로 보정한다.Thereafter, the image correction step S706 is performed based on the pitch angle correction information (the pitch angle correction information) calculated by the calculation unit 104
Figure pat00185
And supplies the current image of the photographing apparatus 10 to the correcting section 106 in the correcting section 106. The pitch angle correcting information
Figure pat00186
) To the image information already set.

이와 같은, 본 발명의 제 1 실시 예에 따른 차량용 촬영 장치(10)의 영상 보정 장치(100) 및 그 영상 보정 방법(700)은 추정부(102)와 산출부(104) 및 보정부(106)와 제어부(108)를 포함하여 서스펜션 변화 추정 단계(S702)와 피치 각도 산출 단계(S704) 및 영상 보정 단계(S706)를 수행한다.The image correcting apparatus 100 and the image correcting method 700 of the vehicle image capturing apparatus 10 according to the first embodiment of the present invention include the estimating unit 102, the calculating unit 104, and the correcting unit 106 And a control unit 108 to perform a suspension change estimation step S702, a pitch angle calculation step S704, and an image correction step S706.

따라서, 본 발명의 제 1 실시 예에 따른 차량용 촬영 장치(10)의 영상 보정 장치(100) 및 그 영상 보정 방법(700)은 차량이 도로를 주행할 때 가속이나 감속에 의해 피치 모션이 발생할 경우, 차량의 피치 각도를 추정하여 차량용 촬영 장치(10)의 영상을 보정함으로써, 차량용 촬영 장치(10)의 영상을 안정적으로 제공할 수가 있게 된다.Therefore, the image correcting apparatus 100 and the image correcting method 700 of the vehicle image pickup apparatus 10 according to the first embodiment of the present invention are arranged such that when a pitch motion occurs due to acceleration or deceleration when the vehicle is traveling on the road , It is possible to stably provide the image of the vehicle image pickup apparatus 10 by correcting the image of the vehicle image pickup apparatus 10 by estimating the pitch angle of the vehicle.

<제 2 실시 예>&Lt; Embodiment 2 >

도 8은 본 발명의 제 2 실시 예에 따른 영상 보정 장치를 일예로 나타낸 블럭 구성도이다.8 is a block diagram illustrating an image correction apparatus according to a second embodiment of the present invention.

도 8을 참조하면, 본 발명의 제 2 실시 예에 따른 영상 보정 장치(800)는 제 1 실시 예에 따른 영상 보정 장치(도2의 100)와 동일하게 추정부(802)와 산출부(804) 및 보정부(806)와 제어부(808)를 포함한다.8, an image correction apparatus 800 according to the second embodiment of the present invention includes an estimation unit 802 and an output unit 804 (FIG. 2) similar to the image correction apparatus 100 of FIG. 2 according to the first embodiment. A correction unit 806, and a control unit 808. [

이러한, 본 발명의 제 2 실시 예에 따른 영상 보정 장치(800)의 추정부(802)와 산출부(804) 및 보정부(806)와 제어부(808)에 대한 기능 및 그것들 간의 유기적인 연결 관계는 제 1 실시 예에 따른 영상 보정 장치(도2의 100)의 추정부(도2의 102)와 산출부(도2의 104) 및 보정부(도2의 106)와 제어부(도2의 108)에 대한 기능 및 그것들 간의 유기적인 연결 관계와 동일하므로, 이것에 대한 각각의 부연 설명들은 이하 생략하기로 한다.The functions of the estimating unit 802 and the calculating unit 804, the correcting unit 806 and the controlling unit 808 of the image correcting apparatus 800 according to the second embodiment of the present invention and the organic connection relationship therebetween 2) of the image correction apparatus 100 (FIG. 2), the calculation unit 104 (FIG. 2), the correction unit 106 (FIG. 2), and the control unit ), And the organic connection relationship therebetween, and therefore, respective additional descriptions thereof will be omitted below.

여기에, 본 발명의 제 2 실시 예에 따른 영상 보정 장치(800)는 제 1 식별부(810)를 더 포함한다.Here, the image correction apparatus 800 according to the second embodiment of the present invention further includes a first identification unit 810.

즉, 제 1 식별부(810)는 산출부(804)에서 피치 각도 보정 정보(

Figure pat00187
)를 산출할 때에, 현재 영상을 이미 설정된 영상 정보로 보정시킴을 식별시킨다.That is, the first identifying unit 810 calculates the pitch angle correction information (
Figure pat00187
), It is discriminated that the current image is to be corrected to the already set image information.

이때, 제 1 식별부(810)는 도시하지는 않았지만, 운전자가 차량의 정보나 상태를 식별하기 위해 제공되는 경보기(미도시)와 스피커(미도시) 및 발광 부재(미도시)중 적어도 하나를 포함하고, 유저와 기계를 인터페이스시켜 운전자가 차량의 정보나 상태를 파악하도록 탑재되는 HMI(Human Machine Interface) 모듈(미도시)과 HUD(Head-UP Display) 모듈(미도시)중 적어도 하나를 포함하여 경보기(미도시)의 경보 동작과 스피커(미도시)의 음성 동작 및 발광 부재(미도시)의 발광 동작과 HMI(Human Machine Interface) 모듈(미도시)의 HMI(Human Machine Interface) 메시지 표시 동작 및 HUD(Head-UP Display) 모듈(미도시)의 HUD(Head-UP Display) 메시지 표시 동작중 적어도 하나의 동작을 통해 현재 영상을 이미 설정된 영상 정보로 보정시킴을 식별시킬 수가 있다.At this time, the first identification unit 810 includes at least one of an alarm (not shown), a speaker (not shown) and a light emitting member (not shown) provided for the driver to identify the information or state of the vehicle (Not shown) and a HUD (Head-Up Display) module (not shown), which are installed to interface the user and the machine so that the driver can grasp the information and status of the vehicle An alarm operation of an alarm (not shown), a sound operation of a speaker (not shown), a light emitting operation of a light emitting member (not shown), an operation of displaying an HMI (human machine interface) message of an HMI And the HUD (Head-UP Display) message display operation of the HUD (Head-Up Display) module (not shown).

이러한, 본 발명의 제 2 실시 예에 따른 영상 보정 장치(800)를 이용하여 촬영 장치(10)의 영상을 보정하기 위한 영상 보정 방법을 살펴보면 다음 도 9와 같다.An image correcting method for correcting the image of the photographing apparatus 10 using the image correcting apparatus 800 according to the second embodiment of the present invention will now be described with reference to FIG.

도 9는 본 발명의 제 2 실시 예에 따른 영상 보정 장치의 영상 보정 방법을 나타낸 순서도이다.9 is a flowchart illustrating an image correction method of the image correction apparatus according to the second embodiment of the present invention.

도 9를 참조하면, 본 발명의 제 2 실시 예에 따른 영상 보정 장치(800)의 영상 보정 방법(900)은 제 1 실시 예에 따른 영상 보정 장치(도2의 100)의 영상 보정 방법(도7의 700)과 동일하게 서스펜션 변화 추정 단계(S902)와 피치 각도 산출 단계(S904) 및 영상 보정 단계(S906)를 포함한다.9, an image correction method 900 of an image correction apparatus 800 according to the second embodiment of the present invention includes an image correction method (see FIG. 2) of the image correction apparatus 100 7, 700) includes a suspension change estimation step S902, a pitch angle calculation step S904, and an image correction step S906.

이러한, 본 발명의 제 2 실시 예에 따른 영상 보정 장치(800)의 영상 보정 방법(900)중 서스펜션 변화 추정 단계(S902)와 피치 각도 산출 단계(S904) 및 영상 보정 단계(S906)에 대한 기능 및 그것들 간의 유기적인 연결 관계는 제 1 실시 예에 따른 영상 보정 장치(도2의 100)의 영상 보정 방법(도7의 700)중 서스펜션 변화 추정 단계(S702)와 피치 각도 산출 단계(S704) 및 영상 보정 단계(S706)에 대한 기능 및 그것들 간의 유기적인 연결 관계와 동일하므로, 이것에 대한 각각의 부연설명들은 이하 생략하기로 한다.The function of the suspension change estimation step S902, the pitch angle calculation step S904, and the image correction step S906 among the image correction method 900 of the image correction apparatus 800 according to the second embodiment of the present invention, And an organic connection between them is determined by a suspension change estimation step S702, a pitch angle calculation step S704, and a pitch angle calculation step of the image correction method (700 of FIG. 7) of the image correction apparatus 100 of FIG. The function for the image correction step S706, and the organic connection relation between them, respectively, and the respective further description thereof will be omitted below.

여기에, 본 발명의 제 2 실시 예에 따른 영상 보정 장치(800)의 영상 보정 방법(900)은 제 1 식별 단계(S905)를 더 수행한다.Here, the image correction method 900 of the image correction apparatus 800 according to the second embodiment of the present invention further performs a first identification step (S905).

일예로, 제 1 식별 단계(S905)는 피치 각도 산출 단계(S904) 이후와 영상 보정 단계(S906) 이전에 수행할 수가 있다.For example, the first identifying step S905 may be performed after the pitch angle calculating step S904 and before the image correcting step S906.

다른 일예로, 제 1 식별 단계(미도시)는 도시하지는 않았지만, 피치 각도 산출 단계(미도시)와 동기화되어 수행할 수가 있다.Alternatively, the first identification step (not shown) may be performed in synchronization with the pitch angle calculation step (not shown), though not shown.

이러한, 제 1 식별 단계(S905)는 산출부(804)에서 피치 각도 보정 정보(

Figure pat00188
)를 산출할 때에, 현재 영상을 이미 설정된 영상 정보로 보정시킴을 식별시킨다.In the first identifying step S905, the pitch angle correction information (
Figure pat00188
), It is discriminated that the current image is to be corrected to the already set image information.

이와 같은, 본 발명의 제 2 실시 예에 따른 차량용 촬영 장치(10)의 영상 보정 장치(800) 및 그 영상 보정 방법(900)은 추정부(802)와 산출부(804) 및 보정부(806)와 제어부(808) 및 제 1 식별부(810)를 포함하여 서스펜션 변화 추정 단계(S902)와 피치 각도 산출 단계(S904) 및 제 1 식별 단계(S905)와 영상 보정 단계(S906)를 수행한다.The image correcting apparatus 800 and the image correcting method 900 of the vehicle image capturing apparatus 10 according to the second embodiment of the present invention include the estimating unit 802, the calculating unit 804, and the correcting unit 806 A suspension angle change estimation step S902, a pitch angle calculation step S904, a first identification step S905, and an image correction step S906 including the control part 808 and the first identification part 810 .

따라서, 본 발명의 제 2 실시 예에 따른 차량용 촬영 장치(10)의 영상 보정 장치(800) 및 그 영상 보정 방법(900)은 차량이 도로를 주행할 때 가속이나 감속에 의해 피치 모션이 발생할 경우, 차량의 피치 각도를 추정하여 차량용 촬영 장치(10)의 영상을 보정함으로써, 차량용 촬영 장치(10)의 영상을 안정적으로 제공할 수가 있게 된다.Therefore, the image correcting apparatus 800 and the image correcting method 900 of the vehicle image capturing apparatus 10 according to the second embodiment of the present invention are configured such that, when a pitch motion occurs due to acceleration or deceleration when the vehicle travels on the road , It is possible to stably provide the image of the vehicle image pickup apparatus 10 by correcting the image of the vehicle image pickup apparatus 10 by estimating the pitch angle of the vehicle.

또한, 본 발명의 제 2 실시 예에 따른 차량용 촬영 장치(10)의 영상 보정 장치(800) 및 그 영상 보정 방법(900)은 피치 각도 보정 정보(

Figure pat00189
)를 산출할 때에, 현재 영상을 이미 설정된 영상 정보로 보정시킴을 식별시킬 수가 있으므로, 운전자에게 주의 운전을 유도할 수가 있게 된다.The image correcting apparatus 800 and the image correcting method 900 of the vehicle image capturing apparatus 10 according to the second embodiment of the present invention may further include pitch angle correcting information
Figure pat00189
, It can be discriminated that the current image is corrected to the already set image information, so that it is possible to induce the driver to perform the cautionary operation.

<제 3 실시 예>&Lt; Third Embodiment >

도 10은 본 발명의 제 3 실시 예에 따른 영상 보정 장치를 일예로 나타낸 블럭 구성도이다.FIG. 10 is a block diagram illustrating an image correction apparatus according to a third embodiment of the present invention.

도 10을 참조하면, 본 발명의 제 3 실시 예에 따른 영상 보정 장치(1000)는 제 1 실시 예에 따른 영상 보정 장치(도2의 100)와 동일하게 추정부(1002)와 산출부(1004) 및 보정부(1006)와 제어부(1008)를 포함한다.10, an image correction apparatus 1000 according to the third embodiment of the present invention includes an estimation unit 1002 and a calculation unit 1004 (FIG. 2) in the same manner as the image correction apparatus 100 of FIG. 2 A correction unit 1006, and a control unit 1008. [

이러한, 본 발명의 제 3 실시 예에 따른 영상 보정 장치(1000)의 추정부(1002)와 산출부(1004) 및 보정부(1006)와 제어부(1008)에 대한 기능 및 그것들 간의 유기적인 연결 관계는 제 1 실시 예에 따른 영상 보정 장치(도2의 100)의 추정부(도2의 102)와 산출부(도2의 104) 및 보정부(도2의 106)와 제어부(도2의 108)에 대한 기능 및 그것들 간의 유기적인 연결 관계와 동일하므로, 이것에 대한 각각의 부연 설명들은 이하 생략하기로 한다.The functions of the estimation unit 1002, the calculation unit 1004, the correction unit 1006 and the control unit 1008 of the image correction apparatus 1000 according to the third embodiment of the present invention and the organic connection relationship therebetween 2) of the image correction apparatus 100 (FIG. 2), the calculation unit 104 (FIG. 2), the correction unit 106 (FIG. 2), and the control unit ), And the organic connection relationship therebetween, and therefore, respective additional descriptions thereof will be omitted below.

여기에, 본 발명의 제 3 실시 예에 따른 영상 보정 장치(1000)는 제 2 식별부(1012)를 더 포함한다.Here, the image correction apparatus 1000 according to the third embodiment of the present invention further includes a second identification unit 1012.

즉, 제 2 식별부(1012)는 보정부(1006)에서 현재 영상을 이미 설정된 영상 정보로 보정시킬 때에, 현재 영상이 이미 설정된 영상 정보로 보정됨을 식별시킨다.That is, when the correction unit 1006 corrects the current image to the image information already set, the second identification unit 1012 identifies that the current image is corrected to the previously set image information.

이때, 제 2 식별부(1012)는 도시하지는 않았지만, 운전자가 차량의 정보나 상태를 식별하기 위해 제공되는 경보기(미도시)와 스피커(미도시) 및 발광 부재(미도시)중 적어도 하나를 포함하고, 유저와 기계를 인터페이스시켜 운전자가 차량의 정보나 상태를 파악하도록 탑재되는 HMI(Human Machine Interface) 모듈(미도시)과 HUD(Head-UP Display) 모듈(미도시)중 적어도 하나를 포함하여 경보기(미도시)의 경보 동작과 스피커(미도시)의 음성 동작 및 발광 부재(미도시)의 발광 동작과 HMI(Human Machine Interface) 모듈(미도시)의 HMI(Human Machine Interface) 메시지 표시 동작 및 HUD(Head-UP Display) 모듈(미도시)의 HUD(Head-UP Display) 메시지 표시 동작중 적어도 하나의 동작을 통해 현재 영상이 이미 설정된 영상 정보로 보정됨을 식별시킬 수가 있다.At this time, the second identification unit 1012 includes at least one of an alarm (not shown), a speaker (not shown), and a light emitting member (not shown) provided for the driver to identify the information or state of the vehicle (Not shown) and a HUD (Head-Up Display) module (not shown), which are installed to interface the user and the machine so that the driver can grasp the information and status of the vehicle An alarm operation of an alarm (not shown), a sound operation of a speaker (not shown), a light emitting operation of a light emitting member (not shown), an operation of displaying an HMI (human machine interface) message of an HMI It is possible to identify that the current image is corrected to the already set image information through at least one operation of the HUD (Head-UP Display) message display operation of the HUD (Head-UP Display) module (not shown).

이러한, 본 발명의 제 3 실시 예에 따른 영상 보정 장치(1000)를 이용하여 촬영 장치(10)의 영상을 보정하기 위한 영상 보정 방법을 살펴보면 다음 도 11과 같다.An image correction method for correcting an image of the photographing apparatus 10 using the image correction apparatus 1000 according to the third embodiment of the present invention will be described with reference to FIG.

도 11은 본 발명의 제 3 실시 예에 따른 영상 보정 장치의 영상 보정 방법을 나타낸 순서도이다.11 is a flowchart illustrating an image correction method of an image correction apparatus according to the third embodiment of the present invention.

도 11을 참조하면, 본 발명의 제 3 실시 예에 따른 영상 보정 장치(1000)의 영상 보정 방법(1100)은 제 1 실시 예에 따른 영상 보정 장치(도2의 100)의 영상 보정 방법(도7의 700)과 동일하게 서스펜션 변화 추정 단계(S1102)와 피치 각도 산출 단계(S1104) 및 영상 보정 단계(S1106)를 포함한다.11, an image correction method 1100 of the image correction apparatus 1000 according to the third embodiment of the present invention is the same as the image correction method 1100 of the image correction apparatus 100 (FIG. 2) according to the first embodiment 7, 700) includes a suspension change estimation step S1102, a pitch angle calculation step S1104, and an image correction step S1106.

이러한, 본 발명의 제 3 실시 예에 따른 영상 보정 장치(1000)의 영상 보정 방법(1100)중 서스펜션 변화 추정 단계(S1102)와 피치 각도 산출 단계(S1104) 및 영상 보정 단계(S1106)에 대한 기능 및 그것들 간의 유기적인 연결 관계는 제 1 실시 예에 따른 영상 보정 장치(도2의 100)의 영상 보정 방법(도7의 700)중 서스펜션 변화 추정 단계(S702)와 피치 각도 산출 단계(S704) 및 영상 보정 단계(S706)에 대한 기능 및 그것들 간의 유기적인 연결 관계와 동일하므로, 이것에 대한 각각의 부연설명들은 이하 생략하기로 한다.The functions of the suspension change estimation step S1102, the pitch angle calculation step S1104 and the image correction step S1106 of the image correction method 1100 of the image correction apparatus 1000 according to the third embodiment of the present invention, And an organic connection between them is determined by a suspension change estimation step S702, a pitch angle calculation step S704, and a pitch angle calculation step of the image correction method (700 of FIG. 7) of the image correction apparatus 100 of FIG. The function for the image correction step S706, and the organic connection relation between them, respectively, and the respective further description thereof will be omitted below.

여기에, 본 발명의 제 3 실시 예에 따른 영상 보정 장치(1000)의 영상 보정 방법(1100)은 제 2 식별 단계(S1107)를 더 수행한다.Here, the image correction method 1100 of the image correction apparatus 1000 according to the third embodiment of the present invention further performs a second identification step (S1107).

일예로, 제 2 식별 단계(S1107)는 영상 보정 단계(S1106) 이후에 수행할 수가 있다.For example, the second identification step (S1107) may be performed after the image correction step (S1106).

다른 일예로, 제 2 식별 단계(미도시)는 도시하지는 않았지만, 영상 보정 단계(S1106)와 동기화되어 수행할 수가 있다.Alternatively, the second identification step (not shown) may be performed in synchronization with the image correction step S1106 (not shown).

이러한, 제 2 식별 단계(S1107)는 보정부(1006)에서 현재 영상을 이미 설정된 영상 정보로 보정시킬 때에, 현재 영상이 이미 설정된 영상 정보로 보정됨을 식별시킨다.In the second identifying step S1107, when the correcting unit 1006 corrects the current image to the already set image information, it identifies that the current image is corrected to the already set image information.

이와 같은, 본 발명의 제 3 실시 예에 따른 차량용 촬영 장치(10)의 영상 보정 장치(1000) 및 그 영상 보정 방법(1100)은 추정부(1002)와 산출부(1004) 및 보정부(1006)와 제어부(1008) 및 제 2 식별부(1012)를 포함하여 서스펜션 변화 추정 단계(S1102)와 피치 각도 산출 단계(S1104) 및 영상 보정 단계(S1106)와 제 2 식별 단계(S1107)를 수행한다.The image correcting apparatus 1000 and the image correcting method 1100 of the vehicle image capturing apparatus 10 according to the third embodiment of the present invention include the estimating unit 1002, the calculating unit 1004, and the correcting unit 1006 A suspension angle change estimation step S1102, a pitch angle calculation step S1104, an image correction step S1106 and a second identification step S1107 including the control part 1008 and the second identification part 1012 .

따라서, 본 발명의 제 3 실시 예에 따른 차량용 촬영 장치(10)의 영상 보정 장치(1000) 및 그 영상 보정 방법(1100)은 차량이 도로를 주행할 때 가속이나 감속에 의해 피치 모션이 발생할 경우, 차량의 피치 각도를 추정하여 차량용 촬영 장치(10)의 영상을 보정함으로써, 차량용 촬영 장치(10)의 영상을 안정적으로 제공할 수가 있게 된다.Therefore, the image correction apparatus 1000 and the image correction method 1100 of the vehicle image sensing apparatus 10 according to the third embodiment of the present invention are configured such that when a pitch motion occurs due to acceleration or deceleration when the vehicle travels on the road , It is possible to stably provide the image of the vehicle image pickup apparatus 10 by correcting the image of the vehicle image pickup apparatus 10 by estimating the pitch angle of the vehicle.

또한, 본 발명의 제 3 실시 예에 따른 차량용 촬영 장치(10)의 영상 보정 장치(1000) 및 그 영상 보정 방법(1100)은 현재 영상을 이미 설정된 영상 정보로 보정시킬 때에, 현재 영상이 이미 설정된 영상 정보로 보정됨을 식별시킬 수가 있으므로, 운전자에게 주의 운전을 유도할 수가 있게 된다.The image correcting apparatus 1000 and the image correcting method 1100 of the photographing apparatus 10 according to the third embodiment of the present invention corrects the current image to already set image information, It is possible to identify that the image is corrected by the image information.

본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구범위의 의미 및 범위 그리고 그 등가개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.The scope of the present invention is defined by the appended claims rather than the detailed description and all changes or modifications derived from the meaning and scope of the claims and their equivalents are to be construed as being included within the scope of the present invention do.

Claims (14)

차량이 가속을 하거나 감속을 할 때에 발생하는 현재 피치 모션(pitch motion)에 의한 상기 차량의 서스펜션(suspension) 변화 정보를 추정하는 추정부와;
상기 추정한 서스펜션 변화 정보를 기초로 상기 차량의 현재 피치 각도 정보를 산출하고, 상기 산출한 현재 피치 각도 정보와 상기 차량의 촬영 장치로부터 차선 인식을 기초로 산출한 피치 각도 정보를 이용하여 상기 현재 피치 모션에 따라 필요한 피치 각도 보정 정보를 산출하는 산출부와;
상기 촬영 장치의 현재 영상을 상기 산출한 피치 각도 보정 정보에 따라 이미 설정된 영상 정보로 보정하는 보정부; 및
상기 보정부에 상기 산출한 피치 각도 보정 정보를 공급하여 상기 현재 영상을 상기 이미 설정된 영상 정보로 보정시키도록 상기 보정부를 제어하는 제어부를 포함하는 차량용 촬영 장치의 영상 보정 장치.
An estimator for estimating suspension change information of the vehicle by a current pitch motion occurring when the vehicle accelerates or decelerates;
Calculating current pitch angle information of the vehicle on the basis of the estimated suspension change information, and using the calculated current pitch angle information and pitch angle information calculated based on lane recognition from the photographing apparatus of the vehicle, A calculation unit for calculating necessary pitch angle correction information according to the motion;
A correcting unit correcting the current image of the photographing apparatus to preset image information according to the calculated pitch angle correction information; And
And a control unit for supplying the calculated pitch angle correction information to the correcting unit and controlling the correcting unit to correct the current image to the already set image information.
제 1항에 있어서,
상기 추정부는,
상기 차량의 서스펜션 변화 정보를 추정할 때에, 전후륜 휠의 하중값, 전후륜 휠의 서스펜션 스프링 상수값, 차량의 무게 중심값, 지면부터 무게 중심까지의 높이값, 휠 베이스값, 차량의 질량값, 차량의 중력 가속도값간의 상관 관계를 이용하는 차량용 촬영 장치의 영상 보정 장치.
The method according to claim 1,
Wherein the estimating unit comprises:
A suspension wheel spring constant value of the front and rear wheels, a vehicle center-of-gravity value, a height value from the ground to the center of gravity, a wheelbase value, a mass value of the vehicle , And a gravitational acceleration value of the vehicle.
제 1항에 있어서,
상기 산출부는,
상기 추정한 서스펜션 변화 정보를 기초로 상기 차량의 현재 피치 각도 정보를 산출할 때에, 휠 베이스값, 전후륜 휠의 서스펜션 변화량간의 상관 관계를 이용하는 차량용 촬영 장치의 영상 보정 장치.
The method according to claim 1,
The calculating unit calculates,
Wherein the correlation between the wheel base value and the suspension change amount of the front and rear wheels when calculating the current pitch angle information of the vehicle based on the estimated suspension change information is used.
제 1항에 있어서,
상기 산출부는,
상기 차선 인식을 기초로 피치 각도 정보를 산출할 때에, 상기 차선 인식으로 추정한 지평선의 높이값, 상기 촬영 장치로부터 획득한 소실점의 위치값, 상기 촬영 장치의 초점 거리값간의 상관 관계를 이용하는 차량용 촬영 장치의 영상 보정 장치.
The method according to claim 1,
The calculating unit calculates,
Wherein, when the pitch angle information is calculated based on the lane recognition, a correlation between the height value of the horizon estimated by the lane recognition, the position value of the vanishing point acquired from the photographing apparatus, and the focal distance value of the photographing apparatus is used An image correction device of a device.
제 1항에 있어서,
상기 산출부는,
상기 피치 각도 보정 정보를 산출할 때에, 상기 차량의 가속도값, 상기 차량의 중력가속도값, 상기 차선 인식으로 추정한 지평선의 높이값, 상기 촬영 장치로부터 획득한 소실점의 위치값, 상기 촬영 장치의 초점 거리값간의 상관 관계를 이용하는 차량용 촬영 장치의 영상 보정 장치.
The method according to claim 1,
The calculating unit calculates,
Wherein said pitch angle correction information includes at least one of an acceleration value of said vehicle, a gravitational acceleration value of said vehicle, a height value of a horizon line estimated by said lane recognition, a position value of a vanishing point acquired from said photographing apparatus, And an image correction device of a vehicle image pickup apparatus using a correlation between distance values.
제 1항에 있어서,
상기 피치 각도 보정 정보를 산출할 때에, 상기 현재 영상을 상기 이미 설정된 영상 정보로 보정시킴을 식별시키는 제 1 식별부를 더 포함하는 차량용 촬영 장치의 영상 보정 장치.
The method according to claim 1,
Further comprising a first identifying unit for identifying, when the pitch angle correction information is calculated, that the current image is corrected to the already set image information.
제 1항에 있어서,
상기 현재 영상을 상기 이미 설정된 영상 정보로 보정시킬 때에, 상기 현재 영상이 상기 이미 설정된 영상 정보로 보정됨을 식별시키는 제 2 식별부를 더 포함하는 차량용 촬영 장치의 영상 보정 장치.
The method according to claim 1,
Further comprising a second identifying unit for identifying that the current image is corrected to the already set image information when the current image is corrected to the already set image information.
차량이 가속을 하거나 감속을 할 때에 발생하는 현재 피치 모션(pitch motion)에 의한 상기 차량의 서스펜션(suspension) 변화 정보를 추정하는 서스펜션 변화 추정 단계;
상기 추정한 서스펜션 변화 정보를 기초로 상기 차량의 현재 피치 각도 정보를 산출하고, 상기 산출한 현재 피치 각도 정보와 상기 차량의 촬영 장치로부터 차선 인식을 기초로 산출한 피치 각도 정보를 이용하여 상기 현재 피치 모션에 따라 필요한 피치 각도 보정 정보를 산출하는 피치 각도 산출 단계; 및
상기 촬영 장치의 현재 영상을 상기 산출한 피치 각도 보정 정보에 따라 이미 설정된 영상 정보로 보정하는 영상 보정 단계를 포함하는 차량용 촬영 장치의 영상 보정 방법.
A suspension change estimation step of estimating suspension change information of the vehicle by a current pitch motion occurring when the vehicle accelerates or decelerates;
Calculating current pitch angle information of the vehicle on the basis of the estimated suspension change information, and using the calculated current pitch angle information and pitch angle information calculated based on lane recognition from the photographing apparatus of the vehicle, A pitch angle calculating step of calculating necessary pitch angle correction information according to the motion; And
And an image correction step of correcting the current image of the photographing apparatus to image information already set according to the calculated pitch angle correction information.
제 8항에 있어서,
상기 서스펜션 변화 추정 단계는,
상기 차량의 서스펜션 변화 정보를 추정할 때에, 전후륜 휠의 하중값, 전후륜 휠의 서스펜션 스프링 상수값, 차량의 무게 중심값, 지면부터 무게 중심까지의 높이값, 휠 베이스값, 차량의 질량값, 차량의 중력 가속도값간의 상관 관계를 이용하는 차량용 촬영 장치의 영상 보정 방법.
9. The method of claim 8,
The suspension change estimating step includes:
A suspension wheel spring constant value of the front and rear wheels, a vehicle center-of-gravity value, a height value from the ground to the center of gravity, a wheelbase value, a mass value of the vehicle , And a gravitational acceleration value of the vehicle.
제 8항에 있어서,
상기 피치 각도 산출 단계는,
상기 추정한 서스펜션 변화 정보를 기초로 상기 차량의 현재 피치 각도 정보를 산출할 때에, 휠 베이스값, 전후륜 휠의 서스펜션 변화량간의 상관 관계를 이용하는 차량용 촬영 장치의 영상 보정 장치.
9. The method of claim 8,
Wherein the pitch angle calculating step comprises:
Wherein the correlation between the wheel base value and the suspension change amount of the front and rear wheels when calculating the current pitch angle information of the vehicle based on the estimated suspension change information is used.
제 8항에 있어서,
상기 피치 각도 산출 단계는,
상기 차선 인식을 기초로 피치 각도 정보를 산출할 때에, 상기 차선 인식으로 추정한 지평선의 높이값, 상기 촬영 장치로부터 획득한 소실점의 위치값, 상기 촬영 장치의 초점 거리값간의 상관 관계를 이용하는 차량용 촬영 장치의 영상 보정 방법.
9. The method of claim 8,
Wherein the pitch angle calculating step comprises:
Wherein, when the pitch angle information is calculated based on the lane recognition, a correlation between the height value of the horizon estimated by the lane recognition, the position value of the vanishing point acquired from the photographing apparatus, and the focal distance value of the photographing apparatus is used A method for image correction of a device.
제 8항에 있어서,
상기 피치 각도 산출 단계는,
상기 피치 각도 보정 정보를 산출할 때에, 상기 차량의 가속도값, 상기 차량의 중력가속도값, 상기 차선 인식으로 추정한 지평선의 높이값, 상기 촬영 장치로부터 획득한 소실점의 위치값, 상기 촬영 장치의 초점 거리값간의 상관 관계를 이용하는 차량용 촬영 장치의 영상 보정 방법.
9. The method of claim 8,
Wherein the pitch angle calculating step comprises:
Wherein said pitch angle correction information includes at least one of an acceleration value of said vehicle, a gravitational acceleration value of said vehicle, a height value of a horizon line estimated by said lane recognition, a position value of a vanishing point acquired from said photographing apparatus, Wherein the correlation between the distance values is used.
제 8항에 있어서,
상기 피치 각도 보정 정보를 산출할 때에, 상기 현재 영상을 상기 이미 설정된 영상 정보로 보정시킴을 식별시키는 제 1 식별 단계를 더 수행하는 차량용 촬영 장치의 영상 보정 방법.
9. The method of claim 8,
Further comprising a first identifying step of identifying, when the pitch angle correction information is calculated, that the current image is corrected to the already set image information.
제 8항에 있어서,
상기 현재 영상을 상기 이미 설정된 영상 정보로 보정시킬 때에, 상기 현재 영상이 상기 이미 설정된 영상 정보로 보정됨을 식별시키는 제 2 식별 단계를 더 수행하는 차량용 촬영 장치의 영상 보정 방법.
9. The method of claim 8,
Further comprising a second discriminating step of discriminating that the current image is corrected to the already set image information when correcting the current image to the already set image information.
KR1020140023755A 2014-02-28 2014-02-28 Apparatus for correcting image of photographing apparatus in vehicle and method for correcting image thereof KR20150102189A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020140023755A KR20150102189A (en) 2014-02-28 2014-02-28 Apparatus for correcting image of photographing apparatus in vehicle and method for correcting image thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140023755A KR20150102189A (en) 2014-02-28 2014-02-28 Apparatus for correcting image of photographing apparatus in vehicle and method for correcting image thereof

Publications (1)

Publication Number Publication Date
KR20150102189A true KR20150102189A (en) 2015-09-07

Family

ID=54242998

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140023755A KR20150102189A (en) 2014-02-28 2014-02-28 Apparatus for correcting image of photographing apparatus in vehicle and method for correcting image thereof

Country Status (1)

Country Link
KR (1) KR20150102189A (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105788291A (en) * 2016-02-23 2016-07-20 中山大学 Vehicle speed and position detection method and apparatus
US10160280B2 (en) 2016-01-13 2018-12-25 Hyundai Motor Company Vehicle yaw motion control method and apparatus using suspension

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10160280B2 (en) 2016-01-13 2018-12-25 Hyundai Motor Company Vehicle yaw motion control method and apparatus using suspension
CN105788291A (en) * 2016-02-23 2016-07-20 中山大学 Vehicle speed and position detection method and apparatus
CN105788291B (en) * 2016-02-23 2018-07-31 中山大学 A kind of detection method and device of car speed and position

Similar Documents

Publication Publication Date Title
CN108025644B (en) Display apparatus and vehicle display methods
US9771083B2 (en) Cognitive displays
US10162409B2 (en) Locating a head mounted display in a vehicle
US20160070966A1 (en) Head-mounted display head pose and activity estimation
US10262433B2 (en) Determining the pose of a head mounted display
EP2693759A3 (en) Stereoscopic image display device, image processing device, and stereoscopic image processing method
CN107010077B (en) Method for transmitting information to a driver of a motor vehicle and adaptive driver assistance system
US10377191B2 (en) Tire pressure estimation apparatus and estimation method thereof
CN110462702B (en) Travel route providing system, control method thereof, and medium
JP2017087826A (en) Electronic device
JP2013168063A (en) Image processing device, image display system, and image processing method
KR20120062541A (en) Display system based on gaze direction vector
EP3088269B1 (en) Method, system, and computer program product for monitoring a driver of a vehicle
JP7058800B2 (en) Display control device, display control method, and display control program
JP2017129406A (en) Information processing device, smart glass and control method thereof, and computer program
KR20150102189A (en) Apparatus for correcting image of photographing apparatus in vehicle and method for correcting image thereof
JP2018510701A (en) Method and apparatus for detecting human gaze direction
CN112513784B (en) Data glasses for vehicles with automatic hiding display content
JPWO2017029740A1 (en) Display control device, display device, and display control method
KR101627649B1 (en) Apparatus for controlling vehicle and method for controlling thereof
JP2019003262A (en) Processing unit and processing method for collision warning system, collision warning system, and motor cycle
JP4954960B2 (en) Vehicle alarm device
JP2007280203A (en) Information presenting device, automobile and information presenting method
JP6415968B2 (en) COMMUNICATION DEVICE, WARNING DEVICE, DISPLAY DEVICE, CONTROL METHOD, PROGRAM, AND STORAGE MEDIUM
JP2019003264A (en) Processing unit and processing method for inter-vehicle distance warning system, inter-vehicle distance warning system, and motor cycle

Legal Events

Date Code Title Description
N231 Notification of change of applicant
E902 Notification of reason for refusal
E601 Decision to refuse application