KR20200064295A - Vehicle image management device, vehicle including thereof and controlling method - Google Patents

Vehicle image management device, vehicle including thereof and controlling method Download PDF

Info

Publication number
KR20200064295A
KR20200064295A KR1020180150273A KR20180150273A KR20200064295A KR 20200064295 A KR20200064295 A KR 20200064295A KR 1020180150273 A KR1020180150273 A KR 1020180150273A KR 20180150273 A KR20180150273 A KR 20180150273A KR 20200064295 A KR20200064295 A KR 20200064295A
Authority
KR
South Korea
Prior art keywords
screen
image
prediction
split screen
image processing
Prior art date
Application number
KR1020180150273A
Other languages
Korean (ko)
Inventor
양슬기
Original Assignee
현대자동차주식회사
기아자동차주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 현대자동차주식회사, 기아자동차주식회사 filed Critical 현대자동차주식회사
Priority to KR1020180150273A priority Critical patent/KR20200064295A/en
Publication of KR20200064295A publication Critical patent/KR20200064295A/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/109Selection of coding mode or of prediction mode among a plurality of temporal predictive coding modes
    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07CTIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C5/00Registering or indicating the working of vehicles
    • G07C5/08Registering or indicating performance data other than driving, working, idle, or waiting time, with or without registering driving, working, idle or waiting time
    • G07C5/0841Registering performance data
    • G07C5/085Registering performance data using electronic data carriers
    • G07C5/0866Registering performance data using electronic data carriers the electronic data carrier being a digital video recorder in combination with video camera
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/119Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/182Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a pixel
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Traffic Control Systems (AREA)

Abstract

The present invention relates to an image processing device capable of storing a high-quality vehicle black box image. The image processing device of the present invention comprises: an image photographing module photographing the surrounding images of a vehicle; and an image processing module acquiring the surrounding images photographed from the image photographing module, wherein the image processing module includes a storage part for storing a plurality of prediction modes having directionality for the entire screen, and a control part for dividing a screen of the acquired surrounding image into at least one divided screen and determining a predicted pixel value by applying only a part of the plurality of prediction modes based on the directionality of the divided screen to perform in-screen prediction processing.

Description

차량용 영상 처리 장치, 이를 포함하는 차량 및 그 제어 방법 {VEHICLE IMAGE MANAGEMENT DEVICE, VEHICLE INCLUDING THEREOF AND CONTROLLING METHOD} VEHICLE IMAGE MANAGEMENT DEVICE, VEHICLE INCLUDING THEREOF AND CONTROLLING METHOD}

본 발명은 차량용 영상 처리 장치, 이를 포함하는 차량 및 그 제어 방법에 관한 것으로 더욱 상세하게는, 차량용 블랙박스 영상을 더욱 효율적으로 저장하기 위한 차량 및 그 제어 방법에 관한 것이다. The present invention relates to an image processing apparatus for a vehicle, a vehicle including the same, and a control method thereof, and more particularly, to a vehicle and a control method for storing the vehicle black box image more efficiently.

차량은, 도로나 선로를 주행하면서 사람이나 물건을 목적지까지 운반할 수 있는 장치를 의미한다. 차량은 주로 차체에 설치된 하나 이상의 차륜을 이용하여 여러 위치로 이동할 수 있다. 이와 같은 차량으로는 삼륜 또는 사륜 자동차나, 모터사이클 등의 이륜 자동차나, 건설 기계, 자전거 및 선로 상에 배치된 레일 위에서 주행하는 열차 등이 있을 수 있다.A vehicle means a device capable of transporting people or objects to a destination while driving on a road or track. The vehicle can be moved to various positions mainly using one or more wheels installed on the vehicle body. Such a vehicle may include a three- or four-wheeled vehicle, a two-wheeled vehicle such as a motorcycle, a construction machine, a bicycle, and a train running on a rail disposed on a track.

이러한 차량을 주행 시키는 경우에, 운전자는 운전 중에 앞 유리창을 통하여 전방을 주시하고, 차량 본체의 룸미러를 통하여 고개를 돌리지 않고 후방을 확인할 수 있으며, 차량의 좌우 양측에는 각각의 사이드 미러를 설치하여 좌, 우 양측을 육안으로 확인해가면서 안전한 운행이 이루어지도록 하고 있다. 다만, 운전석에서는 운전자가 전방 주시, 룸미러를 통해 후방 주시 이외에 보이지 않는 사각지대가 발생할 수 있어, 이로 인한 안전 사고가 빈번하게 일어날 수 있다.In the case of driving such a vehicle, the driver can observe the front through the windshield while driving, and can see the rear without turning his head through the room mirror of the vehicle body, and each side mirror is installed on both sides of the vehicle. Both sides and right are checked visually to ensure safe operation. However, in the driver's seat, the blind spot may be invisible to the driver other than the rear stare through the front mirror and the room mirror, and thus a safety accident may occur frequently.

따라서 최근에는 운전자에게 운행 시 사각지대를 편리하게 확인할 수 있도록 차량의 전방과 후방에 사각지대 확인 장치를 설치하고 있는 차량이 늘고 있으며, 이러한 사각지대를 확인하는 장치는 전방과 후방의 영상을 카메라가 촬영한 후 차량 실내의 A/V 시스템이 모니터를 통하여 촬영된 영상을 운전자가 볼 수 있도록 하는 것이 일반적인 방법의 시스템이다. Therefore, in recent years, more and more vehicles are equipped with a blind spot identification device on the front and rear of the vehicle so that the driver can conveniently check the blind spot when driving. After taking a picture, the A/V system inside the vehicle allows the driver to view the image captured through the monitor.

예를 들어, 근래에는 교통사고의 원인 규명 등을 위해 자동차 내에 설치하여 차량 외부 영상을 기록하는 차량용 영상기록장치(DVR)가 개발되고 상용화되고 있으며, 경제적이고 실용적이고 기술적인 대안을 제시하기 위하여 차량 블랙박스가 사용되고 있다. For example, in recent years, a vehicle video recorder (DVR) that is installed in a vehicle to record external images of a vehicle has been developed and commercialized to identify the cause of a traffic accident, and to provide an economical, practical, and technical alternative. Black box is used.

다만, 차량 블랙박스의 영상에 대하여 저화질 영상의 경우 사고 발생 시 원인 규명이 어려워 고화질 영상의 확보가 가능한 블랙박스를 선호하는 추세이나, 고화질의 영상의 경우, 처리 시간의 증가, 저장 공간의 증가와 같은 문제점이 발생하여 높은 품질의 영상을 좀 더 효율적으로 저장할 수 있는 방안에 대한 연구가 지속되고 있다. However, in the case of a low-quality image of a vehicle black box, it is a trend to prefer a black box capable of securing a high-definition image because it is difficult to identify the cause in case of an accident. Due to the same problem, research into a method for more efficiently storing high quality images has been continued.

일 측면은 고화질의 차량 블랙박스 영상을 저장할 수 있는 차량용 영상 처리 장치, 이를 포함하는 차량 및 제어 방법을 제공하고자 한다. One aspect is to provide a vehicle image processing apparatus capable of storing a high-quality vehicle black box image, a vehicle including the same, and a control method.

이에 따라, 차량은 고화질의 영상을 압축률을 높여서 확보함과 동시에 연산 시간을 최소화하고자 한다. Accordingly, the vehicle intends to secure a high-quality image by increasing a compression rate and to minimize computation time.

또한, 차량은 연산 시간을 최소화한 고화질의 영상을 확보함에 따라 효율적으로 영상을 저장할 수 있는 차량용 영상 처리 장치, 이를 포함하는 차량 및 제어 방법을 제공하고자 한다. In addition, the vehicle is to provide an image processing apparatus for a vehicle, a vehicle including the same, and a control method capable of efficiently storing an image as a high quality image with a minimum computation time is secured.

일 측면에 따른 영상 처리 장치는, 차량의 주변 영상을 촬영하는 영상 촬영 모듈; 과 상기 영상 촬영 모듈로부터 촬영된 주변 영상을 획득하는 영상 처리 모듈;을 포함하고, 상기 영상 처리 모듈은, 전체 화면에 대하여 방향성을 가지는 복수개의 예측 모드가 저장된 저장부; 및 획득된 주변 영상의 화면을 적어도 하나의 분할 화면으로 분할하고, 상기 분 화면의 방향성에 기초하여 상기 복수개의 예측 모드 중 일부만을 적용하여 예측 픽셀값을 결정하여 화면 내 예측 처리를 수행하는 제어부;를 포함할 수 있다. An image processing apparatus according to an aspect includes an image photographing module that photographs a surrounding image of a vehicle; And an image processing module for acquiring surrounding images captured from the image capturing module, wherein the image processing module includes: a storage unit in which a plurality of prediction modes having directionality with respect to the entire screen are stored; And a control unit for dividing the obtained screen of the surrounding image into at least one split screen and determining a predicted pixel value by applying only a part of the plurality of prediction modes based on the direction of the split screen to perform intra prediction processing. It may include.

또한, 상기 제어부는, 상기 획득된 주변 영상의 화면을 수평선과 수직선의 교점인 1점 소실점을 기준으로 네 개의 분할 화면으로 분할할 수 있다.In addition, the controller may divide the screen of the acquired surrounding image into four divided screens based on a vanishing point of one point that is an intersection of a horizontal line and a vertical line.

또한, 상기 제어부는, 상기 네 개의 분할 화면은 좌측 상단의 제 1 분할 화면, 우측 상단의 제 2 분할 화면, 좌측 하단의 제 3 분할 화면, 우측 하단의 제 4 분할 화면을 포함할 수 있다.In addition, the controller, the four split screens may include a first split screen on the upper left, a second split screen on the upper right, a third split screen on the lower left, and a fourth split screen on the lower right.

또한, 상기 제어부는, 상기 분할 화면의 방향성에 기초하여 상기 복수개의 예측 모드 중 절반의 예측 모드를 적용하여 예측 픽셀값을 결정할 수 있다.In addition, the controller may determine a predicted pixel value by applying half a prediction mode among the plurality of prediction modes based on the direction of the split screen.

또한, 상기 제어부는, 상기 제 1 분할 화면의 경우, 좌측 상단 대각선 방향의 예측 모드를 적용하고, 상기 제 2 분할 화면의 경우, 우측 상단 대각선 방향의 예측 모드를 적용하고, 상기 제 3 분할 화면의 경우, 좌측 하단 대각선 방향의 예측 모드를 적용하고, 상기 제 4 분할 화면의 경우, 우측 하단 대각선 방향의 예측 모드를 적용할 수 있다.In addition, the controller, in the case of the first split screen, applies a prediction mode in the upper left diagonal direction, and in the case of the second split screen, applies a prediction mode in the upper right diagonal direction, and of the third split screen. In the case, the prediction mode in the lower left diagonal direction may be applied, and in the case of the fourth split screen, the prediction mode in the lower right diagonal direction may be applied.

또한, 상기 제어부는, 상기 분할 화면의 방향성에 기초하여 상기 절반의 예측 모드 각각에 대한 비용을 산출하고, 산출된 비용 중 최소 비용인 예측 모드를 최종 모드로 결정할 수 있다.In addition, the controller may calculate a cost for each of the half prediction modes based on the direction of the split screen, and determine a prediction mode, which is a minimum cost among the calculated costs, as a final mode.

또한, 상기 제어부는, 상기 최종 모드의 비용이 미리 설정한 임계 비용보다 크면 상기 절반의 예측 모드가 아닌 상기 복수개의 예측 모드를 모두 적용하여 예측 픽셀값을 결정할 수 있다.In addition, when the cost of the final mode is greater than a preset threshold cost, the controller may determine a predicted pixel value by applying all of the plurality of prediction modes rather than the half prediction mode.

또한, 상기 영상 처리 장치를 포함하는 차량을 제공할 수 있다.In addition, it is possible to provide a vehicle including the image processing apparatus.

다른 일 측면에 따르면, According to another aspect,

차량의 주변 영상을 촬영하는 영상 촬영 모듈과, 상기 영상 촬영 모듈로부터 촬영된 주변 영상을 획득하고, 전체 화면에 대하여 방향성을 가지는 복수개의 예측 모드가 저장된 영상 처리 모듈을 포함하는 영상 처리 장치를 포함하는 차량 제어 방법에 있어서, 획득된 주변 영상의 화면을 적어도 하나의 분할 화면으로 분할하고; 상기 분할 화면의 방향성에 기초하여 상기 복수개의 예측 모드 중 일부만을 적용하여 예측 픽셀값을 결정하여 화면 내 예측 처리를 수행하는 차량 제어 방법이 제공될 수 있다.And an image processing module including an image processing module for photographing surrounding images of a vehicle, and an image processing module for acquiring surrounding images captured from the image photographing module and storing a plurality of prediction modes having directionality with respect to the entire screen. A vehicle control method comprising: dividing a screen of an acquired surrounding image into at least one split screen; A vehicle control method for determining a prediction pixel value by applying only a part of the plurality of prediction modes based on the direction of the split screen to perform intra prediction processing may be provided.

또한, 상기 획득된 주변 영상의 화면을 적어도 하나의 분할 화면으로 분할하는 것은, 상기 획득된 주변 영상의 화면을 수평선과 수직선의 교점인 1점 소실점을 기준으로 네 개의 분할 화면으로 분할하는 것을 포함할 수 있다.In addition, dividing the screen of the acquired peripheral image into at least one split screen may include dividing the screen of the acquired peripheral image into four divided screens based on a 1-point vanishing point that is an intersection of a horizontal line and a vertical line. Can be.

또한, 상기 획득된 주변 영상의 화면을 수평선과 수직선의 교점인 1점 소실점을 기준으로 네 개의 분할 화면으로 분할하는 것은, 상기 네 개의 분할 화면은 좌측 상단의 제 1 분할 화면, 우측 상단의 제 2 분할 화면, 좌측 하단의 제 3 분할 화면, 우측 하단의 제 4 분할 화면을 포함하여 분할 할 수 있다.In addition, dividing the screen of the acquired surrounding image into four divided screens based on a vanishing point of one point that is an intersection of a horizontal line and a vertical line, the four divided screens include a first split screen on the upper left and a second split on the upper right. It can be divided into a split screen, a third split screen in the lower left, and a fourth split screen in the lower right.

또한, 상기 분할 화면의 방향성에 기초하여 상기 복수개의 예측 모드 중 일부만을 적용하여 예측 픽셀값을 결정하여 화면 내 예측 처리를 수행하는 것은, 상기 분할 화면의 방향성에 기초하여 상기 복수개의 예측 모드 중 절반의 예측 모드를 적용하여 예측 픽셀값을 결정하는 것을 포함할 수 있다.In addition, performing prediction processing in the screen by determining a prediction pixel value by applying only a part of the plurality of prediction modes based on the direction of the split screen is half of the plurality of prediction modes based on the direction of the split screen. And determining a predicted pixel value by applying a prediction mode of.

또한, 상기 분할 화면의 방향성에 기초하여 상기 복수개의 예측 모드 중 절반의 예측 모드를 적용하여 예측 픽셀값을 결정하는 것은, 상기 제 1 분할 화면의 경우, 좌측 상단 대각선 방향의 예측 모드를 적용하고, 상기 제 2 분할 화면의 경우, 우측 상단 대각선 방향의 예측 모드를 적용하고, 상기 제 3 분할 화면의 경우, 좌측 하단 대각선 방향의 예측 모드를 적용하고, 상기 제 4 분할 화면의 경우, 우측 하단 대각선 방향의 예측 모드를 적용하는 것을 포함할 수 있다.In addition, determining a predicted pixel value by applying a prediction mode of half of the plurality of prediction modes based on the directionality of the split screen, in the case of the first split screen, applies a prediction mode in the upper left diagonal direction, In the case of the second split screen, the prediction mode in the upper right diagonal direction is applied, in the case of the third split screen, the prediction mode in the lower left diagonal direction is applied, and in the fourth split screen, the lower right diagonal direction is applied. It may include applying a prediction mode of.

또한, 상기 분할 화면의 방향성에 기초하여 상기 절반의 예측 모드 각각에 대한 비용을 산출하고, 산출된 비용 중 최소 비용인 예측 모드를 최종 모드로 결정하는 것을 더 포함할 수 있다.Also, it may further include calculating a cost for each of the half prediction modes based on the directionality of the split screen, and determining a prediction mode that is a minimum cost among the calculated costs as a final mode.

또한, 상기 최종 모드의 비용이 미리 설정한 임계 비용보다 크면 상기 절반의 예측 모드가 아닌 상기 복수개의 예측 모드를 모두 적용하여 예측 픽셀값을 결정하는 것을 더 포함할 수 있다.In addition, when the cost of the final mode is greater than a preset threshold cost, it may further include determining a prediction pixel value by applying all of the plurality of prediction modes rather than the half prediction mode.

본 발명은 고화질의 차량 블랙박스 영상을 저장할 수 있는 차량용 영상 처리 장치를 제공할 수 있다. The present invention can provide a vehicle image processing apparatus capable of storing a high-quality vehicle black box image.

차량은 고화질의 영상 내 영상이 갖는 방향성 특징을 이용하여 압축률을 높이기 위한 예측 방법을 개선할 수 있다.The vehicle can improve the prediction method for increasing the compression rate by using the directional feature of the image in the high quality image.

따라서, 차량은 연산 시간을 최소화한 고화질의 영상을 확보할 수 있으며, 이에 따라 효율적으로 영상을 저장할 수 있는 차량용 영상 처리 장치, 이를 포함하는 차량 및 제어 방법을 제공할 수 있다 Accordingly, the vehicle can secure a high-quality image with minimal computation time, and thus can provide a vehicle image processing apparatus capable of efficiently storing an image, a vehicle including the same, and a control method.

도 1은 실시 예에 따른 카메라 부착 위치를 설명하기 위한 차량의 내부 예시도이다.
도 2는 실시 예에 따른 차량의 내부 블록도이다.
도 3은 실시 예에 따른 영상의 화면 분할 방법을 설명하기 위한 예시도이다.
도 4는 실시 예에 따른 영상의 화면 내 예측 방법을 설명하기 위한 개략도이다.
도 5는 실시 예에 따른 영상의 화면 내 예측 방법을 설명하기 위한 예시도이다.
도 6은 영상의 화면 내 예측 방법을 설명하는 순서도이다.
1 is an exemplary interior view of a vehicle for explaining a camera attachment position according to an embodiment.
2 is an internal block diagram of a vehicle according to an embodiment.
3 is an exemplary diagram for explaining a method of dividing a screen of an image according to an embodiment.
4 is a schematic diagram illustrating an in-screen prediction method of an image according to an embodiment.
5 is an exemplary view for explaining an intra prediction method of an image according to an embodiment.
6 is a flowchart illustrating an in-screen prediction method of an image.

명세서 전체에 걸쳐 동일 참조 부호는 동일 구성요소를 지칭한다. 본 명세서가 실시예들의 모든 요소들을 설명하는 것은 아니며, 본 발명이 속하는 기술분야에서 일반적인 내용 또는 실시예들 간에 중복되는 내용은 생략한다. 명세서에서 사용되는 '부'라는 용어는 소프트웨어 또는 하드웨어로 구현될 수 있다.The same reference numerals refer to the same components throughout the specification. This specification does not describe all elements of the embodiments, and overlaps between general contents or embodiments in the technical field to which the present invention pertains are omitted. The term'part' used in the specification may be implemented in software or hardware.

명세서 전체에서, 어떤 부분이 다른 부분과 "연결"되어 있다고 할 때, 이는 직접적으로 연결되어 있는 경우뿐 아니라, 간접적으로 연결되어 있는 경우를 포함하고, 간접적인 연결은 무선 통신망을 통해 연결되는 것을 포함한다.Throughout the specification, when a part is "connected" to another part, this includes not only a direct connection but also an indirect connection, and an indirect connection includes connecting through a wireless communication network. do.

또한 어떤 부분이 어떤 구성요소를"포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미한다. Also, when a part “includes” a certain component, this means that other components may be further included, rather than excluding other components, unless otherwise specified.

단수의 표현은 문맥상 명백하게 예외가 있지 않는 한, 복수의 표현을 포함한다.Singular expressions include plural expressions, unless the context clearly has an exception.

각 단계들에 있어 식별부호는 설명의 편의를 위하여 사용되는 것으로 식별부호는 각 단계들의 순서를 설명하는 것이 아니며, 각 단계들은 문맥상 명백하게 특정 순서를 기재하지 않는 이상 명기된 순서와 다르게 실시될 수 있다. In each step, the identification code is used for convenience of explanation. The identification code does not describe the order of each step, and each step can be executed differently from the specified order unless a specific order is clearly stated in the context. have.

이하 첨부된 도면들을 참고하여 본 발명의 실시 예에 대해 설명한다.Hereinafter, embodiments of the present invention will be described with reference to the accompanying drawings.

도 1은 실시 예에 따른 차량의 내부 블록도이다.1 is an internal block diagram of a vehicle according to an embodiment.

도 1에 도시된 바와 같이, 차체의 내장(120)은 탑승자가 앉는 시트(121)와, 대시 보드(122)와, 대시 보드 상에 배치되고 타코미터, 속도계, 냉각수 온도계, 연료계, 방향전환 지시등, 상향등 표시등, 경고등, 안전벨트 경고등, 주행 거리계, 주행 기록계, 자동변속 선택레버 표시등, 도어 열림 경고등, 엔진 오일 경고등, 연료부족 경고등이 배치된 계기판(즉 클러스터, 123)과, 공조 장치의 송풍구와 조절판이 배치되고 라디오 장치 및 오디오 장치가 배치된 센터 페시아(124)를 포함한다.As shown in Figure 1, the interior 120 of the vehicle body is seated on the occupant seat 121, the dashboard 122, and disposed on the dashboard tachometer, speedometer, coolant thermometer, fuel gauge, direction change indicator light The instrument panel (i.e., cluster, 123) with air-conditioner, warning lamp, safety belt warning light, odometer, odometer, automatic shift selector light, door open warning light, engine oil warning light, and fuel shortage warning light It includes a center fascia 124 on which a tuyeres and throttle are arranged and on which radio and audio devices are arranged.

클러스터(123)는 차량의 주행 정보 및 고장 정보를 표시하는 표시부를 더 포함할 수 있다. 여기서 주행 정보는 연비 정보, 주행 가능 거리 정보, 총 주행 거리 정보, 주행 모드를 포함할 수 있고, 고장 정보는 타이어 공기압 이상 정보 등을 포함할 수 있다.The cluster 123 may further include a display unit that displays driving information and failure information of the vehicle. Here, the driving information may include fuel consumption information, driving distance information, total driving distance information, and driving mode, and the failure information may include tire air pressure abnormality information and the like.

센터 페시아(124)에는 라디오 장치, 오디오 장치, 공조 장치를 제어하기 위한 헤드 유닛(125)과, 멀티단자(126) 등이 설치될 수 있다.The center fascia 124 may be provided with a head unit 125 for controlling a radio device, an audio device, an air conditioning device, a multi-terminal 126 and the like.

여기서 멀티단자(126)는 헤드 유닛(125)과 인접한 위치에 배치될 수 있고, USB 포트, AUX단자를 포함하고, SD슬롯을 더 포함할 수 있다.Here, the multi-terminal 126 may be disposed at a position adjacent to the head unit 125, may include a USB port, an AUX terminal, and may further include an SD slot.

멀티단자(126)는 USB 포트를 통해 사용자용 단말기와 통신을 수행하는 것도 가능하다. 여기서 사용자용 단말기는 이동 및 통신이 가능한 디바이스로, 스마트 폰, 노트북, 태블릿 및 웨어러블 디바이스 등을 포함할 수 있다.The multi-terminal 126 can also communicate with a user terminal through a USB port. Here, the user terminal is a device capable of mobile and communication, and may include a smart phone, a laptop, a tablet, and a wearable device.

차량(1)은 각종 기능의 동작 명령을 입력받기 위한 입력부(127)를 더 포함할 수 있다.The vehicle 1 may further include an input unit 127 for receiving operation commands of various functions.

입력부(127)는 헤드 유닛(125) 및 센터페시아(124)에 마련될 수 있고, 각종 기능의 동작 온 오프 버튼, 각종 기능의 설정값을 변경하기 위한 버튼 등과 같은 적어도 하나의 물리적인 버튼을 포함한다. The input unit 127 may be provided in the head unit 125 and the center fascia 124, and includes at least one physical button such as an operation on/off button for various functions, a button for changing a set value of various functions, and the like. do.

입력부(127)는 차량용 단말기(130)의 표시부에 일체로 마련된 터치 패널을 포함할 수 있다. 이러한 입력부(127)는 단말기(130)의 표시부에 표시된 버튼의 위치 정보를 입력받는다. The input unit 127 may include a touch panel integrally provided with a display unit of the vehicle terminal 130. The input unit 127 receives location information of buttons displayed on the display unit of the terminal 130.

입력부(127)는 차량용 단말기(130)의 표시부에 표시된 커서의 이동 명령 및 선택 명령 등을 입력하기 위한 조그 다이얼 또는 터치 패드를 더 포함하는 것도 가능하다. The input unit 127 may further include a jog dial or a touch pad for inputting a movement command and a selection command of a cursor displayed on the display unit of the vehicle terminal 130.

여기서 조그 다이얼 또는 터치 패드는 센터페시아 등에 마련될 수 있다.Here, the jog dial or the touch pad may be provided in a center fascia or the like.

차량(1)은 헤드 유닛에 마련되고, 차량에서 수행 중인 기능에 대한 정보 및 사용자에 의해 입력된 정보를 표시하는 표시부(128)를 더 포함할 수 있다.The vehicle 1 may be provided on the head unit, and may further include a display unit 128 that displays information about a function being performed in the vehicle and information input by the user.

표시부(128)는 플라즈마 디스플레이 패널(Plasma Display Penal), 액정 디스플레이(Liquid Crystal Display: LCD) 패널, 전기 발광(Electro Luminescence: EL) 패널, 전기영동 디스플레이(Electrophoretic Display: EPD) 패널, 전기변색 디스플레이(Electrochromic Display: ECD) 패널, 발광 다이오드(Light Emitting Diode: LED) 패널 또는 유기 발광 다이오드(Organic Light Emitting Diode: OLED) 패널 등으로 마련될 수 있으나, 이에 한정되지는 않는다.The display unit 128 includes a plasma display panel (Plasma Display Penal), a liquid crystal display (LCD) panel, an electroluminescence (EL) panel, an electrophoretic display (EPD) panel, and an electrochromic display ( An electrochromic display (ECD) panel, a light emitting diode (LED) panel, or an organic light emitting diode (Organic Light Emitting Diode: OLED) panel may be provided, but is not limited thereto.

차량용 단말기(130)는 전후좌우 방향의 영상을 표시하는 것도 가능하고, 내비게이션 모드와 연동하여 지도 정도 및 길 안내 정보를 표시하는 것도 가능하다.The vehicle terminal 130 may display images in the front, rear, left, and right directions, and may display map accuracy and road guidance information in conjunction with a navigation mode.

이러한 차량용 단말기(130)는 대시 보드 상에 거치식으로 설치될 수도 있고 센터 페시아 상에 매립식으로 설치될 수도 있다.The vehicle terminal 130 may be mounted on the dashboard or mounted on the center fascia.

단말기(130)의 표시부는 수행 중인 기능에 대한 정보 및 사용자에 의해 입력된 정보를 표시하는 것도 가능하다.The display unit of the terminal 130 can also display information on a function being performed and information input by a user.

차량(1)은 센터페시아(124)에 마련되고 조작 위치를 입력받는 변속 레버(140)와, 변속 레버(140)의 주변 또는 헤드 유닛(125)에 위치하고 전자식 주차 브레이크 장치(미도시)의 동작 명령을 입력받는 주차 버튼(EPB 버튼)을 더 포함한다.The vehicle 1 is provided in the center fascia 124 and is operated in an electronic parking brake device (not shown), which is located in the periphery of the shift lever 140 or the head unit 125 and receives the operation position. It further includes a parking button (EPB button) for receiving a command.

또한, 차량(1)은 주행 방향을 조절하기 위한 조향 장치의 스티어링 휠(151)과, 사용자의 제동 의지에 따라 사용자에 의해 가압되는 브레이크 페달(152)과, 사용자의 가속 의지에 따라 사용자에 의해 가압되는 엑셀러레이터 페달(153)을 포함할 수 있다.In addition, the vehicle 1 is a steering wheel 151 of the steering device for adjusting the driving direction, a brake pedal 152 that is pressed by the user according to the user's braking will, and the user according to the user's willingness to accelerate. It may include a pressurized accelerator pedal (153).

특히, 실시 예에 따른 차량은 차량용 블랙박스(1000)를 포함할 수 있다. 차량용 블랙박스(1000)는 도 1에 도시된 바와 같이, 일반적으로 룸미러 뒤쪽(하단)에 장착되고, 블랙박스가 촬영하는 영상이 차량 정면의 정중앙이 촬영될 수 있도록 장착되는 것이 일반적이다.In particular, the vehicle according to the embodiment may include a vehicle black box 1000. As shown in FIG. 1, the vehicle black box 1000 is generally mounted at the rear (bottom) of a room mirror, and an image photographed by the black box is generally mounted so that the center of the front of the vehicle can be photographed.

도 2는 일 실시예에 따른 블랙박스에 장착된 카메라를 통하여 획득한 영상을 처리하는 영상 처리 장치(100)의 블록도인 것으로, 영상 처리 장치(100)는 영상을 촬영하는 영상 촬영 모듈(110)과 촬영된 영상에 대하여 예측 분석 및 이미지 압축 처리를 제어하는 영상 처리 모듈(120)을 포함한다. 2 is a block diagram of an image processing apparatus 100 that processes an image acquired through a camera mounted on a black box according to an embodiment, and the image processing apparatus 100 is an image photographing module 110 for photographing an image ) And an image processing module 120 that controls predictive analysis and image compression for the captured image.

이 때, 영상 처리 장치(100)가 도 1에 도시된 차량용 블랙박스(1000)가 이에 해당될 수 있다. 즉, 차량용 블랙박스(1000) 내부적으로 영상 촬영, 예측 분석 및 이미지 압축 처리를 통하여 영상을 저장할 수 있다.In this case, the image processing apparatus 100 may be the vehicle black box 1000 shown in FIG. 1. That is, the vehicle black box 1000 may internally store an image through image capturing, predictive analysis, and image compression processing.

또는, 영상 촬영 모듈(110)은 도 1에 도시된 차량용 블랙박스(1000)가 이에 해당되어 블랙박스에 포함된 카메라가 영상을 촬영하고, 차량용 블랙박스(1000)가 획득한 영상을 차량용 네트워크(NT)를 통하여 영상 처리 모듈(120)로 송신할 수 있다.Alternatively, the image capturing module 110 corresponds to the vehicle black box 1000 illustrated in FIG. 1, so that the camera included in the black box captures the image, and the vehicle black box 1000 acquires the image acquired by the vehicle network ( NT) to the image processing module 120.

이 때, 차량용 네트워크(NT)는 는 최대 24.5Mbps(Mega-bits per second)의 통신 속도를 갖는 모스트(MOST, Media Oriented Systems Transport), 최대 10Mbpas의 통신 속도를 갖는 플렉스레이(FlexRay), 125kbps(kilo-bits per second) 내지 1Mbps의 통신 속도를 갖는 캔(CAN, Controller Area Network), 20kbps의 통신 속도를 갖는 린(LIN, Local Interconnect Network) 등의 통신 규약을 채용할 수 있다. At this time, the vehicle network (NT) is a MOST (Media Oriented Systems Transport) with a communication speed of up to 24.5 Mbps (Mega-bits per second), FlexRay with a communication speed of up to 10 Mbpas, and 125 kbps ( Communication protocols such as kilo-bits per second (CAN) to 1Mbps communication speed (CAN, Controller Area Network), and 20kbps communication speed (LIN, Local Interconnect Network) may be employed.

이와 같은 차량 통신 네트워크(NT)는 모스트, 플레스레이, 캔, 린 등 단일의 통신 규약을 채용할 수 있을 뿐만 아니라, 복수의 통신 규약을 채용할 수도 있다.The vehicle communication network NT may employ not only a single communication protocol such as Most, Place, Can, and Lean, but also a plurality of communication protocols.

이하에서는, 실시 예에 따른 영상 처리 장치(100)에 있어서, 이를 구성하는 영상 촬영 모듈(110) 및 영상 처리 모듈(120)의 각 구성에 대하여 설명한다. Hereinafter, in the image processing apparatus 100 according to the embodiment, each configuration of the image photographing module 110 and the image processing module 120 constituting the same will be described.

먼저, 영상 촬영 모듈(110)은, 영상 촬영부(111) 및 제 1 통신부(112)를 포함할 수 있다.First, the image capturing module 110 may include an image capturing unit 111 and a first communication unit 112.

영상 촬영부(111)는 차량의 정면 중심을 기준으로 하여 도로의 영상을 획득하고, 촬영된 영상은 제1 통신부(112)를 통하여 유선 또는 무선으로 영상 처리 모듈(120)로 송신하는 것이 가능하다. The image capturing unit 111 acquires an image of the road based on the front center of the vehicle, and the captured image can be transmitted to the image processing module 120 through wired or wireless communication through the first communication unit 112. .

이 때, 영상 촬영부(111)는 카메라로, CCD 또는CMOS 이미지 센서를 포함할 수 있는 것으로, 차량 내부의 룸 미러 하단에 장착되는 것이 일반적이다. At this time, the image photographing unit 111 is a camera, which may include a CCD or CMOS image sensor, and is generally mounted at the bottom of a room mirror in a vehicle.

영상 촬영부(111)는 카메라의 장착 특성 상, 수평선이 화면 중심에 위치하는 구도를 갖는다. 즉, 도 3에 도시된 영상과 같이, 수평선이 화면 중심에 위치하여 영상을 상/하로 2분할 되는 것이 일반적이다.The image photographing unit 111 has a composition in which a horizontal line is positioned at the center of the screen due to the mounting characteristics of the camera. That is, as in the image shown in FIG. 3, the horizontal line is located at the center of the screen, so that the image is divided into two parts, top and bottom.

이에, 수평선과 수직선이 교차하는 점을 의미하는 소실점이 도 3에 도시된 바와 같이, 1개의 소실점(a)으로 나타나, 1점 소실점(a)을 구성하고, 1점 소실점(a)의 위치는 영상의 수평선과 수직선이 만나는 점으로, 카메라의 높이를 나타내는 수평선(HL)인 아이레벨에 위치한다. Accordingly, as shown in FIG. 3, the vanishing point, which means the point where the horizontal line and the vertical line cross, is represented by one vanishing point (a), constitutes one vanishing point (a), and the position of the one vanishing point (a) is This is the point where the horizontal and vertical lines of the image meet, and is located at the eye level, which is the horizontal line (HL) representing the height of the camera.

다음으로, 영상 처리 모듈(120)은 영상 촬영 모듈(110)에서 획득한 영상을 제 1 통신부(112)를 통하여 전달 받는 제 2 통신부(122), 전달받은 영상에 대하여 예측 분석 및 이미지 압축 처리를 진행하는 제어부(123), 및 처리된 영상을 저장하고, 예측 방법 및 압축 처리 방법이 저장되는 저장부(125)와 처리된 영상을 사용자에게 표시하는 표시부(124)를 포함한다. Next, the image processing module 120 performs predictive analysis and image compression processing on the second communication unit 122 receiving the image acquired by the image capturing module 110 through the first communication unit 112 and the received image. It includes an ongoing control unit 123, a storage unit 125 for storing the processed image, a prediction unit and a compression processing method, and a display unit 124 for displaying the processed image to the user.

이 때, 영상 촬영 모듈(110)의 제 1 통신부(112)와 영상 처리 모듈(120)의 제 2 통신부(122)는 차량용 네트워크(NT)를 통하여 촬영한 영상을 전달하고, 전달받을 수 있다. At this time, the first communication unit 112 of the image capturing module 110 and the second communication unit 122 of the image processing module 120 may transmit and receive the image captured through the vehicle network NT.

표시부(124)는 도 1에 도시된 단말기가 이에 해당할 수 있다. 단말기(130)는 입력부(127)와 표시부(124)를 포함할 수 있다. 이러한 단말기(130)의 입력부는 터치패널일 수 있고, 표시부는 디스플레이 패널일 수 있다.The display unit 124 may correspond to the terminal illustrated in FIG. 1. The terminal 130 may include an input unit 127 and a display unit 124. The input unit of the terminal 130 may be a touch panel, and the display unit may be a display panel.

단말기(130)는 터치 패널과 디스플레이 패널이 일체화된 터치 스크린으로 마련될 수 있다.The terminal 130 may be provided as a touch screen in which a touch panel and a display panel are integrated.

아울러 단말기(130)는 표시부(124)인 디스플레이 패널만을 포함하는 것도 가능하고, 이때 차량의 센터페시아에 마련된 입력부(127)를 통해 동작 정보 및 동작 명령을 입력받는 것도 가능하다. In addition, the terminal 130 may include only a display panel that is the display unit 124, and it is also possible to receive operation information and operation commands through the input unit 127 provided in the center fascia of the vehicle.

또한, 표시부(124)는 영상 촬영 모듈(110)에서 촬영된 영상의 예측 및 압축 처리 이후의 영상을 표시하는 것도 가능하다. In addition, the display unit 124 may display an image after prediction and compression processing of the image captured by the image capturing module 110.

다음으로, 저장부(125)는 영상 처리를 위한 예측 처리 방법 및 압축 처리 방법에 관한 정보를 저장하고, 영상 촬영 모듈(112)로부터 획득한 촬영된 영상 정보를 휘발성 메모리에 저장하거나, 제어부(123)를 거쳐 처리된 영상 정보를 저장하는 것 역시 가능하다.Next, the storage unit 125 stores information on a prediction processing method and a compression processing method for image processing, and stores the captured image information obtained from the image capture module 112 in a volatile memory, or the control unit 123 ), it is also possible to store the processed image information.

따라서, 저장부(125)는 시간에 따라 촬영된 영상을 순차적으로 저장할 수 있다. Accordingly, the storage unit 125 may sequentially store images photographed over time.

즉, 이러한 저장부(125)는 캐쉬, ROM(Read Only Memory), PROM(Programmable ROM), EPROM(Erasable Programmable ROM), EEPROM(Electrically Erasable Programmable ROM) 및 플래쉬 메모리(Flash memory)와 같은 비휘발성 메모리 소자 또는 RAM(Random Access Memory)과 같은 휘발성 메모리 소자 또는 하드디스크 드라이브(HDD, Hard Disk Drive), CD-ROM과 같은 저장 매체 중 적어도 하나로 구현될 수 있으나 이에 한정되지는 않는다. 저장부는 제어부와 관련하여 전술한 프로세서와 별개의 칩으로 구현된 메모리일 수 있고, 프로세서와 단일 칩으로 구현될 수도 있다. That is, the storage unit 125 is a non-volatile memory such as cache, read only memory (ROM), programmable ROM (PROM), erasable programmable ROM (EPROM), electrically erasable programmable ROM (EPMROM), and flash memory The device may be implemented as at least one of a volatile memory device such as a random access memory (RAM) or a storage medium such as a hard disk drive (HDD) or CD-ROM, but is not limited thereto. The storage unit may be a memory implemented in a separate chip from the processor described above in relation to the control unit, or may be implemented in a single chip from the processor.

마지막으로, 영상 처리 모듈(125)을 구성하는 제어부(123)에 관하여 설명한다. 제어부(123)는 영상 처리 모듈(120)의 동작에 관하여 총괄적으로 제어한다. 이러한 제어부(123)는 저장부(125)와 하나의 칩으로 구성되거나 또는 별개의 칩으로 구성된 메모리로 동작되는 것이 가능하다. Finally, the control unit 123 constituting the image processing module 125 will be described. The control unit 123 controls overall the operation of the image processing module 120. The control unit 123 may be formed of a single chip and a storage unit 125, or may be operated as a memory composed of separate chips.

제어부(123)는 영상 촬영 모듈(110)로부터 획득한 정지 영상에 대하여 1점 소실점을 기준으로 4개의 영역으로 정지 영상 화면을 분할한다. 구체적으로, 제어부(123)는 도 3에 도시된 바와 같이, 수평선(HL)을 기준으로 상/하 2분할을 수행하고, 수직선(VL)을 기준으로 좌/우 2분할을 수행한다. The control unit 123 divides the still image screen into four regions based on the one-point vanishing point with respect to the still image obtained from the image capturing module 110. Specifically, as illustrated in FIG. 3, the control unit 123 performs the upper/lower 2 division based on the horizontal line HL and the left/right 2 division based on the vertical line VL.

따라서, 제어부(123)는 정지 영상 화면에 대하여 ①의 좌측 상단 영역, ②우측 상돤 영역, ③ 좌측 하단 영역 및 ④우측 하단 영역을 구분하고, 각 구분된 네개의 영역에 대하여 화면 압축 연산을 수행한다.Accordingly, the control unit 123 distinguishes the upper left area of ①, the upper right area of ③, the lower left area, and the lower right area of ④ on the still image screen, and performs screen compression operation on each of the four divided areas. .

다만, 제어부(123)는 압축 연산을 수행하기 이전에, 정지 영상 화면에 포함된 물체의 형상에 대한 예측 분석을 수행한다. However, before performing the compression operation, the controller 123 performs predictive analysis on the shape of the object included in the still image screen.

구체적으로, 예측 수행 방식은 화면 내에서 수평 방향의 픽셀과 수직 방향의 픽셀을 참조 픽셀로 하여 방향에 따라 각 픽셀 값을 예측하는 방식을 의미한다. 구체적으로, 도 4는 예측 수행 방식을 설명하기 위한 예시도이다. Specifically, the prediction execution method refers to a method of predicting each pixel value according to a direction using horizontal pixels and vertical pixels as reference pixels in a screen. Specifically, FIG. 4 is an exemplary diagram for explaining a prediction performance method.

도 4에 도시된 바와 같이, 수평 방향의 픽셀에 대한 참조 픽셀을 Q 내지 H 픽셀값을 가지는 것으로 표기하였고, 수직 방향의 픽셀에 대한 참조 픽셀을 Q 내지 L 픽셀값을 가지는 것으로 표기하였다. As illustrated in FIG. 4, reference pixels for pixels in the horizontal direction are denoted as having Q to H pixel values, and reference pixels for pixels in the vertical direction are denoted as having Q to L pixel values.

이 때, 도 4의 (a)의 경우 수평 하향 예측 시에 각 블록 별 예측 픽셀값을 계산하는 방법에 대한 예시 계산법를 병기하였으며, 도4의 (b)의 경우 역시 수평 상향 예측 시에 각 블록 별 예측 픽셀값을 계산하는 방법에 대한 예시 계산법를 병기하였다.At this time, in case of (a) of FIG. 4, an example calculation method for calculating a predicted pixel value for each block in horizontal downward prediction is also described, and in case of (b) in FIG. An example calculation method for calculating a predicted pixel value is described.

일 예로, 수직 방향의 픽셀과 현재 연산하고자 하는 영역이 동일한 경우라면, 제어부(123)는 수평 방향을 예측 모드로 연산 시 효율성을 높일 수 있다. 즉, 제어부(123)는 수직 방향의 픽셀과 현재 연산하고자 하는 영역이 일치하면, 도 4의 (a) 수평 하향 예측 또는 도4의 (b)와 같이 수평 상향 예측 분석을 수행할 수 있다. For example, if the vertical pixel and the area to be currently calculated are the same, the controller 123 may increase efficiency when calculating the horizontal direction in the prediction mode. That is, the controller 123 may perform horizontal up-prediction analysis as shown in FIG. 4(a) horizontal down prediction or FIG. 4(b) when the vertical pixel and the current region to be calculated match.

예를 들어, 도 4의 (a)와 (b)는 대각선 방향의 물체가 정지 화면 영상에 포함된 경우로서, 예측 방향이 각각 수평 하향의 대각선 방향인 경우와 수평 상향의 대각선 방향인 것을 나타낸 것이다. For example, FIGS. 4(a) and 4(b) show that a diagonal direction object is included in a still image, and the prediction direction is a horizontal downward diagonal direction and a horizontal upward diagonal direction, respectively. .

따라서, 제어부(123)는 도 4의 (c)에 도시된 일 실시예에 따른 미리 설정된 픽셀값 예측값에 기초하여 각 픽셀 값을 예측함에 따라, 화질 유지, 압축률은 증가시키면서 연산 효율성을 극대화하는 것이 가능하다. Accordingly, as the controller 123 predicts each pixel value based on a preset pixel value prediction value according to an embodiment illustrated in FIG. 4C, it is possible to maximize the computational efficiency while maintaining the image quality and increasing the compression rate. It is possible.

뿐만 아니라, 제어부(123)는 분할된 정지 영상 화면에 포함된 네 영역에 대하여 각 분할 영역이 대각선 방향으로 유사한 화소 분포를 가지는 경향성을 이용하여 예측 모드의 정확도를 향상시킨다. In addition, the controller 123 improves the accuracy of the prediction mode by using the tendency that each divided region has a similar pixel distribution in the diagonal direction with respect to the four regions included in the divided still image screen.

일 예로, 도 3의 ④영역에 대하여 도로 형상, 차선 형상 및 차량 형상을 기초할 때, 우측 하단 방향으로 유사한 화소가 분포하는 것을 확인할 수 있으며, 도 3의 ③ 영역 역시, 좌측 하단 방향으로 유사한 화소가 분포하는 것을 확인할 수 있다. For example, when the road shape, the lane shape, and the vehicle shape are based on the area ④ of FIG. 3, it can be seen that similar pixels are distributed in the lower right direction, and the area ③ in FIG. 3 is also similar in the lower left direction You can see that is distributed.

이에, 제어부(123)는 분할된 영역 별로 유사한 방향성의 화소 분포를 가짐을 이용하여 예측 모드의 정확도를 향상시킬 수 있다.Accordingly, the controller 123 may improve the accuracy of the prediction mode by using a pixel distribution of similar directionality for each divided region.

즉, 제어부(123)는 분할된 영역 별로 유사한 방향성의 화소 분포를 가져 예측 모드의 정확도를 향상시키기 위하여, 도 5의 예측 방식을 적용한다. 구체적으로, 도 5는 실시 예에 따른 영상의 화면 내 예측 방법을 설명하기 위한 예시도인 것으로, 정지 영상 화면을 1점 소실점(a)를 기준으로 전체 화면을 대각선으로 분할하였다. That is, the controller 123 applies the prediction method of FIG. 5 to improve the accuracy of the prediction mode by having a pixel distribution of similar directionality for each divided region. Specifically, FIG. 5 is an exemplary diagram for explaining an intra-screen prediction method of an image according to an embodiment, and the entire image is diagonally divided based on the one-point vanishing point (a).

따라서, 제어부(123)는 구분된 영역별로 유사한 화소 분포의 방향성을 이용한 대각선 분할 방식을 적용하여 화면 내 예측 모드의 정확도를 향상시킨다. 구체적으로, 도 5의 예측 모드는 1점 소실점(a)에서 시작하여 화면의 좌측 수직 방향으로 일정하게 구분되도록 각각의 방향성을 가지는 모드 2 내지 모드 18 및 1점 소실점(a)에서 화면의 상단 수평 방향으로 일정하게 구분되도록 각각의 방향성을 가지는 모드 18 내지 모드 34를 포함하며, 도시되지는 않았으나, 각 모드의 화살표는 예측에 사용되는 화소값의 위치를 의미한다. Accordingly, the control unit 123 applies a diagonal division method using the direction of similar pixel distribution for each divided area to improve the accuracy of the intra prediction mode. Specifically, the prediction mode of FIG. 5 starts at 1 point vanishing point (a) and has two directions so as to be uniformly divided in the vertical direction to the left of the screen. It includes modes 18 to 34 having respective directionality so as to be uniformly divided in directions, and although not shown, arrows of each mode indicate the position of pixel values used for prediction.

또한, 도시되지는 않았으나, 대각선의 방향성 이외의 추가적인 모드가 더 포함될 수도 있다. 일 예로, 제어부(123)는 모드 2 내지 모드 34 이외에DC(Direct-Currnet) 모드를 더 포함하건, 플래인(Plane) 모드를 더 포함할 수 있다. In addition, although not shown, additional modes other than diagonal directionality may be further included. For example, the control unit 123 may further include a Direct-Currnet (DC) mode in addition to the Mode 2 to Mode 34, or a Plane mode.

예를 들어, ①의 좌측 상단 영역의 경우, 좌측 상단 대각선 방향으로 유사한 화소가 분포되므로, 도 5에서 모드 10 내지 모드 26번을 적용 선택함에 따라, 연산량을 절반으로 감소시킬 수 있다.For example, in the case of the upper left area of ①, since similar pixels are distributed in the diagonal direction of the upper left, as shown in FIG. 5 by applying mode 10 to mode 26, the computation amount can be reduced in half.

또한, 예를 들어, ②우측 상단 영역의 경우, 모드2에서 10 및 모드 26에서 모드 34을 적용선택함에 따라, 역시 연산량을 절반으로 감소시킬 수 있다.In addition, for example, in the upper right area of ②, by selecting mode 2 in mode 10 and mode 26 in mode 26, it is also possible to reduce the computation amount in half.

또한, 예를 들어, ③ 좌측 하단 영역의 경우, 좌측 하단 대각선 방향으로 유사한 화소가 분포되므로, 도 5에서 모드 2 내지 모드 10 및 모드 26 내지 모드 34를 적용 선택함에 따라, 역시 연산량을 절반으로 감소시킬 수 있다.Also, for example, in the case of the lower left area, since similar pixels are distributed in the diagonal direction of the lower left, according to the selection of mode 2 to mode 10 and mode 26 to mode 34 in FIG. 5, the computation amount is also reduced by half. I can do it.

또한, 예를 들어, ④우측 하단 영역의 경우, 우측 하단 대각선 방향으로 유사한 화소가 분포되므로, 모드 10 내지 모드 26 을 적용 선택하여 연산량을 절반으로 감소시킬 수 있다.In addition, for example, in the case of the lower right area, since similar pixels are distributed in the diagonal direction of the lower right, it is possible to reduce the computation amount in half by selecting the mode 10 to mode 26.

따라서, 제어부(123)는 각 영역 별로 연산량을 절반으로 감소시킨 화면 내 예측 방법을 적용함에 따라, 전체 정지 영상 화면에 대하여 연산량을 1/16로 감소시킬 수 있다.Accordingly, the control unit 123 may reduce the calculation amount to 1/16 for the entire still image screen by applying an in-screen prediction method in which the calculation amount is reduced in half for each region.

제어부(123)가 도 4 및 도 5를 기초로 정지 영상 화면에 대한 연산량을 감소시키는 방법에 대한 순서도를 도 6에서 설명한다. 즉, 도 6은 영상의 화면 내 예측 방법을 설명하는 순서도인 것으로, 화면 내 화소 분포 특성을 활용하여 예측 모드의 개수를 감소시킴에 따라 연산량을 줄이고자함에 있다.A flowchart of a method for the control unit 123 to reduce the calculation amount for the still image screen based on FIGS. 4 and 5 will be described in FIG. 6. That is, FIG. 6 is a flowchart illustrating an intra-screen prediction method of an image, and is intended to reduce a computation amount by reducing the number of prediction modes by utilizing the intra-pixel distribution characteristics.

먼저, 영상 처리 장치(100)는 영상을 획득한다(600). 즉, 영상 처리 장치(100)는 영상 촬영 모듈(110)이 촬영한 영상을 전달 받은 영상 처리 모듈(125) 내 제어부(123)가 영상을 획득한다. 이후, 제어부(123)는 획득한 정지 영상 화면을 4개의 영역으로 분할한다(610). 구체적으로, 4개의 영역은 도 3에서 설명된 ①의 좌측 상단 영역, ②우측 상돤 영역, ③ 좌측 하단 영역 및 ④우측 하단 영역으로 1점 소실점(a)을 중심으로 수평선(HL)과 수직선(VL)을 기준으로 분할이 가능하다. First, the image processing apparatus 100 acquires an image (600). That is, in the image processing apparatus 100, the control unit 123 in the image processing module 125 receiving the image captured by the image capturing module 110 acquires an image. Thereafter, the controller 123 divides the obtained still image screen into four regions (610). Specifically, the four areas are the upper left area, the upper right area, the lower left area, and the lower right area of ① as illustrated in FIG. 3, and the horizontal line (HL) and the vertical line (VL) are centered around the vanishing point (a). ).

이후, 제어부(123)는 화면 예측을 위하여 4개의 영역 각각에 대하여 화면 예측을 위한 블록 분할을 수행한다(620). 즉, 도 4에 도시된 바와 같이, 각 영역에 대하여, 영상 화면의 블록의 크기가 4*4 픽셀인지 여부를 결정하는 것으로, 일 예로 전체 화면에 대한 영상 화면의 블록의 크기가 8*8 픽셀로 구성될 수 있으나 반드시 그런 것은 아니다. Thereafter, the controller 123 performs block division for screen prediction for each of the four regions for screen prediction (operation 620). That is, as illustrated in FIG. 4, for each region, it is determined whether the size of the block of the video screen is 4*4 pixels, for example, the size of the block of the video screen for the entire screen is 8*8 pixels It may consist of, but not necessarily.

이후, 제어부(123)는 수평 방향에 대한 참조 픽셀과 수직 방향에 대한 참조 픽셀을 획득하여, 각 블록별 화면 내 픽셀값을 예측한다(630 및 640). 즉, 제어부(123)는 도 5에서 설명된 바와 같이, ①의 좌측 상단 영역의 경우, 도 5에서 모드 10 내지 모드 26번을 적용 선택하여 예측 수행을 하고, ②우측 상단 영역의 경우, 모드 2에서10 및 모드 26에서 모드 34을 적용 선택하여 예측 수행을 하고, ③ 좌측 하단 영역의 경우, 좌측 하단 대각선 방향으로 모드 2 내지 모드 10 및 모드 26 내지 모드 34를 적용 선택함에 따라 예측 수행을 하고, ④우측 하단 영역의 경우, 모드10 내지 모드 26을 적용 선택하여 예측 수행을 적용한다(640). Thereafter, the control unit 123 acquires a reference pixel for a horizontal direction and a reference pixel for a vertical direction, and predicts pixel values in a screen for each block (630 and 640). That is, as described in FIG. 5, the controller 123 performs prediction by selecting mode 10 to mode 26 in FIG. 5 in the case of the upper left area of ①, and ② in the case of the upper right area of ② In 10 and Mode 26, mode 34 is applied to perform prediction, and in the case of the lower left area, prediction is performed by selecting Mode 2 to Mode 10 and Mode 26 to Mode 34 in the diagonal direction of the lower left, ④ In the case of the lower right area, mode 10 to mode 26 are selected and prediction prediction is applied (640).

이후, 제어부(123)는 각 모드를 적용하여 산출된 비용을 계산하여 최소가 되는 모드를 최종 모드로 선택하고(650), 선택된 모드가 최소 비용보다 적으면(660의 예), 해당 최종 모드를 현재 모드로 저장하여, 다음 블록에 대하여 예측 수행을 수행한다. Thereafter, the controller 123 calculates the cost calculated by applying each mode, selects the mode that becomes the minimum as the final mode (650), and if the selected mode is less than the minimum cost (example of 660), selects the corresponding final mode By storing in the current mode, prediction is performed on the next block.

다만, 최종 모드로 선택된 모드가 최소 비용보다 크게 되면(660의 아니오), 선택된 모드가 아닌 전체 모드에 대하여 예측 수행을 수행한다(690). However, if the mode selected as the final mode is greater than the minimum cost (No in 660), prediction is performed on all modes, not the selected mode (690).

따라서, 전체 모드에 대하여 예측 수행을 하는 바, 모든 모드에 대해 예측 수행이 완료될 때까지(700), 제어부는 예측 수행을 하여(690의 아니오 및 700), 전체 모드에 대한 예측 수행이 완료되면(690의 예), 다음 블록에 대한 예측 수행으로 넘어간다(680). Therefore, since prediction is performed on all modes, until prediction is completed for all modes (700), the controller performs prediction (Nos and 700 of 690), and when prediction is performed for all modes is completed. (Example 690), the process proceeds to prediction for the next block (680).

즉, 제어부(123)는 모든 블록에 대하여 예측 수행이 완료되면(710의 예), 전체 화면에 대한 예측 수행이 완료된 것으로, 각 영역에 대해 절반으로 감소된 예측 모드를 적용함에 따라 연산량을 줄일 수 있다.That is, when the prediction execution is completed for all blocks (YES in 710), the control unit 123 reduces the computation amount by applying a prediction mode reduced in half for each region. have.

이상에서와 같이 첨부된 도면을 참조하여 개시된 실시예들을 설명하였다.본 발명이 속하는 기술분야에서 통상의 지식을 가진 자는 본 발명의 기술적 사상이나 필수적인 특징을 변경하지 않고도, 개시된 실시 예들과 다른 형태로 본 발명이 실시될 수 있음을 이해할 것이다. 개시된 실시 예들은 예시적인 것이며, 한정적으로 해석되어서는 안 된다.The disclosed embodiments have been described with reference to the accompanying drawings as described above. Those of ordinary skill in the art to which the present invention pertains may have different forms from the disclosed embodiments without changing the technical spirit or essential features of the present invention. It will be understood that the invention can be practiced. The disclosed embodiments are illustrative and should not be construed as limiting.

1: 차량 321: 거리 검출부
322: 영상 획득부310: 위치 수신부
310: 위치 수신부 `
1: Vehicle 321: Distance detection unit
322: image acquisition unit 310: location receiving unit
310: location receiving unit `

Claims (15)

차량의 주변 영상을 촬영하는 영상 촬영 모듈;
상기 영상 촬영 모듈로부터 촬영된 주변 영상을 획득하는 영상 처리 모듈;을 포함하고,
상기 영상 처리 모듈은,
전체 화면에 대하여 방향성을 가지는 복수개의 예측 모드가 저장된 저장부; 및
획득된 주변 영상의 화면을 적어도 하나의 분할 화면으로 분할하고, 상기 분 화면의 방향성에 기초하여 상기 복수개의 예측 모드 중 일부만을 적용하여 예측 픽셀값을 결정하여 화면 내 예측 처리를 수행하는 제어부;를 포함하는 영상 처리 장치.
An image photographing module for photographing surrounding images of the vehicle;
Includes; image processing module for acquiring the surrounding image taken from the image taking module;
The image processing module,
A storage unit in which a plurality of prediction modes having directionality with respect to the entire screen are stored; And
A control unit for dividing the acquired screen of the surrounding image into at least one split screen and determining a predicted pixel value by applying only a part of the plurality of prediction modes based on the direction of the split screen to perform intra prediction processing; An image processing device comprising.
제 1항에 있어서,
상기 제어부는,
상기 획득된 주변 영상의 화면을 수평선과 수직선의 교점인 1점 소실점을 기준으로 네 개의 분할 화면으로 분할하는 영상 처리 장치.
According to claim 1,
The control unit,
An image processing apparatus for dividing the screen of the acquired surrounding image into four divided screens based on a 1-point vanishing point that is an intersection of a horizontal line and a vertical line.
제 2항에 있어서,
상기 제어부는,
상기 네 개의 분할 화면은 좌측 상단의 제 1 분할 화면, 우측 상단의 제 2 분할 화면, 좌측 하단의 제 3 분할 화면, 우측 하단의 제 4 분할 화면을 포함하는 영상 처리 장치.
According to claim 2,
The control unit,
The four divided screens include a first split screen in the upper left, a second split screen in the upper right, a third split screen in the lower left, and a fourth split screen in the lower right.
제 3 항에 있어서,
상기 제어부는,
상기 분할 화면의 방향성에 기초하여 상기 복수개의 예측 모드 중 절반의 예측 모드를 적용하여 예측 픽셀값을 결정하는 영상 처리 장치.
The method of claim 3,
The control unit,
An image processing apparatus that determines a predicted pixel value by applying half a prediction mode among the plurality of prediction modes based on the direction of the split screen.
제 3 항에 있어서,
상기 제어부는,
상기 제 1 분할 화면의 경우, 좌측 상단 대각선 방향의 예측 모드를 적용하고,
상기 제 2 분할 화면의 경우, 우측 상단 대각선 방향의 예측 모드를 적용하고,
상기 제 3 분할 화면의 경우, 좌측 하단 대각선 방향의 예측 모드를 적용하고,
상기 제 4 분할 화면의 경우, 우측 하단 대각선 방향의 예측 모드를 적용하는 영상 처리 장치.
The method of claim 3,
The control unit,
For the first split screen, a prediction mode in the upper left diagonal direction is applied,
In the case of the second split screen, a prediction mode in the upper right diagonal direction is applied,
In the case of the third divided screen, a prediction mode in the lower left diagonal direction is applied,
In the case of the fourth divided screen, an image processing apparatus that applies a prediction mode in a lower right diagonal direction.
제 4 항에 있어서,
상기 제어부는,
상기 분할 화면의 방향성에 기초하여 상기 절반의 예측 모드 각각에 대한 비용을 산출하고, 산출된 비용 중 최소 비용인 예측 모드를 최종 모드로 결정하는 영상 처리 장치.
The method of claim 4,
The control unit,
An image processing apparatus that calculates a cost for each of the half prediction modes based on the directionality of the split screen, and determines a prediction mode that is a minimum cost among the calculated costs as a final mode.
제 6 항에 있어서,
상기 제어부는,
상기 최종 모드의 비용이 미리 설정한 임계 비용보다 크면 상기 절반의 예측 모드가 아닌 상기 복수개의 예측 모드를 모두 적용하여 예측 픽셀값을 결정하는 영상 처리 장치.
The method of claim 6,
The control unit,
When the cost of the final mode is greater than a preset threshold cost, the image processing apparatus determines a predicted pixel value by applying all of the plurality of prediction modes rather than the half prediction mode.
제 1항 내지 제 7항에 있어서,
상기 영상 처리 장치를 포함하는 차량.
According to claim 1 to 7,
A vehicle including the image processing device.
차량의 주변 영상을 촬영하는 영상 촬영 모듈과, 상기 영상 촬영 모듈로부터 촬영된 주변 영상을 획득하고, 전체 화면에 대하여 방향성을 가지는 복수개의 예측 모드가 저장된 영상 처리 모듈을 포함하는 영상 처리 장치를 포함하는 차량 제어 방법에 있어서,
획득된 주변 영상의 화면을 적어도 하나의 분할 화면으로 분할하고;
상기 분할 화면의 방향성에 기초하여 상기 복수개의 예측 모드 중 일부만을 적용하여 예측 픽셀값을 결정하여 화면 내 예측 처리를 수행하는 차량 제어 방법.
An image processing apparatus including an image processing module that captures a surrounding image of a vehicle, and an image processing module that acquires surrounding images captured from the image capturing module and stores a plurality of prediction modes having directionality with respect to the entire screen. In the vehicle control method,
Dividing the screen of the acquired surrounding image into at least one split screen;
A vehicle control method that performs prediction processing within a screen by determining a prediction pixel value by applying only a part of the plurality of prediction modes based on the direction of the split screen.
제 9항에 있어서,
상기 획득된 주변 영상의 화면을 적어도 하나의 분할 화면으로 분할하는 것은,
상기 획득된 주변 영상의 화면을 수평선과 수직선의 교점인 1점 소실점을 기준으로 네 개의 분할 화면으로 분할하는 것을 포함하는 차량 제어 방법.
The method of claim 9,
Dividing the screen of the acquired surrounding image into at least one split screen,
And dividing the screen of the acquired surrounding image into four divided screens based on a vanishing point of one point that is an intersection of a horizontal line and a vertical line.
제 10항에 있어서,
상기 획득된 주변 영상의 화면을 수평선과 수직선의 교점인 1점 소실점을 기준으로 네 개의 분할 화면으로 분할하는 것은,
상기 네 개의 분할 화면은 좌측 상단의 제 1 분할 화면, 우측 상단의 제 2 분할 화면, 좌측 하단의 제 3 분할 화면, 우측 하단의 제 4 분할 화면을 포함하여 분할하는 차량 제어 방법.
The method of claim 10,
Dividing the screen of the acquired surrounding image into four divided screens based on a vanishing point of one point that is an intersection of a horizontal line and a vertical line,
The four divided screens include a first split screen on the upper left, a second split screen on the upper right, a third split screen on the lower left, and a fourth split screen on the lower right.
제 11 항에 있어서,
상기 분할 화면의 방향성에 기초하여 상기 복수개의 예측 모드 중 일부만을 적용하여 예측 픽셀값을 결정하여 화면 내 예측 처리를 수행하는 것은,
상기 분할 화면의 방향성에 기초하여 상기 복수개의 예측 모드 중 절반의 예측 모드를 적용하여 예측 픽셀값을 결정하는 것을 포함하는 차량 제어 방법.
The method of claim 11,
Based on the directionality of the split screen, applying only a part of the plurality of prediction modes to determine a predicted pixel value and performing intra prediction processing,
And determining a prediction pixel value by applying a prediction mode of half of the plurality of prediction modes based on the directionality of the split screen.
제 12 항에 있어서,
상기 분할 화면의 방향성에 기초하여 상기 복수개의 예측 모드 중 절반의 예측 모드를 적용하여 예측 픽셀값을 결정하는 것은,
상기 제 1 분할 화면의 경우, 좌측 상단 대각선 방향의 예측 모드를 적용하고,
상기 제 2 분할 화면의 경우, 우측 상단 대각선 방향의 예측 모드를 적용하고,
상기 제 3 분할 화면의 경우, 좌측 하단 대각선 방향의 예측 모드를 적용하고,
상기 제 4 분할 화면의 경우, 우측 하단 대각선 방향의 예측 모드를 적용하는 것을 포함하는 차량 제어 방법.
The method of claim 12,
Determining a predicted pixel value by applying half a prediction mode among the plurality of prediction modes based on the directionality of the split screen,
For the first split screen, a prediction mode in the upper left diagonal direction is applied,
In the case of the second split screen, a prediction mode in the upper right diagonal direction is applied,
In the case of the third divided screen, a prediction mode in the lower left diagonal direction is applied,
In the case of the fourth divided screen, a vehicle control method comprising applying a prediction mode in a lower right diagonal direction.
제 13 항에 있어서,
상기 분할 화면의 방향성에 기초하여 상기 절반의 예측 모드 각각에 대한 비용을 산출하고, 산출된 비용 중 최소 비용인 예측 모드를 최종 모드로 결정하는 것을 더 포함하는 차량 제어 방법.
The method of claim 13,
And calculating a cost for each of the half prediction modes based on the directionality of the split screen, and determining a prediction mode that is a minimum cost among the calculated costs as a final mode.
제 14 항에 있어서,
상기 최종 모드의 비용이 미리 설정한 임계 비용보다 크면 상기 절반의 예측 모드가 아닌 상기 복수개의 예측 모드를 모두 적용하여 예측 픽셀값을 결정하는 것을 더 포함하는 차량 제어 방법.
The method of claim 14,
And when the cost of the final mode is greater than a preset threshold cost, determining a predicted pixel value by applying all of the plurality of prediction modes rather than the half prediction mode.
KR1020180150273A 2018-11-29 2018-11-29 Vehicle image management device, vehicle including thereof and controlling method KR20200064295A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020180150273A KR20200064295A (en) 2018-11-29 2018-11-29 Vehicle image management device, vehicle including thereof and controlling method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020180150273A KR20200064295A (en) 2018-11-29 2018-11-29 Vehicle image management device, vehicle including thereof and controlling method

Publications (1)

Publication Number Publication Date
KR20200064295A true KR20200064295A (en) 2020-06-08

Family

ID=71089896

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020180150273A KR20200064295A (en) 2018-11-29 2018-11-29 Vehicle image management device, vehicle including thereof and controlling method

Country Status (1)

Country Link
KR (1) KR20200064295A (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20220039268A (en) 2020-09-22 2022-03-29 현대모비스 주식회사 Image processing apparatus and method for vehicle camera

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20220039268A (en) 2020-09-22 2022-03-29 현대모비스 주식회사 Image processing apparatus and method for vehicle camera

Similar Documents

Publication Publication Date Title
US10202076B2 (en) Under vehicle image provision apparatus and vehicle including the same
US10363872B2 (en) Periphery monitoring device
US9902323B2 (en) Periphery surveillance apparatus and program
US9308917B2 (en) Driver assistance apparatus capable of performing distance detection and vehicle including the same
KR102005944B1 (en) Parking Assist System and Method thereof
US20190315275A1 (en) Display device and operating method thereof
KR101565007B1 (en) Driver assistance apparatus and Vehicle including the same
EP2759999A1 (en) Apparatus for monitoring surroundings of vehicle
US20110006917A1 (en) Parking aid system
JP5112131B2 (en) Vehicle abnormality detection device
US9683861B2 (en) Estimated route presentation apparatus and estimated route presentation method
US10885841B2 (en) Display apparatus for vehicle
US8233054B2 (en) Scenery imaging apparatus, scenery imaging method, scenery imaging program, and computer-readable recording medium
JP2020519037A (en) Method and system for orienting a bar channel camera when turning a vehicle
KR102531313B1 (en) Display device and Vehicle having the same and method for controlling the same
US20190222820A1 (en) Vehicle display device
KR20200064295A (en) Vehicle image management device, vehicle including thereof and controlling method
US20220408062A1 (en) Display control apparatus, display control method, and program
US11023750B2 (en) Video output system
CN115131749A (en) Image processing apparatus, image processing method, and computer-readable storage medium
JP2021196826A (en) Safety support system and onboard camera image analysis method
US20240038132A1 (en) Controlling vehicle display for enhancement
KR20190123357A (en) Vehicle and controlling method thereof
KR20240015841A (en) Vehicle and method for controlling the same
US20220262297A1 (en) Peripheral image display device

Legal Events

Date Code Title Description
A201 Request for examination