KR20220150111A - Camera apparatus for vehicle - Google Patents

Camera apparatus for vehicle Download PDF

Info

Publication number
KR20220150111A
KR20220150111A KR1020210057428A KR20210057428A KR20220150111A KR 20220150111 A KR20220150111 A KR 20220150111A KR 1020210057428 A KR1020210057428 A KR 1020210057428A KR 20210057428 A KR20210057428 A KR 20210057428A KR 20220150111 A KR20220150111 A KR 20220150111A
Authority
KR
South Korea
Prior art keywords
camera
vehicle
image
interest
region
Prior art date
Application number
KR1020210057428A
Other languages
Korean (ko)
Other versions
KR102538907B1 (en
Inventor
박영서
송인택
전희성
Original Assignee
삼성전기주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전기주식회사 filed Critical 삼성전기주식회사
Priority to KR1020210057428A priority Critical patent/KR102538907B1/en
Publication of KR20220150111A publication Critical patent/KR20220150111A/en
Application granted granted Critical
Publication of KR102538907B1 publication Critical patent/KR102538907B1/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633—Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
    • H04N23/635—Region indicators; Field of view indicators
    • H04N5/232945—
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/02—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/10—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to vehicle motion
    • B60W40/105—Speed
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/57—Mechanical or electrical details of cameras or camera modules specially adapted for being embedded in other devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/695—Control of camera direction for changing a field of view, e.g. pan, tilt or based on tracking of objects
    • H04N5/2257—
    • H04N5/23299—
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2420/00—Indexing codes relating to the type of sensors based on the principle of their operation
    • B60W2420/40—Photo, light or radio wave sensitive means, e.g. infrared sensors
    • B60W2420/403—Image sensing, e.g. optical camera
    • B60W2420/42—
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2520/00—Input parameters relating to overall vehicle dynamics
    • B60W2520/06—Direction of travel
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2520/00—Input parameters relating to overall vehicle dynamics
    • B60W2520/10—Longitudinal speed

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)
  • Mathematical Physics (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Studio Devices (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

A camera apparatus for a vehicle according to one embodiment of the present invention includes: a camera lens unit for receiving an image; a camera sensor unit for sensing an image incoming through the camera lens unit to provide an image signal; a signal processing unit for cropping an image in a preset region of interest from the entire image input from the camera sensor unit to output an ROI image signal; and a controller for setting a region of interest of the camera sensor unit based on vehicle driving speed information and vehicle driving direction information, controlling image cropping of the region of interest by the signal processing unit, and adjusting the direction and angle of view of the camera. According to the present invention, the region of interest (ROI) of the image sensor unit can be appropriately adjusted to adequately view or detect the vehicle's forward direction and adapt to changes in the vehicle's speed.

Description

차량의 카메라 장치{CAMERA APPARATUS FOR VEHICLE}Vehicle camera device {CAMERA APPARATUS FOR VEHICLE}

본 발명은 차량의 카메라 장치에 관한 것이다.The present invention relates to a camera device for a vehicle.

최근 들어, 차량에는, 넓은 영역 및 먼 곳을 보기 위해, 전방용 카메라가 2개 이상 장착되는 경우가 많아지고 있다. 예를 들어, 2개 혹은 3개의 카메라를 사용하여 단거리, 중거리, 원거리를 보거나 감지할 수 있다. 여기에 줌(Zoom) 카메라를 사용하면 중거리와 원거리를 보거나 감지하기 위해 한 개의 카메라를 사용할 수도 있다. 또한 줌(Zoom) 카메라는 망원 렌즈를 이용한 광학 줌 (Optical Zoom)이거나 고화소 센서를 이용한 디지탈 줌 (Digital Zoom)일 수 있다.In recent years, a vehicle is increasingly equipped with two or more front cameras in order to see a wide area and a distant place. For example, two or three cameras can be used to see or detect short, medium, and far range. With a Zoom camera here, you can even use a single camera to see or detect medium and far distances. In addition, the zoom camera may be an optical zoom using a telephoto lens or a digital zoom using a high-pixel sensor.

기존의 차량의 전방용 카메라는 직진하지 않을 때에 중거리나 원거리를 보거나 감지하는 동안에, 차량이 우회전 또는 좌회전을 하게 되면 카메라가 차량 진행방향과 달라지기 때문에, 진행 방향 영역이 카메라 감지 영역에서 벗어나는 경우에는, 단거리를 감지하는 광각 카메라가 아니라면 카메라의 방향은 차량의 진행 방향에 따라 변경시켜 주어야 할 필요가 있다.The existing front camera of a vehicle is not going straight, while seeing or detecting a medium or long distance, if the vehicle turns right or left, the camera changes from the vehicle's moving direction. , unless it is a wide-angle camera that detects a short distance, the direction of the camera needs to be changed according to the direction of the vehicle's travel.

예를 들어, 차량의 전방용 카메라는 줌 카메라가 아니고 고정 화각 카메라인 경우, 차량의 진행 방향에 따라 카메라의 방향을 바꾸지 않는 고정 방향 카메라인 경우, 차량 주행 방향에 따라 카메라의 배율을 바꾸거나 카메라의 방향을 변경할 수 없다는 문제점이 있다.For example, if the front camera of the vehicle is not a zoom camera but a fixed angle of view camera, if it is a fixed direction camera that does not change the direction of the camera according to the traveling direction of the vehicle, change the magnification of the camera or the camera according to the driving direction of the vehicle There is a problem that the direction cannot be changed.

또한, 일반적으로 자동차의 속도가 빠를 때는 좁아도 멀리 볼 필요가 있고 자동차 속도가 느리면 멀리 보지 못해도 넓게 볼 필요가 있고, 방향을 틀 때에는 차량 주행 방향을 볼 필요가 있으며 카메라 방향과 화각은 진행 방향뿐 아니라 속도에 따라 결정되는 것이 필요하다.Also, in general, when the speed of a car is fast, it is necessary to see far even if it is narrow, and when the speed of the car is slow, it is necessary to look wide even if it is not possible to see far. Rather, it needs to be determined by speed.

뿐만 아니라, 차량의 전방용 카메라는, 속도가 변하는 경우에는 차량 주행 속도에 따라 운전자에 적합한 화면을 제공하는 것이 필요하지만, 기존의 전방용 카메라는 속도 변화에 따라 운전에 적합한 영상을 제공하지 못하는 문제점이 있다.In addition, the front camera of the vehicle needs to provide a screen suitable for the driver according to the vehicle driving speed when the speed is changed, but the existing front camera cannot provide an image suitable for driving according to the speed change. There is this.

(선행기술문헌)(Prior art literature)

(특허문헌 1) KR 공개특허공보 10-2012-0120859 (공개일: 2012.11.02)(Patent Document 1) KR Patent Publication No. 10-2012-0120859 (published on: 2012.11.02)

(특허문헌 1) KR 공개특허공보 10-2017-0001985 (공개일: 2017.01.06)(Patent Document 1) KR Patent Publication No. 10-2017-0001985 (published date: 2017.01.06)

본 발명의 일 실시 예는, 차량의 전진 방향을 적절히 보거나 감지할 수 있도록, 차량의 속도 변화에 적합하도록 이미지 센서의 관심영역(ROI)을 적절히 조절할 수 있는 차량의 카메라 장치를 제공한다.An embodiment of the present invention provides a vehicle camera device capable of appropriately adjusting a region of interest (ROI) of an image sensor to suit a speed change of a vehicle so as to properly view or sense a forward direction of the vehicle.

본 발명의 일 실시 예에 의해, 영상을 입사받는 카메라 렌즈부; 상기 카메라 렌즈부를 통해 입사되는 영상을 센싱하여 영상신호를 제공하는 카메라 센서부; 상기 카메라 센서부로부터 입력받은 전체 영상에서, 미리 설정된 관심영역의 영상을 크롭(crop)하여 ROI 영상신호를 출력하는 신호 처리부; 및 차량 주행 속도 정보 및 차량 주행 방향 정보에 기초해서, 상기 카메라 센서부의 관심영역을 설정하고, 상기 신호 처리부에 상기 관심영역의 영상 크롭을 제어하고, 카메라의 방향과 화각을 조절하는 제어부; 를 포함하는 차량의 카메라 장치가 제안된다.According to an embodiment of the present invention, a camera lens unit for receiving an image; a camera sensor unit sensing an image incident through the camera lens unit and providing an image signal; a signal processing unit for outputting an ROI image signal by cropping an image of a preset region of interest from the entire image received from the camera sensor unit; and a control unit configured to set a region of interest of the camera sensor unit based on vehicle driving speed information and vehicle driving direction information, control image cropping of the region of interest to the signal processing unit, and adjust a direction and a field of view of the camera; A camera device for a vehicle comprising:

본 발명의 일 실시 예에 의하면, 차량의 전진 방향을 적절히 보거나 감지할 수 있도록, 차량의 속도 변화에 적합하도록 이미지 센서의 관심영역(ROI)을 적절히 조절할 수 있는 효과가 있다.According to an embodiment of the present invention, there is an effect that the region of interest (ROI) of the image sensor can be appropriately adjusted to suit the speed change of the vehicle so that the forward direction of the vehicle can be properly viewed or sensed.

도 1은 본 발명의 일 실시 예에 따른 차량의 카메라 장치의 일 예시도이다.
도 2는 도 1의 카메라 장치의 카메라 렌즈부의 촬영 방향 및 화각 설명도이다.
도 3은 카메라 렌즈부의 일 예시도이다.
도 4는 카메라 렌즈부의 촬영 방향 예시도이다.
도 5는 카메라 센서부의 전체 영상에서 관심영역에 대한 일 예시도이다.
도 6은 카메라 센서부의 전체 영상에서 관심영역에 대한 일 예시도이다.
도 7은 카메라 센서부의 전체 영상에서 관심영역에 대한 일 예시도이다.
도 8은 카메라 장치의 동작과정 예시도이다.
도 9는 카메라 장치의 동작과정 예시도이다.
도 10은 차량 주행 방향 및 차량 주행 속도에 따른 관심영역 예시도이다.
도 11은 차량 주행 방향 및 차량 주행 속도에 따른 관심영역 예시도이다.
도 12는 차량 주행 방향 및 차량 주행 속도에 따른 관심영역 예시도이다.1 is an exemplary view of a camera device for a vehicle according to an embodiment of the present invention.
FIG. 2 is an explanatory view of a photographing direction and an angle of view of a camera lens unit of the camera device of FIG. 1 .
3 is an exemplary view of a camera lens unit.
4 is a view illustrating a photographing direction of a camera lens unit.
5 is an exemplary diagram of a region of interest in an entire image of a camera sensor unit.
6 is an exemplary view of a region of interest in the entire image of the camera sensor unit.
7 is an exemplary diagram of a region of interest in an entire image of a camera sensor unit.
8 is an exemplary diagram of an operation process of a camera device.
9 is a diagram illustrating an operation process of a camera device.
10 is an exemplary diagram of a region of interest according to a vehicle traveling direction and a vehicle traveling speed.
11 is an exemplary diagram of a region of interest according to a vehicle traveling direction and a vehicle traveling speed.
12 is an exemplary diagram of a region of interest according to a vehicle traveling direction and a vehicle traveling speed.

이하에서는, 본 발명은 설명되는 실시 예에 한정되지 않으며, 본 발명의 정신 및 범위를 벗어나지 않으면서 다양하게 변경될 수 있음이 이해되어야 한다.Hereinafter, it should be understood that the present invention is not limited to the described embodiments, and various modifications may be made without departing from the spirit and scope of the present invention.

또한, 본 발명의 각 실시 예에 있어서, 하나의 예로써 설명되는 구조, 형상 및 수치는 본 발명의 기술적 사항의 이해를 돕기 위한 예에 불과하므로, 이에 한정되는 것이 아니라 본 발명의 정신 및 범위를 벗어나지 않으면서 다양하게 변경될 수 있음이 이해되어야 한다. 본 발명의 실시 예들은 서로 조합되어 여러 가지 새로운 실시 예가 이루어질 수 있다.In addition, in each embodiment of the present invention, the structure, shape, and numerical value described as an example are only examples for helping the understanding of the technical matters of the present invention, and thus the spirit and scope of the present invention are not limited thereto. It should be understood that various changes may be made without departing from it. The embodiments of the present invention may be combined with each other to form various new embodiments.

그리고, 본 발명에 참조된 도면에서 본 발명의 전반적인 내용에 비추어 실질적으로 동일한 구성과 기능을 가진 구성요소들은 동일한 부호를 사용할 것이다.In addition, in the drawings referenced in the present invention, components having substantially the same configuration and function will be denoted by the same reference numerals in light of the overall content of the present invention.

이하에서는, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 본 발명을 용이하게 실시할 수 있도록 하기 위해서, 본 발명의 실시 예를 첨부한 도면을 참조하여 상세히 설명한다.Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings in order to enable those of ordinary skill in the art to easily practice the present invention.

도 1은 본 발명의 일 실시 예에 따른 차량의 카메라 장치의 일 예시도이다.1 is an exemplary view of a camera device for a vehicle according to an embodiment of the present invention.

도 1을 참조하면, 본 발명의 일 실시 예에 따른 차량의 카메라 장치는, 카메라 렌즈부(100), 카메라 센서부(200), 신호 처리부(300) 및 제어부(400)를 포함할 수 있다.Referring to FIG. 1 , a camera device for a vehicle according to an embodiment of the present invention may include a camera lens unit 100 , a camera sensor unit 200 , a signal processing unit 300 , and a control unit 400 .

카메라 렌즈부(100)는, 영상을 입사받아서 카메라 센서부(200)에 전달할 수 있다.The camera lens unit 100 may receive an image and transmit it to the camera sensor unit 200 .

카메라 센서부(200)는, 상기 카메라 렌즈부(100)를 통해 입사되는 영상을 센싱하여 영상신호를 제공할 수 있다.The camera sensor unit 200 may provide an image signal by sensing an image incident through the camera lens unit 100 .

신호 처리부(300)는, 상기 카메라 센서부(200)로부터 입력받은 전체 영상에서, 미리 설정된 관심영역(ROI)의 영상을 크롭(crop)하여 ROI 영상신호를 출력할 수 잇다.The signal processing unit 300 may output an ROI image signal by cropping an image of a preset region of interest (ROI) from the entire image received from the camera sensor unit 200 .

제어부(400)는, 차량 주행 속도 정보 및 차량 주행 방향 정보에 기초해서, 상기 카메라 센서부(200)의 관심영역(ROI)을 설정하고, 상기 신호 처리부(300)에 상기 관심영역(ROI)의 영상 크롭을 제어할 수 있다.The control unit 400 sets a region of interest (ROI) of the camera sensor unit 200 based on the vehicle traveling speed information and the vehicle traveling direction information, and provides the signal processing unit 300 for the region of interest (ROI). You can control video cropping.

본 발명의 각 도면에 대해, 동일한 부호 및 동일한 기능의 구성요소에 대해서는 가능한 불필요한 중복 설명은 생략될 수 있고, 각 도면에 대해 가능한 차이점에 대한 사항이 설명될 수 있다.For each drawing of the present invention, unnecessary redundant descriptions of the same reference numerals and components having the same function may be omitted, and possible differences may be described for each drawing.

도 2는 도 1의 카메라 장치의 카메라 렌즈부의 촬영 방향 및 화각 설명도이다.FIG. 2 is an explanatory view of a photographing direction and an angle of view of a camera lens unit of the camera device of FIG. 1 .

도 1 및 도 2를 참조하면, 예를 들어, 카메라 바디(11)에 장착된 카메라 렌즈부(100)의 촬영 방향은, 좌측 영상(Left image)을 촬영하기 위한 좌측방향, 우측 영상(Right image)을 촬영하기 위한 우측방향, 및 전면 영상(Strait image)을 촬영하기 위한 전면 방향중 하나의 방향이거나 상기 방향들의 중간 방향이 될 수 있다.1 and 2 , for example, the photographing direction of the camera lens unit 100 mounted on the camera body 11 is a left direction for photographing a left image, a right image ) may be one of a right direction for photographing and a front direction for photographing a straight image, or an intermediate direction of the directions.

예를 들어, 카메라 렌즈부의 촬영 화각은, 광각(Wide Angle) 또는 협각(Narrow Angle) 혹은 그 중간의 화각이 될 수 있다. For example, the photographing angle of view of the camera lens unit may be a wide angle, a narrow angle, or an angle in between.

일 예로, 본 발명의 카메라 장치에 의한 카메라의 방향과 화각 조절은, 신호처리를 통해 ROI를 조절하는 디지탈 줌 (Digital Zoom)이나 디지탈 카메라 방향 조절 장치뿐 아니라 실시간 물리적 변경을 통한 옵티컬 줌 (Optical Zoom)에 의해 구현될 수 있으며, 또는 기계적 카메라 방향 조절 장치에 의해 구현될 수 있으며, 특정한 하나의 방식으로 한정될 필요는 없다.As an example, the direction and angle of view adjustment of the camera by the camera device of the present invention can be controlled by digital zoom or digital camera direction control device that adjusts ROI through signal processing, as well as optical zoom through real-time physical change. ) may be implemented, or may be implemented by a mechanical camera direction adjustment device, and it is not necessary to be limited to a specific way.

도 3은 카메라 렌즈부의 일 예시도이고, 도 4는 카메라 렌즈부의 촬영 방향 예시도이다.3 is an exemplary view of a camera lens unit, and FIG. 4 is an exemplary view in a photographing direction of the camera lens unit.

도 3을 참조하면, 카메라 렌즈부(100)는, 복수의 렌즈를 포함하는 렌즈부(110)와, 상기 렌즈부(110)의 촬영 방향 및 촬영 화각을 조절할 수 있는 액츄에이터(120)를 포함할 수 있다.Referring to FIG. 3 , the camera lens unit 100 may include a lens unit 110 including a plurality of lenses, and an actuator 120 capable of adjusting a shooting direction and a shooting angle of view of the lens unit 110 . can

도 1 내지 도 4를 참조하면, 상기 제어부(400)는, 상기 차량 주행 속도 정보 및 차량 주행 방향 정보에 기초해서, 상기 카메라 렌즈부(100)의 촬영 방향을 제어할 수 있다.1 to 4 , the control unit 400 may control the photographing direction of the camera lens unit 100 based on the vehicle traveling speed information and the vehicle traveling direction information.

이에 따라, 상기 카메라 렌즈부(100)는, 예를 들어, 좌회전(Left Turn) 방향, 우회전(Right Turn) 방향, 직진(Strait) 방향 각각으로 조절될 수 있다. Accordingly, the camera lens unit 100 may be adjusted in each of, for example, a Left Turn direction, a Right Turn direction, and a Straight direction.

또한, 상기 제어부(400)는, 상기 차량 주행 속도 정보 및 차량 주행 방향 정보에 기초해서, 상기 카메라 렌즈부(100)의 촬영 화각을 제어할 수 있다.Also, the control unit 400 may control a photographing angle of view of the camera lens unit 100 based on the vehicle traveling speed information and vehicle traveling direction information.

이에 따라, 상기 카메라 렌즈부(100)의 화각은, 예를 들어, 광각(Wide Angle) 또는 협각(Narrow Angle) 등으로 될 수 있다.Accordingly, the angle of view of the camera lens unit 100 may be, for example, a wide angle or a narrow angle.

도 5는 카메라 센서부의 전체 영상에서 관심영역에 대한 일 예시도이고, 도 6은 카메라 센서부의 전체 영상에서 관심영역에 대한 일 예시도이고, 도 7은 카메라 센서부의 전체 영상에서 관심영역에 대한 일 예시도이다.5 is an exemplary view of a region of interest in the entire image of the camera sensor unit, FIG. 6 is an exemplary view of a region of interest in the entire image of the camera sensor unit, and FIG. 7 is an example of a region of interest in the entire image of the camera sensor unit. It is also an example.

도 5 내지 도 7을 참조하면, 상기 제어부(400)는, 상기 차량 주행 방향 정보에 기초해서, 상기 신호 처리부(300)에 대해, 상기 전체 영상에서 상기 관심영역(ROI)의 위치 이동을 제어할 수 있다.5 to 7 , the control unit 400 controls the position movement of the region of interest (ROI) in the entire image with respect to the signal processing unit 300 based on the vehicle driving direction information. can

도 5를 참조하면, 일예로, 차량 주행 방향이 진전 방향일 경우, 카메라 센서부(200)의 전체 8M (3264 x 2448) 영역중에서 관심영역(ROI)은 중앙 2M (1920 x 1080) 영역이 될 수 있다.Referring to FIG. 5 , as an example, when the vehicle traveling direction is the moving direction, the region of interest (ROI) among the entire 8M (3264 x 2448) area of the camera sensor unit 200 will be the central 2M (1920 x 1080) area. can

도 6을 참조하면, 일예로, 차량 주행 방향이 좌측 방향일 경우, 카메라 센서부(200)의 전체 8M 영역중에서 관심영역(ROI)은 좌측 2M 영역이 될 수 있다.Referring to FIG. 6 , for example, when the vehicle driving direction is the left direction, the region of interest (ROI) may be the left 2M region among the total 8M regions of the camera sensor unit 200 .

도 7을 참조하면, 일예로, 차량 주행 방향이 우측 방향일 경우, 카메라 센서부(200)의 전체 8M 영역중에서 관심영역(ROI)은 우측 2M 영역이 될 수 있다.Referring to FIG. 7 , for example, when the vehicle driving direction is a right direction, a region of interest (ROI) may be a right 2M region among all 8M regions of the camera sensor unit 200 .

예를 들어, 상기 제어부(400)는 상기 차량 주행 방향 정보에 따라 카메라의 방향 뿐 아니라 화각도 조절할 수 있다. For example, the controller 400 may control not only the direction of the camera but also the angle of view according to the vehicle driving direction information.

일 예로, 상기 제어부(400)는, 상기 차량 주행 속도 정보에 따라 카메라의 화각 뿐 아니라 방향도 조절할 수 있다.For example, the controller 400 may adjust not only the angle of view of the camera but also the direction according to the vehicle traveling speed information.

일 예로, 상기 제어부(400)는, 차량 주행 방향이 같은 경우에도 상기 차량 주행 속도 정보에 따라 카메라의 방향을 조절할 수 있다.For example, the controller 400 may adjust the direction of the camera according to the vehicle traveling speed information even when the vehicle traveling direction is the same.

일 예로, 상기 제어부(400)는, 차량 주행 속도가 같은 경우에도 상기 차량 주행 방향 정보에 따라 카메라의 화각을 조절할 수 있다.For example, the controller 400 may adjust the angle of view of the camera according to the vehicle traveling direction information even when the vehicle traveling speed is the same.

전술한 바와 같이, 본 발명의 카메라 장치에서는, 제어부(400)는, 차량 주행 속도 및 차량 주행 방향에 따라 카메라 방향 또는 카메라 화각중 적어도 하나를 조절할 수 있다.As described above, in the camera device of the present invention, the controller 400 may adjust at least one of the camera direction and the camera angle of view according to the vehicle traveling speed and the vehicle traveling direction.

본 발명의 제어부(400)의 조절동작에 대한 예시에 대해, 도 8 및 도 9를 참조하여 설명한다.An example of the control operation of the control unit 400 of the present invention will be described with reference to FIGS. 8 and 9 .

도 8은 카메라 장치의 동작과정 예시도이고, 도 9는 카메라 장치의 동작과정 예시도이다.8 is a diagram illustrating an operation process of the camera device, and FIG. 9 is an example diagram of an operation process of the camera device.

도 8을 참조하면, 차량 주행 속도가 고속구동(High Speed Driving)인 경우(S810), 구동방향이 좌회전(Left Turn), 직전(Strait), 우회전(Right Turn)인 각각의 경우(S820)에 대해, 카메라 장치(10)의 동작은, 협각 및 좌측 영상((less) Narrow Angle, Left Image), 협각 및 직전영상(Narrow Angle, Strait Image), 및 협각 및 우측 영상((less) Narrow Angle, Right Image)을 촬영하도록 동작할 수 있다(S830).Referring to FIG. 8, when the vehicle driving speed is High Speed Driving (S810), the driving direction is Left Turn, Straight, and Right Turn in each case (S820). In contrast, the operation of the camera device 10 is a narrow angle and a left image ((less) Narrow Angle, Left Image), a narrow angle and an immediate image (Narrow Angle, Strait Image), and a narrow angle and a right image ((less) Narrow Angle, Right Image) may be taken (S830).

예를 들어, 상기 제어기(400)는, 고속 및 직전(Strait)인 경우에는 협각 및 직전영상(Narrow Angle, Strait Image)을 획득하도록 제어하고, 고속 및 좌회전(Left Turn)인 경우에는, 직전에 비해 덜 협각 및 좌측 영상((less) Narrow Angle, Left Image)을 획득하도록 제어하고, 그리고, 고속 및 우회전(Right Turn)인 각각의 경우에는, 직전에 비해 덜 협각 및 좌측 영상((less) Narrow Angle, Right Image)을 획득하도록 제어할 수 있다.For example, the controller 400 controls to acquire a narrow angle and a straight image (Strait Image) in the case of high speed and straight ahead, and controls to obtain a narrow angle and straight image (strait image) in the case of high speed and left turn, immediately before Control to acquire less narrow angle and left image ((less) Narrow Angle, Left Image), and, in each case of high speed and right turn, less narrow angle and left image than immediately before ((less) Narrow Angle, Right Image) can be controlled.

도 9를 참조하면, 차량 주행 속도가 저속구동(Low Speed Driving)인 경우(S910), 구동방향이 좌회전(Left Turn), 직전(Strait), 우회전(Right Turn)인 각각의 경우(S920)에 대해, 카메라 장치(10)의 동작은 광각 및 좌측 영상((More) Wide Angle, Left Image), 광각 및 직전영상(Wide Angle, Strait Image), 및 광각 및 우측 영상((More) Wide Angle, Right Image)을 촬영하도록 동작할 수 있다(S830).Referring to FIG. 9 , when the vehicle driving speed is Low Speed Driving (S910), the driving direction is Left Turn, Straight, and Right Turn in each case (S920). In contrast, the operation of the camera device 10 includes a wide-angle and left image ((More) Wide Angle, Left Image), a wide-angle and immediately preceding image (Wide Angle, Strait Image), and a wide-angle and right image ((More) Wide Angle, Right Image). Image) may be operated (S830).

예를 들어, 상기 제어기(400)는, 저속 및 직전(Strait)인 경우에는 광각 및 직전영상(Wide Angle, Strait Image)을 획득하도록 제어하고, 저속 및 좌회전(Left Turn)인 경우에는, 직전에 비해 더 광각 및 좌측 영상((More) Wide Angle, Left Image)을 획득하도록 제어하고, 그리고, 저속 및 우회전(Right Turn)인 각각의 경우에는, 직전에 비해 광각 및 우측 영상((More) Wide Angle, Right Image)을 획득하도록 제어할 수 있다.For example, the controller 400 controls to acquire a wide angle and a straight image (Wide Angle, Strait Image) in the case of low speed and straight, and in case of low speed and left turn, immediately before Control to acquire a more wide-angle and left image ((More) Wide Angle, Left Image) compared to, and, in each case of slow and right turn, wide-angle and right image ((More) Wide Angle) compared to just before , Right Image).

도 10은 차량 주행 방향 및 차량 주행 속도에 따른 관심영역 예시도이고, 도 11은 차량 주행 방향 및 차량 주행 속도에 따른 관심영역 예시도이고, 도 12는 차량 주행 방향 및 차량 주행 속도에 따른 관심영역 예시도이다.10 is an exemplary diagram of a region of interest according to a vehicle traveling direction and a vehicle traveling speed, FIG. 11 is an exemplary diagram of a region of interest according to a vehicle traveling direction and a vehicle traveling speed, and FIG. It is also an example.

도 10 내지 도 12를 참조하면, 상기 제어부(400)는, 상기 차량 주행 속도 정보에 기초해서, 상기 신호 처리부(300)에 대해, 상기 전체 영상에서 상기 관심영역(ROI)의 크기를 제어할 수 있다.10 to 12 , the controller 400 may control the size of the region of interest (ROI) in the entire image with respect to the signal processing unit 300 based on the vehicle traveling speed information. have.

도 10을 참조하면, 차량 주행 속도가 직진 방향 진행중 저속인 경우에는 전체 영상에서 상대적으로 넓은 중앙 관심영역(ROI-SL)이 크롭(Crop)될 수 있고, 차량 주행 속도가 직진 방향 진행중 고속인 경우에는 전체 영상에서 상대적으로 좁은 중앙 관심영역(ROI-FA)으로 크롭(Crop)될 수 있다.Referring to FIG. 10 , when the vehicle traveling speed is low in the straight direction, a relatively wide central region of interest (ROI-SL) may be cropped in the entire image, and when the vehicle traveling speed is high in the straight direction can be cropped to a relatively narrow central region of interest (ROI-FA) in the entire image.

도 11을 참조하면, 차량 주행 속도가 좌회전 진행중 저속인 경우에는 전체 영상에서 상대적으로 넓은 좌측 관심영역(ROI-SL)이 크롭(Crop)될 수 있고, 차량 주행 속도가 좌회전 진행중 고속인 경우에는 전체 영상에서 상대적으로 좁은 좌측 관심영역(ROI-FA)으로 크롭(Crop)될 수 있다.Referring to FIG. 11 , when the vehicle traveling speed is low while turning left, a relatively wide left region of interest (ROI-SL) may be cropped in the entire image. The image may be cropped to a relatively narrow left region of interest (ROI-FA).

도 12를 참조하면, 차량 주행 속도가 우회전 진행중 저속인 경우에는 전체 영상에서 상대적으로 넓은 우측 관심영역(ROI-SL)이 크롭(Crop)될 수 있고, 차량 주행 속도가 우회전 진행중 고속인 경우에는 전체 영상에서 상대적으로 좁은 우측 관심영역(ROI-FA)으로 크롭(Crop)될 수 있다.Referring to FIG. 12 , when the vehicle traveling speed is low while turning right, a relatively wide right region of interest (ROI-SL) may be cropped in the entire image, and when the vehicle traveling speed is high while turning right, the entire image may be cropped. The image may be cropped to a relatively narrow right region of interest (ROI-FA).

한편, 도 4 내지 도 7을 참조하면, 상기 제어부(400)는, 상기 차량 주행 속도 정보 및 상기 차량 주행 방향 정보에 기초해서, 상기 카메라 렌즈부(100)의 촬영방향을 제어하거나, 상기 신호 처리부(300)에 대해 상기 전체 영상에서 상기 관심영역(ROI)의 위치 이동을 제어할 수 있다.Meanwhile, referring to FIGS. 4 to 7 , the control unit 400 controls the photographing direction of the camera lens unit 100 or the signal processing unit based on the vehicle traveling speed information and the vehicle traveling direction information. With respect to 300 , it is possible to control the positional movement of the region of interest (ROI) in the entire image.

한편, 본 발명의 일 실시 예에 따른 카메라 장치의 제어부(400)는, 프로세서(예: 중앙처리장치(CPU), 그래픽처리장치(GPU), 마이크로프로세서, 주문형 반도체(Application Specific Integrated Circuit, ASIC), Field Programmable Gate Arrays(FPGA) 등), 메모리(예: 휘발성 메모리(예를 들어, RAM 등), 비휘발성 메모리(예를 들어, ROM, 플래시 메모리 등), 입력 디바이스(예: 키보드, 마우스, 펜, 음성 입력 디바이스, 터치 입력 디바이스, 적외선 카메라, 비디오 입력 디바이스 등), 출력 디바이스(예: 디스플레이, 스피커, 프린터 등) 및 통신접속장치(예: 모뎀, 네트워크 인터페이스 카드(NIC), 통합 네트워크 인터페이스, 무선 주파수 송신기/수신기, 적외선 포트, USB 접속장치 등)이 서로 상호접속(예: 주변 구성요소 상호접속(PCI), USB, 펌웨어(IEEE 1394), 광학적 버스 구조, 네트워크 등)된 컴퓨팅 환경으로 구현될 수 있다.Meanwhile, the controller 400 of the camera device according to an embodiment of the present invention includes a processor (eg, a central processing unit (CPU), a graphic processing unit (GPU), a microprocessor, an application specific integrated circuit (ASIC)). , Field Programmable Gate Arrays (FPGA), etc.), memory (e.g. volatile memory (e.g. RAM, etc.), non-volatile memory (e.g. ROM, flash memory, etc.) Pen, voice input device, touch input device, infrared camera, video input device, etc.), output device (eg display, speaker, printer, etc.) and communication interface (eg modem, network interface card (NIC), integrated network interface) , radio frequency transmitter/receiver, infrared port, USB connector, etc.) are interconnected (e.g. Peripheral Component Interconnect (PCI), USB, firmware (IEEE 1394), optical bus structure, network, etc.) to a computing environment. can be implemented.

상기 컴퓨팅 환경은 개인 컴퓨터, 서버 컴퓨터, 핸드헬드 또는 랩탑 디바이스, 모바일 디바이스(모바일폰, PDA, 미디어 플레이어 등), 멀티프로세서 시스템, 소비자 전자기기, 미니 컴퓨터, 메인프레임 컴퓨터, 임의의 전술된 시스템 또는 디바이스를 포함하는 분산 컴퓨팅 환경 등으로 구현될 수 있으나, 이에 한정되지 않는다.The computing environment may be a personal computer, server computer, handheld or laptop device, mobile device (mobile phone, PDA, media player, etc.), multiprocessor system, consumer electronics, minicomputer, mainframe computer, any of the foregoing systems or It may be implemented as a distributed computing environment including devices, but is not limited thereto.

이상에서는 본 발명을 실시 예로써 설명하였으나, 본 발명은 상기한 실시 예에 한정되지 아니하며, 특허청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 분야에서 통상의 지식을 가진 자라면 누구든지 다양한 변형이 가능할 것이다.In the above, the present invention has been described as an embodiment, but the present invention is not limited to the above embodiment, and without departing from the gist of the present invention as claimed in the claims, those of ordinary skill in the art to which the invention pertains Anyone can make various modifications.

10: 카메라 장치
11: 카메라 바디부
100: 카메라 렌즈부
200: 카메라 센서부
300: 신호 처리부
400: 제어부10: camera device
11: camera body
100: camera lens unit
200: camera sensor unit
300: signal processing unit
400: control unit

Claims (9)

영상을 입사받는 카메라 렌즈부;
상기 카메라 렌즈부를 통해 입사되는 영상을 센싱하여 영상신호를 제공하는 카메라 센서부;
상기 카메라 센서부로부터 입력받은 전체 영상에서, 미리 설정된 관심영역의 영상을 크롭(crop)하여 ROI 영상신호를 출력하는 신호 처리부; 및
차량 주행 속도 정보 및 차량 주행 방향 정보에 기초해서, 상기 카메라 센서부의 관심영역을 설정하고, 상기 신호 처리부에 상기 관심영역의 영상 크롭을 제어하고, 카메라의 방향과 화각을 조절하는 제어부;
를 포함하는 차량의 카메라 장치.
a camera lens unit receiving an image;
a camera sensor unit sensing an image incident through the camera lens unit and providing an image signal;
a signal processing unit for outputting an ROI image signal by cropping an image of a preset region of interest from the entire image received from the camera sensor unit; and
a controller configured to set a region of interest of the camera sensor unit based on vehicle driving speed information and vehicle driving direction information, control image cropping of the region of interest to the signal processing unit, and adjust a direction and an angle of view of the camera;
A vehicle camera device comprising a.
 제1항에 있어서, 상기 제어부는,
상기 차량 주행 방향 정보에 따라 카메라의 방향 뿐 아니라 화각도 조절하는
차량의 카메라 장치.
According to claim 1, wherein the control unit,
According to the vehicle driving direction information, it is possible to adjust the angle of view as well as the direction of the camera.
the vehicle's camera device.
 제1항에 있어서, 상기 제어부는,
상기 차량 주행 속도 정보에 따라 카메라의 화각 뿐 아니라 방향도 조절하는
차량의 카메라 장치.
According to claim 1, wherein the control unit,
According to the vehicle driving speed information, the camera's angle of view as well as the direction are adjusted.
the vehicle's camera device.
 제1항에 있어서, 상기 제어부는,
차량 주행 방향이 같은 경우에도 상기 차량 주행 속도 정보에 따라 카메라의 방향을 조절하는
차량의 카메라 장치.
According to claim 1, wherein the control unit,
Even when the vehicle traveling direction is the same, the camera direction is adjusted according to the vehicle traveling speed information.
the vehicle's camera device.
 제1항에 있어서, 상기 제어부는,
차량 주행 속도가 같은 경우에도 상기 차량 주행 방향 정보에 따라 카메라의 화각을 조절하는
차량의 카메라 장치.
According to claim 1, wherein the control unit,
Even when the vehicle traveling speed is the same, the camera angle of view is adjusted according to the vehicle traveling direction information.
the vehicle's camera device.
 제1항에 있어서, 상기 제어부는,
상기 차량 주행 방향 정보에 기초해서, 상기 신호 처리부에 대해, 상기 전체 영상에서 상기 관심영역의 위치 이동을 제어하는
차량의 카메라 장치.
According to claim 1, wherein the control unit,
based on the vehicle driving direction information, controlling the position movement of the region of interest in the entire image with respect to the signal processing unit
the vehicle's camera device.
 제1항에 있어서, 상기 제어부는,
상기 차량 주행 속도 정보에 기초해서, 상기 신호 처리부에 대해, 상기 전체 영상에서 상기 관심영역의 크기를 제어하는
차량의 카메라 장치.
According to claim 1, wherein the control unit,
Controlling the size of the region of interest in the entire image with respect to the signal processing unit based on the vehicle traveling speed information
the vehicle's camera device.
 제1항에 있어서, 상기 제어부는,
상기 차량 주행 속도 정보 및 차량 주행 방향 정보에 기초해서, 상기 카메라 렌즈부의 촬영 화각 및 촬영 방향을 제어하는
차량의 카메라 장치.
According to claim 1, wherein the control unit,
based on the vehicle traveling speed information and vehicle traveling direction information, controlling the photographing angle of view and the photographing direction of the camera lens unit
the vehicle's camera device.
 제1항에 있어서, 상기 제어부는,
상기 차량 주행 속도 정보 및 상기 차량 주행 방향 정보에 기초해서, 상기 카메라 렌즈부의 촬영방향을 제어하거나, 상기 신호 처리부에 대해 상기 전체 영상에서 상기 관심영역의 위치 이동을 제어하는
차량의 카메라 장치.According to claim 1, wherein the control unit,
Based on the vehicle traveling speed information and the vehicle traveling direction information, controlling the photographing direction of the camera lens unit or controlling the positional movement of the region of interest in the entire image with respect to the signal processing unit
the vehicle's camera device.
KR1020210057428A 2021-05-03 2021-05-03 Camera apparatus for vehicle KR102538907B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020210057428A KR102538907B1 (en) 2021-05-03 2021-05-03 Camera apparatus for vehicle

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020210057428A KR102538907B1 (en) 2021-05-03 2021-05-03 Camera apparatus for vehicle

Publications (2)

Publication Number Publication Date
KR20220150111A true KR20220150111A (en) 2022-11-10
KR102538907B1 KR102538907B1 (en) 2023-06-01

Family

ID=84101712

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020210057428A KR102538907B1 (en) 2021-05-03 2021-05-03 Camera apparatus for vehicle

Country Status (1)

Country Link
KR (1) KR102538907B1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102497488B1 (en) * 2022-11-29 2023-02-08 주식회사 셀플러스코리아 Image recognition apparatus for adjusting recognition range according to driving speed of autonomous vehicle

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20080022980A (en) * 2006-09-08 2008-03-12 주식회사 메디슨 Image processing system and method
KR20110101607A (en) * 2010-03-09 2011-09-16 경상대학교산학협력단 Vehicles controlling apparatus and controlling method thereof
KR20140085077A (en) * 2012-12-27 2014-07-07 태하메카트로닉스 (주) Camera module
JP2018164199A (en) * 2017-03-27 2018-10-18 ソニーセミコンダクタソリューションズ株式会社 Image processing device and image processing method
KR20200010660A (en) * 2018-07-02 2020-01-31 현대모비스 주식회사 System for remote parking and method thereof, apparatus for recognizing object of vehicle

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20080022980A (en) * 2006-09-08 2008-03-12 주식회사 메디슨 Image processing system and method
KR20110101607A (en) * 2010-03-09 2011-09-16 경상대학교산학협력단 Vehicles controlling apparatus and controlling method thereof
KR20140085077A (en) * 2012-12-27 2014-07-07 태하메카트로닉스 (주) Camera module
JP2018164199A (en) * 2017-03-27 2018-10-18 ソニーセミコンダクタソリューションズ株式会社 Image processing device and image processing method
KR20200010660A (en) * 2018-07-02 2020-01-31 현대모비스 주식회사 System for remote parking and method thereof, apparatus for recognizing object of vehicle

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102497488B1 (en) * 2022-11-29 2023-02-08 주식회사 셀플러스코리아 Image recognition apparatus for adjusting recognition range according to driving speed of autonomous vehicle

Also Published As

Publication number Publication date
KR102538907B1 (en) 2023-06-01

Similar Documents

Publication Publication Date Title
CN108718373B (en) Image device
US11310461B2 (en) Imaging apparatus, imaging system, and display system
CN109309796B (en) Electronic device for acquiring image using multiple cameras and method for processing image using the same
EP3062148B1 (en) Device with an adaptive camera array
CN111105450A (en) Electronic device and method for disparity estimation
US11184539B2 (en) Intelligent dual-lens photographing device and photographing method therefor
KR102184564B1 (en) Camera module
KR102382871B1 (en) Electronic Device for controlling lens focus and the controlling Method thereof
KR20190034876A (en) A camera module comprising a plurality of actuators having different directions of magnetic fields
CN109835266B (en) Image pickup device module
KR102538907B1 (en) Camera apparatus for vehicle
JP2020194000A (en) Imaging device
US20230017668A1 (en) Mobile communication terminal
KR101038815B1 (en) Image capture system capable of fast auto focus
JP2011117787A (en) Distance image input device and device for monitoring vehicle exterior
JP2015185923A (en) Imaging apparatus and on-vehicle camera system
KR20150090775A (en) Camera module
JP2017112440A (en) Imaging system and control method therefor, mobile imaging device, communication device
US20150168809A1 (en) Focus control apparatus and focus control method
KR20190083162A (en) Image processing apparatus and method for vehicle
KR20220112870A (en) Vehicle's svm system using tilt camera
KR20140135416A (en) Stereo Camera
JP5618032B1 (en) Stereo camera
KR102327734B1 (en) Vehicle camera system and method of operation of the same
KR102428595B1 (en) Ois circuit and ois device for object position correction through face tracking

Legal Events

Date Code Title Description
AMND Amendment
E601 Decision to refuse application
X091 Application refused [patent]
AMND Amendment
X701 Decision to grant (after re-examination)