KR102538907B1 - Camera apparatus for vehicle - Google Patents

Camera apparatus for vehicle Download PDF

Info

Publication number
KR102538907B1
KR102538907B1 KR1020210057428A KR20210057428A KR102538907B1 KR 102538907 B1 KR102538907 B1 KR 102538907B1 KR 1020210057428 A KR1020210057428 A KR 1020210057428A KR 20210057428 A KR20210057428 A KR 20210057428A KR 102538907 B1 KR102538907 B1 KR 102538907B1
Authority
KR
South Korea
Prior art keywords
camera
vehicle
image
vehicle driving
interest
Prior art date
Application number
KR1020210057428A
Other languages
Korean (ko)
Other versions
KR20220150111A (en
Inventor
박영서
송인택
전희성
Original Assignee
삼성전기주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전기주식회사 filed Critical 삼성전기주식회사
Priority to KR1020210057428A priority Critical patent/KR102538907B1/en
Publication of KR20220150111A publication Critical patent/KR20220150111A/en
Application granted granted Critical
Publication of KR102538907B1 publication Critical patent/KR102538907B1/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
    • H04N23/635Region indicators; Field of view indicators
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/02Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/10Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to vehicle motion
    • B60W40/105Speed
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/57Mechanical or electrical details of cameras or camera modules specially adapted for being embedded in other devices
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/695Control of camera direction for changing a field of view, e.g. pan, tilt or based on tracking of objects
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2420/00Indexing codes relating to the type of sensors based on the principle of their operation
    • B60W2420/40Photo, light or radio wave sensitive means, e.g. infrared sensors
    • B60W2420/403Image sensing, e.g. optical camera
    • B60W2420/42
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2520/00Input parameters relating to overall vehicle dynamics
    • B60W2520/06Direction of travel
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2520/00Input parameters relating to overall vehicle dynamics
    • B60W2520/10Longitudinal speed

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)
  • Mathematical Physics (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Studio Devices (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

본 발명의 일 실시 예에 따른 차량의 카메라 장치는, 영상을 입사받는 카메라 렌즈부; 상기 카메라 렌즈부를 통해 입사되는 영상을 센싱하여 영상신호를 제공하는 카메라 센서부; 상기 카메라 센서부로부터 입력받은 전체 영상에서, 미리 설정된 관심영역의 영상을 크롭(crop)하여 ROI 영상신호를 출력하는 신호 처리부; 및 차량 주행 속도 정보 및 차량 주행 방향 정보에 기초해서, 상기 카메라 센서부의 관심영역을 설정하고, 상기 신호 처리부에 상기 관심영역의 영상 크롭을 제어하고, 카메라의 방향과 화각을 조절하는 제어부; 를 포함한다.A camera device for a vehicle according to an embodiment of the present invention includes a camera lens unit for receiving an image; a camera sensor unit for sensing an image incident through the camera lens unit and providing an image signal; a signal processing unit for outputting an ROI image signal by cropping an image of a preset region of interest from the entire image received from the camera sensor unit; and a controller configured to set a region of interest of the camera sensor unit based on vehicle driving speed information and vehicle driving direction information, control image cropping of the region of interest by the signal processing unit, and adjust a direction and an angle of view of the camera. includes

Description

차량의 카메라 장치{CAMERA APPARATUS FOR VEHICLE}Vehicle camera device {CAMERA APPARATUS FOR VEHICLE}

본 발명은 차량의 카메라 장치에 관한 것이다.The present invention relates to a vehicle camera device.

최근 들어, 차량에는, 넓은 영역 및 먼 곳을 보기 위해, 전방용 카메라가 2개 이상 장착되는 경우가 많아지고 있다. 예를 들어, 2개 혹은 3개의 카메라를 사용하여 단거리, 중거리, 원거리를 보거나 감지할 수 있다. 여기에 줌(Zoom) 카메라를 사용하면 중거리와 원거리를 보거나 감지하기 위해 한 개의 카메라를 사용할 수도 있다. 또한 줌(Zoom) 카메라는 망원 렌즈를 이용한 광학 줌 (Optical Zoom)이거나 고화소 센서를 이용한 디지탈 줌 (Digital Zoom)일 수 있다.In recent years, there are many cases in which two or more front-facing cameras are mounted on a vehicle in order to see a wide area and a distant place. For example, two or three cameras can be used to see or detect short, medium, and long distances. With a Zoom camera here, you can use a single camera to see or detect medium and far distances. In addition, the zoom camera may be an optical zoom using a telephoto lens or a digital zoom using a high-pixel sensor.

기존의 차량의 전방용 카메라는 직진하지 않을 때에 중거리나 원거리를 보거나 감지하는 동안에, 차량이 우회전 또는 좌회전을 하게 되면 카메라가 차량 진행방향과 달라지기 때문에, 진행 방향 영역이 카메라 감지 영역에서 벗어나는 경우에는, 단거리를 감지하는 광각 카메라가 아니라면 카메라의 방향은 차량의 진행 방향에 따라 변경시켜 주어야 할 필요가 있다.While the front-facing camera of an existing vehicle sees or detects a medium or long distance when it is not going straight, when the vehicle turns right or left, the camera is different from the direction of the vehicle. However, unless it is a wide-angle camera that detects a short distance, the direction of the camera needs to be changed according to the direction of the vehicle.

예를 들어, 차량의 전방용 카메라는 줌 카메라가 아니고 고정 화각 카메라인 경우, 차량의 진행 방향에 따라 카메라의 방향을 바꾸지 않는 고정 방향 카메라인 경우, 차량 주행 방향에 따라 카메라의 배율을 바꾸거나 카메라의 방향을 변경할 수 없다는 문제점이 있다.For example, if the vehicle's front-facing camera is not a zoom camera but a fixed-angle camera, if it is a fixed-direction camera that does not change the direction of the camera according to the driving direction of the vehicle, the magnification of the camera is changed according to the driving direction of the vehicle, or the camera There is a problem that the direction of can not be changed.

또한, 일반적으로 자동차의 속도가 빠를 때는 좁아도 멀리 볼 필요가 있고 자동차 속도가 느리면 멀리 보지 못해도 넓게 볼 필요가 있고, 방향을 틀 때에는 차량 주행 방향을 볼 필요가 있으며 카메라 방향과 화각은 진행 방향뿐 아니라 속도에 따라 결정되는 것이 필요하다.Also, in general, when the speed of the car is high, it is necessary to look far even if it is narrow, and when the speed of the car is slow, it is necessary to look wide even if it is not far, and when turning the direction, it is necessary to look at the driving direction of the vehicle. It needs to be determined by speed.

뿐만 아니라, 차량의 전방용 카메라는, 속도가 변하는 경우에는 차량 주행 속도에 따라 운전자에 적합한 화면을 제공하는 것이 필요하지만, 기존의 전방용 카메라는 속도 변화에 따라 운전에 적합한 영상을 제공하지 못하는 문제점이 있다.In addition, the front-facing camera of the vehicle needs to provide a screen suitable for the driver according to the vehicle driving speed when the speed changes, but the existing front-facing camera cannot provide an image suitable for driving according to the speed change. there is

(선행기술문헌)(Prior art literature)

(특허문헌 1) KR 공개특허공보 10-2012-0120859 (공개일: 2012.11.02)(Patent Document 1) KR Patent Publication No. 10-2012-0120859 (published date: 2012.11.02)

(특허문헌 1) KR 공개특허공보 10-2017-0001985 (공개일: 2017.01.06)(Patent Document 1) KR Patent Publication No. 10-2017-0001985 (published date: 2017.01.06)

본 발명의 일 실시 예는, 차량의 전진 방향을 적절히 보거나 감지할 수 있도록, 차량의 속도 변화에 적합하도록 이미지 센서의 관심영역(ROI)을 적절히 조절할 수 있는 차량의 카메라 장치를 제공한다.An embodiment of the present invention provides a vehicle camera device capable of appropriately adjusting a region of interest (ROI) of an image sensor to suit a change in vehicle speed so as to appropriately view or sense the forward direction of the vehicle.

본 발명의 일 실시 예에 의해, 영상을 입사받는 카메라 렌즈부; 상기 카메라 렌즈부를 통해 입사되는 영상을 센싱하여 영상신호를 제공하는 카메라 센서부; 상기 카메라 센서부로부터 입력받은 전체 영상에서, 미리 설정된 관심영역의 영상을 크롭(crop)하여 ROI 영상신호를 출력하는 신호 처리부; 및 차량 주행 속도 정보 및 차량 주행 방향 정보에 기초해서, 상기 카메라 센서부의 관심영역을 설정하고, 상기 신호 처리부에 상기 관심영역의 영상 크롭을 제어하고, 카메라의 방향과 화각을 조절하는 제어부; 를 포함하는 차량의 카메라 장치가 제안된다.According to an embodiment of the present invention, a camera lens unit receiving an image incident; a camera sensor unit for sensing an image incident through the camera lens unit and providing an image signal; a signal processing unit for outputting an ROI image signal by cropping an image of a preset region of interest from the entire image received from the camera sensor unit; and a controller configured to set a region of interest of the camera sensor unit based on vehicle driving speed information and vehicle driving direction information, control image cropping of the region of interest by the signal processing unit, and adjust a direction and an angle of view of the camera. A vehicle camera device including a is proposed.

본 발명의 일 실시 예에 의하면, 차량의 전진 방향을 적절히 보거나 감지할 수 있도록, 차량의 속도 변화에 적합하도록 이미지 센서의 관심영역(ROI)을 적절히 조절할 수 있는 효과가 있다.According to an embodiment of the present invention, there is an effect of appropriately adjusting the ROI of the image sensor to suit a change in speed of the vehicle so as to appropriately view or sense the forward direction of the vehicle.

도 1은 본 발명의 일 실시 예에 따른 차량의 카메라 장치의 일 예시도이다.
도 2는 도 1의 카메라 장치의 카메라 렌즈부의 촬영 방향 및 화각 설명도이다.
도 3은 카메라 렌즈부의 일 예시도이다.
도 4는 카메라 렌즈부의 촬영 방향 예시도이다.
도 5는 카메라 센서부의 전체 영상에서 관심영역에 대한 일 예시도이다.
도 6은 카메라 센서부의 전체 영상에서 관심영역에 대한 일 예시도이다.
도 7은 카메라 센서부의 전체 영상에서 관심영역에 대한 일 예시도이다.
도 8은 카메라 장치의 동작과정 예시도이다.
도 9는 카메라 장치의 동작과정 예시도이다.
도 10은 차량 주행 방향 및 차량 주행 속도에 따른 관심영역 예시도이다.
도 11은 차량 주행 방향 및 차량 주행 속도에 따른 관심영역 예시도이다.
도 12는 차량 주행 방향 및 차량 주행 속도에 따른 관심영역 예시도이다.
1 is an exemplary view of a camera device for a vehicle according to an embodiment of the present invention.
FIG. 2 is an explanatory view of a photographing direction and angle of view of a camera lens unit of the camera device of FIG. 1 .
3 is an exemplary view of a camera lens unit.
4 is an exemplary view of a photographing direction of a camera lens unit.
5 is an exemplary view of a region of interest in an entire image of a camera sensor unit.
6 is an exemplary view of a region of interest in an entire image of a camera sensor unit.
7 is an exemplary view of a region of interest in an entire image of a camera sensor unit.
8 is an exemplary diagram illustrating an operation process of a camera device.
9 is an exemplary diagram illustrating an operation process of a camera device.
10 is a diagram illustrating an exemplary region of interest according to a vehicle traveling direction and a vehicle traveling speed.
11 is a diagram illustrating an exemplary region of interest according to a vehicle traveling direction and a vehicle traveling speed.
12 is a diagram illustrating an exemplary region of interest according to a vehicle traveling direction and a vehicle traveling speed.

이하에서는, 본 발명은 설명되는 실시 예에 한정되지 않으며, 본 발명의 정신 및 범위를 벗어나지 않으면서 다양하게 변경될 수 있음이 이해되어야 한다.Hereinafter, it should be understood that the present invention is not limited to the described embodiments, and various changes can be made without departing from the spirit and scope of the present invention.

또한, 본 발명의 각 실시 예에 있어서, 하나의 예로써 설명되는 구조, 형상 및 수치는 본 발명의 기술적 사항의 이해를 돕기 위한 예에 불과하므로, 이에 한정되는 것이 아니라 본 발명의 정신 및 범위를 벗어나지 않으면서 다양하게 변경될 수 있음이 이해되어야 한다. 본 발명의 실시 예들은 서로 조합되어 여러 가지 새로운 실시 예가 이루어질 수 있다.In addition, in each embodiment of the present invention, the structure, shape, and numerical value described as an example are only examples to help the understanding of the technical details of the present invention, so they are not limited thereto, but the spirit and scope of the present invention It should be understood that various changes can be made without departing from it. Embodiments of the present invention can be combined with each other to make various new embodiments.

그리고, 본 발명에 참조된 도면에서 본 발명의 전반적인 내용에 비추어 실질적으로 동일한 구성과 기능을 가진 구성요소들은 동일한 부호를 사용할 것이다.In addition, in the drawings referred to in the present invention, elements having substantially the same configuration and function in light of the overall content of the present invention will use the same reference numerals.

이하에서는, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 본 발명을 용이하게 실시할 수 있도록 하기 위해서, 본 발명의 실시 예를 첨부한 도면을 참조하여 상세히 설명한다.Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings so that those skilled in the art can easily practice the present invention.

도 1은 본 발명의 일 실시 예에 따른 차량의 카메라 장치의 일 예시도이다.1 is an exemplary view of a camera device for a vehicle according to an embodiment of the present invention.

도 1을 참조하면, 본 발명의 일 실시 예에 따른 차량의 카메라 장치는, 카메라 렌즈부(100), 카메라 센서부(200), 신호 처리부(300) 및 제어부(400)를 포함할 수 있다.Referring to FIG. 1 , a vehicle camera device according to an embodiment of the present invention may include a camera lens unit 100, a camera sensor unit 200, a signal processing unit 300, and a control unit 400.

카메라 렌즈부(100)는, 영상을 입사받아서 카메라 센서부(200)에 전달할 수 있다.The camera lens unit 100 may receive an incident image and transmit it to the camera sensor unit 200 .

카메라 센서부(200)는, 상기 카메라 렌즈부(100)를 통해 입사되는 영상을 센싱하여 영상신호를 제공할 수 있다.The camera sensor unit 200 may provide an image signal by sensing an image incident through the camera lens unit 100 .

신호 처리부(300)는, 상기 카메라 센서부(200)로부터 입력받은 전체 영상에서, 미리 설정된 관심영역(ROI)의 영상을 크롭(crop)하여 ROI 영상신호를 출력할 수 잇다.The signal processing unit 300 may output an ROI image signal by cropping an image of a preset region of interest (ROI) from the entire image received from the camera sensor unit 200 .

제어부(400)는, 차량 주행 속도 정보 및 차량 주행 방향 정보에 기초해서, 상기 카메라 센서부(200)의 관심영역(ROI)을 설정하고, 상기 신호 처리부(300)에 상기 관심영역(ROI)의 영상 크롭을 제어할 수 있다.The control unit 400 sets a region of interest (ROI) of the camera sensor unit 200 based on vehicle driving speed information and vehicle driving direction information, and sends the signal processor 300 to the region of interest (ROI). You can control video cropping.

본 발명의 각 도면에 대해, 동일한 부호 및 동일한 기능의 구성요소에 대해서는 가능한 불필요한 중복 설명은 생략될 수 있고, 각 도면에 대해 가능한 차이점에 대한 사항이 설명될 수 있다.For each drawing of the present invention, unnecessary redundant descriptions of the components having the same reference numerals and the same functions can be omitted, and possible differences can be described for each drawing.

도 2는 도 1의 카메라 장치의 카메라 렌즈부의 촬영 방향 및 화각 설명도이다.FIG. 2 is an explanatory view of a photographing direction and angle of view of a camera lens unit of the camera device of FIG. 1 .

도 1 및 도 2를 참조하면, 예를 들어, 카메라 바디(11)에 장착된 카메라 렌즈부(100)의 촬영 방향은, 좌측 영상(Left image)을 촬영하기 위한 좌측방향, 우측 영상(Right image)을 촬영하기 위한 우측방향, 및 전면 영상(Strait image)을 촬영하기 위한 전면 방향중 하나의 방향이거나 상기 방향들의 중간 방향이 될 수 있다.Referring to FIGS. 1 and 2 , for example, the photographing direction of the camera lens unit 100 mounted on the camera body 11 is the left direction for photographing a left image, and the right image (right image). ), and a front direction for capturing a straight image, or may be an intermediate direction of the above directions.

예를 들어, 카메라 렌즈부의 촬영 화각은, 광각(Wide Angle) 또는 협각(Narrow Angle) 혹은 그 중간의 화각이 될 수 있다. For example, the shooting angle of view of the camera lens unit may be a wide angle, a narrow angle, or a middle angle.

일 예로, 본 발명의 카메라 장치에 의한 카메라의 방향과 화각 조절은, 신호처리를 통해 ROI를 조절하는 디지탈 줌 (Digital Zoom)이나 디지탈 카메라 방향 조절 장치뿐 아니라 실시간 물리적 변경을 통한 옵티컬 줌 (Optical Zoom)에 의해 구현될 수 있으며, 또는 기계적 카메라 방향 조절 장치에 의해 구현될 수 있으며, 특정한 하나의 방식으로 한정될 필요는 없다.For example, the direction and angle of view control of the camera by the camera device of the present invention is not only a digital zoom or digital camera direction control device that adjusts the ROI through signal processing, but also an optical zoom through real-time physical change. ), or may be implemented by a mechanical camera direction control device, and need not be limited to a specific method.

도 3은 카메라 렌즈부의 일 예시도이고, 도 4는 카메라 렌즈부의 촬영 방향 예시도이다.3 is an exemplary view of a camera lens unit, and FIG. 4 is an exemplary view of a photographing direction of a camera lens unit.

도 3을 참조하면, 카메라 렌즈부(100)는, 복수의 렌즈를 포함하는 렌즈부(110)와, 상기 렌즈부(110)의 촬영 방향 및 촬영 화각을 조절할 수 있는 액츄에이터(120)를 포함할 수 있다.Referring to FIG. 3 , the camera lens unit 100 may include a lens unit 110 including a plurality of lenses and an actuator 120 capable of adjusting the shooting direction and the shooting angle of the lens unit 110. can

도 1 내지 도 4를 참조하면, 상기 제어부(400)는, 상기 차량 주행 속도 정보 및 차량 주행 방향 정보에 기초해서, 상기 카메라 렌즈부(100)의 촬영 방향을 제어할 수 있다.1 to 4 , the controller 400 may control the photographing direction of the camera lens unit 100 based on the vehicle driving speed information and the vehicle driving direction information.

이에 따라, 상기 카메라 렌즈부(100)는, 예를 들어, 좌회전(Left Turn) 방향, 우회전(Right Turn) 방향, 직진(Strait) 방향 각각으로 조절될 수 있다. Accordingly, the camera lens unit 100 may be adjusted in each of a left turn direction, a right turn direction, and a straight direction, for example.

또한, 상기 제어부(400)는, 상기 차량 주행 속도 정보 및 차량 주행 방향 정보에 기초해서, 상기 카메라 렌즈부(100)의 촬영 화각을 제어할 수 있다.Also, the control unit 400 may control a photographing angle of view of the camera lens unit 100 based on the vehicle driving speed information and the vehicle driving direction information.

이에 따라, 상기 카메라 렌즈부(100)의 화각은, 예를 들어, 광각(Wide Angle) 또는 협각(Narrow Angle) 등으로 될 수 있다.Accordingly, the angle of view of the camera lens unit 100 may be, for example, a wide angle or a narrow angle.

도 5는 카메라 센서부의 전체 영상에서 관심영역에 대한 일 예시도이고, 도 6은 카메라 센서부의 전체 영상에서 관심영역에 대한 일 예시도이고, 도 7은 카메라 센서부의 전체 영상에서 관심영역에 대한 일 예시도이다.5 is an exemplary view of a region of interest in the entire image of the camera sensor unit, FIG. 6 is an exemplary view of the region of interest in the entire image of the camera sensor unit, and FIG. 7 is an exemplary view of the region of interest in the entire image of the camera sensor unit. is an example

도 5 내지 도 7을 참조하면, 상기 제어부(400)는, 상기 차량 주행 방향 정보에 기초해서, 상기 신호 처리부(300)에 대해, 상기 전체 영상에서 상기 관심영역(ROI)의 위치 이동을 제어할 수 있다.5 to 7 , the control unit 400 controls the signal processing unit 300 to move the position of the region of interest (ROI) in the entire image based on the vehicle driving direction information. can

도 5를 참조하면, 일예로, 차량 주행 방향이 진전 방향일 경우, 카메라 센서부(200)의 전체 8M (3264 x 2448) 영역중에서 관심영역(ROI)은 중앙 2M (1920 x 1080) 영역이 될 수 있다.Referring to FIG. 5 , for example, when the driving direction of the vehicle is the forward direction, the ROI among the entire 8M (3264 x 2448) area of the camera sensor unit 200 will be the central 2M (1920 x 1080) area. can

도 6을 참조하면, 일예로, 차량 주행 방향이 좌측 방향일 경우, 카메라 센서부(200)의 전체 8M 영역중에서 관심영역(ROI)은 좌측 2M 영역이 될 수 있다.Referring to FIG. 6 , for example, when the driving direction of the vehicle is in the left direction, the region of interest (ROI) may be the left 2M region among the entire 8M region of the camera sensor unit 200 .

도 7을 참조하면, 일예로, 차량 주행 방향이 우측 방향일 경우, 카메라 센서부(200)의 전체 8M 영역중에서 관심영역(ROI)은 우측 2M 영역이 될 수 있다.Referring to FIG. 7 , for example, when the driving direction of the vehicle is in the right direction, the region of interest (ROI) may be the right 2M region among the entire 8M region of the camera sensor unit 200 .

예를 들어, 상기 제어부(400)는 상기 차량 주행 방향 정보에 따라 카메라의 방향 뿐 아니라 화각도 조절할 수 있다. For example, the controller 400 may adjust the angle of view as well as the direction of the camera according to the vehicle driving direction information.

일 예로, 상기 제어부(400)는, 상기 차량 주행 속도 정보에 따라 카메라의 화각 뿐 아니라 방향도 조절할 수 있다.For example, the controller 400 may adjust the direction as well as the angle of view of the camera according to the vehicle driving speed information.

일 예로, 상기 제어부(400)는, 차량 주행 방향이 같은 경우에도 상기 차량 주행 속도 정보에 따라 카메라의 방향을 조절할 수 있다.For example, the controller 400 may adjust the direction of the camera according to the vehicle driving speed information even when the driving direction of the vehicle is the same.

일 예로, 상기 제어부(400)는, 차량 주행 속도가 같은 경우에도 상기 차량 주행 방향 정보에 따라 카메라의 화각을 조절할 수 있다.For example, the controller 400 may adjust the angle of view of the camera according to the vehicle driving direction information even when the vehicle driving speed is the same.

전술한 바와 같이, 본 발명의 카메라 장치에서는, 제어부(400)는, 차량 주행 속도 및 차량 주행 방향에 따라 카메라 방향 또는 카메라 화각중 적어도 하나를 조절할 수 있다.As described above, in the camera device of the present invention, the controller 400 may adjust at least one of a camera direction and a camera view angle according to the vehicle driving speed and the vehicle driving direction.

본 발명의 제어부(400)의 조절동작에 대한 예시에 대해, 도 8 및 도 9를 참조하여 설명한다.An example of the adjustment operation of the control unit 400 of the present invention will be described with reference to FIGS. 8 and 9 .

도 8은 카메라 장치의 동작과정 예시도이고, 도 9는 카메라 장치의 동작과정 예시도이다.8 is an example of an operation process of a camera device, and FIG. 9 is an example of an operation process of the camera device.

도 8을 참조하면, 차량 주행 속도가 고속구동(High Speed Driving)인 경우(S810), 구동방향이 좌회전(Left Turn), 직전(Strait), 우회전(Right Turn)인 각각의 경우(S820)에 대해, 카메라 장치(10)의 동작은, 협각 및 좌측 영상((less) Narrow Angle, Left Image), 협각 및 직전영상(Narrow Angle, Strait Image), 및 협각 및 우측 영상((less) Narrow Angle, Right Image)을 촬영하도록 동작할 수 있다(S830).Referring to FIG. 8 , when the driving speed of the vehicle is High Speed Driving (S810), in each case where the driving direction is Left Turn, Straight, Right Turn (S820) For this, the operation of the camera device 10 includes (less) Narrow Angle, Left Image, narrow angle and straight image (Narrow Angle, Straight Image), and narrow angle and right image ((less) Narrow Angle, Right Image) may be operated (S830).

예를 들어, 상기 제어기(400)는, 고속 및 직전(Strait)인 경우에는 협각 및 직전영상(Narrow Angle, Strait Image)을 획득하도록 제어하고, 고속 및 좌회전(Left Turn)인 경우에는, 직전에 비해 덜 협각 및 좌측 영상((less) Narrow Angle, Left Image)을 획득하도록 제어하고, 그리고, 고속 및 우회전(Right Turn)인 각각의 경우에는, 직전에 비해 덜 협각 및 좌측 영상((less) Narrow Angle, Right Image)을 획득하도록 제어할 수 있다.For example, in the case of high speed and straight, the controller 400 controls to acquire a narrow angle and straight image, and in the case of high speed and left turn, the controller 400 controls to obtain a straight image. control to obtain a less narrow angle and left image (less) narrow angle and left image compared to the previous one, and, in each case of high speed and right turn, less narrow angle and left image ((less) Narrow Angle, Right Image) can be controlled to acquire.

도 9를 참조하면, 차량 주행 속도가 저속구동(Low Speed Driving)인 경우(S910), 구동방향이 좌회전(Left Turn), 직전(Strait), 우회전(Right Turn)인 각각의 경우(S920)에 대해, 카메라 장치(10)의 동작은 광각 및 좌측 영상((More) Wide Angle, Left Image), 광각 및 직전영상(Wide Angle, Strait Image), 및 광각 및 우측 영상((More) Wide Angle, Right Image)을 촬영하도록 동작할 수 있다(S830).Referring to FIG. 9 , when the vehicle driving speed is low speed driving (S910), in each case where the driving direction is left turn, straight, or right turn (S920) For this, the operation of the camera device 10 is ((More) Wide Angle, Left Image), (Wide Angle, Straight Image), and (More) Wide Angle, Right Image ((More) Wide Angle, Right Image). Image) may be operated (S830).

예를 들어, 상기 제어기(400)는, 저속 및 직전(Strait)인 경우에는 광각 및 직전영상(Wide Angle, Strait Image)을 획득하도록 제어하고, 저속 및 좌회전(Left Turn)인 경우에는, 직전에 비해 더 광각 및 좌측 영상((More) Wide Angle, Left Image)을 획득하도록 제어하고, 그리고, 저속 및 우회전(Right Turn)인 각각의 경우에는, 직전에 비해 광각 및 우측 영상((More) Wide Angle, Right Image)을 획득하도록 제어할 수 있다.For example, in the case of low speed and straight, the controller 400 controls to acquire a wide angle and straight image, and in the case of low speed and left turn, the controller 400 controls to obtain a straight image. Control to obtain a wider angle and a left image ((More) Wide Angle, Left Image) compared to the previous one, and in each case of a slow speed and a right turn, a wide angle and a right image ((More) Wide Angle) , Right Image) can be controlled to acquire.

도 10은 차량 주행 방향 및 차량 주행 속도에 따른 관심영역 예시도이고, 도 11은 차량 주행 방향 및 차량 주행 속도에 따른 관심영역 예시도이고, 도 12는 차량 주행 방향 및 차량 주행 속도에 따른 관심영역 예시도이다.10 is an exemplary view of a region of interest according to a vehicle driving direction and a vehicle driving speed, FIG. 11 is an exemplary view of a region of interest according to a vehicle driving direction and a vehicle driving speed, and FIG. 12 is an exemplary region of interest according to a vehicle driving direction and a vehicle driving speed. is an example

도 10 내지 도 12를 참조하면, 상기 제어부(400)는, 상기 차량 주행 속도 정보에 기초해서, 상기 신호 처리부(300)에 대해, 상기 전체 영상에서 상기 관심영역(ROI)의 크기를 제어할 수 있다.10 to 12 , the control unit 400 may control the size of the region of interest (ROI) in the entire image with respect to the signal processing unit 300 based on the vehicle driving speed information. there is.

도 10을 참조하면, 차량 주행 속도가 직진 방향 진행중 저속인 경우에는 전체 영상에서 상대적으로 넓은 중앙 관심영역(ROI-SL)이 크롭(Crop)될 수 있고, 차량 주행 속도가 직진 방향 진행중 고속인 경우에는 전체 영상에서 상대적으로 좁은 중앙 관심영역(ROI-FA)으로 크롭(Crop)될 수 있다.Referring to FIG. 10 , when the vehicle driving speed is low while traveling in the straight direction, a relatively wide central region of interest (ROI-SL) in the entire image may be cropped, and when the vehicle driving speed is high while traveling in the straight direction. may be cropped from the entire image to a relatively narrow central region of interest (ROI-FA).

도 11을 참조하면, 차량 주행 속도가 좌회전 진행중 저속인 경우에는 전체 영상에서 상대적으로 넓은 좌측 관심영역(ROI-SL)이 크롭(Crop)될 수 있고, 차량 주행 속도가 좌회전 진행중 고속인 경우에는 전체 영상에서 상대적으로 좁은 좌측 관심영역(ROI-FA)으로 크롭(Crop)될 수 있다.Referring to FIG. 11 , when the vehicle driving speed is low during a left turn, a relatively wide left region of interest (ROI-SL) in the entire image may be cropped, and when the vehicle driving speed is high during a left turn, the entire image may be cropped. The image may be cropped to a relatively narrow left region of interest (ROI-FA).

도 12를 참조하면, 차량 주행 속도가 우회전 진행중 저속인 경우에는 전체 영상에서 상대적으로 넓은 우측 관심영역(ROI-SL)이 크롭(Crop)될 수 있고, 차량 주행 속도가 우회전 진행중 고속인 경우에는 전체 영상에서 상대적으로 좁은 우측 관심영역(ROI-FA)으로 크롭(Crop)될 수 있다.Referring to FIG. 12 , when the vehicle driving speed is low during right turn, the relatively wide right region of interest (ROI-SL) in the entire image may be cropped, and when the vehicle driving speed is high during right turn, the entire image may be cropped. The image may be cropped to a relatively narrow right region of interest (ROI-FA).

한편, 도 4 내지 도 7을 참조하면, 상기 제어부(400)는, 상기 차량 주행 속도 정보 및 상기 차량 주행 방향 정보에 기초해서, 상기 카메라 렌즈부(100)의 촬영방향을 제어하거나, 상기 신호 처리부(300)에 대해 상기 전체 영상에서 상기 관심영역(ROI)의 위치 이동을 제어할 수 있다.Meanwhile, referring to FIGS. 4 to 7 , the control unit 400 controls the photographing direction of the camera lens unit 100 based on the vehicle driving speed information and the vehicle driving direction information, or the signal processing unit With respect to 300, it is possible to control the positional movement of the region of interest (ROI) in the entire image.

한편, 본 발명의 일 실시 예에 따른 카메라 장치의 제어부(400)는, 프로세서(예: 중앙처리장치(CPU), 그래픽처리장치(GPU), 마이크로프로세서, 주문형 반도체(Application Specific Integrated Circuit, ASIC), Field Programmable Gate Arrays(FPGA) 등), 메모리(예: 휘발성 메모리(예를 들어, RAM 등), 비휘발성 메모리(예를 들어, ROM, 플래시 메모리 등), 입력 디바이스(예: 키보드, 마우스, 펜, 음성 입력 디바이스, 터치 입력 디바이스, 적외선 카메라, 비디오 입력 디바이스 등), 출력 디바이스(예: 디스플레이, 스피커, 프린터 등) 및 통신접속장치(예: 모뎀, 네트워크 인터페이스 카드(NIC), 통합 네트워크 인터페이스, 무선 주파수 송신기/수신기, 적외선 포트, USB 접속장치 등)이 서로 상호접속(예: 주변 구성요소 상호접속(PCI), USB, 펌웨어(IEEE 1394), 광학적 버스 구조, 네트워크 등)된 컴퓨팅 환경으로 구현될 수 있다.Meanwhile, the control unit 400 of the camera device according to an embodiment of the present invention may include a processor (eg, a central processing unit (CPU), a graphics processing unit (GPU), a microprocessor, an application specific integrated circuit (ASIC)) , Field Programmable Gate Arrays (FPGA), etc.), memory (e.g., volatile memory (e.g., RAM, etc.), non-volatile memory (e.g., ROM, flash memory, etc.), input device (e.g., keyboard, mouse, pen, voice input device, touch input device, infrared camera, video input device, etc.), output device (e.g. display, speaker, printer, etc.) and communication access device (e.g. modem, network interface card (NIC), integrated network interface , radio frequency transmitters/receivers, infrared ports, USB interfaces, etc.) interconnected with each other (e.g. Peripheral Component Interconnect (PCI), USB, firmware (IEEE 1394), optical bus structures, networks, etc.) can be implemented

상기 컴퓨팅 환경은 개인 컴퓨터, 서버 컴퓨터, 핸드헬드 또는 랩탑 디바이스, 모바일 디바이스(모바일폰, PDA, 미디어 플레이어 등), 멀티프로세서 시스템, 소비자 전자기기, 미니 컴퓨터, 메인프레임 컴퓨터, 임의의 전술된 시스템 또는 디바이스를 포함하는 분산 컴퓨팅 환경 등으로 구현될 수 있으나, 이에 한정되지 않는다.The computing environment may be a personal computer, server computer, handheld or laptop device, mobile device (mobile phone, PDA, media player, etc.), multiprocessor system, consumer electronic device, mini computer, mainframe computer, any of the foregoing systems or It may be implemented in a distributed computing environment including devices, but is not limited thereto.

이상에서는 본 발명을 실시 예로써 설명하였으나, 본 발명은 상기한 실시 예에 한정되지 아니하며, 특허청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 분야에서 통상의 지식을 가진 자라면 누구든지 다양한 변형이 가능할 것이다.In the above, the present invention has been described as an embodiment, but the present invention is not limited to the above-described embodiments, and those skilled in the art in the field to which the invention pertains without departing from the gist of the present invention claimed in the claims Anyone can make various variations.

10: 카메라 장치
11: 카메라 바디부
100: 카메라 렌즈부
200: 카메라 센서부
300: 신호 처리부
400: 제어부
10: camera device
11: camera body
100: camera lens unit
200: camera sensor unit
300: signal processing unit
400: control unit

Claims (9)

영상을 입사받는 카메라 렌즈부;
상기 카메라 렌즈부를 통해 입사되는 영상을 센싱하여 영상신호를 제공하는 카메라 센서부;
상기 카메라 센서부로부터 입력받은 전체 영상에서, 미리 설정된 관심영역의 영상을 크롭(crop)하여 ROI 영상신호를 출력하는 신호 처리부; 및
상기 신호 처리부에 상기 관심영역의 영상 크롭을 제어하고, 카메라가 장착된 차량의 차량 주행 속도 정보 및 상기 차량의 차량 주행 방향 정보에 기초해서 상기 카메라의 방향과 화각을 조절하는 제어부; 를 포함하고,
상기 제어부는,
상기 카메라가 장착된 차량에 대한 상기 차량 주행 속도 정보 및 상기 차량 주행 방향 정보에 기초해서, 상기 카메라 센서부에 대한 상기 관심영역을 설정하는
차량의 카메라 장치.
a camera lens unit receiving an image;
a camera sensor unit for sensing an image incident through the camera lens unit and providing an image signal;
a signal processing unit for outputting an ROI image signal by cropping an image of a preset region of interest from the entire image input from the camera sensor unit; and
a control unit controlling the signal processing unit to crop an image of the region of interest and adjusting a direction and an angle of view of the camera based on vehicle driving speed information of a vehicle equipped with the camera and vehicle driving direction information of the vehicle; including,
The control unit,
Setting the region of interest for the camera sensor unit based on the vehicle driving speed information and the vehicle driving direction information for the vehicle equipped with the camera
Vehicle's camera device.
제1항에 있어서, 상기 제어부는,
상기 차량 주행 방향 정보에 따라 카메라의 방향 뿐 아니라 화각도 조절하는
차량의 카메라 장치.
The method of claim 1, wherein the control unit,
Adjusting the angle of view as well as the direction of the camera according to the vehicle driving direction information
Vehicle's camera device.
제1항에 있어서, 상기 제어부는,
상기 차량 주행 속도 정보에 따라 카메라의 화각 뿐 아니라 방향도 조절하는
차량의 카메라 장치.
The method of claim 1, wherein the control unit,
Adjusting the direction as well as the angle of view of the camera according to the vehicle driving speed information
Vehicle's camera device.
제1항에 있어서, 상기 제어부는,
차량 주행 방향이 같은 경우에도 상기 차량 주행 속도 정보에 따라 카메라의 방향을 조절하는
차량의 카메라 장치.
The method of claim 1, wherein the control unit,
Adjusting the direction of the camera according to the vehicle driving speed information even when the vehicle driving direction is the same
Vehicle's camera device.
제1항에 있어서, 상기 제어부는,
차량 주행 속도가 같은 경우에도 상기 차량 주행 방향 정보에 따라 카메라의 화각을 조절하는
차량의 카메라 장치.
The method of claim 1, wherein the control unit,
Adjusting the angle of view of the camera according to the vehicle driving direction information even when the vehicle driving speed is the same
Vehicle's camera device.
제1항에 있어서, 상기 제어부는,
상기 차량 주행 방향 정보에 기초해서, 상기 신호 처리부에 대해, 상기 전체 영상에서 상기 관심영역의 위치 이동을 제어하는
차량의 카메라 장치.
The method of claim 1, wherein the control unit,
Based on the vehicle driving direction information, for the signal processing unit, controlling the positional movement of the region of interest in the entire image
Vehicle's camera device.
제1항에 있어서, 상기 제어부는,
상기 차량 주행 속도 정보에 기초해서, 상기 신호 처리부에 대해, 상기 전체 영상에서 상기 관심영역의 크기를 제어하는
차량의 카메라 장치.
The method of claim 1, wherein the control unit,
Based on the vehicle driving speed information, for the signal processing unit, controlling the size of the ROI in the entire image
Vehicle's camera device.
제1항에 있어서, 상기 제어부는,
상기 차량 주행 속도 정보 및 차량 주행 방향 정보에 기초해서, 상기 카메라 렌즈부의 촬영 화각 및 촬영 방향을 제어하는
차량의 카메라 장치.
The method of claim 1, wherein the control unit,
Controlling a photographing angle and a photographing direction of the camera lens unit based on the vehicle driving speed information and the vehicle driving direction information.
Vehicle's camera device.
제1항에 있어서, 상기 제어부는,
상기 차량 주행 속도 정보 및 상기 차량 주행 방향 정보에 기초해서, 상기 카메라 렌즈부의 촬영방향을 제어하거나, 상기 신호 처리부에 대해 상기 전체 영상에서 상기 관심영역의 위치 이동을 제어하는
차량의 카메라 장치.
The method of claim 1, wherein the control unit,
Based on the vehicle driving speed information and the vehicle driving direction information, controlling a photographing direction of the camera lens unit or controlling position movement of the region of interest in the entire image with respect to the signal processing unit
Vehicle's camera device.
KR1020210057428A 2021-05-03 2021-05-03 Camera apparatus for vehicle KR102538907B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020210057428A KR102538907B1 (en) 2021-05-03 2021-05-03 Camera apparatus for vehicle

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020210057428A KR102538907B1 (en) 2021-05-03 2021-05-03 Camera apparatus for vehicle

Publications (2)

Publication Number Publication Date
KR20220150111A KR20220150111A (en) 2022-11-10
KR102538907B1 true KR102538907B1 (en) 2023-06-01

Family

ID=84101712

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020210057428A KR102538907B1 (en) 2021-05-03 2021-05-03 Camera apparatus for vehicle

Country Status (1)

Country Link
KR (1) KR102538907B1 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102497488B1 (en) * 2022-11-29 2023-02-08 주식회사 셀플러스코리아 Image recognition apparatus for adjusting recognition range according to driving speed of autonomous vehicle

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2018164199A (en) * 2017-03-27 2018-10-18 ソニーセミコンダクタソリューションズ株式会社 Image processing device and image processing method

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20080022980A (en) * 2006-09-08 2008-03-12 주식회사 메디슨 Image processing system and method
KR101288449B1 (en) * 2010-03-09 2013-07-26 경상대학교산학협력단 Vehicles controlling apparatus and controlling method thereof
KR101480166B1 (en) * 2012-12-27 2015-01-08 태하메카트로닉스 (주) Camera module
KR102584955B1 (en) * 2018-07-02 2023-10-06 현대모비스 주식회사 System for remote parking and method thereof, apparatus for recognizing object of vehicle

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2018164199A (en) * 2017-03-27 2018-10-18 ソニーセミコンダクタソリューションズ株式会社 Image processing device and image processing method

Also Published As

Publication number Publication date
KR20220150111A (en) 2022-11-10

Similar Documents

Publication Publication Date Title
CN109309796B (en) Electronic device for acquiring image using multiple cameras and method for processing image using the same
CN108718373B (en) Image device
EP3062148B1 (en) Device with an adaptive camera array
CN107209397B (en) Imaging lens with image stabilization
WO2018057994A2 (en) Predictive, foveated virtual reality system
KR102382871B1 (en) Electronic Device for controlling lens focus and the controlling Method thereof
CN107490842B (en) Image pickup module, imaging apparatus, and image processing method
JP2013246313A (en) Camera and portable terminal apparatus
CN109835266B (en) Image pickup device module
KR20190034876A (en) A camera module comprising a plurality of actuators having different directions of magnetic fields
KR102538907B1 (en) Camera apparatus for vehicle
WO2020124517A1 (en) Photographing equipment control method, photographing equipment control device and photographing equipment
US10362231B2 (en) Head down warning system
CN115989680A (en) Image stabilizing method and electronic device thereof
KR101038815B1 (en) Image capture system capable of fast auto focus
JP6653456B1 (en) Imaging device
JP2015185923A (en) Imaging apparatus and on-vehicle camera system
KR20150090775A (en) Camera module
US20150168809A1 (en) Focus control apparatus and focus control method
KR102473407B1 (en) Vehicle's svm system using tilt camera
KR102327734B1 (en) Vehicle camera system and method of operation of the same
JPWO2014115489A1 (en) Stereo camera
KR20230033994A (en) Electronic device including a plurality of cameras and operating method thereof
US10324363B2 (en) Image device capable of compensating image variation
KR20230001760A (en) Method of image stabilization and electronic device therefor

Legal Events

Date Code Title Description
AMND Amendment
E601 Decision to refuse application
X091 Application refused [patent]
AMND Amendment
X701 Decision to grant (after re-examination)