KR102529908B1 - Apparatus and method for generating time-lapse image using camera in vehicle - Google Patents

Apparatus and method for generating time-lapse image using camera in vehicle Download PDF

Info

Publication number
KR102529908B1
KR102529908B1 KR1020170167263A KR20170167263A KR102529908B1 KR 102529908 B1 KR102529908 B1 KR 102529908B1 KR 1020170167263 A KR1020170167263 A KR 1020170167263A KR 20170167263 A KR20170167263 A KR 20170167263A KR 102529908 B1 KR102529908 B1 KR 102529908B1
Authority
KR
South Korea
Prior art keywords
time
speed
lapse
vehicle
image
Prior art date
Application number
KR1020170167263A
Other languages
Korean (ko)
Other versions
KR20190067380A (en
Inventor
김연지
Original Assignee
현대자동차주식회사
기아 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 현대자동차주식회사, 기아 주식회사 filed Critical 현대자동차주식회사
Priority to KR1020170167263A priority Critical patent/KR102529908B1/en
Publication of KR20190067380A publication Critical patent/KR20190067380A/en
Application granted granted Critical
Publication of KR102529908B1 publication Critical patent/KR102529908B1/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/66Remote control of cameras or camera parts, e.g. by remote control devices
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/02Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/10Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to vehicle motion
    • B60W40/105Speed
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects
    • H04N23/611Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2420/00Indexing codes relating to the type of sensors based on the principle of their operation
    • B60W2420/40Photo, light or radio wave sensitive means, e.g. infrared sensors
    • B60W2420/403Image sensing, e.g. optical camera
    • B60W2420/42
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2520/00Input parameters relating to overall vehicle dynamics
    • B60W2520/10Longitudinal speed

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)
  • Mathematical Physics (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Traffic Control Systems (AREA)

Abstract

본 발명의 차량 카메라를 이용한 타임랩스 영상 생성 장치는 차량 주변의 이미지 및 운전자 영상을 획득하는 영상 획득부와, 상기 획득된 차량 주변 이미지가 제1속도를 갖도록 처리하여 타임랩스 영상을 생성하는 영상 처리부와, 차량의 속도 및 운전자 시선방향을 검출하는 검출부와, 차량의 위치를 측정하는 내비게이션과, 상기 차량 위치, 상기 차량의 속도 및 상기 운전자 시선방향을 기반으로 상기 타임랩스 영상 속도를 조절하는 제어부 및 상기 타임랩스 영상을 출력하는 디스플레이를 포함하여, 운전자의 시선이 전방으로부터 벗어나거나 차량의 속도가 감소되는 경우 타임랩스의 영상 속도를 낮추어 차량 외부 경관을 자세히 기록하도록 할 수 있다. 운전자의 시선이 전방을 유지하거나 차량의 속도가 고속인 경우 타임랩스의 영상 속도를 증가시켜 영상을 단축하도록 할 수 있다. An apparatus for generating a time-lapse image using a vehicle camera of the present invention includes an image acquisition unit that acquires an image around a vehicle and an image of a driver, and an image processing unit that processes the acquired image around the vehicle to have a first speed to generate a time-lapse image. A detector for detecting the speed of the vehicle and the direction of the driver's gaze, a navigation system for measuring the position of the vehicle, and a control unit for adjusting the speed of the time-lapse video based on the vehicle position, the speed of the vehicle, and the direction of the driver's gaze; and Including a display that outputs the time-lapse video, when the driver's line of sight deviates from the front or the speed of the vehicle decreases, the video speed of the time-lapse video can be lowered so that the external scenery of the vehicle can be recorded in detail. When the driver's eyes keep looking forward or the speed of the vehicle is high, the time-lapse image speed may be increased to shorten the image.

Description

차량 카메라를 이용한 타임랩스 영상 생성 장치 및 방법{APPARATUS AND METHOD FOR GENERATING TIME-LAPSE IMAGE USING CAMERA IN VEHICLE} Apparatus and method for generating time-lapse images using vehicle cameras {APPARATUS AND METHOD FOR GENERATING TIME-LAPSE IMAGE USING CAMERA IN VEHICLE}

본 발명은 차량 카메라를 이용한 타임랩스 영상 생성 장치 및 방법에 관한 것으로, 타입 랩스 영상의 녹화속도를 조절하는 차량 카메라를 이용한 타임랩스 영상 생성 장치 및 방법에 관한 것이다. The present invention relates to an apparatus and method for generating a time-lapse image using a vehicle camera, and more particularly, to an apparatus and method for generating a time-lapse image using a vehicle camera for controlling a recording speed of a time-lapse image.

타임 랩스(TIME-LAPSE)는 긴 지속시간을 건너 띄면서 미리 예정된 일정 간격에 따라 한번에 한 프레임 씩 촬영하는 방식으로, 간헐 촬영, 미속 촬영 또는 완속 촬영이라고 한다. 타임 랩스 영상을 정상속도로 영사하면, 시간과 속도의 압축으로 인해 한 순간의 동작으로 나타나게 된다. 이렇게 생성된 다수의 영상 파일들을 동영상 편집 프로그램을 이용하여 편집함으로써 타임 랩스가 생성된다.Time-lapse (TIME-LAPSE) is a method of shooting one frame at a time according to a pre-scheduled interval while skipping a long duration. When a time-lapse video is projected at normal speed, it appears as a single moment of motion due to the compression of time and speed. A time lapse is created by editing a plurality of image files thus generated using a video editing program.

한편, 일반적으로 차량 내부에 탑승하는 운전자의 시야는 주로 전방에 고정되어 있다. 따라서, 운전자의 좌우측과 후방 시야는 차체에 의하여 상당부분 가려지기 때문에 매우 한정될 수 있다.On the other hand, the field of view of a driver riding in a vehicle is generally fixed to the front. Accordingly, the driver's left and right and rear view may be very limited because a significant part is covered by the vehicle body.

이를 위해 통상적으로 운전자의 한정된 범위의 시야를 보완키 위한 거울 포함하여 이루어지는 보조수단 예를들면, 사이드 미러 등이 사용될 수 있으며, 최근에는 차량의 외부의 영상을 촬영하여 운전자에게 제공하는 영상획득수단을 포함하는 기술들이 차량에 적용되고 있는 추세이다.To this end, auxiliary means including a mirror for complementing the driver's limited range of vision may be used, for example, a side mirror, etc. It is a trend that the technologies including these are being applied to vehicles.

그 중에서 현재 차량 주위에 복수의 카메라를 설치하여 차량 주변의 전 방향의 영상을 보여주는 주변모니터링 시스템이 있다. 주변모니터링 기술은 차량 주변을 촬영하는 카메라를 복수개 설치하고, 복수의 카메라를 통하여 촬영된 차량 주변의 전방향의 영상을 운전자에게 제공함으로써, 차량 주변에 사각지대를 해소하도록 이루어진다.Among them, there is a peripheral monitoring system that displays images in all directions around the vehicle by installing a plurality of cameras around the current vehicle. Peripheral monitoring technology installs a plurality of cameras that take pictures of the vehicle's surroundings, and provides the driver with omnidirectional images of the vehicle's surroundings captured through the plurality of cameras, thereby eliminating blind spots around the vehicle.

최근에는 차량의 주변을 모니터링하는 장치 및 차량 실내에 구비되는 카메라를 이용하여 차량 내/외부를 타임랩스로 촬영하여 여행 및 일상을 기록하는 기능이 제안되었다. Recently, a function to record travel and daily life by time-lapse photography of the inside/outside of the vehicle using a device for monitoring the surroundings of the vehicle and a camera provided inside the vehicle has been proposed.

본 발명은 차량의 주변을 모니터링하는 장치를 이용하여 차량 내/외부를 촬영하되, 운전자의 시선 방향과 차량의 속도를 기반으로 타임랩스의 영상 속도를 조절하도록 하는 차량 카메라를 이용한 타임랩스 영상 생성 장치 및 방법을 제공하는 것이다. The present invention is a device for generating a time-lapse image using a vehicle camera to photograph the interior/exterior of the vehicle using a device for monitoring the surroundings of the vehicle, and to adjust the speed of the time-lapse image based on the direction of the driver's gaze and the speed of the vehicle. and to provide a method.

본 발명의 차량 카메라를 이용한 타임랩스 영상 생성 장치는 차량 주변의 이미지 및 운전자 영상을 획득하는 영상 획득부와, 상기 획득된 차량 주변 이미지가 제1속도를 갖도록 처리하여 타임랩스 영상을 생성하는 영상 처리부와, 차량의 속도 및 운전자 시선방향을 검출하는 검출부와, 차량의 위치를 측정하는 위치 측정부와, 상기 차량 위치, 상기 차량의 속도 및 상기 운전자 시선방향을 기반으로 상기 타임랩스 영상 속도를 조절하는 제어부를 포함하는 것을 특징으로 한다.An apparatus for generating a time-lapse image using a vehicle camera of the present invention includes an image acquisition unit that acquires an image around a vehicle and an image of a driver, and an image processing unit that processes the acquired image around the vehicle to have a first speed to generate a time-lapse image. A detector for detecting the speed of the vehicle and the direction of the driver's gaze, a position measuring unit for measuring the position of the vehicle, and adjusting the speed of the time-lapse video based on the vehicle position, the speed of the vehicle, and the direction of the driver's gaze It is characterized in that it includes a control unit.

그리고, 상기 제어부는 상기 차량이 관심지역에 위치하지 않으면, 상기 타임랩스 영상속도를 증가시키는 것을 특징으로 한다.And, the control unit may increase the time-lapse video speed when the vehicle is not located in the region of interest.

그리고, 상기 제어부는 상기 차량의 속도가 소정속도 이상이면, 상기 타임랩스 영상속도를 증가시키는 것을 특징으로 한다.The control unit may increase the time-lapse video speed when the speed of the vehicle is equal to or greater than a predetermined speed.

그리고, 상기 제어부는 상기 운전자의 시선이 상기 차량의 전방을 향하고 있으면, 상기 타임랩스 영상속도를 증가시키는 것을 특징으로 한다.The control unit may increase the time-lapse image speed when the driver's gaze is directed toward the front of the vehicle.

그리고, 상기 제어부는 상기 차량이 관심지역에 위치하면, 상기 타임랩스 영상속도를 감소시키는 것을 특징으로 한다.And, the control unit may reduce the time-lapse video speed when the vehicle is located in the region of interest.

그리고, 상기 제어부는 상기 차량의 속도가 소정속도 미만이면, 상기 타임랩스 영상속도를 감소시키는 것을 특징으로 한다.The control unit may reduce the time-lapse video speed when the speed of the vehicle is less than a predetermined speed.

그리고, 상기 제어부는 상기 운전자의 시선이 상기 차량의 전방을 향하고 있지 않으면, 상기 타임랩스 영상속도를 감소시키는 것을 특징으로 한다.The control unit may reduce the time-lapse image speed when the driver's line of sight does not face the front of the vehicle.

그리고, 상기 영상 처리부는 타임랩스 촬영속도를 상기 제1속도보다 느린 제2속도로 하여 상기 타임랩스 영상속도를 증가시키는 것을 특징으로 한다.And, the image processing unit is characterized in that to increase the time-lapse video speed by setting the time-lapse shooting speed to a second speed slower than the first speed.

그리고, 상기 영상 처리부는 상기 타임랩스 촬영속도를 상기 제1속도보다 빠른 제3속도로 하여 상기 타임랩스 영상속도를 감소시키는 것을 특징으로 한다.Further, the image processing unit is characterized in that the time-lapse shooting speed is set to a third speed faster than the first speed to decrease the time-lapse video speed.

그리고, 상기 타임랩스 영상을 출력하는 디스플레이를 더 포함하는 것을 특징으로 한다.And, it is characterized in that it further comprises a display for outputting the time-lapse video.

본 발명의 차량 카메라를 이용한 타임랩스 영상 생성 방법은 차량 주변의 이미지를 획득하고, 차량의 속도, 차량의 위치 및 운전자의 시선방향을 검출하는 단계 및 상기 획득된 차량 주변 이미지가 제1속도를 갖도록 처리하여 타임랩스 영상을 생성하는 단계를 포함하되, 상기 타임랩스 영상을 생성하는 단계에서 차량의 속도, 차량의 위치 및 운전자의 시선을 기반으로 상기 타임랩스 영상속도를 조절하여 상기 타임랩스 영상을 생성하는 것을 특징으로 한다.The method for generating a time-lapse image using a vehicle camera of the present invention includes the steps of acquiring an image around the vehicle, detecting the speed of the vehicle, the position of the vehicle, and the direction of the driver's gaze, and so that the obtained image around the vehicle has a first speed. processing to generate a time-lapse image, wherein in the step of generating the time-lapse image, the time-lapse image is generated by adjusting the speed of the time-lapse image based on the speed of the vehicle, the position of the vehicle, and the driver's line of sight. It is characterized by doing.

그리고, 상기 타임랩스 영상을 생성하는 단계는 상기 차량이 관심지역에 위치하지 않으면, 상기 타임랩스 영상속도를 증가시키는 것을 특징으로 한다.In the generating of the time-lapse image, the time-lapse image speed may be increased if the vehicle is not located in the region of interest.

그리고, 상기 타임랩스 영상을 생성하는 단계는 상기 차량의 속도가 소정속도 이상이면, 상기 타임랩스 영상속도를 증가시키는 것을 특징으로 한다.In the generating of the time-lapse image, the time-lapse image speed may be increased when the speed of the vehicle is greater than or equal to a predetermined speed.

그리고, 상기 타임랩스 영상을 생성하는 단계는 상기 운전자의 시선이 상기 차량의 전방을 향하고 있으면, 상기 타임랩스 영상속도를 증가시키는 것을 특징으로 한다.In the generating of the time-lapse image, when the driver's gaze is directed toward the front of the vehicle, the time-lapse image speed is increased.

그리고, 상기 타임랩스 영상을 생성하는 단계는 상기 차량이 관심지역에 위치하면, 상기 타임랩스 영상속도를 감소시키는 것을 특징으로 한다.In the generating of the time-lapse image, when the vehicle is located in the region of interest, the time-lapse image speed is reduced.

그리고, 상기 타임랩스 영상을 생성하는 단계는 상기 차량의 속도가 소정속도 미만이면, 상기 타임랩스 영상속도를 감소시키는 것을 특징으로 한다.In the generating of the time-lapse image, the time-lapse image speed may be reduced when the speed of the vehicle is less than a predetermined speed.

그리고, 상기 타임랩스 영상을 생성하는 단계는 상기 운전자의 시선이 상기 차량의 전방을 향하고 있지 않으면, 상기 타임랩스 영상속도를 감소시키는 것을 특징으로 한다.The generating of the time-lapse image may include reducing the time-lapse image speed when the driver's line of sight does not face the front of the vehicle.

그리고, 상기 타임랩스 영상을 생성하는 단계는 타임랩스 촬영속도를 상기 제1속도보다 느린 제2속도로 하여 상기 타임랩스 영상속도를 증가시키는 것을 특징으로 한다.In the generating of the time-lapse video, the time-lapse shooting speed is set to a second speed slower than the first speed, and the time-lapse video speed is increased.

그리고, 상기 타임랩스 영상을 생성하는 단계는 상기 타임랩스 촬영속도를 상기 제1속도보다 빠른 제3속도로 하여 상기 타임랩스 영상속도를 감소시키는 것을 특징으로 한다.The step of generating the time-lapse video may include reducing the time-lapse video speed by making the time-lapse shooting speed a third speed faster than the first speed.

본 발명의 차량 카메라를 이용한 타임랩스 영상 생성 장치 및 방법은 운전자의 시선이 전방으로부터 벗어나거나 차량의 속도가 감소되는 경우 타임랩스의 영상 속도를 낮추어 차량 외부 경관을 자세히 기록하도록 할 수 있다.In the apparatus and method for generating a time-lapse image using a vehicle camera of the present invention, when the driver's line of sight deviates from the front or the speed of the vehicle decreases, the speed of the time-lapse image may be lowered to record the external scenery of the vehicle in detail.

또한, 본 발명의 차량 카메라를 이용한 타임랩스 영상 생성 장치 및 방법은 운전자의 시선이 전방을 유지하거나 차량의 속도가 고속인 경우 타임랩스의 영상 속도를 증가시켜 영상을 단축하도록 할 수 있다. In addition, the apparatus and method for generating a time-lapse image using a vehicle camera of the present invention may shorten the image by increasing the speed of the time-lapse image when the driver's gaze keeps looking forward or the vehicle speed is high.

도 1은 본 발명의 차량 카메라를 이용한 타임랩스 영상 생성 장치를 나타낸 구성도이다.
도 2는 본 발명의 차량 카메라를 이용한 타임랩스 영상 생성 방법을 나타낸 순서도이다.
1 is a configuration diagram showing a time-lapse image generating apparatus using a vehicle camera of the present invention.
2 is a flowchart illustrating a method for generating a time-lapse image using a vehicle camera of the present invention.

이하, 본 발명의 일부 실시예들을 예시적인 도면을 통해 상세하게 설명한다. 각 도면의 구성요소들에 참조부호를 부가함에 있어서, 동일한 구성요소들에 대해서는 비록 다른 도면상에 표시되더라도 가능한 한 동일한 부호를 가지도록 하고 있음에 유의해야 한다. 또한, 본 발명의 실시예를 설명함에 있어, 관련된 공지 구성 또는 기능에 대한 구체적인 설명이 본 발명의 실시예에 대한 이해를 방해한다고 판단되는 경우에는 그 상세한 설명은 생략한다.Hereinafter, some embodiments of the present invention will be described in detail through exemplary drawings. In adding reference numerals to components of each drawing, it should be noted that the same components have the same numerals as much as possible even if they are displayed on different drawings. In addition, in describing an embodiment of the present invention, if it is determined that a detailed description of a related known configuration or function hinders understanding of the embodiment of the present invention, the detailed description will be omitted.

본 발명의 실시예의 구성 요소를 설명하는 데 있어서, 제 1, 제 2, A, B, (a), (b) 등의 용어를 사용할 수 있다. 이러한 용어는 그 구성 요소를 다른 구성 요소와 구별하기 위한 것일 뿐, 그 용어에 의해 해당 구성 요소의 본질이나 차례 또는 순서 등이 한정되지 않는다. 또한, 다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가진다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥상 가지는 의미와 일치하는 의미를 가진 것으로 해석되어야 하며, 본 출원에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.In describing the components of the embodiment of the present invention, terms such as first, second, A, B, (a), and (b) may be used. These terms are only used to distinguish the component from other components, and the nature, order, or order of the corresponding component is not limited by the term. In addition, unless defined otherwise, all terms used herein, including technical or scientific terms, have the same meaning as commonly understood by a person of ordinary skill in the art to which the present invention belongs. Terms such as those defined in commonly used dictionaries should be interpreted as having a meaning consistent with the meaning in the context of the related art, and unless explicitly defined in the present application, they should not be interpreted in an ideal or excessively formal meaning. don't

본 발명은 타임랩스 영상 생성 장치 및 방법에 관한 것으로, 차량의 카메라를 이용하여 타임랩스 영상을 생성하되, 운전자의 상태 및 차량의 위치에 따라 타임랩스 영상속도를 조절하여 타임랩스 영상을 생성할 수 있다. The present invention relates to an apparatus and method for generating a time-lapse image, wherein a time-lapse image can be generated using a camera of a vehicle, but the time-lapse image can be generated by adjusting the speed of the time-lapse image according to the driver's condition and the location of the vehicle. there is.

예를들어, 운전자가 전방을 주시하고 있거나 차량의 속도가 빨라, 차량 주변의 환경이 크게 변화되고 있지 않다고 판단되는 경우 타임랩스 영상속도를 빠르게 조절하여 영상을 단축할 수 있다. For example, if it is determined that the environment around the vehicle is not significantly changing because the driver is looking ahead or the vehicle is moving fast, the video may be shortened by rapidly adjusting the speed of the time-lapse video.

또한, 운전자가 전방을 주시하고 있지 않고 차량의 속도가 느린경우, 운전자가 차량 주변의 환경에 관심이 있다고 판단하여 타임랩스 영상속도를 느리게 조절하여 주변환경이 자세히 기록되도록 할 수 있다. 보다 자세한 설명은 도 1을 참조한다.In addition, when the driver is not looking ahead and the speed of the vehicle is slow, it is determined that the driver is interested in the environment around the vehicle and the time-lapse video speed is adjusted slowly so that the surrounding environment can be recorded in detail. See FIG. 1 for a more detailed description.

도 1은 본 발명의 본 발명의 차량 카메라를 이용한 타임랩스 영상 생성 장치를 나타낸 구성도이다.1 is a configuration diagram showing a time-lapse image generating apparatus using a vehicle camera of the present invention of the present invention.

도 1에 도시된 바와 같이, 본 발명의 차량 카메라를 이용한 타임랩스 영상 생성 장치는 영상 획득부(10), 검출부(20), 통신부(30), 네비게이션(40), 디스플레이(50), 저장부(60) 및 제어부(70)를 포함할 수 있다. As shown in FIG. 1, the apparatus for generating a time-lapse image using a vehicle camera of the present invention includes an image acquisition unit 10, a detection unit 20, a communication unit 30, a navigation unit 40, a display 50, and a storage unit. (60) and a control unit (70).

영상 획득부(10)는 차량의 외부에 설치되어 차량 주변의 영상을 획득하는 SVM(SURROUND VIEW MONITOR) 장치를 포함할 수 있다. 영상 획득부(10)는 타임랩스 영상 생성 장치와 유선 또는 무선으로 연결되어 타임랩스 영상 생성 장치로부터 이격되어 설치되도록 구성될 수 있다. 이 경우 타임랩스 영상 생성 장치와 유선 케이블 또는 블루투스, WiFi 또는 적외선 통신 등의 통신 모듈을 통해 통신할 수 있도록 구성한다. 일 실시예에 따르면, 사용자는 타임랩스 영상 생성 장치의 설치 위치와 무관하게 차량 주변의 촬영이 용이한 지점에 영상 획득부(10)를 고정 설치할 수 있다.The image acquisition unit 10 may include a SVM (SURROUND VIEW MONITOR) device that is installed outside the vehicle and acquires an image around the vehicle. The image acquisition unit 10 may be configured to be installed apart from the time-lapse image generating device by being connected to the time-lapse image generating device by wire or wirelessly. In this case, it is configured to communicate with the time-lapse video generating device through a communication module such as a wired cable or Bluetooth, WiFi, or infrared communication. According to an embodiment, the user may fix the image acquisition unit 10 at a location where it is easy to take a picture around the vehicle regardless of the installation location of the time-lapse image generating device.

영상 획득부(10)는 카메라를 포함할 수 있으며, 차량의 전방의 영상을 획득하는 전방 초광각 카메라, 차량 후방의 영상을 획득하는 후방 초광각 카메라, 차량의 좌우측면의 영상을 획득하는 좌측 초광각 카메라 및 우측 초광각 카메라를 포함할 수 있다. 영상 획득부(10)는 차량의 전방, 후방, 좌우 양 측면의 영상을 획득할 수 있다면, 카메라의 설치 위치 나 개수의 제한은 없다. 영상 획득부(10)는 CCD 또는 CMOS 센서 등의 이미지 센서를 포함할 수 있으며, 이미지 센서를 통해 이미지를 획득할 수 있다. The image acquisition unit 10 may include a camera, a front ultra-wide camera for acquiring an image of the front of the vehicle, a rear ultra-wide-angle camera for acquiring an image of the rear of the vehicle, a left ultra-wide-angle camera for acquiring images of the left and right sides of the vehicle, and It may include an ultra-wide-angle camera on the right. As long as the image acquisition unit 10 can acquire images of the front, rear, left and right sides of the vehicle, there is no limitation on the installation location or number of cameras. The image acquisition unit 10 may include an image sensor such as a CCD or CMOS sensor, and may obtain an image through the image sensor.

영상 획득부(10)는 차량 내부에 설치되어 운전자의 영상을 획득할 수 있다. 이를 위하여 영상 획득부(10)는 차량 룸미러에 설치될 수 있지만 이에 한정되는 것은 아니다.The image acquisition unit 10 may be installed inside the vehicle to acquire a driver's image. To this end, the image acquisition unit 10 may be installed in a vehicle room mirror, but is not limited thereto.

영상 획득부(10)는 영상 처리부(11)를 포함할 수 있다. 그러나 이에 한정되지 않고 영상 처리부(11)는 영상 획득부(10)에 포함되어 일체형으로 제공될 수도 있고, 영상 획득부(10)과 별도로 마련될 수도 있다.The image acquisition unit 10 may include an image processing unit 11 . However, the image processing unit 11 is not limited thereto and may be included in the image acquisition unit 10 and provided integrally or may be provided separately from the image acquisition unit 10 .

영상 처리부(11)는 영상 획득부(10)로부터 획득된 이미지를 기반으로 동영상 을 생성할 수 있다. 동영상은 촬영속도(초당 프레임 수)를 변화하여 처리될 수 있다. 예를들면, 초당 프레임 수가 평균값을 갖도록 처리(예, 30FPS)되면 일반 동영상을 생성할 수 있고, 초당 프레임 수가 평균값보다 작은 값을 갖도록 처리(예, 30FPS 미만)되면, 즉 저속 촬영 또는 타임랩스 촬영되면 타임랩스 영상을 생성할 수 있다. The image processing unit 11 may generate a video based on the image obtained from the image acquisition unit 10. Moving pictures can be processed by changing the shooting speed (frames per second). For example, if the number of frames per second is processed to have an average value (eg, 30 FPS), a general video can be created, and if the number of frames per second is processed to have a value smaller than the average value (eg, less than 30 FPS), that is, time-lapse or time-lapse shooting Then, you can create a time-lapse video.

또한, 영상 처리부(11)는 저속 촬영 또는 타임랩스 촬영하는데 있어서도 타임랩스 촬영속도를 감소시켜 타임랩스 영상속도를 증가시킬 수 있다. 타임랩스 영상속도를 증가시키는 것은 타임랩스 촬영된 영상이 재생되는 속도가 빨라지는 것으로 이해될 수 있다. 그리고, 영상 처리부(11)는 타임랩스 촬영속도를 증가시켜 타임랩스 영상속도를 감소시킬 수 있다. 타임랩스 영상속도를 감소시키는 것은 타임랩스 촬영된 영상이 재생되는 속도가 늦어지는 것으로 이해될 수 있다. In addition, the image processing unit 11 may increase the time-lapse video speed by reducing the time-lapse shooting speed even in time-lapse photography or time-lapse photography. Increasing the time-lapse image speed may be understood as increasing the speed at which the time-lapse photographed image is reproduced. Also, the image processing unit 11 may decrease the time-lapse image speed by increasing the time-lapse photographing speed. Reducing the time-lapse video speed may be understood as slowing down the speed at which the time-lapse photographed video is reproduced.

실시예에 따라, 영상 처리부(11)가 타임랩스 영상을 생성하는데 있어서 제1속도로 이미지를 처리하면, 영상 처리부(11)는 타임랩스 영상속도를 증가시키기 위하여 제1속도보다 느린 제2속도로 이미지를 처리할 수 있다. 또한, 영상 처리부(11)는 타임랩스 영상속도를 감소시키기 위하여 제1속도보다 빠른 제3속도로 이미지를 처리할 수 있다. According to the embodiment, when the image processing unit 11 processes an image at a first speed in generating a time-lapse video, the image processing unit 11 converts the image to a second speed slower than the first speed in order to increase the time-lapse video speed. images can be processed. Also, the image processing unit 11 may process the image at a third rate faster than the first rate in order to reduce the time-lapse image rate.

참고로, 저속 촬영 또는 타임랩스 촬영은 프레임의 캡쳐 주기를 연속된 프레임의 주기보다 낮춰서 촬영하는 기법으로, 저속 촬영 또는 타임랩스 촬영된 영상은 정상 속도로 재생하더라도 빠른 움직임으로 표현될 수 있다. 예를들면 꽃이 피는 과정은 보통의 속도로 촬영하고 재생하는 경우 꽃이 피어나면서 변화되는 과정을 한눈에 알아볼 수 없지만, 저속 촬영 또는 타임랩스 촬영하고 재생하는 경우, 꽃이 피어나는 과정이 빠른 속도로 표현되기 때문에 쉽게 알아볼 수 있다. For reference, time-lapse photography or time-lapse photography is a technique in which the capture cycle of frames is lower than that of consecutive frames, and the time-lapse or time-lapse images can be expressed as fast motion even when reproduced at normal speed. For example, if the process of blooming flowers is filmed and played back at normal speed, the process of blooming and changing cannot be discerned at a glance. It is easily recognizable because it is expressed as

검출부(20)는 레이더, 적외선 센서, 이미지센서, 중력센서, 종가속도 센서, 횡가속도 센서, 속도 센서 등의 각종 센서들로 구성될 수 있다. 이러한 검출부(20)는 자차의 전방 장애물 및/또는 후측방 장애물, 또는 전방위 장애물을 감지할 수 있다. 일 실시예에 따르면, 검출부(20)는 차량의 속도를 검출할 수 있고, 영상 획득부(10)에서 획득된 운전자 영상을 이용하여 운전자의 시선방향을 검출할 수 있다. The detection unit 20 may be composed of various sensors such as a radar, an infrared sensor, an image sensor, a gravity sensor, a longitudinal acceleration sensor, a lateral acceleration sensor, and a speed sensor. The detection unit 20 may detect front obstacles and/or rear side obstacles, or omnidirectional obstacles of the vehicle. According to an embodiment, the detection unit 20 may detect the speed of the vehicle and may detect the direction of the driver's gaze using the driver's image acquired by the image acquisition unit 10 .

통신부(30)는 무선 접속 장치(Access Point) 등을 통하여 근거리 통신망(Local Area Network: LAN)에 접속하는 와이파이(Wireless Fidelity: WiFi) 통신 모듈, 단일의 외부 장치와 일-대-일로 통신하거나 소수의 외부 장치와 일-대-다로 통신하는 블루투스(Bluetooth) 통신 모듈, 디지털 방송 신호를 수신하는 방송신호 수신 모듈을 포함할 수 있다.The communication unit 30 communicates one-to-one with a single external device or a Wi-Fi (Wireless Fidelity: WiFi) communication module that accesses a local area network (Local Area Network: LAN) through a wireless access device (Access Point) or the like. It may include a Bluetooth communication module that communicates one-to-many with an external device and a broadcast signal reception module that receives a digital broadcast signal.

또한, 통신부(30)는 GSM/3GPP 계열의 통신 방식(GSM, HSDPA, LTE 어드밴스드), 3GPP2 계열의 통신 방식(CDMA 등) 또는 와이맥스 등의 무선 통신 네트워크를 이용하여 다른 장치와 연결될 수도 있으며, 외부의 서버로부터 전달되는 지도정보를 수신할 수 있다. In addition, the communication unit 30 may be connected to other devices using a GSM/3GPP-based communication method (GSM, HSDPA, LTE Advanced), a 3GPP2-based communication method (CDMA, etc.) or a wireless communication network such as WiMAX, and may be connected to an external device. It can receive map information transmitted from the server of .

또한, 통신부(30)는 다른 장치와 연결되어 멀티미디어 데이터를 송수신할 수 있다. 구체적으로, 통신부(30)는 차량 근처에 위치한 이동 단말 또는 원격지에 위치한 서버와 연결되어, 이동 단말 또는 서버로부터 멀티미디어 데이터를 송신할 수 있다. 예를 들어, 통신부(30)는 사용자의 스마트 폰과 연결되어 스마트 폰에 저장된 멀티미디어를 수신 받을 수 있다.In addition, the communication unit 30 may be connected to other devices to transmit and receive multimedia data. Specifically, the communication unit 30 may be connected to a mobile terminal located near the vehicle or a server located in a remote location, and transmit multimedia data from the mobile terminal or server. For example, the communication unit 30 may be connected to a user's smart phone and receive multimedia stored in the smart phone.

네비게이션(40)은 차로의 차선 수, 곡률, 차선 상태와 같은 정보가 포함된 지도정보를 저장할 수 있다. 또한, 지도 데이터를 기반으로 한 관심지역(POI) 정보를 저장할 수 있다. 관심지역은 운전자가 관심있는 지역으로 저장될 수 있으며, 주요 시설물, 역, 공항, 터미널, 호텔, 유명관광지 등을 포함할 수 있다. The navigation 40 may store map information including information such as the number of lanes, curvature, and state of lanes. Also, POI information based on map data may be stored. The region of interest may be stored as a region of interest to the driver, and may include major facilities, stations, airports, terminals, hotels, famous tourist attractions, and the like.

네비게이션(40)에 저장된 지도는 주행 중인 차로(R)의 차선의 마킹 상태와 같은 세밀한 정보까지 포함된 정밀지도를 포함할 수 있다. 또한, 네비게이션(40)은 위치 측정부를 포함하여 GPS정보를 수신할 수 있다. 위치측정부는 네비게이션(40)에 포함되어 네비게이션(40)과 일체형으로 제공될 수도 있고, 네비게이션(40)과 별도로 마련될 수도 있다.The map stored in the navigation 40 may include a precision map including detailed information such as a lane marking state of the driving lane R. In addition, the navigation 40 may receive GPS information by including a location measuring unit. The position measurement unit may be included in the navigation 40 and provided integrally with the navigation 40 or may be provided separately from the navigation 40 .

위치 측정부는 차량의 현재 위치를 측정한다. 위치 측정부는 GPS(Global Positioning System) 모듈로 구현될 수 있다. GPS 모듈은 3개 이상의 GPS 위성으로부터 송신되는 신호를 이용하여 차량의 현재 위치를 산출한다. GPS 모듈은 위성에서 신호를 송신한 시간과 GPS 모듈에서 신호를 수신한 시간의 시간차를 이용하여 위성과 GPS 모듈 간의 거리를 산출한다. GPS 모듈은 산출된 위성과 GPS 모듈 간의 거리 및 송신된 신호에 포함된 위성의 위치 정보를 이용하여 차량의 현재위치를 산출한다. 이때, GPS 모듈은 삼각측량법을 이용하여 차량의 현재위치를 산출한다.The position measurement unit measures the current position of the vehicle. The location measurement unit may be implemented as a Global Positioning System (GPS) module. The GPS module calculates the current location of the vehicle using signals transmitted from three or more GPS satellites. The GPS module calculates the distance between the satellite and the GPS module using a time difference between a time when a signal is transmitted from a satellite and a time when a signal is received by the GPS module. The GPS module calculates the current location of the vehicle using the calculated distance between the satellite and the GPS module and location information of the satellite included in the transmitted signal. At this time, the GPS module calculates the current location of the vehicle using triangulation.

디스플레이(50)는 영상 획득부(10)로부터 획득된 이미지를 표시할 수 있다. 보다 자세하게는 영상 처리부(11)에서 생성된 동영상을 재생할 수 있다. 디스플레이(50)는 액정 디스플레이(liquid crystal display, LCD), 박막 트랜지스터 액정 디스플레이(thin film transistor-liquid crystal display, TFT LCD), 유기 발광 다이오드(organic light-emitting diode, OLED) 디스플레이, 플렉시블 디스플레이(flexible display), 3차원 디스플레이(3D display), 투명디스플레이, 헤드업 디스플레이(head-up display, HUD), 터치스크린 및 클러스터(cluster) 중에서 하나 이상을 포함할 수 있다. The display 50 may display an image obtained from the image acquisition unit 10 . More specifically, a video generated by the image processing unit 11 may be reproduced. The display 50 may include a liquid crystal display (LCD), a thin film transistor-liquid crystal display (TFT LCD), an organic light-emitting diode (OLED) display, and a flexible display. display), a 3D display, a transparent display, a head-up display (HUD), a touch screen, and a cluster.

저장부(60)는 타임랩스 영상 생성 장치의 동작에 필요한 각종 데이터를 저장할 수 있다. 즉, 저장부(40)는 타임랩스 영상 생성 장치의 구동에 필요한 운영체제 또는 정보의 제공을 위해 필요한 각종 어플리케이션을 저장할 수 있다. 또한, 지도 데이터 및 영상 획득부(10)에 의해 획득된 영상 데이터를 저장할 수도 있다. The storage unit 60 may store various data necessary for the operation of the time-lapse image generating device. That is, the storage unit 40 may store an operating system necessary for driving the time-lapse image generating device or various applications necessary for providing information. In addition, map data and image data acquired by the image acquisition unit 10 may be stored.

저장부(60)는 플래시 메모리(flash memory), 하드디스크(hard disk), SD 카드(Secure Digital Card), 램(Random Access Memory, RAM), 롬(Read Only Memory, ROM) 및 웹 스토리지(web storage) 등의 저장매체 중 적어도 하나 이상의 저장매체로 구현될 수 있다.The storage unit 60 includes a flash memory, a hard disk, a secure digital card (SD card), a random access memory (RAM), a read only memory (ROM), and a web storage (web). storage) may be implemented as at least one storage medium.

제어부(70)는 타임랩스 영상 생성 장치의 전반적인 동작을 제어할 수 있다. 제어부(70)는 ASIC(Application Specific Integrated Circuit), DSP(Digital Signal Processor), PLD(Programmable Logic Devices), FPGAs(Field Programmable Gate Arrays), CPU(Central Processing unit), 마이크로 컨트롤러(microcontrollers) 및 마이크로 프로세서(microprocessors) 중 적어도 하나 이상을 포함할 수 있다.The controller 70 may control the overall operation of the time-lapse image generating device. The controller 70 includes application specific integrated circuits (ASICs), digital signal processors (DSPs), programmable logic devices (PLDs), field programmable gate arrays (FPGAs), central processing units (CPUs), microcontrollers, and microprocessors. (microprocessors) may include at least one or more.

제어부(70)는 목적지가 설정된 이후 목적지에 도착하기 이전까지 사용자가 설정한 시간 동안 영상 획득부(10)로부터 영상을 획득하고 영상 처리부(11)에서 동영상을 생성하도록 할 수 있다.The control unit 70 may acquire an image from the image acquisition unit 10 for a time set by the user from when the destination is set until arriving at the destination, and cause the image processing unit 11 to generate a video.

일 실시예에 따르면, 제어부(70)는 운전자의 시선이 전방을 주시하고 있지 않더라도, 차량이 소정속도 이상으로 주행중인 것으로 판단되면, 타임랩스 촬영하되 타임랩스 촬영속도를 감소시켜 타임랩스 촬영된 영상의 속도가 증가되도록 할 수 있다. 여기서 영상의 속도는 재생되는 속도를 의미할 수 있다. According to an embodiment, the control unit 70, when it is determined that the vehicle is traveling at a predetermined speed or more, even if the driver's gaze is not looking forward, takes a time-lapse video but reduces the time-lapse shooting speed to capture the time-lapse video. speed can be increased. Here, the video speed may mean a playback speed.

타임랩스 촬영된 영상의 속도를 증가시키기 위하여 초당 프레임의 간격을 길게 조절하여 촬영하도록 할 수 있다. 초당 프레임의 간격이 길어진다는 것은 1초당 촬영되는 프레임 수가 작아진다는 것(촬영속도 감소)을 의미하고, FPS는 작은 수치를 갖도록 조절될 수 있다.In order to increase the speed of the time-lapse photographed image, the interval of frames per second may be adjusted to be long. An increase in the interval of frames per second means that the number of frames captured per second decreases (reduction in shooting speed), and the FPS can be adjusted to have a small value.

예를들어, 타임랩스 촬영을 위해 제1속도로 촬영하고 있었고, 제어부(70)가 차량이 소정속도 이상으로 주행중인 것으로 판단하면, 제1속도보다 느린 제2속도로 타임랩스 촬영하도록 영상 처리부(11)를 제어할 수 있다. For example, if it was filming at a first speed for time-lapse filming, and the control unit 70 determines that the vehicle is traveling at a predetermined speed or more, the image processing unit ( 11) can be controlled.

제어부(70)는 상술한 실시예 이외에도 차량이 고속도로를 주행하고 있거나 톨게이트를 지나고 있는 것으로 판단하거나, 현재 차량의 위치가 관심지역에 위치하지 않은 것으로 판단한 경우, 상술한 제1속도보다 느린 제2속도로 촬영하도록 제어할 수 있다. 이와 같이 제어부(70)가 제1속도보다 느린 제2속도로 조절하여 타임랩스 촬영하는 것은, 고속도로와 같이 주변에 관심지역이 존재하지 않고 도로만이 반복되는 환경에서는 큰 변화가 없다고 판단하여 타임랩스 영상이 빠르게 재생되도록 함으로써 영상을 단축시키기 위함이다. In addition to the above-described embodiment, the control unit 70 determines that the vehicle is driving on a highway or passing through a toll gate, or determines that the current location of the vehicle is not located in the region of interest, the second speed that is slower than the above-described first speed You can control to shoot with . In this way, the control unit 70 controls the second speed slower than the first speed to take the time-lapse, and determines that there is no significant change in an environment where there is no area of interest and only roads are repeated, such as on a highway. This is to shorten the video by making the video play quickly.

다른 실시예에 따라, 제어부(70)는 운전자의 시선이 전방을 주시하고 있고, 현재 차량이 관심지역에 위치한 것으로 판단되면, 타임랩스 촬영하되 타임랩스 촬영속도를 증가시켜 타임랩스 촬영된 영상의 속도가 감소되도록 할 수 있다. 이를 위하여 초당 프레임의 간격을 짧게 조절하여 촬영하도록 할 수 있다. 초당 프레임의 간격이 짧아진다는 것은 1초당 촬영되는 프레임 수가 많아진다는 것(촬영속도 증가)을 의미하고, FPS는 높은수치를 갖도록 조절될 수 있다.According to another embodiment, the control unit 70, when it is determined that the driver's gaze is looking forward and the current vehicle is located in the region of interest, takes time-lapse, but increases the time-lapse shooting speed to speed the time-lapse captured image. can be reduced. To this end, it is possible to photograph by adjusting the interval of frames per second to be short. Shortening the interval of frames per second means that the number of frames captured per second increases (shooting speed increases), and the FPS can be adjusted to have a high value.

예를들어, 타임랩스 촬영을 위해 제1속도로 촬영하고 있었고, 제어부(70)가 운전자의 시선이 전방을 주시하고, 현재 차량이 관심지역에 위치한 것으로 판단되면, 제1속도보다 빠른 제3속도로 타임랩스 촬영하도록 영상 처리부(11)를 제어할 수 있다. For example, when shooting was performed at a first speed for time-lapse photography, and the controller 70 determines that the driver's gaze is looking forward and the current vehicle is located in the region of interest, a third speed faster than the first speed It is possible to control the image processing unit 11 to take a time-lapse video.

제어부(70)는 상술한 실시예 이외에도 운전자가 차량의 전방이 아닌 차량의 측방향을 주시하고 있거나, 차량의 속도가 소정속도 미만인 것으로 판단되면, 상술한 제1속도보다 빠른 제3속도로 촬영하도록 제어할 수 있다. 이와 같이 제어부(70)가 제1속도보다 빠른 제3속도로 조절하여 타임랩스 촬영하는 것은, 관심지역 주변 경관이 자세히 기록되도록 하기 위함이다. In addition to the above-described embodiment, the control unit 70 determines that the driver is looking at the side of the vehicle instead of the front of the vehicle, or the vehicle speed is less than the predetermined speed, so that the controller 70 shoots at a third speed faster than the first speed. You can control it. In this way, the control unit 70 adjusts the third speed faster than the first speed to take time-lapse photography, so that the surrounding scenery of the region of interest is recorded in detail.

도 2는 본 발명의 차량 카메라를 이용한 타임랩스 영상 생성 방법을 나타낸 순서도이다.2 is a flowchart illustrating a method for generating a time-lapse image using a vehicle camera of the present invention.

먼저, 차량 주변의 이미지를 획득하고, 획득된 차량 주변 이미지를 이용하여 제1속도로 이미지를 처리하여 타임랩스 영상을 생성할 수 있다. 또한, 차량의 속도, 차량의 위치 및 운전자의 시선 방향을 검출할 수 있다. First, an image around the vehicle may be obtained, and a time-lapse image may be generated by processing the image at a first speed using the obtained image around the vehicle. In addition, the speed of the vehicle, the location of the vehicle, and the direction of the driver's gaze can be detected.

운전자가 전방을 주시하고 있는지 여부를 판단한다(S100). S100은 영상 획득부(10)로부터 획득된 정보를 기반으로 운전자의 시선의 방향을 판단할 수 있다. 운전자가 차량의 측방향을 주시하고 있는 경우에는 운전자가 전방을 주시하고 있지 않은 것으로 판단될 수 있다. It is determined whether the driver is looking ahead (S100). S100 may determine the direction of the driver's gaze based on the information obtained from the image acquisition unit 10 . When the driver is looking in the side direction of the vehicle, it may be determined that the driver is not looking ahead.

S100에서 운전자가 전방을 주시하고 있지 않은 경우(NO), 차량의 속도가 소정속도 이상인지 판단할 수 있다(S110). S110에서 실시예에 따르면, 차량의 속도가 90Km이상인지 판단할 수 있다. In S100, if the driver is not looking ahead (NO), it may be determined whether the speed of the vehicle is equal to or greater than a predetermined speed (S110). In S110, according to the embodiment, it may be determined whether the speed of the vehicle is 90 km or more.

S110에서 차량의 속도가 소정속도 미만인 것으로 판단되면(N0), 현재 차량이 관심지역에 위치하였는지 판단할 수 있다(S120). 여기서, 관심지역은 주요 시설물, 역, 공항, 터미널, 호텔, 유명관광지 등을 포함할 수 있다. If it is determined in S110 that the speed of the vehicle is less than the predetermined speed (N0), it may be determined whether the current vehicle is located in the region of interest (S120). Here, the region of interest may include major facilities, stations, airports, terminals, hotels, famous tourist spots, and the like.

S120에서 현재 차량이 관심지역에 위치하지 않으면(N0), 타임랩스의 영상속도를 증가시킨다(S130). S130은 타임랩스 촬영하되 타임랩스 촬영속도를 감소시켜 타임랩스 촬영된 영상의 속도가 증가되도록 한다. 여기서 타임랩스 촬영된 영상의 속도는 타임랩스 촬영된 영상이 재생되는 속도를 의미할 수 있다. In S120, if the current vehicle is not located in the region of interest (N0), the video speed of the time-lapse is increased (S130). In the S130, time-lapse shooting is performed, but the time-lapse shooting speed is reduced so that the speed of the time-lapse captured video is increased. Here, the speed of the time-lapse photographed image may mean the speed at which the time-lapse photographed image is reproduced.

S130은 초당 프레임의 간격을 길게 조절하여 타임랩스 촬영하도록 할 수 있다. 초당 프레임의 간격을 길게 조절한다는 것은 1초당 촬영되는 프레임 수가 작아진다는 것(촬영속도 감소)을 의미하고, FPS는 작은 수치를 갖도록 조절될 수 있다.In the S130, time-lapse recording can be performed by adjusting the interval of frames per second to be long. Adjusting the interval of frames per second to be long means that the number of frames captured per second is reduced (reducing the shooting speed), and the FPS can be adjusted to have a small value.

예를들어 타임랩스 촬영을 위해 제1속도로 촬영하고 있었다면, S130에서는 제1속도보다 느린 제2속도로 타임랩스 촬영하도록 할 수 있다.For example, if recording was performed at a first speed for time-lapse photography, in S130, time-lapse photography may be performed at a second speed slower than the first speed.

S130는 차량의 주변환경 및 주행환경에 있어서, 큰 변화가 없다고 판단하여 타임랩스 영상이 빠르게 재생되도록 영상을 단축시키기 위하여 수행될 수 있다. S130 may be performed to shorten the video so that the time-lapse video is quickly reproduced by determining that there is no significant change in the surrounding environment and driving environment of the vehicle.

S130에서는 운전자가 전방을 주시하지 않을 수 있기 때문에 운전자가 주행에 부주의 할 수 있음을 경고를 통해 알릴 수 있다. In the S130, since the driver may not keep an eye on the front, it is possible to notify through a warning that the driver may be careless while driving.

S120에서 현재 차량이 관심지역에 위치하는 것으로 판단되면(YES), 타임랩스 영상 속도를 감소시킨다(S140). S140은 타임랩스 촬영하되 타임랩스 촬영속도를 증가시켜 타입랩스 촬영된 영상의 속도가 감소되도록 한다. 여기서 타임랩스 촬영된 영상의 속도는 타임랩스 촬영된 영상이 재생되는 속도를 의미할 수 있다.If it is determined in S120 that the current vehicle is located in the region of interest (YES), the speed of the time-lapse video is reduced (S140). S140 takes time-lapse, but increases the time-lapse shooting speed so that the speed of the time-lapse captured video is reduced. Here, the speed of the time-lapse photographed image may mean the speed at which the time-lapse photographed image is reproduced.

S140은 초당 프레임의 간격을 짧게 조절하여 타임랩스 촬영하도록 할 수 있다. 초당 프레임의 간격을 짧게 조절한다는 것은 1초당 촬영되는 프레임 수가 많아진다는 것(촬영속도 증가)을 의미하고, FPS는 높은수치를 갖도록 조절될 수 있다.The S140 can take a time-lapse shot by adjusting the interval of frames per second to be short. Adjusting the interval of frames per second to be short means that the number of frames captured per second increases (shooting speed increases), and the FPS can be adjusted to have a high value.

예를들어, 타임랩스 촬영을 위해 제1속도로 촬영하고 있었다면, S150에서는 제1속도보다 빠른 제3속도로 타임랩스 촬영하도록 할 수 있다.For example, if shooting was performed at a first speed for time-lapse photography, in S150, time-lapse photography may be performed at a third speed faster than the first speed.

S140는 차량의 주변환경 및 주행환경이 관심지역이라고 판단하면 차량 주변환경을 자세히 기록하기 위하여 수행될 수 있다. S140 may be performed to record the surrounding environment of the vehicle in detail when it is determined that the surrounding environment and the driving environment of the vehicle are regions of interest.

S110으로 돌아가서, S110에서 차량의 속도가 소정속도 이상인 것으로 판단되면(YES), 타임랩스 영상속도를 증가시킨다(S130). S130은 타임랩스 촬영하되 타임랩스 촬영속도를 감소시켜 타임랩스 촬영된 영상의 속도가 증가되도록 한다. 여기서 타임랩스 촬영된 영상의 속도는 타임랩스 촬영된 영상이 재생되는 속도를 의미할 수 있다. Returning to S110, if it is determined in S110 that the speed of the vehicle is equal to or greater than the predetermined speed (YES), the time-lapse video speed is increased (S130). In the S130, time-lapse shooting is performed, but the time-lapse shooting speed is decreased so that the speed of the time-lapse captured video is increased. Here, the speed of the time-lapse photographed image may mean the speed at which the time-lapse photographed image is reproduced.

S100으로 돌아가서, S100에서 운전자가 전방을 주시하고 있는 것으로 판단하면(YES) 현재 차량이 관심지역에 위치하였는지 판단할 수 있다(S120). 여기서, 관심지역은 주요 시설물, 역, 공항, 터미널, 호텔, 유명관광지 등을 포함할 수 있다. Returning to S100, if it is determined in S100 that the driver is looking ahead (YES), it may be determined whether the current vehicle is located in the region of interest (S120). Here, the region of interest may include major facilities, stations, airports, terminals, hotels, famous tourist spots, and the like.

S120에서 현재 차량이 관심지역에 위치하지 않으면(N0), 타임랩스의 영상속도를 증가시킨다(S130). S120에서 현재 차량이 관심지역에 위치하는 것으로 판단되면(YES), 타임랩스 영상 속도를 감소시킨다(S140). In S120, if the current vehicle is not located in the region of interest (N0), the video speed of the time-lapse is increased (S130). If it is determined in S120 that the current vehicle is located in the region of interest (YES), the speed of the time-lapse video is reduced (S140).

이상의 설명은 본 발명의 기술 사상을 예시적으로 설명한 것에 불과한 것으로서, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 다양한 수정 및 변형이 가능할 것이다. The above description is merely an example of the technical idea of the present invention, and various modifications and variations can be made to those skilled in the art without departing from the essential characteristics of the present invention.

따라서, 본 발명에 개시된 실시예들은 본 발명의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시예에 의하여 본 발명의 기술 사상의 범위가 한정되는 것은 아니다. 본 발명의 보호 범위는 아래의 청구범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술 사상은 본 발명의 권리범위에 포함되는 것으로 해석되어야 할 것이다.Therefore, the embodiments disclosed in the present invention are not intended to limit the technical idea of the present invention, but to explain, and the scope of the technical idea of the present invention is not limited by these embodiments. The protection scope of the present invention should be construed according to the claims below, and all technical ideas within the equivalent range should be construed as being included in the scope of the present invention.

영상 획득부 10
영상 처리부 11
검출부 20
통신부 30
네비게이션 40
디스플레이 50
저장부 60
제어부 70
image acquisition unit 10
image processing unit 11
detection unit 20
Department of Communications 30
navigation 40
display 50
storage unit 60
Control 70

Claims (19)

차량 주변의 이미지 및 운전자 영상을 획득하는 영상 획득부;
상기 획득된 차량 주변 이미지가 제1속도를 갖도록 처리하여 타임랩스 영상을 생성하는 영상 처리부;
차량의 속도 및 운전자 시선방향을 검출하는 검출부;
차량의 위치를 측정하는 위치 측정부; 및
상기 차량 위치, 상기 차량의 속도 및 상기 운전자 시선방향을 기반으로 상기 타임랩스 영상 속도를 조절하는 제어부를 포함하는 것을 특징으로 하는 차량 카메라를 이용한 타임랩스 영상 생성 장치.
an image acquisition unit that acquires an image of the surroundings of the vehicle and a driver's image;
an image processor generating a time-lapse image by processing the obtained image around the vehicle to have a first speed;
a detection unit for detecting the speed of the vehicle and the direction of the driver's gaze;
Position measurement unit for measuring the position of the vehicle; and
A time-lapse image generating device using a vehicle camera, characterized in that it comprises a control unit for adjusting the time-lapse image speed based on the vehicle position, the speed of the vehicle, and the driver's gaze direction.
청구항 1에 있어서,
상기 제어부는
상기 차량이 관심지역에 위치하지 않으면, 상기 타임랩스 영상속도를 증가시키는 것을 특징으로 하는 차량 카메라를 이용한 타임랩스 영상 생성 장치.
The method of claim 1,
The control unit
Time-lapse image generation device using a vehicle camera, characterized in that to increase the time-lapse image speed when the vehicle is not located in the region of interest.
청구항 1에 있어서,
상기 제어부는
상기 차량의 속도가 소정속도 이상이면, 상기 타임랩스 영상속도를 증가시키는 것을 특징으로 하는 차량 카메라를 이용한 타임랩스 영상 생성 장치.
The method of claim 1,
The control unit
Time-lapse image generating device using a vehicle camera, characterized in that for increasing the time-lapse image speed when the speed of the vehicle is higher than a predetermined speed.
청구항 1에 있어서,
상기 제어부는
상기 운전자의 시선이 상기 차량의 전방을 향하고 있으면, 상기 타임랩스 영상속도를 증가시키는 것을 특징으로 하는 차량 카메라를 이용한 타임랩스 영상 생성 장치.
The method of claim 1,
The control unit
Time-lapse image generation device using a vehicle camera, characterized in that to increase the time-lapse image speed when the driver's gaze is directed to the front of the vehicle.
청구항 1에 있어서,
상기 제어부는
상기 차량이 관심지역에 위치하면, 상기 타임랩스 영상속도를 감소시키는 것을 특징으로 하는 차량 카메라를 이용한 타임랩스 영상 생성 장치.
The method of claim 1,
The control unit
Time-lapse image generation device using a vehicle camera, characterized in that for reducing the time-lapse image speed when the vehicle is located in the region of interest.
청구항 1에 있어서,
상기 제어부는
상기 차량의 속도가 소정속도 미만이면, 상기 타임랩스 영상속도를 감소시키는 것을 특징으로 하는 차량 카메라를 이용한 타임랩스 영상 생성 장치.
The method of claim 1,
The control unit
Time-lapse image generation device using a vehicle camera, characterized in that for reducing the time-lapse image speed when the speed of the vehicle is less than a predetermined speed.
청구항 1에 있어서,
상기 제어부는
상기 운전자의 시선이 상기 차량의 전방을 향하고 있지 않으면, 상기 타임랩스 영상속도를 감소시키는 것을 특징으로 하는 차량 카메라를 이용한 타임랩스 영상 생성 장치.
The method of claim 1,
The control unit
Time-lapse image generation device using a vehicle camera, characterized in that for reducing the time-lapse image speed when the driver's gaze is not facing the front of the vehicle.
청구항 1에 있어서,
상기 영상 처리부는
타임랩스 촬영속도를 상기 제1속도보다 느린 제2속도로 하여 상기 타임랩스 영상속도를 증가시키는 것을 특징으로 하는 차량 카메라를 이용한 타임랩스 영상 생성 장치.
The method of claim 1,
The image processing unit
Time-lapse image generation device using a vehicle camera, characterized in that to increase the time-lapse video speed by setting the time-lapse shooting speed to a second speed slower than the first speed.
청구항 1에 있어서,
상기 영상 처리부는
상기 타임랩스 촬영속도를 상기 제1속도보다 빠른 제3속도로 하여 상기 타임랩스 영상속도를 감소시키는 것을 특징으로 하는 차량 카메라를 이용한 타임랩스 영상 생성 장치.
The method of claim 1,
The image processing unit
A time-lapse image generating device using a vehicle camera, characterized in that for reducing the time-lapse video speed by setting the time-lapse shooting speed to a third speed faster than the first speed.
청구항 1에 있어서,
상기 타임랩스 영상을 출력하는 디스플레이를 더 포함하는 것을 특징으로 하는 타임랩스 영상 생성 장치.
The method of claim 1,
Time-lapse image generating device characterized in that it further comprises a display for outputting the time-lapse image.
차량 주변의 이미지를 획득하고, 차량의 속도, 차량의 위치 및 운전자의 시선방향을 검출하는 단계; 및
상기 획득된 차량 주변 이미지가 제1속도를 갖도록 처리하여 타임랩스 영상을 생성하는 단계를 포함하되,
상기 타임랩스 영상을 생성하는 단계에서 차량의 속도, 차량의 위치 및 운전자의 시선을 기반으로 상기 타임랩스 영상속도를 조절하여 상기 타임랩스 영상을 생성하는 것을 특징으로 하는 차량 카메라를 이용한 타임랩스 영상 생성 방법.
obtaining an image of the surroundings of the vehicle, and detecting the vehicle speed, vehicle position, and driver's gaze direction; and
Generating a time-lapse image by processing the obtained image around the vehicle to have a first speed,
Generating a time-lapse image using a vehicle camera, characterized in that in the step of generating the time-lapse image, the time-lapse image is generated by adjusting the time-lapse image speed based on the speed of the vehicle, the position of the vehicle, and the driver's line of sight. method.
청구항 11에 있어서,
상기 타임랩스 영상을 생성하는 단계는
상기 차량이 관심지역에 위치하지 않으면, 상기 타임랩스 영상속도를 증가시키는 것을 특징으로 하는 차량 카메라를 이용한 타임랩스 영상 생성 방법.
The method of claim 11,
The step of generating the time-lapse video is
Time-lapse image generation method using a vehicle camera, characterized in that to increase the time-lapse image speed when the vehicle is not located in the region of interest.
청구항 11에 있어서,
상기 타임랩스 영상을 생성하는 단계는
상기 차량의 속도가 소정속도 이상이면, 상기 타임랩스 영상속도를 증가시키는 것을 특징으로 하는 차량 카메라를 이용한 타임랩스 영상 생성 방법.
The method of claim 11,
The step of generating the time-lapse video is
Time-lapse image generation method using a vehicle camera, characterized in that to increase the time-lapse image speed when the speed of the vehicle is higher than a predetermined speed.
청구항 11에 있어서,
상기 타임랩스 영상을 생성하는 단계는
상기 운전자의 시선이 상기 차량의 전방을 향하고 있으면, 상기 타임랩스 영상속도를 증가시키는 것을 특징으로 하는 차량 카메라를 이용한 타임랩스 영상 생성 방법.
The method of claim 11,
The step of generating the time-lapse video is
When the driver's gaze is directed toward the front of the vehicle, the time-lapse image speed is increased.
청구항 11에 있어서,
상기 타임랩스 영상을 생성하는 단계는
상기 차량이 관심지역에 위치하면, 상기 타임랩스 영상속도를 감소시키는 것을 특징으로 하는 차량 카메라를 이용한 타임랩스 영상 생성 방법.
The method of claim 11,
The step of generating the time-lapse video is
Time-lapse image generation method using a vehicle camera, characterized in that for reducing the time-lapse image speed when the vehicle is located in the region of interest.
청구항 11에 있어서,
상기 타임랩스 영상을 생성하는 단계는
상기 차량의 속도가 소정속도 미만이면, 상기 타임랩스 영상속도를 감소시키는 것을 특징으로 하는 차량 카메라를 이용한 타임랩스 영상 생성 방법.
The method of claim 11,
The step of generating the time-lapse video is
When the speed of the vehicle is less than a predetermined speed, the time-lapse video generation method using a vehicle camera, characterized in that to reduce the time-lapse video speed.
청구항 11에 있어서,
상기 타임랩스 영상을 생성하는 단계는
상기 운전자의 시선이 상기 차량의 전방을 향하고 있지 않으면, 상기 타임랩스 영상속도를 감소시키는 것을 특징으로 하는 차량 카메라를 이용한 타임랩스 영상 생성 방법.
The method of claim 11,
The step of generating the time-lapse video is
Time-lapse image generation method using a vehicle camera, characterized in that for reducing the time-lapse image speed when the driver's gaze is not facing the front of the vehicle.
청구항 11에 있어서,
상기 타임랩스 영상을 생성하는 단계는
타임랩스 촬영속도를 상기 제1속도보다 느린 제2속도로 하여 상기 타임랩스 영상속도를 증가시키는 것을 특징으로 하는 차량 카메라를 이용한 타임랩스 영상 생성 방법.
The method of claim 11,
The step of generating the time-lapse video is
Time-lapse video generation method using a vehicle camera, characterized in that to increase the time-lapse video speed by setting the time-lapse shooting speed to a second speed slower than the first speed.
청구항 11에 있어서,
상기 타임랩스 영상을 생성하는 단계는
상기 타임랩스 촬영속도를 상기 제1속도보다 빠른 제3속도로 하여 상기 타임랩스 영상속도를 감소시키는 것을 특징으로 하는 차량 카메라를 이용한 타임랩스 영상 생성 방법.

The method of claim 11,
The step of generating the time-lapse video is
Time-lapse video generation method using a vehicle camera, characterized in that to reduce the time-lapse video speed by setting the time-lapse shooting speed to a third speed faster than the first speed.

KR1020170167263A 2017-12-07 2017-12-07 Apparatus and method for generating time-lapse image using camera in vehicle KR102529908B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020170167263A KR102529908B1 (en) 2017-12-07 2017-12-07 Apparatus and method for generating time-lapse image using camera in vehicle

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020170167263A KR102529908B1 (en) 2017-12-07 2017-12-07 Apparatus and method for generating time-lapse image using camera in vehicle

Publications (2)

Publication Number Publication Date
KR20190067380A KR20190067380A (en) 2019-06-17
KR102529908B1 true KR102529908B1 (en) 2023-05-08

Family

ID=67064519

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020170167263A KR102529908B1 (en) 2017-12-07 2017-12-07 Apparatus and method for generating time-lapse image using camera in vehicle

Country Status (1)

Country Link
KR (1) KR102529908B1 (en)

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101543119B1 (en) * 2013-12-18 2015-08-07 현대자동차주식회사 Method for providing drive composite image
KR20160034004A (en) * 2014-09-19 2016-03-29 현대모비스 주식회사 Apparatus and method for controlling resolution of vehicle camera
KR102527811B1 (en) * 2015-12-22 2023-05-03 삼성전자주식회사 Apparatus and method for generating time lapse image

Also Published As

Publication number Publication date
KR20190067380A (en) 2019-06-17

Similar Documents

Publication Publication Date Title
US20200344421A1 (en) Image pickup apparatus, image pickup control method, and program
CN104126299B (en) Video image stabilisation
JP6669240B1 (en) Recording control device, recording control system, recording control method, and recording control program
US10704957B2 (en) Imaging device and imaging method
CN108141540B (en) Omnidirectional camera with motion detection
US20210329157A1 (en) 940nm led flash synchronization for dms and oms
US11272115B2 (en) Control apparatus for controlling multiple camera, and associated control method
KR20200096518A (en) Information processing device, moving object, control system, information processing method and program
WO2018016150A1 (en) Image processing device and image processing method
JP2023054293A (en) Solid-state image pickup apparatus, correction method, and electronic apparatus
CN107230373B (en) Information recommendation method and device, computer readable storage medium and mobile terminal
KR102529908B1 (en) Apparatus and method for generating time-lapse image using camera in vehicle
JP6764693B2 (en) Satellite signal processing method and satellite signal processing equipment
WO2020137398A1 (en) Operation control device, imaging device, and operation control method
JP2019047401A (en) Image processing apparatus
US11070714B2 (en) Information processing apparatus and information processing method
KR100926274B1 (en) The camera system for producing the panorama of a map information
CN111684784B (en) Image processing method and device
KR101973300B1 (en) Vehicular image-display system
KR102552489B1 (en) Apparatus and method for recording journey image using camera in vehicle
CN105704438B (en) Method and device for previewing road section in front of vehicle based on video and method and device for recording road section of vehicle based on video
JP6284203B2 (en) Monitoring device
KR101511567B1 (en) System for monitoring image and thereof method
WO2024024464A1 (en) Solid-state imaging element, and electronic device
KR20160032905A (en) Camera device, system and method responsive to gaze direction of driver

Legal Events

Date Code Title Description
A201 Request for examination
E701 Decision to grant or registration of patent right
GRNT Written decision to grant