KR20190067380A - 차량 카메라를 이용한 타임랩스 영상 생성 장치 및 방법 - Google Patents

차량 카메라를 이용한 타임랩스 영상 생성 장치 및 방법 Download PDF

Info

Publication number
KR20190067380A
KR20190067380A KR1020170167263A KR20170167263A KR20190067380A KR 20190067380 A KR20190067380 A KR 20190067380A KR 1020170167263 A KR1020170167263 A KR 1020170167263A KR 20170167263 A KR20170167263 A KR 20170167263A KR 20190067380 A KR20190067380 A KR 20190067380A
Authority
KR
South Korea
Prior art keywords
speed
time
vehicle
image
lapse
Prior art date
Application number
KR1020170167263A
Other languages
English (en)
Other versions
KR102529908B1 (ko
Inventor
김연지
Original Assignee
현대자동차주식회사
기아자동차주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 현대자동차주식회사, 기아자동차주식회사 filed Critical 현대자동차주식회사
Priority to KR1020170167263A priority Critical patent/KR102529908B1/ko
Publication of KR20190067380A publication Critical patent/KR20190067380A/ko
Application granted granted Critical
Publication of KR102529908B1 publication Critical patent/KR102529908B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/66—Remote control of cameras or camera parts, e.g. by remote control devices
    • H04N5/23203—
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/02—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/10—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to vehicle motion
    • B60W40/105—Speed
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/61—Control of cameras or camera modules based on recognised objects
    • H04N23/611—Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • H04N5/23219—
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2420/00—Indexing codes relating to the type of sensors based on the principle of their operation
    • B60W2420/40—Photo, light or radio wave sensitive means, e.g. infrared sensors
    • B60W2420/403—Image sensing, e.g. optical camera
    • B60W2420/42—
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2520/00—Input parameters relating to overall vehicle dynamics
    • B60W2520/10—Longitudinal speed

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)
  • Mathematical Physics (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Traffic Control Systems (AREA)

Abstract

본 발명의 차량 카메라를 이용한 타임랩스 영상 생성 장치는 차량 주변의 이미지 및 운전자 영상을 획득하는 영상 획득부와, 상기 획득된 차량 주변 이미지가 제1속도를 갖도록 처리하여 타임랩스 영상을 생성하는 영상 처리부와, 차량의 속도 및 운전자 시선방향을 검출하는 검출부와, 차량의 위치를 측정하는 내비게이션과, 상기 차량 위치, 상기 차량의 속도 및 상기 운전자 시선방향을 기반으로 상기 타임랩스 영상 속도를 조절하는 제어부 및 상기 타임랩스 영상을 출력하는 디스플레이를 포함하여, 운전자의 시선이 전방으로부터 벗어나거나 차량의 속도가 감소되는 경우 타임랩스의 영상 속도를 낮추어 차량 외부 경관을 자세히 기록하도록 할 수 있다. 운전자의 시선이 전방을 유지하거나 차량의 속도가 고속인 경우 타임랩스의 영상 속도를 증가시켜 영상을 단축하도록 할 수 있다.

Description

차량 카메라를 이용한 타임랩스 영상 생성 장치 및 방법{APPARATUS AND METHOD FOR GENERATING TIME-LAPSE IMAGE USING CAMERA IN VEHICLE}
본 발명은 차량 카메라를 이용한 타임랩스 영상 생성 장치 및 방법에 관한 것으로, 타입 랩스 영상의 녹화속도를 조절하는 차량 카메라를 이용한 타임랩스 영상 생성 장치 및 방법에 관한 것이다.
타임 랩스(TIME-LAPSE)는 긴 지속시간을 건너 띄면서 미리 예정된 일정 간격에 따라 한번에 한 프레임 씩 촬영하는 방식으로, 간헐 촬영, 미속 촬영 또는 완속 촬영이라고 한다. 타임 랩스 영상을 정상속도로 영사하면, 시간과 속도의 압축으로 인해 한 순간의 동작으로 나타나게 된다. 이렇게 생성된 다수의 영상 파일들을 동영상 편집 프로그램을 이용하여 편집함으로써 타임 랩스가 생성된다.
한편, 일반적으로 차량 내부에 탑승하는 운전자의 시야는 주로 전방에 고정되어 있다. 따라서, 운전자의 좌우측과 후방 시야는 차체에 의하여 상당부분 가려지기 때문에 매우 한정될 수 있다.
이를 위해 통상적으로 운전자의 한정된 범위의 시야를 보완키 위한 거울 포함하여 이루어지는 보조수단 예를들면, 사이드 미러 등이 사용될 수 있으며, 최근에는 차량의 외부의 영상을 촬영하여 운전자에게 제공하는 영상획득수단을 포함하는 기술들이 차량에 적용되고 있는 추세이다.
그 중에서 현재 차량 주위에 복수의 카메라를 설치하여 차량 주변의 전 방향의 영상을 보여주는 주변모니터링 시스템이 있다. 주변모니터링 기술은 차량 주변을 촬영하는 카메라를 복수개 설치하고, 복수의 카메라를 통하여 촬영된 차량 주변의 전방향의 영상을 운전자에게 제공함으로써, 차량 주변에 사각지대를 해소하도록 이루어진다.
최근에는 차량의 주변을 모니터링하는 장치 및 차량 실내에 구비되는 카메라를 이용하여 차량 내/외부를 타임랩스로 촬영하여 여행 및 일상을 기록하는 기능이 제안되었다.
본 발명은 차량의 주변을 모니터링하는 장치를 이용하여 차량 내/외부를 촬영하되, 운전자의 시선 방향과 차량의 속도를 기반으로 타임랩스의 영상 속도를 조절하도록 하는 차량 카메라를 이용한 타임랩스 영상 생성 장치 및 방법을 제공하는 것이다.
본 발명의 차량 카메라를 이용한 타임랩스 영상 생성 장치는 차량 주변의 이미지 및 운전자 영상을 획득하는 영상 획득부와, 상기 획득된 차량 주변 이미지가 제1속도를 갖도록 처리하여 타임랩스 영상을 생성하는 영상 처리부와, 차량의 속도 및 운전자 시선방향을 검출하는 검출부와, 차량의 위치를 측정하는 위치 측정부와, 상기 차량 위치, 상기 차량의 속도 및 상기 운전자 시선방향을 기반으로 상기 타임랩스 영상 속도를 조절하는 제어부를 포함하는 것을 특징으로 한다.
그리고, 상기 제어부는 상기 차량이 관심지역에 위치하지 않으면, 상기 타임랩스 영상속도를 증가시키는 것을 특징으로 한다.
그리고, 상기 제어부는 상기 차량의 속도가 소정속도 이상이면, 상기 타임랩스 영상속도를 증가시키는 것을 특징으로 한다.
그리고, 상기 제어부는 상기 운전자의 시선이 상기 차량의 전방을 향하고 있으면, 상기 타임랩스 영상속도를 증가시키는 것을 특징으로 한다.
그리고, 상기 제어부는 상기 차량이 관심지역에 위치하면, 상기 타임랩스 영상속도를 감소시키는 것을 특징으로 한다.
그리고, 상기 제어부는 상기 차량의 속도가 소정속도 미만이면, 상기 타임랩스 영상속도를 감소시키는 것을 특징으로 한다.
그리고, 상기 제어부는 상기 운전자의 시선이 상기 차량의 전방을 향하고 있지 않으면, 상기 타임랩스 영상속도를 감소시키는 것을 특징으로 한다.
그리고, 상기 영상 처리부는 타임랩스 촬영속도를 상기 제1속도보다 느린 제2속도로 하여 상기 타임랩스 영상속도를 증가시키는 것을 특징으로 한다.
그리고, 상기 영상 처리부는 상기 타임랩스 촬영속도를 상기 제1속도보다 빠른 제3속도로 하여 상기 타임랩스 영상속도를 감소시키는 것을 특징으로 한다.
그리고, 상기 타임랩스 영상을 출력하는 디스플레이를 더 포함하는 것을 특징으로 한다.
본 발명의 차량 카메라를 이용한 타임랩스 영상 생성 방법은 차량 주변의 이미지를 획득하고, 차량의 속도, 차량의 위치 및 운전자의 시선방향을 검출하는 단계 및 상기 획득된 차량 주변 이미지가 제1속도를 갖도록 처리하여 타임랩스 영상을 생성하는 단계를 포함하되, 상기 타임랩스 영상을 생성하는 단계에서 차량의 속도, 차량의 위치 및 운전자의 시선을 기반으로 상기 타임랩스 영상속도를 조절하여 상기 타임랩스 영상을 생성하는 것을 특징으로 한다.
그리고, 상기 타임랩스 영상을 생성하는 단계는 상기 차량이 관심지역에 위치하지 않으면, 상기 타임랩스 영상속도를 증가시키는 것을 특징으로 한다.
그리고, 상기 타임랩스 영상을 생성하는 단계는 상기 차량의 속도가 소정속도 이상이면, 상기 타임랩스 영상속도를 증가시키는 것을 특징으로 한다.
그리고, 상기 타임랩스 영상을 생성하는 단계는 상기 운전자의 시선이 상기 차량의 전방을 향하고 있으면, 상기 타임랩스 영상속도를 증가시키는 것을 특징으로 한다.
그리고, 상기 타임랩스 영상을 생성하는 단계는 상기 차량이 관심지역에 위치하면, 상기 타임랩스 영상속도를 감소시키는 것을 특징으로 한다.
그리고, 상기 타임랩스 영상을 생성하는 단계는 상기 차량의 속도가 소정속도 미만이면, 상기 타임랩스 영상속도를 감소시키는 것을 특징으로 한다.
그리고, 상기 타임랩스 영상을 생성하는 단계는 상기 운전자의 시선이 상기 차량의 전방을 향하고 있지 않으면, 상기 타임랩스 영상속도를 감소시키는 것을 특징으로 한다.
그리고, 상기 타임랩스 영상을 생성하는 단계는 타임랩스 촬영속도를 상기 제1속도보다 느린 제2속도로 하여 상기 타임랩스 영상속도를 증가시키는 것을 특징으로 한다.
그리고, 상기 타임랩스 영상을 생성하는 단계는 상기 타임랩스 촬영속도를 상기 제1속도보다 빠른 제3속도로 하여 상기 타임랩스 영상속도를 감소시키는 것을 특징으로 한다.
본 발명의 차량 카메라를 이용한 타임랩스 영상 생성 장치 및 방법은 운전자의 시선이 전방으로부터 벗어나거나 차량의 속도가 감소되는 경우 타임랩스의 영상 속도를 낮추어 차량 외부 경관을 자세히 기록하도록 할 수 있다.
또한, 본 발명의 차량 카메라를 이용한 타임랩스 영상 생성 장치 및 방법은 운전자의 시선이 전방을 유지하거나 차량의 속도가 고속인 경우 타임랩스의 영상 속도를 증가시켜 영상을 단축하도록 할 수 있다.
도 1은 본 발명의 차량 카메라를 이용한 타임랩스 영상 생성 장치를 나타낸 구성도이다.
도 2는 본 발명의 차량 카메라를 이용한 타임랩스 영상 생성 방법을 나타낸 순서도이다.
이하, 본 발명의 일부 실시예들을 예시적인 도면을 통해 상세하게 설명한다. 각 도면의 구성요소들에 참조부호를 부가함에 있어서, 동일한 구성요소들에 대해서는 비록 다른 도면상에 표시되더라도 가능한 한 동일한 부호를 가지도록 하고 있음에 유의해야 한다. 또한, 본 발명의 실시예를 설명함에 있어, 관련된 공지 구성 또는 기능에 대한 구체적인 설명이 본 발명의 실시예에 대한 이해를 방해한다고 판단되는 경우에는 그 상세한 설명은 생략한다.
본 발명의 실시예의 구성 요소를 설명하는 데 있어서, 제 1, 제 2, A, B, (a), (b) 등의 용어를 사용할 수 있다. 이러한 용어는 그 구성 요소를 다른 구성 요소와 구별하기 위한 것일 뿐, 그 용어에 의해 해당 구성 요소의 본질이나 차례 또는 순서 등이 한정되지 않는다. 또한, 다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가진다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥상 가지는 의미와 일치하는 의미를 가진 것으로 해석되어야 하며, 본 출원에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.
본 발명은 타임랩스 영상 생성 장치 및 방법에 관한 것으로, 차량의 카메라를 이용하여 타임랩스 영상을 생성하되, 운전자의 상태 및 차량의 위치에 따라 타임랩스 영상속도를 조절하여 타임랩스 영상을 생성할 수 있다.
예를들어, 운전자가 전방을 주시하고 있거나 차량의 속도가 빨라, 차량 주변의 환경이 크게 변화되고 있지 않다고 판단되는 경우 타임랩스 영상속도를 빠르게 조절하여 영상을 단축할 수 있다.
또한, 운전자가 전방을 주시하고 있지 않고 차량의 속도가 느린경우, 운전자가 차량 주변의 환경에 관심이 있다고 판단하여 타임랩스 영상속도를 느리게 조절하여 주변환경이 자세히 기록되도록 할 수 있다. 보다 자세한 설명은 도 1을 참조한다.
도 1은 본 발명의 본 발명의 차량 카메라를 이용한 타임랩스 영상 생성 장치를 나타낸 구성도이다.
도 1에 도시된 바와 같이, 본 발명의 차량 카메라를 이용한 타임랩스 영상 생성 장치는 영상 획득부(10), 검출부(20), 통신부(30), 네비게이션(40), 디스플레이(50), 저장부(60) 및 제어부(70)를 포함할 수 있다.
영상 획득부(10)는 차량의 외부에 설치되어 차량 주변의 영상을 획득하는 SVM(SURROUND VIEW MONITOR) 장치를 포함할 수 있다. 영상 획득부(10)는 타임랩스 영상 생성 장치와 유선 또는 무선으로 연결되어 타임랩스 영상 생성 장치로부터 이격되어 설치되도록 구성될 수 있다. 이 경우 타임랩스 영상 생성 장치와 유선 케이블 또는 블루투스, WiFi 또는 적외선 통신 등의 통신 모듈을 통해 통신할 수 있도록 구성한다. 일 실시예에 따르면, 사용자는 타임랩스 영상 생성 장치의 설치 위치와 무관하게 차량 주변의 촬영이 용이한 지점에 영상 획득부(10)를 고정 설치할 수 있다.
영상 획득부(10)는 카메라를 포함할 수 있으며, 차량의 전방의 영상을 획득하는 전방 초광각 카메라, 차량 후방의 영상을 획득하는 후방 초광각 카메라, 차량의 좌우측면의 영상을 획득하는 좌측 초광각 카메라 및 우측 초광각 카메라를 포함할 수 있다. 영상 획득부(10)는 차량의 전방, 후방, 좌우 양 측면의 영상을 획득할 수 있다면, 카메라의 설치 위치 나 개수의 제한은 없다. 영상 획득부(10)는 CCD 또는 CMOS 센서 등의 이미지 센서를 포함할 수 있으며, 이미지 센서를 통해 이미지를 획득할 수 있다.
영상 획득부(10)는 차량 내부에 설치되어 운전자의 영상을 획득할 수 있다. 이를 위하여 영상 획득부(10)는 차량 룸미러에 설치될 수 있지만 이에 한정되는 것은 아니다.
영상 획득부(10)는 영상 처리부(11)를 포함할 수 있다. 그러나 이에 한정되지 않고 영상 처리부(11)는 영상 획득부(10)에 포함되어 일체형으로 제공될 수도 있고, 영상 획득부(10)과 별도로 마련될 수도 있다.
영상 처리부(11)는 영상 획득부(10)로부터 획득된 이미지를 기반으로 동영상 을 생성할 수 있다. 동영상은 촬영속도(초당 프레임 수)를 변화하여 처리될 수 있다. 예를들면, 초당 프레임 수가 평균값을 갖도록 처리(예, 30FPS)되면 일반 동영상을 생성할 수 있고, 초당 프레임 수가 평균값보다 작은 값을 갖도록 처리(예, 30FPS 미만)되면, 즉 저속 촬영 또는 타임랩스 촬영되면 타임랩스 영상을 생성할 수 있다.
또한, 영상 처리부(11)는 저속 촬영 또는 타임랩스 촬영하는데 있어서도 타임랩스 촬영속도를 감소시켜 타임랩스 영상속도를 증가시킬 수 있다. 타임랩스 영상속도를 증가시키는 것은 타임랩스 촬영된 영상이 재생되는 속도가 빨라지는 것으로 이해될 수 있다. 그리고, 영상 처리부(11)는 타임랩스 촬영속도를 증가시켜 타임랩스 영상속도를 감소시킬 수 있다. 타임랩스 영상속도를 감소시키는 것은 타임랩스 촬영된 영상이 재생되는 속도가 늦어지는 것으로 이해될 수 있다.
실시예에 따라, 영상 처리부(11)가 타임랩스 영상을 생성하는데 있어서 제1속도로 이미지를 처리하면, 영상 처리부(11)는 타임랩스 영상속도를 증가시키기 위하여 제1속도보다 느린 제2속도로 이미지를 처리할 수 있다. 또한, 영상 처리부(11)는 타임랩스 영상속도를 감소시키기 위하여 제1속도보다 빠른 제3속도로 이미지를 처리할 수 있다.
참고로, 저속 촬영 또는 타임랩스 촬영은 프레임의 캡쳐 주기를 연속된 프레임의 주기보다 낮춰서 촬영하는 기법으로, 저속 촬영 또는 타임랩스 촬영된 영상은 정상 속도로 재생하더라도 빠른 움직임으로 표현될 수 있다. 예를들면 꽃이 피는 과정은 보통의 속도로 촬영하고 재생하는 경우 꽃이 피어나면서 변화되는 과정을 한눈에 알아볼 수 없지만, 저속 촬영 또는 타임랩스 촬영하고 재생하는 경우, 꽃이 피어나는 과정이 빠른 속도로 표현되기 때문에 쉽게 알아볼 수 있다.
검출부(20)는 레이더, 적외선 센서, 이미지센서, 중력센서, 종가속도 센서, 횡가속도 센서, 속도 센서 등의 각종 센서들로 구성될 수 있다. 이러한 검출부(20)는 자차의 전방 장애물 및/또는 후측방 장애물, 또는 전방위 장애물을 감지할 수 있다. 일 실시예에 따르면, 검출부(20)는 차량의 속도를 검출할 수 있고, 영상 획득부(10)에서 획득된 운전자 영상을 이용하여 운전자의 시선방향을 검출할 수 있다.
통신부(30)는 무선 접속 장치(Access Point) 등을 통하여 근거리 통신망(Local Area Network: LAN)에 접속하는 와이파이(Wireless Fidelity: WiFi) 통신 모듈, 단일의 외부 장치와 일-대-일로 통신하거나 소수의 외부 장치와 일-대-다로 통신하는 블루투스(Bluetooth) 통신 모듈, 디지털 방송 신호를 수신하는 방송신호 수신 모듈을 포함할 수 있다.
또한, 통신부(30)는 GSM/3GPP 계열의 통신 방식(GSM, HSDPA, LTE 어드밴스드), 3GPP2 계열의 통신 방식(CDMA 등) 또는 와이맥스 등의 무선 통신 네트워크를 이용하여 다른 장치와 연결될 수도 있으며, 외부의 서버로부터 전달되는 지도정보를 수신할 수 있다.
또한, 통신부(30)는 다른 장치와 연결되어 멀티미디어 데이터를 송수신할 수 있다. 구체적으로, 통신부(30)는 차량 근처에 위치한 이동 단말 또는 원격지에 위치한 서버와 연결되어, 이동 단말 또는 서버로부터 멀티미디어 데이터를 송신할 수 있다. 예를 들어, 통신부(30)는 사용자의 스마트 폰과 연결되어 스마트 폰에 저장된 멀티미디어를 수신 받을 수 있다.
네비게이션(40)은 차로의 차선 수, 곡률, 차선 상태와 같은 정보가 포함된 지도정보를 저장할 수 있다. 또한, 지도 데이터를 기반으로 한 관심지역(POI) 정보를 저장할 수 있다. 관심지역은 운전자가 관심있는 지역으로 저장될 수 있으며, 주요 시설물, 역, 공항, 터미널, 호텔, 유명관광지 등을 포함할 수 있다.
네비게이션(40)에 저장된 지도는 주행 중인 차로(R)의 차선의 마킹 상태와 같은 세밀한 정보까지 포함된 정밀지도를 포함할 수 있다. 또한, 네비게이션(40)은 위치 측정부를 포함하여 GPS정보를 수신할 수 있다. 위치측정부는 네비게이션(40)에 포함되어 네비게이션(40)과 일체형으로 제공될 수도 있고, 네비게이션(40)과 별도로 마련될 수도 있다.
위치 측정부는 차량의 현재 위치를 측정한다. 위치 측정부는 GPS(Global Positioning System) 모듈로 구현될 수 있다. GPS 모듈은 3개 이상의 GPS 위성으로부터 송신되는 신호를 이용하여 차량의 현재 위치를 산출한다. GPS 모듈은 위성에서 신호를 송신한 시간과 GPS 모듈에서 신호를 수신한 시간의 시간차를 이용하여 위성과 GPS 모듈 간의 거리를 산출한다. GPS 모듈은 산출된 위성과 GPS 모듈 간의 거리 및 송신된 신호에 포함된 위성의 위치 정보를 이용하여 차량의 현재위치를 산출한다. 이때, GPS 모듈은 삼각측량법을 이용하여 차량의 현재위치를 산출한다.
디스플레이(50)는 영상 획득부(10)로부터 획득된 이미지를 표시할 수 있다. 보다 자세하게는 영상 처리부(11)에서 생성된 동영상을 재생할 수 있다. 디스플레이(50)는 액정 디스플레이(liquid crystal display, LCD), 박막 트랜지스터 액정 디스플레이(thin film transistor-liquid crystal display, TFT LCD), 유기 발광 다이오드(organic light-emitting diode, OLED) 디스플레이, 플렉시블 디스플레이(flexible display), 3차원 디스플레이(3D display), 투명디스플레이, 헤드업 디스플레이(head-up display, HUD), 터치스크린 및 클러스터(cluster) 중에서 하나 이상을 포함할 수 있다.
저장부(60)는 타임랩스 영상 생성 장치의 동작에 필요한 각종 데이터를 저장할 수 있다. 즉, 저장부(40)는 타임랩스 영상 생성 장치의 구동에 필요한 운영체제 또는 정보의 제공을 위해 필요한 각종 어플리케이션을 저장할 수 있다. 또한, 지도 데이터 및 영상 획득부(10)에 의해 획득된 영상 데이터를 저장할 수도 있다.
저장부(60)는 플래시 메모리(flash memory), 하드디스크(hard disk), SD 카드(Secure Digital Card), 램(Random Access Memory, RAM), 롬(Read Only Memory, ROM) 및 웹 스토리지(web storage) 등의 저장매체 중 적어도 하나 이상의 저장매체로 구현될 수 있다.
제어부(70)는 타임랩스 영상 생성 장치의 전반적인 동작을 제어할 수 있다. 제어부(70)는 ASIC(Application Specific Integrated Circuit), DSP(Digital Signal Processor), PLD(Programmable Logic Devices), FPGAs(Field Programmable Gate Arrays), CPU(Central Processing unit), 마이크로 컨트롤러(microcontrollers) 및 마이크로 프로세서(microprocessors) 중 적어도 하나 이상을 포함할 수 있다.
제어부(70)는 목적지가 설정된 이후 목적지에 도착하기 이전까지 사용자가 설정한 시간 동안 영상 획득부(10)로부터 영상을 획득하고 영상 처리부(11)에서 동영상을 생성하도록 할 수 있다.
일 실시예에 따르면, 제어부(70)는 운전자의 시선이 전방을 주시하고 있지 않더라도, 차량이 소정속도 이상으로 주행중인 것으로 판단되면, 타임랩스 촬영하되 타임랩스 촬영속도를 감소시켜 타임랩스 촬영된 영상의 속도가 증가되도록 할 수 있다. 여기서 영상의 속도는 재생되는 속도를 의미할 수 있다.
타임랩스 촬영된 영상의 속도를 증가시키기 위하여 초당 프레임의 간격을 길게 조절하여 촬영하도록 할 수 있다. 초당 프레임의 간격이 길어진다는 것은 1초당 촬영되는 프레임 수가 작아진다는 것(촬영속도 감소)을 의미하고, FPS는 작은 수치를 갖도록 조절될 수 있다.
예를들어, 타임랩스 촬영을 위해 제1속도로 촬영하고 있었고, 제어부(70)가 차량이 소정속도 이상으로 주행중인 것으로 판단하면, 제1속도보다 느린 제2속도로 타임랩스 촬영하도록 영상 처리부(11)를 제어할 수 있다.
제어부(70)는 상술한 실시예 이외에도 차량이 고속도로를 주행하고 있거나 톨게이트를 지나고 있는 것으로 판단하거나, 현재 차량의 위치가 관심지역에 위치하지 않은 것으로 판단한 경우, 상술한 제1속도보다 느린 제2속도로 촬영하도록 제어할 수 있다. 이와 같이 제어부(70)가 제1속도보다 느린 제2속도로 조절하여 타임랩스 촬영하는 것은, 고속도로와 같이 주변에 관심지역이 존재하지 않고 도로만이 반복되는 환경에서는 큰 변화가 없다고 판단하여 타임랩스 영상이 빠르게 재생되도록 함으로써 영상을 단축시키기 위함이다.
다른 실시예에 따라, 제어부(70)는 운전자의 시선이 전방을 주시하고 있고, 현재 차량이 관심지역에 위치한 것으로 판단되면, 타임랩스 촬영하되 타임랩스 촬영속도를 증가시켜 타임랩스 촬영된 영상의 속도가 감소되도록 할 수 있다. 이를 위하여 초당 프레임의 간격을 짧게 조절하여 촬영하도록 할 수 있다. 초당 프레임의 간격이 짧아진다는 것은 1초당 촬영되는 프레임 수가 많아진다는 것(촬영속도 증가)을 의미하고, FPS는 높은수치를 갖도록 조절될 수 있다.
예를들어, 타임랩스 촬영을 위해 제1속도로 촬영하고 있었고, 제어부(70)가 운전자의 시선이 전방을 주시하고, 현재 차량이 관심지역에 위치한 것으로 판단되면, 제1속도보다 빠른 제3속도로 타임랩스 촬영하도록 영상 처리부(11)를 제어할 수 있다.
제어부(70)는 상술한 실시예 이외에도 운전자가 차량의 전방이 아닌 차량의 측방향을 주시하고 있거나, 차량의 속도가 소정속도 미만인 것으로 판단되면, 상술한 제1속도보다 빠른 제3속도로 촬영하도록 제어할 수 있다. 이와 같이 제어부(70)가 제1속도보다 빠른 제3속도로 조절하여 타임랩스 촬영하는 것은, 관심지역 주변 경관이 자세히 기록되도록 하기 위함이다.
도 2는 본 발명의 차량 카메라를 이용한 타임랩스 영상 생성 방법을 나타낸 순서도이다.
먼저, 차량 주변의 이미지를 획득하고, 획득된 차량 주변 이미지를 이용하여 제1속도로 이미지를 처리하여 타임랩스 영상을 생성할 수 있다. 또한, 차량의 속도, 차량의 위치 및 운전자의 시선 방향을 검출할 수 있다.
운전자가 전방을 주시하고 있는지 여부를 판단한다(S100). S100은 영상 획득부(10)로부터 획득된 정보를 기반으로 운전자의 시선의 방향을 판단할 수 있다. 운전자가 차량의 측방향을 주시하고 있는 경우에는 운전자가 전방을 주시하고 있지 않은 것으로 판단될 수 있다.
S100에서 운전자가 전방을 주시하고 있지 않은 경우(NO), 차량의 속도가 소정속도 이상인지 판단할 수 있다(S110). S110에서 실시예에 따르면, 차량의 속도가 90Km이상인지 판단할 수 있다.
S110에서 차량의 속도가 소정속도 미만인 것으로 판단되면(N0), 현재 차량이 관심지역에 위치하였는지 판단할 수 있다(S120). 여기서, 관심지역은 주요 시설물, 역, 공항, 터미널, 호텔, 유명관광지 등을 포함할 수 있다.
S120에서 현재 차량이 관심지역에 위치하지 않으면(N0), 타임랩스의 영상속도를 증가시킨다(S130). S130은 타임랩스 촬영하되 타임랩스 촬영속도를 감소시켜 타임랩스 촬영된 영상의 속도가 증가되도록 한다. 여기서 타임랩스 촬영된 영상의 속도는 타임랩스 촬영된 영상이 재생되는 속도를 의미할 수 있다.
S130은 초당 프레임의 간격을 길게 조절하여 타임랩스 촬영하도록 할 수 있다. 초당 프레임의 간격을 길게 조절한다는 것은 1초당 촬영되는 프레임 수가 작아진다는 것(촬영속도 감소)을 의미하고, FPS는 작은 수치를 갖도록 조절될 수 있다.
예를들어 타임랩스 촬영을 위해 제1속도로 촬영하고 있었다면, S130에서는 제1속도보다 느린 제2속도로 타임랩스 촬영하도록 할 수 있다.
S130는 차량의 주변환경 및 주행환경에 있어서, 큰 변화가 없다고 판단하여 타임랩스 영상이 빠르게 재생되도록 영상을 단축시키기 위하여 수행될 수 있다.
S130에서는 운전자가 전방을 주시하지 않을 수 있기 때문에 운전자가 주행에 부주의 할 수 있음을 경고를 통해 알릴 수 있다.
S120에서 현재 차량이 관심지역에 위치하는 것으로 판단되면(YES), 타임랩스 영상 속도를 감소시킨다(S140). S140은 타임랩스 촬영하되 타임랩스 촬영속도를 증가시켜 타입랩스 촬영된 영상의 속도가 감소되도록 한다. 여기서 타임랩스 촬영된 영상의 속도는 타임랩스 촬영된 영상이 재생되는 속도를 의미할 수 있다.
S140은 초당 프레임의 간격을 짧게 조절하여 타임랩스 촬영하도록 할 수 있다. 초당 프레임의 간격을 짧게 조절한다는 것은 1초당 촬영되는 프레임 수가 많아진다는 것(촬영속도 증가)을 의미하고, FPS는 높은수치를 갖도록 조절될 수 있다.
예를들어, 타임랩스 촬영을 위해 제1속도로 촬영하고 있었다면, S150에서는 제1속도보다 빠른 제3속도로 타임랩스 촬영하도록 할 수 있다.
S140는 차량의 주변환경 및 주행환경이 관심지역이라고 판단하면 차량 주변환경을 자세히 기록하기 위하여 수행될 수 있다.
S110으로 돌아가서, S110에서 차량의 속도가 소정속도 이상인 것으로 판단되면(YES), 타임랩스 영상속도를 증가시킨다(S130). S130은 타임랩스 촬영하되 타임랩스 촬영속도를 감소시켜 타임랩스 촬영된 영상의 속도가 증가되도록 한다. 여기서 타임랩스 촬영된 영상의 속도는 타임랩스 촬영된 영상이 재생되는 속도를 의미할 수 있다.
S100으로 돌아가서, S100에서 운전자가 전방을 주시하고 있는 것으로 판단하면(YES) 현재 차량이 관심지역에 위치하였는지 판단할 수 있다(S120). 여기서, 관심지역은 주요 시설물, 역, 공항, 터미널, 호텔, 유명관광지 등을 포함할 수 있다.
S120에서 현재 차량이 관심지역에 위치하지 않으면(N0), 타임랩스의 영상속도를 증가시킨다(S130). S120에서 현재 차량이 관심지역에 위치하는 것으로 판단되면(YES), 타임랩스 영상 속도를 감소시킨다(S140).
이상의 설명은 본 발명의 기술 사상을 예시적으로 설명한 것에 불과한 것으로서, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 다양한 수정 및 변형이 가능할 것이다.
따라서, 본 발명에 개시된 실시예들은 본 발명의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시예에 의하여 본 발명의 기술 사상의 범위가 한정되는 것은 아니다. 본 발명의 보호 범위는 아래의 청구범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술 사상은 본 발명의 권리범위에 포함되는 것으로 해석되어야 할 것이다.
영상 획득부 10
영상 처리부 11
검출부 20
통신부 30
네비게이션 40
디스플레이 50
저장부 60
제어부 70

Claims (19)

  1. 차량 주변의 이미지 및 운전자 영상을 획득하는 영상 획득부;
    상기 획득된 차량 주변 이미지가 제1속도를 갖도록 처리하여 타임랩스 영상을 생성하는 영상 처리부;
    차량의 속도 및 운전자 시선방향을 검출하는 검출부;
    차량의 위치를 측정하는 위치 측정부; 및
    상기 차량 위치, 상기 차량의 속도 및 상기 운전자 시선방향을 기반으로 상기 타임랩스 영상 속도를 조절하는 제어부를 포함하는 것을 특징으로 하는 차량 카메라를 이용한 타임랩스 영상 생성 장치.
  2. 청구항 1에 있어서,
    상기 제어부는
    상기 차량이 관심지역에 위치하지 않으면, 상기 타임랩스 영상속도를 증가시키는 것을 특징으로 하는 차량 카메라를 이용한 타임랩스 영상 생성 장치.
  3. 청구항 1에 있어서,
    상기 제어부는
    상기 차량의 속도가 소정속도 이상이면, 상기 타임랩스 영상속도를 증가시키는 것을 특징으로 하는 차량 카메라를 이용한 타임랩스 영상 생성 장치.
  4. 청구항 1에 있어서,
    상기 제어부는
    상기 운전자의 시선이 상기 차량의 전방을 향하고 있으면, 상기 타임랩스 영상속도를 증가시키는 것을 특징으로 하는 차량 카메라를 이용한 타임랩스 영상 생성 장치.
  5. 청구항 1에 있어서,
    상기 제어부는
    상기 차량이 관심지역에 위치하면, 상기 타임랩스 영상속도를 감소시키는 것을 특징으로 하는 차량 카메라를 이용한 타임랩스 영상 생성 장치.
  6. 청구항 1에 있어서,
    상기 제어부는
    상기 차량의 속도가 소정속도 미만이면, 상기 타임랩스 영상속도를 감소시키는 것을 특징으로 하는 차량 카메라를 이용한 타임랩스 영상 생성 장치.
  7. 청구항 1에 있어서,
    상기 제어부는
    상기 운전자의 시선이 상기 차량의 전방을 향하고 있지 않으면, 상기 타임랩스 영상속도를 감소시키는 것을 특징으로 하는 차량 카메라를 이용한 타임랩스 영상 생성 장치.
  8. 청구항 1에 있어서,
    상기 영상 처리부는
    타임랩스 촬영속도를 상기 제1속도보다 느린 제2속도로 하여 상기 타임랩스 영상속도를 증가시키는 것을 특징으로 하는 차량 카메라를 이용한 타임랩스 영상 생성 장치.
  9. 청구항 1에 있어서,
    상기 영상 처리부는
    상기 타임랩스 촬영속도를 상기 제1속도보다 빠른 제3속도로 하여 상기 타임랩스 영상속도를 감소시키는 것을 특징으로 하는 차량 카메라를 이용한 타임랩스 영상 생성 장치.
  10. 청구항 1에 있어서,
    상기 타임랩스 영상을 출력하는 디스플레이를 더 포함하는 것을 특징으로 하는 타임랩스 영상 생성 장치.
  11. 차량 주변의 이미지를 획득하고, 차량의 속도, 차량의 위치 및 운전자의 시선방향을 검출하는 단계; 및
    상기 획득된 차량 주변 이미지가 제1속도를 갖도록 처리하여 타임랩스 영상을 생성하는 단계를 포함하되,
    상기 타임랩스 영상을 생성하는 단계에서 차량의 속도, 차량의 위치 및 운전자의 시선을 기반으로 상기 타임랩스 영상속도를 조절하여 상기 타임랩스 영상을 생성하는 것을 특징으로 하는 차량 카메라를 이용한 타임랩스 영상 생성 방법.
  12. 청구항 11에 있어서,
    상기 타임랩스 영상을 생성하는 단계는
    상기 차량이 관심지역에 위치하지 않으면, 상기 타임랩스 영상속도를 증가시키는 것을 특징으로 하는 차량 카메라를 이용한 타임랩스 영상 생성 방법.
  13. 청구항 11에 있어서,
    상기 타임랩스 영상을 생성하는 단계는
    상기 차량의 속도가 소정속도 이상이면, 상기 타임랩스 영상속도를 증가시키는 것을 특징으로 하는 차량 카메라를 이용한 타임랩스 영상 생성 방법.
  14. 청구항 11에 있어서,
    상기 타임랩스 영상을 생성하는 단계는
    상기 운전자의 시선이 상기 차량의 전방을 향하고 있으면, 상기 타임랩스 영상속도를 증가시키는 것을 특징으로 하는 차량 카메라를 이용한 타임랩스 영상 생성 방법.
  15. 청구항 11에 있어서,
    상기 타임랩스 영상을 생성하는 단계는
    상기 차량이 관심지역에 위치하면, 상기 타임랩스 영상속도를 감소시키는 것을 특징으로 하는 차량 카메라를 이용한 타임랩스 영상 생성 방법.
  16. 청구항 11에 있어서,
    상기 타임랩스 영상을 생성하는 단계는
    상기 차량의 속도가 소정속도 미만이면, 상기 타임랩스 영상속도를 감소시키는 것을 특징으로 하는 차량 카메라를 이용한 타임랩스 영상 생성 방법.
  17. 청구항 11에 있어서,
    상기 타임랩스 영상을 생성하는 단계는
    상기 운전자의 시선이 상기 차량의 전방을 향하고 있지 않으면, 상기 타임랩스 영상속도를 감소시키는 것을 특징으로 하는 차량 카메라를 이용한 타임랩스 영상 생성 방법.
  18. 청구항 11에 있어서,
    상기 타임랩스 영상을 생성하는 단계는
    타임랩스 촬영속도를 상기 제1속도보다 느린 제2속도로 하여 상기 타임랩스 영상속도를 증가시키는 것을 특징으로 하는 차량 카메라를 이용한 타임랩스 영상 생성 방법.
  19. 청구항 11에 있어서,
    상기 타임랩스 영상을 생성하는 단계는
    상기 타임랩스 촬영속도를 상기 제1속도보다 빠른 제3속도로 하여 상기 타임랩스 영상속도를 감소시키는 것을 특징으로 하는 차량 카메라를 이용한 타임랩스 영상 생성 방법.

KR1020170167263A 2017-12-07 2017-12-07 차량 카메라를 이용한 타임랩스 영상 생성 장치 및 방법 KR102529908B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020170167263A KR102529908B1 (ko) 2017-12-07 2017-12-07 차량 카메라를 이용한 타임랩스 영상 생성 장치 및 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020170167263A KR102529908B1 (ko) 2017-12-07 2017-12-07 차량 카메라를 이용한 타임랩스 영상 생성 장치 및 방법

Publications (2)

Publication Number Publication Date
KR20190067380A true KR20190067380A (ko) 2019-06-17
KR102529908B1 KR102529908B1 (ko) 2023-05-08

Family

ID=67064519

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020170167263A KR102529908B1 (ko) 2017-12-07 2017-12-07 차량 카메라를 이용한 타임랩스 영상 생성 장치 및 방법

Country Status (1)

Country Link
KR (1) KR102529908B1 (ko)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20150071400A (ko) * 2013-12-18 2015-06-26 현대자동차주식회사 합성된 주행 영상 제공방법
KR20160034004A (ko) * 2014-09-19 2016-03-29 현대모비스 주식회사 차량용 카메라 해상도 제어 장치 및 방법
KR20170074538A (ko) * 2015-12-22 2017-06-30 삼성전자주식회사 타임랩스 영상을 생성하는 장치 및 방법

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20150071400A (ko) * 2013-12-18 2015-06-26 현대자동차주식회사 합성된 주행 영상 제공방법
KR20160034004A (ko) * 2014-09-19 2016-03-29 현대모비스 주식회사 차량용 카메라 해상도 제어 장치 및 방법
KR20170074538A (ko) * 2015-12-22 2017-06-30 삼성전자주식회사 타임랩스 영상을 생성하는 장치 및 방법

Also Published As

Publication number Publication date
KR102529908B1 (ko) 2023-05-08

Similar Documents

Publication Publication Date Title
US20200344421A1 (en) Image pickup apparatus, image pickup control method, and program
JP6795030B2 (ja) 撮像制御装置及び撮像制御方法、並びに撮像装置
JP4622928B2 (ja) 車載カメラ制御装置および車載カメラ制御方法。
EP3700198B1 (en) Imaging device, image processing apparatus, and image processing method
US10704957B2 (en) Imaging device and imaging method
US11056518B2 (en) Imaging apparatus and imaging method
CN108141540B (zh) 具有移动检测的全向相机
JP2010067262A (ja) インテリジェント走行支援システム
KR20200096518A (ko) 정보 처리 장치, 이동체, 제어 시스템, 정보 처리 방법 및 프로그램
US20200154025A1 (en) Control apparatus, image pickup apparatus, control method, program, and image pickup system
CN111886854B (zh) 曝光控制装置、曝光控制方法、程序、成像装置和移动体
JP7235906B2 (ja) 固体撮像装置
US20190197730A1 (en) Semiconductor device, imaging system, and program
CN107230373B (zh) 信息推荐方法、装置、计算机可读存储介质和移动终端
KR102529908B1 (ko) 차량 카메라를 이용한 타임랩스 영상 생성 장치 및 방법
US11070714B2 (en) Information processing apparatus and information processing method
JP2016090848A (ja) 表示制御装置
JP7174667B2 (ja) 状態計測装置
CN111684784B (zh) 图像处理方法和装置
KR102552489B1 (ko) 차량 카메라를 이용한 여정기록 장치 및 방법
JP2014235022A (ja) ナビゲーション装置およびナビゲーション方法
CN105704438B (zh) 基于视频预览车辆前方道路区段的方法和设备及基于视频记录车辆的道路区段的方法和设备
JP2020109572A (ja) 撮像情報記憶装置、撮像情報記憶方法及びプログラム
JP6284203B2 (ja) 監視装置
WO2019049712A1 (en) SIGNAL PROCESSING APPARATUS, SIGNAL PROCESSING METHOD, PROGRAM, AND MOBILE BODY

Legal Events

Date Code Title Description
A201 Request for examination
E701 Decision to grant or registration of patent right
GRNT Written decision to grant