KR101961663B1 - 플랫폼 운용시스템 및 그의 표적 포착 방법 - Google Patents

플랫폼 운용시스템 및 그의 표적 포착 방법 Download PDF

Info

Publication number
KR101961663B1
KR101961663B1 KR1020170066357A KR20170066357A KR101961663B1 KR 101961663 B1 KR101961663 B1 KR 101961663B1 KR 1020170066357 A KR1020170066357 A KR 1020170066357A KR 20170066357 A KR20170066357 A KR 20170066357A KR 101961663 B1 KR101961663 B1 KR 101961663B1
Authority
KR
South Korea
Prior art keywords
target
image
image frame
platform
time
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
KR1020170066357A
Other languages
English (en)
Other versions
KR20180130643A (ko
Inventor
이찬용
김대연
우영권
천성규
Original Assignee
국방과학연구소
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 국방과학연구소 filed Critical 국방과학연구소
Priority to KR1020170066357A priority Critical patent/KR101961663B1/ko
Publication of KR20180130643A publication Critical patent/KR20180130643A/ko
Application granted granted Critical
Publication of KR101961663B1 publication Critical patent/KR101961663B1/ko
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F41—WEAPONS
    • F41G—WEAPON SIGHTS; AIMING
    • F41G3/00—Aiming or laying means
    • F41G3/14—Indirect aiming means
    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F41—WEAPONS
    • F41G—WEAPON SIGHTS; AIMING
    • F41G11/00—Details of sighting or aiming apparatus; Accessories
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/60—Analysis of geometric attributes

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Geometry (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Studio Devices (AREA)
  • Image Analysis (AREA)

Abstract

본 발명은 표적으로 진입하는 플랫폼에서 운용자의 표적 지정 지연시간을 보상하여 표적을 포착하는 플랫폼 운용시스템 및 그 방법에 관한 것으로, 표적 포착시간내에서 표적을 탐지하여 표적으로 진입하는 플랫폼 운용 시스템에서, 사수가 표적을 지정할 수 있도록 표적의 영상 프레임을 주기적으로 생성하여 사수에게 제공하는 영상 센서; 및 제1영상 프레임에서 사수가 표적을 지정한 경우 해당 표적의 위치정보가 수신되기까지의 표적 지정 지연시간동안 상기 영상 센서에서 생성되어 버퍼에 적재되는 제1영상 프레임 이후의 영상 프레임과 표적 포착시간동안 추가로 적재되는 영상 프레임을 일정한 영상 프레임 수만큼 스킵하면서 상기 지정 표적에 대한 크기 변화율을 추정하고 표적점을 추적하여 표적을 포착하는 영상 추적기;를 포함하는 것을 특징으로 한다.

Description

플랫폼 운용시스템 및 그의 표적 포착 방법{PLATFORM OPERATING SYSTEM AND TARGET ACQUISTION METHOD THEREOF}
본 발명은 표적으로 진입하는 플랫폼에서 운용자의 표적 지정 지연시간을 보상하여 표적을 포착하는 플랫폼 운용시스템 및 그의 표적 포착방법에 관한 것이다.
일반적으로 플랫폼 운용시스템은 시스템의 운용 개념, 목표 표적 및 성능 등에 따라 플랫폼이 목표 표적으로 정확하게 진입하기 위해 표적의 정보 획득과 운용 제어 명령을 생성하는 다양한 방법을 사용한다.
사수(운용자)가 인지하여 표적을 지정하는 플랫폼 운용 시스템에서는 사수가 표적을 지정할 수 있도록 지속적으로 해당 표적의 영상을 생성하여 사수에게 전송하는데, 이 경우 영상의 전송 등에 의하여 표적 정보의 지연시간이 생성된다.
상기와 같은 표적 정보의 지연시간을 극복하고 상기 사수가 지정한 표적 정보(과거의 표적 정보)를 바탕으로 현재의 영상 프레임에서 표적을 포착하기 위하여 플랫폼 운용시스템은 영상 추적기를 탑재하고 있다. 상기 표적 정보의 지연 시간을 극복하여 표적을 포착하는 영상 추적기의 표적 포착 시간은 목표 표적으로의 진입 정확도 성능을 좌우한다.
따라서, 표적 정보의 지연 시간을 극복하고 목표로 정해진 영상 추적기의 표적 포착 시간을 만족하며 영상에서의 표적 크기 변화율을 추정하고 표적점을 추적하는 영상 추적기를 장착한 플랫폼이 필요한 실정이다.
본 발명의 일 목적은 표적 정보의 지연 시간을 극복하고 목표로 정해진 영상 추적기의 표적 포착 시간을 만족할 수 있는 플랫폼 운용시스템 및 그의 표적 포착 방법을 제공하는데 있다.
본 발명의 다른 목적은 영상 추적기의 표적 포착 시간을 만족하고 영상에서의 표적 크기 변화율을 추정하여 표적점을 추적하는 플랫폼 운용시스템 및 그의 표적 포착방법을 제공하는데 있다.
상기와 같은 목적을 달성하기 위하여 본 발명의 실시예에 따른 표적 포착시간내에서 표적을 탐지하여 표적으로 진입하는 플랫폼 운용 시스템은, 표적의 영상 프레임을 주기적으로 생성하는 영상 센서; 및 영상 센서에서 생성된 제1영상 프레임을 사수로 전송한 후 제1영상 프레임상에서 사수가 지정한 표적의 위치정보가 수신되기까지의 표적 지정 지연시간 동안 상기 영상 센서에서 생성되어 버퍼에 적재되는 제1영상 프레임 이후의 영상 프레임과, 표적 포착시간동안 추가로 적재되는 영상 프레임을 일정한 영상 프레임 수만큼 스킵하면서 상기 사수가 지정한 표적에 대한 크기 변화율을 추정하고 표적점을 추적하여 표적을 포착하는 영상 추적기;를 포함할 수 있다.
본 발명의 실시예에 따라 상기 표적 포착 시간은 표적 지정 지연시간 동안 적재된 영상 프레임과 표적 포착 시간동안 추가로 적재된 영상 프레임을 일정한 영상 프레임 수만큼 건너뛰면서 처리한 시간과 동일한 것을 특징으로 한다.
본 발명의 실시예에 따라 상기 영상 추적기는 표적 포착 시간 대비 표적 지정 지연시간동안 적재된 전체 영상 프레임의 추적 처리시간의 비율과 하나의 영상 프레임에 대한 획득시간 대비 처리시간의 비율을 가산하여 스킵해야 할 영상 프레임의 수를 결정할 수 있다.
본 발명의 실시예에 따라 상기 영상 추적기는 플랫폼 이동 속도와 사수의 최종 표적 지정을 위한 플랫폼과 표적과의 거리를 이용하여 표적에 대한 크기 변화율을 추정하여 표적을 포착할 수 있다.
본 발명의 실시예에 따라 상기 영상 추적기는 표적 지정 지연시간 동안 영상 센서에서 생성되어 적재되는 복수의 영상 프레임에서 스킵할 프레임 수를 결정하여, 상기 표적 지정 지연시간동안 적재된 영상 프레임과 상기 표적 포착 시간동안 추가로 적재되는 영상 프레임을 상기 결정된 영상 프레임 수만큼 스킵하여 지연 시간을 보상할 수 있다.
상기와 같은 목적을 달성하기 위하여 본 발명의 실시예에 따른 표적 포착시간내에서 표적을 탐지하는 플랫폼 운용 시스템의 표적 탐지 방법은, 영상 센서를 통해 표적의 영상 프레임을 주기적으로 생성하는 단계; 영상 센서에서 생성된 제1영상 프레임을 사수로 전송한 후 제1영상 프레임상에서 사수가 지정한 표적의 위치정보가 수신되기까지의 표적 지정 지연시간동안 상기 영상 센서에서 생성되어 버퍼에 적재되는 제1영상 프레임 이후의 영상 프레임과 상기 표적 포착 시간동안 추가로 적재되는 영상 프레임에서 스킵할 프레임 수를 결정하는 단계; 상기 결정된 프레임 수에 따라 표적 지정 지연시간 동안 적재된 영상 프레임과 상기 표적 포착시간동안 추가로 적재되는 영상 프레임을 스킵하는 단계; 및 상기 영상 프레임 스킵 중에 상기 지정 표적에 대한 크기 변화율을 추정하고 표적점을 추적하여 표적을 포착하는 단계;를 포함할 수 있다.
본 발명의 실시예에 따라 상기 표적 포착 시간은 표적 지정 지연시간 동안 적재된 영상 프레임과 표적 포착 시간동안 추가로 적재된 영상 프레임을 일정한 영상 프레임 수만큼 건너뛰면서 처리한 시간과 동일한 것을 특징으로 한다.
본 발명의 실시예에 따라 상기 스킵할 프레임 수를 결정하는 단계는 표적 포착 시간 대비 표적 지정 지연시간동안 적재된 전체 영상 프레임의 추적 처리시간의 비율과 하나의 영상 프레임에 대한 획득시간 대비 처리시간의 비율을 가산하여 스킵해야 할 영상 프레임의 수를 결정할 수 있다.
상기 실시예에 따라 본 발명은 사수가 지정한 표적에 대하여 표적 지정 지연 시간을 보상하고 표적 포착 시간을 만족하기 위하여 지연시간 동안 적재된 영상 프레임을 스킵하면서 표적을 추적함으로써 플랫폼이 목표 표적으로 진입하는데 필요한 최소 시간을 명확히 확보할 수 있어 플랫폼 운용 향상을 증가시킬 수 있는 효과가 있다.
또한, 상기 실시예에 따라 본 발명은 상기 적재된 영상 프레임을 스킵하면서 표적의 크기 변화율을 추정하고 표적점을 추적함으로써 영상 추적기의 추적 성능을 향상시켜, 영상 추적기에서 생성한 제어 신호로 운용되는 플랫폼의 표적 진입 정확도를 높일 수 있는 효과가 있다.
도 1은 본 발명의 실시예에 따른 플렛폼 운용 시스템의 블록 구성도.
도 2는 사수 지정 표적에 따른 지연 시간동안 적재된 영상 프레임과 표적 포착 알고리즘 동작 시간동안 추가로 적재된 영상 프레임을 나타낸 도면.
도 3은 본 발명에서 플랫폼과 표적과의 거리에 따른 표적 크기 변화율을 도시화한 그래프.
도 4는 본 발명의 실시예에 따른 플랫폼 운용시스템에서 표적 지정 지연시간을 보상하여 표적을 포착하는 동작을 나타낸 순서도.
이하 첨부된 도면들을 참조하여 본 발명의 바람직한 실시예를 설명한다.
이하의 설명에서 사용되는 구성요소에 대한 접미사 "모듈" 및 "부"는 명세서 작성의 용이함만이 고려되어 부여되거나 혼용되는 것으로서, 그 자체로 서로 구별되는 의미 또는 역할을 갖는 것은 아니다.
본 명세서에서 제1, 제2 등과 같이 서수를 포함하는 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되지는 않는다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다. 이에 더하여 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다.
본 명세서에서 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 더 포함할 수 있는 것을 의미한다.
또한, 본 명세서에 개시된 실시 예를 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 본 명세서에 개시된 실시 예의 요지를 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다. 또한, 첨부된 도면은 본 명세서에 개시된 실시 예를 쉽게 이해할 수 있도록 하기 위한 것일 뿐, 첨부된 도면에 의해 본 명세서에 개시된 기술적 사상이 제한되지 않으며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다.
일반적으로 플랫폼 운용 시스템에서 사수 지정 표적 정보의 지연 시간을 극복하여 표적을 포착하는 영상 추적기의 표적 포착 시간은 목표 표적으로의 진입 정확도 성능을 좌우한다. 또한, 영상 추적기의 표적 포착 시간은 표적 포착 알고리즘을 수행하는 시간 동안 영상 추적기에 생성된 영상에서의 표적의 크기 변화율을 추정하고 표적점을 추적하는 포착 알고리즘의 성능을 좌우하여, 포착된 표적에 대하여 생성된 운용 제어 신호를 기반으로 목표 표적으로 진입하는 플랫폼의 최종 성능에 영향을 준다.
따라서, 본 발명은 플랫폼이 표적으로 진입하는 상황에서 사수의 표적 지정 지연시간을 보상하여 표적을 포착하는 플랫폼 운용시스템 및 그의 표적 포착 방법을 제안한다. 즉, 본 발명은 사수의 표적 지정 지연시간 동안 적재된 영상 프레임을 스킵 (skip)하면서(건너뛰면서) 표적을 추적하여 영상 추적기의 표적 포착 시간을 만족하고, 상기 적재된 영상 프레임을 점프하면서 표적의 크기 변화율을 추정하고 표적점을 추적하여 현재 영상 프레임에서 표적을 포착하는 방안을 제안한다.
이를 위하여 본 발명은 사수가 지정한 표적에 대하여 지연시간을 극복하면서 현재 영상 프레임에서 표적을 포착하는데 요구되는 표적 포착 알고리즘 수행 시간을 만족하기 위하여, 지연시간, 영상 한 프레임 생성 시간, 영상 추적기의 영상 한 프레임 처리 시간을 이용하여 요구되는 표적 포착 시간을 만족할 수 있도록 스킵하는 영상 프레임 수를 결정할 수 있다.
이에 더하여 본 발명은 상기 결정된 스킵 영상 프레임 수, 플랫폼 이동 속도, 표적을 최종으로 지정할 수 있는 플랫폼과 표적과의 거리를 고려하여 표적 크기 변화율 범위를 설정하고, 상기 설정된 표적 크기 변화율 범위 내에서 영상 추적기의 표적 모델의 크기를 변화시키면서 추적된 표적과의 유사도 비교를 통해 표적의 크기 변화율을 추정하고 표적점을 추적할 수 있다.
도 1은 본 발명의 실시예에 따른 플렛폼 운용 시스템의 블록 구성도이다.
도 1을 참조하면, 본 발명에 따른 플렛폼 운용 시스템은 사수가 표적을 지정할 수 있도록 영상을 주기적으로 획득(또는 촬영)하여 사수에게 전송하는 영상 센서(100)와, 사수의 표적 지정 지연 시간동안 영상 센서(100)에서 획득되어 버퍼(미도시)에 적재되는 영상 프레임(과거 프레임)을 소정 프레임수만큼 스킵하면서 표적의 크기 변화율을 추정하여 표적을 포착하는 영상 추적기(110)와, 상기 영상 추적기(110)의 표적 포착 결과에 근거하여 추적이 일어나도록 기계적 및 전자적 제어장치를 구동하는 구동부(120)를 포함할 수 있다. 상기 구동부(120)는 영상 센서(100)를 지지하는 기구부와 상기 기구부를 움직이는 서보 제어부로 구성될 수 있다. 그리고 서보 제어부는 다시 모터 및 서보 증폭기와 안정화를 위한 자이로스코프, 그리고 이들을 결합시켜주는 하드웨어와 소프트웨어를 포함할 수 있다.
본 발명에서 영상은 영상 센서(100)에서 일정한 주기를 가지고 획득되며 각 영상을 프레임이라고 부른다. 영상 추적기(110)는 영상 센서에서 획득된 프레임마다 표적의 위치를 도출할 수 있으며, 도출된 표적 위치를 추적점이라고 정의한다.
도 2는 사수 지정 표적에 따른 지연 시간동안 적재된 영상 프레임과 표적 포착 알고리즘 동작 시간동안 추가로 적재된 영상 프레임을 나타내고, 도 3은 플랫폼과 표적과의 거리에 따른 표적 크기 변화율을 도시화한 그래프이다.
도 1 내지 도 3을 참조하면, 영상 센서(100)는 표적에 대한 영상 프레임(예: 제1영상프레임)을 생성하여 사수에게 전송하고, 사수가 영상 프레임에서 표적을 지정한 후 표적 지정 위치 정보를 전송하면 영상 추적기(110)는 시점(T)에서 표적 추적을 개시한다. 이때 표적에 대한 제1영상 프레임을 생성하여 사수에게 전송하고 사수로부터 표적 지정 위치 정보가 수신될 때까지의 시간이 사수의 표적 지정 지연시간으로 정의된다.
상기 사수의 표적 지정 지연시간 동안 상기 영상 센서(100)에서 제1영상 프레임 이후에 일정 주기로 생성되는(획득되는) 영상 프레임은 영상 추적기(100)내의 버퍼에 적재된다. 그 결과 도 2에서 왼쪽으로 갈수록 과거의 영상 프레임에 해당하고, 오른쪽으로 갈수록 현재의 프레임에 해당한다.
따라서, 영상 추적기(110)는 사수의 표적 지정에 의해 발생된 지연시간을 보상하고(현재의 영상 프레임을 따라 잡고) 요구되는(또는 설정된) 표적 포착 시간을 만족할 수 있도록 스킵(또는 점프)해야 하는 영상 프레임 수를 결정한다.
도 2를 참조하면, 영상 추적기(110)에서 요구되는 표적 포착시간은, ① 사수의 표적 지연 시간동안 적재된(저장된) 영상 프레임을 소정의 영상 프레임 수만큼 스킵하면서 영상 추적기의 표적 포착 알고리즘을 처리한 시간과, ② 표적 포착시간 동안 추가로 적재된 영상 프레임을 소정의 영상 프레임 수만큼 점프하면서 표적 포착 포착알고리즘을 처리한 시간의 합으로, 다음의 수학식 1과 같이 나타낼 수 있다.
[수학식 1]
Figure 112017051239091-pat00001
여기서,
Figure 112017051239091-pat00002
는 영상 추적기의 표적 포착시간,
Figure 112017051239091-pat00003
는 하나의 영상 프레임에 대한 영상 추적기의 표적추적 처리시간, BN은 사수의 표적 지정 지연시간동안 적재된 영상의 프레임 수이다. 또한, 상기
Figure 112017051239091-pat00004
는 하나의 영상 프레임 획득시간이고,
Figure 112017051239091-pat00005
는 표적 포착시간 동안 적재된 영상을 스킵하는 영상 프레임 수를 나타낸다.
상기 수학식 1에서 표적 포착 시간(
Figure 112017051239091-pat00006
)을 만족하기 위해서 스킵해야 할 프레임의 수(
Figure 112017051239091-pat00007
)는 다음의 수학식 2와 같이 결정할 수 있다.
[수학식2]
Figure 112017051239091-pat00008
즉, 스킵해야 할 영상 프레임의 수(
Figure 112017051239091-pat00009
)는, 표적 포착 시간(
Figure 112017051239091-pat00010
) 대비 지연 시간동안 적재된 전체 영상 프레임(BN)의 추적 처리시간의 비율과 하나의 영상 프레임에 대한 획득시간 대비 처리시간의 비율의 합으로 나타낼 수 있다. 상기 스킵해야 할 영상 프레임의 수(
Figure 112017051239091-pat00011
)는 정수이다.
따라서, 영상 추적기(110)는 지연 시간 동안 적재된 영상 프레임과 표적 포착 시간동안 추가로 적재된 영상 프레임을 일정한 영상 프레임 수(
Figure 112018097520242-pat00012
)만큼 스킵하면서 현재 프레임에서 표적을 포착하는 동작을 수행한다.
도 3을 참조하면, 플랫폼이 지정된 표적으로 진입하여 거리가 가까워지면 해당 표적에 대한 표적 크기 변화율이 커지는 것을 확인할 수 있다. 따라서, 본 발명은 플랫폼이 표적에 근접하는 상태에서 표적의 크기 변화율을 근거로 현재의 영상 프레임에서 표적을 포착하는 방법을 사용할 수 있다. 즉, 본 발명은 표적 포착 시간을 만족할 수 있도록 표적 포착시간 동안 적재된 영상 프레임(표적 지정 지연시간동안 적재된 영상프레임과 추가로 적재된 영상 프레임)들에서 사수 지정 표적에 대한 크기 변화율을 추정하고 표적점을 추적하면서 현재의 영상 프레임에서 표적을 포착할 수 있다.
도 4는 본 발명의 실시예에 따른 플랫폼 운용시스템에서 표적 지정 지연시간을 보상하여 표적을 포착하는 동작을 나타낸 순서도다.
도 4에 도시된 바와같이, 사수가 영상센서(100)에서 제공된 첫 번째 영상 프레임에서 표적을 인지하고 표적을 지정하면(S100), 영상 추적기(110)는 표적 지정 지연시간동안 적재된(저장된) 영상 프레임의 첫 번째 프레임에서 포착하고자 하는 표적 영상(
Figure 112017051239091-pat00013
)을 생성하고(도 2 참조), 상기 생성된 표적 영상(
Figure 112017051239091-pat00014
)에서의 표적 크기 즉, 표적 변화율(
Figure 112017051239091-pat00015
)을 1.0로 초기화한다.
이어서, 영상 추적기(110)는 현재의 표적 변화율(
Figure 112017051239091-pat00016
) 1.0만큼 표적 영상 (
Figure 112017051239091-pat00017
)을 보정하고, 주어진 영상 프레임에서 표적을 탐색하여 추적점(표적 위치)과 상기 영상 추적기(110)가 탐지한 추적점의 표적 영상(
Figure 112017051239091-pat00018
)을 생성한다(S110)
이어서, 영상 추적기(110)는 표적 변화율을 갱신하기 위하여 영상 추적기 (110)가 탐지한 표적 영상(
Figure 112017051239091-pat00019
)과 사수가 지정한 표적 영상(
Figure 112017051239091-pat00020
)의 크기를 아래의 수학식 3의 범위에서 변화시키면서 유사도를 측정하여, 가장 큰 유사도 측정값을 갖는 표적 영상(
Figure 112017051239091-pat00021
)의 표적 변화율(
Figure 112017051239091-pat00022
)을 갱신한다(S120).
[수학식 3]
Figure 112017051239091-pat00023
여기서, 상기
Figure 112017051239091-pat00024
는 표적을 최종으로 지정할 수 있는 표적과 플랫폼간의 거리이고,
Figure 112017051239091-pat00025
는 플랫폼의 이동 속도를 나타낸다.
이어서, 영상 추적기(110)는 표적 포착 시간(
Figure 112018097520242-pat00026
)을 만족할 수 있도록 적재된 영상의 프레임(표적 지정 지연연시간 동안 적재된 영상 프레임과 표적 포착 시간동안 추가로 적재된 영상 프레임)에서 상기 수학식 2에서 결정된 프레임의 수(
Figure 112018097520242-pat00027
)만큼 영상 프레임을 스킵한다(S130).
이후 영상 추적기(110)는 상기 스킵한 영상 프레임이 현재 영상 프레임인지 비교하여 즉, 상기 스킵한 영상 프레임이 표적 포착 시간(
Figure 112017051239091-pat00028
)에 포함된 마지막 프레임인지 체크하여(S140), 상기 스킵한 영상 프레임이 마지막 프레임인 경우에는 표적 크기 변화율을 근거로 표적을 포착한 다음 표적 포착 알고리즘을 종료하고 (S150), 마지막 프레임이 아닌 경우에는 단계(S110)로 돌아가 단계(S120~S140)의 동작을 반복 수행한다.
상술한 바와같이 본 발명은 표적 지정 지연시간동안 적재된 영상 프레임과 표적 포착 시간동안 추가로 적재된 영상 프레임을 소정 영상 프레임 수만큼 스킵하면서 사수가 지정한 표적에 대한 크기 변화율을 추정하여 표적점을 추적함으로써 종래 표적의 표적 지정 지연 시간을 보상하면서 영상 추적기가 요구하는 표적 포착시간을 충족할 수 있어, 영상 추적기의 추적 성능을 향상시켜 영상 추적기의 제어 신호로 운용되는 플랫폼의 표적 진입 정확도를 높일 수 있는 효과가 있다.
상기와 같이 설명된 본 발명에 따른 표적 지정 지연시간을 보상하는 플랫폼 운용시스템 및 그 방법은 상기 설명된 실시예들의 구성과 방법이 한정되게 적용될 수 있는 것이 아니라, 상기 실시예들은 그 기술적 사상이나 필수적 특징을 변경하지 않고서 다른 구체적인 형태로 실시될 수 있다는 것을 이해할 수 있을 것이다. 그러므로, 상술한 실시예들은 모든 면에서 예시적인 것이며 한정적인 것이 아닌 것으로서 이해해야만 한다.
100 : 영상 센서 110 : 영상 추적기
120 : 구동부

Claims (9)

  1. 표적 포착시간내에서 표적을 탐지하여 표적으로 진입하는 플랫폼 운용 시스템에 있어서,
    사수가 표적을 지정할 수 있도록 표적의 영상 프레임을 주기적으로 생성하여 사수에게 제공하는 영상 센서; 및
    제1영상 프레임에서 사수가 표적을 지정한 경우 해당 표적의 위치정보가 수신되기까지의 표적 지정 지연시간동안 상기 영상 센서에서 생성되어 버퍼에 적재되는 제1영상 프레임 이후의 영상 프레임과 표적 포착시간동안 추가로 적재되는 영상 프레임을 일정한 영상 프레임 수만큼 스킵하면서 상기 지정 표적에 대한 크기 변화율을 추정하고 표적점을 추적하여 표적을 포착하는 영상 추적기;를 포함하고,
    상기 영상 추적기는,
    표적 포착 시간(
    Figure 112018097520242-pat00051
    ) 대비 지연 시간동안 적재된 전체 영상 프레임(BN)의 추적 처리시간의 비율과 하나의 영상 프레임에 대한 획득시간(
    Figure 112018097520242-pat00052
    ) 대비 처리시간(
    Figure 112018097520242-pat00053
    )의 비율을 가산하여 스킵해야 할 영상 프레임의 수(
    Figure 112018097520242-pat00054
    )를
    Figure 112018097520242-pat00055
    에 의해 결정하는 것을 특징으로 하는 플랫폼 운용 시스템.
  2. 제1항에 있어서, 상기 표적 포착시간은
    표적 지정 지연시간 동안 적재된 영상 프레임과 표적 포착 시간동안 추가로 적재된 영상 프레임을 일정한 영상 프레임 수만큼 건너뛰면서 처리한 시간과 동일한 것을 특징으로 하는 플랫폼 운용 시스템.
  3. 삭제
  4. 제1항에 있어서, 상기 영상 추적기는
    아래의 수학식에 의해 결정되는 표적 크기 변화율 범위 내에서, 플랫폼 이동 속도와 사수의 최종 표적 지정을 위한 플랫폼과 표적과의 거리를 이용하여 표적에 대한 크기 변화율(
    Figure 112017051239091-pat00034
    )을 추정하여 표적을 포착하는 것을 특징으로 하는 플랫폼 운용 시스템.
    Figure 112017051239091-pat00035

    여기서, 상기
    Figure 112017051239091-pat00036
    는 표적을 최종으로 지정할 수 있는 표적과 플랫폼간의 거리이고,
    Figure 112017051239091-pat00037
    는 플랫폼의 이동 속도를 나타낸다.
  5. 제1항에 있어서, 상기 영상 추적기는
    상기 표적 지정 지연시간 동안 영상 센서에서 생성되어 적재되는 복수의 영상 프레임에서 스킵할 프레임 수를 결정하여, 상기 표적 지정 지연시간동안 적재된 영상 프레임과 상기 표적 포착 시간동안 추가로 적재되는 영상 프레임을 상기 결정된 영상 프레임 수만큼 스킵하여 지연 시간을 보상하는 것을 특징으로 하는 플랫폼 운용 시스템.
  6. 표적 포착시간내에서 표적을 탐지하여 표적으로 진입하는 플랫폼 운용 시스템의 표적 탐지 방법에 있어서,
    영상 센서를 통해 표적의 영상 프레임을 주기적으로 생성하는 단계;
    상기 생성된 영상 프레임을 사수로 전송하고 버퍼에 적재하는 단계;
    제1영상 프레임에서 사수가 표적을 지정한 경우 해당 표적의 위치정보가 수신되기까지의 표적 지정 지연시간동안 상기 영상 센서에서 생성되어 버퍼에 적재되는 제1영상 프레임 이후의 영상 프레임과 상기 표적 포착 시간동안 추가로 적재되는 영상 프레임에서 스킵할 프레임 수를 결정하는 단계;
    상기 결정된 프레임 수에 따라 표적 지정 지연시간 동안 적재된 영상 프레임과 상기 표적 포착시간동안 추가로 적재되는 영상 프레임을 스킵하는 단계; 및
    상기 영상 프레임 스킵 중에 상기 지정 표적에 대한 크기 변화율을 추정하고 표적점을 추적하여 표적을 포착하는 단계;를 포함하고,
    상기 스킵할 프레임 수를 결정하는 단계는
    표적 포착 시간(
    Figure 112018097520242-pat00056
    ) 대비 표적 지정 지연시간동안 적재된 전체 영상 프레임(BN)의 추적 처리시간의 비율과 하나의 영상 프레임에 대한 획득시간(
    Figure 112018097520242-pat00057
    ) 대비 처리시간(
    Figure 112018097520242-pat00058
    )의 비율을 가산하여 스킵해야 할 영상 프레임의 수(
    Figure 112018097520242-pat00059
    )를
    Figure 112018097520242-pat00060
    로 결정하는 것을 특징으로 하는 플랫폼 운용 시스템의 표적 포착방법.
  7. 제6항에 있어서, 상기 표적 포착시간은
    표적 지정 지연시간 동안 적재된 영상 프레임과 표적 포착 시간동안 추가로 적재된 영상 프레임을 일정한 영상 프레임 수만큼 건너뛰면서 처리한 시간과 동일한 것을 특징으로 하는 플랫폼 운용 시스템의 표적 포착방법.
  8. 삭제
  9. 제6항에 있어서, 상기 표적을 포착하는 단계는
    아래의 수학식에 의해 정되는 표적 크기 변화율 범위 내에서, 플랫폼 이동 속도와 사수의 최종 표적 지정을 위한 플랫폼과 표적과의 거리를 이용하여 표적에 대한 크기 변화율(
    Figure 112017051239091-pat00043
    )을 추정하여 표적을 포착하는 것을 특징으로 하는 플랫폼 운용 시스템의 표적 포착방법.
    Figure 112017051239091-pat00044

    여기서, 상기
    Figure 112017051239091-pat00045
    는 표적을 최종으로 지정할 수 있는 표적과 플렛폼간의 거리이고,
    Figure 112017051239091-pat00046
    는 플랫폼의 이동 속도를 나타낸다.
KR1020170066357A 2017-05-29 2017-05-29 플랫폼 운용시스템 및 그의 표적 포착 방법 Active KR101961663B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020170066357A KR101961663B1 (ko) 2017-05-29 2017-05-29 플랫폼 운용시스템 및 그의 표적 포착 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020170066357A KR101961663B1 (ko) 2017-05-29 2017-05-29 플랫폼 운용시스템 및 그의 표적 포착 방법

Publications (2)

Publication Number Publication Date
KR20180130643A KR20180130643A (ko) 2018-12-10
KR101961663B1 true KR101961663B1 (ko) 2019-03-27

Family

ID=64670413

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020170066357A Active KR101961663B1 (ko) 2017-05-29 2017-05-29 플랫폼 운용시스템 및 그의 표적 포착 방법

Country Status (1)

Country Link
KR (1) KR101961663B1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102032960B1 (ko) * 2019-04-22 2019-11-08 국방과학연구소 영상 추적 레이저 제어장치 및 제어방법

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102068800B1 (ko) * 2019-08-09 2020-01-22 국방과학연구소 원격구동 카메라 및 그 제어 방법
CN115767028A (zh) * 2022-11-14 2023-03-07 航天时代飞鸿技术有限公司 一种提高视频目标跟踪锁定精度的方法和系统
KR102752837B1 (ko) * 2024-02-05 2025-01-10 주식회사 비에이솔루션즈 팬/틸트/줌 기반의 자동 영상 추적 시스템 및 방법

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009212637A (ja) * 2008-03-03 2009-09-17 Sanyo Electric Co Ltd 撮像装置

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0720383B1 (en) * 1994-12-30 2000-09-13 Daewoo Electronics Co., Ltd Method and apparatus for detecting motion vectors in a frame decimating video encoder

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009212637A (ja) * 2008-03-03 2009-09-17 Sanyo Electric Co Ltd 撮像装置

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102032960B1 (ko) * 2019-04-22 2019-11-08 국방과학연구소 영상 추적 레이저 제어장치 및 제어방법

Also Published As

Publication number Publication date
KR20180130643A (ko) 2018-12-10

Similar Documents

Publication Publication Date Title
US11483521B2 (en) Information processing system, information processing method, and program
EP2862146B1 (en) Adaptive switching between a vision aided intertial camera pose estimation and a vision based only camera pose estimation.
KR101961663B1 (ko) 플랫폼 운용시스템 및 그의 표적 포착 방법
CN110163909A (zh) 用于获得设备位姿的方法、装置和存储介质
JPWO2010097943A1 (ja) 車両相対位置推定装置及び車両相対位置推定方法
KR20150110697A (ko) 타깃 오브젝트를 추적 및 검출하기 위한 시스템들 및 방법들
CN108027230B (zh) 信息处理设备、信息处理方法和程序
CN106998425B (zh) 振动检测设备、振动检测方法和摄像设备
JP2009074859A (ja) 運動計測装置及び位置計測装置
US11430204B2 (en) Information processing device, information processing method, and program
US10575717B2 (en) Capsule endoscope, capsule endoscope system, and method for controlling capsule endoscope
US12437440B2 (en) Positioning device
US8730333B2 (en) Image stabilization system
KR101877232B1 (ko) 영상 유사도 및 추적 지점 변화량 기반의 영상 추적기 시스템 및 그의 추적 안정도 판별 방법
JP4558696B2 (ja) 動物体自動追尾装置
CN107920200A (zh) 图像模糊校正装置及其控制方法和摄像装置
CN114070954A (zh) 视频数据与遥测数据同步方法、装置、电子设备及介质
US7800653B2 (en) Systems and methods for compensating signal drift according to a calculated absolute difference value
KR102037877B1 (ko) 운용자 개입 운용 유도무기의 표적 추적 장치
KR102037881B1 (ko) 운용자 개입 운용 유도무기의 표적 추적 방법
KR102394189B1 (ko) 하우징에 장착된 이기종 카메라의 영상 동기화 방법 및 그 장치
JP6602089B2 (ja) 画像処理装置及びその制御方法
KR101199940B1 (ko) 이동체 탑재형 영상 추적 장치
KR101362761B1 (ko) 카메라 패닝 상황에서 안정적인 손떨림 보정 방법 및 장치
JP2011166426A (ja) 追尾カメラ雲台装置

Legal Events

Date Code Title Description
A201 Request for examination
PA0109 Patent application

Patent event code: PA01091R01D

Comment text: Patent Application

Patent event date: 20170529

PA0201 Request for examination
E902 Notification of reason for refusal
PE0902 Notice of grounds for rejection

Comment text: Notification of reason for refusal

Patent event date: 20180806

Patent event code: PE09021S01D

PG1501 Laying open of application
E701 Decision to grant or registration of patent right
PE0701 Decision of registration

Patent event code: PE07011S01D

Comment text: Decision to Grant Registration

Patent event date: 20190313

GRNT Written decision to grant
PR0701 Registration of establishment

Comment text: Registration of Establishment

Patent event date: 20190319

Patent event code: PR07011E01D

PR1002 Payment of registration fee

Payment date: 20190320

End annual number: 3

Start annual number: 1

PG1601 Publication of registration
PR1001 Payment of annual fee

Payment date: 20220221

Start annual number: 4

End annual number: 4

PR1001 Payment of annual fee

Payment date: 20230223

Start annual number: 5

End annual number: 5

PR1001 Payment of annual fee

Payment date: 20240221

Start annual number: 6

End annual number: 6

PR1001 Payment of annual fee

Payment date: 20250226

Start annual number: 7

End annual number: 7