KR101022228B1 - Apparatus for providing virtual image based on personal computer and method thereof - Google Patents

Apparatus for providing virtual image based on personal computer and method thereof Download PDF

Info

Publication number
KR101022228B1
KR101022228B1 KR1020100125272A KR20100125272A KR101022228B1 KR 101022228 B1 KR101022228 B1 KR 101022228B1 KR 1020100125272 A KR1020100125272 A KR 1020100125272A KR 20100125272 A KR20100125272 A KR 20100125272A KR 101022228 B1 KR101022228 B1 KR 101022228B1
Authority
KR
South Korea
Prior art keywords
virtual image
format
target detection
tracking
image
Prior art date
Application number
KR1020100125272A
Other languages
Korean (ko)
Inventor
전갑송
Original Assignee
삼성탈레스 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성탈레스 주식회사 filed Critical 삼성탈레스 주식회사
Priority to KR1020100125272A priority Critical patent/KR101022228B1/en
Application granted granted Critical
Publication of KR101022228B1 publication Critical patent/KR101022228B1/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/30—Arrangements for executing machine instructions, e.g. instruction decode
    • G06F9/30003—Arrangements for executing specific machine instructions
    • G06F9/30007—Arrangements for executing specific machine instructions to perform operations on data operands
    • G06F9/30025—Format conversion instructions, e.g. Floating-Point to Integer, decimal conversion

Abstract

PURPOSE: A pc based virtual image providing device and a providing method thereof are provided to easily perform a performance test evaluation of various modules of a target detection/recognition/tracing/panorama synthesize device indoors. CONSTITUTION: A virtual image generating unit(110) generates a virtual image for algorithm development or performance test of a target detection/recognition/tracing/panorama synthesize device. An image format converting unit(120) converts an image format of the outputted virtual image into a camera-link format. A virtual image transmitting unit(130) transmits the converted virtual image to the target detection/recognition/tracing/panorama synthesize device.

Description

ＰＣ 기반의 가상 영상 제공 장치 및 제공 방법{APPARATUS FOR PROVIDING VIRTUAL IMAGE BASED ON PERSONAL COMPUTER AND METHOD THEREOF}PC-based virtual image providing device and providing method {APPARATUS FOR PROVIDING VIRTUAL IMAGE BASED ON PERSONAL COMPUTER AND METHOD THEREOF}

본 발명은 가상 영상 제공 장치 및 방법에 관한 것으로서, 좀 더 구체적으로는 PC 기반의 가상 영상 제공 장치 및 방법에 관한 것이다.The present invention relates to a virtual image providing apparatus and method, and more particularly to a PC-based virtual image providing apparatus and method.

종래에는 지상 또는 항공 무기에 탑재되는 표적 탐지/인지/추적/파노라마 합성 장치의 성능 시험 내지는 알고리즘 개발을 위해서, 개발 중이거나 시험 중인 표적 탐지/인지/추적/파노라마 합성 장치를 실제로 탑재한 채 실외에서 시험하는 경우가 많다.Conventionally, for performance testing or algorithm development of a target detection / cognition / tracking / panoramic synthesis device mounted on a ground or aviation weapon, an outdoor unit with a target detection / cognition / tracking / panoramic synthesis device under development or under test is actually mounted. I often try it.

실내에서 할 수 있는 경우에라도, 대부분은 가상 영상을 PC 상에서 생성할 수 있는 정도에 불과하며, 실제 구현된 표적 탐지/인지/추적/파노라마합성 장치에 가상 영상이나 표적 정보 등을 입력하여 시험할 수는 없다.Even if it is possible to do it indoors, most of the time, only a virtual image can be generated on a PC, and the virtual image or target information can be tested by inputting the actual target detection / cognition / tracking / panoramic synthesis device. There is no.

이와 같이 표적 탐지/인지/추적/파노라마합성 장치의 알고리즘 개발자들은 시험 평가를 위한 공간적 제약과 시간적 제약 그리고 많은 비용이 매우 큰 부담으로 작용한다.As such, algorithm developers of target detection / cognition / tracking / panoramic devices are very costly and space constraints for test evaluation.

더구나, PC 상에 구현된 단순한 가상 영상으로는 표적 탐지/인지/추적/파노라마합성 장치의 각종 모듈과 인터페이싱이 되지 않으므로, 시험 평가에 곤란한 점이 많고, 각종 가상 영상 데이터들의 동기화에 있어서도 곤란한 점이 많다.In addition, since a simple virtual image implemented on a PC does not interface with various modules of a target detection / cognition / tracking / panoramic synthesis device, there are many difficulties in test evaluation and many difficulties in synchronizing various virtual image data.

본 발명의 목적은 PC 기반의 가상 영상 제공 장치를 제공하는 데 있다.An object of the present invention is to provide a PC-based virtual image providing apparatus.

본 발명의 다른 목적은 PC 기반의 가상 영상 제공 방법을 제공하는 데 있다.Another object of the present invention is to provide a PC-based virtual image providing method.

상술한 본 발명의 목적에 따른 PC 기반의 가상 영상 제공 장치는, 표적 탐지/인지/추적/파노라마합성 장치의 알고리즘 개발 또는 성능 시험을 위한 가상 영상을 생성하여 출력하는 가상 영상 생성부와, 상기 출력된 가상 영상의 영상 포맷을 영상 센서의 영상 포맷으로 변환하는 영상 포맷 변환부와, 상기 변환된 가상 영상을 상기 표적 탐지/인지/추적/파노라마합성 장치로 전송하는 가상 영상 전송부를 포함하도록 구성될 수 있다. 여기에서, 상기 가상 영상 생성부는 PC(personal computer) 상에서 소프트웨어로 구현되는 것이 바람직하다. 그리고 상기 가상 영상 생성부는, CCD(charge coupled device) 가상 영상, MWIR(middle wavelength infrared) 가상 영상, LWIR(long wavelength infrared) 가상 영상을 생성하도록 구성될 수 있다. 그리고 상기 가상 영상 생성부는 상기 생성된 가상 영상을 DVI(digital video interactive) 포맷으로 외부 출력하도록 구성될 수 있다. 한편, 상기 영상 포맷 변환부는, 상기 출력된 가상 영상의 영상 포맷을 카메라링크(cameralink) 포맷으로 변환하도록 구성될 수 있다. 상기 영상 포맷 변환부는 상기 출력된 가상 영상의 프레임 동기를 맞추기 위한 프레임 동기 신호를 생성하도록 구성될 수 있다. 한편, 상기 가상 영상 전송부는, 상기 표적 탐지/인지/추적/파노라마합성 장치가 상기 생성된 프레임 동기 신호에 맞추어 상기 변환된 가상 영상을 재생하여 표적 탐지 및 추적할 수 있도록 상기 프레임 동기 신호를 상기 표적 탐지/인지/추적/파노라마 합성장치로 전송하도록 구성될 수 있다.PC-based virtual image providing apparatus according to the above object of the present invention, a virtual image generating unit for generating and outputting a virtual image for the algorithm development or performance test of the target detection / recognition / tracking / panorama synthesis device, and the output An image format converter for converting the image format of the virtual image into the image format of the image sensor, and a virtual image transmitter for transmitting the converted virtual image to the target detection / cognition / tracking / panoramic synthesis device. have. Here, the virtual image generating unit is preferably implemented in software on a personal computer (PC). The virtual image generator may be configured to generate a charge coupled device (CCD) virtual image, a middle wavelength infrared (MWIR) virtual image, and a long wavelength infrared (LWIR) virtual image. The virtual image generator may be configured to externally output the generated virtual image in a digital video interactive (DVI) format. The image format converter may be configured to convert the image format of the output virtual image into a cameralink format. The image format converter may be configured to generate a frame synchronization signal for matching frame synchronization of the output virtual image. The virtual image transmitter may further detect the target frame synchronization signal so that the target detection / cognition / tracking / panoramic synthesis apparatus detects and tracks the converted virtual image in accordance with the generated frame synchronization signal. It may be configured to transmit to a detection / cognition / tracking / panorama synthesis device.

상술한 본 발명의 목적에 따른 PC 기반의 가상 영상 제공 방법은, 표적 탐지/인지/추적/파노라마합성 장치의 알고리즘 개발 또는 성능을 시험하기 위한 가상 영상을 생성하는 단계와, 상기 생성된 가상 영상을 DVI 포맷으로 출력하는 단계와, 상기 출력된 가상 영상의 영상 포맷을 카메라링크 포맷으로 변환하는 단계와, 상기 변환된 가상 영상을 상기 표적 탐지/인지/추적/파노라마합성 장치로 전송하도록 구성될 수 있다. 여기에서, 상기 표적 탐지/인지/추적/파노라마합성 장치의 알고리즘 개발 또는 성능을 시험하기 위한 가상 영상을 생성하는 단계는, CCD 가상 영상, MWIR 가상 영상, LWIR 가상 영상을 생성하도록 구성될 수 있다.PC-based virtual image providing method according to the above object of the present invention, generating a virtual image for testing the algorithm development or performance of the target detection / recognition / tracking / panorama synthesis apparatus, and the generated virtual image Outputting in a DVI format, converting an image format of the output virtual image into a camera link format, and transmitting the converted virtual image to the target detection / cognition / tracking / panoramic synthesis device. . Here, the step of generating a virtual image for testing the algorithm development or performance of the target detection / recognition / tracking / panorama synthesis apparatus, may be configured to generate a CCD virtual image, MWIR virtual image, LWIR virtual image.

상기와 같은 PC 기반의 가상 영상 제공 장치 및 방법에 의하면, PC 상에서 생성된 가상 영상을 표적 탐지/인지/추적/파노라마합성 장치의 각종 모듈로 동기화하여 전송함으로써, 표적 탐지/인지/추적/파노라마합성 장치의 각종 모듈의 성능 시험 평가를 실내에서 용이하게 수행할 수 있는 효과가 있다. 이로 인해 표적 탐지/인지/추적/파노라마합성 장치의 각종 모듈과 그 알고리즘을 개발하는 개발자들은 시간적, 공간적, 비용적 부담을 덜 수 있는 효과가 있다.According to the PC-based virtual image providing apparatus and method as described above, by synchronizing and transmitting the virtual image generated on the PC to various modules of the target detection / recognition / tracking / panorama synthesis apparatus, the target detection / recognition / tracking / panorama synthesis There is an effect that the performance test evaluation of various modules of the device can be easily performed indoors. As a result, developers developing various modules and algorithms of the target detection / cognition / tracking / panoramic device can reduce time, space, and cost.

도 1은 본 발명의 일 실시예에 따른 PC 기반의 가상 영상 제공 장치의 블록 구성도이다.
도 2는 본 발명의 일 실시예에 따른 PC 기반의 가상 영상 제공 방법의 흐름도이다.1 is a block diagram of a PC-based virtual image providing apparatus according to an embodiment of the present invention.
2 is a flowchart of a PC-based virtual image providing method according to an embodiment of the present invention.

본 발명은 다양한 변환을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 특정 실시 예들을 도면에 예시하고 상세한 설명에 상세하게 설명하고자 한다. 그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변환, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다. 각 도면을 설명하면서 유사한 참조부호를 유사한 구성요소에 대해 사용하였다.As the inventive concept allows for various changes and numerous embodiments, particular embodiments will be illustrated in the drawings and described in detail in the written description. However, this is not intended to limit the present invention to specific embodiments, it should be understood to include all transformations, equivalents, and substitutes included in the spirit and scope of the present invention. Like reference numerals are used for like elements in describing each drawing.

제1, 제2, A, B 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되어서는 안된다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다. 예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 명명될 수 있다. 및/또는 이라는 용어는 복수의 관련된 기재된 항목들의 조합 또는 복수의 관련된 기재된 항목들 중의 어느 항목을 포함한다.The terms first, second, A, B, etc. may be used to describe various components, but the components should not be limited by the terms. The terms are used only for the purpose of distinguishing one component from another. For example, without departing from the scope of the present invention, the first component may be referred to as the second component, and similarly, the second component may also be referred to as the first component. And / or < / RTI > includes any combination of a plurality of related listed items or any of a plurality of related listed items.

어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다.When a component is referred to as being "connected" or "connected" to another component, it may be directly connected to or connected to that other component, but it may be understood that other components may be present in between. Should be. On the other hand, when a component is said to be "directly connected" or "directly connected" to another component, it should be understood that there is no other component in between.

본 출원에서 사용한 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.The terminology used herein is for the purpose of describing particular example embodiments only and is not intended to be limiting of the present invention. Singular expressions include plural expressions unless the context clearly indicates otherwise. In this application, the terms "comprise" or "have" are intended to indicate that there is a feature, number, step, operation, component, part, or combination thereof described in the specification, and one or more other features. It is to be understood that the present invention does not exclude the possibility of the presence or the addition of numbers, steps, operations, components, components, or a combination thereof.

다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가지고 있다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥 상 가지는 의미와 일치하는 의미를 가지는 것으로 해석되어야 하며, 본 출원에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.Unless defined otherwise, all terms used herein, including technical or scientific terms, have the same meaning as commonly understood by one of ordinary skill in the art. Terms such as those defined in the commonly used dictionaries should be construed as having meanings consistent with the meanings in the context of the related art and shall not be construed in ideal or excessively formal meanings unless expressly defined in this application. Do not.

이하, 본 발명에 따른 바람직한 실시예를 첨부된 도면을 참조하여 설명한다.Hereinafter, preferred embodiments according to the present invention will be described with reference to the accompanying drawings.

도 1은 본 발명의 일 실시예에 따른 PC 기반의 가상 영상 제공 장치의 블록 구성도이다.1 is a block diagram of a PC-based virtual image providing apparatus according to an embodiment of the present invention.

도 1을 참조하면, 본 발명의 일 실시예에 따른 PC 기반의 가상 영상 제공 장치(100)(이하, '가상 영상 제공 장치'라 함)는 가상 영상 생성부(110), 영상 포맷 변환부(120) 및 가상 영상 전송부(130)를 포함하도록 구성될 수 있다.Referring to FIG. 1, a PC-based virtual image providing apparatus 100 (hereinafter, referred to as a “virtual image providing apparatus”) according to an embodiment of the present invention may include a virtual image generating unit 110 and an image format converting unit ( 120 and the virtual image transmitter 130.

가상 영상 제공 장치(100)는 PC(personal computer) 상에서 소프트웨어에 의해 생성되는 가상 영상을 표적 탐지/인지/추적/파노라마합성 장치(200)로 제공하여 표적 탐지/인지/추적/파노라마합성 장치(200)의 각종 모듈에 대한 성능 시험 평가를 실내에서 용이하게 수행한다. PC와 표적 탐지/인지/추적/파노라마합성 장치(200) 간의 인터페이싱을 통해 표적 탐지/인지/추적/파노라마합성 장치(200)가 실제로 표적과 주변 환경을 센싱하여 영상을 취득하고, 취득된 영상에서 표적을 탐지 및 추적하는 것과 같은 효과를 가질 수 있다. 또한, PC 기반 하에서 PC와 표적 탐지/인지/추적/파노라마합성 장치(200) 간의 인터페이싱 환경을 구축함으로써, 보다 간편하게 모사 장치를 구현할 수 있다. 당연히 개발자들은 시간적으로나 공간적으로 부담이 줄어들고 비용면에서도 유리하다. 이하, 세부적인 구성에 대하여 설명한다.The virtual image providing apparatus 100 provides a virtual image generated by software on a personal computer (PC) to the target detection / cognition / tracking / panoramic synthesis apparatus 200 to target detection / cognition / tracking / panoramic synthesis apparatus 200. Performance test evaluations for various modules of C) are easily performed indoors. Through interfacing between the PC and the target detection / cognition / tracking / panoramic synthesis apparatus 200, the target detection / cognition / tracking / panoramic synthesis apparatus 200 actually senses the target and the surrounding environment to acquire an image, and then It can have the same effect as detecting and tracking the target. In addition, by establishing an interfacing environment between the PC and the target detection / cognition / tracking / panoramic synthesis apparatus 200 under the PC-based system, the simulation apparatus may be more easily implemented. Naturally, developers are less expensive in terms of time and space. Hereinafter, the detailed structure is demonstrated.

가상 영상 생성부(110)는 표적 탐지/인지/추적/파노라마합성 장치(200)의 알고리즘 개발 또는 성능 시험을 위한 가상 영상을 생성하여 출력한다. 가상 영상 생성부(110)는 PC 상에 소프트웨어로 구현되는 것이 바람직하다. 그리고 가상 영상 생성부(110)는 CCD(charge coupled device) 가상 영상, MWIR(middle wavelength infrared) 가상 영상, LWIR(long wavelength infrared) 가상 영상을 각각 생성하도록 구성될 수 있다. 가상 영상 생성부(110)는 표적 탐지/인지/추적/파노라마합성 장치(200)에서 센싱 가능한 영상을 제공함으로써, 표적 탐지/인지/추적/파노라마합성 장치(200)가 가상 영상 상에서 표적을 제대로 탐지/인지/추적하는지 시험 평가 가능하도록 한다. 이때, 가상 영상 생성부(110)는 3 대의 PC에 각각 구현되고, 각 PC에 구현된 가상 영상 생성부(110)가 CCD 가상 영상, MWIR 가상 영상, LWIR 가상 영상을 각각 생성하도록 구성될 수 있다.The virtual image generator 110 generates and outputs a virtual image for algorithm development or performance test of the target detection / cognition / tracking / panoramic synthesis apparatus 200. The virtual image generator 110 may be implemented in software on a PC. The virtual image generator 110 may be configured to generate a charge coupled device (CCD) virtual image, a middle wavelength infrared (MWIR) virtual image, and a long wavelength infrared (LWIR) virtual image, respectively. The virtual image generator 110 provides an image that can be sensed by the target detection / cognition / tracking / panoramic synthesis apparatus 200 so that the target detection / cognition / tracking / panoramic synthesis apparatus 200 properly detects a target on the virtual image. Ensure that test evaluation is possible. In this case, the virtual image generator 110 may be implemented in each of three PCs, and the virtual image generator 110 implemented in each PC may be configured to generate CCD virtual images, MWIR virtual images, and LWIR virtual images, respectively. .

한편, 가상 영상 생성부(110)는 생성된 가상 영상을 DVI 포맷으로 외부 출력하도록 구성될 수 있다. 이외에도 PC에서 영상 데이터를 외부 출력하기 위한 다양한 포맷이 이용될 수 있다.Meanwhile, the virtual image generator 110 may be configured to externally output the generated virtual image in DVI format. In addition, various formats for externally outputting image data from a PC may be used.

다른 한편, 가상 영상 생성부(110)는 가상 영상 외에도 가상 표적에 대한 정확한 위치 정보도 생성하여 표적 탐지/인지/추적/파노라마합성 장치(200)에 제공하도록 구성될 수 있다. 가상 영상 생성부(110)는 표적의 위치 정보를 별도의 이더넷 통신을 이용하여 표적 탐지/인지/추적/파노라마합성 장치(200)로 제공할 수 있다. 이때, 표적의 위치 정보는 표적 탐지/인지/추적/파노라마합성 장치(200) 중 통합 모의 모듈(210) 및 시스템 통제 모듈(220)로 제공할 수 있다.On the other hand, the virtual image generating unit 110 may be configured to generate accurate location information for the virtual target in addition to the virtual image to provide to the target detection / recognition / tracking / panorama synthesis apparatus 200. The virtual image generator 110 may provide the target position information to the target detection / cognition / tracking / panoramic synthesis apparatus 200 using separate Ethernet communication. In this case, the location information of the target may be provided to the integrated simulation module 210 and the system control module 220 of the target detection / recognition / tracking / panorama synthesis apparatus 200.

다음으로, 영상 포맷 변환부(120)는 가상 영상 생성부(110)에서 출력된 가상 영상의 영상 포맷을 영상 센서의 영상 포맷으로 변환하도록 구성될 수 있다. 즉, CCD 가상 영상, MWIR 가상 영상, LWIR 가상 영상이 각각 DVI 포맷으로 출력되면, DVI 포맷의 가상 영상이 다시 카메라링크(cameralink) 포맷과 같은 센서의 영상 포맷으로 변환될 수 있다. 영상 포맷 변환부(120)는 PC 외부의 별도의 인터페이스 모듈로 구현되며, 영상 포맷을 실제 센서에서 센싱한 형태의 영상 포맷으로 변환하는 기능을 수행한다. 센서 영상의 포맷으로 변환되어야 표적 탐지/인지/추적/파노라마합성 장치(200)가 인식할 수 있기 때문이다.Next, the image format converter 120 may be configured to convert the image format of the virtual image output from the virtual image generator 110 to the image format of the image sensor. That is, when the CCD virtual image, the MWIR virtual image, and the LWIR virtual image are respectively output in the DVI format, the virtual image in the DVI format may be converted back into the image format of the sensor such as the cameralink format. The image format converter 120 is implemented as a separate interface module external to the PC, and performs a function of converting the image format into an image format sensed by an actual sensor. This is because the target detection / recognition / tracking / panoramic synthesis device 200 may recognize the conversion only in the format of the sensor image.

여기에서, 영상 포맷 변환부(120)는 가상 영상 생성부(110)에서 출력된 가상 영상의 프레임 동기를 맞추기 위한 프레임 동기 신호를 생성하도록 구성될 수 있다. 이는 표적 탐지/추적 알고리즘을 수행하기 위해서는 CCD 가상 영상, MWIR 가상 영상, LWIR 가상 영상이 프레임 동기 신호에 따라 재생될 필요가 있을 뿐만 아니라, 각 가상 영상들이 파노라마 모드(panorama mode)에서 이용될 때에는 파노라마 모드의 프레임 동기에 맞추어 출력되어야 하기 때문이다.Here, the image format converter 120 may be configured to generate a frame synchronization signal for matching frame synchronization of the virtual image output from the virtual image generator 110. This means that in order to perform the target detection / tracking algorithm, not only the CCD virtual image, the MWIR virtual image, and the LWIR virtual image need to be reproduced according to the frame synchronization signal, but also when the respective virtual images are used in the panorama mode, the panorama is performed. This is because it should be output in accordance with the frame synchronization of the mode.

다음으로, 가상 영상 전송부(130)는 영상 포맷 변환부(120)에서 변환된 가상 영상을 표적 탐지/인지/추적/파노라마합성 장치(200)로 전송하도록 구성될 수 있다. 이때, 가상 영상 전송부(130)는 CCD, MWIR 및 LWIR의 3 채널 가상 영상을 FPDP 포맷으로 합성하여 광채널로 송신하도록 구성될 수 있다.Next, the virtual image transmitter 130 may be configured to transmit the virtual image converted by the image format converter 120 to the target detection / cognition / tracking / panorama synthesis apparatus 200. In this case, the virtual image transmission unit 130 may be configured to synthesize a three-channel virtual image of the CCD, MWIR and LWIR in the FPDP format and transmit to the optical channel.

한편, 가상 영상 전송부(130)는 표적 탐지/인지/추적/파노라마합성 장치(200)가 앞서 생성된 프레임 동기 신호에 맞추어 가상 영상을 재생하여 표적 탐지 및 추적할 수 있도록 프레임 동기 신호를 표적 탐지/인지/추적/파노라마합성 장치(200)로 전송하도록 구성될 수 있다. 가상 영상 전송부(130)는 가상 영상을 표적 탐지/인지/추적/파노라마합성 장치(200)의 통합 모의 모듈(210), 시스템 통제 모듈(220), 표적 추적 모듈(230) 및 표적 탐지 모듈(240)로 각각 동기화하여 전송한다. 이에 따라, 통합 모의 모듈(210)은 가상 영상을 수신하여 표적 추적 모듈(230)과 표적 탐지 모듈(240)이 해당 알고리즘을 수행할 수 있도록 통합 운용한다. 그리고, 시스템 통제 모듈(220)은 각종 운용 모드에 따라 통합 모의 모듈(210), 표적 추적 모듈(230) 및 표적 탐지 모듈(240)을 각각 운용하고 전체적으로 제어하는 기능을 수행한다. 개발자들은 통합 모의 모듈(210)의 출력을 통해 해당 알고리즘들의 수행 과정을 모니터링할 수 있고, 시스템 통제 모듈(220)에 제어 명령을 입력하여 시스템의 운용 모드를 변환하거나 기타 운용 제어를 할 수 있다.Meanwhile, the virtual image transmitter 130 detects the target frame synchronization signal so that the target detection / cognition / tracking / panorama synthesis apparatus 200 can reproduce the virtual image in accordance with the previously generated frame synchronization signal to detect and track the target. It may be configured to transmit to the / cognitive / tracking / panorama synthesis apparatus 200. The virtual image transmitting unit 130 may simulate the virtual image by the integrated simulation module 210, the system control module 220, the target tracking module 230, and the target detection module of the target detection / cognition / tracking / panoramic synthesis device 200. 240, each in synchronization. Accordingly, the integrated simulation module 210 receives the virtual image and integrates the target tracking module 230 and the target detection module 240 to perform the corresponding algorithm. In addition, the system control module 220 operates and totally controls the integrated simulation module 210, the target tracking module 230, and the target detection module 240 according to various operation modes. Developers can monitor the performance of the corresponding algorithms through the output of the integrated simulation module 210, and input a control command to the system control module 220 to convert the operation mode of the system or other operation control.

도 2는 본 발명의 일 실시예에 따른 PC 기반의 가상 영상 제공 방법의 흐름도이다.2 is a flowchart of a PC-based virtual image providing method according to an embodiment of the present invention.

도 2를 참조하면, 가상 영상 생성부(110)는 표적 탐지/인지/추적/파노라마합성 장치(200)의 알고리즘 개발 또는 성능을 시험하기 위한 가상 영상을 생성한다(S110). 가상 영상 생성부(110)는 CCD 가상 영상, MWIR 가상 영상, LWIR 가상 영상을 각각 생성하도록 구성될 수 있다.Referring to FIG. 2, the virtual image generator 110 generates a virtual image for testing algorithm development or performance of the target detection / cognition / tracking / panoramic synthesis apparatus 200 (S110). The virtual image generator 110 may be configured to generate a CCD virtual image, an MWIR virtual image, and an LWIR virtual image, respectively.

가상 영상 생성부(110)는 가상 영상 생성부(110)에서 생성된 가상 영상을 DVI 포맷으로 출력한다(S120).The virtual image generator 110 outputs the virtual image generated by the virtual image generator 110 in a DVI format (S120).

영상 포맷 변환부(120)는 영상 포맷 변환부(120)에서 출력된 가상 영상의 영상 포맷을 카메라링크 포맷으로 변환한다(S130). 이는 앞서 설명한 바와 같이, 실제 센서 영상으로 변환하기 위한 것이다.The image format converter 120 converts the image format of the virtual image output from the image format converter 120 into a camera link format (S130). This is for converting to the actual sensor image, as described above.

가상 영상 전송부(130)는 영상 포맷 변환부(120)에서 변환된 가상 영상을 표적 탐지/인지/추적/파노라마합성 장치(200)로 전송한다(S140). 가상 영상 전송부(130)는 가상 영상을 표적 탐지/인지/추적/파노라마합성 장치(200)의 각 모듈로 동기화하여 전송하며, 각 프레임의 동기 신호도 함께 전송하도록 구성될 수 있다.The virtual image transmitter 130 transmits the virtual image converted by the image format converter 120 to the target detection / cognition / tracking / panoramic synthesis apparatus 200 (S140). The virtual image transmitter 130 may transmit the virtual image in synchronization with each module of the target detection / cognition / tracking / panoramic synthesis apparatus 200 and also transmit a synchronization signal of each frame.

이상 실시예를 참조하여 설명하였지만, 해당 기술 분야의 숙련된 당업자는 하기의 특허 청구의 범위에 기재된 본 발명의 사상 및 영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변환시킬 수 있음을 이해할 수 있을 것이다.Although described with reference to the above embodiments, those skilled in the art will understand that various modifications and changes can be made to the present invention without departing from the spirit and scope of the invention as set forth in the claims below. Could be.

Claims (9)

표적 탐지/인지/추적/파노라마합성 장치의 알고리즘 개발 또는 성능 시험을 위한 가상 영상을 생성하여 출력하는 가상 영상 생성부;
상기 출력된 가상 영상의 영상 포맷을 카메라링크 포맷으로 변환하는 영상 포맷 변환부;
상기 카메라링크 포맷으로 변환된 가상 영상을 상기 표적 탐지/인지/추적/파노라마합성 장치로 전송하는 가상 영상 전송부를 포함하는 PC 기반의 가상 영상 제공 장치.A virtual image generator for generating and outputting a virtual image for algorithm development or performance test of a target detection / cognition / tracking / panoramic synthesis device;
An image format converter for converting the image format of the output virtual image into a camera link format;
PC-based virtual image providing apparatus comprising a virtual image transmission unit for transmitting the virtual image converted to the camera link format to the target detection / recognition / tracking / panorama synthesis device. 제1항에 있어서, 상기 가상 영상 생성부는,
PC(personal computer) 상에서 소프트웨어로 구현되는 것을 특징으로 하는 PC 기반의 가상 영상 제공 장치.The method of claim 1, wherein the virtual image generating unit,
PC-based virtual image providing device, characterized in that implemented in software on a personal computer (PC). 제2항에 있어서, 상기 가상 영상 생성부는,
CCD(charge coupled device) 가상 영상, MWIR(middle wavelength infrared) 가상 영상, LWIR(long wavelength infrared) 가상 영상을 생성하는 것을 특징으로 하는 PC 기반의 가상 영상 제공 장치.The method of claim 2, wherein the virtual image generating unit,
PC-based virtual image providing device, characterized in that for generating a charge coupled device (CCD) virtual image, a middle wavelength infrared (MWIR) virtual image, a long wavelength infrared (LWIR) virtual image. 제3항에 있어서, 상기 가상 영상 생성부는,
상기 생성된 가상 영상을 DVI(digital video interactive) 포맷으로 외부 출력하는 것을 특징으로 하는 PC 기반의 가상 영상 제공 장치.The method of claim 3, wherein the virtual image generating unit,
PC-based virtual image providing apparatus, characterized in that for outputting the generated virtual image in the DVI (digital video interactive) format. 삭제delete 제4항에 있어서, 상기 영상 포맷 변환부는,
상기 출력된 가상 영상의 프레임 동기를 맞추기 위한 프레임 동기 신호를 생성하는 것을 특징으로 하는 PC 기반의 가상 영상 제공 장치.The method of claim 4, wherein the image format converter,
And a frame synchronization signal for generating frame synchronization of the output virtual image. 제6항에 있어서, 상기 가상 영상 전송부는,
상기 표적 탐지/인지/추적/파노라마합성 장치가 상기 생성된 프레임 동기 신호에 맞추어 상기 변환된 가상 영상을 재생하여 표적 탐지 및 추적할 수 있도록 상기 프레임 동기 신호를 상기 표적 탐지/인지/추적/파노라마합성 장치로 전송하는 것을 특징으로 하는 PC 기반의 가상 영상 제공 장치.The method of claim 6, wherein the virtual image transmission unit,
The target detection / cognition / tracking / panoramic synthesis apparatus detects and tracks the frame synchronization signal so that the apparatus detects and tracks the converted virtual image in accordance with the generated frame synchronization signal. PC-based virtual image providing device characterized in that the transmission to the device. 표적 탐지/인지/추적/파노라마합성 장치의 알고리즘 개발 또는 성능을 시험하기 위한 가상 영상을 생성하는 단계;
상기 생성된 가상 영상을 DVI 포맷으로 출력하는 단계;
상기 출력된 가상 영상의 영상 포맷을 카메라링크 포맷으로 변환하는 단계;
상기 변환된 가상 영상을 FPDP(front panel data port) 포맷으로 변환하는 단계 및
상기 변환된 가상 영상을 광통신 채널을 통해 상기 표적 탐지/인지/추적/파노라마합성 장치로 전송하는 단계를 포함하는 PC 기반의 가상 영상 제공 방법.Generating a virtual image for testing algorithm development or performance of a target detection / cognition / tracking / panoramic synthesis device;
Outputting the generated virtual image in a DVI format;
Converting an image format of the output virtual image into a camera link format;
Converting the converted virtual image into a front panel data port (FPDP) format; and
And transmitting the converted virtual image to the target detection / cognition / tracking / panoramic synthesis device through an optical communication channel. 제8항에 있어서, 상기 표적 탐지/인지/추적/파노라마합성 장치의 알고리즘 개발 또는 성능을 시험하기 위한 가상 영상을 생성하는 단계는,
CCD 가상 영상, MWIR 가상 영상, LWIR 가상 영상을 생성하는 것을 특징으로 하는 PC 기반의 가상 영상 제공 방법.The method of claim 8, wherein generating a virtual image for testing an algorithm development or performance of the target detection / cognition / tracking / panoramic synthesis device comprises:
PC-based virtual image providing method characterized by generating a CCD virtual image, MWIR virtual image, LWIR virtual image.
KR1020100125272A 2010-12-09 2010-12-09 Apparatus for providing virtual image based on personal computer and method thereof KR101022228B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020100125272A KR101022228B1 (en) 2010-12-09 2010-12-09 Apparatus for providing virtual image based on personal computer and method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020100125272A KR101022228B1 (en) 2010-12-09 2010-12-09 Apparatus for providing virtual image based on personal computer and method thereof

Publications (1)

Publication Number Publication Date
KR101022228B1 true KR101022228B1 (en) 2011-03-17

Family

ID=43938934

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020100125272A KR101022228B1 (en) 2010-12-09 2010-12-09 Apparatus for providing virtual image based on personal computer and method thereof

Country Status (1)

Country Link
KR (1) KR101022228B1 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101301596B1 (en) 2013-07-09 2013-08-29 국방과학연구소 Mock scene projector, and detection simulation system including the same
CN112990136A (en) * 2021-04-29 2021-06-18 成都深蓝思维信息技术有限公司 Target detection method and device

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002230586A (en) 2001-01-31 2002-08-16 Tobishima Corp Image system for supporting three-dimensional survey using composite reality
KR20020089763A (en) * 2001-05-24 2002-11-30 채운들 Tool and method for creating a three-dimensional image
JP2007200116A (en) 2006-01-27 2007-08-09 Manri Kagi Kofun Yugenkoshi System for 3d image automatic generation and image format automatic conversion
US20100063615A1 (en) 2008-09-05 2010-03-11 Mori Seiki Co., Ltd. Machining status monitoring method and machining status monitoring apparatus

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002230586A (en) 2001-01-31 2002-08-16 Tobishima Corp Image system for supporting three-dimensional survey using composite reality
KR20020089763A (en) * 2001-05-24 2002-11-30 채운들 Tool and method for creating a three-dimensional image
JP2007200116A (en) 2006-01-27 2007-08-09 Manri Kagi Kofun Yugenkoshi System for 3d image automatic generation and image format automatic conversion
US20100063615A1 (en) 2008-09-05 2010-03-11 Mori Seiki Co., Ltd. Machining status monitoring method and machining status monitoring apparatus

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101301596B1 (en) 2013-07-09 2013-08-29 국방과학연구소 Mock scene projector, and detection simulation system including the same
CN112990136A (en) * 2021-04-29 2021-06-18 成都深蓝思维信息技术有限公司 Target detection method and device
CN112990136B (en) * 2021-04-29 2021-08-03 成都深蓝思维信息技术有限公司 Target detection method and device

Similar Documents

Publication Publication Date Title
Fujii et al. Multipoint measuring system for video and sound-100-camera and microphone system
KR101067768B1 (en) Method and system for synchronizing video signal and sensor signal
JP6123274B2 (en) Imaging device
EP3402207A1 (en) Video system, video processing method, program, camera system, and video converter
US20130293548A1 (en) Information processing apparatus, information processing method, program, and information processing system
KR101121153B1 (en) Method and system for synchronizing video signal and sensor signal
RU2011105393A (en) STEREO IMAGE DATA TRANSMISSION METHOD, STEREO IMAGE DATA TRANSFER METHOD, STEREO IMAGE DATA RECEIVER AND METHOD OF STEREO IMAGE DATA
KR20010030121A (en) Terminal unit, system and method for reproducing colors on the network
US10334242B1 (en) Test system and test method for audio-video device
CN104103302A (en) Video and audio synchronous detection device and method
US8003941B1 (en) System and method for providing a remote user interface for a thermal imager
EP3518517A1 (en) Video signal processing device, video signal processing method and video signal processing system
KR101022228B1 (en) Apparatus for providing virtual image based on personal computer and method thereof
US20120320192A1 (en) Cooperative operation device, cooperative operation method, cooperative operation control program, and device cooperation system
KR101022232B1 (en) Apparatus for transmitting virtual image based on personal computer
KR101022229B1 (en) Apparatus for transforming image format of virtual image based on personal computer and method threreof
JP2006054844A (en) Interactive device with image processing circuit and image sensor integrated on board
US8497908B1 (en) Unified video test apparatus
US20060235566A1 (en) Arrangement for programming a system-independent measurement system for work pieces
US20210185225A1 (en) Generating training data using beam splitter with multiple resolution sensors
JP2009229834A (en) Projection system
KR102195072B1 (en) Thermal camera system and driving method thereof
KR101997770B1 (en) Apparatus and Method for Making Augmented Reality Image
KR20220001327A (en) Thermal imaging camera module and smart phone
Zubiel et al. Firefighter indoor navigation using distributed SLAM (FINDS)

Legal Events

Date Code Title Description
A201 Request for examination
A302 Request for accelerated examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20140227

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20150227

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20180226

Year of fee payment: 8

FPAY Annual fee payment

Payment date: 20190304

Year of fee payment: 9

FPAY Annual fee payment

Payment date: 20200303

Year of fee payment: 10