KR102436523B1 - Integrated operator interface system and method for unmanned complex system - Google Patents

Integrated operator interface system and method for unmanned complex system Download PDF

Info

Publication number
KR102436523B1
KR102436523B1 KR1020220061363A KR20220061363A KR102436523B1 KR 102436523 B1 KR102436523 B1 KR 102436523B1 KR 1020220061363 A KR1020220061363 A KR 1020220061363A KR 20220061363 A KR20220061363 A KR 20220061363A KR 102436523 B1 KR102436523 B1 KR 102436523B1
Authority
KR
South Korea
Prior art keywords
information
platform
operator
interworking
unmanned
Prior art date
Application number
KR1020220061363A
Other languages
Korean (ko)
Inventor
박현철
곽휘권
Original Assignee
한화시스템(주)
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한화시스템(주) filed Critical 한화시스템(주)
Priority to KR1020220061363A priority Critical patent/KR102436523B1/en
Application granted granted Critical
Publication of KR102436523B1 publication Critical patent/KR102436523B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/4401—Bootstrapping
    • G06F9/4411—Configuring for operating with peripheral devices; Loading of device drivers
    • G06F9/4413—Plug-and-play [PnP]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/451—Execution arrangements for user interfaces
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/54—Interprogram communication
    • G06F9/541—Interprogram communication via adapters, e.g. between incompatible applications

Abstract

The present invention relates to an integrated operator interface system for a manned-unmanned teaming (MUM-T) and a method thereof. More specifically, the present invention relates to an integrated operator interface system, which is able to integratedly operate a target platform for the MUM-T on the ground, in the air, and on the sea, which is a target system in the MUM-T. The present invention is able to, when operator information and system and platform information are inputted without dependence on an operation terminal device for each target system, provide an operator with the target system and SW modules such as a platform UI module and communication linking processing module by applying to a real-time reception and operation terminal device from a server device, and allow the operation of a plug and play (PnP) method without dependence on an operation system of the target system.

Description

유, 무인 복합체계를 위한 통합 운영자 인터페이스 시스템 및 그 방법{Integrated operator interface system and method for unmanned complex system}Integrated operator interface system and method for unmanned complex system

본 발명은 유, 무인 복합체계를 위한 통합 운영자 인터페이스 시스템 및 그 방법에 관한 것으로서, 특히 유, 무인 복합체계(MUM-T, Manned-UnManned Teaming)에서 대상 체계인 지상, 공중, 해양 유, 무인체계의 대상 플랫폼을 원격에서 통합 운영하기 위한 운영자 인터페이스 시스템 및 그 방법에 관한 것이다. 즉, 본 발명은 대상 체계 별 운영 단말장치의 의존성 없이 운영자 정보, 체계 및 플랫폼 정보를 입력하면 서버 장치로부터 대상 체계 및 플랫폼 UI모듈, 통신연동 처리 모듈 등 SW 모듈을 실시간 수신 및 운영 단말 장치에 적용하여 운영자에게 제공함으로써, 대상 체계의 운영시스템 의존성 없이 플러그 앤 플레이(PnP, Plug and Play) 방식의 운영이 가능하도록 한 것이다. The present invention relates to an integrated operator interface system for a manned and unmanned complex system and a method therefor, and in particular, to a land, air, marine, unmanned system that is a target system in a manned and unmanned complex system (MUM-T, Manned-UnManned Teaming). It relates to an operator interface system for remotely integrated operation of a target platform and a method therefor. That is, the present invention applies real-time reception and operation terminal devices such as SW modules such as target system and platform UI module and communication interworking processing module from the server device when operator information, system and platform information are input without dependence of the operating terminal device for each target system By providing this to the operator, plug-and-play (PnP, Plug and Play) operation is possible without dependence on the operating system of the target system.

도 1은 종래 기술에 따른 유, 무인 복합체계(MUM-T, Manned-UnManned Teaming)에서 대상 체계인 지상, 공중, 해양 유, 무인체계의 대상 플랫폼을 원격에서 관리하는 방법을 설명하기 위한 도면이다. 1 is a diagram for explaining a method for remotely managing a target platform of a ground, air, marine, and unmanned system that is a target system in a manned-unmanned teaming (MUM-T, Manned-UnManned Teaming) according to the prior art. .

도 1에 도시된 바와 같이, 종래에는 단일 체계 별 운영시스템이 독립적으로 구성되어 운영되었으며, 부분적으로 무인체계 별 표준 인터페이스 기반으로 해당 체계 및 플랫폼에 국한되어 통합 운영을 위한 연구들이 수행 중에 있는 상황이다. 즉 유, 무인 복합체계를 통합 운영하는데 필요한 통합 운영시스템이 존재하지 않는다.As shown in FIG. 1, in the prior art, an operating system for each single system was independently configured and operated, and studies for integrated operation are being conducted because it is limited to the system and platform based in part on the standard interface for each unmanned system. . In other words, there is no integrated operating system necessary for the integrated operation of manned and unmanned complex systems.

다시 말해, 도 1에 도시된 바와 같이, 종래에는, 지상, 공중 등 단일체계 별 운영시스템은 해당 도메인 특성에 맞는 운영자 인터페이스가 제공, 즉, 단일 체계 별 운영시스템이 독립적으로 구성되어 운영되며, 체계 별 복수 시스템이 필요하며, 또한 통합 운영을 위한 운영자 인터페이스가 제공되지 않기 때문에 체계 별 또는 플랫폼별 운영자 단말 및 해당 운영자 단말을 운영하기 위한 운영자가 각각 필요하기 때문에 인력 낭비 및 과다한 비용 소요 등의 문제점을 가지고 있다. In other words, as shown in FIG. 1, in the prior art, an operating system for each single system, such as ground, air, etc., provides an operator interface suitable for a corresponding domain characteristic, that is, an operating system for each single system is independently configured and operated. Multiple systems are required, and since an operator interface for integrated operation is not provided, an operator terminal for each system or platform and an operator to operate the corresponding operator terminal are required, so problems such as waste of manpower and excessive cost are required. Have.

따라서, 본 발명의 목적은, 유, 무인 복합체계(MUM-T, Manned-UnManned Teaming)에서 대상 체계인 지상, 공중, 해양 유, 무인체계의 대상 플랫폼을 원격에서 통합 운영하기 위한 유, 무인 복합체계를 위한 통합 운영자 인터페이스 시스템 및 그 방법을 제공함에 있다. Accordingly, an object of the present invention is to remotely integrate and operate the target platform of the ground, air, marine, and unmanned systems that are the target systems in the manned-unmanned teaming system (MUM-T, Manned-UnManned Teaming). An object of the present invention is to provide an integrated operator interface system and method for the system.

즉, 본 발명은 대상 체계 별 운영시스템의 의존성 없이 운영자가 시스템 로그인 시 운영자 정보, 운영장치 정보, 대상 체계 및 플랫폼 정보를 서버 장치에 입력하면, 대상 체계 및 플랫폼 UI모듈, 통신연동 처리 모듈 등 SW 모듈을 운영 단말 장치에 적용하여 운영자에게 제공하여, 유, 무인 복합체계 실시간 통합 운영이 가능하도록 한 유, 무인 복합체계를 위한 통합 운영자 인터페이스 시스템 및 그 방법을 제공함에 그 목적이 있는 것이다. That is, the present invention provides a SW such as a target system and platform UI module, a communication interworking processing module, etc., when an operator inputs operator information, operating device information, target system and platform information to the server device when logging into the system without dependence on the operating system for each target system An object of the present invention is to provide an integrated operator interface system and a method for a combined operator interface system and a method for an unmanned complex system that are applied to an operating terminal device and provided to an operator to enable real-time integrated operation of the manned and unmanned complex system.

다만, 본 발명이 해결하고자 하는 과제는 상기된 바와 같은 과제로 한정되지 않으며, 또 다른 과제들이 존재할 수 있다.However, the problems to be solved by the present invention are not limited to the problems described above, and other problems may exist.

상기한 목적을 달성하기 위한 본 발명의 일 측면에 따른 유, 무인 복합체계를 위한 통합 운영자 인터페이스 시스템은, 서버와 접속하여 운영자 단말 정보 및 연동하고자 하는 체계 및 플랫폼 정보를 서버로 전송하고, 서버로부터 운영자 및 운영자 단말 정보, 체계 및 플랫폼 정보에 대응하는 사용자 기반 및 체계 및 플랫폼 정보 기반 운영 화면 재구성 정보와, 해당 체계 및 플랫폼 통신 연동 소프트웨어 모듈, 및 해당 체계 및 플랫폼 연동 규격 정보를 수신하여 화면에 전시하는 운영자 단말; 및 상기 운영자 단말로부터 수신되는 운영자 단말 정보 및 연동하고자 하는 체계 및 플랫폼 정보에 따라 운영자 및 운영자 단말 정보, 체계 및 플랫폼 정보에 대응하는 사용자 기반 및 체계 및 플랫폼 정보 기반 운영 화면 재구성 정보와, 해당 체계 및 플랫폼 통신 연동 소프트웨어 모듈, 및 해당 체계 및 플랫폼 연동 규격 정보를 획득하여 순차적으로 운영자 단말로 전송하는 서버를 포함할 수 있다. An integrated operator interface system for an unmanned complex system according to an aspect of the present invention for achieving the above object is connected to a server and transmits operator terminal information and system and platform information to be interlocked to the server, and from the server Receives operator and operator terminal information, user base and system and platform information-based operation screen reconfiguration information corresponding to system and platform information, the system and platform communication interworking software module, and the system and platform interlocking specification information and displays it on the screen operator terminal to; and operator and operator terminal information, system and platform information corresponding to operator and operator terminal information, system and platform information according to operator terminal information received from the operator terminal, and operation screen reconfiguration information based on system and platform information, and the corresponding system and platform information It may include a platform communication interworking software module, and a server that acquires the corresponding system and platform interworking standard information and sequentially transmits the information to the operator terminal.

상기 운영자 단말은, 운영자의 선택에 따라 상기 운영자 단말 정보, 연동 대상 체계 및 플랫폼 정보를 입력하는 입력처리부; 입력되는 운영자 단말 정보, 연동 대상 체계 및 플랫폼 정보를 순차적으로 상기 서버로 전송하고, 서버로부터 전송되는 사용자 기반 및 체계 및 플랫폼 정보 기반 운영 화면 재구성 정보와, 해당 체계 및 플랫폼 통신 연동 소프트웨어 모듈, 및 해당 체계 및 플랫폼 연동 규격 정보를 수신하는 연동 처리부; 상기 연동 처리부로부터 수신되는 사용자 기반 및 체계 및 플랫폼 정보 기반 운영 화면 재구성 정보를 기반으로 사용자 기반, 체계 및 플랫폼 정보 기반 운영 화면을 구성하여 전시부에 전시하는 연동 인터페이스 처리부; 상기 연동 처리부로부터 수신되는 해당 체계 및 플랫폼 통신 연동 소프트웨어 모듈, 및 해당 체계 및 플랫폼 연동 규격 정보를 설치하고, 설치된 정보에 따라 연동 대상 체계 및 플랫폼과의 통신 연동을 수행하는 통신 연동 처리부; 및 상기 사용자 기반, 체계 및 플랫폼 정보 기반 운영 화면을 전시하고, 상기 통신 연동 처리부를 통해 해당 체계 및 플랫폼과의 통신 정보를 전시하는 전시부를 포함할 수 있다. The operator terminal includes: an input processing unit for inputting the operator terminal information, interworking target system and platform information according to the operator's selection; The input operator terminal information, interworking target system and platform information are sequentially transmitted to the server, and user-based and system and platform information-based operation screen reconstruction information transmitted from the server, the system and platform communication interworking software module, and the corresponding Interworking processing unit for receiving system and platform interworking standard information; an interlocking interface processing unit configured to configure a user-based, system, and platform information-based operation screen based on user-based, system, and platform information-based operation screen reconfiguration information received from the interworking processing unit and displayed in an exhibition unit; a communication interworking processing unit for installing a corresponding system and platform communication interworking software module received from the interworking processing unit, and corresponding system and platform interworking standard information, and performing communication interworking with an interworking target system and platform according to the installed information; and a display unit that displays an operation screen based on the user base, system and platform information, and displays communication information with a corresponding system and platform through the communication interworking processing unit.

상기 운영자 단말 정보는, 운영자 단말의 종류, 운영자 단말의 사이즈, 해상도 정보 중 적어도 하나의 정보를 포함하 수 있다. The operator terminal information may include at least one of a type of an operator terminal, a size of the operator terminal, and resolution information.

상기 서버는, 상기 운영자 단말의 로그인 정보를 이용하여 운영자 정보를 획득하고, 운영자 정보를 저장하며, 상기 획득한 운영자 정보 및 수신되는 운영자 단말 정보, 및 연동 대상 체계 및 플랫폼 정보 기반 운영 화면 구성 정보(UI 환경 설정 정보)를 각각 획득하여 운영자 단말로 전송하고, 운영자 단말로부터 수신되는 연동 대상 체계 및 플랫폼 정보에 따른 해당 체계 및 플랫폼 통신 연동 소프트웨어 모듈, 및 해당 체계 및 플랫폼 연동 규격 정보를 획득하여 상기 운영자 단말로 전송하는 연동 처리부; 및 다수의 운영자 및 운영자 단말 정보, 운영자 및 운영자 단말 정보에 따른 운영 화면 구성 정보, 다수의 체계 및 플랫폼 정보 기반 운영 화면 구성 정보, 다수의 체계 및 플랫폼과의 통신 연동 소프트웨어 모듈, 다수의 체계 및 플랫폼 연동 규격 정보를 저장하는 데이터베이스를 포함할 수 있다. The server obtains operator information by using the login information of the operator terminal, stores operator information, the obtained operator information and received operator terminal information, and operation screen configuration information based on interworking target system and platform information ( UI environment setting information) is obtained and transmitted to the operator terminal, and the corresponding system and platform communication interworking software module according to the interworking target system and platform information received from the operator terminal, and the corresponding system and platform interworking standard information are obtained and the operator Interworking processing unit for transmitting to the terminal; And a plurality of operators and operator terminal information, operation screen configuration information according to operator and operator terminal information, operation screen configuration information based on a plurality of system and platform information, a communication interworking software module with a plurality of systems and platforms, a plurality of systems and platforms It may include a database for storing interworking standard information.

상기 데이터베이스에 저장되는 다수의 체계 및 플랫폼 정보 기반 운영 화면 구성 정보는, 지상 무인체계 A 플랫폼 UI 환경 설정정보, 지상 무인체계 표준 UI 환경 설정 정보, 공중 무인체계 A 플랫폼 UI 환경 설정 정보, 공중 무인체계 표준 UI 환경 설정 정보 중 사용자가 선택한 체계 및 플랫폼에 대응하는 정보 중 적어도 하나 이상을 포함할 수 있다. A plurality of system and platform information-based operation screen configuration information stored in the database includes: ground unmanned system A platform UI environment setting information, ground unmanned system standard UI environment setting information, aerial unmanned system A platform UI environment setting information, aerial unmanned system The standard UI environment setting information may include at least one of information corresponding to the system and platform selected by the user.

상기 데이터베이스에 저장되는 다수의 체계 및 플랫폼 정보 기반 운영 화면 구성 정보는, 상기 운영자가 지휘관일 경우, 작전지역 상황도 정보, 소속된 운영병의 플랫폼 영상 채널 정보, 상급부대 전문/투명도 작성 정보, 소속된 운영병 플랫폼 정보, 임무 계획 작성/하달 정보, 및 화면 잠금/경고 알림 정보를 더 포함하고, 상기 운영자가 운영병일 경우에는, 플랫폼 영상 채널 정보, 작전지역 상황도 미니 맵 정보, 플랫폼 정보/제어 정보 및 임무실행/통제 정보를 더 포함할 수 있다. A plurality of system and platform information-based operation screen configuration information stored in the database includes, when the operator is a commander, operation area situation map information, platform video channel information of the operating soldier to which he/she belongs, specialization/transparency preparation information for senior units, and affiliation It further includes operator platform information, mission plan creation/delivery information, and screen lock/warning notification information, and when the operator is an operator, platform video channel information, operation area situation map mini map information, platform information/control It may further include information and mission execution/control information.

상기 체계 및 플랫폼 정보 기반 운영화면의 구성 정보는, 체계 그룹 정보, 플랫폼 수량에 따른 플랫폼 필수/보조 정보, 메인/서브 화면 레이아웃 설정 정보, 화면 잠금/알람 정보 중 적어도 하나를 포함할 수 있다. The configuration information of the system and platform information-based operation screen may include at least one of system group information, platform essential/auxiliary information according to the number of platforms, main/sub screen layout setting information, and screen lock/alarm information.

상기 다수의 체계 및 플랫폼과의 통신 연동 소프트웨어 모듈은, TCP, UDP, DDS(ROS 기반), Serial 통신 인터페이스 정보 중 적어도 하나를 포함할 수 있다. The communication interworking software module with the plurality of systems and platforms may include at least one of TCP, UDP, DDS (ROS-based), and Serial communication interface information.

상기 다수의 체계 및 플랫폼 연동 규격 정보는, 지상 무인체계 A 플랫폼 연동규격 정보, 지상 무인체계 표준 연동규격 정보, 공중 무인체계 A 플랫폼 연동규격 정보, 공중 무인체계 표준 연동규격 정보 중 적어도 하나를 포함할 수 있다. The plurality of system and platform interworking standard information may include at least one of terrestrial unmanned system A platform interlocking specification information, ground unmanned system standard interworking specification information, aerial unmanned system A platform interworking specification information, and public unmanned system standard interworking specification information. can

상기 플랫폼 UI 환경 설정 정보는, 지상 무인체계 A 플랫폼 UI 환경 설정정보, 지상 무인체계 표준 UI 환경 설정 정보, 공중 무인체계 A 플랫폼 UI 환경 설정 정보, 공중 무인체계 표준 UI 환경 설정 정보 중 적어도 하나를 포함할 수 있다. The platform UI environment setting information includes at least one of ground unmanned system A platform UI environment setting information, ground unmanned system standard UI environment setting information, aerial unmanned system A platform UI environment setting information, and aerial unmanned system standard UI environment setting information can do.

한편, 본 발명의 다른 측면에 따른 유, 무인 복합체계를 위한 통합 운영자 인터페이스 방법은, 운영자 단말에서, 서버와 접속하여 운영자 단말 정보 및 연동하고자 하는 체계 및 플랫폼 정보를 서버로 전송하고, 서버로부터 운영자 및 운영자 단말 정보, 체계 및 플랫폼 정보에 대응하는 사용자 기반 및 체계 및 플랫폼 정보 기반 운영 화면 구성 정보와, 해당 체계 및 플랫폼 통신 연동 소프트웨어 모듈, 및 해당 체계 및 플랫폼 연동 규격 정보를 수신하여 화면에 전시하는 단계; 및 서버에서, 상기 운영자 단말로부터 수신되는 운영자 단말 정보 및 연동하고자 하는 체계 및 플랫폼 정보에 따라 운영자 및 운영자 단말 정보, 체계 및 플랫폼 정보에 대응하는 사용자 기반 및 체계 및 플랫폼 정보 기반 운영 화면 구성 정보와, 해당 체계 및 플랫폼 통신 연동 소프트웨어 모듈, 및 해당 체계 및 플랫폼 연동 규격 정보를 획득하여 순차적으로 운영자 단말로 전송하는 단계를 포함할 수 있다. On the other hand, in the integrated operator interface method for an unmanned complex system according to another aspect of the present invention, the operator terminal connects to the server and transmits operator terminal information and system and platform information to be interlocked to the server, and from the server to the operator and user base and system and platform information-based operating screen configuration information corresponding to operator terminal information, system and platform information, the corresponding system and platform communication interworking software module, and the corresponding system and platform interworking standard information are received and displayed on the screen. step; And in the server, the operator and operator terminal information according to the operator terminal information received from the operator terminal and the system and platform information to be linked, the user base and system and platform information corresponding to the system and platform information, and the system and platform information based operation screen configuration information; It may include acquiring the corresponding system and platform communication interworking software module, and the corresponding system and platform interworking standard information and sequentially transmitting the information to the operator terminal.

상기 화면에 전시하는 단계는, 운영자의 선택에 따라 상기 운영자 단말 정보, 연동 대상 체계 및 플랫폼 정보를 입력하는 단계; 입력되는 운영자 단말 정보, 연동 대상 체계 및 플랫폼 정보를 순차적으로 상기 서버로 전송하고, 서버로부터 전송되는 사용자 기반 및 체계 및 플랫폼 정보 기반 운영 화면 구성 정보와, 해당 체계 및 플랫폼 통신 연동 소프트웨어 모듈, 및 해당 체계 및 플랫폼 연동 규격 정보를 수신하는 단계; 상기 서버로부터 수신되는 사용자 기반 및 체계 및 플랫폼 정보 기반 운영 화면 구성 정보를 기반으로 사용자 기반, 체계 및 플랫폼 정보 기반 운영 화면을 구성하여 전시부에 전시하는 단계; 상기 서버로부터 수신되는 해당 체계 및 플랫폼 통신 연동 소프트웨어 모듈, 및 해당 체계 및 플랫폼 연동 규격 정보를 설치하고, 설치된 정보에 따라 연동 대상 체계 및 플랫폼과의 통신 연동을 수행하는 단계; 및 상기 사용자 기반, 체계 및 플랫폼 정보 기반 운영 화면을 전시하고, 상기 통신 연동 처리부를 통해 해당 체계 및 플랫폼과의 통신 정보를 전시하는 단계를 포함할 수 있다. The displaying on the screen may include: inputting the operator terminal information, interworking target system and platform information according to the operator's selection; The input operator terminal information, the interworking target system and platform information are sequentially transmitted to the server, and the user base and system and platform information-based operation screen configuration information transmitted from the server, the system and platform communication interworking software module, and the corresponding receiving system and platform interworking standard information; composing a user-based, system- and platform-information-based operation screen based on user-based, system, and platform information-based operation screen configuration information received from the server and displaying it in an exhibition unit; installing the system and platform communication interworking software module received from the server, and the system and platform interworking standard information, and performing communication interworking with the interworking target system and platform according to the installed information; and displaying an operation screen based on the user base, system and platform information, and displaying communication information with the corresponding system and platform through the communication interworking processing unit.

상기 운영자 단말 정보는, 운영자 단말의 종류, 운영자 단말의 사이즈, 해상도 정보 중 적어도 하나의 정보를 포함할 수 있다. The operator terminal information may include at least one of a type of an operator terminal, a size of the operator terminal, and resolution information.

상기 운영자 단말로 전송하는 단계는, 다수의 운영자 및 운영자 단말 정보, 운영자 및 운영자 단말 정보에 따른 운영 화면 구성 정보, 다수의 체계 및 플랫폼 정보 기반 운영 화면 구성 정보, 다수의 체계 및 플랫폼과의 통신 연동 소프트웨어 모듈, 다수의 체계 및 플랫폼 연동 규격 정보를 데이터베이스에 저장하는 단계; 및 상기 운영자 단말의 로그인 정보를 이용하여 운영자 정보를 획득하고, 운영자 정보를 저장하며, 상기 획득한 운영자 정보 및 수신되는 운영자 단말 정보, 및 연동 대상 체계 및 플랫폼 정보 기반 운영 화면 구성 정보(UI 환경 설정 정보)를 각각 획득하여 운영자 단말로 전송하고, 운영자 단말로부터 수신되는 연동 대상 체계 및 플랫폼 정보에 따른 해당 체계 및 플랫폼 통신 연동 소프트웨어 모듈, 및 해당 체계 및 플랫폼 연동 규격 정보를 획득하여 상기 운영자 단말로 전송하는 단계를 포함할 수 있다. In the step of transmitting to the operator terminal, a plurality of operators and operator terminal information, operation screen configuration information according to operator and operator terminal information, operation screen configuration information based on a plurality of systems and platform information, communication interworking with a plurality of systems and platforms Storing the software module, a plurality of systems, and platform interworking standard information in a database; and obtaining operator information using the login information of the operator terminal, storing operator information, and operating screen configuration information based on the obtained operator information and received operator terminal information, and interworking target system and platform information (UI environment setting) information) is obtained and transmitted to the operator terminal, and the corresponding system and platform communication interworking software module according to the interworking target system and platform information received from the operator terminal, and the corresponding system and platform interworking standard information are obtained and transmitted to the operator terminal may include the step of

상기 데이터베이스에 저장되는 다수의 체계 및 플랫폼 정보 기반 운영 화면 구성 정보는, 지상 무인체계 A 플랫폼 UI 환경 설정정보, 지상 무인체계 표준 UI 환경 설정 정보, 공중 무인체계 A 플랫폼 UI 환경 설정 정보, 공중 무인체계 표준 UI 환경 설정 정보 중 사용자가 선택한 체계 및 플랫폼에 대응하는 정보 중 적어도 하나 이상을 포함할 수 있다. A plurality of system and platform information-based operation screen configuration information stored in the database includes: ground unmanned system A platform UI environment setting information, ground unmanned system standard UI environment setting information, aerial unmanned system A platform UI environment setting information, aerial unmanned system The standard UI environment setting information may include at least one of information corresponding to the system and platform selected by the user.

상기 데이터베이스에 저장되는 다수의 체계 및 플랫폼 정보 기반 운영 화면 구성 정보는, 상기 운영자가 지휘관일 경우, 작전지역 상황도 정보, 소속된 운영병의 플랫폼 영상 채널 정보, 상급부대 전문/투명도 작성 정보, 소속된 운영병 플랫폼 정보, 임무 계획 작성/하달 정보, 및 화면 잠금/경고 알림 정보를 더 포함하고, 상기 운영자가 운영병일 경우에는, 플랫폼 영상 채널 정보, 작전지역 상황도 미니 맵 정보, 플랫폼 정보/제어 정보 및 임무실행/통제 정보를 더 포함할 수 있다. A plurality of system and platform information-based operation screen configuration information stored in the database includes, when the operator is a commander, operation area situation map information, platform video channel information of the operating soldier to which he/she belongs, specialization/transparency preparation information for senior units, and affiliation It further includes operator platform information, mission plan creation/delivery information, and screen lock/warning notification information, and when the operator is an operator, platform video channel information, operation area situation map mini map information, platform information/control It may further include information and mission execution/control information.

상기 체계 및 플랫폼 정보 기반 운영화면의 구성 정보는, 체계 그룹 정보, 플랫폼 수량에 따른 플랫폼 필수/보조 정보, 메인/서브 화면 레이아웃 설정 정보, 화면 잠금/알람 정보 중 적어도 하나를 포함할 수 있다. The configuration information of the system and platform information-based operation screen may include at least one of system group information, platform essential/auxiliary information according to the number of platforms, main/sub screen layout setting information, and screen lock/alarm information.

상기 다수의 체계 및 플랫폼과의 통신 연동 소프트웨어 모듈은, TCP, UDP, DDS(ROS 기반), Serial 통신 인터페이스 정보 중 적어도 하나를 포함할 수 있다. The communication interworking software module with the plurality of systems and platforms may include at least one of TCP, UDP, DDS (ROS-based), and Serial communication interface information.

상기 다수의 체계 및 플랫폼 연동 규격 정보는, 지상 무인체계 A 플랫폼 연동규격 정보, 지상 무인체계 표준 연동규격 정보, 공중 무인체계 A 플랫폼 연동규격 정보, 공중 무인체계 표준 연동규격 정보 중 적어도 하나를 포함할 수 있다. The plurality of system and platform interworking standard information may include at least one of terrestrial unmanned system A platform interlocking specification information, ground unmanned system standard interworking specification information, aerial unmanned system A platform interworking specification information, and public unmanned system standard interworking specification information. can

상기 플랫폼 UI 환경 설정 정보는, 지상 무인체계 A 플랫폼 UI 환경 설정정보, 지상 무인체계 표준 UI 환경 설정 정보, 공중 무인체계 A 플랫폼 UI 환경 설정 정보, 공중 무인체계 표준 UI 환경 설정 정보 중 적어도 하나를 포함할 수 있다. The platform UI environment setting information includes at least one of ground unmanned system A platform UI environment setting information, ground unmanned system standard UI environment setting information, aerial unmanned system A platform UI environment setting information, and aerial unmanned system standard UI environment setting information can do.

그리고, 상술한 과제를 해결하기 위한 본 발명의 또 다른 측면에 따른 컴퓨터 프로그램은, 하드웨어인 컴퓨터와 결합되어 상기 저궤도 위성의 RF 신호 처리 방법을 실행하며, 컴퓨터 판독가능 기록매체에 저장될 수 있다. In addition, the computer program according to another aspect of the present invention for solving the above-described problems is combined with a computer that is hardware to execute the RF signal processing method of the low orbit satellite, and may be stored in a computer-readable recording medium.

본 발명의 기타 구체적인 사항들은 상세한 설명 및 도면들에 포함되어 있다.Other specific details of the invention are included in the detailed description and drawings.

상기한 본 발명에 따르면, 유인, 무인(지상/공중/해양) 체계 별 독립적인 운영시스템의 의존성 없이 1대의 운영시스템에서 유, 무인 복합체계를 통합 운영하는데 있으며, 운영환경에 따라 2대 이상의 운영시스템에서 다수의 플랫폼 운영이 가능하다. 이는 체계 및 플랫폼 별 운영특성 및 특정 운영 단말(HW) 의존성 없이 체계 및 플랫폼 운영이 가능하므로 유, 무인 복합체계 운영이 가능한 것이다. According to the present invention, the manned and unmanned (terrestrial/air/marine) systems are integrated and operated in one operating system without dependence on an independent operating system for each manned and unmanned (terrestrial/air/marine) system. Multiple platforms can be operated in the system. This is because the system and platform can be operated without the operating characteristics of each system and platform and the specific operating terminal (HW) dependence, so it is possible to operate an unmanned complex system.

본 발명의 효과들은 이상에서 언급된 효과로 제한되지 않으며, 언급되지 않은 또 다른 효과들은 아래의 기재로부터 통상의 기술자에게 명확하게 이해될 수 있을 것이다.Effects of the present invention are not limited to the effects mentioned above, and other effects not mentioned will be clearly understood by those skilled in the art from the following description.

이하에 첨부되는 도면들은 본 실시 예에 관한 이해를 돕기 위한 것으로, 상세한 설명과 함께 실시 예들을 제공한다. 다만, 본 실시 예의 기술적 특징이 특정 도면에 한정되는 것은 아니며, 각 도면에서 개시하는 특징들은 서로 조합되어 새로운 실시 예로 구성될 수 있다.
도 1은 종래 기술에 따른 유, 무인 복합체계(MUM-T, Manned-UnManned Teaming)에서 대상 체계인 지상, 공중, 해양 유, 무인체계의 대상 플랫폼을 원격에서 관리하는 방법을 설명하기 위한 도면.
도 2는 본 발명에 따른 유, 무인 복합체계를 위한 통합 운영자 인터페이스 시스템에 대한 네트워크 연결 구성을 나타낸 도면.
도 3은 본 발명에 따른 유, 무인 복합체계를 위한 통합 운영자 인터페이스 시스템의 운영 동작을 개략적으로 설명하기 위한 도면.
도 4는 본 발명에 따른 유, 무인 복합체계를 위한 통합 운영자 인터페이스 시스템에 대한 상세 블록 구성을 나타낸 도면.
도 5는 도 4에 도시된 데이터베이스의 상세 구성을 나타낸 도면.
도 6은 본 발명에 따른 유, 무인 복합체계를 위한 통합 운영자 인터페이스 방법에서, 운영자 및 체계 및 플랫폼 정보를 기반으로 운영자 단말의 UI 재구성 처리 방법에 대한 동작 플로우챠트를 나타낸 도면.
도 7은 본 발명에 따른 유, 무인 복합체계를 위한 통합 운영자 인터페이스 방법에서, 운영자 단말의 UI 재구성 후, 연동 대상에 대한 통신 인터페이스 소프트웨어 모듈 및 연동 규격 정보 처리 방법에 대한 동작 플로우챠트를 나타낸 도면.The accompanying drawings below are provided to help understanding of the present embodiment, and provide embodiments together with detailed description. However, the technical features of the present embodiment are not limited to specific drawings, and features disclosed in each drawing may be combined with each other to constitute a new embodiment.
1 is a view for explaining a method for remotely managing a target platform of a ground, air, marine, and unmanned system that is a target system in a manned-unmanned teaming system (MUM-T, Manned-UnManned Teaming) according to the prior art.
2 is a diagram illustrating a network connection configuration for an integrated operator interface system for an unmanned complex system according to the present invention;
3 is a diagram schematically illustrating an operation operation of an integrated operator interface system for an unmanned complex system according to the present invention;
4 is a view showing a detailed block configuration of an integrated operator interface system for an unmanned complex system according to the present invention.
5 is a view showing a detailed configuration of the database shown in FIG.
6 is a view showing an operation flowchart for a UI reconfiguration processing method of an operator terminal based on operator, system, and platform information in an integrated operator interface method for an unmanned complex system according to the present invention;
7 is a view showing an operation flowchart of a communication interface software module for an interworking target and an interworking standard information processing method after UI reconfiguration of an operator terminal in the integrated operator interface method for an unmanned complex system according to the present invention.

본 발명의 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다. 그러나, 본 발명은 이하에서 개시되는 실시예들에 제한되는 것이 아니라 서로 다른 다양한 형태로 구현될 수 있으며, 단지 본 실시예들은 본 발명의 개시가 완전하도록 하고, 본 발명이 속하는 기술 분야의 통상의 기술자에게 본 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 발명은 청구항의 범주에 의해 정의될 뿐이다. Advantages and features of the present invention and methods of achieving them will become apparent with reference to the embodiments described below in detail in conjunction with the accompanying drawings. However, the present invention is not limited to the embodiments disclosed below, but may be implemented in various different forms, and only these embodiments allow the disclosure of the present invention to be complete, and those of ordinary skill in the art to which the present invention pertains. It is provided to fully inform those skilled in the art of the scope of the present invention, and the present invention is only defined by the scope of the claims.

본 명세서에서 사용된 용어는 실시예들을 설명하기 위한 것이며 본 발명을 제한하고자 하는 것은 아니다. 본 명세서에서, 단수형은 문구에서 특별히 언급하지 않는 한 복수형도 포함한다. 명세서에서 사용되는 "포함한다(comprises)" 및/또는 "포함하는(comprising)"은 언급된 구성요소 외에 하나 이상의 다른 구성요소의 존재 또는 추가를 배제하지 않는다. 명세서 전체에 걸쳐 동일한 도면 부호는 동일한 구성 요소를 지칭하며, "및/또는"은 언급된 구성요소들의 각각 및 하나 이상의 모든 조합을 포함한다. 비록 "제1", "제2" 등이 다양한 구성요소들을 서술하기 위해서 사용되나, 이들 구성요소들은 이들 용어에 의해 제한되지 않음은 물론이다. 이들 용어들은 단지 하나의 구성요소를 다른 구성요소와 구별하기 위하여 사용하는 것이다. 따라서, 이하에서 언급되는 제1 구성요소는 본 발명의 기술적 사상 내에서 제2 구성요소일 수도 있음은 물론이다.The terminology used herein is for the purpose of describing the embodiments and is not intended to limit the present invention. In this specification, the singular also includes the plural, unless specifically stated otherwise in the phrase. As used herein, “comprises” and/or “comprising” does not exclude the presence or addition of one or more other components in addition to the stated components. Like reference numerals refer to like elements throughout, and "and/or" includes each and every combination of one or more of the recited elements. Although "first", "second", etc. are used to describe various elements, these elements are not limited by these terms, of course. These terms are only used to distinguish one component from another. Therefore, it goes without saying that the first component mentioned below may be the second component within the spirit of the present invention.

다른 정의가 없다면, 본 명세서에서 사용되는 모든 용어(기술 및 과학적 용어를 포함)는 본 발명이 속하는 기술분야의 통상의 기술자에게 공통적으로 이해될 수 있는 의미로 사용될 수 있을 것이다. 또한, 일반적으로 사용되는 사전에 정의되어 있는 용어들은 명백하게 특별히 정의되어 있지 않는 한 이상적으로 또는 과도하게 해석되지 않는다.Unless otherwise defined, all terms (including technical and scientific terms) used herein will have the meaning commonly understood by those of ordinary skill in the art to which this invention belongs. In addition, terms defined in a commonly used dictionary are not to be interpreted ideally or excessively unless clearly specifically defined.

이하에서는, 첨부된 도면을 참조하여 본 발명에 따른 유, 무인 복합체계를 위한 통합 운영자 인터페이스 시스템 및 그 방법에 대하여 상세하게 설명하기로 한다. Hereinafter, with reference to the accompanying drawings, an integrated operator interface system and method for an unmanned complex system according to the present invention will be described in detail.

도 2는 본 발명에 따른 유, 무인 복합체계를 위한 통합 운영자 인터페이스 시스템에 대한 네트워크 연결 구성을 나타낸 도면이다. 2 is a diagram illustrating a network connection configuration for an integrated operator interface system for an unmanned complex system according to the present invention.

도 2에 도시된 바와 같이, 본 발명에 따른 유, 무인 복합체계를 위한 통합 운영자 인터페이스 시스템은 운영자 단말(100), 서버(200) 및 다수의 체계(지상/공중) 및 해당 체계에 포함된 적어도 하나 이상의 플랫폼들(300-1, 300-2, 300-3, 300-4)(이하, 체계 및 플랫폼으로 칭함)을 포함할 수 있다. As shown in FIG. 2, the integrated operator interface system for an unmanned complex system according to the present invention includes an operator terminal 100, a server 200, and a plurality of systems (ground/air) and at least included in the system. It may include one or more platforms 300-1, 300-2, 300-3, and 300-4 (hereinafter referred to as systems and platforms).

도 2에 도시된 바와 같이, 본 발명에 따른 유, 무인 복합체계를 위한 통합 운영자 인터페이스 시스템은 하나의 운영자 단말(100)을 이용하여 다수의 체계 및 플랫폼(300-1, 300-2, 300-3, 300-4)과 연동하여 통신을 수행할 수 있도록 구성될 수 있다. As shown in FIG. 2 , the integrated operator interface system for an unmanned complex system according to the present invention uses a single operator terminal 100 to provide a plurality of systems and platforms 300-1, 300-2, and 300- 3, 300-4) and may be configured to perform communication.

즉, 도 2에 도시된 바와 같이 본 발명은, 유, 무인 복합체계에서 1개의 운영자 단말(100)을 통해 운영자가 유, 무인체계, 지상 및 공중 무인체계에 해당하는 체계 및 플랫폼(300-1, 300-2, 300-3, 300-4) 정보를 입력하면, 운영자 단말(100)은 상기 입력된 정보와 운영자 단말(100)의 정보(단말 종류, 사이즈, 해상도 등)를 포함해서 서버(200)에 전송한다. That is, as shown in FIG. 2 , the present invention provides a system and platform 300-1 corresponding to an operator, an unmanned system, an unmanned ground system, and an unmanned aerial system through one operator terminal 100 in an unmanned complex system. , 300-2, 300-3, 300-4) When information is input, the operator terminal 100 includes the input information and the information (terminal type, size, resolution, etc.) of the operator terminal 100 to the server ( 200) to the

서버(200)는 운영자 단말(100)로부터 제공되는 운영자 단말 정보 및 체계 및 플랫폼 정보를 식별하여 체계 특성에 맞는 UI 환경설정 정보와 통신 연동 소프트웨어 처리 모듈을 운영자 단말(100)로 제공하고, 운영자 단말(100)은 서버로(200)로부터 전송되는 운영자가 선택 입력한 운영자 단말 정보 및 체계 및 플랫폼 정보를 식별하여 체계 특성에 맞는 UI 환경설정 정보와 통신 연동 소프트웨어 처리 모듈을 저장 설치함으로써, 다수의 체계 및 플랫폼((300-1, 300-2, 300-3, 300-4) 과 통신 연동이 가능하게 되는 것이다. The server 200 identifies the operator terminal information and system and platform information provided from the operator terminal 100 and provides UI environment setting information and communication interworking software processing module suitable for system characteristics to the operator terminal 100, and the operator terminal (100) identifies the operator terminal information and system and platform information selected and input by the operator transmitted from 200 to the server, and stores and installs UI environment setting information and communication interlocking software processing module suitable for system characteristics, so that a plurality of systems and communication linkage with the platforms (300-1, 300-2, 300-3, 300-4).

이와 같은 본 발명에 따른 유, 무인 복합체계를 위한 통합 운영자 인터페이스 시스템의 운영 절차에 대하여 도 3을 참조하여 살펴보기로 하자. The operation procedure of the integrated operator interface system for an unmanned complex system according to the present invention will be described with reference to FIG. 3 .

도 3을 참조하면, ①운영자는 운영자 단말(100)에 로그인하여 접속한 후, 운영자 단말(100)에 운영자 정보(예를 들어, 소속, 직급, 주 임무 정보 등)를 입력하고 운영할 대상 체계 및 플랫폼(300-1, 330-2, 330-3, 300-4)을 선택한다. Referring to FIG. 3 , ① an operator logs in and accesses the operator terminal 100 , enters operator information (eg, affiliation, rank, main task information, etc.) into the operator terminal 100 and operates a target system and platforms 300-1, 330-2, 330-3, and 300-4 are selected.

그리고, ② 운영자 단말(100)은 운영자가 입력한 운영자 정보, 그리고 선택된 대상 체계 및 플랫폼(300-1, 300-2, 300-3, 300-4) 정보 및 운영자 단말(100)에 기 저장된 운영자 단말 정보(예를 들어, 운영자 단말(100)의 회면 해상도, 화면 사이즈, UI 환경 정보 등)를 서버(200)로 전송한다. And, ② the operator terminal 100 is the operator information input by the operator, and the selected target system and platform (300-1, 300-2, 300-3, 300-4) information and the operator pre-stored in the operator terminal 100 Terminal information (eg, screen resolution of the operator terminal 100 , screen size, UI environment information, etc.) is transmitted to the server 200 .

이어, ③ 서버(200)는 운영자 단말(100)로부터 수신된 운영자 단말 정보, 운영자 정보 및 선택된 대상 체계 및 플랫폼(300-1, 300-2, 300-3, 300-4)정보를 기반으로 운영자 단말(100)에서 운영할 UI 환경설정(스크립트) 및 소프트웨어 통신연동 모듈(라이브러리)을 식별/생성하여 운영자 단말(100)로 전송한다. Then, ③ the server 200 is an operator based on the operator terminal information received from the operator terminal 100, operator information, and the selected target system and platform (300-1, 300-2, 300-3, 300-4) information. UI environment setting (script) and software communication interworking module (library) to be operated in the terminal 100 are identified/generated and transmitted to the operator terminal 100 .

따라서, 운영자 단말(100)은 서버(200)로부터 전송된 UI 환경설정(스크립트) 및 소프트웨어 통신연동 모듈(라이브러리)을 다운로드하여 설치한 후, 운영할 대상 체계 및 플랫폼(300-1, 300-2, 300-3, 300-4)와 연동을 수행한다. Therefore, the operator terminal 100 downloads and installs the UI environment setting (script) and the software communication interworking module (library) transmitted from the server 200, and then the target system and platform 300-1 and 300-2 to be operated. , 300-3, 300-4) and interlocking.

그리고, ④ 운영자 단말(100)과 운영자가 선택한 대상 체계 및 플랫폼(300-1, 300-2, 300-3, 300-4)과 연동하여 선택된 대상 체계 및 플랫폼(300-1, 300-2, 300-3, 300-4)으로 부터 운영상태 정보 수신 및 전시를 수행하고, ⑤ 설치된 운영자 인터페이스를 통해 대상 체계 및 플랫폼(300-1, 300-2, 300-23, 300-4)를 원격 제어한다.And, ④ the selected target system and platform (300-1, 300-2, 300-3, 300-4) receives and displays the operating status information, and ⑤ remotely controls the target system and platform (300-1, 300-2, 300-23, 300-4) through the installed operator interface do.

여기서, 상기한 운영자 단말(100)의 동작 및 송수신되는 데이터를 정리하면 아래의 표 1과 같다. Here, the operation of the operator terminal 100 and data transmitted and received are summarized in Table 1 below.

운영자/운영자 단말operator/operator terminal 주요 데이터key data 1One 시스템 접속 (로그인)System access (login) 운영자 정보 제공
(소속, 주 임무 등)Provide operator information
(Affiliation, main mission, etc.) 22 체계/플랫폼 선택 및 전송Scheme/Platform Selection and Transmission 지상/공중/해양 유, 무인체계, 플랫폼 종류/수량, 운영 단말 정보 등Ground/air/marine oil, unmanned system, platform type/quantity, operating terminal information, etc. 33 체계/플랫폼 UI, 통신연동 처리 모듈 제공Provides system/platform UI, communication interworking processing module UI 환경설정, 통신연동 모듈(스크립트, 라이브러리 형태)UI environment setting, communication interworking module (script, library type) 44 지상 무인플랫폼 운영상태 전시Display of ground unmanned platform operation status 지상 무인플랫폼 운영상태(위치, 센서상태 등)Ground unmanned platform operation status (location, sensor status, etc.) 55 지상 무인플랫폼 제어Ground unmanned platform control 지상 무인플랫폼 제어명령(경로, 센서제어 등)Ground unmanned platform control commands (route, sensor control, etc.)

상기한 본 발명에 따른 운영자 단말(100) 및 서버(200)의 상세 구성 및 그 구성에 따른 상세 동작을 도 4 및 도 5를 참조하며 설명해 보기로 하자. The detailed configuration of the operator terminal 100 and the server 200 according to the present invention and detailed operations according to the configuration will be described with reference to FIGS. 4 and 5 .

도 4는 본 발명에 따른 유, 무인 복합체계를 위한 통합 운영자 인터페이스 시스템에 대한 상세 블록 구성을 나타낸 도면이고, 도 5는 도 4에 도시된 데이터베이스의 상세 구성을 나타낸 도면이다. 4 is a diagram showing a detailed block configuration of an integrated operator interface system for an unmanned complex system according to the present invention, and FIG. 5 is a diagram showing a detailed configuration of the database shown in FIG. 4 .

도 4를 참조하면, 본 발명에 따른 유, 무인 복합체계를 위한 통합 운영자 인터페이스 시스템은, 운영자 단말(100)과 서버(200)를 포함할 수 있다. Referring to FIG. 4 , the integrated operator interface system for an unmanned complex system according to the present invention may include an operator terminal 100 and a server 200 .

상기 운영자 단말(100)은 입력 처리부(110), 연동 처리부(120), 연동 인터페이스 처리부(130), 통신 연동 처리부(140) 및 운영화면 전시부(150)를 포함할 수 있다. The operator terminal 100 may include an input processing unit 110 , an interworking processing unit 120 , an interworking interface processing unit 130 , a communication interworking processing unit 140 , and an operation screen display unit 150 .

상기 서버(200)는 연동 처리부(210) 및 데이터베이스(220)를 포함할 수 있으며, 데이터베이스(220)는 도 5에 도시된 바와 같이 운영자 단말 정보 데이터베이스(221), 운영자 정보 데이터베이스(222) 및 체계 및 플랫폼 정보 데이터베이스(223)를 포함할 수 있다. The server 200 may include an interworking processing unit 210 and a database 220, and the database 220 includes an operator terminal information database 221, an operator information database 222 and a system as shown in FIG. and a platform information database 223 .

상기 운영자 단말(100)의 입력 처리부(110)는 운영자로부터 입력되는 운영자 정보, 선택된 대상 체계 및 플랫폼(300-1, 300-2, 300-3, 300-4) 정보를 포함하는 연동 운영 정보를 연동 처리부(120)로 제공한다. The input processing unit 110 of the operator terminal 100 receives interworking operation information including operator information input from the operator, the selected target system and platform (300-1, 300-2, 300-3, 300-4) information. It is provided to the interlocking processing unit 120 .

연동 처리부(120)는 상기 입력 처리부(110)로부터 입력되는 운영 정보를 서버(200)로 전송하고, 서버(200)로부터 전송되는 상기 운영 정보에 대응하는 운영자 단말(100)의 UI 설정 환경 정보와 통신 연동을 위한 소프트웨어 모듈을 수신한 후, 수신된 UI 설정 환경 정보는 연동 인터페이스 처리부(130)로 제공하고, 통신 연동을 위한 소프트웨어 모듈은 통신 연동 처리부(140)로 각각 순차적으로 제공한다. The interworking processing unit 120 transmits the operation information input from the input processing unit 110 to the server 200, and UI setting environment information of the operator terminal 100 corresponding to the operation information transmitted from the server 200 and After receiving the software module for communication interworking, the received UI setting environment information is provided to the interworking interface processing unit 130 , and the software modules for communication interworking are sequentially provided to the communication interworking processing unit 140 , respectively.

상기 연동 인터페이스 처리부(130)는 연동 처리부(120)로부터 제공되는 운영자 단말(100)의 UI 설정 환경 정보(예를 들어, 지상 무인체계 A 플랫폼 UI 환경 설정정보, 지상 무인체계 표준 UI 환경 설정 정보, 공중 무인체계 A 플랫폼 UI 환경 설정 정보, 공중 무인체계 표준 UI 환경 설정 정보 중 사용자가 선택한 체계 및 플랫폼에 대응하는 정보)를 설치한 후, 설치된 UI 설정 환경 정보에 따라 운영화면 전시부(150)의 화면을 재 구성한다. 여기서, 재 구성된 화면은 운영자 정보 즉, 운영자 단말(100) 정보(예를 들어, 단말 종류, 화면 사이즈, 해상도), 운영자 정보(예를 들어, 운영자의 직급, 소속, 주 임무) 및 선택된 체계 및 플랫폼에 상응하는 화면일 수 있다. The interworking interface processing unit 130 includes UI setting environment information of the operator terminal 100 provided from the interworking processing unit 120 (eg, ground unmanned system A platform UI environment setting information, ground unmanned system standard UI environment setting information, After installing the aerial unmanned system A platform UI environment setting information, information corresponding to the system and platform selected by the user among the public unmanned system standard UI environment setting information), the screen of the operation screen display unit 150 according to the installed UI setting environment information reconfigure Here, the reconfigured screen includes operator information, that is, operator terminal 100 information (eg, terminal type, screen size, resolution), operator information (eg, operator's rank, affiliation, main task) and selected system and It may be a screen corresponding to the platform.

상기 통신 연동 처리부(140)는 연동 처리부(120)로부터 제공되는 운영자가 선택한 대상 체계 및 플랫폼(300-1, 300-2, 300-3, 300-4)과의 통신 연동을 위한 통신 연동 처리 소프트웨어 모듈을 설치한 후, 설치된 통신 연동 처리 소프트웨어 모듈을 이용하여 대상 체계 및 플랫폼(300-1, 300-2, 300-3, 300-4)와 통신을 수행한 후, 통신을 통한 송수신 데이터를 운영화면 전시부(150)의 재구성된 화면에 전시하는 것이다. 여기서, 연동 처리 소프트웨어 모듈은 연동을 위한 통신 인터페이스 정보(예를 들면, TCP, UDP, DDS(ROS 기반), Serial 통신 인터페이스 정보 중 선택된 체계 및 플랫폼에 대응하는 통신 인터페이스 소프트웨어 모듈), 체계 및 플랫폼 연동 규격 정보(예를 들어, 지상 무인체계 A 플랫폼 연동규격 정보, 지상 무인체계 표준 연동규격 정보, 공중 무인체계 A 플랫폼 연동규격 정보, 공중 무인체계 표준 연동규격 중 선택된 플랫폼에 대응하는 연동 규격 정보)를 포함할 수 있다. The communication interworking processing unit 140 is communication interworking processing software for communication interworking with the target system and platform (300-1, 300-2, 300-3, 300-4) selected by the operator provided from the interworking processing unit 120 . After installing the module, communicate with the target system and platform (300-1, 300-2, 300-3, 300-4) using the installed communication interworking processing software module, and then operate the transmission/reception data through communication It is to be displayed on the reconstructed screen of the screen display unit 150 . Here, the interworking processing software module includes communication interface information for interworking (eg, a communication interface software module corresponding to a system and platform selected among TCP, UDP, DDS (ROS-based), and serial communication interface information), system and platform interworking Standard information (e.g., ground unmanned system A platform interlocking specification information, ground unmanned system standard interlocking specification information, aerial unmanned system A platform interworking specification information, and interworking specification information corresponding to the selected platform among the aerial unmanned system standard interlocking specifications) may include

한편, 서버(200)의 연동 처리부(210)는 운영자 단말(100)로부터 전송되는 운영 정보에 따라 체계 및 플랫폼 정보 데이터베이스(223)로부터 선택 플랫폼에 대한 UI 환경 설정 정보를 리드하여 운영자 단말(100)의 연동 처리부(120)로 전송하고, 체계 및 플랫폼 정보 데이터베이스(223)로부터 운영자가 선택한 체계 및 플랫폼에 대한 통신 연동 처리 소프트웨어 모듈 및 플랫폼 연동 규격 정보를 리드하여 운영자 단말(100)의 연동 처리부(120)로 전송한다. On the other hand, the interworking processing unit 210 of the server 200 reads UI environment setting information for the selected platform from the system and platform information database 223 according to the operation information transmitted from the operator terminal 100 to the operator terminal 100 . The interworking processing unit 120 of the operator terminal 100 reads the communication interworking processing software module and platform interworking standard information for the system and platform selected by the operator from the system and platform information database 223. ) is sent to

상기 서버(200)의 체계 및 플랫폼 정보 데이터베이스(223)에는 각 체계 및 플랫폼에서 사용하는 통신 인터페이스 정보인 TCP, UDP, DDS(ROS 기반), Serial 통신 인터페이스 정보, 체계 및 플랫폼 별 연동 규격 정보 및 각 플랫폼 UI 환경 설정 정보가 저장될 수 있다. 여기서, 상기 체계 및 플랫폼 연동 규격 정보는 지상 무인체계 A 플랫폼 연동규격 정보, 지상 무인체계 표준 연동규격 정보, 공중 무인체계 A 플랫폼 연동규격 정보, 공중 무인체계 표준 연동규격 정보를 포함할 수 있고, 상기 플랫폼 UI 환경 설정 정보는 지상 무인체계 A 플랫폼 UI 환경 설정정보, 지상 무인체계 표준 UI 환경 설정 정보, 공중 무인체계 A 플랫폼 UI 환경 설정 정보, 공중 무인체계 표준 UI 환경 설정 정보를 포함할 수 있다. In the system and platform information database 223 of the server 200, TCP, UDP, DDS (ROS-based), serial communication interface information, which are communication interface information used in each system and platform, serial communication interface information, interworking standard information for each system and platform, and each Platform UI environment setting information may be stored. Here, the system and platform interworking standard information may include terrestrial unmanned system A platform interworking specification information, ground unmanned system standard interworking specification information, aerial unmanned system A platform interworking specification information, and public unmanned system standard interworking specification information, and The platform UI environment setting information may include ground unmanned system A platform UI environment setting information, ground unmanned system standard UI environment setting information, aerial unmanned system A platform UI environment setting information, and aerial unmanned system standard UI environment setting information.

이와 같은 구성을 갖는 본 발명에 따른 유, 무인 복합체계를 위한 통합 운영자 인터페이스 시스템의 동작을 운영자 단말의 UI 화면 재구성 동작과, 통신 연동 소프트웨어 및 연동 규격 정보 처리 동작을 구분하여 순차적으로 설명하기로 한다. The operation of the integrated operator interface system for an unmanned complex system according to the present invention having such a configuration will be sequentially described by dividing the UI screen reconfiguration operation of the operator terminal and the communication interworking software and interworking standard information processing operation. .

먼저, 운영자 단말의 UI 화면 재구성 동작을 살펴보면, 운영자가 운영자 단말(100)을 부팅하게 되면, 운영자 단말(100)에서는 자신의 운영자 단말(100) 정보(예를 들면, 단말의 종류, 사이즈, 해상도 등)를 서버(200)로 전송한다. First, looking at the UI screen reconfiguration operation of the operator terminal, when the operator boots the operator terminal 100, the operator terminal 100 has his/her operator terminal 100 information (eg, the type, size, and resolution of the terminal). etc.) to the server 200 .

서버(200)는 운영자 단말(100)로부터 전송되는 운영자 단말 정보를 운영자 단말 정보 데이터베이스(221)에 저장한다. The server 200 stores the operator terminal information transmitted from the operator terminal 100 in the operator terminal information database 221 .

운영자 단말(100)의 부팅이 이루어진 후, 운영자는 운영자 단말 화면을 이용하여 서버(200) 접속을 위한 로그인 정보를 입력하고, 로그인 정보가 입력되면 운영자 단말(100)의 입력 처리부(110)는 입력된 로그인 정보를 서버(200)로 전송한다. After booting of the operator terminal 100 is made, the operator inputs login information for accessing the server 200 using the operator terminal screen, and when the login information is input, the input processing unit 110 of the operator terminal 100 is input The logged-in information is transmitted to the server 200 .

서버(200)의 연동 처리부(210)는 상기 로그인 정보를 이용하여 운영자 데이터베이스(222)로부터 운영자 정보, 예를 들면, 해당 운영자의 직책, 소속, 주 임무 정보 등을 획득한다. The interworking processing unit 210 of the server 200 obtains operator information, for example, the position, affiliation, and main task information of the operator, from the operator database 222 by using the login information.

이어, 운영자가 운영자 단말(100)의 입력 처리부(110)로 제어 연동을 위한 체계 및 플랫폼(300-1, 300-2, 300-3, 300-4) 정보를 입력하면, 입력 처리부(110)는 입력된 연동 대상 체계 및 플랫폼(300-1, 300-2, 300-3, 300-4) 정보를 연동 처리부(120)를 통해 서버(200)의 연동 처리부(210)로 전송한다. Then, when the operator inputs information about the system and platform 300-1, 300-2, 300-3, and 300-4 for control interlocking to the input processing unit 110 of the operator terminal 100, the input processing unit 110 transmits the inputted interworking target system and platform (300-1, 300-2, 300-3, 300-4) information to the interworking processing unit 210 of the server 200 through the interworking processing unit 120 .

서버(200)의 연동 처리부(210)는 운영자 단말(100)의 연동 처리부(120)로부터 전송되는 체계 및 플랫폼 정보에 따라 체계 및 플랫폼 정보 데이터베이스(223)로부터 선택된 체계 및 플랫폼 상세 정보 및 체계 및 플랫폼 별 UI 환경 설정 정보를 획득한다. The interworking processing unit 210 of the server 200 is selected from the system and platform information database 223 according to the system and platform information transmitted from the interworking processing unit 120 of the operator terminal 100, system and platform detailed information and system and platform Acquires specific UI environment setting information.

그리고, 서버(200)의 연동 처리부(210)는 상기 획득한 운영자 단말 정보 및 운영자 정보를 이용하는 운영자 기반 운영화면과, 상기 획득한 체계 및 플랫폼 정보 및 플랫폼 별 UI 환경 설정 정보를 이용한 체계 및 플랫폼 정보 기반 운영 화면을 각각 구성하는 화면 구성 정보를 각각 생성한 후, 생성된 운영자 정보 기반 운영화면 구성 정보와 체계 및 플랫폼 정보 기반 운영 화면 구성 정보를 운영자 단말(100)의 연동 처리부(120)로 전송한다. In addition, the interworking processing unit 210 of the server 200 includes an operator-based operation screen using the acquired operator terminal information and operator information, and system and platform information using the acquired system and platform information and UI environment setting information for each platform. After each generation of screen configuration information constituting the base operation screen, the generated operator information-based operation screen configuration information and system and platform information-based operation screen configuration information are transmitted to the interworking processing unit 120 of the operator terminal 100 .

상기 운영자 기반 운영화면 구성 정보는, 만약 운영자가 지휘관일 경우, 작전지역 상황도 정보, 소속된 운영병의 플랫폼 영상 채널 정보, 상급부대 전문/투명도 작성 정보, 소속된 운영병 플랫폼 정보, 임무 계획 작성/하달 정보, 및 화면 잠금/경고 알림 정보를 포함할 수 있다. 그리고, 운영자가 운영병일 경우에는, 플랫폼 영상 채널 정보, 작전지역 상황도 미니 맵 정보, 플랫폼 정보/제어 정보 및 임무실행/통제 정보를 포함할 수 있다. The operator-based operation screen configuration information includes, if the operator is a commander, operation area situation map information, platform video channel information of the operator to which he belongs, information on specialization/transparency of the senior unit, information on the platform of the operator to whom he belongs, and creation of a mission plan It may include /hadal information, and screen lock/warning notification information. And, when the operator is an operator, platform image channel information, operation area situation map information, mini map information, platform information/control information, and mission execution/control information may be included.

그리고, 체계 및 플랫폼 정보 기반 운영화면의 구성 정보는, 체계 그룹 정보, 플랫폼 수량에 따른 플랫폼 필수/보조 정보, 메인/서브 화면 레이아웃 설정 정보, 화면 잠금/알람 정보를 더 포함할 수 있다. In addition, the configuration information of the system and platform information-based operation screen may further include system group information, platform essential/auxiliary information according to the platform quantity, main/sub screen layout setting information, and screen lock/alarm information.

운영자 단말(100)의 연동 처리부(120)는 서버(200)로부터 전송되는 운영자 기반 운영화면 재 구성 정보, 체계 및 플랫폼 정보 기반 운영화면의 재 구성 정보를 연동 인터페이스 처리부(130)로 제공한다. The interworking processing unit 120 of the operator terminal 100 provides the operator-based operation screen reconfiguration information and system and platform information-based operation screen reconfiguration information transmitted from the server 200 to the interworking interface processing unit 130 .

연동 인터페이스 처리부(130)는 연동 처리부(120)로부터 제공되는 운영자 기반 운영화면 재 구성 정보, 체계 및 플랫폼 정보 기반 운영 화면의 재 구성 정보를 이용하여 운영화면 전시부(150)에 디스플레이 가능하도록 데이터 처리한 후, 각각의 운영 화면을 재 구성한 후, 운영 화면 전시부(150)에 각각 전시한다. The interworking interface processing unit 130 processes data so that it can be displayed on the operating screen display unit 150 by using the operator-based operation screen reconfiguration information provided from the interworking processing unit 120, and the system and platform information-based operation screen reconfiguration information. After that, each operation screen is reconfigured and displayed on the operation screen display unit 150, respectively.

이와 같이, 운영자 기반 운영화면과, 체계 및 플랫폼 정보 기반 운영화면이 전시된 상태에서, 운영자가 선택한 체계 및 플랫폼과의 연동을 위한 통신 연동 소프트웨어 및 연동 규격 정보 처리 동작에 대하여 설명해 보기로 한다. In this way, while the operator-based operation screen and the system and platform information-based operation screen are displayed, communication interworking software and interworking standard information processing operations for interworking with the system and platform selected by the operator will be described.

먼저, 운영자 단말(100)이 부팅되고, 로그인되어, 상기 설명에서와 같이 운영자 기반 운영화면과, 체계 및 플랫폼 정보 기반 운영화면이 전시된 상태에서 운영자에 의해 연동 제어를 위한 체계 및 플랫폼(300-1, 300-2, 300-3, 300-4)이 선택 입력되는 경우, 운영자 단말(100)의 입력 처리부(110)는 해당 입력 정보를 연동 처리부(120)로 제공한다. First, the operator terminal 100 is booted, logged in, and the system and platform 300- for interlocking control by the operator in a state where the operator-based operation screen and the system and platform information-based operation screen are displayed as described above. 1, 300-2, 300-3, 300-4) are selectively input, the input processing unit 110 of the operator terminal 100 provides the corresponding input information to the interworking processing unit 120 .

연동 처리부(120)는 입력 처리부(110)로부터 제공되는 체계 및 플랫폼 정보를 서버(200)로 전송한다. The interworking processing unit 120 transmits the system and platform information provided from the input processing unit 110 to the server 200 .

서버(200)의 연동 처리부(210)는 운영자 단말(100)로부터 전송되는 선택 체계 및 플랫폼 정보에 따라 그에 대응하는 체계 및 플랫폼 통신 연동 소프트웨어 모듈을 체계 및 플랫폼 정보 데이터베이스(223)로부터 획득하고, 획득된 체계 및 플랫폼 통신 연동 소프트웨어 모듈에 대응하는 체계 및 플랫폼 연동 규격 정보를 획득하여 획득한 체계 및 플랫폼 통신 연동 소프트웨어 모듈 및 체계 및 플랫폼 연동 규격 정보를 운영자 단말(100)의 연동 처리부(120)로 전송한다. 여기서, 상기 체계 및 플랫폼 정보 데이터베이스(223)에는 체계 및 플랫폼 별 통신 연동 소프트웨어 모듈정보와, 체계 및 플랫폼 별 연동 규격 정보 및 플랫폼 별 UI 환경 설정 정보가 저장될 수 있다. The interworking processing unit 210 of the server 200 acquires a system and platform communication interworking software module corresponding thereto from the system and platform information database 223 according to the selection system and platform information transmitted from the operator terminal 100, and obtains Transmits the system and platform communication interworking software module and system and platform interworking standard information obtained by acquiring system and platform interworking standard information corresponding to the system and platform communication interworking software module to the interworking processing unit 120 of the operator terminal 100 do. Here, the system and platform information database 223 may store communication interworking software module information for each system and platform, interworking standard information for each system and platform, and UI environment setting information for each platform.

상기 운영자 단말(100)의 연동 처리부(120)는 상기 서버(200)의 연동 처리부(210)로부터 전송되는 운영자가 선택한 체계 및 플랫폼 통신 연동 소프트웨어 모듈 및 체계 및 플랫폼 연동 규격 정보를 통신 연동 처리부(140)에 설치하게 되는 것이다. The interworking processing unit 120 of the operator terminal 100 transmits the system and platform communication interworking software module and system and platform interworking standard information selected by the operator transmitted from the interworking processing unit 210 of the server 200 to the communication interworking processing unit 140 ) will be installed.

이와 같이, 운영자 기반 운영화면과 체계 및 플랫폼 정보 기반 운영화면이 운영자 단말(100)의 운영화면 전시부(150)에 전시되고, 상기 통신 연동 처리부(140)에 운영자가 선택된 체계 및 플랫폼에 대한 통신 연동 소프트웨어 모듈 및 통신 규격 정보가 설치된 상태에서, 운영자는 설치된 통신 연동 소프트웨어 모듈 및 통신 규격 정보에 따라 해당 체계의 플랫폼의 제어를 수행하고, 제어 시 송수신되는 데이터를 상기 운영화면 전시부(150)에 각각 전시할 수 있게 되는 것이다. In this way, the operator-based operation screen and the system and platform information-based operation screen are displayed on the operation screen display unit 150 of the operator terminal 100 , and the communication interworking with the system and platform selected by the operator in the communication interworking processing unit 140 . In a state in which the software module and communication standard information are installed, the operator controls the platform of the corresponding system according to the installed communication interlocking software module and communication standard information, and displays the data transmitted and received during control on the operation screen display unit 150, respectively. will be able to do

상기에서 설명한 본 발명에 따른 유, 무인 복합체계를 위한 통합 운영자 인터페이스 시스템의 동작과 상응하는 본 발명에 따른 유, 무인 복합체계를 위한 통합 운영자 인터페이스 방법에 대하여 첨부한 도 6 및 도 7을 참조하여 단계적으로 설명해 보자. With reference to the accompanying FIGS. 6 and 7 for the integrated operator interface method for the unmanned complex system according to the present invention corresponding to the operation of the integrated operator interface system for the unmanned complex system according to the present invention described above, Let's explain it step by step.

도 6은 본 발명에 따른 유, 무인 복합체계를 위한 통합 운영자 인터페이스 방법에서, 운영자 및 체계 및 플랫폼 정보를 기반으로 운영자 단말의 UI 재구성 처리 방법에 대한 동작 플로우챠트를 나타낸 도면이고, 도 7은 본 발명에 따른 유, 무인 복합체계를 위한 통합 운영자 인터페이스 방법에서, 운영자 단말의 UI 재구성 후, 연동 대상에 대한 통신 인터페이스 소프트웨어 모듈 및 연동 규격 정보 처리 방법에 대한 동작 플로우챠트를 나타낸 도면이다. 6 is a view showing an operation flowchart for a UI reconfiguration processing method of an operator terminal based on operator and system and platform information in an integrated operator interface method for an unmanned complex system according to the present invention, and FIG. 7 is this It is a view showing an operation flowchart for a communication interface software module and an interworking standard information processing method for an interworking target after UI reconfiguration of an operator terminal in the integrated operator interface method for an unmanned complex system according to the present invention.

먼저, 도 6을 참조하여 유, 무인 복합체계를 위한 통합 운영자 인터페이스 방법에서의 운영자 단말의 UI 화면 재구성 방법에 대하여 살펴보기로 한다. First, with reference to FIG. 6 , a method for reconfiguring a UI screen of an operator terminal in an integrated operator interface method for an unmanned complex system will be described.

도 6에 도시된 바와 같이, 운영자 단말의 UI 화면 재구성 방법은, 먼저 운영자가 운영자 단말(100)을 부팅하게 되면, 운영자 단말(100)에서는 자신의 운영자 단말 정보(예를 들면, 단말의 종류, 사이즈, 해상도 등)를 서버(200)로 전송한다(S601). As shown in FIG. 6 , in the method of reconfiguring the UI screen of the operator terminal, when the operator boots the operator terminal 100 first, the operator terminal 100 has its own operator terminal information (eg, the type of terminal, size, resolution, etc.) to the server 200 (S601).

이어, 서버(200)는 운영자 단말(100)로부터 전송되는 운영자 단말 정보를 수신한 후, 수신된 운영자 단말을 운영자 단말 정보 데이터베이스에 저장한다(S602). Next, the server 200 receives the operator terminal information transmitted from the operator terminal 100, and stores the received operator terminal in the operator terminal information database (S602).

이어, 운영자 단말(100)의 부팅이 이루어진 후, 운영자는 운영자 단말 화면을 이용하여 서버(200)에 접속을 위한 로그인 정보를 입력하고, 로그인 정보가 입력되면 운영자 단말(100)은 입력된 로그인 정보를 서버(200)로 전송한다(S603). Subsequently, after booting of the operator terminal 100 is made, the operator inputs login information for access to the server 200 using the operator terminal screen, and when the login information is input, the operator terminal 100 displays the input login information is transmitted to the server 200 (S603).

이어, 서버(200)는 운영자 단말(100)로부터 전송되는 운영자 정보를 수신하고(S604), 수신된 운영자 정보를 이용하여 운영자 데이터베이스로부터 운영자 정보(예를 들면, 해당 운영자의 직책, 소속, 주 임무 정보 등)를 획득한다(S605). Then, the server 200 receives the operator information transmitted from the operator terminal 100 (S604), and using the received operator information, operator information from the operator database (eg, the position, affiliation, main task of the operator) information, etc.) is obtained (S605).

이어, 운영자가 운영자 단말(100)에 제어 연동을 위한 체계 및 플랫폼(300-1, 300-2, 300-3, 300-4) 정보가 운영자에 의해 입력하면, 입력된 연동 대상 체계 및 플랫폼(300-1, 300-2, 300-3, 300-4) 정보를 서버(200)로 전송한다(S606). Then, when the operator inputs the system and platform (300-1, 300-2, 300-3, 300-4) information for control interworking to the operator terminal 100 by the operator, the input interlocking target system and platform ( 300-1, 300-2, 300-3, 300-4) information is transmitted to the server 200 (S606).

이어, 서버(200)는 운영자 단말(100)로부터 전송되는 체계 및 플랫폼 정보를 수신하고(S607), 수신된 체계 및 플랫폼 정보에 따라 체계 및 플랫폼 정보 데이터베이스로부터 선택된 체계 및 플랫폼 상세 정보 및 체계 및 플랫폼 별 UI 환경 설정 정보를 획득한다(S608). Then, the server 200 receives the system and platform information transmitted from the operator terminal 100 (S607), and the system and platform detailed information and system and platform selected from the system and platform information database according to the received system and platform information. Obtains specific UI environment setting information (S608).

이어, 서버(200)는 상기 획득한 운영자 단말 정보 및 운영자 정보를 이용하는 운영자 기반 운영화면과, 상기 획득한 체계 및 플랫폼 정보 및 플랫폼 별 UI 환경 설정 정보를 이용한 체계 및 플랫폼 정보 기반 운영 화면을 각각 구성하는 화면 구성 정보를 각각 생성한 후, 생성된 운영자 정보 기반 운영화면 구성 정보와 체계 및 플랫폼 정보 기반 운영 화면 구성 정보를 운영자 단말(100)로 전송한다(S609). Next, the server 200 configures an operator-based operation screen using the obtained operator terminal information and operator information, and a system and platform information-based operation screen using the obtained system and platform information and UI environment setting information for each platform, respectively. After generating each screen configuration information, the generated operator information-based operation screen configuration information and system and platform information-based operation screen configuration information are transmitted to the operator terminal 100 (S609).

상기 운영자 기반 운영화면 구성 정보는, 만약 운영자가 지휘관일 경우, 작전지역 상황도 정보, 소속된 운영병의 플랫폼 영상 채널 정보, 상급부대 전문/투명도 작성 정보, 소속된 운영병 플랫폼 정보, 임무 계획 작성/하달 정보, 및 화면 잠금/경고 알림 정보를 포함할 수 있으며, 운영자가 운영병일 경우에는, 플랫폼 영상 채널 정보, 작전지역 상황도 미니 맵 정보, 플랫폼 정보/제어 정보 및 임무실행/통제 정보를 포함할 수 있다. The operator-based operation screen configuration information includes, if the operator is a commander, operation area situation map information, platform video channel information of the operator to which he belongs, information on specialization/transparency of the senior unit, information on the platform of the operator to whom he belongs, and creation of a mission plan It may include /load information, and screen lock/warning notification information, and if the operator is an operator, it includes platform video channel information, operational area situation mini map information, platform information/control information, and mission execution/control information. can do.

그리고, 체계 및 플랫폼 정보 기반 운영화면의 구성 정보는, 체계 그룹 정보, 플랫폼 수량에 따른 플랫폼 필수/보조 정보, 메인/서브 화면 레이아웃 설정 정보, 화면 잠금/알람 정보를 더 포함할 수 있다. In addition, the configuration information of the system and platform information-based operation screen may further include system group information, platform essential/auxiliary information according to the platform quantity, main/sub screen layout setting information, and screen lock/alarm information.

이어, 운영자 단말(100)은 서버(200)로부터 전송되는 운영자 기반 운영화면 재 구성 정보, 체계 및 플랫폼 정보 기반 운영화면의 재 구성 정보를 이용하여 디스플레이 가능하도록 데이터 처리한 후, 각각의 운영 화면을 재 구성한 후, 운영 화면에 각각 전시하는 것이다(S610). Next, the operator terminal 100 processes data so that it can be displayed using the operator-based operation screen reconfiguration information transmitted from the server 200, and the system and platform information-based reconfiguration information of the operation screen, and then displays each operation screen. After reconfiguration, each is displayed on the operation screen (S610).

이와 같이, 운영자 기반 운영화면과, 체계 및 플랫폼 정보 기반 운영화면이 전시된 상태에서, 운영자가 선택한 체계 및 플랫폼과의 연동을 위한 통신 연동 소프트웨어 및 연동 규격 정보 처리 방법에 대하여 도 7을 참조하여 단계적으로 설명해 보자. In this way, in the state where the operator-based operation screen and the system and platform information-based operation screen are displayed, the communication interworking software and the interworking standard information processing method for interworking with the system and platform selected by the operator are step-by-step with reference to FIG. 7 . Let's explain it with

도 7을 참조하면, 먼저, 운영자 단말(100)이 부팅되고, 로그인되어(S701, S702), 상기 설명에서와 같이 운영자 기반 운영화면과, 체계 및 플랫폼 정보 기반 운영화면이 전시된 상태에서 운영자에 의해 연동 제어를 위한 체계 및 플랫폼(300-1, 300-2, 300-3, 300-4)이 선택 입력되는 경우, 운영자 단말(100)는 해당 입력 정보를 서버(200)로 전송한다(S703). Referring to FIG. 7 , first, the operator terminal 100 is booted, logged in (S701, S702), and the operator-based operation screen and the system and platform information-based operation screen are displayed to the operator as described above. When the system and platform (300-1, 300-2, 300-3, 300-4) for interlocking control are selectively input by the operator, the operator terminal 100 transmits the corresponding input information to the server 200 (S703) ).

이어, 서버(200)는 운영자 단말(100)로부터 전송되는 선택 체계 및 플랫폼 정보를 수신하고(S704), 수신된 체계 및 플랫폼 정보에 따라 그에 대응하는 체계 및 플랫폼 통신 연동 소프트웨어 모듈을 체계 및 플랫폼 정보 데이터베이스로부터 획득하고, 획득된 체계 및 플랫폼 통신 연동 소프트웨어 모듈에 대응하는 체계 및 플랫폼 연동 규격 정보를 체계 및 플랫폼 정보 데이터베이스로부터 획득하여 획득한 체계 및 플랫폼 통신 연동 소프트웨어 모듈 및 체계 및 플랫폼 연동 규격 정보를 운영자 단말(100)로 전송한다(S705). 여기서, 상기 체계 및 플랫폼 정보 데이터베이스에는 체계 및 플랫폼 별 통신 연동 소프트웨어 모듈정보와, 체계 및 플랫폼 별 연동 규격 정보 및 플랫폼 별 UI 환경 설정 정보가 저장될 수 있다. 그리고, 상기 연동 처리 소프트웨어 모듈 정보는 연동을 위한 통신 인터페이스 정보 예를 들면, TCP, UDP, DDS(ROS 기반), Serial 통신 인터페이스 정보 중 선택된 체계 및 플랫폼에 대응하는 통신 인터페이스 소프트웨어 모듈 정보 중 적어도 하나 이상을 포함하고, 체계 및 플랫폼 연동 규격 정보는 지상 무인체계 A 플랫폼 연동규격 정보, 지상 무인체계 표준 연동규격 정보, 공중 무인체계 A 플랫폼 연동규격 정보, 공중 무인체계 표준 연동규격 중 선택된 플랫폼에 대응하는 연동 규격 정보 중 적어도 하나 이상을 포함할 수 있다. Then, the server 200 receives the selection system and platform information transmitted from the operator terminal 100 (S704), and according to the received system and platform information, a system and platform communication interworking software module corresponding thereto is system and platform information The system and platform communication interworking software module and system and platform interworking standard information obtained by acquiring from the database and acquiring system and platform interworking standard information corresponding to the acquired system and platform communication interworking software module from the system and platform information database are operated It is transmitted to the terminal 100 (S705). Here, the system and platform information database may store communication interworking software module information for each system and platform, interworking standard information for each system and platform, and UI environment setting information for each platform. In addition, the interworking processing software module information includes communication interface information for interworking, for example, at least one of communication interface software module information corresponding to a system and platform selected from among TCP, UDP, DDS (ROS-based), and Serial communication interface information. Including, system and platform interworking specification information is interlocking corresponding to a platform selected from among ground unmanned system A platform interworking specification information, ground unmanned system standard interlocking specification information, aerial unmanned system A platform interworking specification information, and public unmanned system standard interworking specification It may include at least one or more of standard information.

이어, 상기 운영자 단말(100)은 상기 서버(200)로부터 전송되는 운영자가 선택한 체계 및 플랫폼 통신 연동 소프트웨어 모듈 및 체계 및 플랫폼 연동 규격 정보를 설치한 후, 설치된 통신 연동 소프트웨어 모듈 및 통신 규격 정보에 따라 해당 체계의 플랫폼의 제어를 수행하고, 제어 시 송수신되는 데이터를 상기 운영화면에 전시할 수 있게 되는 것이다(S706). Then, the operator terminal 100 installs the system and platform communication interworking software module and system and platform interworking standard information selected by the operator transmitted from the server 200, and then according to the installed communication interworking software module and communication standard information It is possible to perform control of the platform of the corresponding system, and to display data transmitted and received during control on the operation screen (S706).

상기한 본 발명의 일 실시예에 따른 유, 무인 복합체계를 위한 통합 운영자 인터페이스 방법은 하드웨어인 컴퓨터와 결합되어 실행되기 위해 프로그램(또는 어플리케이션)으로 구현되어 매체에 저장될 수 있다.The integrated operator interface method for an unmanned complex system according to an embodiment of the present invention described above may be implemented as a program (or application) and stored in a medium to be executed in combination with a computer, which is hardware.

상기 전술한 프로그램은, 상기 컴퓨터가 프로그램을 읽어 들여 프로그램으로 구현된 상기 방법들을 실행시키기 위하여, 상기 컴퓨터의 프로세서(CPU)가 상기 컴퓨터의 장치 인터페이스를 통해 읽힐 수 있는 C, C++, JAVA, Ruby, 기계어 등의 컴퓨터 언어로 코드화된 코드(Code)를 포함할 수 있다. 이러한 코드는 상기 방법들을 실행하는 필요한 기능들을 정의한 함수 등과 관련된 기능적인 코드(Functional Code)를 포함할 수 있고, 상기 기능들을 상기 컴퓨터의 프로세서가 소정의 절차대로 실행시키는데 필요한 실행 절차 관련 제어 코드를 포함할 수 있다. 또한, 이러한 코드는 상기 기능들을 상기 컴퓨터의 프로세서가 실행시키는데 필요한 추가 정보나 미디어가 상기 컴퓨터의 내부 또는 외부 메모리의 어느 위치(주소 번지)에서 참조되어야 하는지에 대한 메모리 참조관련 코드를 더 포함할 수 있다. 또한, 상기 컴퓨터의 프로세서가 상기 기능들을 실행시키기 위하여 원격(Remote)에 있는 어떠한 다른 컴퓨터나 서버 등과 통신이 필요한 경우, 코드는 상기 컴퓨터의 통신 모듈을 이용하여 원격에 있는 어떠한 다른 컴퓨터나 서버 등과 어떻게 통신해야 하는지, 통신 시 어떠한 정보나 미디어를 송수신해야 하는지 등에 대한 통신 관련 코드를 더 포함할 수 있다.The above-mentioned program, in order for the computer to read the program and execute the methods implemented as a program, C, C++, JAVA, Ruby, which the processor (CPU) of the computer can read through the device interface of the computer; It may include code coded in a computer language such as machine language. Such code may include functional code related to a function defining functions necessary for executing the methods, etc. can do. In addition, the code may further include additional information necessary for the processor of the computer to execute the functions or code related to memory reference for which location (address address) in the internal or external memory of the computer should be referenced. have. In addition, when the processor of the computer needs to communicate with any other computer or server located remotely in order to execute the above functions, the code uses the communication module of the computer to determine how to communicate with any other computer or server remotely. It may further include a communication-related code for whether to communicate and what information or media to transmit and receive during communication.

상기 저장되는 매체는, 레지스터, 캐쉬, 메모리 등과 같이 짧은 순간 동안 데이터를 저장하는 매체가 아니라 반영구적으로 데이터를 저장하며, 기기에 의해 판독(reading)이 가능한 매체를 의미한다. 구체적으로는, 상기 저장되는 매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피디스크, 광 데이터 저장장치 등이 있지만, 이에 제한되지 않는다. 즉, 상기 프로그램은 상기 컴퓨터가 접속할 수 있는 다양한 서버 상의 다양한 기록매체 또는 사용자의 상기 컴퓨터상의 다양한 기록매체에 저장될 수 있다. 또한, 상기 매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 컴퓨터가 읽을 수 있는 코드가 저장될 수 있다.The storage medium is not a medium that stores data for a short moment, such as a register, a cache, a memory, etc., but a medium that stores data semi-permanently and can be read by a device. Specifically, examples of the storage medium include, but are not limited to, ROM, RAM, CD-ROM, magnetic tape, floppy disk, and optical data storage device. That is, the program may be stored in various recording media on various servers accessible by the computer or in various recording media on the computer of the user. In addition, the medium may be distributed in a computer system connected by a network, and computer-readable codes may be stored in a distributed manner.

전술한 본 발명의 설명은 예시를 위한 것이며, 본 발명이 속하는 기술분야의 통상의 지식을 가진 자는 본 발명의 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 쉽게 변형이 가능하다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해해야만 한다. 예를 들어, 단일형으로 설명되어 있는 각 구성 요소는 분산되어 실시될 수도 있으며, 마찬가지로 분산된 것으로 설명되어 있는 구성 요소들도 결합된 형태로 실시될 수 있다.The foregoing description of the present invention is for illustration, and those of ordinary skill in the art to which the present invention pertains can understand that it can be easily modified into other specific forms without changing the technical spirit or essential features of the present invention. will be. Therefore, it should be understood that the embodiments described above are illustrative in all respects and not restrictive. For example, each component described as a single type may be implemented in a distributed manner, and likewise components described as distributed may also be implemented in a combined form.

본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구범위의 의미 및 범위 그리고 그 균등 개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.The scope of the present invention is indicated by the following claims rather than the above detailed description, and all changes or modifications derived from the meaning and scope of the claims and their equivalent concepts should be interpreted as being included in the scope of the present invention. do.

100 : 운영자 단말
110 : 입력 처리부
120 : 연동 처리부
130 : 연동 인터페이스 처리부
140 : 통신 연동 처리부
150 : 운영화면 전시부
200 : 서버
210 : 연동 처리부
220 : 데이터베이스
221 : 운영자 단말 정보 데이터베이스
222 : 운영자 정보 데이터베이스
223 : 체계 및 플랫폼 정보 데이터베이스
300-1, 300-2, 300-3, 300-4 : 체계 및 플랫폼100: operator terminal
110: input processing unit
120: interlocking processing unit
130: interworking interface processing unit
140: communication interworking processing unit
150: operation screen display unit
200 : server
210: interlocking processing unit
220: database
221: operator terminal information database
222: operator information database
223: Scheme and Platform Information Database
300-1, 300-2, 300-3, 300-4: Schemes and Platforms

Claims (20)

유, 무인 복합체계를 위한 통합 운영자 인터페이스 시스템에 있어서,
서버와 접속하여 운영자 단말 정보 및 연동하고자 하는 체계 및 플랫폼 정보를 서버로 전송하고, 서버로부터 운영자 및 운영자 단말 정보, 체계 및 플랫폼 정보에 대응하는 사용자 기반 및 체계 및 플랫폼 정보 기반 운영 화면 구성 정보와, 해당 체계 및 플랫폼 통신 연동 소프트웨어 모듈, 및 해당 체계 및 플랫폼 연동 규격 정보를 수신하여 화면에 전시하는 운영자 단말; 및
상기 운영자 단말로부터 수신되는 운영자 단말 정보 및 연동하고자 하는 체계 및 플랫폼 정보에 따라 운영자 및 운영자 단말 정보, 체계 및 플랫폼 정보에 대응하는 사용자 기반 및 체계 및 플랫폼 정보 기반 운영 화면 구성 정보와, 해당 체계 및 플랫폼 통신 연동 소프트웨어 모듈, 및 해당 체계 및 플랫폼 연동 규격 정보를 획득하여 순차적으로 운영자 단말로 전송하는 서버를 포함하고,
상기 서버는,
상기 운영자 단말의 로그인 정보를 이용하여 운영자 정보를 획득하고, 운영자 정보를 저장하며, 상기 획득한 운영자 정보 및 수신되는 운영자 단말 정보, 및 연동 대상 체계 및 플랫폼 정보 기반 운영 화면 구성 정보(UI 환경 설정 정보)를 각각 획득하여 운영자 단말로 전송하고, 운영자 단말로부터 수신되는 연동 대상 체계 및 플랫폼 정보에 따른 해당 체계 및 플랫폼 통신 연동 소프트웨어 모듈, 및 해당 체계 및 플랫폼 연동 규격 정보를 획득하여 상기 운영자 단말로 전송하는 연동 처리부; 및
다수의 운영자 및 운영자 단말 정보, 운영자 및 운영자 단말 정보에 따른 운영 화면 구성 정보, 다수의 체계 및 플랫폼 정보 기반 운영 화면 구성 정보, 다수의 체계 및 플랫폼과의 통신 연동 소프트웨어 모듈, 다수의 체계 및 플랫폼 연동 규격 정보를 저장하는 데이터베이스를 포함하는 것인 유, 무인 복합체계를 위한 통합 운영자 인터페이스 시스템.
In an integrated operator interface system for an unmanned complex system,
Connects to the server and transmits operator terminal information and system and platform information to be interlocked to the server, and operator and operator terminal information, system and platform information from the server, and user base and system and platform information based operation screen configuration information; an operator terminal that receives the system and platform communication interworking software module, and the system and platform interworking standard information and displays it on the screen; and
User base and system and platform information-based operating screen configuration information corresponding to operator and operator terminal information, system and platform information according to operator terminal information received from the operator terminal and system and platform information to be linked, and the corresponding system and platform A communication interworking software module, and a server that acquires the corresponding system and platform interworking standard information and sequentially transmits it to the operator terminal,
The server is
Obtaining operator information using the login information of the operator terminal, storing operator information, and operating screen configuration information based on the obtained operator information and received operator terminal information, and interworking target system and platform information (UI environment setting information) ) obtained and transmitted to the operator terminal, and the corresponding system and platform communication interworking software module according to the interworking target system and platform information received from the operator terminal, and the corresponding system and platform interworking standard information are obtained and transmitted to the operator terminal interlocking processing unit; and
Multiple operator and operator terminal information, operation screen configuration information according to operator and operator terminal information, operation screen configuration information based on multiple system and platform information, communication interworking software module with multiple systems and platforms, and multiple systems and platforms interworking An integrated operator interface system for an unmanned complex system that includes a database for storing specification information.
 제1항에 있어서,
상기 운영자 단말은,
운영자의 선택에 따라 상기 운영자 단말 정보, 연동 대상 체계 및 플랫폼 정보를 입력하는 입력처리부;
입력되는 운영자 단말 정보, 연동 대상 체계 및 플랫폼 정보를 순차적으로 상기 서버로 전송하고, 서버로부터 전송되는 사용자 기반 및 체계 및 플랫폼 정보 기반 운영 화면 구성 정보와, 해당 체계 및 플랫폼 통신 연동 소프트웨어 모듈, 및 해당 체계 및 플랫폼 연동 규격 정보를 수신하는 연동 처리부;
상기 연동 처리부로부터 수신되는 사용자 기반 및 체계 및 플랫폼 정보 기반 운영 화면 구성 정보를 기반으로 사용자 기반, 체계 및 플랫폼 정보 기반 운영 화면을 구성하여 전시부에 전시하는 연동 인터페이스 처리부;
상기 연동 처리부로부터 수신되는 해당 체계 및 플랫폼 통신 연동 소프트웨어 모듈, 및 해당 체계 및 플랫폼 연동 규격 정보를 설치하고, 설치된 정보에 따라 연동 대상 체계 및 플랫폼과의 통신 연동을 수행하는 통신 연동 처리부; 및
상기 사용자 기반, 체계 및 플랫폼 정보 기반 운영 화면을 전시하고, 상기 통신 연동 처리부를 통해 해당 체계 및 플랫폼과의 통신 정보를 전시하는 전시부를 포함하는 것인 유, 무인 복합체계를 위한 통합 운영자 인터페이스 시스템.
According to claim 1,
The operator terminal,
an input processing unit for inputting the operator terminal information, interworking target system and platform information according to the operator's selection;
The input operator terminal information, the interworking target system and platform information are sequentially transmitted to the server, and the user base and system and platform information-based operation screen configuration information transmitted from the server, the system and platform communication interworking software module, and the corresponding Interworking processing unit for receiving system and platform interworking standard information;
an interlocking interface processing unit configured to configure user-based, system, and platform information-based operation screens based on user-based, system, and platform information-based operation screen configuration information received from the interworking processing unit and displayed in the exhibition unit;
a communication interworking processing unit for installing a corresponding system and platform communication interworking software module received from the interworking processing unit, and corresponding system and platform interworking standard information, and performing communication interworking with an interworking target system and platform according to the installed information; and
An integrated operator interface system for an unmanned complex system that displays the user-based, system, and platform information-based operation screen, and includes a display unit for displaying communication information with the system and platform through the communication interworking processing unit.
 제2항에 있어서,
상기 운영자 단말 정보는, 운영자 단말의 종류, 운영자 단말의 사이즈, 해상도 정보 중 적어도 하나의 정보를 포함하는 것인 유, 무인 복합체계를 위한 통합 운영자 인터페이스 시스템.
3. The method of claim 2,
The operator terminal information, the type of operator terminal, the size of the operator terminal, the integrated operator interface system for an unmanned complex system that includes at least one information of resolution information.
 삭제delete 제1항에 있어서,
상기 데이터베이스에 저장되는 다수의 체계 및 플랫폼 정보 기반 운영 화면 구성 정보는,
지상 무인체계 A 플랫폼 UI 환경 설정정보, 지상 무인체계 표준 UI 환경 설정 정보, 공중 무인체계 A 플랫폼 UI 환경 설정 정보, 공중 무인체계 표준 UI 환경 설정 정보 중 사용자가 선택한 체계 및 플랫폼에 대응하는 정보 중 적어도 하나 이상을 포함하는 것인 유, 무인 복합체계를 위한 통합 운영자 인터페이스 시스템.
According to claim 1,
A plurality of system and platform information-based operating screen configuration information stored in the database,
At least among the ground unmanned system A platform UI environment setting information, the ground unmanned system standard UI environment setting information, the aerial unmanned system A platform UI environment setting information, and the aerial unmanned system standard UI environment setting information, the information corresponding to the system and platform selected by the user An integrated operator interface system for an unmanned complex system comprising one or more.
 제5항에 있어서,
상기 데이터베이스에 저장되는 다수의 체계 및 플랫폼 정보 기반 운영 화면 구성 정보는,
상기 운영자가 지휘관일 경우, 작전지역 상황도 정보, 소속된 운영병의 플랫폼 영상 채널 정보, 상급부대 전문/투명도 작성 정보, 소속된 운영병 플랫폼 정보, 임무 계획 작성/하달 정보, 및 화면 잠금/경고 알림 정보를 더 포함하고,
상기 운영자가 운영병일 경우에는, 플랫폼 영상 채널 정보, 작전지역 상황도 미니 맵 정보, 플랫폼 정보/제어 정보 및 임무실행/통제 정보를 더 포함하는 것인 유, 무인 복합체계를 위한 통합 운영자 인터페이스 시스템.
6. The method of claim 5,
A plurality of system and platform information-based operating screen configuration information stored in the database,
If the operator is a commander, the operation area status map information, the platform video channel information of the operator to which he belongs, information on the specialization/transparency of the senior unit, information on the platform of the operator to which he belongs, information on writing/delivering the mission plan, and screen lock/warning further include notification information;
When the operator is an operating soldier, the integrated operator interface system for a manned and unmanned complex system that further includes platform video channel information, operation area situation map mini map information, platform information/control information, and mission execution/control information.
 제5항에 있어서,
상기 체계 및 플랫폼 정보 기반 운영화면의 구성 정보는,
체계 그룹 정보, 플랫폼 수량에 따른 플랫폼 필수/보조 정보, 메인/서브 화면 레이아웃 설정 정보, 화면 잠금/알람 정보 중 적어도 하나를 포함하는 것인 유, 무인 복합체계를 위한 통합 운영자 인터페이스 시스템.
6. The method of claim 5,
The configuration information of the operating screen based on the system and platform information is,
An integrated operator interface system for an unmanned complex system that includes at least one of system group information, platform essential/auxiliary information according to platform quantity, main/sub screen layout setting information, and screen lock/alarm information.
 제5항에 있어서,
상기 다수의 체계 및 플랫폼과의 통신 연동 소프트웨어 모듈은, TCP, UDP, DDS(ROS 기반), Serial 통신 인터페이스 정보 중 적어도 하나를 포함하는 것인 유, 무인 복합체계를 위한 통합 운영자 인터페이스 시스템.
6. The method of claim 5,
The communication interworking software module with the plurality of systems and platforms includes at least one of TCP, UDP, DDS (ROS-based), and Serial communication interface information. An integrated operator interface system for an unmanned complex system.
 제5항에 있어서,
상기 다수의 체계 및 플랫폼 연동 규격 정보는,
지상 무인체계 A 플랫폼 연동규격 정보, 지상 무인체계 표준 연동규격 정보, 공중 무인체계 A 플랫폼 연동규격 정보, 공중 무인체계 표준 연동규격 정보 중 적어도 하나를 포함하는 것인 유, 무인 복합체계를 위한 통합 운영자 인터페이스 시스템.
6. The method of claim 5,
The plurality of system and platform interworking standard information,
An integrated operator for an unmanned complex system that includes at least one of ground unmanned system A platform interlocking specification information, ground unmanned system standard interlocking specification information, aerial unmanned system A platform interlocking specification information, and aerial unmanned system standard interlocking specification information interface system.
 제9항에 있어서,
상기 플랫폼 UI 환경 설정 정보는, 지상 무인체계 A 플랫폼 UI 환경 설정정보, 지상 무인체계 표준 UI 환경 설정 정보, 공중 무인체계 A 플랫폼 UI 환경 설정 정보, 공중 무인체계 표준 UI 환경 설정 정보 중 적어도 하나를 포함하는 것인 유, 무인 복합체계를 위한 통합 운영자 인터페이스 시스템.
10. The method of claim 9,
The platform UI environment setting information includes at least one of ground unmanned system A platform UI environment setting information, ground unmanned system standard UI environment setting information, aerial unmanned system A platform UI environment setting information, and aerial unmanned system standard UI environment setting information An integrated operator interface system for an unmanned complex system.
 유, 무인 복합체계를 위한 통합 운영자 인터페이스 방법에 있어서,
운영자 단말에서, 서버와 접속하여 운영자 단말 정보 및 연동하고자 하는 체계 및 플랫폼 정보를 서버로 전송하고, 서버로부터 운영자 및 운영자 단말 정보, 체계 및 플랫폼 정보에 대응하는 사용자 기반 및 체계 및 플랫폼 정보 기반 운영 화면 구성 정보와, 해당 체계 및 플랫폼 통신 연동 소프트웨어 모듈, 및 해당 체계 및 플랫폼 연동 규격 정보를 수신하여 화면에 전시하는 단계; 및
서버에서, 상기 운영자 단말로부터 수신되는 운영자 단말 정보 및 연동하고자 하는 체계 및 플랫폼 정보에 따라 운영자 및 운영자 단말 정보, 체계 및 플랫폼 정보에 대응하는 사용자 기반 및 체계 및 플랫폼 정보 기반 운영 화면 구성 정보와, 해당 체계 및 플랫폼 통신 연동 소프트웨어 모듈, 및 해당 체계 및 플랫폼 연동 규격 정보를 획득하여 순차적으로 운영자 단말로 전송하는 단계를 포함하고,
상기 운영자 단말로 전송하는 단계는,
다수의 운영자 및 운영자 단말 정보, 운영자 및 운영자 단말 정보에 따른 운영 화면 구성 정보, 다수의 체계 및 플랫폼 정보 기반 운영 화면 구성 정보, 다수의 체계 및 플랫폼과의 통신 연동 소프트웨어 모듈, 다수의 체계 및 플랫폼 연동 규격 정보를 데이터베이스에 저장하는 단계; 및
상기 운영자 단말의 로그인 정보를 이용하여 운영자 정보를 획득하고, 운영자 정보를 저장하며, 상기 획득한 운영자 정보 및 수신되는 운영자 단말 정보, 및 연동 대상 체계 및 플랫폼 정보 기반 운영 화면 구성 정보(UI 환경 설정 정보)를 각각 획득하여 운영자 단말로 전송하고, 운영자 단말로부터 수신되는 연동 대상 체계 및 플랫폼 정보에 따른 해당 체계 및 플랫폼 통신 연동 소프트웨어 모듈, 및 해당 체계 및 플랫폼 연동 규격 정보를 획득하여 상기 운영자 단말로 전송하는 단계를 포함하는 것인 유, 무인 복합체계를 위한 통합 운영자 인터페이스 방법.
In an integrated operator interface method for an unmanned complex system,
The operator terminal connects to the server and transmits operator terminal information and system and platform information to be interlocked to the server, and user base and system and platform information based operation screen corresponding to operator and operator terminal information, system and platform information from the server receiving configuration information, a corresponding system and platform communication interworking software module, and a corresponding system and platform interworking standard information and displaying the information on a screen; and
In the server, according to the operator terminal information received from the operator terminal and the system and platform information to be linked, the user base and system and platform information corresponding to the operator and operator terminal information, the system and platform information, and the system and platform information based operation screen configuration information, and the corresponding Acquiring the system and platform communication interworking software module, and the corresponding system and platform interworking standard information and sequentially transmitting it to the operator terminal,
The step of transmitting to the operator terminal,
Multiple operator and operator terminal information, operation screen configuration information according to operator and operator terminal information, operation screen configuration information based on multiple system and platform information, communication interworking software module with multiple systems and platforms, and multiple systems and platforms interworking storing standard information in a database; and
Obtaining operator information using the login information of the operator terminal, storing operator information, and operating screen configuration information based on the obtained operator information and received operator terminal information, and interworking target system and platform information (UI environment setting information) ) obtained and transmitted to the operator terminal, and the corresponding system and platform communication interworking software module according to the interworking target system and platform information received from the operator terminal, and the corresponding system and platform interworking standard information are obtained and transmitted to the operator terminal An integrated operator interface method for an unmanned complex system, comprising the steps of:
 제11항에 있어서,
상기 화면에 전시하는 단계는,
운영자의 선택에 따라 상기 운영자 단말 정보, 연동 대상 체계 및 플랫폼 정보를 입력하는 단계;
입력되는 운영자 단말 정보, 연동 대상 체계 및 플랫폼 정보를 순차적으로 상기 서버로 전송하고, 서버로부터 전송되는 사용자 기반 및 체계 및 플랫폼 정보 기반 운영 화면 구성 정보와, 해당 체계 및 플랫폼 통신 연동 소프트웨어 모듈, 및 해당 체계 및 플랫폼 연동 규격 정보를 수신하는 단계;
상기 서버로부터 수신되는 사용자 기반 및 체계 및 플랫폼 정보 기반 운영 화면 구성 정보를 기반으로 사용자 기반, 체계 및 플랫폼 정보 기반 운영 화면을 구성하여 전시부에 전시하는 단계;
상기 서버로부터 수신되는 해당 체계 및 플랫폼 통신 연동 소프트웨어 모듈, 및 해당 체계 및 플랫폼 연동 규격 정보를 설치하고, 설치된 정보에 따라 연동 대상 체계 및 플랫폼과의 통신 연동을 수행하는 단계; 및
상기 사용자 기반, 체계 및 플랫폼 정보 기반 운영 화면을 전시하고, 통신 연동 처리부를 통해 해당 체계 및 플랫폼과의 통신 정보를 전시하는 단계를 포함하는 것인 유, 무인 복합체계를 위한 통합 운영자 인터페이스 방법.
12. The method of claim 11,
The step of displaying on the screen is,
inputting the operator terminal information, interworking target system and platform information according to the operator's selection;
The input operator terminal information, the interworking target system and platform information are sequentially transmitted to the server, and the user base and system and platform information-based operation screen configuration information transmitted from the server, the system and platform communication interworking software module, and the corresponding receiving system and platform interworking standard information;
composing a user-based, system- and platform-information-based operation screen based on user-based, system, and platform information-based operation screen configuration information received from the server and displaying it in an exhibition unit;
installing the system and platform communication interworking software module received from the server, and the system and platform interworking standard information, and performing communication interworking with the interworking target system and platform according to the installed information; and
and displaying the user-based, system, and platform information-based operation screen, and displaying communication information with the corresponding system and platform through a communication interworking processing unit.
 제12항에 있어서,
상기 운영자 단말 정보는, 운영자 단말의 종류, 운영자 단말의 사이즈, 해상도 정보 중 적어도 하나의 정보를 포함하는 것인 유, 무인 복합체계를 위한 통합 운영자 인터페이스 방법.
13. The method of claim 12,
The operator terminal information, the type of operator terminal, the size of the operator terminal, the integrated operator interface method for an unmanned complex system that includes at least one of information, resolution information.
 삭제delete 제11항에 있어서,
상기 데이터베이스에 저장되는 다수의 체계 및 플랫폼 정보 기반 운영 화면 구성 정보는,
지상 무인체계 A 플랫폼 UI 환경 설정정보, 지상 무인체계 표준 UI 환경 설정 정보, 공중 무인체계 A 플랫폼 UI 환경 설정 정보, 공중 무인체계 표준 UI 환경 설정 정보 중 사용자가 선택한 체계 및 플랫폼에 대응하는 정보 중 적어도 하나 이상을 포함하는 것인 유, 무인 복합체계를 위한 통합 운영자 인터페이스 방법.
12. The method of claim 11,
A plurality of system and platform information-based operating screen configuration information stored in the database,
At least among the ground unmanned system A platform UI environment setting information, the ground unmanned system standard UI environment setting information, the aerial unmanned system A platform UI environment setting information, and the aerial unmanned system standard UI environment setting information, the information corresponding to the system and platform selected by the user An integrated operator interface method for an unmanned complex system comprising one or more.
 제15항에 있어서,
상기 데이터베이스에 저장되는 다수의 체계 및 플랫폼 정보 기반 운영 화면 구성 정보는,
상기 운영자가 지휘관일 경우, 작전지역 상황도 정보, 소속된 운영병의 플랫폼 영상 채널 정보, 상급부대 전문/투명도 작성 정보, 소속된 운영병 플랫폼 정보, 임무 계획 작성/하달 정보, 및 화면 잠금/경고 알림 정보를 더 포함하고,
상기 운영자가 운영병일 경우에는, 플랫폼 영상 채널 정보, 작전지역 상황도 미니 맵 정보, 플랫폼 정보/제어 정보 및 임무실행/통제 정보를 더 포함하는 것인 유, 무인 복합체계를 위한 통합 운영자 인터페이스방법.
16. The method of claim 15,
A plurality of system and platform information-based operating screen configuration information stored in the database,
If the operator is a commander, the operation area status map information, the platform video channel information of the operator to which he belongs, information on the specialization/transparency of the senior unit, information on the platform of the operator to which he belongs, information on writing/delivering the mission plan, and screen lock/warning further include notification information;
In case the operator is an operator, the integrated operator interface method for a manned and unmanned complex system that further includes platform video channel information, operation area situation map mini map information, platform information/control information, and mission execution/control information.
 제15항에 있어서,
상기 체계 및 플랫폼 정보 기반 운영화면 구성 정보는,
체계 그룹 정보, 플랫폼 수량에 따른 플랫폼 필수/보조 정보, 메인/서브 화면 레이아웃 설정 정보, 화면 잠금/알람 정보 중 적어도 하나를 포함하는 것인 유, 무인 복합체계를 위한 통합 운영자 인터페이스 방법.
16. The method of claim 15,
The system and platform information-based operating screen configuration information,
An integrated operator interface method for an unmanned complex system that includes at least one of system group information, platform essential/auxiliary information according to platform quantity, main/sub screen layout setting information, and screen lock/alarm information.
 제15항에 있어서,
상기 다수의 체계 및 플랫폼과의 통신 연동 소프트웨어 모듈은, TCP, UDP, DDS(ROS 기반), Serial 통신 인터페이스 정보 중 적어도 하나를 포함하는 것인 유, 무인 복합체계를 위한 통합 운영자 인터페이스 방법.
16. The method of claim 15,
The communication interworking software module with the plurality of systems and platforms includes at least one of TCP, UDP, DDS (ROS-based), and Serial communication interface information. An integrated operator interface method for an unmanned complex system.
 제15항에 있어서,
상기 다수의 체계 및 플랫폼 연동 규격 정보는,
지상 무인체계 A 플랫폼 연동규격 정보, 지상 무인체계 표준 연동규격 정보, 공중 무인체계 A 플랫폼 연동규격 정보, 공중 무인체계 표준 연동규격 정보 중 적어도 하나를 포함하는 것인 유, 무인 복합체계를 위한 통합 운영자 인터페이스 방법.
16. The method of claim 15,
The plurality of system and platform interworking standard information,
An integrated operator for an unmanned complex system that includes at least one of ground unmanned system A platform interlocking specification information, ground unmanned system standard interlocking specification information, aerial unmanned system A platform interlocking specification information, and aerial unmanned system standard interlocking specification information interface method.
 제19항에 있어서,
상기 플랫폼 UI 환경 설정 정보는, 지상 무인체계 A 플랫폼 UI 환경 설정정보, 지상 무인체계 표준 UI 환경 설정 정보, 공중 무인체계 A 플랫폼 UI 환경 설정 정보, 공중 무인체계 표준 UI 환경 설정 정보 중 적어도 하나를 포함하는 것인 유, 무인 복합체계를 위한 통합 운영자 인터페이스 방법. 20. The method of claim 19,
The platform UI environment setting information includes at least one of ground unmanned system A platform UI environment setting information, ground unmanned system standard UI environment setting information, aerial unmanned system A platform UI environment setting information, and aerial unmanned system standard UI environment setting information An integrated operator interface method for an unmanned complex system.
KR1020220061363A 2022-05-19 2022-05-19 Integrated operator interface system and method for unmanned complex system KR102436523B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020220061363A KR102436523B1 (en) 2022-05-19 2022-05-19 Integrated operator interface system and method for unmanned complex system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020220061363A KR102436523B1 (en) 2022-05-19 2022-05-19 Integrated operator interface system and method for unmanned complex system

Publications (1)

Publication Number Publication Date
KR102436523B1 true KR102436523B1 (en) 2022-08-25

Family

ID=83111230

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020220061363A KR102436523B1 (en) 2022-05-19 2022-05-19 Integrated operator interface system and method for unmanned complex system

Country Status (1)

Country Link
KR (1) KR102436523B1 (en)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100855698B1 (en) * 2006-10-04 2008-09-03 에스케이 텔레콤주식회사 Graphic interface change system and method
KR20130000045A (en) * 2011-06-22 2013-01-02 김강수 Cloud computing-based app implementing system using distributed multi-mobile terminal
KR20180013038A (en) * 2016-07-28 2018-02-07 삼성전자주식회사 Device and method for generatign gui for controlling external device
KR20180089693A (en) * 2017-02-01 2018-08-09 국방과학연구소 Method for reconfigurating a node which is a tactical control apparatus based on virtual computing and data centric architecture
KR102000287B1 (en) * 2016-10-18 2019-07-16 에스이테크주식회사 System for providing adapted menu by user

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100855698B1 (en) * 2006-10-04 2008-09-03 에스케이 텔레콤주식회사 Graphic interface change system and method
KR20130000045A (en) * 2011-06-22 2013-01-02 김강수 Cloud computing-based app implementing system using distributed multi-mobile terminal
KR20180013038A (en) * 2016-07-28 2018-02-07 삼성전자주식회사 Device and method for generatign gui for controlling external device
KR102000287B1 (en) * 2016-10-18 2019-07-16 에스이테크주식회사 System for providing adapted menu by user
KR20180089693A (en) * 2017-02-01 2018-08-09 국방과학연구소 Method for reconfigurating a node which is a tactical control apparatus based on virtual computing and data centric architecture

Similar Documents

Publication Publication Date Title
US7302558B2 (en) Systems and methods to facilitate the creation and configuration management of computing systems
US7743120B2 (en) Information processing method and information processing apparatus
US11087633B2 (en) Simulation server capable of interacting with a plurality of simulators to perform a plurality of simulations
US20110088026A1 (en) Mobile device application update management
CN104115087A (en) Avionics gateway interface, systems and methods
KR20170015968A (en) High-speed application for installation on mobile devices for permitting remote configuration of such mobile devices
US11327724B2 (en) System and method that support application software development
US11704288B2 (en) Aircraft computer file distribution system, assembly and method
CN101662463A (en) Device and method for customizing service flow for user
CN112256348A (en) Cloud service platform creation method and system, electronic equipment and storage medium
KR102436523B1 (en) Integrated operator interface system and method for unmanned complex system
JP5070286B2 (en) Customizing space in a network environment
CN110362371A (en) Control method and system, the computer equipment and readable medium of view level
US20070088840A1 (en) Methods and arrangements for managing and maintaining a switch environment
CN109960505B (en) User interface component plug-in method, system, equipment and storage medium
KR20150078033A (en) Apparatus and method for performing an application
CN110868471A (en) Novel equipment construction method and device and storage medium
CN115220869A (en) Resource allocation method, device, equipment and medium
KR20190102666A (en) Management system for unmanned aerial vehicle using mission profile and management method therefor
US20160293047A1 (en) Simulator for generating and exchanging simulation data for interacting with a portable computing device
CN112073505B (en) Method for unloading on cloud server, control device and storage medium
CN114296833A (en) Business interface component configuration method and device, equipment and medium thereof
KR102075204B1 (en) SW Framework Support Method for Open IPMI and DCMI Development
JP7473767B1 (en) Printing and Information Processing Systems
Briggs et al. Interoperability framework

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant