KR20190101579A - Reconfigurable Video System for Multi-Channel Ultra High Definition Video Processing - Google Patents

Reconfigurable Video System for Multi-Channel Ultra High Definition Video Processing Download PDF

Info

Publication number
KR20190101579A
KR20190101579A KR1020180021728A KR20180021728A KR20190101579A KR 20190101579 A KR20190101579 A KR 20190101579A KR 1020180021728 A KR1020180021728 A KR 1020180021728A KR 20180021728 A KR20180021728 A KR 20180021728A KR 20190101579 A KR20190101579 A KR 20190101579A
Authority
KR
South Korea
Prior art keywords
uhd
board
image
image processing
controller
Prior art date
Application number
KR1020180021728A
Other languages
Korean (ko)
Inventor
이상설
장성준
김제우
Original Assignee
전자부품연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 전자부품연구원 filed Critical 전자부품연구원
Priority to PCT/KR2018/002242 priority Critical patent/WO2019164034A1/en
Priority to KR1020180021728A priority patent/KR20190101579A/en
Publication of KR20190101579A publication Critical patent/KR20190101579A/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/443—OS processes, e.g. booting an STB, implementing a Java virtual machine in an STB or power management in an STB
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/91—Television signal processing therefor
    • H04N5/917—Television signal processing therefor for bandwidth reduction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/87—Regeneration of colour television signals

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Software Systems (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

Provided is an image system capable of processing/compressing/restoring of an image based on multi-board/multi-core as a method for encoding and decoding multichannel UHD image in real time. According to an embodiment of the present invention, an UHD image processing system comprises: a first board; a second board connected to be communicable with the first board; at least one image processing hardware provided in the first board and processing an UHD image; and at least one image processing hardware provided in the second board and processing the UHD image. Accordingly, by processing/compressing/restoring of an image based on multi-board/multi-core, a multichannel UHD image may be encoded and decoded in real time.

Description

초고해상도 다채널 영상처리를 위한 재구성 가능한 영상 시스템{Reconfigurable Video System for Multi-Channel Ultra High Definition Video Processing}Reconfigurable Video System for Multi-Channel Ultra High Definition Video Processing

본 발명은 디지털 실감방송 기술에 관한 것으로, 더욱 상세하게는 입력되는 다채널 UHD급 영상을 실시간으로 부호화 및 복호화를 하기 위한 데이터처리/압축/복원을 위한 영상 시스템에 관한 것이다.The present invention relates to digital sensory broadcasting technology, and more particularly, to a video system for data processing / compression / restore for encoding and decoding an input multi-channel UHD video in real time.

초고해상도인 UHD급 이상의 다채널 영상을 실시간으로 압축 및 복원을 하기 위한 시스템은 없다. 특히, UHD급 이상의 영상을 4채널 이상 압축하기 기술은 아직까지 없는 상태이다.There is no system for compressing and reconstructing multi-channel video over ultra high resolution UHD. In particular, there is no technology to compress more than 4 channels of UHD-grade video yet.

4K급 이상의 다채널 영상을 처리하기 위해서는 초스피드(800MHz 이상)의 빠른 클럭을 사용하여야 하는데, 단일 FPGA 및 단일 SoC에서는 불가능함이 그 원인이다.In order to process 4K or higher multi-channel video, it is necessary to use a super-speed (800MHz or faster) fast clock, which is impossible in a single FPGA and a single SoC.

이에 따라, UHD급 이상의 다채널 영상을 실시간으로 처리, 압축 및 복원을 하기 위한 시스템의 구현이 요청된다.Accordingly, the implementation of a system for processing, compressing and reconstructing multi-channel video of UHD level or higher in real time is required.

본 발명은 상기와 같은 문제점을 해결하기 위하여 안출된 것으로서, 본 발명의 목적은, 다채널 UHD급 영상을 실시간으로 부호화 및 복호화를 하기 위한 방안으로, 멀티 보드/멀티 코어 기반 영상 처리/압축/복원이 가능한 영상 시스템을 제공함에 있다.The present invention has been made to solve the above problems, an object of the present invention, a method for encoding and decoding multi-channel UHD video in real time, multi-board / multi-core based image processing / compression / restoration This is in providing a possible imaging system.

상기 목적을 달성하기 위한 본 발명의 일 실시예에 따른, UHD 영상 처리 시스템은 제1 보드; 제1 보드와 통신 가능하도록 연결된 제2 보드; 제1 보드에 마련되어, UHD 영상을 처리하는 적어도 하나의 영상처리 하드웨어들; 및 제2 보드에 마련되어, UHD 영상을 처리하는 적어도 하나의 영상처리 하드웨어들;을 포함한다. According to an embodiment of the present invention, a UHD image processing system includes: a first board; A second board connected to communicate with the first board; At least one image processing hardware provided on the first board to process the UHD image; And at least one image processing hardware provided on the second board to process the UHD image.

영상처리 하드웨어들은, 다채널의 UHD 영상들을 하나씩 각각 처리할 수 있다. The image processing hardware may process multichannel UHD images one by one.

영상처리 하드웨어는, 압축할 UHD 영상을 입력받는 제1 컨트롤러; 복원할 UHD 영상을 입력받는 제2 컨트롤러; 및 제1 컨트롤러를 통해 입력된 UHD 영상을 압축하고, 제2 컨트롤러를 통해 입력된 UHD 영상을 복원하는 프로세서;를 포함할 수 있다. The image processing hardware may include: a first controller configured to receive a UHD image to be compressed; A second controller configured to receive a UHD image to be restored; And a processor configured to compress the UHD image input through the first controller and to restore the UHD image input through the second controller.

본 발명에 따른 UHD 영상 처리 시스템은 제1 컨트롤러, 제2 컨트롤러 및 프로세서 간의 UHD 영상을 전달을 제어하는 제3 컨트롤러;를 더 포함할 수 있다. UHD image processing system according to the present invention may further include a third controller for controlling the transfer of the UHD image between the first controller, the second controller and the processor.

영상처리 하드웨어는, UHD 영상의 녹화와 재생을 수행하는 것일 수 있다. The image processing hardware may be to perform recording and reproduction of a UHD image.

영상처리 하드웨어는, UHD 영상의 채널 운용을 위한 제어 기능을 수행하는 것일 수 있다. The image processing hardware may be to perform a control function for channel operation of the UHD image.

영상처리 하드웨어는, 제3 컨트롤러의 설정을 위한 기능을 수행하는 것일 수 있다. The image processing hardware may be to perform a function for setting of the third controller.

한편, 본 발명의 다른 실시예에 따른, UHD 영상 처리 방법은 제1 보드에 마련된 적어도 하나의 영상처리 하드웨어들이, UHD 영상을 각각 처리하는 단계; 및 제1 보드와 통신 가능하도록 연결된 제2 보드에 마련된 적어도 하나의 영상처리 하드웨어들이 UHD 영상을 처리하는 단계;를 포함한다. On the other hand, according to another embodiment of the present invention, the UHD image processing method comprises the steps of at least one image processing hardware provided on the first board, each processing a UHD image; And processing UHD images by at least one image processing hardware provided on a second board connected to communicate with the first board.

이상 설명한 바와 같이, 본 발명의 실시예들에 따르면, 멀티 보드/멀티 코어 기반 영상 처리/압축/복원을 통해, 다채널 UHD급 영상을 실시간으로 부호화 및 복호화할 수 있게 된다.As described above, according to the embodiments of the present invention, multi-channel / multi-core based image processing / compression / reconstruction may enable encoding and decoding of multi-channel UHD video in real time.

특히, 본 발명의 실시예들에 따르면, 동기화를 위한 하드웨어 구조를 적용함으로써, 단일 서버에 의해서도 고성능의 LSM(Live Slow Mmtion) 구현을 가능하게 한다.In particular, according to embodiments of the present invention, by applying a hardware structure for synchronization, it is possible to implement high performance Live Slow MSM (LSM) even by a single server.

도 1은 UHD 영상 녹화/재생용 하드웨어의 블록도,
도 2는 본 발명의 일 실시예에 따른 멀티 보드/멀티 코어 기반 UHD 영상 녹화/재생용 시스템의 하드웨어 블록도,
도 3은 다채널 UHD 영상 녹화/재생용 시스템의 소프트웨어 아키텍처를 도시한 도면,
도 4는 녹화/재생 D/D 인터페이스의 설명에 제공되는 도면,
도 5는 D/D 프레임워크 모듈의 설명에 제공되는 도면, 그리고,
도 6은 H/W 장치 제어 인터페이스의 설명에 제공되는 도면이다.1 is a block diagram of hardware for UHD video recording / playback;
2 is a hardware block diagram of a system for recording / reproducing multi-board / multi-core based UHD video according to an embodiment of the present invention;
3 shows a software architecture of a system for multichannel UHD video recording / playback;
4 is a view provided for explaining a recording / playback D / D interface;
5 is a view provided to explain the D / D framework module, and
6 is a diagram provided to explain the H / W device control interface.

이하에서는 도면을 참조하여 본 발명을 보다 상세하게 설명한다.Hereinafter, with reference to the drawings will be described the present invention in more detail.

본 발명의 실시예에서는, 입력되는 다채널 UHD(Ultra High Definition)급 영상을 실시간으로 부호화 및 복호화를 하기 위한 영상 처리/압축/복원을 위한 영상 시스템을 제시한다.An embodiment of the present invention provides an image system for image processing / compression / reconstruction for encoding and decoding an input multi-channel ultra high definition (UHD) image in real time.

향후 방송 및 엔터테이먼트 시스템에서, 다채널의 FHD(Full High Definition)급 영상부터 UHD급 영상의 편집 및 후처리를 위해서는, 다수의 입력 영상 데이터의 압축 진행시 60프레임 이상의 실시간으로 동기화된 영상 압축을 필요로 한다.In the future broadcasting and entertainment systems, for editing and post-processing multi-channel full high definition (FHD) video to UHD video, video compression is synchronized in real time over 60 frames when compression of a plurality of input image data is performed. need.

이에, 본 발명의 실시예에서는 고속 처리가 가능한 병렬 연산을 위한 멀티 보드/멀티 코어 기반의 코덱을 실시간 동기 압축 및 동기 복원을 할 수 있는 구조로 제시한다.Accordingly, an embodiment of the present invention proposes a multi-board / multi-core based codec for parallel processing capable of high speed processing in a structure capable of real-time synchronous compression and synchronization recovery.

도 1은 UHD 영상 녹화/재생용 하드웨어의 블록도이다. 도 1에 도시된 UHD 영상 녹화/재생용 하드웨어(100)는 1채널의 UHD 영상을 처리하기 위한 것이다.1 is a block diagram of hardware for UHD video recording / playback. The UHD video recording / reproducing hardware 100 shown in FIG. 1 is for processing UHD video of one channel.

UHD 영상 녹화/재생용 하드웨어(100)는, 도 1에 도시된 바와 같이, UHD 영상 녹화/재생용 보드(10)에 구비되며, SDI 컨트롤러(110), 메인 IP(120), 메인 컨트롤러(130), DDR3 메모리 컨트롤러(140) 및 PCIe3 컨트롤러(150)를 포함한다.As shown in FIG. 1, the UHD video recording / playback hardware 100 is provided on the UHD video recording / playback board 10, and includes an SDI controller 110, a main IP 120, and a main controller 130. ), A DDR3 memory controller 140 and a PCIe3 controller 150.

UHD 영상 녹화/재생용 보드(10)에는, 영상 녹화/재생용 하드웨어(100) 외에도, SDI EQ(10-1)와 DDR3 메모리들(10-2,10-3)을 포함한다.The UHD video recording / playback board 10 includes, in addition to the video recording / playback hardware 100, an SDI EQ 10-1 and DDR3 memories 10-2 and 10-3.

SDI EQ(10-1)는 카메라 등의 영상 소스로부터 UHD 영상을 입력받기 위한 인터페이스이다. DDR3 메모리들(10-2,10-3)은 압축할/복원할 UHD 영상을 임시 저장하는 버퍼로 기능한다.The SDI EQ 10-1 is an interface for receiving a UHD image from an image source such as a camera. DDR3 memories 10-2 and 10-3 function as buffers to temporarily store UHD images to be compressed / restored.

SDI 컨트롤러(110)는 SDI EQ(10-1)를 통해 입력되는 UHD 영상을 입력받기 위한 UHD 영상 녹화/재생용 하드웨어(100)의 내부 인터페이스이다.The SDI controller 110 is an internal interface of the UHD video recording / reproducing hardware 100 for receiving a UHD video input through the SDI EQ 10-1.

PCIe 컨트롤러(150)는 UHD 영상이 저장되는 서버와 영상 데이터를 송수신하기 위한 UHD 영상 녹화/재생용 하드웨어(100)의 내부 인터페이스이다. UHD 영상 녹화/재생용 하드웨어(100)와 서버 간의 안정적인 스트림 데이터 전송을 위해서는 PCI express Gen3 이상이 필요하다.The PCIe controller 150 is an internal interface of the UHD image recording / reproducing hardware 100 for transmitting and receiving image data to and from a server storing UHD images. PCI express Gen3 or higher is required for stable stream data transmission between the UHD video recording / playback hardware 100 and the server.

메인 IP(120)는 SDI 컨트롤러(110)를 통해 입력되는 UHD 영상을 압축하고 PCIe3 컨트롤러(150)를 통해 서버로부터 수신하는 UHD 영상을 복원하기 위한 코덱 기능과 영상 처리 기능을 수행한다.The main IP 120 compresses the UHD image input through the SDI controller 110 and performs a codec function and an image processing function to restore the UHD image received from the server through the PCIe3 controller 150.

메인 컨트롤러(130)는, SDI 컨트롤러(110)를 통해 입력되는 압축 대상이 되는 UHD 영상을 메인 IP(120)에 전달하고, PCIe3 컨트롤러(150)를 통해 입력되는 복원 대상이 되는 UHD 영상을 메인 IP(120)에 전달한다.The main controller 130 transmits the UHD image to be compressed, which is input through the SDI controller 110, to the main IP 120, and transmits the UHD image to be restored through the PCIe3 controller 150. Forward to 120.

DDR3 메모리 컨트롤러(150)는 DDR3 메모리들(10-2,10-3)의 UHD 영상 저장/인출 과정을 제어한다.The DDR3 memory controller 150 controls the UHD image storage / fetch process of the DDR3 memories 10-2 and 10-3.

도 2는 본 발명의 일 실시예에 따른 멀티 보드/멀티 코어 기반 UHD 영상 녹화/재생용 시스템의 하드웨어 블록도이다. 도시된 본 발명의 실시예에 따른 멀티 보드/멀티 코어 기반 UHD 영상 녹화/재생용 시스템은, 4채널의 UHD급 영상을 처리하기 위한 하드웨어 구성이다.2 is a hardware block diagram of a system for recording / reproducing multi-board / multi-core based UHD video according to an embodiment of the present invention. The multi-board / multi-core based UHD video recording / reproducing system according to the embodiment of the present invention is a hardware configuration for processing four-channel UHD video.

본 발명의 실시예에 따른 멀티 보드/멀티 코어 기반 다채널 UHD 영상 녹화/재생용 시스템은, 도 2에 도시된 바와 같이, 2개의 보드(11,12)가 PCIe 규격으로 연결되어 각보드(11,12) 간의 동기 및 처리 상황을 송수신하기 위한 GPIO(General Purpose Input/Output)를 지원한다.In the multi-board / multi-core based multi-channel UHD video recording / playback system according to an embodiment of the present invention, as shown in FIG. 2, two boards 11 and 12 are connected to each other by PCIe standard. (12) Supports General Purpose Input / Output (GPIO) for transmitting and receiving synchronization and processing status between.

2개의 보드(11,12)에는 각각 2개씩의 UHD 영상 녹화/재생용 하드웨어(101,102,103,104)가 구분되어 구비된다.Two boards 11 and 12 are provided with two UHD video recording / reproducing hardware 101, 102, 103 and 104, respectively.

본 발명의 실시예에 따른 멀티 보드/멀티 코어 기반 다채널 UHD 영상 녹화/재생용 시스템을 이용하여, 하나의 서버에서 180fps 이상의 LSM(Live Slow Motion)을 처리할 수 있다. LSM은 고속 카메라 촬영에서 실시간 데이터 압축/재생이 가능한 형태이다.By using a multi-board / multi-core based multi-channel UHD video recording / playback system according to an embodiment of the present invention, one server may process Live Slow Motion (LSM) of 180 fps or more. LSM is a type that enables real-time data compression and playback in high speed camera shooting.

본 발명의 실시예에 따른 멀티 보드/멀티 코어 기반 UHD 영상 녹화/재생용 시스템은 병렬 처리/제어가 가능하고, 서버와의 데이터 전송을 원활하게 해주는 디바이스 드라이버/인터페이스가 필요한데, 해당 인터페이스의 정보 및 각 인터페이스별 기능에 대해, 이하에서 상세히 설명한다.The multi-board / multi-core based UHD video recording / playback system according to an embodiment of the present invention requires a device driver / interface capable of parallel processing / control and smooth data transfer with a server. Functions for each interface will be described in detail below.

도 3은 다채널 UHD 영상 녹화/재생용 시스템의 소프트웨어 아키텍처를 도시한 도면이다. 도시된 바와 같이, 다채널 UHD 영상 녹화/재생용 D/D(200)에는, 녹화/재생 D/D 인터페이스(UHD Record/Playback D/D API)(210), D/D 프레임워크 모듈(Device Driver Framework Module)(220), H/W 장치 제어 인터페이스(UHD H/W Device Control API)(230), H/W 장치 제어 모듈(H/W Device Control Module)(240) 및 PCIe 장치 인터페이스(PCIe Device API)(250)를 포함한다.3 shows a software architecture of a system for multichannel UHD video recording / playback. As shown, the multi-channel UHD video recording / playback D / D 200, a recording / playback D / D interface (UHD Record / Playback D / D API) 210, D / D framework module (Device Driver Framework Module (220), H / W Device Control API (230), H / W Device Control Module (240), and PCIe Device Interface (PCIe) Device API) 250.

녹화/재생 D/D 인터페이스(210)는 녹화/재생 구동 API를 통해 최상위의 사용자 어플리케이션과 연동되며 컴포넌트 구동 방식에 따라 도 4의 표에 나타난 바와 같이 UHD Board API, UHD Capture API 및 UHD Playback API의 3가지 형태로 인터페이스가 구성된다.The recording / playback D / D interface 210 is interlocked with the top user application through the recording / playback driving API and according to the component driving method, as shown in the table of FIG. The interface consists of three types.

UHD Board API는 UHD Board 운용 및 녹화/재생 채널 운용에 관한 전반적인 제어 기능을 담당하는 인터페이스로서 Genlock 설정, 채널 정보 및 입력 신호 관리에 대한 기능이 포함된다.UHD Board API is an interface that controls overall operation of UHD Board and recording / playback channel operation. It includes functions for Genlock setting, channel information and input signal management.

UHD Capture API는 UHD 멀티채널 녹화 구동에 관한 기능을 운용하고, UHD Playback API는 UHD 멀티채널 재생 구동에 관한 기능을 운용한다.UHD Capture API operates the functions related to UHD multichannel recording driving, and UHD Playback API operates the functions related to UHD multichannel recording driving.

D/D 프레임워크 모듈(220)은 Windows 멀티미디어 프레임워크에 최적화된 기술인 마이크로소프트의 DirectShow 기술을 사용하여 구축 가능하다.The D / D framework module 220 can be built using Microsoft's DirectShow technology, a technology optimized for the Windows multimedia framework.

D/D 프레임워크 모듈(220)에 사용되는 컴포넌트는 동작 기능에 따라 도 5의 표에 제시된 바와 같이 3개의 컴포넌트로 구성되어 있으며, 각각의 컴포넌트는 Component Object Model 기반으로 구현할 수 있다.The components used in the D / D framework module 220 are composed of three components as shown in the table of FIG. 5 according to an operation function, and each component may be implemented based on a Component Object Model.

Capture & Playback Component는 Multimedia Framework의 UHD 녹화 및 재생 기능 구현(UHD 녹화 및 재생 기능에 대한 HW 제어 로직 구현)을 위한 것이다.The Capture & Playback Component is for implementing the UHD recording and playback functions of the Multimedia Framework (implementing HW control logic for the UHD recording and playback functions).

Reader & Writer Component는 Multimedia Framework의 파일 포맷 기능을 구현하기 위한 것이다.Reader & Writer Component is to implement file format function of Multimedia Framework.

Video Renderer Component는 Multimedia Framework의 비디오 렌더링 기능 구현(UHD 녹화 및 재생 Preview 비디오 랜더링 기술 구현)을 위한 것이다.The Video Renderer Component is for implementing the video rendering function of the Multimedia Framework (implementing UHD recording and playback preview video rendering technology).

H/W 장치 제어 인터페이스(230)는 HW 장치 운용 방식과 녹화 및 재생 기능 특성에 따라 도 6의 표에 제시된 바와 같이 4가지로 분류되며 각각의 인터페이스는 HW 장치 구동에 최적화하여 설계한다.The H / W device control interface 230 is classified into four types as shown in the table of FIG. 6 according to the HW device operation method and recording and playback function characteristics, and each interface is designed to be optimized for driving the HW device.

UHD Device Driver API는 UHD Board 운용을 위한 PCIe 장치 드라이버 관련 기능(PCIe Driver 설정 및 해제, 장치 관련 정보)을 위한 것이다.UHD Device Driver API is for PCIe device driver related functions (PCIe Driver setting and release, device related information) for UHD Board operation.

UHD Device Board API는 UHD Board의 녹화/재생 채널 운용 및 데이터 인터페이스(Interrupt 관련, Buffer 관리 등) 관련 기능을 위한 것이다.UHD Device Board API is for UHD Board recording / playback channel operation and data interface (interrupt related, buffer management, etc.) related functions.

UHD Device Capture API는 UHD 멀티채널 녹화를 위한 HW 제어 기능 구현(PCIe 장치 드라이버 기반 데이터 획득 및 버퍼 제어 기능)을 위한 것이다.The UHD Device Capture API is for implementing HW control (PCIe device driver-based data acquisition and buffer control) for UHD multichannel recording.

UHD Device Playback API는 UHD 멀티채널 재생을 위한 HW 제어 기능 구현(PCIe 장치 드라이버 기반 데이터 전송 및 버퍼 제어 기능)을 위한 것이다.The UHD Device Playback API is for implementing HW control functions (PCIe device driver-based data transmission and buffer control functions) for UHD multichannel playback.

지금까지, 초고해상도 다채널 영상처리를 위한 재구성 가능한 영상 시스템에 대해 바람직한 실시예를 들어 상세히 설명하였다.So far, a preferred embodiment of a reconfigurable imaging system for ultra-high resolution multichannel image processing has been described in detail.

본 발명의 실시예들에서는, 멀티 보드/멀티 코어 기반 영상 처리/압축/복원을 통해, 다채널 UHD급 영상을 실시간으로 부호화 및 복호화할 수 있는 방안을 제시하였으며, 동기화를 위한 하드웨어 구조를 적용함으로써, 단일 서버에 의해서도 고성능의 LSM 구현을 가능하게 하였다.In the embodiments of the present invention, a method for encoding and decoding multi-channel UHD video in real time through multi-board / multi-core based image processing / compression / reconstruction has been proposed, and by applying a hardware structure for synchronization, In addition, high performance LSM can be implemented by a single server.

한편, 본 실시예에 따른 장치와 방법의 기능을 수행하게 하는 컴퓨터 프로그램을 수록한 컴퓨터로 읽을 수 있는 기록매체에도 본 발명의 기술적 사상이 적용될 수 있음은 물론이다. 또한, 본 발명의 다양한 실시예에 따른 기술적 사상은 컴퓨터로 읽을 수 있는 기록매체에 기록된 컴퓨터로 읽을 수 있는 코드 형태로 구현될 수도 있다. 컴퓨터로 읽을 수 있는 기록매체는 컴퓨터에 의해 읽을 수 있고 데이터를 저장할 수 있는 어떤 데이터 저장 장치이더라도 가능하다. 예를 들어, 컴퓨터로 읽을 수 있는 기록매체는 ROM, RAM, CD-ROM, 자기 테이프, 플로피 디스크, 광디스크, 하드 디스크 드라이브, 등이 될 수 있음은 물론이다. 또한, 컴퓨터로 읽을 수 있는 기록매체에 저장된 컴퓨터로 읽을 수 있는 코드 또는 프로그램은 컴퓨터간에 연결된 네트워크를 통해 전송될 수도 있다.On the other hand, the technical idea of the present invention can be applied to a computer-readable recording medium containing a computer program for performing the functions of the apparatus and method according to the present embodiment. In addition, the technical idea according to various embodiments of the present disclosure may be implemented in the form of computer readable codes recorded on a computer readable recording medium. The computer-readable recording medium can be any data storage device that can be read by a computer and can store data. For example, the computer-readable recording medium may be a ROM, a RAM, a CD-ROM, a magnetic tape, a floppy disk, an optical disk, a hard disk drive, or the like. In addition, the computer-readable code or program stored in the computer-readable recording medium may be transmitted through a network connected between the computers.

또한, 이상에서는 본 발명의 바람직한 실시예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해되어져서는 안될 것이다.In addition, although the preferred embodiment of the present invention has been shown and described above, the present invention is not limited to the specific embodiments described above, but the technical field to which the invention belongs without departing from the spirit of the invention claimed in the claims. Of course, various modifications can be made by those skilled in the art, and these modifications should not be individually understood from the technical spirit or the prospect of the present invention.

10,11,12 : UHD 영상 녹화/재생용 보드
100,101,102,103 : UHD 영상 녹화/재생용 하드웨어
210 : 녹화/재생 D/D 인터페이스(UHD Record/Playback D/D API)
220 : D/D 프레임워크 모듈(Device Driver Framework Module)
230 : H/W 장치 제어 인터페이스(UHD H/W Device Control API)
240 : H/W 장치 제어 모듈(H/W Device Control Module)
250 : PCIe 장치 인터페이스(PCIe Device API)10,11,12: UHD video recording / playback board
100,101,102,103: Hardware for UHD video recording / playback
210: recording / playback D / D interface (UHD Record / Playback D / D API)
220: D / D framework module
230: H / W device control interface (UHD H / W Device Control API)
240: H / W Device Control Module
250: PCIe Device Interface (PCIe Device API)

Claims (8)

제1 보드;
제1 보드와 통신 가능하도록 연결된 제2 보드;
제1 보드에 마련되어, UHD 영상을 처리하는 적어도 하나의 영상처리 하드웨어들; 및
제2 보드에 마련되어, UHD 영상을 처리하는 적어도 하나의 영상처리 하드웨어들;을 포함하는 것을 특징으로 하는 UHD 영상 처리 시스템.
A first board;
A second board connected to communicate with the first board;
At least one image processing hardware provided on the first board to process the UHD image; And
At least one image processing hardware provided on the second board to process the UHD image.
청구항 1에 있어서,
영상처리 하드웨어들은,
다채널의 UHD 영상들을 하나씩 각각 처리하는 것을 특징으로 하는 UHD 영상 처리 시스템.
The method according to claim 1,
Image processing hardware,
UHD image processing system, characterized in that each processing a multi-channel UHD image one by one.
청구항 1에 있어서,
영상처리 하드웨어는,
압축할 UHD 영상을 입력받는 제1 컨트롤러;
복원할 UHD 영상을 입력받는 제2 컨트롤러;
제1 컨트롤러를 통해 입력된 UHD 영상을 압축하고, 제2 컨트롤러를 통해 입력된 UHD 영상을 복원하는 프로세서;를 포함하는 것을 특징으로 하는 UHD 영상 처리 시스템.
The method according to claim 1,
Image processing hardware,
A first controller receiving an UHD image to be compressed;
A second controller configured to receive a UHD image to be restored;
And a processor for compressing the UHD image input through the first controller and reconstructing the UHD image input through the second controller.
청구항 3에 있어서,
제1 컨트롤러, 제2 컨트롤러 및 프로세서 간의 UHD 영상을 전달을 제어하는 제3 컨트롤러;를 더 포함하는 것을 특징으로 하는 UHD 영상 처리 시스템.
The method according to claim 3,
And a third controller for controlling transfer of the UHD image between the first controller, the second controller, and the processor.
청구항 2에 있어서,
영상처리 하드웨어는,
UHD 영상의 녹화와 재생을 수행하는 것을 특징으로 하는 UHD 영상 처리 시스템.
The method according to claim 2,
Image processing hardware,
UHD image processing system characterized in that to perform the recording and playback of the UHD image.
청구항 2에 있어서,
영상처리 하드웨어는,
UHD 영상의 채널 운용을 위한 제어 기능을 수행하는 것을 특징으로 하는 UHD 영상 처리 시스템.
The method according to claim 2,
Image processing hardware,
UHD image processing system, characterized in that for performing a control function for operating the channel of the UHD image.
청구항 2에 있어서,
영상처리 하드웨어는,
제3 컨트롤러의 설정을 위한 기능을 수행하는 것을 특징으로 하는 UHD 영상 처리 시스템.
The method according to claim 2,
Image processing hardware,
UHD image processing system, characterized in that to perform a function for setting of the third controller.
제1 보드에 마련된 적어도 하나의 영상처리 하드웨어들이, UHD 영상을 각각 처리하는 단계
제1 보드와 통신 가능하도록 연결된 제2 보드에 마련된 적어도 하나의 영상처리 하드웨어들이 UHD 영상을 처리하는 단계;를 포함하는 것을 특징으로 하는 UHD 영상 처리 방법.
At least one image processing hardware provided on the first board, respectively processing the UHD image
Processing the UHD image by at least one image processing hardware provided on a second board connected to the first board so as to communicate with the first board.
KR1020180021728A 2018-02-23 2018-02-23 Reconfigurable Video System for Multi-Channel Ultra High Definition Video Processing KR20190101579A (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
PCT/KR2018/002242 WO2019164034A1 (en) 2018-02-23 2018-02-23 Reconfigurable imaging system for ultra-high resolution multi-channel image processing
KR1020180021728A KR20190101579A (en) 2018-02-23 2018-02-23 Reconfigurable Video System for Multi-Channel Ultra High Definition Video Processing

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020180021728A KR20190101579A (en) 2018-02-23 2018-02-23 Reconfigurable Video System for Multi-Channel Ultra High Definition Video Processing

Publications (1)

Publication Number Publication Date
KR20190101579A true KR20190101579A (en) 2019-09-02

Family

ID=67687154

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020180021728A KR20190101579A (en) 2018-02-23 2018-02-23 Reconfigurable Video System for Multi-Channel Ultra High Definition Video Processing

Country Status (2)

Country Link
KR (1) KR20190101579A (en)
WO (1) WO2019164034A1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20220072974A (en) * 2020-11-26 2022-06-03 주식회사 에이디엠 System for transmitting and receiving audio and video

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
BRPI0109291B1 (en) * 2000-03-17 2015-06-23 Thomson Licensing Sa Method and apparatus for simultaneously recording and displaying a plurality of video signals from different video sources.
KR20050111013A (en) * 2004-05-20 2005-11-24 신보정보통신 주식회사 Multi-control pvr having an a/v control h/w and s/w, linux os and method of the same
KR102281839B1 (en) * 2014-05-08 2021-07-23 엘지전자 주식회사 Apparatus for providing Image
KR20160144061A (en) * 2015-06-08 2016-12-16 (주)넥서스일렉트로닉스 Popular mainboard for ultra-high definition television
KR20180014370A (en) * 2016-07-29 2018-02-08 (주) 유윈인포시스 Apparatus and methdo for making 4k ultra high definition contents

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20220072974A (en) * 2020-11-26 2022-06-03 주식회사 에이디엠 System for transmitting and receiving audio and video

Also Published As

Publication number Publication date
WO2019164034A1 (en) 2019-08-29

Similar Documents

Publication Publication Date Title
KR100579387B1 (en) Efficient transmission and playback of digital information
US8170120B2 (en) Information processing apparatus and information processing method
EP1239674A2 (en) Method and apparatus for recording broadcast data
WO2020215453A1 (en) Video recording method and system
CN113645490B (en) Soft-hard combined multichannel video synchronous decoding method
CN111787286B (en) Method for realizing multichannel synchronous recording system
US20150139614A1 (en) Input/output system for editing and playing ultra-high definition image
US10897655B2 (en) AV server and AV server system
CN112423140A (en) Video playing method and device, electronic equipment and storage medium
CN112291483B (en) Video pushing method and system, electronic equipment and readable storage medium
CN113490047A (en) Android audio and video playing method
KR20190101579A (en) Reconfigurable Video System for Multi-Channel Ultra High Definition Video Processing
CN111083408B (en) Method, system and equipment for processing video storage service
JP3632028B2 (en) Multi-channel video compression method and apparatus
US8200067B2 (en) Processing of scalable compressed video data formats for nonlinear video editing systems
JP2002016926A (en) Sprite-encoded data transmission method, sprite encoder, sprite-encoded data decoder and storage medium
US20100076944A1 (en) Multiprocessor systems for processing multimedia data and methods thereof
CN115720292A (en) Video recording method, apparatus, storage medium, and program product
KR20050104455A (en) A system for transporting moving picture stream having multi bit rates support in real time
CN113055680B (en) Distributed transcoding method
Kikuchi et al. Development of full-featured 8K recorder
KR102597852B1 (en) System for Providing Online Collaboration
JP3900382B2 (en) Video signal processing apparatus and video signal processing method
CN118678170A (en) Video processing apparatus, video processing method, and video processing system
KR20230101907A (en) Method and apparatus for MPEG DASH to support pre-roll and mid-roll content during media playback