JP2010148089A - Image splitting base ultrahigh resolution video encoding and decoding apparatus and method of controlling the same - Google Patents

Image splitting base ultrahigh resolution video encoding and decoding apparatus and method of controlling the same Download PDF

Info

Publication number
JP2010148089A
JP2010148089A JP2009202689A JP2009202689A JP2010148089A JP 2010148089 A JP2010148089 A JP 2010148089A JP 2009202689 A JP2009202689 A JP 2009202689A JP 2009202689 A JP2009202689 A JP 2009202689A JP 2010148089 A JP2010148089 A JP 2010148089A
Authority
JP
Japan
Prior art keywords
video
bit rate
target bit
high resolution
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2009202689A
Other languages
Japanese (ja)
Inventor
Suk Hee Cho
ソクヒ チョウ
Se Young Jeong
セ ヨン ジョン
Hae-Chul Choi
ヘ−チョル チョイ
Jin Soo Choi
ジン ス− チョイ
Jin Woo Hong
ジン ウー ホン
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Electronics and Telecommunications Research Institute ETRI
Original Assignee
Electronics and Telecommunications Research Institute ETRI
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Electronics and Telecommunications Research Institute ETRI filed Critical Electronics and Telecommunications Research Institute ETRI
Publication of JP2010148089A publication Critical patent/JP2010148089A/en
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146Data rate or code amount at the encoder output

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To provide an image splitting base ultrahigh resolution video encoding and decoding apparatus and a method of controlling the same. <P>SOLUTION: In the image splitting base ultrahigh resolution video encoding and decoding apparatus and the method of controlling the same, a first video image is split into a plurality of second video images having a lower resolution than the first video image, target bit rates are calculated for the respective second video images, the divided second video images are encoded based on the respective calculated target bit rates, and a stream of the encoded second video images is multiplexed to output a video image stream. <P>COPYRIGHT: (C)2010,JPO&INPIT

Description

本発明は、映像分割基盤超高解像度ビデオ符号化および復号化装置、およびその制御方法に関する。本発明は、知識経済部および情報通信研究振興院のIT源泉技術開発事業の一環として実行した研究から導き出されたものである[課題管理番号:2008−F−011−01、課題名:次世代DTV核心技術開発(標準化連携)−無眼鏡個人型3D放送技術開発]。   The present invention relates to a video segmentation-based ultra-high resolution video encoding and decoding apparatus and a control method thereof. The present invention is derived from research conducted as part of the IT Source Technology Development Project of the Ministry of Knowledge Economy and the Institute of Information and Communications Technology [Problem Management Number: 2008-F-011-01, Project Name: Next Generation] Development of DTV core technology (standardization cooperation)-Development of 3D broadcasting technology without personal glasses]

臨場感と現場感を視聴者に提供するために、フル(Full)HDTVが提供する画質より4倍から16倍以上も鮮明な超高画質ビデオであるUHDTV(Ultra−High Definition TV)が脚光を浴びている。   UHDTV (Ultra-High Definition TV), an ultra-high-definition video that is 4 to 16 times clearer than the image quality provided by Full HDTV, is the focus of attention in order to provide viewers with a sense of realism and a sense of field. I'm bathing.

UHDTVは、フルHDTVの解像度である1920×1080よりも4倍の解像度を有する4K(3840×2160)UHDTVと、16倍の解像度を有する8K(7680×4320)UHDTVとに分類することができる。   UHDTV can be classified into 4K (3840 × 2160) UHDTV having a resolution four times higher than 1920 × 1080, which is the resolution of full HDTV, and 8K (7680 × 4320) UHDTV having a resolution of 16 times.

フルHDTVよりも4倍から16倍以上のデータ量を有する超高解像度(UHD)ビデオをリアルタイムで符号化するために、超高解像度ビデオをHD級の解像度に分割し、4個または16個のHDビデオを並列処理によって符号化する方法が研究されている。   To encode ultra-high definition (UHD) video that has 4 to 16 times more data volume than full HDTV in real time, the ultra-high resolution video is divided into HD-class resolutions, 4 or 16 Methods for encoding HD video by parallel processing have been studied.

このように4等分または16等分に分割されたビデオは、映像によって複雑度が異なるため、それぞれの符号化に同じビット率を割り当てれば各ビデオは互いに異なる画質で符号化され、一枚のUHDビデオとして復元したときには、一映像で部分別に互いに異なる画質を持つようになるという問題点がある。   Since the video divided into four equal parts or sixteen parts in this way has different complexity depending on the video, if the same bit rate is assigned to each encoding, each video is encoded with different image quality. When restored as a UHD video, there is a problem in that one image has different image quality for each part.

特開平08−046960号公報Japanese Patent Laid-Open No. 08-046960

本発明は、上記のような従来技術を改善するために案出されたものであって、映像分割基盤で超高解像度ビデオ符号化を実行する場合に、符号化する前に分割されたビデオに目標ビット率を割り当てる方法を用いて分割映像間の画質の差を克服することを目的とする。   The present invention has been devised to improve the prior art as described above, and in the case of performing ultra-high resolution video coding on a video division base, the video is divided before coding. An object of the present invention is to overcome the difference in image quality between divided images using a method of assigning a target bit rate.

また、本発明は、映像分割基盤の超高解像度ビデオ符号化の構造において、符号化された複数の符号化ストリームを複数のトランスポートストリーム(Transport stream)で生成した後、これを多重化せず、符号化された複数の符号化ストリームを多重化して1つのビデオ符号化ストリームを出力し、オーディオおよびその他の付加データを多重化するシステム側におけるビデオ符号化ストリーム制御をより容易にすることを他の目的とする。   Further, the present invention does not multiplex a plurality of encoded streams after generating a plurality of encoded streams as a plurality of transport streams in the structure of video division-based ultra-high resolution video encoding. In addition to making it easier to control the video encoded stream on the system side, which multiplexes a plurality of encoded streams and outputs one video encoded stream, and multiplexes audio and other additional data. The purpose.

さらに、本発明は、超高解像度ビデオ復号化装置で出力される信号を複数の分割されたビデオ信号形態または1つの超高解像度ビデオ信号形態から選択して出力できるようにし、復号化装置と連結する多様な超高解像度ビデオ表示装置の入力インターフェースとの連結を可能にすることをさらに他の目的とする。   Furthermore, the present invention enables a signal output from the ultra-high resolution video decoding apparatus to be selected and output from a plurality of divided video signal forms or one ultra-high resolution video signal form, and is connected to the decoding apparatus. It is still another object of the present invention to enable connection with input interfaces of various ultra high resolution video display devices.

本発明の一側面に係る映像分割基盤超高解像度ビデオ符号化装置の制御方法は、第1ビデオ映像を前記第1ビデオ映像よりも低解像度である複数の第2ビデオ映像に分割するステップと、前記複数の第2ビデオ映像それぞれに対応する目標ビット率(bit rate)を計算するステップと、前記計算されたそれぞれの目標ビット率に基づいて前記それぞれの分割された複数の第2ビデオ映像を符号化するステップと、前記符号化された複数の第2ビデオ映像のストリームを多重化して1つのビデオ映像ストリームを出力するステップとを含む。   According to an aspect of the present invention, there is provided a method of controlling a video segmentation-based ultra-high resolution video encoding apparatus, the first video image being divided into a plurality of second video images having a lower resolution than the first video image; Calculating a target bit rate corresponding to each of the plurality of second video images; and encoding each of the plurality of divided second video images based on the calculated target bit rates. And a step of multiplexing the plurality of encoded second video image streams to output one video image stream.

このとき、前記複数の第2ビデオ映像それぞれに対応する目標ビット率を計算するステップは、前記複数の第2ビデオ映像それぞれの複雑度およびオブジェクトの存在有無のうちの少なくともいずれか1つに基づいて、前記複数の第2ビデオ映像のそれぞれの目標ビット率を計算するステップとすることができる。   At this time, the step of calculating the target bit rate corresponding to each of the plurality of second video images may be based on at least one of the complexity of each of the plurality of second video images and the presence / absence of an object. And calculating a target bit rate of each of the plurality of second video images.

このとき、前記計算されたそれぞれの目標ビット率に基づいて前記それぞれの分割された複数の第2ビデオ映像を符号化するステップは、前記それぞれの分割された複数の第2ビデオ映像を複数の符号化器を用いてそれぞれ符号化するステップとすることができる。   At this time, the step of encoding each of the plurality of divided second video images based on the calculated target bit rates includes the step of encoding each of the plurality of divided second video images. It is possible to use the encoder to encode each.

このとき、前記第2ビデオ映像は、前記第1ビデオ映像における前記第2ビデオ映像の位置情報を含むことができる。   At this time, the second video image may include position information of the second video image in the first video image.

このとき、前記複数の第2ビデオ映像それぞれに対応する目標ビット率を計算するステップは、前記第1ビデオ映像のイントラピクチャ(Intra picture)を低解像度イントラピクチャに変換するステップと、前記低解像度イントラピクチャおよび前記低解像度イントラピクチャに対して既に計算された目標ビット率に基づいて、前記複数の第2ビデオ映像のそれぞれの目標ビット率を計算するステップとを含むことができる。   At this time, the step of calculating a target bit rate corresponding to each of the plurality of second video images includes a step of converting an intra picture of the first video image into a low resolution intra picture, and the low resolution intra picture. Calculating a target bit rate for each of the plurality of second video images based on a target bit rate already calculated for a picture and the low resolution intra picture.

このとき、前記低解像度イントラピクチャに対して既に計算された目標ビット率は、前記第1ビデオ映像の符号化に対する目標ビット率および前記第1ビデオ映像のイントラピクチャを低解像度に変換するときの縮小比率に基づいて計算することができる。   At this time, the target bit rate already calculated for the low-resolution intra picture is reduced when the target bit rate for encoding the first video image and the intra-picture of the first video image is converted to a low resolution. It can be calculated based on the ratio.

このとき、前記複数の第2ビデオ映像それぞれに対応する目標ビット率を計算するステップは、前記第1ビデオ映像のイントラピクチャおよび前記第1ビデオ映像の符号化に対して既に設定された目標ビット率に基づいて、前記複数の第2ビデオ映像のそれぞれのビット率を計算するステップとすることができる。   At this time, the step of calculating a target bit rate corresponding to each of the plurality of second video images includes a target bit rate already set for the intra picture of the first video image and the encoding of the first video image. The bit rate of each of the plurality of second video images can be calculated based on the above.

本発明の一側面に係る映像分割基盤超高解像度ビデオ復号化装置の制御方法は、1つのビデオストリームの入力を受け、前記ビデオストリームのヘッダーに含まれた分割されたビデオの位置情報に基づいて前記ビデオストリームを複数の符号化ストリームに逆多重化するステップと、前記複数の符号化ストリームを復号化して複数のビデオ映像を生成するステップと、前記複数のビデオ映像を出力するステップとを含む。   According to an aspect of the present invention, there is provided a method for controlling a video segmentation-based ultra-high resolution video decoding apparatus that receives an input of one video stream and is based on position information of the segmented video included in the header of the video stream. Demultiplexing the video stream into a plurality of encoded streams, decoding the plurality of encoded streams to generate a plurality of video images, and outputting the plurality of video images.

このとき、前記生成された複数のビデオ映像を結合して1つのビデオ映像を生成するステップをさらに含むことができる。   In this case, the method may further include generating a single video image by combining the plurality of generated video images.

本発明の一側面に係る映像分割基盤超高解像度ビデオ符号化装置は、第1ビデオ映像を前記第1ビデオ映像よりも低解像度である複数の第2ビデオ映像に分割する映像分割器と、前記複数の第2ビデオ映像それぞれに対応する目標ビット率を計算する目標ビット率計算機と、前記計算されたそれぞれの目標ビット率に基づいて前記それぞれの分割された複数の第2ビデオ映像を符号化する符号化器と、前記符号化された複数の第2ビデオ映像のストリームを多重化して1つのビデオ映像ストリームを出力する多重化器とを備える。   According to an aspect of the present invention, there is provided a video segmentation-based ultra-high resolution video encoding apparatus that divides a first video image into a plurality of second video images having a lower resolution than the first video image, A target bit rate calculator for calculating a target bit rate corresponding to each of a plurality of second video images, and encoding each of the plurality of divided second video images based on the calculated target bit rates. An encoder; and a multiplexer that multiplexes the plurality of encoded second video image streams to output one video image stream.

このとき、前記目標ビット率計算機は、前記複数の第2ビデオ映像の複雑度およびオブジェクトの存在有無のうちの少なくともいずれか1つに基づいて、前記複数の第2ビデオ映像のそれぞれのビット率を計算することができる。   At this time, the target bit rate calculator calculates the bit rate of each of the plurality of second video images based on at least one of the complexity of the plurality of second video images and the presence / absence of an object. Can be calculated.

このとき、前記符号化器は、複数で構成され、前記それぞれの分割された複数の第2ビデオ映像をそれぞれ符号化することができる。   At this time, the encoder includes a plurality of encoders, and each of the plurality of divided second video images can be encoded.

このとき、前記第2ビデオ映像は、前記第1ビデオ映像における前記第2ビデオ映像の位置情報を含むことができる。   At this time, the second video image may include position information of the second video image in the first video image.

このとき、前記目標ビット率計算機は、前記第1ビデオ映像のイントラピクチャを低解像度イントラピクチャに変換するダウンコンバータと、前記低解像度イントラピクチャおよび前記低解像度イントラピクチャに対して既に計算された目標ビット率に基づいて、前記複数の第2ビデオ映像のそれぞれの目標ビット率を計算するイントラ符号化器とを備える。   At this time, the target bit rate calculator includes a down converter that converts an intra picture of the first video image into a low resolution intra picture, and a target bit that has already been calculated for the low resolution intra picture and the low resolution intra picture. And an intra encoder that calculates a target bit rate of each of the plurality of second video images based on the rate.

このとき、前記低解像度イントラピクチャに対して既に計算された目標ビット率は、前記第1ビデオ映像の符号化に対する目標ビット率および前記第1ビデオ映像のイントラピクチャを低解像度に変換するときの縮小比率に基づいて計算することができる。   At this time, the target bit rate already calculated for the low-resolution intra picture is reduced when the target bit rate for encoding the first video image and the intra-picture of the first video image is converted to a low resolution. It can be calculated based on the ratio.

このとき、前記目標ビット率計算機は、前記第1ビデオ映像のイントラピクチャおよび前記第1ビデオ映像の符号化に対して既に設定された目標ビット率に基づいて、前記複数の第2ビデオ映像のそれぞれのビット率を計算するイントラ符号化器を備えることができる。   At this time, the target bit rate calculator calculates each of the plurality of second video images based on the target bit rate already set for the intra picture of the first video image and the encoding of the first video image. An intra coder for calculating the bit rate of.

本発明の一側面に係る映像分割基盤超高解像度ビデオ復号化装置は、1つのビデオストリームの入力を受け、前記ビデオストリームのヘッダーに含まれた分割されたビデオの位置情報に基づいて前記ビデオストリームを複数の符号化ストリームで逆多重化する逆多重化器と、前記複数の符号化ストリームを復号化して複数のビデオ映像を生成する復号化器と、前記複数のビデオ映像を出力する出力部とを備える。   According to an aspect of the present invention, a video segmentation-based ultra-high resolution video decoding device receives an input of one video stream, and the video stream is based on position information of the segmented video included in a header of the video stream. A demultiplexer that demultiplexes the plurality of encoded streams with each other, a decoder that decodes the plurality of encoded streams to generate a plurality of video images, and an output unit that outputs the plurality of video images; Is provided.

このとき、前記生成された複数のビデオ映像を結合して1つのビデオ映像を生成する映像合体器をさらに備えることができる。   At this time, it may further include a video combiner that combines the plurality of generated video images to generate one video image.

本発明によれば、映像分割基盤で超高解像度ビデオ符号化を実行する場合に、符号化する前に分割されたビデオに目標ビット率を割り当てる方法を用いて分割映像間の画質の差を克服することができる。   According to the present invention, when performing ultra-high resolution video coding on a video segmentation basis, a method of assigning a target bit rate to the video segmented before encoding is used to overcome the difference in image quality between the segmented images. can do.

また、本発明によれば、映像分割基盤超高解像度ビデオ符号化構造において、符号化された複数の符号化ストリームを複数のトランスポートストリームで生成した後、これを多重化せず、符号化された複数の符号化ストリームを多重化して1つのビデオ符号化ストリームを出力し、オーディオおよびその他の付加データを多重化するシステム側におけるビデオ符号化ストリーム制御をより容易にすることができる。   In addition, according to the present invention, in the video division-based ultra-high resolution video coding structure, a plurality of encoded streams are generated as a plurality of transport streams and then encoded without being multiplexed. In addition, it is possible to multiplex a plurality of encoded streams and output one video encoded stream, thereby facilitating video encoded stream control on the system side where audio and other additional data are multiplexed.

さらに、本発明によれば、超高解像度ビデオ復号化装置で出力される信号を複数の分割されたビデオ信号形態または1つの超高解像度ビデオ信号形態から選択して出力できるようにし、復号化装置と連結する多様な超高解像度ビデオ表示装置の入力インターフェースとの連結を可能とすることができる。   Furthermore, according to the present invention, a signal output from an ultra-high resolution video decoding apparatus can be selected and output from a plurality of divided video signal forms or one ultra-high resolution video signal form. Can be connected to the input interface of various ultra-high resolution video display devices.

本発明の一実施形態に係る映像分割基盤超高解像度ビデオ符号化装置の構成を示す図である。It is a figure which shows the structure of the image | video division | segmentation base ultra-high resolution video encoding apparatus which concerns on one Embodiment of this invention. 本発明の一実施形態に係る映像分割基盤超高解像度ビデオ符号化器の構成を示す図である。1 is a diagram illustrating a configuration of a video division-based ultra-high resolution video encoder according to an embodiment of the present invention. FIG. 本発明の超高解像度ビデオ映像を低解像度ビデオに分割した一例を示す図である。It is a figure which shows an example which divided | segmented the ultra high resolution video image | video of this invention into the low resolution video. 本発明の超高解像度ビデオ映像を低解像度ビデオに分割した一例を示す図である。It is a figure which shows an example which divided | segmented the ultra high resolution video image | video of this invention into the low resolution video. 本発明の超高解像度ビデオ映像を低解像度ビデオに分割した一例を示す図である。It is a figure which shows an example which divided | segmented the ultra high resolution video image | video of this invention into the low resolution video. 本発明の一実施形態に係る目標ビット率計算機の構成を示す図である。It is a figure which shows the structure of the target bit rate computer which concerns on one Embodiment of this invention. 本発明の一実施形態に係る目標ビット率計算機の構成を示す図である。It is a figure which shows the structure of the target bit rate computer which concerns on one Embodiment of this invention. 本発明の一実施形態に係るビデオ符号化予測構造を説明するための図である。It is a figure for demonstrating the video coding prediction structure which concerns on one Embodiment of this invention. 本発明の一実施形態に係る映像分割基盤超高解像度ビデオ復号化装置の構成を示す図である。It is a figure which shows the structure of the image | video division | segmentation base ultra-high resolution video decoding apparatus concerning one Embodiment of this invention. 本発明の一実施形態に係る映像分割基盤超高解像度ビデオ符号化装置の制御方法を説明するためのフローチャートである。5 is a flowchart for explaining a control method of the video division-based ultra-high resolution video encoding apparatus according to an embodiment of the present invention. 本発明の一実施形態に係る映像分割基盤超高解像度ビデオ復号化装置の制御方法を説明するためのフローチャートである。5 is a flowchart for explaining a control method of a video division-based ultra-high resolution video decoding apparatus according to an embodiment of the present invention.

以下、添付の図面および添付の図面に記載された内容を参照しながら、本発明の好ましい実施形態について詳細に説明するが、本発明がこれらの実施形態によって制限または限定されることはない。図中、同じ参照符号は同じ部材を示す。   Hereinafter, preferred embodiments of the present invention will be described in detail with reference to the accompanying drawings and the contents described in the accompanying drawings, but the present invention is not limited or limited by these embodiments. In the drawings, the same reference numerals denote the same members.

図1は、本発明の一実施形態に係る映像分割基盤超高解像度ビデオ符号化装置の構成を示す図である。図1を参照しながら、本発明の一実施形態に係る映像分割基盤超高解像度ビデオ符号化装置について説明する。   FIG. 1 is a diagram illustrating a configuration of a video division-based ultra-high resolution video encoding apparatus according to an embodiment of the present invention. With reference to FIG. 1, a video division-based ultra-high resolution video encoding apparatus according to an embodiment of the present invention will be described.

図1に示すように、映像分割基盤超高解像度ビデオ符号化装置は、映像分割基盤超高解像度ビデオ符号化器110と、目標ビット率計算機120とを備える。   As shown in FIG. 1, the video division-based ultra-high resolution video encoder includes a video division-based ultra-high resolution video encoder 110 and a target bit rate calculator 120.

映像分割基盤超高解像度ビデオ符号化器110は、大容量の超高解像度ビデオ映像をリアルタイムで符号化するために、複数(N個)の低解像度ビデオ映像に等分して符号化し、1つの符号化ストリームを出力する。   The video segmentation-based ultra-high resolution video encoder 110 encodes a large volume of ultra-high-resolution video video by equally dividing it into a plurality (N) of low-resolution video videos in real time. Output the encoded stream.

このとき、超高解像度ビデオ映像は、3840×2160の解像度または7680×4320の解像度を有するビデオ映像とすることができ、低解像度ビデオ映像は、3840×2160の解像度を有するビデオ映像とすることができる。   At this time, the ultra-high resolution video image may be a video image having a resolution of 3840 × 2160 or 7680 × 4320, and the low-resolution video image may be a video image having a resolution of 3840 × 2160. it can.

目標ビット率計算機120は、分割されたそれぞれの低解像度ビデオ映像の符号化に割り当てる目標ビット率を計算する。   The target bit rate calculator 120 calculates a target bit rate to be allocated to encoding each divided low-resolution video image.

映像分割基盤超高解像度ビデオ符号化器110は、複数(N個)の低解像度ビデオに対する符号化ストリームを多重化し、最終的に1つのビデオ符号化ストリームを出力する。   The video division-based ultra-high resolution video encoder 110 multiplexes the encoded streams for a plurality (N) of low-resolution videos and finally outputs one video encoded stream.

したがって、映像分割基盤超高解像度ビデオ符号化装置は、オーディオ符号化ストリームおよび付加データなどと共にビデオ符号化ストリームを多重化し、1つのトランスポートストリームを生成することができる。   Therefore, the video division-based ultra-high resolution video encoding apparatus can multiplex the video encoded stream together with the audio encoded stream and the additional data to generate one transport stream.

図2は、本発明の一実施形態に係る映像分割基盤超高解像度ビデオ符号化器の構成を示す図である。図2を参照しながら、本発明の一実施形態に係る映像分割基盤超高解像度ビデオ符号化器について説明する。   FIG. 2 is a diagram illustrating a configuration of a video division-based ultra-high resolution video encoder according to an embodiment of the present invention. With reference to FIG. 2, a video division-based ultra-high resolution video encoder according to an embodiment of the present invention will be described.

図2に示すように、映像分割基盤超高解像度ビデオ符号化器110は、映像分割器210と、符号化器220と、多重化器230とを備える。   As shown in FIG. 2, the video division-based ultra-high resolution video encoder 110 includes a video divider 210, an encoder 220, and a multiplexer 230.

映像分割器210は、超高解像度ビデオ映像(第1ビデオ映像)を超高解像度ビデオ映像(第1ビデオ映像)よりも低解像度である複数の低解像度ビデオ映像(第2ビデオ映像)に分割する。   The video divider 210 divides the ultra high resolution video video (first video video) into a plurality of low resolution video video (second video video) having a lower resolution than the ultra high resolution video video (first video video). .

このとき、低解像度ビデオ映像(第2ビデオ映像)は、超高解像度ビデオ映像(第1ビデオ映像)における低解像度ビデオ映像(第2ビデオ映像)の位置情報を含むことができる。   At this time, the low-resolution video image (second video image) can include position information of the low-resolution video image (second video image) in the ultra-high-resolution video image (first video image).

符号化器220は、複数の低解像度ビデオ映像(第2ビデオ映像)のビット率をそれぞれ互いに異なるビット率で計算した結果の入力を受け、計算されたそれぞれのビット率に基づいてそれぞれの分割された複数の低解像度ビデオ映像(第2ビデオ映像)を符号化する。   The encoder 220 receives the result of calculating the bit rates of a plurality of low-resolution video images (second video images) at different bit rates, and each of them is divided based on the calculated bit rates. A plurality of low-resolution video images (second video images) are encoded.

このとき、符号化器220は、複数で構成され、それぞれの分割された複数の第2ビデオ映像をそれぞれ符号化することができる。   At this time, the encoder 220 includes a plurality of units, and can encode each of the plurality of divided second video images.

多重化器230は、符号化された複数の第2ビデオ映像のストリームを多重化して1つのビデオ映像ストリームを出力する。   The multiplexer 230 multiplexes the plurality of encoded second video video streams and outputs one video video stream.

図3、図4、および図5は、本発明の超高解像度ビデオ映像を低解像度ビデオに分割した一例を示す図である。   3, 4, and 5 are diagrams illustrating an example in which the ultra-high resolution video image of the present invention is divided into low-resolution video.

図2を参照しながら説明したように、映像分割器210は、超高解像度ビデオを低解像度ビデオに分割する機能を実行する。   As described with reference to FIG. 2, the video divider 210 performs a function of dividing the ultra high resolution video into the low resolution video.

図3に示すように、4K(3840×2160)超高解像度ビデオは、HD(1920×1080)ビデオ4個に分割されて符号化することができる。さらに、図4に示すように、8K(7680×4320)超高解像度ビデオは4K(3840×2160)である低解像度ビデオ4個に分割されたり、図5に示すように、低解像度ビデオ(1920×1080)16個に分割されて符号化することができる。   As shown in FIG. 3, 4K (3840 × 2160) ultra high resolution video can be divided into four HD (1920 × 1080) video and encoded. Further, as shown in FIG. 4, the 8K (7680 × 4320) ultra-high resolution video is divided into four low-resolution videos of 4K (3840 × 2160), or as shown in FIG. × 1080) It can be divided into 16 pieces and encoded.

このとき、本発明の一実施形態に係る低解像度ビデオ映像は、超高解像度ビデオ映像よりも解像度が相対的に低いビデオ映像をいう。   At this time, the low resolution video image according to the embodiment of the present invention refers to a video image having a relatively lower resolution than the ultra high resolution video image.

複数の符号化器、すなわち分割された第1、第2、…第Nビデオ符号化器は、すべて同じ構成および特徴を有する符号化器で構成することができ、それぞれ独立的に符号化を実行する。また、符号化器としては、MPEG−2/4、AVC/H.264などI、B、Pピクチャで符号化されるあらゆる符号化器も用いることができる。ただし、目標ビット率を従来のように符号化以前に手動で設定するのではなく、本発明によれば、目標ビット率計算機によって自動で更新されて入力される。   A plurality of encoders, that is, divided first, second,... Nth video encoders, can all be composed of encoders having the same configuration and characteristics, and perform encoding independently. To do. The encoder includes MPEG-2 / 4, AVC / H. Any encoder that is encoded with I, B, P pictures such as H.264 can also be used. However, the target bit rate is not manually set before encoding as in the prior art, but according to the present invention, the target bit rate is automatically updated and inputted by the target bit rate calculator.

また、映像分割によって複数で出力される符号化ストリーム内には、分割されたビデオは、超高解像度ビデオでどこに位置するのかを知らせる情報を含む。例えば、分割されたビデオが超高解像度ビデオでどこに位置するのかを知らせる情報として、1、2、…(N−1)、Nのような番号を各符号化ストリームのヘッダーに含ませて区分できるように構成することができる。多重化器は、このような情報を用いて多数の符号化ストリームを多重化し、1つのビデオ符号化ストリームで出力する。   In addition, in an encoded stream output in plural by video division, information indicating where the divided video is located in the ultra-high resolution video is included. For example, as information indicating where the divided video is located in the ultra-high resolution video, numbers such as 1, 2,... (N−1), N can be included in the header of each encoded stream. It can be constituted as follows. The multiplexer multiplexes a number of encoded streams using such information, and outputs the result as one video encoded stream.

図6および図7は、本発明の一実施形態に係る目標ビット率計算機の構成を示す図であり、図8は、本発明の一実施形態に係るビデオ符号化予測構造を説明するための図である。   6 and 7 are diagrams illustrating a configuration of a target bit rate calculator according to an embodiment of the present invention, and FIG. 8 is a diagram for explaining a video coding prediction structure according to an embodiment of the present invention. It is.

従来のHD級ビデオ符号化器のように映像を分割せずに一映像で符号化する場合には、符号化しようとする目標ビット率を符号化器に設定するようになっている。しかしながら、超高解像度ビデオを分割して符号化する場合には、全体に対する目標ビット率が設定されたとしても、それぞれ分割された映像にどの程度の目標ビット率を設定するのかに対する計算が必要となる。   When encoding a single image without dividing the image as in the conventional HD class video encoder, the target bit rate to be encoded is set in the encoder. However, in the case of dividing and encoding an ultra-high resolution video, even if the target bit rate is set for the entire video, it is necessary to calculate how much the target bit rate is set for each divided video. Become.

したがって、本発明の一実施形態によれば、複数の低解像度ビデオ映像(第2ビデオ映像)のビット率をそれぞれ互いに異なるビット率で計算して目標ビット率を計算する目標ビット率計算機を備える。   Therefore, according to an embodiment of the present invention, a target bit rate calculator is provided that calculates a target bit rate by calculating bit rates of a plurality of low resolution video images (second video images) at different bit rates.

例えば、目標ビット率計算機は、複数の低解像度ビデオ映像(第2ビデオ映像)の複雑度およびオブジェクトの存在有無のうちの少なくともいずれか1つに基づいて、複数の第2ビデオ映像のそれぞれのビット率を計算することができる。   For example, the target bit rate calculator may calculate each bit of the plurality of second video images based on at least one of the complexity of the plurality of low resolution video images (second video images) and the presence / absence of the object. The rate can be calculated.

実際、ビデオ符号化を実行する前にそれぞれの分割されたビデオ符号化器に目標ビット率を割り当てるために、先行的に分割されたビデオ符号化器に割り当てられる目標ビット率を計算する。このとき、目標ビット率の予測時間を減らすために、全体ビデオ信号のうちでイントラ(Intra)ピクチャで符号化される映像のみの入力を受けて目標ビット率を計算する。図8に示すビデオ符号化予測構造の場合、現在のT番目のイントラピクチャ810で符号化される映像と、その次の(T+1)番目のイントラピクチャ820で符号化される映像とを用い、この2つのピクチャ810、820の間に存在するBピクチャとPピクチャとT番目のイントラピクチャに対する目標ビット率を計算する。   In fact, in order to assign a target bit rate to each segmented video encoder before performing video encoding, the target bit rate assigned to the previously segmented video encoder is calculated. At this time, in order to reduce the prediction time of the target bit rate, the target bit rate is calculated by receiving only the video encoded by the intra picture in the entire video signal. In the case of the video encoding prediction structure shown in FIG. 8, a video encoded with the current Tth intra picture 810 and a video encoded with the next (T + 1) th intra picture 820 are used. The target bit rate for the B picture, the P picture, and the Tth intra picture existing between the two pictures 810 and 820 is calculated.

図6に示す一例では、目標ビット率計算機が大容量の超高解像ビデオであることを考慮し、目標ビット率の予測時間をさらに減らすために、超高解像度映像を縮小して低解像度映像に変換した後、イントラ符号化を実行する構造を示している。   In the example shown in FIG. 6, considering that the target bit rate calculator is a large-capacity ultra-high resolution video, in order to further reduce the target bit rate prediction time, the ultra-high resolution video is reduced and the low-resolution video is reduced. 2 shows a structure in which intra coding is performed after conversion into.

本発明の一実施形態に係る目標ビット率計算機120は、ダウンコンバータ(Down Converter)610と、イントラ符号化器(Intra Encoder)620とを備える。   The target bit rate calculator 120 according to an embodiment of the present invention includes a down converter 610 and an intra encoder 620.

ダウンコンバータ610は、超高解像度映像(第1ビデオ映像)のイントラピクチャを低解像度イントラピクチャに変換する。   The down converter 610 converts the intra picture of the ultra-high resolution video (first video video) into the low resolution intra picture.

イントラ符号化器620は、低解像度イントラピクチャおよび低解像度イントラピクチャに対して既に計算された目標ビット率に基づいて、複数の低解像度映像(第2ビデオ映像)のそれぞれのビット率に該当する目標ビット率を計算する。   The intra encoder 620 is configured to generate a target corresponding to each bit rate of the plurality of low-resolution videos (second video images) based on the target bit rates already calculated for the low-resolution intra picture and the low-resolution intra picture. Calculate the bit rate.

イントラ符号化器620は、次の数式1に基づいて、低解像度イントラピクチャに対して既に計算された目標ビット率(低解像度ビデオ符号化に対する目標ビット率)を計算することができる。   The intra encoder 620 can calculate the target bit rate that has already been calculated for the low resolution intra picture (target bit rate for low resolution video encoding) based on Equation 1 below.

Figure 2010148089
・・・(式1)
Figure 2010148089
... (Formula 1)

式1のように、低解像度イントラピクチャに対して既に計算された目標ビット率(低解像度ビデオ符号化に対する目標ビット率)は、超高解像度ビデオ映像(第1ビデオ映像)の符号化に対する目標ビット率および第1ビデオ映像のイントラピクチャを低解像度に変換するときの縮小比率を用いて計算することができる。   As shown in Equation 1, the target bit rate already calculated for the low-resolution intra picture (target bit rate for low-resolution video encoding) is the target bit for encoding the ultra-high-resolution video image (first video image). The rate and the reduction ratio when converting the intra picture of the first video image to a low resolution can be calculated.

イントラ符号化器620は、符号化を実行しながら映像分割器で分割される各映像に該当する領域に発生するビット数を領域別に累積し、分割第1、第2、…第(N−1)、第N領域に対する符号化ビット率を計算して出力する。   The intra encoder 620 accumulates the number of bits generated in the area corresponding to each video divided by the video divider while performing the encoding, and the divided first, second,. ), And calculates and outputs a coding bit rate for the Nth region.

したがって、図6の一実施形態の場合は、次の式2のように、分割第1、第2、…第(N−1)、第N領域に対する符号化ビット率に低解像度映像への縮小比率だけを掛けた値を、分割された第1、第2、…第Nビデオ符号化器に対する目標ビット率として自動で設定することができる。   Therefore, in the case of the embodiment of FIG. 6, the encoding bit rate for the divided first, second,. A value obtained by multiplying only the ratio can be automatically set as a target bit rate for the divided first, second,... Nth video encoders.

Figure 2010148089
・・・(式2)
Figure 2010148089
... (Formula 2)

図7に示す一実施形態では、図6の構造の場合よりも目標ビット率の予測時間が長く所要されたとしても、より正確な予測が可能な構造を説明している。   In the embodiment shown in FIG. 7, a structure is described in which more accurate prediction is possible even if the target bit rate prediction time is longer than in the case of the structure of FIG. 6.

図7に示す目標ビット率計算機120の一例では、超高解像度映像のイントラピクチャ映像を低解像度イントラピクチャに変換せず、同じ解像度の映像をそのまま用いて目標ビット率を予測する。   In the example of the target bit rate calculator 120 shown in FIG. 7, the target bit rate is predicted using the same resolution video as it is, without converting the ultra-high resolution video intra-picture video into the low-resolution intra-picture.

図7に示す目標ビット率計算機120の一例によれば、イントラ符号化器710が超高解像度ビデオ映像(第1ビデオ映像)のイントラピクチャおよび超高解像度ビデオ映像のイントラピクチャの符号化に対して既に設定された目標ビット率を用いて、複数の第2ビデオ映像のそれぞれのビット率を計算することができる。   According to an example of the target bit rate calculator 120 shown in FIG. 7, the intra encoder 710 encodes an intra picture of an ultra high resolution video image (first video image) and an intra picture of an ultra high resolution video image. The bit rate of each of the plurality of second video images can be calculated using the target bit rate that has already been set.

図9は、本発明の一実施形態に係る映像分割基盤超高解像度ビデオ復号化装置の構成を示す図である。図9を参照しながら、本発明の一実施形態に係る映像分割基盤超高解像度ビデオ復号化装置について説明する。   FIG. 9 is a diagram illustrating a configuration of a video division-based ultra-high resolution video decoding apparatus according to an embodiment of the present invention. With reference to FIG. 9, a video division based ultra-high resolution video decoding apparatus according to an embodiment of the present invention will be described.

本発明の一実施形態に係る映像分割基盤超高解像度ビデオ復号化装置は、1つのビデオ符号化ストリームの入力を受け、符号化ストリームのヘッダーに含まれている分割されたビデオの位置情報(順番)に基づいて、N個の符号化ストリームで逆多重化(分類)し、各ビデオ符号化ストリームを入力して復号化する。複数(N個)の復元されたビデオは、ビデオ出力形態情報を外部から入力され、複数(N個)のビデオ形態で出力したり1つの超高解像度ビデオに合わせて1つのビデオ信号で出力したりすることができる。このようなビデオ信号の出力は、復号化装置に連結する超高解像度ビデオ表示装置の入力インターフェースに応じて決定することができる。   The video division-based ultra-high resolution video decoding apparatus according to an embodiment of the present invention receives an input of one video encoded stream and receives position information (order) of the divided video included in the header of the encoded stream. ) Is demultiplexed (classified) with N encoded streams, and each video encoded stream is input and decoded. Multiple (N) restored videos are input with video output form information from the outside, and are output in multiple (N) video forms or output as one video signal in accordance with one ultra high resolution video. Can be. The output of such a video signal can be determined according to the input interface of the ultra high resolution video display device connected to the decoding device.

このような映像分割基盤超高解像度ビデオ復号化装置について各構成要素別により詳細に説明すれば、次のとおりとなる。   The video division-based ultra-high resolution video decoding apparatus will be described in detail for each component as follows.

こののような映像分割基盤超高解像度ビデオ復号化装置は、逆多重化器910と、復号化器920と、映像合体器930とを備える。また、映像分割基盤超高解像度ビデオ復号化装置は、出力部(図示せず)をさらに備えることができる。   Such a video division based ultra-high resolution video decoding device includes a demultiplexer 910, a decoder 920, and a video combiner 930. In addition, the video segmentation-based ultra-high resolution video decoding apparatus may further include an output unit (not shown).

逆多重化器910は、1つのビデオストリームの入力を受け、複数の符号化ストリームで逆多重化する。   The demultiplexer 910 receives one video stream and demultiplexes it with a plurality of encoded streams.

復号化器920は、複数の符号化ストリームを復号化して複数のビデオ映像を生成する。このとき、復号化器920は、複数で構成することができる。   The decoder 920 decodes a plurality of encoded streams to generate a plurality of video images. At this time, a plurality of decoders 920 can be configured.

映像合体器930は、生成された複数のビデオ映像を結合して1つのビデオ映像を生成する。   The video combiner 930 combines a plurality of generated video images to generate one video image.

出力部(図示せず)は、複数のビデオ映像を出力することができる。   An output unit (not shown) can output a plurality of video images.

図10は、本発明の一実施形態に係る映像分割基盤超高解像度ビデオ符号化装置の制御方法を説明するためのフローチャートである。   FIG. 10 is a flowchart for explaining a control method of the video division-based ultra-high resolution video encoding apparatus according to an embodiment of the present invention.

映像分割器が、第1ビデオ映像を第1ビデオ映像よりも低解像度である複数の第2ビデオ映像に分割する(S1010)。   The image divider divides the first video image into a plurality of second video images having a lower resolution than the first video image (S1010).

目標ビット率計算機は、複数の第2ビデオ映像のビット率をそれぞれ互いに異なるビット率で計算する(S1020)。このとき、目標ビット率計算機は、複数の第2ビデオ映像の複雑度およびオブジェクトの存在有無のうちの少なくともいずれか1つに基づいて、複数の第2ビデオ映像のそれぞれのビット率を計算することができる。   The target bit rate calculator calculates the bit rates of the plurality of second video images at different bit rates, respectively (S1020). At this time, the target bit rate calculator calculates each bit rate of the plurality of second video images based on at least one of the complexity of the plurality of second video images and the presence / absence of the object. Can do.

このとき、第1ビデオ映像のイントラピクチャを低解像度に変換することができ、低解像度に変換された第1ビデオ映像のイントラピクチャおよび低解像度イントラピクチャに対して既に計算された目標ビット率に基づいて、複数の第2ビデオ映像のそれぞれのビット率を計算することができる。また、低解像度イントラピクチャに対して既に計算された目標ビット率は、第1ビデオ映像の符号化に対する目標ビット率および第1ビデオ映像のイントラピクチャを低解像度に変換するときの縮小比率に基づいて計算することができる。   At this time, the intra picture of the first video image can be converted to a low resolution, and based on the target bit rate already calculated for the intra picture of the first video image and the low resolution intra picture converted to the low resolution. Thus, the bit rate of each of the plurality of second video images can be calculated. Further, the target bit rate already calculated for the low resolution intra picture is based on the target bit rate for encoding the first video image and the reduction ratio when converting the intra picture of the first video image to the low resolution. Can be calculated.

このとき、目標ビット率計算機は、第1ビデオ映像のイントラピクチャおよび第1ビデオ映像の符号化に対して既に設定された目標ビット率に基づいて、複数の第2ビデオ映像のそれぞれのビット率を計算するように構成することができる。   At this time, the target bit rate calculator calculates each bit rate of the plurality of second video images based on the target bit rate already set for the intra picture of the first video image and the encoding of the first video image. It can be configured to calculate.

このとき、第2ビデオ映像は、第1ビデオ映像における第2ビデオ映像の位置情報を含むことができる。   At this time, the second video image may include position information of the second video image in the first video image.

この後、符号化器は、計算されたそれぞれのビット率に基づいて、それぞれの分割された複数の第2ビデオ映像を符号化する(S1030)。   Thereafter, the encoder encodes the plurality of divided second video images based on the calculated bit rates (S1030).

このとき、符号化器は、それぞれの分割された複数の第2ビデオ映像を、複数の符号化器を用いてそれぞれ符号化することができる。   At this time, the encoder can encode each of the plurality of divided second video images using the plurality of encoders.

この後、多重化器は、符号化された複数の第2ビデオ映像のストリームを多重化して1つのビデオ映像ストリームを出力する(S1040)。   Thereafter, the multiplexer multiplexes the plurality of encoded second video video streams and outputs one video video stream (S1040).

したがって、本発明によれば、映像分割基盤で超高解像度ビデオ符号化を実行する場合に、符号化する前に分割されたビデオに割り当てる目標ビット率を割り当てる方法を用いて分割映像間の画質の差を克服することができる。   Therefore, according to the present invention, when performing ultra-high resolution video coding on a video segmentation basis, the method of assigning the target bit rate to be allocated to the video segmented before encoding is used to improve the image quality between the segmented images. The difference can be overcome.

また、本発明によれば、映像分割基盤の超高解像度ビデオ符号化構造において、符号化された複数の符号化ストリームを複数のトランスポートストリームで生成した後、これを多重化せず、符号化された複数の符号化ストリームを多重化して1つのビデオ符号化ストリームを出力し、オーディオおよびその他の付加データを多重化するシステム側におけるビデオ符号化ストリーム制御をより容易にすることができる。   Also, according to the present invention, in an ultra-high resolution video coding structure based on video segmentation, a plurality of encoded streams are generated as a plurality of transport streams, and then encoded without being multiplexed. It is possible to multiplex the plurality of encoded streams and output one video encoded stream, thereby facilitating video encoded stream control on the system side where audio and other additional data are multiplexed.

図11は、本発明の一実施形態に係る映像分割基盤超高解像度ビデオ復号化装置の制御方法を説明するためのフローチャートである。   FIG. 11 is a flowchart for explaining a control method of the video division-based ultra-high resolution video decoding apparatus according to an embodiment of the present invention.

逆多重化器は、1つのビデオストリームの入力を受け、このビデオストリームのヘッダーに含まれた分割されたビデオの位置情報に基づいて、ビデオストリームを複数の符号化ストリームで逆多重化する(S1110)。   The demultiplexer receives an input of one video stream, and demultiplexes the video stream with a plurality of encoded streams based on the position information of the divided video included in the header of the video stream (S1110). ).

この後、復号化器は、複数の符号化ストリームを復号化して複数のビデオ映像を生成して(S1120)出力する(S1130)。   Thereafter, the decoder generates a plurality of video images by decoding the plurality of encoded streams (S1120) and outputs them (S1130).

このとき、映像合体器は、生成された複数のビデオ映像を結合して1つのビデオ映像を生成することができる。   At this time, the video combiner can generate a single video image by combining the generated video images.

上述したように、本発明の好ましい実施形態を参照して説明したが、該当の技術分野において熟練した当業者にとっては、特許請求の範囲に記載された本発明の思想および領域から逸脱しない範囲内で、本発明を多様に修正および変更させることができることを理解することができるであろう。すなわち、本発明の技術的範囲は、特許請求の範囲に基づいて定められ、発明を実施するための最良の形態により制限されるものではない。   As described above, the present invention has been described with reference to the preferred embodiments. However, those skilled in the relevant technical field should not depart from the spirit and scope of the present invention described in the claims. Thus, it will be understood that the present invention can be variously modified and changed. In other words, the technical scope of the present invention is defined based on the claims, and is not limited by the best mode for carrying out the invention.

110:映像分割基盤超高解像度ビデオ符号化器
120:目標ビット率計算機
110: Video division based ultra-high resolution video encoder 120: Target bit rate calculator

Claims (18)

第1ビデオ映像を前記第1ビデオ映像よりも低解像度である複数の第2ビデオ映像に分割するステップと、
前記複数の第2ビデオ映像それぞれに対応する目標ビット率を計算するステップと、
前記計算されたそれぞれの目標ビット率に基づいて前記それぞれの分割された複数の第2ビデオ映像を符号化するステップと、
前記符号化された複数の第2ビデオ映像のストリームを多重化して1つのビデオ映像ストリームを出力するステップと、
を含むことを特徴とする映像分割基盤超高解像度ビデオ符号化装置の制御方法。
Dividing the first video image into a plurality of second video images having a lower resolution than the first video image;
Calculating a target bit rate corresponding to each of the plurality of second video images;
Encoding each of the plurality of divided second video images based on the calculated target bit rates;
Multiplexing the plurality of encoded second video image streams to output one video image stream;
A method for controlling a video segmentation-based ultra-high resolution video encoding apparatus, comprising:
前記複数の第2ビデオ映像それぞれに対応する目標ビット率を計算するステップは、
前記複数の第2ビデオ映像それぞれの複雑度およびオブジェクトの存在有無のうちの少なくともいずれか1つに基づいて、前記複数の第2ビデオ映像のそれぞれの目標ビット率を計算するステップ、
であることを特徴とする請求項1に記載の映像分割基盤超高解像度ビデオ符号化装置の制御方法。
Calculating a target bit rate corresponding to each of the plurality of second video images;
Calculating a target bit rate of each of the plurality of second video images based on at least one of the complexity of each of the plurality of second video images and the presence / absence of an object;
The method of controlling a video segmentation-based ultra-high resolution video encoding apparatus according to claim 1, wherein:
前記計算されたそれぞれの目標ビット率に基づいて前記それぞれの分割された複数の第2ビデオ映像を符号化するステップは、
前記それぞれの分割された複数の第2ビデオ映像を、複数の符号化器を用いてそれぞれ符号化するステップ、
であることを特徴とする請求項1に記載の映像分割基盤超高解像度ビデオ符号化装置の制御方法。
Encoding each of the plurality of divided second video images based on the calculated target bit rate,
Encoding each of the plurality of divided second video images using a plurality of encoders;
The method of controlling a video segmentation-based ultra-high resolution video encoding apparatus according to claim 1, wherein:
前記第2ビデオ映像は、
前記第1ビデオ映像における前記第2ビデオ映像の位置情報を含むことを特徴とする請求項1に記載の映像分割基盤超高解像度ビデオ符号化装置の制御方法。
The second video image is
The method of claim 1, comprising position information of the second video image in the first video image.
前記複数の第2ビデオ映像それぞれに対応する目標ビット率を計算するステップは、
前記第1ビデオ映像のイントラピクチャを低解像度イントラピクチャに変換するステップと、
前記低解像度イントラピクチャおよび前記低解像度イントラピクチャに対して既に計算された目標ビット率に基づいて、前記複数の第2ビデオ映像のそれぞれの目標ビット率を計算するステップと、
を含むことを特徴とする請求項1に記載の映像分割基盤超高解像度ビデオ符号化装置の制御方法。
Calculating a target bit rate corresponding to each of the plurality of second video images;
Converting an intra picture of the first video image into a low resolution intra picture;
Calculating a target bit rate of each of the plurality of second video images based on a target bit rate already calculated for the low resolution intra picture and the low resolution intra picture;
The method of controlling a video segmentation-based ultra-high resolution video encoding apparatus according to claim 1, further comprising:
前記低解像度イントラピクチャに対して既に計算された目標ビット率は、
前記第1ビデオ映像の符号化に対する目標ビット率および前記第1ビデオ映像のイントラピクチャを低解像度に変換するときの縮小比率に基づいて計算することを特徴とする請求項5に記載の映像分割基盤超高解像度ビデオ符号化装置の制御方法。
The target bit rate already calculated for the low resolution intra picture is:
6. The video segmentation base according to claim 5, wherein calculation is performed based on a target bit rate for encoding the first video image and a reduction ratio when converting an intra picture of the first video image to a low resolution. A method for controlling an ultra-high resolution video encoding apparatus.
前記複数の第2ビデオ映像それぞれに対応する目標ビット率を計算するステップは、
前記第1ビデオ映像のイントラピクチャおよび前記第1ビデオ映像の符号化に対して既に設定された目標ビット率に基づいて、前記複数の第2ビデオ映像のそれぞれのビット率を計算するステップ、
であることを特徴とする請求項1に記載の映像分割基盤超高解像度ビデオ符号化装置の制御方法。
Calculating a target bit rate corresponding to each of the plurality of second video images;
Calculating a bit rate of each of the plurality of second video images based on an intra picture of the first video image and a target bit rate already set for encoding of the first video image;
The method of controlling a video segmentation-based ultra-high resolution video encoding apparatus according to claim 1, wherein:
1つのビデオストリームの入力を受け、前記ビデオストリームのヘッダーに含まれた分割されたビデオの位置情報に基づいて前記ビデオストリームを複数の符号化ストリームで逆多重化するステップと、
前記複数の符号化ストリームを復号化して複数のビデオ映像を生成するステップと、
前記複数のビデオ映像を出力するステップと、
を含むことを特徴とする映像分割基盤超高解像度ビデオ復号化装置の制御方法。
Receiving an input of one video stream, and demultiplexing the video stream with a plurality of encoded streams based on position information of the divided video included in a header of the video stream;
Decoding the plurality of encoded streams to generate a plurality of video images;
Outputting the plurality of video images;
A method for controlling a video segmentation-based ultra-high resolution video decoding apparatus, comprising:
前記生成された複数のビデオ映像を結合して1つのビデオ映像を生成するステップ、
をさらに含むことを特徴とする請求項8に記載の映像分割基盤超高解像度ビデオ復号化装置の制御方法。
Combining the plurality of generated video images to generate one video image;
The method according to claim 8, further comprising: a video segmentation-based ultra-high resolution video decoding device.
第1ビデオ映像を前記第1ビデオ映像よりも低解像度である複数の第2ビデオ映像に分割する映像分割器と、
前記複数の第2ビデオ映像それぞれに対応する目標ビット率を計算する目標ビット率計算機と、
前記計算されたそれぞれの目標ビット率に基づいて前記それぞれの分割された複数の第2ビデオ映像を符号化する符号化器と、
前記符号化された複数の第2ビデオ映像のストリームを多重化して1つのビデオ映像ストリームを出力する多重化器と、
を備えることを特徴とする映像分割基盤超高解像度ビデオ符号化装置。
A video divider for dividing the first video image into a plurality of second video images having a lower resolution than the first video image;
A target bit rate calculator for calculating a target bit rate corresponding to each of the plurality of second video images;
An encoder that encodes the plurality of divided second video images based on the calculated target bit rates;
A multiplexer that multiplexes the plurality of encoded second video image streams and outputs one video image stream;
A video segmentation-based ultra-high resolution video encoding apparatus comprising:
前記目標ビット率計算機は、
前記複数の第2ビデオ映像の複雑度およびオブジェクトの存在有無のうちの少なくともいずれか1つに基づいて、前記複数の第2ビデオ映像のそれぞれのビット率を計算することを特徴とする請求項10に記載の映像分割基盤超高解像度ビデオ符号化装置。
The target bit rate calculator is:
The bit rate of each of the plurality of second video images is calculated based on at least one of the complexity of the plurality of second video images and the presence / absence of an object. The video division-based ultra-high resolution video encoding device described in 1.
前記符号化器は、
複数で構成され、前記それぞれの分割された複数の第2ビデオ映像をそれぞれ符号化することを特徴とする請求項10に記載の映像分割基盤超高解像度ビデオ符号化装置。
The encoder is
11. The video division based ultra-high resolution video encoding apparatus according to claim 10, wherein the video division-based ultra-high resolution video encoding device is configured to encode a plurality of the divided second video images.
前記第2ビデオ映像は、
前記第1ビデオ映像における前記第2ビデオ映像の位置情報を含むことを特徴とする請求項10に記載の映像分割基盤超高解像度ビデオ符号化装置。
The second video image is
The apparatus of claim 10, further comprising position information of the second video image in the first video image.
前記目標ビット率計算機は、
前記第1ビデオ映像のイントラピクチャを低解像度イントラピクチャに変換するダウンコンバータと、
前記低解像度イントラピクチャおよび前記低解像度イントラピクチャに対して既に計算された目標ビット率に基づいて、前記複数の第2ビデオ映像のそれぞれの目標ビット率を計算するイントラ符号化器と、
を備えることを特徴とする請求項10に記載の映像分割基盤超高解像度ビデオ符号化装置。
The target bit rate calculator is:
A down converter for converting an intra picture of the first video image into a low resolution intra picture;
An intra encoder that calculates a target bit rate of each of the plurality of second video images based on a target bit rate that has already been calculated for the low resolution intra picture and the low resolution intra picture;
The video division-based ultra-high resolution video encoding apparatus according to claim 10, comprising:
前記低解像度イントラピクチャに対して既に計算された目標ビット率は、
前記第1ビデオ映像の符号化に対する目標ビット率および前記第1ビデオ映像のイントラピクチャを低解像度に変換するときの縮小比率に基づいて計算することを特徴とする請求項14に記載の映像分割基盤超高解像度ビデオ符号化装置。
The target bit rate already calculated for the low resolution intra picture is:
The image division base according to claim 14, wherein the calculation is based on a target bit rate for encoding the first video image and a reduction ratio when converting an intra picture of the first video image to a low resolution. Ultra-high resolution video encoder.
前記目標ビット率計算機は、
前記第1ビデオ映像のイントラピクチャおよび前記第1ビデオ映像の符号化に対して既に設定された目標ビット率に基づいて、前記複数の第2ビデオ映像のそれぞれのビット率を計算するイントラ符号化器、
を備えることを特徴とする請求項10に記載の映像分割基盤超高解像度ビデオ符号化装置。
The target bit rate calculator is:
An intra encoder that calculates a bit rate of each of the plurality of second video images based on an intra picture of the first video image and a target bit rate already set for the encoding of the first video image ,
The video division-based ultra-high resolution video encoding apparatus according to claim 10, comprising:
1つのビデオストリームの入力を受け、前記ビデオストリームのヘッダーに含まれた分割されたビデオの位置情報に基づいて前記ビデオストリームを複数の符号化ストリームで逆多重化する逆多重化器と、
前記複数の符号化ストリームを復号化して複数のビデオ映像を生成する復号化器と、
前記複数のビデオ映像を出力する出力部と、
を備えることを特徴とする映像分割基盤超高解像度ビデオ復号化装置。
A demultiplexer that receives an input of one video stream and demultiplexes the video stream with a plurality of encoded streams based on position information of the divided video included in a header of the video stream;
A decoder that decodes the plurality of encoded streams to generate a plurality of video images;
An output unit for outputting the plurality of video images;
A video segmentation-based ultra-high resolution video decoding device comprising:
前記生成された複数のビデオ映像を結合して1つのビデオ映像を生成する映像合体器、
をさらに備えることを特徴とする請求項17に記載の映像分割基盤超高解像度ビデオ復号化装置。
A video combiner that combines the plurality of generated video images to generate one video image;
The video division-based ultra-high resolution video decoding apparatus according to claim 17, further comprising:
JP2009202689A 2008-12-19 2009-09-02 Image splitting base ultrahigh resolution video encoding and decoding apparatus and method of controlling the same Pending JP2010148089A (en)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR20080130492A KR101173335B1 (en) 2008-12-19 2008-12-19 Image partition based ultra-high definition video encoder and decoder and controlling method for the same

Publications (1)

Publication Number Publication Date
JP2010148089A true JP2010148089A (en) 2010-07-01

Family

ID=42369143

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2009202689A Pending JP2010148089A (en) 2008-12-19 2009-09-02 Image splitting base ultrahigh resolution video encoding and decoding apparatus and method of controlling the same

Country Status (2)

Country Link
JP (1) JP2010148089A (en)
KR (1) KR101173335B1 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8898718B2 (en) 2011-01-27 2014-11-25 International Business Machines Corporation Systems and methods for managed video services at edge-of-the-network
CN112911346A (en) * 2021-01-27 2021-06-04 北京淳中科技股份有限公司 Video source synchronization method and device

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101130210B1 (en) * 2010-08-26 2012-03-28 에이스텔 주식회사 System for Ultra High-Definition image using chroma-key
KR101146331B1 (en) * 2010-08-26 2012-05-21 에이스텔 주식회사 Digital Video Recorder system using Ultra High Definition module
KR101148044B1 (en) * 2010-12-03 2012-05-24 에이스텔 주식회사 System of providing sub information for ultra high-definition image service and the method thereof
EP2712191A4 (en) * 2011-05-19 2015-06-24 Lg Electronics Inc Video stream transmitting device, video stream receiving device, video stream transmitting method, and video stream receiving method
EP2739052A4 (en) 2011-07-26 2015-01-21 Lg Electronics Inc Apparatus for transmitting video stream, apparatus for receiving video stream, method for transmitting video stream, and method for receiving video stream
KR101259449B1 (en) * 2012-01-03 2013-04-29 국방과학연구소 An apparatus and method for digital picture signalprocessing of high-speed camera
KR20130099723A (en) * 2012-02-29 2013-09-06 전자부품연구원 Input-output system for eding and playing of uhd image contents
KR20130101412A (en) * 2012-03-05 2013-09-13 한국전자통신연구원 Method for video rate control and apparatus thereof
CN104427326A (en) 2013-09-06 2015-03-18 北京三星通信技术研究有限公司 Three-dimensional display method and equipment in integral imaging display system
KR20160080929A (en) 2014-12-30 2016-07-08 한국전자통신연구원 Apparatus and method of adaptive ultra high definition multimedia streaming service based on cloud
GB2542637A (en) * 2015-09-28 2017-03-29 Esaturnus Nv Ultra low latency UHD and 3D networked video communication applicable to gigabit ethernet
KR101977726B1 (en) 2015-11-17 2019-05-14 한국전자통신연구원 APPARATUS AND METHOD FOR Virtual Desktop Services

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11122610A (en) * 1997-10-17 1999-04-30 Toshiba Corp Image coding method, image decoding method and system for them
JP2000261797A (en) * 1999-03-04 2000-09-22 Nippon Telegr & Teleph Corp <Ntt> Method for coding parallel software picture and recording medium recording parallel software picture coding program
JP2003299090A (en) * 2002-04-02 2003-10-17 Sony Corp Image encoder and image encoding method, image recorder, and image transmitter
JP2007013864A (en) * 2005-07-04 2007-01-18 Pioneer Electronic Corp Moving image encoding apparatus, moving image encoding method, and moving image encoding program

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101345295B1 (en) 2007-06-11 2013-12-27 삼성전자주식회사 Rate control method and apparatus for intra-only video sequence coding

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11122610A (en) * 1997-10-17 1999-04-30 Toshiba Corp Image coding method, image decoding method and system for them
JP2000261797A (en) * 1999-03-04 2000-09-22 Nippon Telegr & Teleph Corp <Ntt> Method for coding parallel software picture and recording medium recording parallel software picture coding program
JP2003299090A (en) * 2002-04-02 2003-10-17 Sony Corp Image encoder and image encoding method, image recorder, and image transmitter
JP2007013864A (en) * 2005-07-04 2007-01-18 Pioneer Electronic Corp Moving image encoding apparatus, moving image encoding method, and moving image encoding program

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8898718B2 (en) 2011-01-27 2014-11-25 International Business Machines Corporation Systems and methods for managed video services at edge-of-the-network
CN112911346A (en) * 2021-01-27 2021-06-04 北京淳中科技股份有限公司 Video source synchronization method and device

Also Published As

Publication number Publication date
KR20100071690A (en) 2010-06-29
KR101173335B1 (en) 2012-08-10

Similar Documents

Publication Publication Date Title
JP2010148089A (en) Image splitting base ultrahigh resolution video encoding and decoding apparatus and method of controlling the same
US20230276039A1 (en) Method and system for encoding a video data signal, encoded video data signal, method and system for decoding a video data signal
JP4389883B2 (en) Encoding apparatus, encoding method, encoding method program, and recording medium recording the encoding method program
JP6305279B2 (en) Video compression device and video playback device
JP4708263B2 (en) Image decoding apparatus and image decoding method
JP4917148B2 (en) Bitstream conversion method, bitstream conversion apparatus, bitstream combination apparatus, bitstream division program, bitstream conversion program, and bitstream combination program
US20140211861A1 (en) Method and system for providing high definition (hd) broadcasting service and ultra high definition (uhd) broadcasting service
KR20120018281A (en) Apparatus and method for encoding/decoding multi-layer videos
US20080008241A1 (en) Method and apparatus for encoding/decoding a first frame sequence layer based on a second frame sequence layer
JP2007110348A (en) Moving picture coding apparatus, moving picture decoding apparatus, moving picture coding method, moving picture decoding method, moving picture coding program, and moving picture decoding program
JP2013258651A (en) Moving image encoder, moving image decoder, moving image encoding method, moving image decoding method, and program
US20070242747A1 (en) Method and apparatus for encoding/decoding a first frame sequence layer based on a second frame sequence layer
JP2014175857A (en) Video processing device and video processing method
JP2008236120A (en) Decoder and coder
KR20160008011A (en) Apparatus for Processing super resolution image
KR102312668B1 (en) Video transcoding system
JP5478346B2 (en) Format conversion apparatus, video distribution apparatus, multiplexing apparatus, format conversion method, video distribution method, and program
WO2005096636A1 (en) Encoded signal demultiplexing device, encoded signal multiplexing device, and encoded signal demultiplexing/multiplexing system
JP2006339787A (en) Coding apparatus and decoding apparatus
JP2005176068A (en) Motion image distribution system and method therefor
JP5361799B2 (en) Video encoding device, video decoding device, video encoding method, video decoding method, and program
JP5362810B2 (en) Moving picture encoding apparatus, moving picture decoding apparatus, moving picture encoding method, moving picture decoding method, moving picture encoding program, and moving picture decoding program
KR20140095948A (en) Method and system for providing high definition broadcasting service and ultra high definition broadcasting service
JP2015142268A (en) Scalable transmission device, scalable reception device, scalable transmission/reception system, scalable transmission method, scalable reception method and program
KR20140095936A (en) Method and system for providing compatible realistic broadcasting

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20111011

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20111014

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120116

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20120803