KR100557618B1 - Bit rate control system based on object - Google Patents

Bit rate control system based on object Download PDF

Info

Publication number
KR100557618B1
KR100557618B1 KR1020030000232A KR20030000232A KR100557618B1 KR 100557618 B1 KR100557618 B1 KR 100557618B1 KR 1020030000232 A KR1020030000232 A KR 1020030000232A KR 20030000232 A KR20030000232 A KR 20030000232A KR 100557618 B1 KR100557618 B1 KR 100557618B1
Authority
KR
South Korea
Prior art keywords
quantization parameter
new
parameter value
region
bit rate
Prior art date
Application number
KR1020030000232A
Other languages
Korean (ko)
Other versions
KR20040062732A (en
Inventor
박기수
이진수
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to KR1020030000232A priority Critical patent/KR100557618B1/en
Publication of KR20040062732A publication Critical patent/KR20040062732A/en
Application granted granted Critical
Publication of KR100557618B1 publication Critical patent/KR100557618B1/en

Links

Images

Classifications

    • EFIXED CONSTRUCTIONS
    • E06DOORS, WINDOWS, SHUTTERS, OR ROLLER BLINDS IN GENERAL; LADDERS
    • E06BFIXED OR MOVABLE CLOSURES FOR OPENINGS IN BUILDINGS, VEHICLES, FENCES OR LIKE ENCLOSURES IN GENERAL, e.g. DOORS, WINDOWS, BLINDS, GATES
    • E06B9/00Screening or protective devices for wall or similar openings, with or without operating or securing mechanisms; Closures of similar construction
    • E06B9/24Screens or other constructions affording protection against light, especially against sunshine; Similar screens for privacy or appearance; Slat blinds
    • E06B9/26Lamellar or like blinds, e.g. venetian blinds
    • E06B9/36Lamellar or like blinds, e.g. venetian blinds with vertical lamellae ; Supporting rails therefor
    • EFIXED CONSTRUCTIONS
    • E06DOORS, WINDOWS, SHUTTERS, OR ROLLER BLINDS IN GENERAL; LADDERS
    • E06BFIXED OR MOVABLE CLOSURES FOR OPENINGS IN BUILDINGS, VEHICLES, FENCES OR LIKE ENCLOSURES IN GENERAL, e.g. DOORS, WINDOWS, BLINDS, GATES
    • E06B9/00Screening or protective devices for wall or similar openings, with or without operating or securing mechanisms; Closures of similar construction
    • E06B9/24Screens or other constructions affording protection against light, especially against sunshine; Similar screens for privacy or appearance; Slat blinds
    • E06B9/26Lamellar or like blinds, e.g. venetian blinds
    • E06B9/38Other details
    • E06B9/386Details of lamellae

Abstract

본 발명은 영상 데이터 전송시에 오브젝트의 중요도에 따라 양자화 파라미터를 매크로 블록마다 다르게 설정하여 비트율을 제어하는 방법이다.The present invention is a method of controlling a bit rate by setting different quantization parameters for each macro block according to the importance of an object when transmitting image data.

본 발명은 네트워크 기반으로 멀티미디어 통신을 할 때 오브젝트 세그멘테이션 결과를 바탕으로 중요한 영역과 그렇지 않은 영역을 분리하고, 양자화 파라미터를 계산한 다음, 계산된 양자화 파라미터 값을 기준으로 가중치를 적용하여 사용자가 관심이 있는 영역 혹은 사용자에게 중요한 영역(예를 들면 사람영역이나 사람의 얼굴영역)과 상대적으로 관심이 없는 영역이나 중요하지 않은 영역(예를 들면 배경 영역)의 양자화 파라미터 값을 각각 다르게 할당하여 부호화한다.According to the present invention, when a network-based multimedia communication is performed, a user is interested in separating an important area from an unsegmented area based on an object segmentation result, calculating a quantization parameter, and applying a weight based on the calculated quantization parameter value. The quantization parameter values of an area or an area important to the user (eg, a human area or a face area of the user) and an area of relatively uninterested or non-important area (eg, a background area) are allocated and encoded differently.

영상 부호화, 비트율 제어, 오브젝트, 양자화 파라미터Image Coding, Bit Rate Control, Objects, Quantization Parameters

Description

오브젝트 기반 비트율 제어방법 및 장치{BIT RATE CONTROL SYSTEM BASED ON OBJECT}BIT RATE CONTROL SYSTEM BASED ON OBJECT}

도1은 일반적인 비트율 제어방법의 계통도1 is a schematic diagram of a general method of controlling a bit rate

도2는 TMN10 비트율 조절 방법의 계통도Figure 2 is a schematic diagram of the TMN10 bit rate adjustment method

도3은 본 발명에 따른 비트율 제어장치의 계통도3 is a schematic diagram of a bit rate control apparatus according to the present invention;

도4는 본 발명에 따른 비트율 제어방법의 플로우차트4 is a flowchart of a bit rate control method according to the present invention;

도5는 본 발명에서 영역별 양자화 파라미터 할당 방법의 플로우차트5 is a flowchart of a method for allocating quantization parameters for regions in the present invention;

도6은 본 발명의 오브젝트 세그멘테이션의 예를 나타낸 도면6 illustrates an example of object segmentation of the present invention.

본 발명은 매크로 블록 단위로 영상신호를 부호화하는 시스템에서 오브젝트영역과 배경영역에 따라 해당 블록 부호화를 위한 양자화 파라미터(QP)를 각각 적응적으로 설정하여 비트율(bit rate)을 제어하는 방법에 관한 것이다.The present invention relates to a method of controlling a bit rate by adaptively setting a quantization parameter (QP) for block coding according to an object region and a background region in a system for encoding an image signal in macroblock units. .

대역폭이 제한된 채널을 통해 많은 양의 정보를 포함하는 영상 데이터를 전송할 때 네트워크의 상황에 따라 비트율을 제어한다. 영상 데이터 전송을 위한 비트율 제어는 일반적으로 부호화 파라미터를 정하는 제어 기법에 의하여 이루어진 다. 비트율 제어 기법에는 입력 영상의 특성을 고려하여 비트율을 할당하는 방식인 포워드(forward) 제어 기법과, 버퍼의 상태 전송율 등과 같이 소스 인코더(source encoder)의 후단 부의 특성을 고려하여 부호화기의 파라미터를 결정하는 백워드(backward)제어 기법이 있다.When transmitting video data including a large amount of information through a bandwidth-limited channel, the bit rate is controlled according to network conditions. Bit rate control for image data transmission is generally achieved by a control technique that determines coding parameters. In the bit rate control technique, a forward control technique that allocates a bit rate in consideration of characteristics of an input image and a parameter of an encoder are determined in consideration of characteristics of a rear end of a source encoder such as a buffer state transmission rate. There is a backward control technique.

화상통신이나 비디오 폰과 같은 저속 전송 매체용 영상 인코더는 압축 효율 면에서 우수한 성능을 가져야 하며 인코더의 복잡도도 낮아야 한다. 그래서 대부분의 저속 전송 매체용 영상 부호화기를 위한 비트율 제어 기법은 버퍼의 상태를 고려한 양자화 파라미터(QP)를 조정하여 비트율을 제어하는 백워드 기법을 주로 사용하고 있다.Video encoders for low speed transmission media such as video communications and video phones should have excellent performance in terms of compression efficiency and low complexity of the encoder. Therefore, most of the bit rate control schemes for the video encoder for a low-speed transmission medium mainly use a backward technique for controlling the bit rate by adjusting the quantization parameter (QP) considering the state of the buffer.

도1은 일반적인 비트율 제어기법을 설명하기 위한 계통도로서, 입력 영상을 받아 들여 특성을 분석하는 특성 분석기(101)와, 부호화기(102), 상기 부호화된 신호를 비트열로 출력하는 버퍼(103), 입력 영상 신호와 비트열 출력 버퍼의 상태에 기초하여 목표 비트(target bits)를 설정하는 목표 비트 할당 설정기(104) 및 할당된 목표 비트로 부호화율을 조정하는 비트율 조정기(105)를 포함한다. 1 is a schematic diagram illustrating a general bit rate control method, comprising: a characteristic analyzer 101 for receiving an input image and analyzing a characteristic; an encoder 102; a buffer 103 for outputting the encoded signal as a bit string; A target bit allocation setter 104 for setting target bits based on the state of the input video signal and the bit string output buffer, and a bit rate adjuster 105 for adjusting the coding rate with the assigned target bits.

특성 분석기(101)는 입력된 영상 데이터의 특성을 분석하여 목표 비트 할당 설정기(104)에 제공하고, 목표 비트 할당 설정기(104)는 입력 영상의 특성과 출력 버퍼(103)의 상태 정보를 입력받아 목표 비트를 설정한다. 비트율 조정기(105)는 목표 비트 할당 설정기(104)에서 설정된 목표 비트에 따라 비트율 부호화기(102)의 부호화 비트율을 조정해 주며, 부호화기(102)는 특성 분석기(101)를 거친 영상 데이터를 조정된 비트율에 맞춰서 부호화하여 출력 버퍼(103)에 저장한다. 출력 버퍼 는 가변 비트열을 제한된 대역폭을 갖는 채널을 통해 전송하기 위해서 출력 비트열을 일정한 속도로 내보낼 수 있도록 조절하게 되며, 또한 비트열 복원 중에 발생할 수 있는 버퍼 넘침이나 버퍼 결핍을 방지하는 기능을 수행한다. The characteristic analyzer 101 analyzes the characteristic of the input image data and provides the characteristic to the target bit allocation setter 104, and the target bit allocation setter 104 provides the characteristic of the input image and the state information of the output buffer 103. It takes input and sets target bit. The bit rate adjuster 105 adjusts the encoding bit rate of the bit rate encoder 102 according to the target bit set in the target bit allocation setter 104, and the encoder 102 adjusts the image data that has passed through the characteristic analyzer 101. The data is encoded in accordance with the bit rate and stored in the output buffer 103. The output buffer adjusts the output bit stream at a constant speed to transmit the variable bit stream through a channel having a limited bandwidth, and also prevents buffer overflow or buffer deficiency that may occur during bit stream recovery. do.

일반적으로 비트율의 조정은 양자화 파라미터(QP)와 같은 부호화 파라미터를 사용하여 조정할 수 있는데, 예를 들어 양자화 파라미터 값을 크게 설정할 경우 비트율은 낮아지는 반면 화질은 저하되고, 반대로 양자화 파라미터 값을 작게 설정할 경우 비트율은 높아지는 반면 화질은 좋아진다. 이와 같이 화질과 비트율은 서로 상반관계에 있으므로 비트율이 떨어지면 화질 저하가 발생한다. In general, the adjustment of the bit rate can be adjusted by using a coding parameter such as a quantization parameter (QP). For example, when the quantization parameter value is set large, the bit rate is lowered but the image quality is lowered. The higher the bit rate, the better the picture quality. As described above, since the image quality and the bit rate are in mutual relation with each other, the image quality deteriorates when the bit rate drops.

양자화 파라미터를 이용한 비트율 조정 방법으로 가장 많이 알려진 방법은 바로 H.263을 제정한 표준 그룹에서 테스트 모델로 사용한 TMN에서 사용하고 있는 비트율 조정 방법이다.The most well-known method of bit rate adjustment using quantization parameters is the bit rate adjustment method used in the TMN used as a test model in the standard group that established H.263.

TMN은 테스트 모델의 버전에 따라 TMN뒤에 숫자가 따라오는데, 그 중 TMN10은 H.263+에서 사용하고 있는 비트율 조절 방법으로 인코더로부터 생성되는 여러 가지 정보를 이용한다. 도2는 TMN10 비트율 조절 방법의 계통도이다.The TMN is followed by a number after the TMN, depending on the version of the test model, of which TMN10 uses a variety of information generated from the encoder as a bit rate control method used in H.263 +. 2 is a schematic diagram of a TMN10 bit rate adjustment method.

인코딩 초기화 단계(S201)는 버퍼 사이즈와 버퍼 레벨을 초기화하고 비트율 조절 모델에 사용되는 파라미터들을 초기화한다. 프레임 계층 비트율 조절 단계(S202)에서는 버퍼 상태를 체크하여 버퍼의 오버플로우를 방지하고 딜레이를 방지하기 위해 프레임을 기준 비트율 보다 작을 때까지 건너뛰게 된다. 참고적으로 TMN10 비트율 조절 방법은 실시간 전송을 목적으로 하고 있기 때문에 작은 버퍼를 사용하고 있다.The encoding initialization step S201 initializes the buffer size and the buffer level and initializes the parameters used in the bit rate adjustment model. In the frame layer bit rate adjustment step (S202), the frame is skipped until the frame is smaller than the reference bit rate in order to check the buffer state to prevent the overflow of the buffer and to prevent the delay. For reference, the TMN10 bit rate control method uses a small buffer because it is intended for real-time transmission.

MB(매크로블록) 계층 비트율 조절 단계(S203,S205)에서는 비트율 조절 모델을 기반으로 인코딩될 프레임 비트수를 예측하고, MB 단위로 QP를 조절하여 비트율 조절을 수행하면서 인코딩을 한다. 그리고 마지막으로 비트율 조절 모델로 사용된 파라미터들을 갱신하게 된다(S204).In the MB (macroblock) layer bit rate adjustment steps (S203 and S205), the number of frame bits to be encoded is predicted based on the bit rate adjustment model, and the encoding is performed while performing the bit rate adjustment by adjusting the QP in MB units. Finally, the parameters used as the bit rate adjustment model are updated (S204).

하지만 TMN10 비트율 조절 방법은 비트율 조절 모델을 사용하는데 있어서 이번 프레임과 현재 프레임과의 분산 등 계산량이 많이 요구되는 파라미터를 이용하게 되므로 계산량에 의존적인 시스템에서는 한계를 나타내게 된다. 게다가 MB 단위로 양자화 파라미터를 조절하게 되므로 경우에 따라서는 한 프레임 내에서 같은 객체 영역임에도 불구하고 일부분은 화질이 좋으나 다른 일부분은 화질이 떨어지는 화질의 이질감으로 인해 어색하게 느끼는 사용자도 발생할 수 있다. However, the TMN10 bit rate adjustment method uses a parameter that requires a large amount of computation, such as the variance between this frame and the current frame, in using the bit rate adjustment model. In addition, since the quantization parameter is adjusted in MB units, a user may feel awkward due to the heterogeneity of the image quality of a part having good image quality while the other part has a poor image quality even though the same object area is in one frame.

그러나 상기와 같은 비트율 제어 방법은 모든 영상에 대하여 하나의 수학적 모델(선형 모델, 비선형 모델, 리플라시안 모델, 지수형 모델, 가우시안 모델 등)을 제시하고 이를 따라 비트를 할당하기 때문에 입력 영상의 특성이나 입력 영상내의 중요 부분에 대해 최적의 부호화 파라미터를 결정할 수 없는 단점이 있다. 즉 중요한 영역이라도 네트워크 환경이 나빠짐으로 인해 비트율을 낮추면 화질이 저하되고, 중요하지 않은 영역이라도 네트워크 환경 변화에 따라 중요한 영역에 비해 높은 화질로 나타날 수도 있게 된다.However, the bit rate control method as described above presents one mathematical model (linear model, nonlinear model, replicalin model, exponential model, Gaussian model, etc.) for all images and assigns bits accordingly. However, there is a disadvantage in that an optimal coding parameter cannot be determined for an important part of the input image. In other words, if the bit rate is lowered due to the deterioration of the network environment even in an important area, the image quality may be deteriorated, and even in an unimportant area, the image quality may be higher than that of the important area.

이와 같은 비트율과 화질의 상관성은 화상 통신이나 비디오 폰 통신에서 고려의 대상이 된다. 즉, 사용자가 중요 영역 혹은 관심 영역의 화질 저하에 대해서는 그렇지 않은 영역의 화질 저하보다 민감하게 반응한다. 다시 말하면, 화면 전체 에 대한 화질보다는 중요 영역 혹은 관심 영역의 화질이 사용자가 느끼는 화질을 크게 좌우하게 되는 것이다. 그렇지만 일반적인 비트율 제어 방식에서는 출력 버퍼의 넘침이나 출력 버퍼의 결핍에 따라 양자화 파라미터를 조정하기 때문에 네트워크 상황에 따라 화질의 차이가 크고 화질 열화가 자주 일어나 사용자에게 충분한 화질을 제공하지 못한다.Such correlation between bit rate and image quality is considered in video communication and video phone communication. That is, the user reacts more sensitively to the deterioration of the image quality of the important area or the region of interest than the deterioration of the image quality of the non-region. In other words, the quality of the important region or the region of interest is determined by the user's image quality rather than the image quality of the entire screen. However, in the general bit rate control method, the quantization parameter is adjusted according to the overflow of the output buffer or the lack of the output buffer. Therefore, the image quality is large and the quality deterioration occurs frequently according to the network conditions, so that the user cannot provide sufficient image quality.

본 발명의 목적은 네트워크를 통하여 영상 데이터를 전송할 때 매크로 블록 단위의 양자화 파라미터를 오브젝트 영역과 배경영역에 대하여 각각 적응적으로 할당하여 비트율을 제어하는 방법 및 그 장치를 제공하는데 있다.An object of the present invention is to provide a method and apparatus for controlling a bit rate by adaptively allocating a quantization parameter in macroblock units to an object region and a background region when transmitting image data through a network.

특히 본 발명은 매크로 블록단위로 영상을 부호화하여 전송하는 시스템에 있어서, 오브젝트 세그멘테이션 결과를 바탕으로 영상을 오브젝트 영역과 배경 영역으로 나누어 각각의 영역에 적응적으로 양자화 파라미터를 할당하여 비트율을 제어함으로써, 상대적으로 중요하고 관심있는 영역의 화질을 높여줄 수 있도록 한 오브젝트 기반 비트율 제어방법 및 그 장치를 제공하는데 그 목적이 있다.Particularly, in the system for encoding and transmitting an image in macroblock units, the image is divided into an object region and a background region based on an object segmentation result, and the bit rate is controlled by adaptively assigning quantization parameters to each region. An object of the present invention is to provide an object-based bit rate control method and apparatus for improving image quality of a relatively important and interested area.

본 발명의 또 다른 목적은 중요한 영역과 중요하지 않은 영역의 양자화 파라미터를 차별적으로 적절하게 할당함으로써, 네트워크 환경이 나빠지더라도 중요하지 않은 영역의 화질을 우선적으로 떨어뜨림으로써 같은 비트율인 경우에 상대적으로 높은 화질을 유지할 수 있는 비트율 제어방법 및 그 장치를 제공하는데 있다.It is still another object of the present invention to properly assign quantization parameters of important and non-critical areas to differentiate them, thereby lowering the image quality of non-critical areas preferentially even if the network environment is deteriorated. A bit rate control method and apparatus for maintaining image quality are provided.

본 발명의 또 다른 목적은 화상 통신이나 비디오 폰 등의 네트워크 통신에서 영상이 오브젝트 영역과 배경 영역으로 분리되었을 때 일반적인 비트율 조절 알 고리즘으로 계산된 매크로블록 양자화 파라미터를(QP) AnnexT Modified Quantization 모드를 사용하여 오브젝트 양자화 파라미터(ROI_QP), 배경 양자화 파라미터(BG_QP)로 적절하게 할당하여 비트율을 제어하는 방법으로서, 입력 영상에서 관심 있는 영역 혹은 중요한 영역은 작은 양자화 파라미터를 이용하여 많은 비트를 할당하여 부호화하고, 관심 없는 영역 혹은 중요하지 않은 영역은 큰 양자화 파라미터를 이용하여 적은 비트를 할당하여 비트율을 제어하는 방법 및 그 장치를 제공하는데 있다.It is still another object of the present invention to use the Macroblock Quantization Parameter (QP) AnnexT Modified Quantization mode, which is calculated by a general bit rate control algorithm when an image is divided into an object region and a background region in a video communication or a network communication such as a video phone. As a method of appropriately allocating the object quantization parameter (ROI_QP) and the background quantization parameter (BG_QP) to control the bit rate, a region of interest or an important region of the input image is allocated by encoding a large number of bits using a small quantization parameter. An area of no interest or an area of insignificance is to provide a method and apparatus for controlling a bit rate by allocating a small bit using a large quantization parameter.

상기 목적을 달성하기 위한 본 발명의 오브젝트 기반 비트율 제어방법은, 입력 영상을 오브젝트 영역과 배경 영역으로 분리하는 단계, 양자화 파라미터 값(QP_new)을 계산하는 단계, 상기 계산된 양자화 파라미터 값(QP_new)의 범위에 따라 상기 오브젝트 영역의 양자화 파라미터 값(ROI_QP) 및 배경 영역의 양자화 파라미터 값(BG_QP)을 각각 할당하는 단계, 상기 할당된 양자화 파라미터 값(ROI_QP, BG_QP)에 따라 상기 오브젝트 영역 및 배경 영역의 해당 매크로 블록을 양자화하는 단계; 를 포함하여 이루어진 것을 특징으로 한다.In order to achieve the above object, the object-based bit rate control method of the present invention includes: separating an input image into an object region and a background region, calculating a quantization parameter value QP_new, and determining the calculated quantization parameter value QP_new. Allocating a quantization parameter value ROI_QP of the object region and a quantization parameter value BG_QP of a background region according to a range, and corresponding to the object region and the background region according to the assigned quantization parameter values ROI_QP and BG_QP. Quantizing the macro block; Characterized in that comprises a.

또한 상기 목적을 달성하기 위한 본 발명의 오브젝트 기반 비트율 제어장치는, 네트워크 환경에 따라서 전송할 비트율 산정 및 제어를 위하여 목표 비트수를 설정하는 수단, 입력 영상을 오브젝트 영역과 배경 영역으로 분리하는 수단, 상기 설정된 목표 비트수를 고려하여 양자화 파라미터 값(QP_new)을 계산하는 수단, 상기 계산된 양자화 파라미터 값(QP_new)의 범위에 따라 상기 오브젝트 영역의 양자 화 파라미터 값(ROI_QP) 및 배경 영역의 양자화 파라미터 값(BG_QP)을 할당하는 수단, 상기 할당된 각각의 영역에 해당하는 매크로 블록마다 해당 양자화 파라미터 값을 적용하여 입력 영상을 양자화하는 수단; 을 포함하여 이루어지는 것을 특징으로 한다.In addition, the object-based bit rate control apparatus of the present invention for achieving the above object, the means for setting the target number of bits for bit rate calculation and control according to the network environment, means for separating the input image into the object area and the background area, Means for calculating the quantization parameter value QP_new in consideration of the set target bit number, the quantization parameter value ROI_QP of the object region and the quantization parameter value of the background region according to the calculated range of the quantization parameter value QP_new. Means for allocating BG_QP), and means for quantizing an input image by applying a corresponding quantization parameter value for each macroblock corresponding to each of the allocated areas; Characterized in that comprises a.

이하, 첨부된 도면을 참조하여 본 발명의 오브젝트 기반 비트율 제어 기법을 설명한다.Hereinafter, an object-based bit rate control scheme of the present invention will be described with reference to the accompanying drawings.

[오브젝트 기반 비트율 제어장치 실시예][Object-based bit rate control device embodiment]

도3은 본 발명의 오브젝트 기반으로 양자화 파라미터 값을 조절하여 비트율을 제어하는 기법의 계통도를 보여준다. 타겟 비트 설정기(302)는 오브젝트 세그멘테이션(Object Segmentation)을 수행한 결과(301) 및 출력버퍼(306)의 상태를 체크한 결과로부터 목표 비트량을 설정한다. 양자화 파라미터 설정기(303)는 상기 타겟 비트 설정기(302)로부터 설정된 목표 비트량과 오브젝트 세그멘테이션 결과를 입력으로 하여 오브젝트 영역의 양자화 파라미터(ROI_QP)와 배경 영역의 양자화 파라미터(BG_QP)를 각각 적응적으로 설정한다. 양자화 모드 설정기(304)는 양자화할 매크로 블록이 상기 오브젝트 영역과 배경 영역의 경계에 속하는지를 판단하여 영역 경계에서는 arbitrary QUANT selection 모드를 사용하여 양자화가 이루어지도록 설정한다. 양자화기(305)는 상기 배경영역, 오브젝트 영역, 경계영역 등에 따라 설정된 양자화 파라미터(QP)에 따라 입력 영상에 대한 양자화를 수행하고, 출력 버퍼(306)는 양자화된 영상신호를 비트 스트림으로 출력하게 된다.3 shows a schematic diagram of a technique for controlling a bit rate by adjusting a quantization parameter value based on an object of the present invention. The target bit setter 302 sets the target bit amount from the result 301 of performing object segmentation and the result of checking the state of the output buffer 306. The quantization parameter setter 303 inputs the target bit amount and the object segmentation result set by the target bit setter 302 to adaptively apply the quantization parameter ROI_QP of the object region and the quantization parameter BG_QP of the background region, respectively. Set to. The quantization mode setter 304 determines whether the macroblock to be quantized belongs to the boundary between the object region and the background region, and sets the quantization using the arbitrary QUANT selection mode at the region boundary. The quantizer 305 performs quantization on the input image according to the quantization parameter QP set according to the background region, the object region, the boundary region, and the like, and the output buffer 306 outputs the quantized image signal as a bit stream. do.

도3의 양자화 파라미터를 이용한 오브젝트/배경 분리정보 기반 비트율 제어 기법은 네트워크를 통해서 멀티미디어 통신을 수행할 때, 출력 버퍼에서 들어온 결과를 바탕으로 목표 비트를 설정한 후, 오브젝트 세그멘테이션 결과를 바탕으로 영상에서 중요한 영역과 그렇지 않은 영역에 따라 매크로 블록 단위로 서로 다른 양자화 파라미터를 지정하는 기법으로서, 다음의 기술에 근거한다.The bit rate control technique based on object / background separation information using the quantization parameter of FIG. 3 sets a target bit based on a result from an output buffer and performs image segmentation based on an object segmentation result. As a technique of specifying different quantization parameters in macroblock units according to an important region and a non-critical region, it is based on the following technique.

H.263이나 MPEG1/2와 같은 동영상 표준에 의하면 주어진 영상의 각 프레임은 16 ×16 크기의 부분 영역인 매크로 블록 단위로 부호화된다. 각 매크로 블록의 밝기 성분과 색상 성분은 DCT(Discrete Cosine Transform)을 거친 후 계수 값들을 양자화하여 각각 N개의 비트로 표현하게 된다. 양자화된 값은 다시 VLC(Variable Length Coding)에 의해 부호화된다. 이 때 양자화를 수행하는 방법을 결정하는 것이 양자화 파라미터로서 양자화 파라미터보다 작은 수의 계수 값은 '0'이 된다. 따라서 양자화 파라미터 값이 크면 '0'으로 변환되는 계수가 증가하여 VLC에 의해 부호화된 결과 비트 수가 작아지는 대신 양자화로 인한 정보의 손실은 커짐으로써 화질 저하가 발생하게 되고, 반대로 양자화 파라미터 값이 작으면 양자화로 인한 정보의 손실은 작아지고 화질은 향상되지만 제한된 대역폭의 네트워크를 통해 전송되는 데이터의 부담은 증가한다.According to a moving picture standard such as H.263 or MPEG1 / 2, each frame of a given picture is encoded in macroblock units, which are 16 × 16 sub-regions. The brightness component and the color component of each macro block go through a discrete cosine transform (DCT) and quantize coefficient values to represent N bits. The quantized value is again encoded by Variable Length Coding (VLC). At this time, determining the method of performing the quantization is a quantization parameter, the number of coefficients smaller than the quantization parameter is '0'. Therefore, if the value of the quantization parameter is large, the coefficient converted to '0' is increased, resulting in a loss of information due to quantization instead of a small number of bits as a result of encoding by the VLC. Information loss due to quantization is reduced and image quality is improved, but the burden of data transmitted over a limited bandwidth network is increased.

따라서, 본 발명에서는 전송할 영상에서 관심 있는 영역 혹은 중요한 영역을 분리하고, 관심 있거나 중요한 영역에 대해서는 상대적으로 양자화 파라미터 값을 작게 설정하여 화질을 높이는 한편, 관심 없거나 중요하지 않은 영역에 대해서는 상대적으로 양자화 파라미터 값을 크게 설정하여 데이터 전송의 부담을 줄여주는 기법을 제안하는 것이다.Accordingly, in the present invention, the region of interest or the important region of the image to be transmitted is separated, and the quantization parameter value is set relatively small for the region of interest or important to enhance the image quality, while the quantization parameter is relatively relatively for the region of no interest or importance. We propose a technique that reduces the burden of data transmission by setting a large value.

입력 영상에 대한 세그멘테이션 결과(301)는 입력 영상에서 중요한 영역과 그렇지 않은 영역에 대한 정보를 제공한다. 오브젝트 세그멘테이션은 영상 입력 영상에서 오브젝트를 분리하는 기술로서, 사용자와 배경 혹은 여러 개의 오브젝트가 있을 때 각 오브젝트를 분리하는 기술이다. 이와 같은 기술이 제공되었을 경우 오브젝트를 분리하는 부분에서 분리된 오브젝트와 배경영역은 서로 다른 중요도를 가지게 된다. 통상 사람이 느끼는 주관적 화질은 배경보다는 오브젝트 의존적이고 특히 영상 통신 시스템에서는 사용자(오브젝트) 영상이 그 배경 영상보다 인지에 더 큰 기여를 하게 되므로 동일한 비트량의 전송일 때 오브젝트에 더 많은 비트를 할당하고 배경에는 상대적으로 더 적은 비트를 할당하면 주관적 화질을 향상시킬 수 있다.The segmentation result 301 for the input image provides information on important and non-important regions of the input image. Object segmentation is a technique of separating an object from an image input image, and is a technique of separating each object when there is a user and a background or several objects. When such a technique is provided, the separated object and the background area have different importance in separating the objects. Subjective picture quality, which is usually felt by a person, is object dependent rather than background, and especially in a video communication system, the user (object) image contributes more to recognition than the background image. Allocating relatively fewer bits to the background can improve subjective picture quality.

따라서 오브젝트 영역과 배경 영역마다 중요도가 부과된 정보를 기반으로 양자화 파라미터 설정기(303) 및 양자화 모드 설정기(304)가 각각의 영역(매크로 블록)마다 다른 양자화 파라미터 값을 적절하게 설정해 주고, 이 것을 기반으로 하여 양자화기(305)가 양자화를 수행함으로써, 사용자에게 중요하고 관심있는 영역의 화질은 높이고 그렇지 않은 영역의 화질은 상대적으로 낮춤으로써 전체적인 주관적 화질을 향상시킬 수 있게 된다.Therefore, based on the information imparted with importance in the object region and the background region, the quantization parameter setter 303 and the quantization mode setter 304 appropriately set different quantization parameter values for each region (macro block). By performing the quantization based on the quantizer 305, the overall subjective image quality can be improved by increasing the quality of the region that is important and of interest to the user and lowering the image quality of the region that is not of interest to the user.

[오브젝트 기반 비트율 제어방법][Object based bit rate control method]

도4는 양자화 파라미터를 중요한 영역(이 경우는 오브젝트 영역의 매크로 블록)과 중요하지 않은 영역(이 경우는 배경 영역의 매크로 블록)으로 분류하여 각각 양자화 파라미터를 할당하고 또 양자화 모드를 제어하는 방법을 보여준다.Fig. 4 illustrates a method of classifying quantization parameters into important regions (in this case, macro blocks of object regions) and insignificant regions (in this case, macro blocks of background regions) to assign quantization parameters and control quantization modes, respectively. Shows.

단계(S401)에서는 TMN10 비트율 조절 알고리즘으로 양자화 파라미터(QP)를 계산하는 단계이다. 다음 단계(S402)는 상기 TMN10 비트율 조절 알고리즘으로 계산된 양자화 파라미터 값을 기준으로 하여 오브젝트 영역의 양자화 파라미터(ROI_QP)와 배경 영역의 양자화 파라미터(BG_QP)를 각각 할당하는 단계이다. 다음 단계(S403)는 현재 매크로 블록이 상기 배경영역과 오브젝트 영역의 경계 영역에 속하는지를 판단하는 단계이다. 현재 매크로 블록이 배경영역과 오브젝트 영역의 경계 영역에 속하는 경우에는 단계(S404a)로 이행하여 Arbitrary QUANT selection 모드를 사용하여 양자화를 수행하고(S404a,S405,S406), 그렇지 않은 경우에는 단계(S404b)로 이행하여 Small-step QUANT alteration 모드를 사용하여 양자화를 수행한다(S404b,S405,S406).In step S401, the quantization parameter QP is calculated by using the TMN10 bit rate adjustment algorithm. A next step (S402) is a step of allocating the quantization parameter ROI_QP of the object region and the quantization parameter BG_QP of the background region based on the quantization parameter value calculated by the TMN10 bit rate adjustment algorithm. The next step S403 is to determine whether the current macroblock belongs to a boundary area between the background area and the object area. If the current macro block belongs to the boundary area between the background area and the object area, the process proceeds to step S404a to perform quantization using the Arbitrary QUANT selection mode (S404a, S405, S406), otherwise, step S404b. In step S404b, S405, and S406, quantization is performed using the small-step QUANT alteration mode.

도4에 나타낸 비트율 조절방법의 기본 개념은 출력 버퍼로부터의 상태 정보 즉, 네트워크의 비트율이 낮아지면 중요도가 높은 부분은 양자화 파라미터를 작게 하고, 중요도가 낮은 부분은 양자화 파라미터를 크게 하여 중요한 오브젝트는 비트율이 낮아지더라도 상대적으로 많은 비트 수를 할당하고 중요하지 않은 오브젝트는 비트율을 최대한 낮춰 낮춤으로써, 목표 비트 수를 유지하면서도 중요한 부분과 그렇지 않은 부분을 구분하여 부호화한다는 것이다. 이렇게 함으로써 사용자가 화질의 저하를 덜 느끼게 할 수 있다. 즉, 부호화기가 오브젝트 세그멘테이션 결과로부터 중요한 영역과 그렇지 않은 영역을 매크로 블록 단위로 구분하여 상기 오브젝트 중요도 기반 양자화 파라미터 값에 따라 부호화를 수행함으로써, 목표 비트 수를 유지하면서도 화질의 저하를 덜 느끼는 것과 제한된 네트워크 대역폭의 부담 문제 를 모두 해결할 수 있게 되는 것이다.The basic concept of the bit rate adjustment method shown in Fig. 4 is that the state information from the output buffer, i.e., when the network's bit rate is low, the high importance portion decreases the quantization parameter, and the low importance portion increases the quantization parameter so that the important object has a bit rate. Even if it is lowered, it allocates a relatively large number of bits and lowers the bit rate of an unimportant object as much as possible, thereby distinguishing an important part from an important part while maintaining the target bit number. This makes the user feel less deterioration in image quality. That is, the encoder separates the important areas from the object segmentation results into macroblock units and performs encoding according to the object importance-based quantization parameter value, thereby reducing the degradation of image quality while maintaining the target number of bits. The bandwidth burden can be solved.

[오브젝트 기반 비트율 제어방법 실시예][Object based bit rate control method embodiment]

지금까지 설명한 오브젝트/배경 영역의 중요도 기반 양자화 파라미터 값 조절을 통한 비트율 제어 동작을 더욱 상세히 설명한다.The operation of bit rate control by adjusting the importance-based quantization parameter values of the object / background region described above will be described in more detail.

화상 통신 환경에서 일반적으로 중요 영역은 사람 영역, 또는 얼굴 영역이나, 눈, 입 영역이 될 수 있고, 이들의 하나 또는 둘 이상의 조합으로 구성될 수도 있다. 또한 오브젝트의 중요도를 지정함에 있어서 배경 영역에 비하여 사람 영역이나 얼굴 영역, 눈이나 입 영역의 중요도를 더 높게 지정할 수 있다.In a video communication environment, an important area generally may be a human area or a face area or an eye or mouth area, and may be composed of one or two or more thereof. In addition, in designating the importance of the object, the importance of the human area, the face area, and the eye or mouth area may be set higher than that of the background area.

오브젝트 분리는 사람과 배경 영역, 또는 얼굴과 배경 영역으로 분리하는 과정이다. 실제로 얼굴 영역이 높은 화질로 나타날 경우 다른 주변 영역이 양자화 파라미터에 의해 화질이 저하되더라도 사용자가 화질 저하를 잘 느끼지 못하게 된다. 그것은 사용자의 시선이 주로 영상에서 얼굴 부분에 집중되므로 화질의 민감도도 얼굴 부분에 집중되기 때문이다.Object separation is a process of separating a human and a background area or a face and a background area. In fact, when the face region appears in high quality, the user may not feel the quality deterioration even if the other peripheral region is degraded by the quantization parameter. This is because the user's eyes are mainly focused on the face part of the image, so the sensitivity of the image quality is also focused on the face part.

도5는 양자화 파라미터를 중요한 영역과 중요하지 않은 영역으로 분류하여 각각 할당하는 방법을 도식화하여 보여준다. 먼저 오브젝트 세그멘테이션 결과로부터 ROI 분리정보를 입력받고(S501), 이어서 TMN10 비트율 조절 알고리즘으로 양자화 파라미터 값(QP_new)을 계산한다(S502).5 is a diagram illustrating a method of classifying quantization parameters into important and non-important regions and assigning them, respectively. First, ROI separation information is input from the object segmentation result (S501), and then a quantization parameter value QP_new is calculated using the TMN10 bit rate adjustment algorithm (S502).

다음 단계(S503)에서는 상기 TMN10 비트율 조절 알고리즘으로 계산된 양자화 파라미터 값(QP_new)을 기준으로 중요한 영역(오브젝트 영역)의 양자화 파라미터(ROI_QP) 값과 중요하지 않은 영역(배경 영역)의 양자화 파라미터(BG_QP) 값을 할당하게 된다. In a next step S503, the quantization parameter ROI_QP of an important region (object region) and the quantization parameter BG_QP of an insignificant region (background region) based on the quantization parameter value QP_new calculated by the TMN10 bit rate adjustment algorithm. ) Will be assigned.

여기서는 TMN10 비트율 조절 알고리즘으로 계산된 양자화 파라미터 값(QP_new)의 크기에 따라 몇 가지 영역으로 나누었다. 즉, QP_new > 25인 경우, 20 < QP_new < 25인 경우, 10 < QP_new < 20인 경우, QP_new < 10인 경우이다.Here, it is divided into several areas according to the size of the quantization parameter value (QP_new) calculated by the TMN10 bit rate adjustment algorithm. That is, when QP_new> 25, 20 <QP_new <25, 10 <QP_new <20, QP_new <10.

이와 같이 TMN10으로 계산된 양자화 파라미터 값(QP_new)의 범위에 따라서 ROI_QP, BG_QP 값이 다음 단계(S504)에서 결정되어진다. ROI_QP와 BG_QP를 할당하는 방법에 있어서 중요도에 따라서 가중치를 설정하여 할당하는데, 보통 ROI_QP는 QP_new의 반정도로 설정하고 BG_QP는 1,5배 설정한다. 하지만 QP_new가 25가 넘어가는 경우 ROI_QP를 보통의 경우와 같이 낮추는 경우 갑작스런 데이터량 증가로 인하여 프레임 스킵이 많이 일어나게 되므로 시간적 화질이 떨어지게 된다. 그러므로 이러한 경우 ROI_QP는 상대적으로 높은 양자화 파라미터를 할당함으로써 프레임 스킵이 일어나는 것을 방지한다. 또한 QP_new가 10보다 작은 경우에는 양자화 파라미터를 더욱 낮추더라도 사람이 인식할 수 있는 화질의 계선 정도가 매우 작기 때문에 이러한 경우에는 중요하지 않은 영역의 화질도 높여 줌으로써 전체적인 화질을 유지 할 수 있도록 하였다.The ROI_QP and BG_QP values are determined in the next step S504 according to the range of the quantization parameter value QP_new calculated as TMN10. In the method of allocating ROI_QP and BG_QP, weights are set according to importance, and usually ROI_QP is set at about half of QP_new and BG_QP is set at 1,5 times. However, if QP_new exceeds 25, lowering ROI_QP as usual would result in a lot of frame skipping due to a sudden increase in data, resulting in poor temporal image quality. Therefore, in this case ROI_QP prevents frame skipping by assigning a relatively high quantization parameter. In addition, when QP_new is less than 10, even if the quantization parameter is further lowered, the degree of image recognition that humans can recognize is very small, so in this case, the overall image quality can be maintained by increasing the quality of non-essential areas.

즉, QP_new > 25 인 경우 ROI_QP = QP_new * 0.8(가중치), BG_QP = 31로 할당하였고, 20 < QP_new < 25 인 경우 ROI_QP = QP_new * 0.5(가중치), BG_QP = 31로 할당하였고, 10 < QP_new < 20 인 경우 ROI_QP = QP_new * 0.5(가중치), BG_QP = QP_new * 1.5(가중치)로 할당하였고, QP_new < 10 인 경우 ROI_QP = QP_new, BG_QP = QP_new로 할당하였다.That is, if QP_new> 25, ROI_QP = QP_new * 0.8 (weighted), BG_QP = 31, and if 20 <QP_new <25, ROI_QP = QP_new * 0.5 (weighted), BG_QP = 31, and 10 <QP_new < In case of 20, ROI_QP = QP_new * 0.5 (weighted) and BG_QP = QP_new * 1.5 (weighted), and when QP_new <10, ROI_QP = QP_new and BG_QP = QP_new.

다음 단계(S505)는 양자화 파라미터 값을 조절하는 단계이다. 즉, 매크로 블록의 양자화 파라미터(dquant)를 dquant = prev_QP - (ROI_QP or BG_QP)로 조절한다. 여기서 prev_QP는 이전 양자화 파라미터 값이고, ROI_QP는 상기 설정된 오브젝트 양자화 파라미터 값이며, BG_QP는 상기 설정된 배경 양자화 파라미터 값이다.The next step S505 is adjusting the quantization parameter value. That is, the quantization parameter dquant of the macro block is adjusted by dquant = prev_QP-(ROI_QP or BG_QP). Where prev_QP is the previous quantization parameter value, ROI_QP is the set object quantization parameter value, and BG_QP is the set background quantization parameter value.

다음 단계(S506a, S506b)는 매크로 블록 타입에 따라 상기 dquant 값을 조절하는 단계이며, Pre_MBType은 이전 매크로 블록 양자화 타입, Cur_MBType은 현재 매크로 블록 양자화 타입을 각각 표현한다. 다음 단계(S507a)는 dquant가 ±3 범위안에 있을 때 이전 양자화 파라미터 값(prev_QP)을 ROI_QP 또는 BG_QP로 사용하는 단계이고, 단계(S507b)는 dquant > 3 또는 dquant < 3인 경우 현재 ROI_QP 또는 BG_QP를 사용함을 의미한다.Next steps S506a and S506b are steps of adjusting the dquant value according to the macroblock type, Pre_MBType represents the previous macroblock quantization type, and Cur_MBType represents the current macroblock quantization type. The next step S507a is to use the previous quantization parameter value prev_QP as ROI_QP or BG_QP when dquant is in the ± 3 range, and step S507b uses the current ROI_QP or BG_QP when dquant> 3 or dquant <3 It means to use.

다음 단계(S508)는 지금까지 설명한 바와 같이 설정된 양자화 파라미터를 이용해서 최종적인 양자화(Quantization)를 수행하는 단계이다.Next step (S508) is to perform the final quantization (Quantization) using the quantization parameter set as described so far.

본 발명에서는 상기 ROI_QP와 BG_QP의 양자화 파라미터를 크게 변화시키기 위해 H.263+ AnnexT(Modified Quantization Parameter)를 사용하였다. 기존 H.263에서는 매크로 블록 단위로 양자화 파라미터를 이전 매크로블록의 양자화 파라미터 값의 +2에서부터 2까지 조절할 수 있다. 즉 비트율을 변화시키기 위한 양자화 파라미터의 변화 정도가 이전 매크로 블록에서의 양자화 파라미터 값의 ±2 이내에서만 가능하다. 그렇기 때문에 갑작스러운 네트워크 환경에 적응하기 어려울 뿐 아니라 주요영역과 주요하지 않은 영역 사이에 확연한 변화를 주기 어렵다. 하지만 Annex T에서는 'small-step QUANT alteration 모드'에서는 2비트를 이용하여 표1처럼 지 정된 QUANT의 차이를 이용하여 양자화 파라미터를 조절하거나, 'arbitrary QUANT selection 모드'에서는 6비트를 이용하여 이전 양자화 파라미터 값에 관계없이 양자화 파라미터 값을 1부터 31까지 조절할 수 있는 기능으로 확장되었다.In the present invention, in order to greatly change the quantization parameters of ROI_QP and BG_QP, H.263 + AnnexT (Modified Quantization Parameter) is used. In the existing H.263, the quantization parameter can be adjusted from +2 to 2 of the quantization parameter value of the previous macroblock in macroblock units. That is, the degree of change of the quantization parameter for changing the bit rate is possible only within ± 2 of the value of the quantization parameter in the previous macro block. As a result, it is difficult to adapt to sudden network environments, and it is difficult to make a significant change between major and non-primary domains. However, in Annex T, the quantization parameter is adjusted using the difference of the QUANT specified in Table 1 using 2 bits in 'small-step QUANT alteration mode', or 6 bits in 'arbitrary QUANT selection mode'. It has been extended to adjust the quantization parameter value from 1 to 31 regardless of the value.

Figure 112003000121056-pat00001
Figure 112003000121056-pat00001

이 기능을 이용하여 네트워크의 비트율이 낮아지면 중요하지 않은 영역으로 판단된 매크로 블록의 DCT 계수값은 큰 값으로 양자화하여 데이터량을 줄이고 중요한 영역으로 판단된 매크로 블록의 DCT 계수값은 작은 값으로 양자화하여 비트율이 낮을 때에도 관심 영역에 대해 비교적 좋은 화질을 유지할 수 있다.By using this function, if the network's bit rate is lowered, the DCT coefficients of macro blocks determined to be insignificant areas are quantized to a large value to reduce the amount of data, and the DCT coefficients of macro blocks determined to be important areas are quantized to small values. Thus, even when the bit rate is low, relatively good image quality can be maintained for the region of interest.

사용자가 오브젝트 기반으로 영상을 분리한 후 중요도를 판단하여 서로 다르게 양자화하려고 할 경우 쉽고 빠르게 비트율을 조절하는 방법은 'arbitrary QUNAT selection 모드'를 이용하는 것이다. 도6은 오브젝트 세그멘테이션의 예를 나타내 며, 오브젝트 영역과 배경영역으로 분리될 수 있음을 보여준다. 도6에서처럼 화상통신에서 오브젝트 세그멘테이션이 되어 배경 영역과 사용자 영역이 분리되었을 경우, 두 부분을 구분하여 서로 다른 양자화 파라미터를 이용하여 부호화할 수 있다. When the user separates an image based on an object and tries to quantize differently by determining the importance, an easy and fast way to adjust the bit rate is to use the 'arbitrary QUNAT selection mode'. 6 shows an example of object segmentation and shows that it can be divided into an object region and a background region. When the background region and the user region are separated by object segmentation in video communication, as shown in FIG. 6, the two portions may be separated and encoded using different quantization parameters.

'Arbitrary QUANT selection모드'를 사용할 경우에는 이전 매크로블록의 양자화 파라미터 값에 관계없이 매크로 블록마다 1에서 31까지 사용자가 원하는 임의의 양자화 파라미터를 선택할 수 있기 때문에 사용자가 오브젝트 기반으로 영상을 분리한 후 중요도를 판단하여 오브젝트 영역과 배경 영역에 대해 서로 다르게 양자화 하면서 비트율을 조절 할 수 있다. 만일 영상이 도6에서와 같이 오브젝트와 배경 영역으로 분리되었을 경우, 이 정보를 이용해 비트율을 제어할 때 사용자 영역(오브젝트 영역)은 작은 양자화 파라미터를 이용해 양자화 하여 DCT 계수 정보를 많이 남기고, 배경 영역은 상대적으로 큰 양자화 파라미터를 이용해 양자화 하여 DCT 계수 정보를 버려서 비트율을 제어한다. 이러한 방법으로 관심이 있거나 중요한 영역은 상대적으로 좋은 화질로 표현하고 관심이 없거나 상대적으로 중요하지 않은 영역은 비트 수를 많이 낮출 수 있다. In case of using 'Arbitrary QUANT selection mode', users can select any quantization parameter from 1 to 31 for each macroblock regardless of the quantization parameter value of previous macroblock. The bit rate can be adjusted while quantizing the object region and the background region differently. If the image is divided into an object and a background region as shown in FIG. 6, when controlling the bit rate using this information, the user region (object region) is quantized using a small quantization parameter to leave much DCT coefficient information, and the background region is The bit rate is controlled by quantizing using a relatively large quantization parameter to discard DCT coefficient information. In this way, areas of interest or interest can be represented with relatively good image quality, while areas of interest or relative interest are notably low.

그렇지만 두 영역 모두 Annex T의 'arbitrary QUANT selection모드'를 사용할 경우에는 추가되는 헤더(header) 비트 수가 많아져서 비트율 제어에 오히려 부담이 될 수 있다. 즉, 일반적 방법으로 양자화 파라미터를 이용할 때는 매크로 블록 당 2비트의 헤더가 필요하던 것이 Annex T의 'arbitrary QUANT selection모드'를 이용할 경우에는 6비트의 헤더가 필요하다. 이러한 추가 비트는 매크로 블록마다 추가되기 때문에 오버헤드(overhead)가 클 수 있다. However, when both areas use the 'arbitrary QUANT selection mode' of Annex T, the number of header bits added increases, which may be a burden on the bit rate control. In other words, when using a quantization parameter in a general manner, a 2-bit header is required per macroblock. When using an 'arbitrary QUANT selection mode' of Annex T, a 6-bit header is required. Since this additional bit is added for each macro block, the overhead may be large.

그렇지만 영상이 오브젝트 기반으로 분리되어 입력되었을 때 배경 영역과 오브젝트 영역의 경계영역(경계 매크로 블록)에서만 양자화 파라미터의 차이가 크고 각 영역 내에서는 양자화 파라미터의 차이가 작기 때문에 각 영역의 경계에서만 양자화 파라미터가 크게 달라지게 된다. 이 특성을 이용하여 영상에서 오브젝트와 배경이 분리되었을 경우, 오브젝트의 경계 영역의 매크로블록에 대해서만 'arbitrary QUANT selection 모드'를 사용하여 사용자가 원하는 임의의 양자화 파라미터를 결정하고, 같은 영역에서는 이전 양자화 파라미터 값의 차이가 ±3 범위 안에서는 같은 양자화 파라미터를 사용함으로써 경계 영역에 대해서만 6비트의 헤더가 사용되고 나머지 부분은 2비트의 헤더가 사용되어 전체 프레임에 대해 6비트의 헤더가 사용되는 것 보다 헤더 비트 수가 많이 줄어들면서 오브젝트 단위로 비트율 조절을 할 수 있다.However, when the image is separated and input based on the object, the difference between the quantization parameter is large only in the boundary region (boundary macroblock) of the background region and the object region, and the difference in the quantization parameter is small within each region. It will be very different. When the object and the background are separated from the image using this property, the arbitrary quantization parameter desired by the user is determined using the 'arbitrary QUANT selection mode' only for the macroblock of the object's boundary region, and in the same region, the previous quantization parameter is determined. If the difference in value is within the range of ± 3, the same quantization parameter is used so that 6-bit headers are used only for the border region and 2 bits are used for the rest, so that the header bits are more than 6-bit headers for the entire frame. You can adjust the bit rate on a per-object basis with much reduction.

상기한 바와 같이 비트율 제어에서 매크로블록 단위로 부과된 중요도 정보를 기반으로 양자화 할 때 현재 매크로 블록이 오브젝트의 경계 매크로 블록이면 'arbitrary QUANT selection모드'를 이용하여 양자화 파라미터를 큰 폭으로 조정하고 현재 매크로 블록이 오브젝트 내의 매크로 블록이면 'small-step QUANT alteration모드'를 이용하여 양자화 파라미터를 적은 폭으로 조정함으로써, 오브젝트 단위로 비트 수를 조절할 수 있기 때문에 사용자가 화질의 차이를 느끼는 중요 영역에 대해서는 상대적으로 많은 비트 수를 부과하여 낮은 비트율 전송에서도 비트율을 조절하면서 화질의 열화를 막을 수 있다.As described above, if the current macroblock is a boundary macroblock of an object when quantizing based on importance information imposed in macroblock units in bit rate control, the quantization parameter is largely adjusted using the 'arbitrary QUANT selection mode' and the current macro If the block is a macro block within an object, the quantization parameter can be adjusted to a small width using the 'small-step QUANT alteration mode', so that the number of bits can be adjusted in units of objects. By imposing a large number of bits, even in low bit rate transmissions, the image quality can be prevented while adjusting the bit rate.

도6에서 arbitrary QUANT selection 모드를 사용하는 경계 영역은 도트(dot) 로 표기된 부분으로서, 매크로 블록 코딩 순서 상으로 보았을 때 중요하지 않은 영역에서 중요 영역으로 넘어가는 매크로 블록, 또는 중요 영역에서 중요하지 않은 영역으로 넘어가는 매크로 블록이 된다. 한 프레임의 매크로 블록의 코딩 순서는 좌측상단에서부터 라인 단위로 우측 하단까지 이루어지게 된다.In FIG. 6, the boundary region using the arbitrary QUANT selection mode is a portion denoted by a dot, and the macroblock or the important region in the macroblock coding sequence that passes from the non-essential region to the important region in the macroblock coding order is not important. It becomes a macro block that goes into an area. The coding order of a macroblock of one frame is made from the upper left to the lower right in line units.

[공간적 화질과 시간적 화질 및 그 조절][Spatial and temporal image quality and its adjustment]

사람이 느끼는 화질은 크게 두 가지가 있다. 그것은 공간적 화질과 시간적 화질을 말하는데 전체적인 화질에 대해 느끼는 정도는 사람마다 약간의 차이가 있다. 공간적 화질이란 동영상의 한 프레임을 볼 때 느끼는 화질을 의미하고, 시간적 화질이란 동영상을 플레이했을 때 시간적으로 자연스럽게 영상의 움직임이 느껴지는 정도를 의미한다. 예를 들어 초당 디스플레이되는 프레임 수가 적으면 움직임이 자연스럽지 않아 시간적 화질이 저하된다. 즉 공간적 화질을 좀더 예민하게 느끼는 사람이 있는 반면 공간적 화질을 민감하게 느끼는 사람도 있다. There are two main picture quality. It refers to spatial and temporal picture quality, and the degree to which the overall picture quality is felt varies from person to person. Spatial image quality refers to the image quality that is felt when viewing a frame of a video, and temporal image quality refers to the extent to which video movement is naturally felt when playing a video. For example, if the number of frames displayed per second is small, the movement is not natural and thus the temporal image quality deteriorates. In other words, some people are more sensitive to spatial image quality, while others are more sensitive to spatial image quality.

본 발명은 공간적 화질과 시간적 화질도 조절할 수 있는데 그 방법은 중요한 영역에 얼마나 더 많은 비트를 할당하는가에 달려 있다. 즉 ROI_QP를 상대적으로 더욱 작게 해주면 관심있는 영역에서의 공간적 화질은 높아지지만 상대적으로 프레임 스킵이 일어날 확률은 높아지게 되므로 시간적 화질은 떨어지게 된다. 그러므로 공간적 화질과 시간적 화질을 가장 적절하게 만족시킬 수 있는 양자화 파라미터 값을 제시하고자 한다. 이를 위한 QP_new의 범위에 따른 각각의 양자화 파라미터 값을 표2에 나타내었다.The present invention can also control spatial and temporal image quality, which depends on how many bits are allocated to the critical area. In other words, if ROI_QP is made smaller, the spatial quality of the region of interest is increased, but the probability of frame skipping is relatively increased. Therefore, we propose a quantization parameter value that best satisfies the spatial and temporal image quality. Table 2 shows each quantization parameter value according to the range of QP_new for this purpose.

QP_new>25QP_new> 25 20<QP_New<2520 <QP_New <25 15<QP_new<2015 <QP_new <20 10<QP_new<1510 <QP_new <15 QP_new<10QP_new <10 ROI_QPROI_QP 2525 1515 1313 1010 88 BG_QPBG_QP 3131 3131 2525 2525 2020

표2에 나타낸 바와 같이 본 발명에서는 TMN10 비트율 조절 알고리즘에 따라 계산된 양자화 파라미터 값 QP_new을 5개의 영역(범위)으로 구분하고 각각에 대하여 오브젝트 영역 양자화 파라미터(ROI_QP) 및 배경 영역 양자화 파라미터(BG_QP)를 할당하였다. 표2를 참조하면 QP_new > 25인 경우 ROI_QP = 25, GB_QP = 31로 할당하였고, 20 < QP_New < 25인 경우 ROI_QP = 15, BG_QP = 31로 할당하였으며, 15 < QP_New < 20인 경우 ROI+_QP = 13, BG_QP = 25로 할당하였고, 10 < QP_New < 15인 경우 ROI_QP = 10, BG_QP = 25로 할당하였으며, QP_new < 10인 경우에는 ROI_QP = 8, BG_QP = 20으로 할당하였다.As shown in Table 2, in the present invention, the quantization parameter value QP_new calculated according to the TMN10 bit rate adjustment algorithm is divided into five regions (ranges), and the object region quantization parameter ROI_QP and the background region quantization parameter BG_QP are respectively determined. Assigned. Referring to Table 2, ROI_QP = 25 and GB_QP = 31 for QP_new> 25, and ROI_QP = 15 and BG_QP = 31 for 20 <QP_New <25, and ROI + _QP = for 15 <QP_New <20. 13, BG_QP = 25, ROI_QP = 10, BG_QP = 25 when 10 <QP_New <15, ROI_QP = 8, BG_QP = 20 when QP_new <10.

지금까지 본 발명은 실시간 통신 환경에서 효과적인 비트율 제어를 하기 위해 중요한 영역과 중요하지 않은 영역에 양자화 파라미터를 적응적으로 할당하는 방법에 대하여 기술하였다.Thus far, the present invention has described a method for adaptively assigning quantization parameters to important and non-critical areas for effective bit rate control in a real-time communication environment.

본 발명은 오브젝트 단위로 세크멘테이션 된 영상을 중요한 영역과 중요하지 않은 영역에 대한 정보를 기반으로 각각의 영역에 적응적으로 양자화 파라미터를 할당하는 알고리즘으로 매크로 블록의 중요도에 따라 비트량을 다르게 할당함으로써 같은 비트율에서 사람이 느끼는 화질을 향상시킬 수 있다. The present invention is an algorithm for adaptively assigning quantization parameters to each region based on information about an important region and an insignificant region of an image segmented in units of objects. As a result, the image quality that a person feels at the same bit rate can be improved.

본 발명은 화상 통신이나 비디오 폰 전송 등에서 비디오가 오브젝트 기반으로 세크멘테이션 되어 있을 때 사용자가 특정 오브젝트에 대해 중요도를 크게 설정 할 수 있어 화상 통신 등에서 사용자가 직관적으로 느끼기에 비디오의 화질을 개선시킬 수 있다. 저 비트율 통신에서는 네트워크의 대역폭에 따라 전송되는 비디오의 화질이 일정하지 않고 화질 열화가 자주 발생하는데 이것은 비트율을 제어할 때 출력 버퍼의 넘침을 제어하기 위해 비디오 내의 오브젝트보다는 순간적인 비트율에 따라 양자화 파라미터를 결정하기 때문이다. 하지만 화상 통신이나 비디오 폰 통신을 할 때 사용자는 관심 영역에 대한 화질에 민감하게 반응하므로 비트율을 제어할 때 관심 영역의 정보는 많이 보내고 관심이 덜한 영역의 정보를 적게 보내면 비트율을 제어하는데 있어서도 유용할 뿐만 아니라 사용자에게 만족할 만한 화질을 제공할 수 있다.According to the present invention, when a video is segmented based on an object in a video communication or video phone transmission, the user can greatly set the importance of a specific object, thereby improving the image quality of the video because the user intuitively feels in the video communication. have. In low bit rate communication, the quality of the transmitted video is not constant and the quality deterioration occurs frequently according to the bandwidth of the network. This is because when controlling the bit rate, the quantization parameter is used according to the instantaneous bit rate rather than the object in the video to control the overflow of the output buffer. Because it is determined. However, in video communication or video phone communication, the user is sensitive to the image quality of the region of interest. Therefore, when controlling the bit rate, sending more information of the region of interest and less information of the region of less interest may be useful in controlling the bit rate. In addition, it can provide a satisfactory picture quality to the user.

본 발명은 특히 IMT 2000과 같이 무선 이동 통신에서 유용하게 사용될 수 있다. 무선 이동 통신의 경우 유선 이동 통신에 비해 낮은 네트워크 환경을 사용하므로 낮은 비트율로 높은 화질을 얻는 것이 매우 중요하다. The present invention can be particularly useful in wireless mobile communication, such as IMT 2000. Since wireless mobile communication uses a lower network environment than wired mobile communication, it is very important to obtain high image quality at a low bit rate.

또한 본 발명은 이동 단말기 등으로 취득한 비디오 메일 영상을 효과적으로 코딩하여 응용할 수 있다. 즉, 작은 크기로 화질 저하 없이 비디오 메일 영상을 코딩함으로써, 사용자에게 낮은 요금을 가능하도록 하는 효과가 있다. In addition, the present invention can be effectively applied to the video mail image acquired by the mobile terminal and the like. That is, by coding the video mail image without deteriorating the image quality in a small size, there is an effect that enables a low fee for the user.

다시 말하면 본 발명에서 제시한 기술은 영상 메일과 같은 동영상의 부호화 방법으로도 유용하게 사용될 수 있다. 즉, 이동 단말기 등으로 취득한 영상을 본 발명에서 제시한 방법으로 부호화할 경우 전체 부호화된 영상의 크기가 작으면서 높은 화질을 유지할 수 있다. 일반적으로 영상 서비스는 패킷 수로 요금이 부과되므로 동영상의 크기는 매우 중요한 요소가 될 것이고, 본 발명은 부호화된 영상의 크기를 작게 하면서도 높은 화질을 유지할 수 있으므로 이러한 점에서 매우 유리하게 작용한다.

















In other words, the technique proposed in the present invention can be usefully used as a video encoding method such as a video mail. That is, when the image acquired by the mobile terminal or the like is encoded by the method proposed in the present invention, the size of the entire encoded image may be small and high image quality may be maintained. In general, since video services are charged by the number of packets, the size of a video will be a very important factor, and the present invention works very advantageously in that it can maintain high image quality while reducing the size of an encoded video.

















Claims (11)

입력 영상을 오브젝트 영역과 배경 영역으로 분리하는 단계, 양자화 파라미터 값(QP_new)을 계산하는 단계, 상기 계산된 양자화 파라미터 값(QP_new)의 범위에 따라 상기 오브젝트 영역의 양자화 파라미터 값(ROI_QP) 및 배경 영역의 양자화 파라미터 값(BG_QP)을 각각 할당하는 단계; 상기 할당된 갑세 따라 상기 오브젝트 영역 및 배경 영역의 해당 매크로 블록을 양자화 하며 현재 매크로 블록이 배경과 오브젝트의 경계 영역이면 H.263의 AnnexT 모드에서 'arbitrary QUANT selection모드'를 이용하여 양자화 파라미터 값을 변화시키고, 현재 매크로 블록이 같은 영역이면 같은 양자화 파라미터 값을 사용하여, 상기 할당된 양자화 파라미터 값(ROI_QP, BG_QP)에 따라 상기 오브젝트 영역, 배경 영역 및 경계영역의 해당 매크로 블록을 양자화하는 단계; 를 포함하여 이루어진 것을 특징으로 하는 오브젝트 기반 비트율 제어방법.Separating the input image into an object region and a background region, calculating a quantization parameter value QP_new, and a quantization parameter value ROI_QP and a background region of the object region according to the range of the calculated quantization parameter value QP_new. Assigning each of the quantization parameter values BG_QP; Quantize the corresponding macroblocks of the object region and the background region according to the allocated access. If the current macroblock is the boundary region of the background and the object, the quantization parameter value is changed using the 'arbitrary QUANT selection mode' in the AnnexT mode of H.263. Quantizing corresponding macro blocks of the object region, the background region, and the boundary region according to the assigned quantization parameter values (ROI_QP, BG_QP) using the same quantization parameter values if the current macro block is the same region; Object-based bit rate control method characterized in that made. 삭제delete 제 1 항에 있어서, 상기 계산된 양자화 파라미터 값(QP_new)을 기준으로 오브젝트 영역일 경우 상기 계산된 양자화 파라미터 값(QP_new) 보다 낮은 양자화 파라미터 값을 할당하고, 배경 영역일 경우 상기 계산된 양자화 파라미터 값(QP_new) 보다 높은 양자화 파라미터 값을 할당하는 것을 특징으로 하는 오브젝트 기반 비트 율 제어방법.The method of claim 1, wherein the quantization parameter value lower than the calculated quantization parameter value QP_new is allocated to the object region based on the calculated quantization parameter value QP_new, and the calculated quantization parameter value is assigned to the background region. (QP_new) An object-based bit rate control method characterized by allocating a higher quantization parameter value. 제 1 항에 있어서, 상기 같은 영역이라도 계산된 양자화 파라미터 값(QP_new)이 이전 양자화 파라미터 값(prev_QP)과 현재 양자화 파라미터 값(cur_QP)을 비교하여 그 차이가 설정치 보다 클 경우는 arbitrary QUANT selection 모드를 사용하여 양자화 파라미터 값을 갱신하는 것을 특징으로 하는 오브젝트 기반 비트율 제어방법. The arbitrary QUANT selection mode of claim 1, wherein the calculated quantization parameter value QP_new compares the previous quantization parameter value prev_QP and the current quantization parameter value cur_QP even if the difference is greater than a predetermined value. And updating the quantization parameter value using the method. 제 1 항에 있어서, 상기 계산된 양자화 파라미터 값(QP_new)의 범위에 따라 오브젝트 영역의 양자화 파라미터 값(ROI_QP)과 배경 영역의 양자화 파라미터 값(BG_QP)의 가중치를 각각 다르게 설정하는 것을 특징으로 하는 오브젝트 기반 비트율 제어방법.The object of claim 1, wherein weights of the quantization parameter value ROI_QP of the object region and the quantization parameter value BG_QP of the background region are set differently according to the calculated range of the quantization parameter value QP_new. Based bit rate control method. 제 1 항에 있어서, 상기 계산된 양자화 파라미터 값(QP_new)의 범위에 따라 오브젝트 영역의 양자화 파라미터 값(ROI_QP)과 배경 영역의 양자화 파라미터 값(BG_QP)의 가중치를 각각 다르게 설정하되, 공간적 화질과 시간적 화질을 고려하여 상기 가중치를 조절하여 할당하는 것을 특징으로 하는 오브젝트 기반 비트율 제어방법.The method of claim 1, wherein the weights of the quantization parameter value ROI_QP of the object region and the quantization parameter value BG_QP of the background region are set differently according to the calculated range of the quantization parameter value QP_new, respectively. And adjusting the weights in consideration of the image quality. 제 1 항에 있어서, 상기 계산된 양자화 파라미터 값(QP_new)이 QP_new > 25 인 경우 상기 ROI_QP = QP_new ×0.8, 상기 BG_QP = 31로 설정하고, 20 < QP_new < 25 인 경우 상기 ROI_QP = QP_new ×0.5, 상기 BG_QP = 31로 설정하고, 10 < QP_new < 20 인 경우 상기 ROI_QP = QP_new ×0.5, 상기 BG_QP = QP_new ×1.5로 설정하고, QP_new < 10 인 경우 상기 ROI_QP = QP_new, BG_QP = QP_new로 설정함을 특징으로 하는 오브젝트 기반 비트율 제어방법.The method according to claim 1, wherein the ROI_QP = QP_new x 0.8 and the BG_QP = 31 when the calculated quantization parameter value QP_new is QP_new> 25, and the ROI_QP = QP_new x 0.5 when 20 <QP_new <25, Set BG_QP = 31, set ROI_QP = QP_new × 0.5 when 10 <QP_new <20, set BG_QP = QP_new × 1.5, and set ROI_QP = QP_new, BG_QP = QP_new when QP_new <10 An object-based bit rate control method. 제 1 항에 있어서, 상기 계산된 양자화 파라미터 값(QP_new)이 QP_new > 25 인 경우 상기 ROI_QP = 25, 상기 BG_QP = 31로 설정하고, 20 < QP_new < 25 인 경우 상기 ROI_QP = 15, 상기 BG_QP = 31로 설정하고, 15 < QP_new < 20 인 경우 상기 ROI_QP = 13, 상기 BG_QP = 25로 설정하고, 10 < QP_new < 15 인 경우 상기 ROI_QP = 10, BG_QP = 25로 설정하고, QP_new < 10 인 경우 상기 ROI_QP = 8, BG_QP = 20으로 설정함을 특징으로 하는 오브젝트 기반 비트율 제어방법.The method of claim 1, wherein the calculated quantization parameter value QP_new is set to ROI_QP = 25 and BG_QP = 31 when QP_new> 25, and ROI_QP = 15 and BG_QP = 31 when 20 <QP_new <25. If ROI_QP = 13 and BG_QP = 25 if 15 <QP_new <20, set ROI_QP = 10 and BG_QP = 25 if 10 <QP_new <15, and ROI_QP if QP_new <10 = 8, BG_QP = 20, the object-based bit rate control method. 네트워크 환경에 따라서 전송할 비트율 산정 및 제어를 위하여 목표 비트수를 설정하는 수단, 입력 영상을 오브젝트 영역과 배경 영역으로 분리하는 수단, 상기 설정된 목표 비트수를 고려하여 양자화 파라미터 값(QP_new)을 계산하는 수단, 상기 계산된 양자화 파라미터 값(QP_new)의 범위에 따라 상기 오브젝트 영역의 양자화 파라미터 값(ROI_QP) 및 배경 영역의 양자화 파라미터 값(BG_QP)을 할당하는 수단, 상기 할당된 각각의 영역에 해당하는 매크로 블록마다 해당 양자화 파라미터 값을 적용하여 입력 영상을 양자화하는 수단; 상기 오브젝트 영역 및 배경 영역의 분리 정보를 기반으로 하여 현재 매크로 블록이 영역 경계인지를 판별하고 그 판별 결과에 따라 영역 경계인 매크로 블록과 그렇지 않은 매크로 블록에 대하여 상기 할당된 양자화 파라미터 값에 따른 양자화 모드를 선택적으로 다르게 적용하는 수단;을 포함하여 이루어지는 것을 특징으로 하는 오브젝트 기반 비트율 제어장치.Means for setting a target bit number for calculating and controlling a bit rate to be transmitted according to a network environment, means for separating an input image into an object region and a background region, and means for calculating a quantization parameter value (QP_new) in consideration of the set target bit number. Means for assigning a quantization parameter value ROI_QP of the object region and a quantization parameter value BG_QP of a background region according to the calculated quantization parameter value QP_new, and a macroblock corresponding to each of the allocated regions. Means for quantizing the input image by applying a corresponding quantization parameter value for each time; Based on the separation information of the object region and the background region, it is determined whether the current macroblock is an area boundary, and according to the determination result, a quantization mode according to the assigned quantization parameter value is determined for macroblocks that are area boundaries and macroblocks that are not. Means for selectively applying differently; object-based bit rate control device comprising a. 삭제delete 제 9 항에 있어서, 상기 영역 경계인 매크로 블록에 적용되는 양자화 모드는 H.263+의 AnnexT에서 arbitrary QUANT selection 모드인 것을 특징으로 하는 오브젝트 기반 비트율 제어장치.10. The apparatus of claim 9, wherein the quantization mode applied to the macroblock that is the region boundary is an arbitrary QUANT selection mode in AnnexT of H.263 +.
KR1020030000232A 2003-01-03 2003-01-03 Bit rate control system based on object KR100557618B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020030000232A KR100557618B1 (en) 2003-01-03 2003-01-03 Bit rate control system based on object

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020030000232A KR100557618B1 (en) 2003-01-03 2003-01-03 Bit rate control system based on object

Publications (2)

Publication Number Publication Date
KR20040062732A KR20040062732A (en) 2004-07-09
KR100557618B1 true KR100557618B1 (en) 2006-03-10

Family

ID=37353890

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020030000232A KR100557618B1 (en) 2003-01-03 2003-01-03 Bit rate control system based on object

Country Status (1)

Country Link
KR (1) KR100557618B1 (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10629167B2 (en) 2017-02-24 2020-04-21 Samsung Electronics Co., Ltd. Display apparatus and control method thereof
US11847771B2 (en) 2020-05-01 2023-12-19 Samsung Electronics Co., Ltd. Systems and methods for quantitative evaluation of optical map quality and for data augmentation automation
US11917163B2 (en) 2021-08-12 2024-02-27 Samsung Electronics Co., Ltd. ROI-based video coding method and device

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100792247B1 (en) * 2006-02-28 2008-01-07 주식회사 팬택앤큐리텔 System for processing image data and method therefor
KR100810345B1 (en) 2006-08-03 2008-03-04 삼성전자주식회사 An intelligent video display method for multimedia mobile devices
KR100846513B1 (en) 2007-01-15 2008-07-17 삼성전자주식회사 Method and apparatus for processing an image
KR100873638B1 (en) 2007-01-16 2008-12-12 삼성전자주식회사 Image processing method and apparatus
CN101453643B (en) * 2007-12-04 2011-05-18 华为技术有限公司 Quantitative mode, image encoding, decoding method, encoder, decoder and system
KR100950196B1 (en) * 2008-10-06 2010-03-29 주식회사 아이엠케이네트웍스 Method for video encoding
KR102274747B1 (en) * 2014-11-24 2021-07-07 삼성전자주식회사 CODEC, SYSTEM ON CHIP(SoC) INCLUDING THE SAME, AND DATA PROCESSING SYSTEM INCLUDING THE SoC
KR20220043694A (en) * 2020-09-29 2022-04-05 삼성전자주식회사 The device for processing the image and method operating the same

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10629167B2 (en) 2017-02-24 2020-04-21 Samsung Electronics Co., Ltd. Display apparatus and control method thereof
US11847771B2 (en) 2020-05-01 2023-12-19 Samsung Electronics Co., Ltd. Systems and methods for quantitative evaluation of optical map quality and for data augmentation automation
US11917163B2 (en) 2021-08-12 2024-02-27 Samsung Electronics Co., Ltd. ROI-based video coding method and device

Also Published As

Publication number Publication date
KR20040062732A (en) 2004-07-09

Similar Documents

Publication Publication Date Title
KR100643453B1 (en) Bit rate control based on object
KR100643454B1 (en) Method for video data transmission control
KR100484148B1 (en) Advanced method for rate control and apparatus thereof
JP3748717B2 (en) Video encoding device
KR100297830B1 (en) Device and method for controlling bit generation amount per object
WO2021244341A1 (en) Picture coding method and apparatus, electronic device and computer readable storage medium
Lee et al. Scalable rate control for MPEG-4 video
US6389072B1 (en) Motion analysis based buffer regulation scheme
US8363719B2 (en) Encoding apparatus, method of controlling thereof, and computer program
KR100307618B1 (en) Device and method for encoding image
US20050201460A1 (en) System and method for controlling bit rate of an image
Sun et al. Region-based rate control and bit allocation for wireless video transmission
JP2001512651A (en) Calculation method of quantization matrix for each frame
KR100557618B1 (en) Bit rate control system based on object
KR100601615B1 (en) Apparatus for compressing video according to network bandwidth
KR100543608B1 (en) Bit rate control system based on object
JP4341078B2 (en) Encoding device for moving picture information
CN110971900A (en) Code rate control method suitable for 4K and 8K ultrahigh-definition motion flat video
US20050140781A1 (en) Video coding method and apparatus thereof
JP4942208B2 (en) Encoder
JP4508029B2 (en) Encoding device for moving picture information
KR101371507B1 (en) System and method for low-delay video telecommunication
CN110381315A (en) Bit rate control method and device
KR20010104058A (en) Adaptive quantizer according to DCT mode in MPEG2 encoder
Sun et al. A rate control algorithm for wireless video transmission using perceptual tuning

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20090105

Year of fee payment: 4

LAPS Lapse due to unpaid annual fee