KR102337811B1 - Video compression apparatus and video compression method adaptive to a variable network environment - Google Patents

Video compression apparatus and video compression method adaptive to a variable network environment Download PDF

Info

Publication number
KR102337811B1
KR102337811B1 KR1020200029170A KR20200029170A KR102337811B1 KR 102337811 B1 KR102337811 B1 KR 102337811B1 KR 1020200029170 A KR1020200029170 A KR 1020200029170A KR 20200029170 A KR20200029170 A KR 20200029170A KR 102337811 B1 KR102337811 B1 KR 102337811B1
Authority
KR
South Korea
Prior art keywords
frame rate
buffer
resolution
rate
image data
Prior art date
Application number
KR1020200029170A
Other languages
Korean (ko)
Other versions
KR20210113879A (en
Inventor
정주현
김동현
김대식
박노혁
전기남
백승호
임병욱
Original Assignee
국방과학연구소
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 국방과학연구소 filed Critical 국방과학연구소
Priority to KR1020200029170A priority Critical patent/KR102337811B1/en
Publication of KR20210113879A publication Critical patent/KR20210113879A/en
Application granted granted Critical
Publication of KR102337811B1 publication Critical patent/KR102337811B1/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/266Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel
    • H04N21/2662Controlling the complexity of the video stream, e.g. by scaling the resolution or bitrate of the video stream based on the client capabilities
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • H04N21/2343Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234363Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by altering the spatial resolution, e.g. for clients with a lower screen resolution
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • H04N21/2343Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234381Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by altering the temporal resolution, e.g. decreasing the frame rate by frame skipping
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/24Monitoring of processes or resources, e.g. monitoring of server load, available bandwidth, upstream requests
    • H04N21/2401Monitoring of the client buffer
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/24Monitoring of processes or resources, e.g. monitoring of server load, available bandwidth, upstream requests
    • H04N21/2402Monitoring of the downstream path of the transmission network, e.g. bandwidth available

Abstract

본 발명은 영상 압축 장치에 관한 것으로서, 조절 가능한 해상도 및 프레임 레이트(frame rate)에 기초하여 영상 데이터를 인코딩하는 인코더, 상기 인코딩된 영상 데이터를 임시 저장하는 버퍼, 상기 버퍼에 임시 저장된 상기 인코딩된 영상 데이터를 네트워크를 통해 송신하는 통신부 및 상기 버퍼의 사용률에 기초하여 상기 해상도 및 상기 프레임 레이트 중 적어도 어느 하나를 조절하는 제어부를 포함한다.The present invention relates to an apparatus for compressing an image, and relates to an encoder for encoding image data based on an adjustable resolution and a frame rate, a buffer for temporarily storing the encoded image data, and the encoded image temporarily stored in the buffer and a communication unit for transmitting data through a network and a control unit for adjusting at least one of the resolution and the frame rate based on a usage rate of the buffer.

Description

가변적 협대역 네트워크 환경에 적응적인 영상 압축 장치 및 영상 압축 방법{VIDEO COMPRESSION APPARATUS AND VIDEO COMPRESSION METHOD ADAPTIVE TO A VARIABLE NETWORK ENVIRONMENT}VIDEO COMPRESSION APPARATUS AND VIDEO COMPRESSION METHOD ADAPTIVE TO A VARIABLE NETWORK ENVIRONMENT

본 발명은 영상 압축 장치 및 영상 압축 방법에 관한 것으로서, 보다 상세하게는 가변적 협대역 네트워크 환경에서 네트워크 상태에 따라 최적화된 압축 영상을 제공할 수 있는 영상 압축 장치 및 영상 압축 방법에 관한 것이다.The present invention relates to an image compression apparatus and an image compression method, and more particularly, to an image compression apparatus and an image compression method capable of providing compressed images optimized according to network conditions in a variable narrowband network environment.

최근 다양한 분야에서 동영상을 고화질로 압축하여 전송하는 요구가 많아지고 있다. 이에 따라 영상 압축 기술은 H.264에서 HEVC(High Efficiency Video Coding)으로 발전해왔다. HEVC는 H.264에 비해 인코딩(encoding)은 약 5배, 디코딩(decoding)은 약 2배 많은 연산을 수행하여 압축률과 화질을 향상시킨다는 이점이 있다.Recently, in various fields, there is an increasing demand for compressing and transmitting a video in high quality. Accordingly, video compression technology has evolved from H.264 to HEVC (High Efficiency Video Coding). HEVC has the advantage of improving the compression rate and picture quality by performing about 5 times as many operations as for encoding and 2 times as much for decoding as compared to H.264.

한편, 대역폭이 충분히 확보되고 서버를 통한 전송 등이 가능한 환경에서는 고화질/대용량 화질의 압축 영상을 그대로 전송하거나 SVC(Scalable Video Coding)과 같은 기법을 적용하여 단말로 전송할 수 있다. 그러나, 제한된 협대역 환경에서는 이러한 방법을 적용할 수 없으며, 소형 단말 대 소형 단말 간의 통신에는 더욱 적용하기 힘들다는 문제가 있다.On the other hand, in an environment in which bandwidth is sufficiently secured and transmission through a server is possible, high-definition/large-capacity compressed video may be transmitted as it is or a technique such as Scalable Video Coding (SVC) may be applied to transmit to the terminal. However, this method cannot be applied in a limited narrowband environment, and there is a problem in that it is more difficult to apply the method to communication between a small terminal and a small terminal.

본 발명이 해결하고자 하는 기술적 과제는 제한된 협대역 환경에서 소형 단말 간의 압축 전송 상태를 모니터링하여 네트워크 상태를 분석하고, 네트워크 상태에 대응하여 최적의 압축 설정을 제공할 수 있는 영상 압축 장치 및 영상 압축 방법을 제공하는 데에 있다. 본 발명의 실시예들이 이루고자 하는 기술적 과제는 상기와 같은 기술적 과제들로 한정되지 않으며, 이하의 실시예들로부터 또 다른 기술적 과제들이 유추될 수 있다.The technical problem to be solved by the present invention is an image compression apparatus and an image compression method capable of monitoring a compression transmission state between small terminals in a limited narrowband environment, analyzing a network state, and providing an optimal compression setting in response to a network state is to provide The technical problems to be achieved by the embodiments of the present invention are not limited to the above technical problems, and other technical problems may be inferred from the following embodiments.

상기 기술적 과제를 해결하기 위한 본 발명의 실시예에 따른 영상 압축 장치는 조절 가능한 해상도 및 프레임 레이트(frame rate)에 기초하여 영상 데이터를 인코딩하는 인코더, 상기 인코딩된 영상 데이터를 임시 저장하는 버퍼, 상기 버퍼에 임시 저장된 상기 인코딩된 영상 데이터를 네트워크를 통해 송신하는 통신부 및 상기 버퍼의 사용률에 기초하여 상기 해상도 및 상기 프레임 레이트 중 적어도 어느 하나를 조절하는 제어부를 포함한다.An image compression apparatus according to an embodiment of the present invention for solving the above technical problem includes an encoder for encoding image data based on an adjustable resolution and a frame rate, a buffer for temporarily storing the encoded image data, and the and a communication unit for transmitting the encoded image data temporarily stored in a buffer through a network, and a control unit for adjusting at least one of the resolution and the frame rate based on a usage rate of the buffer.

또한, 상기 제어부는 상기 네트워크의 대역폭 변동에 따라 가변되는 상기 버퍼의 잔여 메모리 용량에 기초하여 상기 버퍼의 사용률을 계산한다.In addition, the control unit calculates the use rate of the buffer based on the remaining memory capacity of the buffer, which varies according to a change in the bandwidth of the network.

또한, 상기 제어부는 상기 버퍼의 사용률이 기 설정된 최적 범위 이내에 포함되도록 상기 해상도 및 상기 프레임 레이트 중 적어도 어느 하나를 조절한다.In addition, the controller adjusts at least one of the resolution and the frame rate so that the buffer usage rate is within a preset optimal range.

또한, 상기 제어부는 상기 최적 범위를 상기 버퍼의 최대 사용률의 20% 내지 60%로 설정한다.In addition, the control unit sets the optimal range to 20% to 60% of the maximum use rate of the buffer.

또한, 제어부는 상기 프레임 레이트를 기 설정된 조절 범위 내에서 조절한 상태에서, 상기 해상도를 조절한다.In addition, the control unit adjusts the resolution while the frame rate is adjusted within a preset adjustment range.

또한, 상기 제어부는 상기 영상 데이터를 기 설정된 기준 해상도 및 기준 프레임 레이트로 인코딩한 상태에서, 상기 버퍼의 사용률을 획득하고, 상기 획득된 사용률이 최적 범위의 하한 값 보다 작은 경우, 상기 프레임 레이트를 상기 조절 범위 내에서 단계적으로 증가시키고, 상기 획득된 사용률이 상기 최적 범위의 상한 값 보다 큰 경우, 상기 프레임 레이트를 상기 조절 범위 내에서 단계적으로 감소시킨다.In addition, the control unit obtains the usage rate of the buffer in a state in which the image data is encoded with a preset reference resolution and a reference frame rate, and sets the frame rate when the obtained usage rate is less than a lower limit value of the optimal range. Increase stepwise within the adjustment range, and when the obtained usage rate is greater than the upper limit value of the optimum range, decrease the frame rate stepwise within the adjustment range.

또한, 상기 제어부는 상기 프레임 레이트를 상기 조절 범위의 상한 값 까지 증가시킨 상태에서, 상기 버퍼의 사용률이 최적 범위의 하한 값 보다 작은 경우, 상기 해상도를 기 설정된 크기만큼 증가시킨다.Also, in a state in which the frame rate is increased up to the upper limit of the adjustment range, the controller increases the resolution by a preset size when the buffer usage rate is less than the lower limit of the optimal range.

또한, 상기 제어부는 상기 프레임 레이트를 상기 조절 범위의 하한 값까지 감소시킨 상태에서, 상기 버퍼의 사용률이 상기 최적 범위의 상한 값 보다 큰 경우, 상기 해상도를 기 설정된 크기만큼 감소시킨다.Also, in a state in which the frame rate is reduced to a lower limit value of the adjustment range, the controller decreases the resolution by a preset size when the buffer usage rate is greater than the upper limit value of the optimal range.

상기 기술적 과제를 해결하기 위한 본 발명의 다른 실시예에 따른 영상 압축 방법은 조절 가능한 해상도 및 프레임 레이트에 기초하여 영상 데이터를 인코딩하는 단계, 상기 인코딩된 영상 데이터를 버퍼에 임시 저장하는 단계, 상기 버퍼에 임시 저장된 상기 인코딩된 영상 데이터를 네트워크를 통해 송신하는 단계 및 상기 버퍼의 사용률에 기초하여 상기 해상도 및 상기 프레임 레이트 중 적어도 어느 하나를 조절하는 단계를 포함한다.An image compression method according to another embodiment of the present invention for solving the above technical problem includes encoding image data based on an adjustable resolution and a frame rate, temporarily storing the encoded image data in a buffer, the buffer transmitting the encoded image data temporarily stored in a network; and adjusting at least one of the resolution and the frame rate based on a utilization rate of the buffer.

상기 기술적 과제를 해결하기 위한 본 발명의 또 실시예에 따른 기록 매체는 상기의 방법을 컴퓨터에서 실행하기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있다.The recording medium according to another embodiment of the present invention for solving the above technical problem can be read by a computer in which a program for executing the above method is recorded in a computer.

본 발명의 기술적 과제는 상술한 바에 한정되지 않으며 이하의 예들로부터 또 다른 기술적 과제들이 유추될 수 있다.The technical problems of the present invention are not limited to the above, and other technical problems can be inferred from the following examples.

본 발명의 일 실시예에 따른 영상 압축 장치 및 압축 방법은 네트워크 상태에 따라 영상 데이터의 인코딩 인자를 적응적으로 가변하므로, 통신 성능의 신뢰성이 증가되는 효과가 있다.Since the image compression apparatus and the compression method according to an embodiment of the present invention adaptively vary an encoding factor of image data according to a network state, reliability of communication performance is increased.

또한, 영상 압축 장치 및 압축 방법은 영상 데이터의 인코딩 인자만을 가변하므로, 추가적인 장비나 추가 비용 없이도 통신 성능의 신뢰성을 향상시킨다는 이점이 있다.In addition, since the image compression apparatus and the compression method vary only the encoding factor of image data, there is an advantage in that the reliability of communication performance is improved without additional equipment or additional cost.

또한, 영상 압축 장치 및 압축 방법은 네트워크 상태에 따라 인코딩 인자를 자동적으로 가변하므로, 전시와 같은 비상 상황에서 신속한 통신을 보증한다.In addition, since the video compression apparatus and the compression method automatically vary the encoding factor according to network conditions, it guarantees rapid communication in emergency situations such as wartime.

도 1은 본 발명의 실시예에 따른 영상 압축 시스템을 설명하기 위한 도면이다.
도 2는 본 발명의 실시예에 따른 영상 압축 방법을 설명하기 위한 순서도이다.
도 3은 도 2의 인코딩 인자를 조절하는 방법을 설명하기 위한 순서도이다.
도 4는 도 3의 설명에 참조되는 도면이다.
도 5는 본 발명의 실시예에 따른 프레임 레이트의 최적 범위 내에서 프레임 레이트를 조절하는 방법을 설명하기 위한 순서도이다.
도 6은 도 5의 설명에 참조되는 도면이다.
도 7은 본 발명의 실시예에 따른 프레임 레이트 증가에 따른 해상도 조절 방법을 설명하기 위한 순서도이다.
도 8은 본 발명의 실시예에 따른 프레임 레이트 감소에 따른 해상도 조절 방법을 설명하기 위한 순서도이다.
1 is a diagram for explaining an image compression system according to an embodiment of the present invention.
2 is a flowchart illustrating an image compression method according to an embodiment of the present invention.
3 is a flowchart illustrating a method of adjusting the encoding factor of FIG. 2 .
FIG. 4 is a diagram referenced in the description of FIG. 3 .
5 is a flowchart illustrating a method of adjusting a frame rate within an optimal range of frame rates according to an embodiment of the present invention.
FIG. 6 is a diagram referenced in the description of FIG. 5 .
7 is a flowchart illustrating a resolution adjustment method according to an increase in a frame rate according to an embodiment of the present invention.
8 is a flowchart illustrating a resolution adjustment method according to a frame rate reduction according to an embodiment of the present invention.

실시예들에서 사용되는 용어는 본 발명에서의 기능을 고려하면서 가능한 현재 널리 사용되는 일반적인 용어들을 선택하였으나, 이는 당 분야에 종사하는 기술자의 의도 또는 판례, 새로운 기술의 출현 등에 따라 달라질 수 있다. 또한, 특정한 경우는 출원인이 임의로 선정한 용어도 있으며, 이 경우 해당되는 발명의 설명 부분에서 상세히 그 의미를 기재할 것이다. 따라서 본 발명에서 사용되는 용어는 단순한 용어의 명칭이 아닌, 그 용어가 가지는 의미와 본 발명의 전반에 걸친 내용을 토대로 정의되어야 한다.Terms used in the embodiments are selected as currently widely used general terms as possible while considering functions in the present invention, but may vary depending on intentions or precedents of those of ordinary skill in the art, emergence of new technologies, and the like. In addition, in a specific case, there is a term arbitrarily selected by the applicant, and in this case, the meaning will be described in detail in the description of the corresponding invention. Therefore, the term used in the present invention should be defined based on the meaning of the term and the overall content of the present invention, rather than the name of a simple term.

명세서 전체에서 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있음을 의미한다. 또한, 명세서에 기재된 "??부", "??모듈" 등의 용어는 적어도 하나의 기능이나 동작을 처리하는 단위를 의미하며, 이는 하드웨어 또는 소프트웨어로 구현되거나 하드웨어와 소프트웨어의 결합으로 구현될 수 있다.In the entire specification, when a part "includes" a certain element, this means that other elements may be further included, rather than excluding other elements, unless otherwise stated. In addition, terms such as "unit" and "module" described in the specification mean a unit that processes at least one function or operation, which may be implemented as hardware or software, or a combination of hardware and software. have.

도 1은 본 발명의 실시예에 따른 영상 압축 시스템을 설명하기 위한 도면이다.1 is a diagram for explaining an image compression system according to an embodiment of the present invention.

도면을 참조하면, 본 발명의 실시예에 따른 영상 압축 시스템(10)은 영상 압축 장치(100) 및 영상 압축 해제 장치(200)를 포함할 수 있다.Referring to the drawings, an image compression system 10 according to an embodiment of the present invention may include an image compression apparatus 100 and an image decompression apparatus 200 .

영상 압축 장치(100)는 영상 데이터를 인코딩(encoding)하는 인코더(110), 인코딩된 영상 데이터를 임시 저장하는 버퍼(120), 임시 저장된 영상 데이터를 영상 압축 해제 장치(200)로 전송하는 통신부(130) 및 인코더(110), 버퍼(120), 통신부(130)를 제어하는 제어부(140)를 포함할 수 있다.The image compression apparatus 100 includes an encoder 110 for encoding image data, a buffer 120 for temporarily storing the encoded image data, and a communication unit for transmitting the temporarily stored image data to the image decompression apparatus 200 ( 130 ) and the controller 140 for controlling the encoder 110 , the buffer 120 , and the communication unit 130 .

인코더(110)는 영상 데이터(video)를 인코딩할 수 있다. 구체적으로, 인코더(110)는 아날로그 신호인 영상 데이터를 디지털 신호로 변환한 후 이를 압축할 수 있다. 예를 들어, 인코더(110)는 H.264 또는 HEVC(High Efficiency Video Coding) 코덱을 통해 영상을 압축하고, AAC(Advanced Audio Coding) 코덱을 통해 음성을 압축할 수 있다.The encoder 110 may encode image data (video). Specifically, the encoder 110 may convert image data, which is an analog signal, into a digital signal and then compress the image data. For example, the encoder 110 may compress an image through H.264 or HEVC (High Efficiency Video Coding) codec, and may compress audio through AAC (Advanced Audio Coding) codec.

인코더(110)는 해상도(resolution) 및 프레임 레이트(frame rate)에 기초하여 영상 데이터를 인코딩할 수 있다. 이 때, 해상도는 하나의 프레임을 표현하기 위해 사용되는 픽셀(pixel) 수를 의미하며, 프레임의 가로 픽셀 수와 세로 픽셀수의 곱으로 표현될 수 있다. 또한, 프레임 레이트는 초당 전송되는 프레임 수를 의미할 수 있다.The encoder 110 may encode image data based on a resolution and a frame rate. In this case, the resolution means the number of pixels used to express one frame, and may be expressed as a product of the number of horizontal pixels and the number of vertical pixels of the frame. Also, the frame rate may mean the number of frames transmitted per second.

인코더(110)의 초기 해상도 및 초기 프레임 레이트는 미리 설정될 수 있다. 예를 들어, 인코더(110)의 초기 해상도는 640X480이고, 초기 프레임 레이트는 15FPS(Frame Per Second)로 설정될 수 있다.The initial resolution and initial frame rate of the encoder 110 may be preset. For example, the initial resolution of the encoder 110 may be 640X480, and the initial frame rate may be set to 15 FPS (Frame Per Second).

인코더(110)의 해상도 및 프레임 레이트는 제어부(140)의 제어에 의해 가변될 수 있다. 일 실시예에서, 제어부(140)는 인코딩 인자(FPS, resolution)를 인코더(110)에 전송하고, 인코더(110)는 인코딩 인자(factor)에 기초하여 영상 데이터의 해상도 및 프레임 레이트를 변경할 수 있다. 또한 인코더(110)는 변경된 해상도 및 프레임 레이트에 기초하여 영상 데이터를 인코딩할 수 있다.The resolution and frame rate of the encoder 110 may be varied under the control of the controller 140 . In an embodiment, the controller 140 transmits an encoding factor (FPS, resolution) to the encoder 110, and the encoder 110 may change the resolution and frame rate of image data based on the encoding factor. . Also, the encoder 110 may encode image data based on the changed resolution and frame rate.

버퍼(120)는 인코딩된 영상 데이터를 임시로 저장할 수 있다. 이를 위하여 버퍼(120)는 메모리를 포함할 수 있다. 일 실시예에서, 메모리는 RAM(Random Access Memory)일 수 있다. 예를 들어, 메모리는 선입선출(FIFO: First In First Out) 메모리로 구현될 수 있으나, 이에 제한되지 않는다.The buffer 120 may temporarily store encoded image data. To this end, the buffer 120 may include a memory. In one embodiment, the memory may be random access memory (RAM). For example, the memory may be implemented as a first in first out (FIFO) memory, but is not limited thereto.

한편, 버퍼(120)는 통신부(130)의 일부 구성으로 구현될 수도 있다.Meanwhile, the buffer 120 may be implemented as a part of the communication unit 130 .

통신부(130)는 영상 압축 해제 장치(200)와 무선 통신할 수 있다. 이를 위해, 통신부(130)는 무선 통신 모듈을 포함할 수 있다.The communication unit 130 may wirelessly communicate with the image decompression apparatus 200 . To this end, the communication unit 130 may include a wireless communication module.

통신부(130)는 버퍼(120)에 임시 저장된 영상 데이터를 독출(read)하고, 독출된 영상 데이터를 영상 압축 해제 장치(200)로 실시간으로 전송할 수 있다.The communication unit 130 may read the image data temporarily stored in the buffer 120 , and transmit the read image data to the image decompression apparatus 200 in real time.

한편, 버퍼(120)의 사용률은 네트워크의 상태가 불안정할수록 높을 수 있다. 버퍼(120)의 사용률이 최대 사용량을 초과하는 경우, 영상 데이터의 손실이 발생할 수 있다.On the other hand, the usage rate of the buffer 120 may be higher as the network state is unstable. If the usage rate of the buffer 120 exceeds the maximum usage, image data may be lost.

제어부(140)는 버퍼(120)의 사용률을 계산함으로써, 네트워크의 상태를 간접적으로 파악할 수 있다. 예를 들어, 제어부(140)는 버퍼(120)의 사용률이 버퍼(120)의 최대 사용률의 20% 내지 60%인 경우, 네트워크 상태가 양호하다고 판단할 수 있다. 또한, 제어부(140)는 버퍼(120)의 사용률이 버퍼(120)의 최대 사용률의 20% 미만인 경우, 네트워크 대역폭에 여유가 있다고 판단할 수 있다. 또한, 제어부(140)는 버퍼(120)의 사용률이 버퍼(120)의 최대 사용률의 60%를 초과하는 경우, 네트워크가 불안정하다고 판단할 수 있다.The control unit 140 may indirectly grasp the state of the network by calculating the usage rate of the buffer 120 . For example, when the usage rate of the buffer 120 is 20% to 60% of the maximum usage rate of the buffer 120 , the controller 140 may determine that the network state is good. Also, when the usage rate of the buffer 120 is less than 20% of the maximum usage rate of the buffer 120 , the controller 140 may determine that there is room in the network bandwidth. Also, when the usage rate of the buffer 120 exceeds 60% of the maximum usage rate of the buffer 120 , the controller 140 may determine that the network is unstable.

제어부(140)는 버퍼(120)의 잔여 메모리 용량에 기초하여 버퍼(120)의 사용률을 계산할 수 있다. 잔여 메모리 용량은 인코딩된 영상 데이터가 저장되어 있지 않은 메모리 영역들의 크기를 의미할 수 있다. 예를 들어, 버퍼(120)의 최대 사용률은 버퍼(120)의 잔여 메모리 용량이 0인 경우를 의미할 수 있다. 또한, 버퍼(120)가 최대 사용률의 20%를 사용하고 있다는 의미는 버퍼(120)의 잔여 메모리 용량이 버퍼(120)의 총 메모리 용량에 80%인 경우를 의미할 수 있다. 또한, 버퍼(120)가 최대 사용률의 40%를 사용하고 있다는 의미는 버퍼(120)의 잔여 메모리 용량이 버퍼(120)의 총 메모리 용량에 60%인 경우를 의미할 수 있다.The controller 140 may calculate the usage rate of the buffer 120 based on the remaining memory capacity of the buffer 120 . The remaining memory capacity may mean the size of memory areas in which encoded image data is not stored. For example, the maximum usage rate of the buffer 120 may mean a case in which the remaining memory capacity of the buffer 120 is 0. Also, the meaning that the buffer 120 is using 20% of the maximum usage rate may mean that the remaining memory capacity of the buffer 120 is 80% of the total memory capacity of the buffer 120 . Also, the meaning that the buffer 120 is using 40% of the maximum usage rate may mean that the remaining memory capacity of the buffer 120 is 60% of the total memory capacity of the buffer 120 .

본 발명의 실시예에 따른 영상 압축 장치(100)는 패킷의 왕복 시간(예를 들어, Round Trip Time)을 계산하는 복잡한 방법이 아닌, 버퍼(120)의 잔여 메모리 용량을 통해 네트워크의 상태를 보다 간단하게 판단할 수 있다는 이점이 있다.The image compression apparatus 100 according to the embodiment of the present invention sees the network state through the remaining memory capacity of the buffer 120 rather than a complicated method of calculating the round trip time (eg, Round Trip Time) of packets. It has the advantage of being able to make a simple judgment.

또한, 본 발명의 실시예에 따른 영상 압축 장치(100)는 버퍼(120)의 패킷 전송률(data rate) 등을 통해 버퍼(120)의 상태를 판단하는 복잡한 방법이 아닌, 버퍼(120)의 잔여 메모리 용량을 통해 네트워크의 상태를 보다 간단하게 판단할 수 있다는 이점이 있다.In addition, the image compression apparatus 100 according to the embodiment of the present invention is not a complicated method of determining the state of the buffer 120 through the packet data rate of the buffer 120 , but the remaining amount of the buffer 120 . There is an advantage that the state of the network can be more simply determined through the memory capacity.

제어부(140)는 버퍼(120)의 사용률에 기초하여 인코더(110)의 압축 해상도 및 압축 프레임 중 적어도 어느 하나를 조절할 수 있다.The controller 140 may adjust at least one of a compression resolution of the encoder 110 and a compressed frame based on the usage rate of the buffer 120 .

제어부(140)는 버퍼(120)의 사용률이 기 설정된 최적 범위 이내에 포함되도록 해상도 및 프레임 레이트 중 적어도 어느 하나를 조절할 수 있다. 최적 범위는 버퍼(120)의 최대 사용률의 20% 내지 60%로 설정될 수 있다.The controller 140 may adjust at least one of a resolution and a frame rate so that the usage rate of the buffer 120 is included within a preset optimal range. The optimal range may be set to 20% to 60% of the maximum usage rate of the buffer 120 .

제어부(140)는 해상도 보다 프레임 레이트를 먼저 조절할 수 있다. 제어부(140)는 프레임 레이트를 기 설정된 조절 범위 내에서 조절한 상태에서, 해상도를 조절할 수 있다.The controller 140 may adjust the frame rate before the resolution. The controller 140 may adjust the resolution while the frame rate is adjusted within a preset adjustment range.

제어부(140)는 프레임 레이트를 기 설정된 조절 범위 내에서 조절하였으나, 버퍼(120)의 사용률이 최적 범위 이내에 포함되지 않는 경우, 해상도를 조절할 수 있다. 예를 들어, 조절 범위는 5FPS 내지 30FPS로 설정될 수 있다.Although the control unit 140 adjusts the frame rate within a preset adjustment range, when the usage rate of the buffer 120 is not within the optimal range, the controller 140 may adjust the resolution. For example, the control range may be set to 5 FPS to 30 FPS.

제어부(140)는 버퍼(120)의 사용률이 최적 범위의 하한 값 보다 작은 경우, 프레임 레이트를 조절 범위 내에서 단계적으로 증가시킬 수 있다. 예를 들어, 제어부(140)는 프레임 레이트를 3FPS 씩 단계적으로 증가시킬 수 있다.When the usage rate of the buffer 120 is less than the lower limit value of the optimal range, the controller 140 may increase the frame rate stepwise within the adjustment range. For example, the controller 140 may increase the frame rate in steps of 3 FPS.

제어부(140)는 프레임 레이트를 조절 범위의 상한 값 까지 증가시킨 상태에서 버퍼(120)의 사용률이 최적 범위의 하한 값 보다 작은 경우, 해상도를 기 설정된 크기만큼 증가시킬 수 있다. When the usage rate of the buffer 120 is smaller than the lower limit of the optimal range while the frame rate is increased up to the upper limit of the adjustment range, the controller 140 may increase the resolution by a preset size.

제어부(140)는 버퍼(120)의 사용률이 최적 범위의 상한 값 보다 큰 경우, 프레임 레이트를 조절 범위 내에서 단계적으로 감소시킬 수 있다. 예를 들어, 제어부(140)는 프레임 레이트를 5FPS 씩 단계적으로 감소시킬 수 있다.When the usage rate of the buffer 120 is greater than the upper limit value of the optimal range, the controller 140 may reduce the frame rate in stages within the adjustment range. For example, the controller 140 may decrease the frame rate in steps of 5 FPS.

제어부(140)는 프레임 레이트를 조절 범위의 상한 값 까지 증가시킨 상태에서, 버퍼(120)의 사용률이 최적 범위의 하한 값 보다 작은 경우, 해상도를 기 설정된 크기만큼 증가시킬 수 있다.The controller 140 may increase the resolution by a preset size when the usage rate of the buffer 120 is less than the lower limit of the optimal range while the frame rate is increased up to the upper limit of the adjustment range.

한편, 도 1의 영상 압축 장치(100)는 무인 자동차, 드론과 같은 자율 구동 기기에 배치될 수 있다. 이외에도 영상 압축 장치(100)는 스마트폰, 휴대폰, PDA(personal digital assistant), 랩톱(laptop), PC, 등 다양한 모바일 또는 비모바일 컴퓨팅 장치에도 배치될 수 있다. 또한, 영상 데이터는 상기 장치들에 구비된 카메라 등에서 제공될 수 있다.Meanwhile, the image compression apparatus 100 of FIG. 1 may be disposed in an autonomous driving device such as an unmanned vehicle or a drone. In addition, the image compression apparatus 100 may be disposed in various mobile or non-mobile computing devices, such as a smart phone, a mobile phone, a personal digital assistant (PDA), a laptop, and a PC. In addition, the image data may be provided by a camera provided in the devices.

영상 압축 해제 장치(200)는 통신부(210) 및 디코더(220)를 포함할 수 있다.The image decompression apparatus 200 may include a communication unit 210 and a decoder 220 .

통신부(210)는 영상 압축 장치(100)와 무선 통신할 수 있다. 이를 위하여 통신부(210)는 무선 통신 모듈을 포함할 수 있다. 통신부(210)는 인코딩된 영상 데이터를 수신할 수 있다.The communication unit 210 may wirelessly communicate with the image compression apparatus 100 . To this end, the communication unit 210 may include a wireless communication module. The communication unit 210 may receive encoded image data.

디코더(220)는 인코딩된 영상 데이터를 디코딩(decoding)하고, 디코딩된 영상 데이터를 소정의 표시 수단(미도시)에 제공할 수 있다.The decoder 220 may decode the encoded image data and provide the decoded image data to a predetermined display means (not shown).

도 2는 본 발명의 실시예에 따른 영상 압축 방법을 설명하기 위한 순서도이다.2 is a flowchart illustrating an image compression method according to an embodiment of the present invention.

도면을 참조하면, S210 단계에서, 인코더(110)는 조절 가능한 해상도 및 프레임 레이트에 기초하여 영상 데이터를 인코딩할 수 있다.Referring to the drawings, in step S210 , the encoder 110 may encode image data based on an adjustable resolution and frame rate.

인코더(110)의 초기 해상도 및 초기 프레임 레이트는 미리 설정될 수 있다. 예를 들어, 제어부(140)는 인코더(110)의 초기 해상도를 640X480으로 설정하고, 인코더(110)의 초기 프레임 레이트를 15FPS(Frame Per Second)로 설정할 수 있다.The initial resolution and initial frame rate of the encoder 110 may be preset. For example, the controller 140 may set the initial resolution of the encoder 110 to 640X480 and set the initial frame rate of the encoder 110 to 15 FPS (Frame Per Second).

S220 단계에서, 버퍼(120)는 인코딩된 영상 데이터를 임시 저장할 수 있다. 일 실시예에서, 버퍼(120)는 통신부(130)의 일부 구성으로 구현될 수도 있다.In operation S220 , the buffer 120 may temporarily store the encoded image data. In an embodiment, the buffer 120 may be implemented as a part of the communication unit 130 .

S230 단계에서, 통신부(130)는 버퍼(120)에 임시 저장된 인코딩된 영상 데이터를 네트워크를 통해 송신할 수 있다.In step S230 , the communication unit 130 may transmit the encoded image data temporarily stored in the buffer 120 over the network.

통신부(130)는 버퍼(120)에 임시 저장된 영상 데이터를 독출하고, 독출된 영상 데이터를 무선 네트워크를 통해 영상 압축 해제 장치(200)로 송신할 수 있다.The communication unit 130 may read the image data temporarily stored in the buffer 120 , and transmit the read image data to the image decompression apparatus 200 through a wireless network.

S240 단계에서, 제어부(140)는 버퍼(120)의 사용률에 기초하여 해상도 및 프레임 레이트 중 적어도 어느 하나를 조절할 수 있다. 버퍼(120)의 사용률은 버퍼(120)의 잔여 메모리 용량에 기초하여 계산될 수 있다.In operation S240 , the controller 140 may adjust at least one of a resolution and a frame rate based on the usage rate of the buffer 120 . The usage rate of the buffer 120 may be calculated based on the remaining memory capacity of the buffer 120 .

제어부(140)의 해상도 및 프레임 레이트 조절 방법은 도 3 이하에서 보다 상세하게 살펴본다.A method of adjusting the resolution and frame rate of the controller 140 will be described in more detail below with reference to FIG. 3 .

도 3은 도 2의 인코딩 인자를 조절하는 방법을 설명하기 위한 순서도이고, 도 4는 도 3의 설명에 참조되는 도면이다.FIG. 3 is a flowchart for explaining a method of adjusting the encoding factor of FIG. 2 , and FIG. 4 is a diagram referred to in the description of FIG. 3 .

도면을 참조하면, 도 3의 S310 단계에서, 제어부(140)는 네트워크의 대역폭 변동에 따라 가변되는 버퍼(120)의 잔여 메모리 크기에 기초하여 버퍼(120)의 사용률을 계산할 수 있다.Referring to the drawings, in step S310 of FIG. 3 , the controller 140 may calculate the usage rate of the buffer 120 based on the remaining memory size of the buffer 120 that varies according to a change in the bandwidth of the network.

구체적으로, 충분한 대역폭과 별도의 스트리밍 서버 같은 장비가 제공되지 않는 소형 단말과 단말 사이에는 주변 환경, 단말기 사이의 거리 등 여러 가지 요인으로 인하여 네트워크의 대역폭이 수시로 변할 수 있다. 또한, 이러한 네트워크의 대역폭 변화는 버퍼(120)의 사용률에 영향을 미친다. 예를 들어, 네트워크의 대역폭이 작아질수록 버퍼(120)의 사용률이 커질 수 있다. 반대로 네트워크의 대역폭이 커질수록 버퍼(120)의 사용률이 작아질 수 있다.Specifically, the bandwidth of the network may change frequently due to various factors, such as the surrounding environment and the distance between the terminals, between the terminal and a small terminal for which sufficient bandwidth and equipment such as a separate streaming server are not provided. In addition, such a change in the bandwidth of the network affects the usage rate of the buffer 120 . For example, as the bandwidth of the network decreases, the usage rate of the buffer 120 may increase. Conversely, as the bandwidth of the network increases, the usage rate of the buffer 120 may decrease.

따라서, 제어부(140)는 버퍼(120)의 사용률을 계산함으로써, 네트워크의 상태를 간접적으로 파악할 수 있다. 예를 들어, 제어부(140)는 버퍼(120)의 사용률이 버퍼(120)의 최대 사용률의 20% 내지 60%인 경우, 네트워크 상태가 양호하다고 판단할 수 있다. 또한, 제어부(140)는 버퍼(120)의 사용률이 버퍼(120)의 최대 사용률의 20% 미만인 경우, 네트워크 대역폭에 여유가 있다고 판단할 수 있다. 또한, 제어부(140)는 버퍼(120)의 사용률이 버퍼(120)의 최대 사용률의 60%를 초과하는 경우, 네트워크가 불안정하다고 판단할 수 있다.Accordingly, the control unit 140 may indirectly grasp the state of the network by calculating the usage rate of the buffer 120 . For example, when the usage rate of the buffer 120 is 20% to 60% of the maximum usage rate of the buffer 120 , the controller 140 may determine that the network state is good. Also, when the usage rate of the buffer 120 is less than 20% of the maximum usage rate of the buffer 120 , the controller 140 may determine that there is room in the network bandwidth. Also, when the usage rate of the buffer 120 exceeds 60% of the maximum usage rate of the buffer 120 , the controller 140 may determine that the network is unstable.

제어부(140)는 버퍼(120)의 잔여 메모리 용량에 기초하여 버퍼(120)의 사용률을 계산할 수 있다. 잔여 메모리 용량은 인코딩된 영상 데이터가 저장되어 있지 않는 메모리 영역들의 크기를 의미할 수 있다. 예를 들어, 제어부(140)는 버퍼(120)의 잔여 메모리 용량이 버퍼(120)의 총 메모리 용량의 80%인 경우, 버퍼(120)의 사용률이 최대 사용률의 20%라고 판단할 수 있다. 또한, 제어부(140)는 버퍼(120)의 잔여 메모리 용량이 버퍼(120)의 총 메모리 용량의 40%인 경우, 버퍼(120)의 사용률이 최대 사용률의 60%라고 판단할 수 있다.The controller 140 may calculate the usage rate of the buffer 120 based on the remaining memory capacity of the buffer 120 . The remaining memory capacity may mean the size of memory areas in which encoded image data is not stored. For example, when the remaining memory capacity of the buffer 120 is 80% of the total memory capacity of the buffer 120 , the controller 140 may determine that the usage rate of the buffer 120 is 20% of the maximum usage rate. Also, when the remaining memory capacity of the buffer 120 is 40% of the total memory capacity of the buffer 120 , the controller 140 may determine that the usage rate of the buffer 120 is 60% of the maximum usage rate.

버퍼(120)의 총 메모리 용량은 미리 설정될 수 있다. 도 4는 버퍼(120)의 메모리 크기의 다양한 예를 도시한다. 도 4에서와 같이, 버퍼(120)의 총 메모리 용량은 해상도, 프레임 레이트, 픽셀당 크기 및 버퍼링 시간에 의하여 결정될 수 있다. 버퍼(120)의 메모리는 도 4의 버퍼 크기 중 어느 하나로 설계될 수 있다.The total memory capacity of the buffer 120 may be preset. 4 shows various examples of the memory size of the buffer 120 . As shown in FIG. 4 , the total memory capacity of the buffer 120 may be determined by a resolution, a frame rate, a size per pixel, and a buffering time. The memory of the buffer 120 may be designed with any one of the buffer sizes of FIG. 4 .

다시 도 3의 S320 단계에서, 제어부(140)는 버퍼(120)의 사용률이 기 설정된 최적 범위 이내에 포함되도록 해상도 및 프레임 레이트 중 적어도 어느 하나를 조절할 수 있다.Again in step S320 of FIG. 3 , the controller 140 may adjust at least one of a resolution and a frame rate so that the usage rate of the buffer 120 is included within a preset optimal range.

최적 범위는 실험적으로 버퍼(120)의 최대 사용률의 20% 내지 60%로 설정될 수 있다.The optimal range may be experimentally set to 20% to 60% of the maximum use rate of the buffer 120 .

제어부(140)는 해상도 보다 프레임 레이트를 먼저 조절할 수 있다. 제어부(140)는 프레임 레이트를 기 설정된 조절 범위 내에서 조절한 상태에서, 해상도를 조절할 수 있다.The controller 140 may adjust the frame rate before the resolution. The controller 140 may adjust the resolution while the frame rate is adjusted within a preset adjustment range.

도 5는 본 발명의 실시예에 따른 프레임 레이트의 최적 범위 내에서 프레임 레이트를 조절하는 방법을 설명하기 위한 순서도이고, 도 6은 도 5의 설명에 참조되는 도면이다.5 is a flowchart for explaining a method of adjusting a frame rate within an optimal range of a frame rate according to an embodiment of the present invention, and FIG. 6 is a diagram referred to in the description of FIG. 5 .

도면을 참조하면, 도 5의 S510 단계에서, 제어부(140)는 영상 데이터를 기준 해상도 및 기준 프레임 레이트로 인코딩한 상태에서 버퍼(120)의 사용률을 획득할 수 있다.Referring to the drawings, in step S510 of FIG. 5 , the controller 140 may obtain the usage rate of the buffer 120 in a state in which image data is encoded with a reference resolution and a reference frame rate.

기준 해상도는 미리 설정된 값으로서 초기 해상도와 동일한 의미일 수 있다. 마찬가지로 기준 프레임 레이트는 미리 설정된 값으로서 초기 프레임 레이트와 동일한 의미일 수 있다.The reference resolution is a preset value and may have the same meaning as the initial resolution. Similarly, the reference frame rate is a preset value and may have the same meaning as the initial frame rate.

기준 해상도 및 기준 프레임 레이트는 네트워크의 이론상 대역폭에 기초하여 초기 설정될 수 있다. 도 6은 이론상 대역폭에 따른 기준 해상도 및 기준 프레임 레이트를 설명하기 위한 도면이다.The reference resolution and reference frame rate may be initially set based on the theoretical bandwidth of the network. 6 is a diagram for explaining a reference resolution and a reference frame rate according to a theoretical bandwidth.

도 6에서와 같이, 제어부(140)는 이론상 대역폭이 64kbps 미만인 경우 기준 해상도를 176X144으로 설정할 수 있다. 또한, 제어부(140)는 이론상 대역폭이 64kbps 내지 256kbps인 경우 기준 해상도를 352X288으로 설정할 수 있다. 또한, 제어부(140)는 이론상 대역폭이 256kbps 내지 512kbps인 경우 기준 해상도를 640X480으로 설정할 수 있다. 또한, 제어부(140)는 이론상 대역폭이 1024kbps 이상인 경우 기준 해상도를 1280X720으로 설정할 수 있다. 제어의 편의를 위하여 도 6에서 제어부(140)는 기준 프레임 레이트를 15FPS로 설정하되, 프레임 레이트를 5FPS 내지 30FPS 범위에서 조절할 수 있다.As shown in FIG. 6 , the controller 140 may set the reference resolution to 176X144 when the theoretical bandwidth is less than 64 kbps. Also, when the theoretical bandwidth is 64 kbps to 256 kbps, the controller 140 may set the reference resolution to 352X288. Also, when the theoretical bandwidth is 256 kbps to 512 kbps, the controller 140 may set the reference resolution to 640X480. In addition, the controller 140 may set the reference resolution to 1280X720 when the theoretical bandwidth is 1024 kbps or more. For convenience of control, in FIG. 6 , the controller 140 sets the reference frame rate to 15 FPS, but may adjust the frame rate in the range of 5 FPS to 30 FPS.

다시 도 5의 S520 단계에서, 제어부(140)는 버퍼(120)의 사용률이 최적 범위 내에 포함되는지 여부를 판단할 수 있다. 최적 범위는 버퍼(120)의 최대 사용률의 20% 내지 60%로 설정될 수 있다.In step S520 of FIG. 5 again, the controller 140 may determine whether the usage rate of the buffer 120 is included in the optimal range. The optimal range may be set to 20% to 60% of the maximum usage rate of the buffer 120 .

S530 단계에서, 제어부(140)는 버퍼(120)의 사용률이 최적 범위 내에 포함되는 경우, 기준 프레임 레이트를 최적 프레임 레이트로 결정할 수 있다.In step S530 , when the usage rate of the buffer 120 is within the optimum range, the controller 140 may determine the reference frame rate as the optimum frame rate.

S540 단계에서, 제어부(140)는 최적 프레임 레이트에 기초하여 영상 데이터를 인코딩할 수 있다. 인코딩된 영상은 버퍼(120)에 임시 저장된 후, 통신부(130)에 의해 영상 압축 해제 장치(200)로 전송될 수 있다.In operation S540 , the controller 140 may encode the image data based on the optimal frame rate. The encoded image may be temporarily stored in the buffer 120 and then transmitted to the image decompression apparatus 200 by the communication unit 130 .

한편, S550 단계에서, 제어부(140)는 버퍼(120)의 사용률이 최적 범위 내에 포함되지 않는 경우, 프레임 레이트를 조절할 수 있다. 다시 말해, 제어부(140)는 버퍼(120)의 사용률이 최적 범위 내에 포함되지 않는 경우, 기준 프레임 레이트를 증가 또는 감소시킬 수 있다. 프레임 레이트의 조절 방법은 도 7 이하에서 보다 상세하게 살펴본다.Meanwhile, in step S550 , when the usage rate of the buffer 120 is not included in the optimal range, the controller 140 may adjust the frame rate. In other words, when the usage rate of the buffer 120 is not within the optimal range, the controller 140 may increase or decrease the reference frame rate. A method of adjusting the frame rate will be described in more detail below with reference to FIG. 7 .

도 7은 본 발명의 실시예에 따른 프레임 레이트 증가에 따른 해상도 조절 방법을 설명하기 위한 순서도이다.7 is a flowchart illustrating a resolution adjustment method according to an increase in a frame rate according to an embodiment of the present invention.

보다 상세하게는 도 7은 버퍼(120)의 사용률이 최적 범위의 하한 값 보다 작은 경우, 프레임 레이트 및 해상도의 조절 방법을 설명하기 위한 순서도이다.In more detail, FIG. 7 is a flowchart illustrating a method of adjusting the frame rate and resolution when the usage rate of the buffer 120 is smaller than the lower limit of the optimal range.

도면을 참조하면, S710 단계에서, 제어부(140)는 버퍼(120)의 사용률이 최적 범위의 하한 값(예를 들어, 20%) 보다 작은 경우, 프레임 레이트를 기 설정된 조절 범위 내에서 단계적으로 증가시킬 수 있다. 조절 범위는 5FPS 내지 30FPS 범위일 수 있다.Referring to the drawings, in step S710 , when the usage rate of the buffer 120 is less than the lower limit value (eg, 20%) of the optimal range, the control unit 140 increases the frame rate stepwise within a preset adjustment range. can do it The control range may range from 5 FPS to 30 FPS.

일 실시예에서, 제어부(140)는 프레임 레이트를 조절 범위 내에서 3FPS 씩 단계적으로 증가시킬 수 있다.In an embodiment, the controller 140 may increase the frame rate in steps of 3 FPS within the adjustment range.

S720 단계에서, 제어부(140)는 프레임 레이트를 한 단계(3FPS) 증가시킨 상태에서 획득된 버퍼(120)의 사용률이 최적 범위 내에 포함되는지 여부를 계산할 수 있다.In step S720 , the controller 140 may calculate whether the usage rate of the buffer 120 obtained while the frame rate is increased by one step (3 FPS) is within an optimal range.

S730 단계에서, 제어부(140)는 버퍼(120)의 사용률이 최적 범위 내에 포함되는 경우, 기준 프레임 레이트에서 한 단계(3FPS) 증가된 프레임 레이트를 최적 프레임 레이트로 결정할 수 있다.In step S730 , when the usage rate of the buffer 120 is within the optimum range, the controller 140 may determine the frame rate increased by one step (3 FPS) from the reference frame rate as the optimum frame rate.

S540 단계에서, 제어부(140)는 최적 프레임 레이트에 기초하여 영상 데이터를 인코딩할 수 있다. 인코딩된 영상은 버퍼(120)에 임시 저장된 후, 통신부(130)에 의해 영상 압축 해제 장치(200)로 전송될 수 있다.In operation S540 , the controller 140 may encode the image data based on the optimal frame rate. The encoded image may be temporarily stored in the buffer 120 and then transmitted to the image decompression apparatus 200 by the communication unit 130 .

한편, S750 단계에서, 제어부(140)는 프레임 레이트를 한 단계(3FPS) 증가시킨 상태에서 획득된 버퍼(120)의 사용률이 최적 범위 내에 포함되지 않는 경우, 프레임 레이트가 조절 범위의 상한 값에 도달하였는지 여부를 판단할 수 있다.On the other hand, in step S750 , when the usage rate of the buffer 120 obtained while the frame rate is increased by one step (3 FPS) is not within the optimal range, the frame rate reaches the upper limit value of the adjustment range It can be determined whether or not

제어부(140)는 프레임 레이트를 한 단계(3FPS) 증가시킨 상태에서 획득된 버퍼(120)의 사용률이 조절 범위의 상한 값에 도달하지 못한 경우, 프레임 레이트를 단계적으로 증가시킬 수 잇다. 다시 말해 제어부(140)는 프레임 레이트가 조절 범위의 상한 값에 도달할 때까지 프레임 레이트를 단계적으로 증가시킬 수 있다.The controller 140 may increase the frame rate in stages when the usage rate of the buffer 120 obtained while the frame rate is increased by one step (3 FPS) does not reach the upper limit value of the adjustment range. In other words, the controller 140 may increase the frame rate in stages until the frame rate reaches the upper limit value of the adjustment range.

S760 단계에서 제어부(140)는 프레임 레이트가 조절 범위의 상한 값에 도달한 경우, 기준 해상도를 기 설정된 크기만큼 증가시킬 수 있다. 예를 들어, 기준 해상도가 640X480이고, 프레임 레이트가 조절 범위의 상한 값에 도달한 경우, 제어부(140)는 기준 해상도를 640X480에서 1280X720으로 한 단계 감소시킬 수 있다. 기준 해상도의 증가 크기는 프레임 규격을 고려하여 설정될 수 있다.In step S760 , when the frame rate reaches the upper limit of the adjustment range, the controller 140 may increase the reference resolution by a preset size. For example, when the reference resolution is 640X480 and the frame rate reaches the upper limit value of the adjustment range, the controller 140 may decrease the reference resolution by one step from 640X480 to 1280X720. The increase size of the reference resolution may be set in consideration of the frame standard.

제어부(140)는 증가된 기준 해상도에서 프레임 레이트를 조절함으로써, 최적의 프레임 레이트를 결정할 수 있다. 다시 말해, 제어부(140)는 증가된 기준 해상도에 따라 S710 내지 S760의 단계를 재 수행할 수 있다.The controller 140 may determine the optimal frame rate by adjusting the frame rate at the increased reference resolution. In other words, the controller 140 may re-perform steps S710 to S760 according to the increased reference resolution.

도 8은 본 발명의 실시예에 따른 프레임 레이트 감소에 따른 해상도 조절 방법을 설명하기 위한 순서도이다8 is a flowchart illustrating a resolution adjustment method according to a frame rate reduction according to an embodiment of the present invention.

보다 상세하게는 도 8은 버퍼(120)의 사용률이 최적 범위의 상한 값 보다 큰 경우, 프레임 레이트 및 해상도의 조절 방법을 설명하기 위한 순서도이다.In more detail, FIG. 8 is a flowchart for explaining a method of adjusting the frame rate and resolution when the usage rate of the buffer 120 is greater than the upper limit value of the optimal range.

도면을 참조하면, S810 단계에서, 제어부(140)는 버퍼(120)의 사용률이 최적 범위의 상한 값(예를 들어, 60%) 보다 큰 경우, 프레임 레이트를 기 설정된 조절 범위 내에서 단계적으로 감소시킬 수 있다. 조절 범위는 5FPS 내지 30FPS 범위일 수 있다.Referring to the drawings, in step S810 , when the usage rate of the buffer 120 is greater than the upper limit value (eg, 60%) of the optimal range, the control unit 140 reduces the frame rate stepwise within a preset adjustment range. can do it The control range may range from 5 FPS to 30 FPS.

프레임 레이트의 감소 크기의 절대 값은 도 7의 프레임 레이트의 증가 크기의 절대 값 보다 크게 설정될 수 있다. 일 실시예에서, 제어부(140)는 프레임 레이트를 조절 범위 내에서 5FPS씩 단계적으로 감소시킬 수 있다. 이는 대역폭이 여유로운 경우 프레임 레이트의 증가 크기를 크게 설정함으로써, 버퍼(120)의 부하 가중으로 인한 통신 신뢰성을 하락시킬 필요가 없으며, 대역폭이 최적 범위의 상한 값 보다 큰 경우, 대역폭이 부족하므로 감소 크기를 크게 설정함으로써 한정된 버퍼(120)의 메모리 용량으로 발생되는 프레임 드랍핑(dropping) 또는 전송 손실을 방지할 필요가 크기 때문이다.The absolute value of the decrease in the frame rate may be set to be larger than the absolute value of the increase in the frame rate in FIG. 7 . In an embodiment, the controller 140 may decrease the frame rate in steps of 5 FPS within the adjustment range. This is by setting a large increase in the frame rate when the bandwidth is relaxed, so there is no need to decrease the communication reliability due to the weight of the buffer 120 , and when the bandwidth is larger than the upper limit of the optimal range, the decrease in bandwidth is insufficient This is because it is necessary to prevent frame dropping or transmission loss occurring due to the limited memory capacity of the buffer 120 by setting the value to be large.

S820 단계에서, 제어부(140)는 프레임 레이트를 한 단계(5FPS) 감소시킨 상태에서 획득된 버퍼(120)의 사용률이 최적 범위 내에 포함되는지 여부를 계산할 수 있다.In step S820 , the controller 140 may calculate whether the usage rate of the buffer 120 obtained while the frame rate is reduced by one step (5 FPS) is within an optimal range.

S830 단계에서, 제어부(140)는 버퍼(120)의 사용률이 최적 범위 내에 포함되는 경우, 기준 프레임 레이트에서 한 단계(3FPS) 감소된 프레임 레이트를 최적 프레임 레이트로 결정할 수 있다.In operation S830 , when the usage rate of the buffer 120 is within the optimal range, the controller 140 may determine a frame rate reduced by one step (3 FPS) from the reference frame rate as the optimal frame rate.

S840 단계에서, 제어부(140)는 최적 프레임 레이트에 기초하여 영상 데이터를 인코딩할 수 있다. 인코딩된 영상은 버퍼(120)에 임시 저장된 후, 통신부(130)에 의해 영상 압축 해제 장치(200)로 전송될 수 있다.In operation S840, the controller 140 may encode the image data based on the optimal frame rate. The encoded image may be temporarily stored in the buffer 120 and then transmitted to the image decompression apparatus 200 by the communication unit 130 .

한편, S850 단계에서, 제어부(140)는 프레임 레이트를 한 단계(5FPS) 감소시킨 상태에서 획득된 버퍼(120)의 사용률이 최적 범위 내에 포함되지 않는 경우, 프레임 레이트가 조절 범위의 하한 값에 도달하였는지 여부를 판단할 수 있다.On the other hand, in step S850 , when the use rate of the buffer 120 obtained while the frame rate is reduced by one step (5 FPS) is not included within the optimal range, the frame rate reaches the lower limit of the adjustment range. It can be determined whether or not

제어부(140)는 프레임 레이트를 한 단계(5FPS) 감소시킨 상태에서 획득된 버퍼(120)의 사용률이 조절 범위의 하한 값에 도달하지 못한 경우, 프레임 레이트를 단계적으로 감소시킬 수 있다. 다시 말해 제어부(140)는 프레임 레이트가 조절 범위의 하한 값에 도달할 때까지 프레임 레이트를 단계적으로 감소시킬 수 있다.When the usage rate of the buffer 120 obtained while the frame rate is reduced by one step (5 FPS) does not reach the lower limit of the adjustment range, the controller 140 may decrease the frame rate in stages. In other words, the controller 140 may decrease the frame rate in stages until the frame rate reaches the lower limit of the adjustment range.

S860 단계에서, 제어부(140)는 프레임 레이트가 조절 범위의 하한 값에 도달한 경우, 기준 해상도를 기 설정된 크기만큼 감소시킬 수 있다. 예를 들어, 기준 해상도가 640X480이고, 프레임 레이트가 조절 범위의 하한 값에 도달한 경우, 제어부(140)는 기준 해상도를 640X480에서 352X288으로 한 단계 감소시킬 수 있다. 기준 해상도의 감소 크기는 프레임 규격을 고려하여 설정될 수 있다.In operation S860 , when the frame rate reaches the lower limit of the adjustment range, the controller 140 may decrease the reference resolution by a preset size. For example, when the reference resolution is 640X480 and the frame rate reaches the lower limit of the adjustment range, the controller 140 may decrease the reference resolution by one step from 640X480 to 352X288. The reduction size of the reference resolution may be set in consideration of the frame standard.

제어부(140)는 감소된 기준 해상도에서 프레임 레이트를 조절함으로써, 최적의 프레임 레이트를 결정할 수 있다. 다시 말해, 제어부(140)는 감소된 기준 해상도에 따라 S810 내지 S860의 단계를 재 수행할 수 있다.The controller 140 may determine the optimal frame rate by adjusting the frame rate at the reduced reference resolution. In other words, the controller 140 may re-perform steps S810 to S860 according to the reduced reference resolution.

상술한 바와 같이, 본 발명의 영상 압축 장치(100)는 가변적인 협대역 네트워크에서 인코딩 인자(해상도 및 프레임 레이트)를 적응적으로 가변시켜 최적의 프레임 레이트 및 최적의 해상도로 영상 데이터를 인코딩할 수 있다.As described above, the image compression apparatus 100 of the present invention can encode image data at an optimal frame rate and optimal resolution by adaptively varying encoding factors (resolution and frame rate) in a variable narrowband network. have.

이상 설명된 본 발명에 따른 실시 예는 컴퓨터상에서 다양한 구성요소를 통하여 실행될 수 있는 컴퓨터 프로그램의 형태로 구현될 수 있으며, 이와 같은 컴퓨터 프로그램은 컴퓨터로 판독 가능한 매체에 기록될 수 있다. 이때, 매체는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체, CD-ROM 및 DVD와 같은 광기록 매체, 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical medium), 및 ROM, RAM, 플래시 메모리 등과 같은, 프로그램 명령어를 저장하고 실행하도록 특별히 구성된 하드웨어 장치를 포함할 수 있다.The embodiment according to the present invention described above may be implemented in the form of a computer program that can be executed through various components on a computer, and such a computer program may be recorded in a computer-readable medium. In this case, the medium includes a hard disk, a magnetic medium such as a floppy disk and a magnetic tape, an optical recording medium such as CD-ROM and DVD, a magneto-optical medium such as a floppy disk, and a ROM , RAM, flash memory, etc., a hardware device specially configured to store and execute program instructions.

한편, 상기 컴퓨터 프로그램은 본 발명을 위하여 특별히 설계되고 구성된 것이거나 컴퓨터 소프트웨어 분야의 당업자에게 공지되어 사용 가능한 것일 수 있다. 컴퓨터 프로그램의 예에는, 컴파일러에 의하여 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용하여 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드도 포함될 수 있다.Meanwhile, the computer program may be specially designed and configured for the present invention, or may be known and used by those skilled in the computer software field. Examples of the computer program may include not only machine code generated by a compiler, but also high-level language code that can be executed by a computer using an interpreter or the like.

본 실시예와 관련된 기술 분야에서 통상의 지식을 가진 자는 상기된 기재의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 구현될 수 있음을 이해할 수 있을 것이다. 그러므로 개시된 방법들은 한정적인 관점이 아니라 설명적인 관점에서 고려되어야 한다. 본 발명의 범위는 전술한 설명이 아니라 청구범위에 나타나 있으며, 그와 동등한 범위 내에 있는 모든 차이점은 본 발명에 포함된 것으로 해석되어야 할 것이다.A person of ordinary skill in the art related to this embodiment will understand that it can be implemented in a modified form without departing from the essential characteristics of the above description. Therefore, the disclosed methods are to be considered in an illustrative rather than a restrictive sense. The scope of the present invention is indicated in the claims rather than the foregoing description, and all differences within the scope equivalent thereto should be construed as being included in the present invention.

10: 영상 압축 시스템
100: 영상 압축 장치
110: 인코더
120: 버퍼
130: 통신부
200: 압축 해제 장치
10: video compression system
100: video compression device
110: encoder
120: buffer
130: communication department
200: decompression device

Claims (10)

가변적 협대역 네트워크 환경에 적응적인 영상 압축 장치에 있어서,
조절 가능한 해상도 및 프레임 레이트(frame rate)에 기초하여 영상 데이터를 인코딩하는 인코더;
상기 인코딩된 영상 데이터를 임시 저장하는 버퍼;
상기 버퍼에 임시 저장된 상기 인코딩된 영상 데이터를 네트워크를 통해 송신하는 통신부; 및
상기 버퍼의 사용률에 기초하여 상기 해상도 및 상기 프레임 레이트 중 적어도 어느 하나를 조절하는 제어부;를 포함하고,
상기 제어부는
상기 프레임 레이트를 기 설정된 조절 범위 내에서 조절한 상태에서, 상기 해상도를 조절하고,
상기 해상도는 하나의 프레임을 표현하기 위해 사용되는 픽셀 수를 의미하고,
상기 제어부는
상기 영상 데이터를 기 설정된 기준 해상도 및 기준 프레임 레이트로 인코딩한 상태에서, 상기 버퍼의 사용률을 획득하고,
상기 획득된 사용률이 최적 범위의 하한 값 보다 작은 경우, 상기 프레임 레이트를 상기 조절 범위 내에서 단계적으로 증가시키고, 상기 획득된 사용률이 상기 최적 범위의 상한 값 보다 큰 경우, 상기 프레임 레이트를 상기 조절 범위 내에서 단계적으로 감소시키되,
상기 프레임 레이트를 상기 조절 범위의 상한 값 까지 증가시킨 상태에서, 상기 버퍼의 사용률이 최적 범위의 하한 값 보다 작은 경우, 상기 해상도를 기 설정된 크기만큼 증가시키고,
상기 프레임 레이트를 상기 조절 범위의 하한 값까지 감소시킨 상태에서, 상기 버퍼의 사용률이 상기 최적 범위의 상한 값 보다 큰 경우, 상기 해상도를 기 설정된 크기만큼 감소시키며,
상기 프레임 레이트를 단계적으로 감소시키는 경우의 상기 프레임 레이트의 감소 크기의 절대 값은 상기 프레임 레이트를 단계적으로 증가시키는 경우의 상기 프레임 레이트의 증가 크기의 절대 값 보다 크게 설정되는 영상 압축 장치.
A video compression apparatus adaptive to a variable narrowband network environment, comprising:
an encoder for encoding image data based on an adjustable resolution and frame rate;
a buffer for temporarily storing the encoded image data;
a communication unit for transmitting the encoded image data temporarily stored in the buffer through a network; and
A control unit that adjusts at least one of the resolution and the frame rate based on the buffer usage rate;
the control unit
In a state in which the frame rate is adjusted within a preset adjustment range, the resolution is adjusted,
The resolution means the number of pixels used to represent one frame,
the control unit
In a state in which the image data is encoded with a preset reference resolution and a reference frame rate, the buffer usage rate is obtained,
When the obtained usage rate is less than the lower limit of the optimum range, the frame rate is increased stepwise within the adjustment range, and when the obtained usage rate is greater than the upper limit of the optimum range, the frame rate is adjusted to the adjustment range Step-by-step reduction within
In a state in which the frame rate is increased up to the upper limit of the adjustment range and the buffer usage rate is less than the lower limit of the optimal range, the resolution is increased by a preset size;
When the use rate of the buffer is greater than the upper limit of the optimal range in a state in which the frame rate is reduced to the lower limit of the adjustment range, the resolution is reduced by a preset size;
and an absolute value of a decrease in the frame rate when the frame rate is decreased in steps is set to be larger than an absolute value of an increase in the frame rate when the frame rate is increased in stages.
제1항에 있어서,
상기 제어부는
상기 네트워크의 대역폭 변동에 따라 가변되는 상기 버퍼의 잔여 메모리 용량에 기초하여 상기 버퍼의 사용률을 계산하는 영상 압축 장치.
According to claim 1,
the control unit
An image compression apparatus for calculating a usage rate of the buffer based on the remaining memory capacity of the buffer, which varies according to a change in the bandwidth of the network.
제1항에 있어서,
상기 제어부는
상기 버퍼의 사용률이 기 설정된 최적 범위 이내에 포함되도록 상기 해상도 및 상기 프레임 레이트 중 적어도 어느 하나를 조절하는 영상 압축 장치.
According to claim 1,
the control unit
An image compression apparatus for adjusting at least one of the resolution and the frame rate so that the buffer usage rate is within a preset optimal range.
제3항에 있어서,
상기 제어부는
상기 최적 범위를 상기 버퍼의 최대 사용률의 20% 내지 60%로 설정하는 영상 압축 장치.
4. The method of claim 3,
the control unit
An image compression apparatus for setting the optimal range to 20% to 60% of the maximum use rate of the buffer.
삭제delete 삭제delete 삭제delete 삭제delete 가변적 협대역 네트워크 환경에 적응적인 영상 압축 방법에 있어서,
조절 가능한 해상도 및 프레임 레이트에 기초하여 영상 데이터를 인코딩하는 단계;
상기 인코딩된 영상 데이터를 버퍼에 임시 저장하는 단계;
상기 버퍼에 임시 저장된 상기 인코딩된 영상 데이터를 네트워크를 통해 송신하는 단계; 및
상기 버퍼의 사용률에 기초하여 상기 해상도 및 상기 프레임 레이트 중 적어도 어느 하나를 조절하는 단계;를 포함하고,
상기 조절하는 단계는
상기 영상 데이터를 기 설정된 기준 해상도 및 기준 프레임 레이트로 인코딩한 상태에서, 상기 버퍼의 사용률을 획득하는 단계; 및
상기 프레임 레이트를 기 설정된 조절 범위 내에서 조절한 상태에서, 상기 해상도를 조절하는 단계를 포함하고,
상기 해상도는 하나의 프레임을 표현하기 위해 사용되는 픽셀 수를 의미하고,
상기 프레임 레이트를 기 설정된 조절 범위 내에서 조절한 상태에서, 상기 해상도를 조절하는 단계는
상기 획득된 사용률이 최적 범위의 하한 값 보다 작은 경우, 상기 프레임 레이트를 상기 조절 범위 내에서 단계적으로 증가시키고, 상기 획득된 사용률이 상기 최적 범위의 상한 값 보다 큰 경우, 상기 프레임 레이트를 상기 조절 범위 내에서 단계적으로 감소시키되,
상기 프레임 레이트를 상기 조절 범위의 상한 값 까지 증가시킨 상태에서, 상기 버퍼의 사용률이 최적 범위의 하한 값 보다 작은 경우, 상기 해상도를 기 설정된 크기만큼 증가시키고,
상기 프레임 레이트를 상기 조절 범위의 하한 값까지 감소시킨 상태에서, 상기 버퍼의 사용률이 상기 최적 범위의 상한 값 보다 큰 경우, 상기 해상도를 기 설정된 크기만큼 감소시키며,
상기 프레임 레이트를 단계적으로 감소시키는 경우의 상기 프레임 레이트의 감소 크기의 절대 값은 상기 프레임 레이트를 단계적으로 증가시키는 경우의 상기 프레임 레이트의 증가 크기의 절대 값 보다 크게 설정되는 영상 압축 방법.
A video compression method adaptive to a variable narrowband network environment, the method comprising:
encoding the image data based on the adjustable resolution and frame rate;
temporarily storing the encoded image data in a buffer;
transmitting the encoded image data temporarily stored in the buffer through a network; and
Including; adjusting at least one of the resolution and the frame rate based on the buffer usage rate;
The adjusting step is
obtaining a utilization rate of the buffer in a state in which the image data is encoded with a preset reference resolution and a reference frame rate; and
In a state in which the frame rate is adjusted within a preset adjustment range, adjusting the resolution,
The resolution means the number of pixels used to represent one frame,
In a state in which the frame rate is adjusted within a preset adjustment range, adjusting the resolution includes:
When the obtained usage rate is less than the lower limit of the optimum range, the frame rate is increased stepwise within the adjustment range, and when the obtained usage rate is greater than the upper limit of the optimum range, the frame rate is adjusted to the adjustment range Step-by-step reduction within
In a state in which the frame rate is increased up to the upper limit of the adjustment range and the buffer usage rate is less than the lower limit of the optimal range, the resolution is increased by a preset size;
When the use rate of the buffer is greater than the upper limit of the optimal range in a state in which the frame rate is reduced to the lower limit of the adjustment range, the resolution is reduced by a preset size;
and an absolute value of a decrease in the frame rate when the frame rate is decreased in steps is set to be greater than an absolute value of an increase in the frame rate when the frame rate is increased in stages.
제9항의 방법을 컴퓨터에서 실행하기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록 매체.A computer-readable recording medium recording a program for executing the method of claim 9 on a computer.
KR1020200029170A 2020-03-09 2020-03-09 Video compression apparatus and video compression method adaptive to a variable network environment KR102337811B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020200029170A KR102337811B1 (en) 2020-03-09 2020-03-09 Video compression apparatus and video compression method adaptive to a variable network environment

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020200029170A KR102337811B1 (en) 2020-03-09 2020-03-09 Video compression apparatus and video compression method adaptive to a variable network environment

Publications (2)

Publication Number Publication Date
KR20210113879A KR20210113879A (en) 2021-09-17
KR102337811B1 true KR102337811B1 (en) 2021-12-09

Family

ID=77924188

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020200029170A KR102337811B1 (en) 2020-03-09 2020-03-09 Video compression apparatus and video compression method adaptive to a variable network environment

Country Status (1)

Country Link
KR (1) KR102337811B1 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20230069566A (en) * 2021-11-12 2023-05-19 삼성전자주식회사 Video transmission apparatus and method of the same

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8842555B2 (en) * 2005-10-21 2014-09-23 Qualcomm Incorporated Methods and systems for adaptive encoding of real-time information in packet-switched wireless communication systems
KR102432804B1 (en) * 2015-06-02 2022-08-16 한화테크윈 주식회사 Video capture device using MJPEG
JP6903172B2 (en) * 2017-06-20 2021-07-14 テレフオンアクチーボラゲット エルエム エリクソン(パブル) Equipment and methods for live uplink adaptive streaming

Also Published As

Publication number Publication date
KR20210113879A (en) 2021-09-17

Similar Documents

Publication Publication Date Title
US9036698B2 (en) Method and system for rate control during video transcoding
US8875208B1 (en) High quality multimedia transmission from a mobile device for live and on-demand viewing
AU2016250476A1 (en) Adaptive bit rate control based on scenes
KR102432804B1 (en) Video capture device using MJPEG
US9667981B2 (en) Rate control for content transcoding
WO2011142311A1 (en) Remote mobile communication system, server device and remote mobile communication system control method
US20180184089A1 (en) Target bit allocation for video coding
KR102337811B1 (en) Video compression apparatus and video compression method adaptive to a variable network environment
JP2012010263A (en) Encoding device, imaging device, encoding/transmitting system and encoding method
US20070110168A1 (en) Method for generating high quality, low delay video streaming
US20110317758A1 (en) Image processing apparatus and method of processing image and video
CN108124155B (en) Code rate control method and device and electronic equipment
US8798135B2 (en) Video stream modifier
CN116634151A (en) Video processing method, apparatus, computer device, storage medium, and program product
KR20120012089A (en) System and method for proving video using scalable video coding
JP2001346207A (en) Image information converter and method
JP2002044668A (en) Apparatus and method for conversion of image information
Lee et al. Channel-adaptive Image Compression for Wireless Transmission
CN116962613A (en) Data transmission method and device, computer equipment and storage medium
CN104702970A (en) Video data synchronization method, device and system
CN117676266A (en) Video stream processing method and device, storage medium and electronic equipment
CN113965748A (en) High-fidelity video stream compression control method
CN117793529A (en) Extension camera with multipath audio and video coding capability and control method thereof
JP2002010266A (en) Image information conversion apparatus and its method
KR20140074130A (en) SD-HD Hybrid DVR System and Driving Method thereof

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant