WO2020080565A1 - 동영상 변환방법 및 장치 - Google Patents

동영상 변환방법 및 장치 Download PDF

Info

Publication number
WO2020080565A1
WO2020080565A1 PCT/KR2018/012262 KR2018012262W WO2020080565A1 WO 2020080565 A1 WO2020080565 A1 WO 2020080565A1 KR 2018012262 W KR2018012262 W KR 2018012262W WO 2020080565 A1 WO2020080565 A1 WO 2020080565A1
Authority
WO
WIPO (PCT)
Prior art keywords
video
original
audio signal
signal
adjusted
Prior art date
Application number
PCT/KR2018/012262
Other languages
English (en)
French (fr)
Inventor
류내원
이길섭
양용석
Original Assignee
네오컨버전스 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 네오컨버전스 주식회사 filed Critical 네오컨버전스 주식회사
Publication of WO2020080565A1 publication Critical patent/WO2020080565A1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439—Processing of audio elementary streams
    • H04N21/4398—Processing of audio elementary streams involving reformatting operations of audio signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/233—Processing of audio elementary streams
    • H04N21/2335—Processing of audio elementary streams involving reformatting operations of audio signals, e.g. by converting from one coding standard to another
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/2368—Multiplexing of audio and video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4341—Demultiplexing of audio and video streams

Definitions

  • the present invention relates to a video conversion method and apparatus.
  • Digital systems such as mobile phones, PMP (Portable Media Player), navigation systems, DMB (Digital Multimedia Broadcasting) systems, IPTV (Internet Protocol Television), MP3 players, MP4 players, etc. are widely distributed.
  • PMP Portable Media Player
  • DMB Digital Multimedia Broadcasting
  • IPTV Internet Protocol Television
  • MP3 players MP4 players, etc.
  • the audio tare is changed, and in the case of performing multiplexing again, in the case of the conventional multiplexer, the audio signal is simply inserted for each video signal or the audio signal is transmitted for each specific size set in the multiplexer. The method of putting in between is used.
  • the technical problem to be achieved by the present invention is to provide a video conversion method and apparatus for efficiently converting video.
  • a technical problem to be achieved by the present invention is to provide a video conversion method and apparatus for efficiently multiplexing when changing an audio signal in a video.
  • a video conversion method in which a video converter converts a video, receiving a video original file, demultiplexing the original video signal and the original audio signal from the video original file and , Generating an information table of the original video signal, adjusting the original audio signal using a preset adjustment method to generate an adjusted audio signal, multiplexing the original video signal and the adjusted audio signal using the information table It includes the steps.
  • the generating of the information table of the original video signal is characterized by reading each video frame configuration information and size information of the original video signal and generating an information table.
  • the multiplexing step includes: checking whether the size of the adjusted audio signal is the same as the size of the original audio signal, and if the size of the adjusted audio signal is not the same as the size of the original audio signal, the adjusted audio signal and the And reflecting a difference in size of the original audio signal, and multiplexing the original video signal and the adjusted audio signal into the original video file format using the information table.
  • the multiplexing step includes: checking whether a specific video frame is an I frame in the original video signal, and if the specific video frame is the I frame in the original video signal, checking the size of the I frame, and the I frame And inserting the preset number of the adjusted audio signals into the I-frame according to the size of the, and multiplexing the original video signal and the adjusted audio signal into the original video file format using the information table.
  • the video converter receives a video original file, demultiplexes the original video signal and the original audio signal from the video original file, and demultiplexer generating the information table of the original video signal, the original It includes a signal adjusting unit for adjusting the audio signal using a preset adjustment method to generate a adjusted audio signal, and a multiplexer for multiplexing the original video signal and the adjusted audio signal using the information table.
  • the present invention can efficiently synchronize the video screen and the sync of audio (voice, volume), which is one of the most frequent problems when converting a video, because the video conversion file is the same video signal and audio signal arrangement as the video original file.
  • the present invention can solve the problem that the audio does not play properly during video playback.
  • the present invention can efficiently perform multiplexing while minimizing the effect on the performance of a device using an information table when changing an audio signal in a video.
  • the overall volume of the audio signal (sound source) is down-regulated by adjusting and supplementing the bass portion proportionately without bulk down-adjusting the volume of the audio signal (sound source) included in the broadcast channel or content. As you lose, you can hear the bass part with natural sound.
  • the present invention effectively divides the entire section of an audio signal (sound source) into detailed sections, and adjusts the bass part according to the volume amplification ratio and volume adjustment value of the volume adjustment section, thereby lowering the overall volume to reduce user hearing loss. While solving the problem, the bass part has an effect that the user can hear well.
  • the present invention can correct the audio signal (sound source) at the boundary between the volume adjustment section and the detailed section other than the volume adjustment section due to the volume adjustment in the volume adjustment section, thereby reducing the distortion of the volume.
  • FIG. 1 is a block diagram illustrating a video conversion apparatus according to an embodiment of the present invention.
  • FIG. 2 is a flowchart illustrating a video conversion method according to an embodiment of the present invention.
  • FIG. 3 shows an example of a change in a video signal and an audio signal in the process of converting a video.
  • FIG. 4 is a flowchart illustrating a method of performing multiplexing according to an embodiment of the present invention.
  • FIG. 5 is a flowchart illustrating a method of performing multiplexing according to another embodiment of the present invention.
  • FIG. 6 is a flowchart illustrating a method of generating an adjusted audio signal by adjusting an original audio signal according to an embodiment of the present invention.
  • FIG 7 (b) shows an embodiment of the adjusted audio signal, which is the original audio signal after the volume is adjusted by applying the present invention to any original audio signal.
  • video signal means data related to an image in a video (or video file).
  • the video signal can include any video frame.
  • audio signal means data related to voice (or sound source) in a video (or video file).
  • the audio signal can be used in the same sense as the sound source.
  • FIG. 1 is a block diagram illustrating a video conversion apparatus according to an embodiment of the present invention.
  • a video conversion device (hereinafter referred to as “device”) includes a demultiplexer 10, a signal adjusting unit 20, a multiplexer 30, a control unit 40, and a memory 50.
  • the demultiplexer 10 receives the original video file, and demultiplexes the original video signal and the original audio signal from the original video file.
  • the demultiplexer 10 generates an information table of the original video signal.
  • the demultiplexer 10 may receive a video original file under the control of the control unit 40, demultiplex the original video signal and the original audio signal from the video original file, or generate an information table of the original video signal.
  • the information table is multiplexed in the form of a video original file using the information table.
  • the information table may further include various information according to an embodiment.
  • each video frame configuration information may include sub-frame number information and each video frame location information.
  • each video frame configuration information may include information on the number of sub-frames and location information on each sub-frame.
  • the signal adjusting unit 20 generates an adjusted audio signal by adjusting the original audio signal using a preset adjustment method. At this time, the device does not adjust the original video signal. However, according to another embodiment, the device may generate an adjusted video signal and an adjusted audio signal by adjusting both the original video signal and the original audio signal. Here, various adjustments may be made to the preset adjustment method according to a user's setting.
  • the signal adjusting unit 20 may generate an adjusted audio signal by adjusting the original audio signal using a preset adjustment method under the control of the control unit 40.
  • the multiplexer 30 multiplexes the original video signal and the adjusted audio signal using an information table.
  • the multiplexer 30 may generate a video conversion file in which the audio signal is adjusted from the video original file.
  • the control unit 40 controls the device, and controls the demultiplexer 10, the signal adjusting unit 20, the multiplexer 30, and the memory 50.
  • controller 40 may control the demultiplexer 10 to receive the original video file, demultiplex the original video signal and the original audio signal from the original video file, or generate an information table of the original video signal.
  • control unit 40 may control the signal adjusting unit 20 to generate an adjusted audio signal by adjusting the original audio signal using a preset adjustment method.
  • controller 40 may control the multiplexer 30 to generate a video conversion file in which the audio signal is adjusted from the video original file.
  • the memory 50 stores various data and / or information, video signals, audio signals, and the like.
  • the memory 50 may store a video original file, an original video signal, an original audio signal, an adjusted audio signal, and an information table.
  • the information table includes each video frame configuration information and size information of the original video signal (or video signal), and each video frame configuration information may include subframe number information and each video frame location information.
  • each video frame configuration information may include information on the number of sub-frames and location information on each sub-frame.
  • FIG. 2 is a flowchart illustrating a video conversion method according to an embodiment of the present invention
  • FIG. 3 shows an example of changes in a video signal and an audio signal in the process of video conversion.
  • 3 (a) shows an example of a video original file
  • FIG. 3 (b) shows a video original file after demultiplexing in the demultiplexer 10
  • FIG. 3 (c) The demultiplexed video signal and the audio signal show the video signal and the audio signal after the signal is adjusted by the signal control unit
  • FIG. 3 (d) shows that the signal adjusted video signal and the audio signal are multiplexed in the multiplexer 30. ).
  • the device receives the original video file (S201).
  • the original video file is video frame 1-1, audio 1, video frame 1-2, audio 2, video frame 1-3, audio 3, video frame 2, audio 4, video as shown in Fig. 3 (a).
  • Frame 3 may be included.
  • video frame 1-1, video frame 1-2, and video frame 1-3 are sub-frames of video frame 1. That is, video frame 1 may include video frame 1-1, video frame 1-2, and video frame 1-3.
  • the device demultiplexes the original video signal and the original audio signal from the original video file, and reads the video frame configuration information and size information of the original video signal (or video signal) to generate an information table (S202).
  • the information table is multiplexed in the form of a video original file using the information table.
  • the information table may further include various information according to an embodiment.
  • the information table includes each video frame configuration information and size information of the original video signal (or video signal), and each video frame configuration information may include subframe number information and each video frame location information.
  • each video frame configuration information may include information on the number of sub-frames and location information on each sub-frame.
  • steps S201 and S202 may be performed in the demultiplexer 10 of the device.
  • the device converts a video source file into an original video signal including video frame 1, video frame 2, and video frame 3 as shown in FIG. 3 (b), and an original including audio 1, audio 2, audio 3, and audio 4 Demultiplex with an audio signal.
  • the device transmits the original video signal, the original audio signal, and the information table from the demultiplexer 10 to the signal adjusting unit 20 (S203).
  • the apparatus adjusts the original audio signal using a preset adjustment method to generate an adjusted audio signal (S204). At this time, the device does not adjust the original video signal. However, according to another embodiment, the device may generate an adjusted video signal and an adjusted audio signal by adjusting both the original video signal and the original audio signal. Here, various adjustments may be made to the preset adjustment method according to a user's setting.
  • step S204 may be performed by the signal conditioning unit 20 of the apparatus.
  • the device converts the original audio signal (audio 1, audio 2, audio 3, audio 4) to the adjusted audio signal (audio 1 ', audio 2', audio 3 ', audio 4') as shown in Fig. 3 (c). I can adjust it.
  • the apparatus multiplexes the original video signal and the adjusted audio signal using an information table (S205).
  • step S205 may be performed on the multiplexer 30 of the apparatus.
  • the video conversion file generated by multiplexing the original video file is video frame 1-1, audio 1 ', video frame 1-2, audio 2', video frame 1-3, audio as shown in FIG. 3 (d). 3 ', video frame 2, audio 4', and video frame 3.
  • video frame 1-1, video frame 1-2, and video frame 1-3 are sub-frames of video frame 1. That is, video frame 1 may include video frame 1-1, video frame 1-2, and video frame 1-3.
  • the device may generate a video conversion file in which the audio signal is adjusted from the video original file.
  • the present invention can solve an inconsistency between the video screen and the audio, which is one of the most frequent problems when converting a video.
  • the present invention can solve the problem that the audio does not play properly during video playback.
  • the device may be a multiplexer 30.
  • the device receives an original video signal, an adjusted audio signal, and an information table (S401).
  • the device checks whether the size of the adjusted audio signal is the same as the size of the original audio signal (S402). That is, the device checks whether there is a change in size while the original audio signal is adjusted to the adjusted audio signal.
  • the apparatus When the size of the adjusted audio signal is the same as the size of the original audio signal, the apparatus multiplexes the original video signal and the adjusted audio signal in the form of a video original file using an information table (S403).
  • the device reflects the size difference between the adjusted audio signal and the original audio signal, and uses the information table for the original video signal and the adjusted audio signal to form a video original file. Multiplexed with (S404).
  • the device may be a multiplexer 30.
  • the device receives an original video signal, an adjusted audio signal, and an information table (S501).
  • the device checks whether a specific video frame is an I frame in the original video signal (S502).
  • the device checks the size of the I frame (S503).
  • the apparatus inserts a preset number of adjusted audio signals into the I frame according to the size of the I frame, and multiplexes the original video signal and the adjusted audio signal into a video original file format using an information table (S504).
  • an I frame when the size of an I frame is 10M or more, and one preset audio signal is preset to be inserted into an I frame every 10M or more, if the size of the I frame is 10M, one adjusted audio signal is an I frame. Is inserted, if the size of the I frame is 20M, two adjusted audio signals are inserted into the I frame, and if the size of the I frame is 30M, three adjusted audio signals can be inserted into the I frame.
  • a preset number of adjusted audio signals of various types may be inserted according to the size of an I frame.
  • the preset number can be variously changed according to a user's setting.
  • the device checks whether the size of the adjusted audio signal is the same as the size of the original audio signal (S505). That is, the device checks whether there is a change in size while the original audio signal is adjusted to the adjusted audio signal.
  • the apparatus multiplexes the original video signal and the adjusted audio signal into a video original file format using an information table (S506).
  • the device reflects the size difference between the adjusted audio signal and the original audio signal, and uses the information table for the original video signal and the adjusted audio signal to form a video original file. Multiplexed with (S507).
  • FIG. 6 is a flowchart illustrating a method of generating an adjusted audio signal by adjusting an original audio signal according to an embodiment of the present invention.
  • 7 (a) shows an embodiment of an original audio signal for an arbitrary original audio signal
  • FIG. 7 (b) is an original audio signal after adjusting the volume by applying the present invention to an arbitrary original audio signal
  • An example of an adjusted audio signal is shown.
  • the original audio signal is a sound source
  • adjusting the original audio signal is a volume adjustment of the sound source
  • the adjusted audio signal can be used in the same sense as the adjusted sound source.
  • the apparatus is performed by the internal signal conditioning unit 20.
  • the device calculates an average (average value) of the overall volume in the entire section of the original audio signal (or sound source) received from the broadcast channel or the original audio signal (or sound source) included in the content (S601).
  • the entire section of the sound source can be set to various lengths according to the user's setting.
  • the overall volume average can be -20.
  • the device classifies the entire section of the original audio signal into detailed sections according to a predetermined section classification condition (S602).
  • a predetermined section classification condition the boundary point at which the volume level is changed to a predetermined minimum volume (eg, -40) or less is determined as the first division point (or the starting point of the sound source adjustment section) in the detailed section, and the volume level is the minimum
  • a boundary point that is changed to a volume (for example, -40) or more may be determined as a second division point (or an end point of a sound source adjustment period) in the detailed section.
  • the device determines the boundary between the first section and the second section based on the boundary point 1 710 in which the volume level of the original audio signal is first changed to -40 or less, which is a predetermined minimum volume.
  • the previous section is determined as one section and the subsequent section is determined as two sections.
  • the device determines the boundary between the 2nd and 3rd sections based on the boundary point 2 720, which is changed for the first time to a volume level of -40 or more, which is a predetermined minimum volume. At this time, based on the boundary point 2 (720), the previous section is determined as 2 sections and the subsequent section is determined as 3 sections.
  • the device determines the boundary between the 3rd and 4th sections based on the boundary point 3 730, which is secondly changed from the original audio signal to a volume level of -40 or less, which is a preset minimum volume.
  • the previous section is determined as 3 sections and the subsequent section is determined as 4 sections.
  • the apparatus determines from boundary point 3 (730) to boundary point 4 (740), which is the point at which the original audio signal ends, in 4 sections.
  • the preset minimum volume may be various embodiments.
  • the device calculates the volume average of the detailed sections, which is the volume average (or average value) of the detailed sections (S603).
  • the volume average of the first section can be -20
  • the volume average of the second section is -50
  • the volume average of the three sections is -15
  • the volume average of the four sections is -60.
  • the apparatus determines whether the average volume of the detailed section is equal to or less than the target volume (S604).
  • the target volume can be set to -30.
  • the target volume may be various embodiments depending on the design.
  • the device determines a sub-section where the volume average of the sub-sections is less than or equal to the target volume (S605).
  • the device determines a detailed section with a volume average of -40, which is a target volume, as 2 sections (-50) and 4 sections (-60), and 2 sections and 4 sections as the volume adjustment section.
  • the apparatus performs step S604 if the volume average of the detailed sections is not equal to or less than the target volume.
  • the apparatus calculates the amplification ratio of the volume adjustment section (S606).
  • the device may calculate the amplification ratio of the volume adjustment section in the following equation (1) in the volume adjustment section.
  • the apparatus may calculate the amplification ratio of the two sections, which are volume adjustment sections, using Equation 2 below.
  • the device may calculate the amplification ratio of the four sections, which are volume adjustment sections, by Equation 3 below.
  • the apparatus calculates the volume adjustment value using the amplification ratio (S607).
  • the device may calculate the volume adjustment value using Equation 4 below.
  • the apparatus may calculate the volume adjustment value of the two sections, which are volume adjustment sections, using Equation 5 below.
  • the apparatus may calculate the volume adjustment value of the four sections, which are volume adjustment sections, using Equation 6 below.
  • the apparatus adjusts the volume (or volume average) of the volume adjustment section by reflecting the adjustment value in the volume average of the volume adjustment section, which is the volume average of the volume adjustment section (S608).
  • the device may adjust the volume of the volume adjustment section by raising the volume average of the volume adjustment section, which is the volume average of the volume adjustment section, by an adjustment value.
  • the apparatus may adjust the volume average of -2, which is the adjusted volume adjustment section, to 36.7 by raising the volume average of -50, which is the volume adjustment section, by 2, to a volume adjustment value of 13.3.
  • the apparatus may adjust the volume average of -4, which is the adjusted volume adjustment section, to 37.5 by raising the volume average of -60, which is the volume adjustment section, to -22.5, which is the volume adjustment value of the 4 section.
  • the apparatus corrects the volume of the adjustment boundary point which is a boundary point between the detailed section other than the volume adjustment section and the adjusted volume adjustment section (S609).
  • the detailed section other than the volume adjustment section is 1 section, 3 sections, and the adjusted volume adjustment section is 2 adjustment sections and 4 adjustment sections.
  • the device is an adjustment boundary point 1 (715), which is a boundary point between section 1 and an adjustment 2 section, and an adjustment boundary point 2 (725), which is a boundary point between adjustment section 2 and 3, is a boundary point between section 3 and adjustment section 4.
  • the volume of the adjustment boundary point 3 735, the adjustment boundary point 4 745, which is the end of the adjustment section 4, can be corrected.
  • the present invention can reduce the distortion phenomenon at the boundary point due to the volume adjustment (or the original audio signal).

Abstract

본 발명은 동영상 변환방법 및 장치에 관한 것이다. 본 발명의 일 실시예에 따른 동영상 변환방법은 동영상 변환장치가 동영상을 변환하는 동영상 변환방법에 있어서, 동영상 원본파일을 수신하는 단계, 동영상 원본파일에서 원본 비디오 신호와 원본 오디오 신호를 디멀티플렉싱하고, 원본 비디오 신호의 정보 테이블을 생성하는 단계, 원본 오디오 신호를 기 설정된 조정방법으로 조정하여 조정 오디오 신호를 생성하는 단계, 원본 비디오 신호와 조정 오디오 신호를 정보 테이블을 이용하여 멀티플렉싱하는 단계를 포함한다.

Description

동영상 변환방법 및 장치
본 발명은 동영상 변환방법 및 장치에 관한 것이다.
휴대폰, PMP(Portable Media Player), 네비게이션 시스템, DMB(Digital Multimedia Broadcasting) 시스템, IPTV(Internet Protocol Television), MP3 재생기, MP4 재생기 등과 같은 디지털 시스템이 많이 보급되고, 일반 사용자는 디지털 기술 기반의 영상과 음성을 쉽게 보고들을 수 있는 환경은 지속적으로 확대되고 있다.
종래에는 동영상에서 오디오 볼륨을 변경해야 하는 경우에 오디오 볼품을 변경하고, 다시 멀티플렉싱을 수행하는 경우에 종래의 멀티플렉서의 경우 비디오 신호마다 오디오 신호를 단순하게 넣거나 멀티플렉서에 설정된 특정 크기마다 오디오 신호를 비디오 신호 사이에 넣어주는 방법이 사용되고 있다.
그러나, 종래에는 동영상 원본파일에서 오디오 신호가 변환되거나 조정된 경우에 비디오 신호와 오디오 신호의 싱크가 맞지 않거나, 동영상 재생에서 음성을 재생이 정상적으로 되지 않는 문제점이 있었다.
본 발명이 이루고자 하는 기술적인 과제는 효율적으로 동영상을 변환하는 동영상 변환방법 및 장치를 제공하는데 있다.
또한, 본 발명이 이루고자 하는 기술적인 과제는 동영상에서 오디오 신호의 변경시에 멀티플렉싱을 효율적으로 수행하는 동영상 변환방법 및 장치를 제공하는데 있다.
본 발명의 일 실시예에 따른 동영상 변환방법은 동영상 변환장치가 동영상을 변환하는 동영상 변환방법에 있어서, 동영상 원본파일을 수신하는 단계, 상기 동영상 원본파일에서 원본 비디오 신호와 원본 오디오 신호를 디멀티플렉싱하고, 상기 원본 비디오 신호의 정보 테이블을 생성하는 단계, 상기 원본 오디오 신호를 기 설정된 조정방법으로 조정하여 조정 오디오 신호를 생성하는 단계, 상기 원본 비디오 신호와 상기 조정 오디오 신호를 상기 정보 테이블을 이용하여 멀티플렉싱하는 단계를 포함한다.
상기 원본 비디오 신호의 정보 테이블을 생성하는 단계는, 상기 원본 비디오 신호의 각 비디오 프레임 구성정보와 사이즈정보를 독출하여 정보 테이블을 생성하는 것을 특징으로 한다.
상기 멀티플렉싱하는 단계는, 상기 조정 오디오 신호의 크기가 상기 원본 오디오 신호의 크기와 동일한지 확인하는 단계, 상기 조정 오디오 신호의 크기가 상기 원본 오디오 신호의 크기와 동일하지 않으면, 상기 조정 오디오 신호와 상기 원본 오디오 신호의 크기차이를 반영하고, 상기 원본 비디오 신호와 상기 조정 오디오 신호를 상기 정보 테이블을 이용하여, 상기 동영상 원본파일 형태로 멀티플렉싱하는 단계를 포함한다.
상기 멀티플렉싱하는 단계는, 상기 원본 비디오 신호에서 특정 비디오 프레임이 I프레임인지 확인하는 단계, 상기 원본 비디오 신호에서 상기 특정 비디오 프레임이 상기 I프레임이면, 상기 I프레임의 크기를 확인하는 단계, 상기 I프레임의 크기에 따라 기 설정된 개수의 상기 조정 오디오 신호를 상기 I프레임에 삽입하여, 상기 원본 비디오 신호와 상기 조정 오디오 신호를 상기 정보 테이블을 이용하여, 상기 동영상 원본파일 형태로 멀티플렉싱하는 단계를 포함한다.
본 발명의 일 실시예에 따른 동영상 변환장치는 동영상 원본파일을 수신하여, 상기 동영상 원본파일에서 원본 비디오 신호와 원본 오디오 신호를 디멀티플렉싱하고, 상기 원본 비디오 신호의 정보 테이블을 생성하는 디멀티플렉서, 상기 원본 오디오 신호를 기 설정된 조정방법으로 조정하여 조정 오디오 신호를 생성하는 신호 조정부, 상기 원본 비디오 신호와 상기 조정 오디오 신호를 상기 정보 테이블을 이용하여 멀티플렉싱하는 멀티플렉서를 포함한다.
본 발명의 실시예에 따른 동영상 변환방법 및 장치에 의하면 다음과 같은 효과가 있다.
첫째, 본 발명은 동영상 변환파일이 동영상 원본파일과 동일한 비디오 신호와 오디오 신호의 배치로 인해서 동영상 변환시 가장 빈번한 발생 문제 중 하나인 비디오 화면과 오디오(음성, 음량)의 싱크를 효율적으로 맞출 수 있다.
둘째, 본 발명은 동영상 재생시 오디오가 제대로 재생되지 않는 문제점을 해결할 수 있다.
셋째, 본 발명은 동영상에서 오디오 신호의 변경시에 정보 테이블을 이용하여 장치의 성능에 영향을 최소화하면서 효율적으로 멀티플렉싱을 수행할 수 있다.
넷째, 본 발명은 방송 채널이나 콘텐츠에 포함된 오디오 신호(음원)에서 음량을 일괄 하향 조정하지 않고 저음 부분을 비례적으로 조정 보완함으로써 오디오 신호(음원)의 전체 음량을 하향 조절하여 전체 음량은 낮아지면서도 자연스러운 소리로 저음 부분도 잘 들리게 된다.
다섯째, 본 발명은 오디오 신호(음원)의 전체구간을 세부구간으로 효율적으로 구분하고, 음량조정구간의 음량 증폭비율과 음량 조정값에 따라 저음 부분을 조정하여, 전체 음량은 낮추어 사용자의 난청 등의 문제를 해결하면서, 저음 부분도 사용자가 잘 들을 수 있는 효과가 있다.
여섯째, 본 발명은 음량조정구간의 음량 조정으로 인한 음량조정구간과 음량조정구간 외의 세부구간 사이의 경계점에서 오디오 신호(음원)의 보정을 해주어 음량의 왜곡 현상을 줄일 수 있다.
도 1은 본 발명의 일 실시예에 따른 동영상 변환장치를 설명하기 위한 블록도이다.
도 2는 본 발명의 일 실시예에 따른 동영상 변환방법을 설명하기 위한 흐름도이다.
도 3은 동영상이 변환되는 과정에서 비디오 신호와 오디오 신호의 변화의 일 예를 도시한 것이다.
도 4는 본 발명의 일 실시예에 따른 멀티플렉싱을 수행하는 방법을 설명하기 위한 흐름도이다.
도 5는 본 발명의 다른 실시예에 따른 멀티플렉싱을 수행하는 방법을 설명하기 위한 흐름도이다.
도 6은 본 발명의 일 실시예에 따른 원본 오디오 신호를 조정하여 조정 오디오 신호를 생성하는 방법을 설명하기 위한 흐름도이다.
도 7(a)는 임의의 원본 오디오 신호에 대해서 원본 오디오 신호의 일 실시예를 도시한 것이다.
도 7(b)는 임의의 원본 오디오 신호에 대해서 본 발명이 적용되어 음량조정 후의 원본 오디오 신호인 조정 오디오 신호의 일 실시예를 도시한 것이다.
본 발명의 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다. 그러나, 본 발명은 이하에서 개시되는 실시예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 수 있으며, 단지 본 실시예들은 본 발명의 개시가 완전하도록 하고, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 발명은 청구항의 범주에 의해 정의될 뿐이다.
또한, 본 명세서에서 사용된 용어는 실시예들을 설명하기 위한 것이며 본 발명을 제한하고자 하는 것은 아니다. 본 명세서에서, 단수형은 문구에서 특별히 언급하지 않는 한 복수형도 포함한다. 명세서에서 사용되는 "포함한다(comprises)" 및/또는 "포함하는(comprising)"은 언급된 구성요소 이외의 다른 구성요소의 존재 또는 추가를 배제하지 않는다. 다른 정의가 없다면, 본 명세서에서 사용되는 모든 용어(기술 및 과학적 용어를 포함)는 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 공통적으로 이해될 수 있는 의미로 사용될 수 있을 것이다.
이하, 본 발명을 보다 구체적으로 설명하기 위하여 본 발명에 따른 실시예들을 첨부 도면을 참조하면서 보다 상세하게 설명하고자 한다.
본 발명에서 “비디오 신호”는 동영상(또는 동영상 파일)에서 영상과 관련된 데이터를 의미한다. 비디오 신호는 모든 비디오 프레임을 포함할 수 있다.
본 발명에서 “오디오 신호”는 동영상(또는 동영상 파일)에서 음성(또는 음원)과 관련된 데이터를 의미한다. 또한, 본 발명에서 오디오 신호는 음원과 동일한 의미로 사용될 수 있다.
도 1은 본 발명의 일 실시예에 따른 동영상 변환장치를 설명하기 위한 블록도이다.
도 1을 참조하면, 동영상 변환장치(이하, “장치”라 한다.)는 디멀티플렉서(10), 신호 조정부(20), 멀티플렉서(30), 제어부(40), 메모리(50)를 포함한다.
디멀티플렉서(10)는 동영상 원본파일을 수신하여, 동영상 원본파일에서 원본 비디오 신호와 원본 오디오 신호를 디멀티플렉싱한다.
또한, 디멀티플렉서(10)는 원본 비디오 신호의 정보 테이블을 생성한다.
디멀티플렉서(10)는 제어부(40)의 제어에 따라서 동영상 원본파일을 수신하여, 동영상 원본파일에서 원본 비디오 신호와 원본 오디오 신호를 디멀티플렉싱하거나, 원본 비디오 신호의 정보 테이블을 생성할 수 있다.
이때, 정보 테이블은 장치가 멀티플렉싱을 수행할 때, 정보 테이블을 이용하여 동영상 원본파일 형태로 멀티플렉싱을 수행한다. 또한, 정보 테이블은 실시예에 따라서 다양한 정보를 더 포함할 수 있다.
여기서, 각 비디오 프레임 구성정보는 서브 프레임 개수정보와 각 비디오 프레임 위치정보를 포함할 수 있다. 또한, 각 비디오 프레임이 복수 개의 서브 프레임을 포함할 경우에는 각 비디오 프레임 구성정보는 각 서브 프레임 개수정보와 각 서브 프레임 위치정보를 포함할 수 있다.
신호 조정부(20)는 원본 오디오 신호를 기 설정된 조정방법으로 조정하여 조정 오디오 신호를 생성한다. 이때, 장치는 원본 비디오 신호는 조정하지 않는다. 다만, 다른 실시예로 장치는 원본 비디오 신호와 원본 오디오 신호를 모두 조정하여 조정 비디오 신호, 조정 오디오 신호를 생성할 수 있다. 여기서, 기 설정된 조정방법은 사용자의 설정 등에 따라 다양한 변경이 가능하다.
신호 조정부(20)는 제어부(40)의 제어에 따라서 원본 오디오 신호를 기 설정된 조정방법으로 조정하여 조정 오디오 신호를 생성할 수 있다.
멀티플렉서(30)는 원본 비디오 신호와 조정 오디오 신호를 정보 테이블을 이용하여 멀티플렉싱한다.
이와 같이, 멀티플렉서(30)는 동영상 원본파일에서 오디오 신호가 조정된 동영상 변환파일을 생성할 수 있다.
제어부(40)는 장치를 제어하는 부분으로, 디멀티플렉서(10), 신호 조정부(20), 멀티플렉서(30), 메모리(50)를 제어한다.
또한, 제어부(40)는 동영상 원본파일을 수신하여, 동영상 원본파일에서 원본 비디오 신호와 원본 오디오 신호를 디멀티플렉싱하거나, 원본 비디오 신호의 정보 테이블을 생성하도록 디멀티플렉서(10)를 제어할 수 있다.
또한, 제어부(40)는 원본 오디오 신호를 기 설정된 조정방법으로 조정하여 조정 오디오 신호를 생성하도록 신호 조정부(20)를 제어할 수 있다.
또한, 제어부(40)는 동영상 원본파일에서 오디오 신호가 조정된 동영상 변환파일을 생성하도록 멀티플렉서(30)를 제어할 수 있다.
메모리(50)는 다양한 데이터 및/또는 정보, 비디오 신호, 오디오 신호 등을 저장한다. 예를 들어, 메모리(50)는 동영상 원본파일, 원본 비디오 신호, 원본 오디오 신호, 조정 오디오 신호, 정보 테이블을 저장할 수 있다.
여기서, 정보 테이블은 원본 비디오 신호(또는 비디오 신호)의 각 비디오 프레임 구성정보와 사이즈정보를 포함하는데, 각 비디오 프레임 구성정보는 서브 프레임 개수정보와 각 비디오 프레임 위치정보를 포함할 수 있다. 또한, 각 비디오 프레임이 복수 개의 서브 프레임을 포함할 경우에는 각 비디오 프레임 구성정보는 각 서브 프레임 개수정보와 각 서브 프레임 위치정보를 포함할 수 있다.
도 2는 본 발명의 일 실시예에 따른 동영상 변환방법을 설명하기 위한 흐름도이고, 도 3은 동영상이 변환되는 과정에서 비디오 신호와 오디오 신호의 변화의 일 예를 도시한 것이다. 도 3(a)는 동영상 원본파일의 일 예를 도시한 것이고, 도 3(b)는 동영상 원본파일이 디멀티플렉서(10)에서 디멀티플렉싱(demultiplexing)된 후를 도시한 것이고, 도 3(c)는 디멀티플렉싱된 비디오 신호와 오디오 신호가 신호 조절부에서 신호 조정된 후의 비디오 신호와 오디오 신호를 도시한 것이고, 도 3(d)는 신호 조정된 비디오 신호와 오디오 신호가 멀티플렉서(30)에서 멀티플렉싱(multiplexing)된 후를 도시한 것이다.
도 2, 도 3을 참조하면, 장치는 동영상 원본파일을 수신한다(S201).
예를 들어, 동영상 원본파일은 도 3(a)와 같이 비디오 프레임1-1, 오디오1, 비디오 프레임1-2, 오디오2, 비디오 프레임1-3, 오디오3, 비디오 프레임2, 오디오4, 비디오 프레임3을 포함할 수 있다. 여기서, 비디오 프레임1-1, 비디오 프레임1-2, 비디오 프레임1-3은 비디오 프레임1의 서브 프레임이다. 즉, 비디오 프레임1은 비디오 프레임1-1, 비디오 프레임1-2, 비디오 프레임1-3의 포함할 수 있다.
장치는 동영상 원본파일에서 원본 비디오 신호와 원본 오디오 신호를 디멀티플렉싱하고, 원본 비디오 신호(또는 비디오 신호)의 각 비디오 프레임 구성정보와 사이즈정보를 독출하여 정보 테이블을 생성한다(S202).
이때, 정보 테이블은 장치가 멀티플렉싱을 수행할 때, 정보 테이블을 이용하여 동영상 원본파일 형태로 멀티플렉싱을 수행한다. 또한, 정보 테이블은 실시예에 따라서 다양한 정보를 더 포함할 수 있다.
여기서, 정보 테이블은 원본 비디오 신호(또는 비디오 신호)의 각 비디오 프레임 구성정보와 사이즈정보를 포함하는데, 각 비디오 프레임 구성정보는 서브 프레임 개수정보와 각 비디오 프레임 위치정보를 포함할 수 있다. 또한, 각 비디오 프레임이 복수 개의 서브 프레임을 포함할 경우에는 각 비디오 프레임 구성정보는 각 서브 프레임 개수정보와 각 서브 프레임 위치정보를 포함할 수 있다.
특히, 장치의 디멀티플렉서(10)에서 단계 S201, 단계 S202를 수행할 수 있다.
예를 들어, 장치는 영상 원본파일을 도 3(b)같이 비디오 프레임1, 비디오 프레임2, 비디오 프레임3을 포함하는 원본 비디오 신호와, 오디오1, 오디오2, 오디오3, 오디오4를 포함하는 원본 오디오 신호로 디멀티플렉싱한다.
장치는 원본 비디오 신호, 원본 오디오 신호, 정보 테이블을 디멀티플렉서(10)에서 신호 조정부(20)로 전송한다(S203).
장치는 원본 오디오 신호를 기 설정된 조정방법으로 조정하여 조정 오디오 신호를 생성한다(S204). 이때, 장치는 원본 비디오 신호는 조정하지 않는다. 다만, 다른 실시예로 장치는 원본 비디오 신호와 원본 오디오 신호를 모두 조정하여 조정 비디오 신호, 조정 오디오 신호를 생성할 수 있다. 여기서, 기 설정된 조정방법은 사용자의 설정 등에 따라 다양한 변경이 가능하다.
특히, 장치의 신호 조정부(20)에서 단계 S204를 수행할 수 있다.
예를 들어, 장치는 도 3(c)같이 원본 오디오 신호(오디오1, 오디오2, 오디오3, 오디오4)를 조정 오디오 신호(오디오1', 오디오2', 오디오3', 오디오4')로 조정할 수 있다.
장치가 조정 오디오 신호를 생성하는 실시예는 이하, 도 6, 도 7에서 상세히 설명하도록 한다.
장치는 원본 비디오 신호와 조정 오디오 신호를 정보 테이블을 이용하여 멀티플렉싱한다(S205).
특히, 장치의 멀티플렉서(30)에서 단계 S205를 수행할 수 있다.
예를 들어, 동영상 원본파일이 멀티플렉싱되어 생성된 동영상 변환파일은 도 3(d)와 같이 비디오 프레임1-1, 오디오1', 비디오 프레임1-2, 오디오2', 비디오 프레임1-3, 오디오3', 비디오 프레임2, 오디오4', 비디오 프레임3을 포함할 수 있다. 여기서, 비디오 프레임1-1, 비디오 프레임1-2, 비디오 프레임1-3은 비디오 프레임1의 서브 프레임이다. 즉, 비디오 프레임1은 비디오 프레임1-1, 비디오 프레임1-2, 비디오 프레임1-3의 포함할 수 있다.
상기 단계를 수행하여 장치는 동영상 원본파일에서 오디오 신호가 조정된 동영상 변환파일을 생성할 수 있다.
이와 같은 본 발명은 동영상 변환시 가장 빈번한 발생 문제 중 하나인 비디오 화면과 오디오의 불일치를 해결할 수 있다.
또한, 본 발명은 동영상 재생시 오디오가 제대로 재생되지 않는 문제점을 해결할 수 있다.
도 4는 본 발명의 일 실시예에 따른 멀티플렉싱을 수행하는 방법을 설명하기 위한 흐름도이다. 여기서, 장치는 멀티플렉서(30)가 될 수 있다.
도 4를 참조하면, 장치는 원본 비디오 신호, 조정 오디오 신호, 정보 테이블을 수신한다(S401).
장치는 조정 오디오 신호의 크기가 원본 오디오 신호의 크기와 동일한지 확인한다(S402). 즉, 장치는 원본 오디오 신호가 조정 오디오 신호로 조정되면서 크기의 변화가 있는지 확인한다.
장치는 조정 오디오 신호의 크기가 원본 오디오 신호의 크기와 동일하면, 원본 비디오 신호와 조정 오디오 신호를 정보 테이블을 이용하여, 동영상 원본파일 형태로 멀티플렉싱한다(S403).
장치는 조정 오디오 신호의 크기가 원본 오디오 신호의 크기와 동일하지 않으면, 조정 오디오 신호와 원본 오디오 신호의 크기차이를 반영하고, 원본 비디오 신호와 조정 오디오 신호를 정보 테이블을 이용하여, 동영상 원본파일 형태로 멀티플렉싱한다(S404).
도 5는 본 발명의 다른 실시예에 따른 멀티플렉싱을 수행하는 방법을 설명하기 위한 흐름도이다. 여기서, 장치는 멀티플렉서(30)가 될 수 있다.
도 5를 참조하면, 장치는 원본 비디오 신호, 조정 오디오 신호, 정보 테이블을 수신한다(S501).
장치는 원본 비디오 신호에서 특정 비디오 프레임이 I프레임인지 확인한다(S502).
장치는 원본 비디오 신호에서 특정 비디오 프레임이 I프레임이면, I프레임의 크기를 확인한다(S503).
장치는 I프레임의 크기에 따라 기 설정된 개수의 조정 오디오 신호를 I프레임에 삽입하여, 원본 비디오 신호와 조정 오디오 신호를 정보 테이블을 이용하여, 동영상 원본파일 형태로 멀티플렉싱한다(S504).
예를 들어, 장치는 I프레임의 크기가 10M 이상이고, 10M 이상마다 하나의 조정 오디오 신호를 I프레임에 삽입하도록 기 설정된 경우에, I프레임의 크기가 10M이면, 1개의 조정 오디오 신호가 I프레임에 삽입되고, I프레임의 크기가 20M이면, 2개의 조정 오디오 신호가 I프레임에 삽입되고, I프레임의 크기가 30M이면, 3개의 조정 오디오 신호가 I프레임에 삽입될 수 있다.
본 발명은 I프레임의 크기에 따라 다양한 형태의 기 설정된 개수의 조정 오디오 신호가 삽입될 수 있다. 또한, 기 설정된 개수는 사용자의 설정 등에 따라 다양한 변경이 가능하다.
장치는 원본 비디오 신호에서 특정 비디오 프레임이 I프레임이 아니면, 장치는 조정 오디오 신호의 크기가 원본 오디오 신호의 크기와 동일한지 확인한다(S505). 즉, 장치는 원본 오디오 신호가 조정 오디오 신호로 조정되면서 크기의 변화가 있는지 확인한다.
장치는 조정 오디오 신호의 크기가 원본 오디오 신호의 크기와 동일하면, 원본 비디오 신호와 조정 오디오 신호를 정보 테이블을 이용하여, 동영상 원본파일 형태로 멀티플렉싱한다(S506).
장치는 조정 오디오 신호의 크기가 원본 오디오 신호의 크기와 동일하지 않으면, 조정 오디오 신호와 원본 오디오 신호의 크기차이를 반영하고, 원본 비디오 신호와 조정 오디오 신호를 정보 테이블을 이용하여, 동영상 원본파일 형태로 멀티플렉싱한다(S507).
도 6은 본 발명의 일 실시예에 따른 원본 오디오 신호를 조정하여 조정 오디오 신호를 생성하는 방법을 설명하기 위한 흐름도이다. 도 7(a)는 임의의 원본 오디오 신호에 대해서 원본 오디오 신호의 일 실시예를 도시한 것이고, 도 7(b)는 임의의 원본 오디오 신호에 대해서 본 발명이 적용되어 음량조정 후의 원본 오디오 신호인 조정 오디오 신호의 일 실시예를 도시한 것이다.
도 6에서 원본 오디오 신호는 음원이고, 원본 오디오 신호를 조정하는 것은 음원의 음량조정이며, 조정 오디오 신호는 조정된 음원과 동일한 의미로 사용될 수 있다.
이하의 설명에서, 장치는 내부의 신호 조정부(20)에서 수행되는 것이라고 설명될 수 있다.
도 6을 참조하면, 장치는 방송 채널로부터 수신되는 원본 오디오 신호(또는 음원)이나 콘텐츠에 포함된 원본 오디오 신호(또는 음원)의 전체구간에서 전체 음량 평균(평균값)을 계산한다(S601). 여기서, 음원의 전체구간은 사용자의 설정에 따라서 다양한 길이로 설정 가능하다.
예를 들어, 전체 음량 평균은 -20이 가능하다.
장치는 원본 오디오 신호의 전체구간을 기 설정된 구간구분조건에 따라 세부구간으로 구분한다(S602). 이때, 구간구분조건은 음량 레벨이 기 설정된 최소음량(예를 들어, -40) 이하로 변경되는 경계점을 세부구간 제1구분점(또는 음원조정구간 시작점)으로 결정하고, 음량 레벨이 기 설정된 최소음량(예를 들어, -40) 이상으로 변경되는 경계점을 세부구간 제2구분점(또는 음원조정구간 종료점)으로 결정할 수 있다.
예를 들어, 장치는 원본 오디오 신호에서 음량 레벨이 기 설정된 최소음량인 -40 이하로 처음으로 변경되는 경계점1(710)을 기준으로 1구간과 2구간의 경계를 결정한다. 이때, 경계점1(710)을 기준으로 이전 구간을 1구간, 이후 구간을 2구간으로 결정한다.
또한, 장치는 음량 레벨이 기 설정된 최소음량인 -40 이상으로 처음으로 변경되는 경계점2(720)를 기준으로 2구간과 3구간의 경계를 결정한다. 이때, 경계점2(720)을 기준으로 이전 구간을 2구간, 이후 구간을 3구간으로 결정한다.
또한, 장치는 원본 오디오 신호에서 음량 레벨이 기 설정된 최소음량인 -40 이하로 두번째로 변경되는 경계점3(730)을 기준으로 3구간과 4구간의 경계를 결정한다. 이때, 경계점3(730)을 기준으로 이전 구간을 3구간, 이후 구간을 4구간으로 결정한다.
또한, 장치는 경계점3(730)에서 원본 오디오 신호가 종료되는 지점인 경계점4(740)까지를 4구간으로 결정한다.
여기서, 기 설정된 최소음량은 다양한 실시예가 가능하다.
장치는 세부구간의 음량 평균(또는 평균값)인 세부구간 음량 평균을 계산한다(S603).
예를 들어, 1구간 음량 평균은 -20, 2구간 음량 평균은 -50, 3구간 음량 평균은 -15, 4구간 음량 평균은 -60이 가능하다.
장치는 세부구간 음량 평균이 목표음량 이하인지 판단한다(S604). 예를 들어, 목표음량은 -30으로 설정 가능하다. 다만, 목표음량은 설계에 따라서 다양한 실시예가 가능하다.
장치는 세부구간 음량 평균이 목표음량 이하이면, 세부구간 음량 평균이 목표음량 이하인 세부구간을 음량조정구간으로 결정한다(S605).
예를 들어, 장치는 세부구간 음량 평균이 목표음량인 -40인 세부구간은 2구간(-50), 4구간(-60)으로, 2구간과 4구간을 음량조정구간으로 결정한다.
장치는 세부구간 음량 평균이 목표음량 이하가 아니면, 단계 S604를 수행한다.
장치는 음량조정구간의 증폭비율을 계산한다(S606).
예를 들어, 장치는 음량조정구간에서 아래 수학식 1로 음량조정구간의 증폭비율을 계산할 수 있다.
Figure PCTKR2018012262-appb-M000001
예를 들어, 장치는 음량조정구간인 2구간의 증폭비율을 아래와 같은 수학식 2로 계산할 수 있다.
Figure PCTKR2018012262-appb-M000002
예를 들어, 장치는 음량조정구간인 4구간의 증폭비율을 아래와 같은 수학식 3로 계산할 수 있다.
Figure PCTKR2018012262-appb-M000003
장치는 증폭비율을 이용하여 음량 조정값을 계산한다(S607).
예를 들어, 장치는 음량 조정값을 아래 수학식 4를 이용하여 계산할 수 있다.
Figure PCTKR2018012262-appb-M000004
예를 들어, 장치는 음량조정구간인 2구간의 음량 조정값을 아래와 같은 수학식 5로 계산할 수 있다.
Figure PCTKR2018012262-appb-M000005
예를 들어, 장치는 음량조정구간인 4구간의 음량 조정값을 아래와 같은 수학식 6로 계산할 수 있다.
Figure PCTKR2018012262-appb-M000006
장치는 음량조정구간의 음량 평균인 음량조정구간 음량 평균에 조정값을 반영하여 음량조정구간 음량(또는 음량 평균)을 조정한다(S608). 예를 들어, 장치는 음량조정구간의 음량 평균인 음량조정구간 음량 평균에 조정값만큼 올려서 음량조정구간 음량을 조정할 수 있다.
예를 들어, 장치는 음량조정구간인 2구간의 음량 평균인 -50을 2구간의 음량 조정값인 13.3만큼 올려서 조정된 음량조정구간인 조정2구간의 음량 평균을 36.7로 조정할 수 있다. 또한, 장치는 음량조정구간인 4구간의 음량 평균인 -60을 4구간의 음량 조정값인 22.5만큼 올려서 조정된 음량조정구간인 조정4구간의 음량 평균을 37.5로 조정할 수 있다.
장치는 음량조정구간 외의 세부구간과 조정된 음량조정구간의 경계점인 조정경계점 음량을 보정한다(S609). 여기서, 음량조정구간 외의 세부구간은 1구간, 3구간이며, 조정된 음량조정구간은 조정2구간, 조정4구간이 가능하다.
예를 들어, 장치는 1구간과 조정2구간 사이의 경계점인 조정경계점1(715), 조정2구간과 3구간 사이의 경계점인 조정경계점2(725), 3구간과 조정4구간 사이의 경계점인 조정경계점3(735), 조정4구간의 끝인 조정경계점4(745)의 음량을 보정할 수 있다.
이렇게 함으로써, 본 발명은 음량 조정(또는 원본 오디오 신호)으로 인한 경계점에서의 왜곡 현상을 줄일 수 있다.
이상과 같이 본 발명을 도면에 도시한 실시예를 참고하여 설명하였으나, 이는 발명을 설명하기 위한 것일 뿐이며, 본 발명이 속하는 기술 분야의 통상의 지식을 가진 자라면 발명의 상세한 설명으로부터 다양한 변형 또는 균등한 실시예가 가능하다는 것을 이해할 수 있을 것이다. 따라서 본 발명의 진정한 권리범위는 특허청구범위의 기술적 사상에 의해 결정되어야 한다.

Claims (5)

  1. 동영상 변환장치가 동영상을 변환하는 동영상 변환방법에 있어서,
    동영상 원본파일을 수신하는 단계,
    상기 동영상 원본파일에서 원본 비디오 신호와 원본 오디오 신호를 디멀티플렉싱하고, 상기 원본 비디오 신호의 정보 테이블을 생성하는 단계,
    상기 원본 오디오 신호를 기 설정된 조정방법으로 조정하여 조정 오디오 신호를 생성하는 단계,
    상기 원본 비디오 신호와 상기 조정 오디오 신호를 상기 정보 테이블을 이용하여 멀티플렉싱하는 단계를 포함하는 동영상 변환방법.
  2. 제1항에 있어서,
    상기 원본 비디오 신호의 정보 테이블을 생성하는 단계는,
    상기 원본 비디오 신호의 각 비디오 프레임 구성정보와 사이즈정보를 독출하여 정보 테이블을 생성하는 것을 특징으로 하는 동영상 변환방법.
  3. 제1항에 있어서,
    상기 멀티플렉싱하는 단계는,
    상기 조정 오디오 신호의 크기가 상기 원본 오디오 신호의 크기와 동일한지 확인하는 단계,
    상기 조정 오디오 신호의 크기가 상기 원본 오디오 신호의 크기와 동일하지 않으면, 상기 조정 오디오 신호와 상기 원본 오디오 신호의 크기차이를 반영하고, 상기 원본 비디오 신호와 상기 조정 오디오 신호를 상기 정보 테이블을 이용하여, 상기 동영상 원본파일 형태로 멀티플렉싱하는 단계를 포함하는 동영상 변환방법.
  4. 제1항에 있어서,
    상기 멀티플렉싱하는 단계는,
    상기 원본 비디오 신호에서 특정 비디오 프레임이 I프레임인지 확인하는 단계,
    상기 원본 비디오 신호에서 상기 특정 비디오 프레임이 상기 I프레임이면, 상기 I프레임의 크기를 확인하는 단계,
    상기 I프레임의 크기에 따라 기 설정된 개수의 상기 조정 오디오 신호를 상기 I프레임에 삽입하여, 상기 원본 비디오 신호와 상기 조정 오디오 신호를 상기 정보 테이블을 이용하여, 상기 동영상 원본파일 형태로 멀티플렉싱하는 단계를 포함하는 동영상 변환방법.
  5. 동영상 원본파일을 수신하여, 상기 동영상 원본파일에서 원본 비디오 신호와 원본 오디오 신호를 디멀티플렉싱하고, 상기 원본 비디오 신호의 정보 테이블을 생성하는 디멀티플렉서,
    상기 원본 오디오 신호를 기 설정된 조정방법으로 조정하여 조정 오디오 신호를 생성하는 신호 조정부,
    상기 원본 비디오 신호와 상기 조정 오디오 신호를 상기 정보 테이블을 이용하여 멀티플렉싱하는 멀티플렉서를 포함하는 동영상 변환장치.
PCT/KR2018/012262 2018-10-17 2018-10-17 동영상 변환방법 및 장치 WO2020080565A1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020180123577A KR102074240B1 (ko) 2018-10-17 2018-10-17 동영상 변환방법 및 장치
KR10-2018-0123577 2018-10-17

Publications (1)

Publication Number Publication Date
WO2020080565A1 true WO2020080565A1 (ko) 2020-04-23

Family

ID=69569301

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2018/012262 WO2020080565A1 (ko) 2018-10-17 2018-10-17 동영상 변환방법 및 장치

Country Status (2)

Country Link
KR (1) KR102074240B1 (ko)
WO (1) WO2020080565A1 (ko)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7027713B1 (en) * 1999-11-30 2006-04-11 Sharp Laboratories Of America, Inc. Method for efficient MPEG-2 transport stream frame re-sequencing
KR20120091868A (ko) * 2011-02-10 2012-08-20 주식회사 미디어엑셀코리아 트랜스코딩 시스템에서의 오디오 및 비디오 동기화 방법
US20140082662A1 (en) * 2004-04-07 2014-03-20 Arun Ramaswamy Data insertion apparatus and methods for use with compressed audio/video data
KR20140097580A (ko) * 2009-12-21 2014-08-06 에코스타 어드밴스드 테크놀로지스 엘.엘.씨. 코덱이 적용된 프레임 크기로의 오디오 분할
EP1798973B1 (en) * 1999-10-27 2016-01-06 Comcast IP Holdings I, LLC Multiple video streams using slice-based encoding

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101484101B1 (ko) 2010-03-08 2015-01-16 (주)테크노니아 동영상 변환 장치
KR102171707B1 (ko) * 2014-01-08 2020-10-29 삼성전자주식회사 멀티미디어 데이터 재생 방법 및 장치

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1798973B1 (en) * 1999-10-27 2016-01-06 Comcast IP Holdings I, LLC Multiple video streams using slice-based encoding
US7027713B1 (en) * 1999-11-30 2006-04-11 Sharp Laboratories Of America, Inc. Method for efficient MPEG-2 transport stream frame re-sequencing
US20140082662A1 (en) * 2004-04-07 2014-03-20 Arun Ramaswamy Data insertion apparatus and methods for use with compressed audio/video data
KR20140097580A (ko) * 2009-12-21 2014-08-06 에코스타 어드밴스드 테크놀로지스 엘.엘.씨. 코덱이 적용된 프레임 크기로의 오디오 분할
KR20120091868A (ko) * 2011-02-10 2012-08-20 주식회사 미디어엑셀코리아 트랜스코딩 시스템에서의 오디오 및 비디오 동기화 방법

Also Published As

Publication number Publication date
KR102074240B1 (ko) 2020-02-06

Similar Documents

Publication Publication Date Title
US8942259B2 (en) Digital visual interface with audio and auxiliary data
US20060044469A1 (en) Apparatus and method for coordinating synchronization of video and captions
WO2015076537A1 (ko) 동영상 제공 방법 및 동영상 제공 시스템
EP1259082A2 (en) Video display apparatus, audio mixing apparatus, video-audio output apparatus and video-audio synchronizing method
WO2011005025A2 (en) Signal processing method and apparatus therefor using screen size of display device
WO2016093656A1 (en) Sound output device, sound output system, and control method thereof
DE69525238T2 (de) Verfahren, Schnittstellenmodule und Telefonnetz zum Multiplexen und Demultiplexen eines analogen MTS (Nachrichtentelefondienst) signals und eines ADSL (asymmetrische digitale Teilnehmerleitung) Datenstroms
WO2021251660A1 (en) Method for controlling volume of digital earphone, electronic terminal and digital earphone
TW200736939A (en) Apparatus and method for determining displaying duration of video frame
WO2009134085A2 (ko) 슈퍼 프레임을 이용하여 멀티채널 오디오 신호를 송수신하는 방법 및 장치
KR20160017214A (ko) 멀티스크린 시스템, 영상분할서버 및 그 영상분할방법, 분할영상단말기 및 멀티스크린 제어방법
JPH05183530A (ja) 同期ペイロードポインタ処理方式
ES2370218A1 (es) Procedimiento y dispositivo para sincronizar subtítulos con audio en subtitulación en directo.
WO2020080565A1 (ko) 동영상 변환방법 및 장치
WO2015046724A1 (en) Image display apparatus, server for synchronizing contents, and method for operating the server
US20090121740A1 (en) Audio/Video Router
WO2013044772A1 (zh) 在同一屏幕实现同时观看不同画面的方法、系统和设备
KR101793974B1 (ko) Ｕｈｄ 다중 포맷 프로세싱 장치
WO2021162254A1 (ko) 오디오 장치 및 그 제어방법
WO2021071175A1 (ko) 대표음량을 적용한 컨텐츠 음량 조절 시스템 및 그 방법
WO2022065537A1 (ko) 자막 동기화를 제공하는 영상 재생 장치 및 그 동작 방법
WO2014058275A1 (ko) 오디오 데이터 생성 장치 및 방법, 오디오 데이터 재생 장치 및 방법
JP2010154249A (ja) 映像音声再生システム及び配信装置
JP3298353B2 (ja) 同期信号源選択方式
WO2019059475A1 (ko) 오디오장치 및 그 오디오장치의 제어방법

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 18937193

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 18937193

Country of ref document: EP

Kind code of ref document: A1