KR101606121B1 - 동영상 파일 조각화 방법 및 그 장치 - Google Patents

동영상 파일 조각화 방법 및 그 장치 Download PDF

Info

Publication number
KR101606121B1
KR101606121B1 KR1020140191046A KR20140191046A KR101606121B1 KR 101606121 B1 KR101606121 B1 KR 101606121B1 KR 1020140191046 A KR1020140191046 A KR 1020140191046A KR 20140191046 A KR20140191046 A KR 20140191046A KR 101606121 B1 KR101606121 B1 KR 101606121B1
Authority
KR
South Korea
Prior art keywords
frame
file
frames
replacement
video
Prior art date
Application number
KR1020140191046A
Other languages
English (en)
Inventor
박명순
Original Assignee
주식회사 솔박스
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 솔박스 filed Critical 주식회사 솔박스
Priority to KR1020140191046A priority Critical patent/KR101606121B1/ko
Application granted granted Critical
Publication of KR101606121B1 publication Critical patent/KR101606121B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234345—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements the reformatting operation being performed only on part of the stream, e.g. a region of the image or a time segment
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/40—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video transcoding, i.e. partial or full decoding of a coded input stream followed by re-encoding of the decoded output stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440245—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display the reformatting operation being performed only on part of the stream, e.g. a region of the image or a time segment

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

동영상 파일 조각화 방법 및 그 장치가 제공된다. 동영상 파일을 구성하는 프레임들 중에서 미리 설정된 영상 조각화 기준을 중심으로 이전에 마지막으로 위치되는 프레임이 교체 대상 프레임인지를 판별한다. 이전에 마지막으로 위치되는 프레임이 교체 대상 프레임인 경우, 교체 대상 프레임을 다른 종류의 프레임으로 교체한다. 교체된 프레임을 토대로 영상 조각화를 수행하여 조각 파일을 획득한다.

Description

동영상 파일 조각화 방법 및 그 장치 {Method and apparatus for segmenting video files}
본 발명은 동영상 파일을 조각화하는 방법 및 그 장치에 관한 것이다.
컴퓨터와 통신기술이 발전함에 따라서 다양한 데이터를 네트워크를 통해 전송할 수 있게 되었으며, 최근에는 인터넷을 통하여 멀티미디어 데이터를 실시간으로 전송 및 재생해 주는 스트리밍(streaming) 서비스가 활성화되고 있다. 특히 스마트폰, 태블릿 PC와 같이 스트리밍 서비스를 사용할 수 있고 인터넷에 항상 연결되어 있는 디바이스의 증가로 동영상 콘텐츠에 대한 요구가 더욱 확대되고 있다.
동영상 콘텐츠를 클라이언트로 제공하기 위해서는 네트워크 상태(예를 들어, 대역폭), 클라이언트의 특성 및 성능 등의 요소에 적합하도록 동영상 콘텐츠를 가공, 변환, 선별하는 과정이 필요하다. 동영상 콘텐츠에 해당하는 동영상 파일을 디코딩하고, 다시 인코딩하여, 하나의 데이터 포맷을 다른 데이터 포맷으로 변환하는 것을 트랜스코딩(transcoding)이라고 한다
트랜스코딩은 싱글(single) 트랜스코딩과 병렬(parallel) 트랜스코딩을 포함한다. 싱글 트랜스코딩은 하나의 영상 파일 전체를 하나의 프로세서 또는 시스템에서 순차적으로 디코딩하고 인코딩하여 데이터 포맷이 변환된 영상 파일을 획득하는 것을 나타낸다. 병렬 트랜스코딩은 하나의 영상 파일을 복수의 조각 파일로 조각화한 다음에 조각 파일들을 복수의 프로세서 또는 시스템에서 동시에 병렬로 디코딩하고 인코딩 처리하고, 처리된 조각 파일들을 하나의 파일으로 결합하여 최종적으로 데이터 포맷이 변환된 영상 파일을 획득하는 것을 나타낸다.
고화질 영상에 사용하는 AVC(Advanced Video Codec, H264) 하이프로파일(High Profile)과 같이 B 프레임을 사용하여 인코딩 되어진 영상파일의 경우, 병렬 트랜스코딩을 위한 영상 조각화가 효율적으로 이루어지지 않으면, 각 조각 파일에 대한 디코딩이 올바르게 이루어지지 않는 문제점이 발생한다.
본 발명이 해결하고자 하는 과제는 동영상을 효율적으로 조각화하여 트랜스코딩하기 위한 동영상 파일 조각화 방법 및 그 장치를 제공하는 것이다.
본 발명의 특징에 따른 파일 조각화 방법은, 복수의 프레임들로 이루어진 동영상 파일을 조각화하는 방법에서, 동영상 파일을 구성하는 프레임들 중에서 미리 설정된 영상 조각화 기준을 중심으로 이전에 마지막으로 위치되는 프레임이 교체 대상 프레임인지를 판별하는 단계; 상기 이전에 마지막으로 위치되는 프레임이 교체 대상 프레임인 경우, 상기 교체 대상 프레임을 다른 종류의 프레임으로 교체하는 단계; 및 상기 교체된 프레임을 토대로 영상 조각화를 수행하여 조각 파일을 획득하는 단계를 포함한다.
상기 동영상 파일은 서로 다른 종류의 복수의 프레임들로 이루어지며, 각 프레임은 I 프레임, P 프레임, 그리고 B 프레임 중 하나일 수 있다.
상기 판별하는 단계는 상기 이전에 마지막으로 위치되는 프레임이 B 프레임인 경우, 상기 B 프레임이 교체 대상 프레임인 것으로 판별할 수 있다.
상기 교체하는 단계는 상기 교체 대상 프레임을 P 프레임으로 교체할 수 있다.
상기 교체하는 단계는 교체할 P 프레임을 생성하는 단계; 및 상기 교체 대상 프레임을 상기 생성된 P 프레임으로 교체하는 단계를 포함할 수 있다.
상기 생성하는 단계는 상기 교체 대상 프레임 이전에 위치한 프레임의 디코딩 데이터와 상기 교체 대상 프레임의 디코딩 데이터의 차이를 토대로 상기 교체할 P 프레임을 생성하고, 상기 교체 대상 프레임은 B 프레임일 수 있다.
상기 영상 조각화 기준은 조각 파일에 포함되는 프레임 개수, 프레임들이 위치되는 시퀀스 중 적어도 하나를 토대로 설정될 수 있다.
본 발명의 다른 특징에 따른 파일 조각화 장치는, 복수의 프레임들로 이루어진 동영상 파일을 조각화하는 장치에서, 동영상 파일을 구성하는 프레임들 중에서 미리 설정된 영상 조각화 기준을 중심으로 이전에 마지막으로 위치되는 프레임이 교체 대상 프레임인지를 판별하는 프레임 판별부; 상기 이전에 마지막으로 위치되는 프레임이 교체 대상 프레임인 경우 상기 교체 대상 프레임을 다른 종류의 프레임으로 교체하고, 상기 이전에 마지막으로 위치되는 프레임이 교체 대상 프레임이 아닌 경우에는 원 프레임을 유지하는 프레임 교체부; 및 상기 프레임 교체부의 처리 결과에 따라 전달되는 프레임을 토대로 영상 조각화를 수행하여 조각 파일을 획득하는 조각화 처리부를 포함한다.
상기 동영상 파일은 서로 다른 종류의 복수의 프레임들로 이루어지며, 각 프레임은 I 프레임, P 프레임, 그리고 B 프레임 중 하나이며, 상기 프레임 판별부는 상기 이전에 마지막으로 위치되는 프레임이 B 프레임인 경우, 상기 B 프레임이 교체 대상 프레임인 것으로 판별할 수 있다.
상기 프레임 교체부는 상기 교체 대상 프레임을 P 프레임으로 교체할 수 있다. 상기 프레임 교체부는 교체할 P 프레임을 생성하고, 상기 교체 대상 프레임을 상기 생성된 P 프레임으로 교체할 수 있다.
상기 프레임 교체부는 상기 교체 대상 프레임 이전에 위치한 프레임의 디코딩 데이터와 상기 교체 대상 프레임의 디코딩 데이터의 차이를 토대로 상기 교체할 P 프레임을 생성할 수 있다.
본 발명의 실시 예에 따르면, 동영상 데이터를 제공하는 시스템에서 B프레임을 사용해서 동일 화질에서 압축효율을 높이면서도 동영상 파일을 병렬 트랜스코딩에 적합하도록 조각화할 수 있다.
도 1은 싱글 트랜스코딩 과정을 나타낸 도이다.
도 2는 영상 조각화 과정을 나타낸 도이다.
도 3은 동영상 파일을 구성하는 프레임들을 나타낸 도이며, 도 4는 영상 조각화시의 조각 파일들을 나타낸 예시도이다.
도 5는 본 발명의 실시 예에 따른 영상 조각화 방법의 개념도이다.
도 6은 본 발명의 실시 예에 따른 파일 조각화 장치의 구조를 나타낸 도이다.
도 7은 본 발명의 실시 예에 따른 동영상 파일 조각화 방법의 흐름도이다.
아래에서는 첨부한 도면을 참고로 하여 본 발명의 실시 예에 대하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 상세히 설명한다. 그러나 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시 예에 한정되지 않는다. 그리고 도면에서 본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 유사한 부분에 대해서는 유사한 도면 부호를 붙였다.
명세서 전체에서, 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성 요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미한다.
이하, 도면을 참조하여 본 발명의 실시 예에 따른 동영상 파일 조각화 방법 및 그 장치에 대하여 설명한다.
무압축의 상태의 비디오 데이터와 오디오 데이터는 용량이 매우 크기 때문에 전송하려는 디바이스와 네트워크의 상태에 적절한 용량으로 줄이는 과정이 필요하다. 무압축 동영상을 작은 용량으로 줄이기 위해서는 압축기술이 사용된다. 인터넷 스트리밍에서는 비디오 데이터에는 AVC(advanced video coding), 그리고 오디오 데이터에는 AAC(advanced audio coding) 압축기술이 주로 사용되고 있으며, 동영상 분야에서는 이러한 압축 기술을 코덱(CODEC)이라고 한다. 이하, 설명의 편의를 위하여, 압축 기술에 따라 처리된 데이터를 데이터 종류에 따라서 "비디오 데이터"와 "오디오 데이터"라고 하며, 압축 이전의 상태에 해당하는 데이터는 "비디오 무압축 데이터"와 "오디오 무압축 데이터"라고 각각 명명한다.
MP4와 같은 멀티미디어 동영상 파일은 비디오 데이터와 오디오 데이터, 그리고 영상 재생 정보로 이루어지며, 비디오 데이터, 오디오 데이터, 영상 재생 정보를 가지고 MP4와 같은 동영상 파일을 생성하는 과정을 먹싱(Muxing) 이라고 한다.
영상 파일의 규격을 변환하기 위해서는 인코딩/먹싱 이전에 MP4 파일과 같은 동영상 파일에서 비디오 데이터와 오디오 데이터를 분리하는 디먹싱(Demuxing) 과정과, 압축된 비디오 데이터와 오디오 데이터에서 압축을 해제하는 과정인 디코딩(Decoding)과정이 필요하다.
일반적으로 디코딩된 비디오 무압축 데이터와 오디오 무압축 데이터는 변경하려는 규격에 맞추어서 화면 크기, 오디오 샘플링 레이트(sampling rate)등을 변환하는 필터링(filtering) 과정을 거친 후에 사용된다.
도 1은 싱글 트랜스코딩 과정을 나타낸 도이다.
동영상 파일을 싱글 프리트랜스코딩하는 경우, 도 1에서와 같이, 디먹싱(demuxing) 과정(P1), 디코딩(decoding) 과정(P2), 필터링(filtering) 과정(P3), 인코딩(encoding) 과정(P4), 그리고 먹싱(Muxing) 과정(P5)이 수행된다.
디먹싱 과정(P1)은 동영상 파일을 인코딩된 비디오 데이터와 오디오 데이터로 분리하는 과정이다. 소정 규격의 동영상 파일은 도 1에서와 같이, 원본 비디오 데이터, 원본 오디오 데이터, 그리고 원본 영상 재생 정보를 포함하는 형태로 이루어지는데, 동영상 파일은 디먹싱 과정(P1)을 통하여 원본 비디오 데이터와, 원본 오디오 데이터로 분리된다.
디코딩 과정(P2)은 압축된 비디오 데이터와 오디오 데이터를 디코딩 용도의 코덱을 사용해서 압축 이전의 상태로 복원하는 과정이다. 예를 들어, AVC 비디오 코덱을 이용하여 원본 비디오 데이터를 디코딩하여 원본 비디오 무압축 데이터를 획득하고, 또한 AAC를 사용해서 원본 오디오 데이터를 디코딩하여 원본 오디오 무압축 데이터를 획득한다.
필터링 과정(P3)은 비디오 화면 크기 변경, 비디오 자막 추가, 오디오 샘플링 레이트 변경, 오디오 채널 구성 변경 등과 같이 무압축 상태에서 비디오와 오디오 데이터를 변경하는 작업을 수행한다. 예를 들어, 원본 비디오 무압축 데이터를 필터링 처리하여 수정된 비디오 무압축 데이터를 획득하고, 또한 원본 오디오 데이터를 필터링 처리하여 수정된 오디오 무압축 데이터를 획득한다. 필터링 과정에서 수행되는 작업은 위에 기술된 것에 한정되지 않는다.
인코딩 과정(P4)은 획득한 무압축 데이터를 비디오 코덱과 오디오 코덱을 이용하여 압축하는 과정이다. 필터링 과정을 통하여 획득한 수정 비디오 무압축 데이터를 AVC와 같은 비디오 코덱을 이용해서 압축하여 수정 비디오 데이터를 획득하고, 또한 수정 오디오 무압축 데이터를 AAC와 같은 오디오 코덱을 이용해서 압축하여 수정 오디오 데이터를 획득한다.
먹싱 과정(P5)는 인코딩된 수정된 비디오 데이터와 수정된 오디오 데이터 그리고 수정된 영상 재생 정보를 동영상 파일 포맷에 맞게 결합하여 저장하는 과정이다. 예를 들어, 인코딩 과정을 통하여 획득한 수정 비디오 데이터와, 수정 오디오 데이터, 출력 파일 포맷에 적합한 수정 영상 재생 정보를 생성한 후에 새로운 규격의 출력 영상 파일을 생성한다. 새로운 규격의 출력 영상 파일은 수정 비디오 데이터, 수정 오디오 데이터, 그리고 수정 영상 재생 정보를 포함한다.
위와 같은 싱글 트랜스코딩 과정을 통하여, 원본 파일 포맷의 영상 파일로부터 수정 파일 포맷의 영상 파일이 획득된다.
이러한 싱글 트랜스코딩을 보다 빠르게 수행하기 위하여, 동영상 파일을 조각화한 다음에 각각의 조각 파일들을 동시에 병렬적으로 트랜스코딩 처리하는 병렬 트랜스코딩이 수행될 수 있다.
병렬 트랜스코딩을 위하여 먼저 영상 조각화가 이루어져야 한다.
도 2는 본 발명의 실시 예에 따른 영상 조각화 과정을 나타낸 도이다.
동영상 파일을 조각화 하는 경우, 도 2에서와 같이, 디먹싱 과정(P10), 세그멘팅(segmenting) 과정(P20), 그리고 그리고 먹싱 과정(P30)이 수행된다.
디먹싱 과정(P10)은 동영상 파일을 인코딩된 비디오 데이터와 오디오 데이터로 분리한다. 소정 규격의 동영상 파일은 도 2에서와 같이, 비디오 데이터, 오디오 데이터, 그리고 영상 재생 정보를 포함하는 형태로 이루어지는데, 동영상 파일은 디먹싱 과정(P10)을 통하여 비디오 데이터와, 오디오 데이터로 분리된다.
세그멘팅 과정(P20)은 비디오 데이터와 오디오 데이터를 조각화하는 과정이다. 예를 들어, 도2에서와 같이, 비디오 데이터를 두 개의 비디오 데이터로 조각화하고, 오디오 데이터를 두 개의 오디오 데이터로 조각화한다.
먹싱 과정(P30)는 조각화된 비디오 데이터와 오디오 데이터 그리고 영상 재생 정보를 원래의 동영상 파일의 포맷에 맞게 결합하여 저장하는 과정이다. 예를 들어, 두 개의 조각화된 비디오 데이터들 중에서 하나의 비디오 데이터, 두 개의 조각화된 오디오 데이터들 중에서 하나의 오디오 데이터, 그리고 영상 재생 정보를 결합하여 하나의 조각 파일1을 획득한다. 그리고 두 개의 조각화된 비디오 데이터 중에서 나머지 비디오 데이터, 두 개의 조각화된 오디오 데이터들 중에서 나머지 오디오 데이터, 그리고 영상 재생 정보를 결합하여 다른 하나의 조각 파일2를 획득한다.
이러한 영상 조각화 과정을 수행하여, 예를 들어, 제1 포맷의 동영상 파일이 제1 포맷의 조각 파일1과, 제1 포맷의 조각 파일2로 처리된다.
이후, 복수의 프로세서 또는 시스템을 사용하는 병렬 트랜스코딩을 통하여, 제1 포맷의 조각 파일1이 제2 포맷의 조각 파일1로 변환되고, 제1 포맷의 조각 파일2가 제2 포맷의 조각 파일2로 변환된다. 그리고 제2 포맷의 조각 파일1과 제2 포맷의 조각 파일2가 결합되어 최종적으로 제2 포맷의 동영상 파일이 획득된다. 여기서, 제1 포맷은 동영상 파일의 원본 포맷을 나타내며, 제2 포맷은 클라이언트로 제공할 포맷을 나타낸다. 예를 들어, 비디오 해상도 1280×720 화면크기를 가지는 원본 동영상 파일이 조각화되고, 각 조각 파일이 클라이언트에 전송될 640×360 화면 크기의 영상으로 병렬 트랜스코딩된 다음에 결합되어, 최종적으로 이용할 영상이 획득된다.
영상 조각화 과정시, 영상 파일을 구성하는 프레임들을 복수개로 조각화하여 조각 파일들을 형성한다. 이때, 조각 파일들을 디코딩할 때, 디코딩이 정상적으로 이루어지지 않는 경우가 발생한다.
도 3은 동영상 파일을 구성하는 프레임들을 나타낸 도이며, 도 4는 영상 조각화시의 조각 파일들을 나타낸 예시도이다.
MPEG 비디오 압축에 동영상 프레임은 GOP(group of pictures) 즉, 영상 프레임의 집합으로 이루어진다. GOP 내에는 다양한 프레임이 존재하는데, 도 3에서와 같이, I 프레임, P 프레임, B 프레임이 포함된다.
I프레임은 예측을 사용하지 않고 입력 신호 그대로 저장한 프레임으로 하나의 완전한 그림을 구성하기 위한 모든 데이터를 가지고 있다
P 프레임은 현재의 프레임과 앞의 I 프레임과의 차이를 관찰하여 만들어진　예측 정보(하나의 완전한 그림이 아님)만을 포함한다. 따라서 I 프레임보다 대단히 적은 데이터를 포함한다. 따라서 P 프레임을 보기 위해서는 이전의 I프레임이 같이 디코딩 되어야 한다.
B 프레임은 MPEG 신호에서 사용되는 쌍방향 예측 프레임이다. 앞의 프레임과 다음 프레임 간의 차이를 평가한 예측 정보를 토대로 구성된다. B 프레임은 단지 예측 정보만 포함하므로 완전한 그림을 만들지 못하며, P 프레임보다 보다 적은 데이터를 갖는다. B프레임은 쌍방향 예측 프레임이기 때문에 원래의 그림을 보려면 B프레임 앞과 뒤에서 가장 가까운 I프레임 또는 P 프레임 대한 디코딩이 필요하다.
이러한 동영상 파일을 조각화하는 경우, 도 4에서와 같이, B 프레임이 각 조각 파일의 마지막에 위치하는 형태로 조각화가 이루어질 수 있다. 조각 파일의 마지막에 B 프레임이 위치하는 경우, 마지막에 위치하는 B 프레임은 앞에 위치한 P 프레임 이외에 다음 조각 파일의 I 프레임을 참조해야 한다. 예를 들어, 조각 파일 1의 B 프레임은 조각 파일 2의 I 프레임을 참조해야 한다. 그러므로 조각 파일 1만으로는 디코딩을 할 수 없다. 따라서, 하나의 조각 파일에 대한 디코딩이 정상적으로 수행되지 않는다.
이러한 것을 고려하여, B 프레임을 포함하지 않도록 동영상 파일을 생성하는 방법을 사용할 수 있으나, 이럴 경우 동일한 화질을 가지기 위해서는 파일의 용량이 커지게 된다.
따라서 본 발명의 실시 예에서는 각 조각 파일의 정상적인 디코딩이 가능하도록 영상 조각화를 수행한다.
도 5는 본 발명의 실시 예에 따른 영상 조각화 방법의 개념도이다.
본 발명의 실시 예에서는 동영상 파일을 조각화하는 경우, 조각화가 이루어지는 지점을 기준으로 이전 프레임에 B 프레임이 존재하면 해당 프레임을 P 프레임으로 교체한 다음에 조각화를 수행한다.
구체적으로, 도 5에서와 같이, 동영상 파일이 I 프레임, B 프레임, P 프레임, B 프레임, I 프레임, B 프레임, P 프레임, B 프레임과 같은 시퀀스를 가지는 복수의 프레임들로 이루어지는 경우, 영상 조각화가 시퀀스에 따라 4개의 프레임들을 하나의 조각 파일로 처리하는 방법이 사용될 수 있다. 이러한 방법에 따라 동영상 파일을 구성하는 프레임을 조각화하는 경우, 영상 조각화 기준을 중심으로 이전의 마지막 프레임이 B 프레임인지의 여부를 토대로 프레임 교체를 선택적으로 수행한다. 여기서, 영상 조각화 기준은 조각 파일에 포함되는 프레임 개수, 프레임들이 위치되는 시퀀스 등을 토대로 동영상 파일을 조각화하는 기준이라고 할 수 있으며, 영상 조각이 필요한 지점이다. 이러한 영상 조각화 기준이 프레임 교체 여부를 판단하기 위한 기준으로 사용된다.
영상 조각화 기준이 도 5에서와 같이, 프레임 시퀀스에 따라 4 개의 프레임들마다 적용되는 경우, 영상 조각화 기준을 중심으로 이전에 마지막으로 위치한 프레임이 B 프레임인지를 판단한다. B 프레임인 경우에는 위에서 살펴본 바와 같이 해당 B 프레임에 대한 디코딩을 수행할 수 없으므로, 본 발명의 실시 예에서는 해당 B 프레임을 다른 프레임 종류로 교체한다.
이를 위하여, 본 발명의 실시 예에서는 B 프레임을 P프레임으로 교체한다. P 프레임이 I 프레임에 비하여 데이터가 상당히 적기 때문에 디코딩 효율화를 위하여, B 프레임을 P프레임으로 교체한다. 그러나, 이에 한정되지 않고, B 프레임을 I 프레임으로 교체할 수도 있다.
영상 조각화 기준을 중심으로 이전에 마지막으로 위치한 B 프레임(이하, 설명의 편의를 위하여, 교체 대상 B 프레임이라고 명명함)을 교체하기 위하여, 교체 대상 B 프레임이 포함되는 조각 파일들의 프레임들을 참조한다. 즉, 도 5에 따라, I 프레임(I1), B 프레임(B1), P 프레임(P1), B 프레임(B2)의 시퀀스로 나열되는 프레임들 중에서, 교체 대상 B 프레임(B2)을 교체할 P프레임(P_B2)을 생성해서 교체한 후에 영상 조각화를 수행하여, 복수의 조각 파일들을 획득한다. 이에 따라, I 프레임(I1), B 프레임(B1), P 프레임(P1), P 프레임(P_B2)의 시퀀스로 나열되는 프레임들로 이루어진 조각 파일 1이 획득된다.
교체할 P 프레임(P_B2)는 다음과 같이 생성할 수 있다.
도 5와 같이, I 프레임(I1), B 프레임(B1), P 프레임(P1), B 프레임(B2), I 프레임(I2), B 프레임(B3), P 프레임(P2), B 프레임(B4) 등의 시퀀스로 나열되는 프레임들 중에서, 영상 조각화 기준을 중심으로 이전에 마지막으로 위치되는 B 프레임(B2) 대신에 사용할 P 프레임(P_B2)을 생성할 수 있다.
교체할 P 프레임(P_B2)은 이전에 위치한 프레임인 P1 프레임의 디코딩 결과에 따른 디코딩 데이터와 B2 프레임의 디코딩 결과에 따른 디코딩 데이터의 차이점을 토대로 생성한다. 여기서, P1 프레임의 디코딩 데이터는 I1프레임의 디코딩 결과를 토대로 획득될 수 있으며, I1 프레임과 I2 프레임에 대해서는 단독 프레임 디코딩이 수행된다. 그리고 B1 프레임의 디코딩은 I1프레임과 P1프레임의 디코딩 결과를 참조해서 수행되고, B2 프레임의 디코딩은 P1프레임과 I2프레임의 디코딩 결과를 참조해서 수행된다.
P1 프레임의 디코딩 데이터와 B2 프레임의 디코딩 데이터의 차이점을 토대로 P 프레임을 생성하고 이를 인코딩하여 최종적으로 P 프레임(P_B2)를 생성한다. 여기서 인코딩 옵션은 원본 동영상 파일의 인코딩 환경과 동일해야 한다.
이러한 영상 조각화를 통하여, 원본 동영상 파일에 B 프레임을 사용하여 압축 효율을 높이면서도, 조각 파일들이 디코딩 오류가 발생하지 않도록 원본 동영상 파일을 조각화하여 병렬 트랜스코딩을 지원할 수 있다.
도 6은 본 발명의 실시 예에 따른 파일 조각화 장치의 구조를 나타낸 도이다.
본 발명의 실시 예에 따른 파일 조각화 장치(100)는 첨부한 도 6에서와 같이, 프레임 판별부(110), 프레임 교체부(120), 조각화 처리부(130)를 포함한다.
프레임 판별부(110)는 동영상 파일을 구성하는 프레임들을 영상 조각화 기준에 따라 구분하고, 영상 조각화 기준을 중심으로 이전에 마지막으로 위치한 프레임이 B 프레임인지를 판별한다.
프레임 교체부(120)는 프레임 판별부(110)의 판별 결과를 토대로 영상 조각화 기준을 중심으로 이전에 마지막으로 위치한 프레임을 선택적으로 교체 처리한다. 영상 조각화 기준을 중심으로 이전에 마지막으로 위치한 프레임이 B 프레임인 경우, 해당 B 프레임 즉, 교체 대상 B 프레임을 새로 생성한P 프레임으로 교체한다. 영상 조각화 기준을 중심으로 이전에 마지막으로 위치한 프레임이 B 프레임이 아닌 경우에는 교체 처리를 수행하지 않는다.
프레임 교체부(120)는 교체 대상 B 프레임 대신에 사용할 P 프레임을 생성하고, 교체 대상 B 프레임을 생성된 P 프레임으로 교체한다. 교체할 P 프레임은 위에 기술된 방법에 따라 생성될 수 있다.
조각화 처리부(130)는 프레임 교체 처리가 선택적으로 이루어진 프레임들을 조합하여 조각 파일을 생성한다.
도 7은 본 발명의 실시 예에 따른 동영상 파일 조각화 방법의 흐름도이다.
복수의 프레임들로 이루어진 제1 포맷의 동영상 파일이 제공되며, 제1 포맷의 동영상 파일에 대한 영상 조각화가 수행된다. 제1 포맷의 동영상 파일들은 서로 다른 종류의 프레임들(I 프레임, B 프레임, P 프레임)이 소정의 시퀀스에 따라 위치되며, 예를 들어, 도 5와 같은 시퀀스에 따른 복수의 프레임들을 포함할 수 있다.
파일 조각화 장치(100)는 미리 설정된 영상 조각화 기준을 토대로 동영상 파일의 프레임을 판별한다(S110). 즉, 영상 조각화 기준을 중심으로 이전의 마지막 프레임이 B 프레임인지를 판별한다(S120).
영상 조각화 기준을 중심으로 이전에 마지막으로 위치한 프레임이 B 프레임인 경우에는 해당 프레임이 교체 대상 B 프레임인 것으로 판단하고, 교체 대상 B 프레임을 다른 종류의 프레임으로 교체한다. 여기서, 교체 대상 B 프레임을 교체할 P 프레임을 생성하여 교체 대상 B 프레임을 생성된 P 프레임으로 교체한다(S130).
그리고 교체된 프레임을 토대로 최종적으로 영상 조각화를 수행하여 조각 파일을 획득한다(S140).
위에 기술된 바와 같은 영상 조각화 과정을 영상 조각화 기준을 토대로 제1 포맷의 동영상 파일에 대하여 복수회 수행하여, 제1 포맷의 동영상 파일에 대한 조각화를 수행하여 복수의 조각 파일들을 획득한다.
제1 포맷의 동영상 파일에 대한 조각화가 완료되면(S150), 이후, 각 조각 파일에 대한 병렬 트랜스코딩이 수행되고, 트랜스코딩된 조각 파일들을 결합하여 제2 포맷의 동영상 파일이 획득된다.
본 발명의 실시 예는 이상에서 설명한 장치 및/또는 방법을 통해서만 구현이 되는 것은 아니며, 본 발명의 실시예의 구성에 대응하는 기능을 실현하기 위한 프로그램, 그 프로그램이 기록된 기록 매체 등을 통해 구현될 수도 있으며, 이러한 구현은 앞서 설명한 실시예의 기재로부터 본 발명이 속하는 기술분야의 전문가라면 쉽게 구현할 수 있는 것이다.
이상에서 본 발명의 실시 예에 대하여 상세하게 설명하였지만 본 발명의 권리범위는 이에 한정되는 것은 아니고 다음의 청구범위에서 정의하고 있는 본 발명의 기본 개념을 이용한 당업자의 여러 변형 및 개량 형태 또한 본 발명의 권리범위에 속하는 것이다.

Claims (12)

  1. 병렬 트랜스코딩을 위하여, 복수의 프레임들로 이루어진 동영상 파일을 조각화하는 방법에서,
    동영상 파일을 구성하는 프레임들 중에서 미리 설정된 영상 조각화 기준―상기 영상 조각화 기준은 프레임 개수, 프레임들이 위치되는 시퀀스 중 적어도 하나를 토대로 설정됨--을 중심으로 이전에 마지막으로 위치되는 프레임이 교체 대상 프레임인지를 판별하는 단계;
    상기 이전에 마지막으로 위치되는 프레임이 교체 대상 프레임인 경우, 상기 교체 대상 프레임 이전에 위치한 프레임의 디코딩 데이터와 상기 교체 대상 프레임의 디코딩 데이터의 차이를 토대로 교체할 P 프레임을 생성하는 단계;
    상기 교체 대상 프레임을 상기 생성된 P 프레임으로 교체하는 단계; 및
    상기 교체된 프레임을 토대로 영상 조각화를 수행하여 조각 파일을 획득하는 단계
    를 포함하는, 파일 조각화 방법.
  2. 제1항에 있어서
    상기 동영상 파일은 서로 다른 종류의 복수의 프레임들로 이루어지며, 각 프레임은 I 프레임, P 프레임, 그리고 B 프레임 중 하나인, 파일 조각화 방법.
  3. 제2항에 있어서
    상기 판별하는 단계는 상기 이전에 마지막으로 위치되는 프레임이 B 프레임인 경우, 상기 B 프레임이 교체 대상 프레임인 것으로 판별하는, 파일 조각화 방법.
  4. 삭제
  5. 삭제
  6. 삭제
  7. 삭제
  8. 병렬 트랜스코딩을 위하여, 복수의 프레임들로 이루어진 동영상 파일을 조각화하는 장치에서,
    동영상 파일을 구성하는 프레임들 중에서 미리 설정된 영상 조각화 기준―상기 영상 조각화 기준은 프레임 개수, 프레임들이 위치되는 시퀀스 중 적어도 하나를 토대로 설정됨--을 중심으로 이전에 마지막으로 위치되는 프레임이 교체 대상 프레임인지를 판별하는 프레임 판별부;
    상기 이전에 마지막으로 위치되는 프레임이 교체 대상 프레임인 경우, 상기 교체 대상 프레임 이전에 위치한 프레임의 디코딩 데이터와 상기 교체 대상 프레임의 디코딩 데이터의 차이를 토대로 교체할 P 프레임을 생성하고, 상기 교체 대상 프레임을 상기 생성된 P 프레임으로 교체하고, 상기 이전에 마지막으로 위치되는 프레임이 교체 대상 프레임이 아닌 경우에는 원 프레임을 유지하는 프레임 교체부; 및
    상기 프레임 교체부의 처리 결과에 따라 전달되는 프레임을 토대로 영상 조각화를 수행하여 조각 파일을 획득하는 조각화 처리부
    를 포함하는, 파일 조각화 장치.
  9. 제8항에 있어서
    상기 동영상 파일은 서로 다른 종류의 복수의 프레임들로 이루어지며, 각 프레임은 I 프레임, P 프레임, 그리고 B 프레임 중 하나이며,
    상기 프레임 판별부는 상기 이전에 마지막으로 위치되는 프레임이 B 프레임인 경우, 상기 B 프레임이 교체 대상 프레임인 것으로 판별하는, 파일 조각화 장치.
  10. 삭제
  11. 삭제
  12. 삭제
KR1020140191046A 2014-12-26 2014-12-26 동영상 파일 조각화 방법 및 그 장치 KR101606121B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020140191046A KR101606121B1 (ko) 2014-12-26 2014-12-26 동영상 파일 조각화 방법 및 그 장치

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140191046A KR101606121B1 (ko) 2014-12-26 2014-12-26 동영상 파일 조각화 방법 및 그 장치

Publications (1)

Publication Number Publication Date
KR101606121B1 true KR101606121B1 (ko) 2016-03-24

Family

ID=55651601

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140191046A KR101606121B1 (ko) 2014-12-26 2014-12-26 동영상 파일 조각화 방법 및 그 장치

Country Status (1)

Country Link
KR (1) KR101606121B1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20200088753A (ko) 2019-01-15 2020-07-23 유홍준 네트워크상 정보 분해 조립 기반의 다차원 미디어 콘텐츠 제어 시스템 및 방법

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100615340B1 (ko) * 1998-05-22 2006-08-25 소니 가부시끼 가이샤 편집 방법 및 편집 장치

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100615340B1 (ko) * 1998-05-22 2006-08-25 소니 가부시끼 가이샤 편집 방법 및 편집 장치

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20200088753A (ko) 2019-01-15 2020-07-23 유홍준 네트워크상 정보 분해 조립 기반의 다차원 미디어 콘텐츠 제어 시스템 및 방법

Similar Documents

Publication Publication Date Title
US9621899B2 (en) Methods and apparatuses for encoding and decoding mode information
US8989259B2 (en) Method and system for media file compression
JP2021524176A (ja) ビデオ符号化のための方法、機器及びコンピュータ・プログラム
US20120266203A1 (en) Ingest-once write-many broadcast video production system
US10841601B2 (en) Methods and arrangements for transcoding
CN110896486B (zh) 利用高层语法架构进行编解码的方法和设备
KR20140034149A (ko) 장면에 기초한 적응적 비트 레이트 제어
CN106489270B (zh) 信息处理装置和方法
US9601156B2 (en) Input/output system for editing and playing ultra-high definition image
CN113382259B (zh) 视频解码方法、装置和计算机设备
CN117459726A (zh) 生成编码视频流的方法、系统以及计算机存储介质
JP2019071666A (ja) 画像符号化装置および方法、並びに、プログラム
CN115398481A (zh) 对图像执行人工智能编码和人工智能解码的设备和方法
US11206386B2 (en) Information processing apparatus and information processing method
KR101446074B1 (ko) 영상 합성 방법, 장치 및 시스템
KR101606121B1 (ko) 동영상 파일 조각화 방법 및 그 장치
US20170163980A1 (en) Information processing device and method
KR101603976B1 (ko) 동영상 파일 결합 방법 및 그 장치
US20170230676A1 (en) System for efficient video transcoding based on encoder decisions extraction
CN114073084A (zh) 在视频码流中有效发信号通知图片大小和分区信息的方法和装置
JP7434561B2 (ja) Ｍｐｄ有効期限処理モデル
US20230362385A1 (en) Method and device for video data decoding and encoding
CN113748678B (zh) 视频编解码方法、装置和存储介质
KR20080044588A (ko) 화면 영역 기반 트랜스코딩 방법
WO2023059689A1 (en) Systems and methods for predictive coding

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20190318

Year of fee payment: 4