KR100621942B1 - 모바일 멀티미디어 정보 처리 방법 - Google Patents

모바일 멀티미디어 정보 처리 방법 Download PDF

Info

Publication number
KR100621942B1
KR100621942B1 KR1020040062264A KR20040062264A KR100621942B1 KR 100621942 B1 KR100621942 B1 KR 100621942B1 KR 1020040062264 A KR1020040062264 A KR 1020040062264A KR 20040062264 A KR20040062264 A KR 20040062264A KR 100621942 B1 KR100621942 B1 KR 100621942B1
Authority
KR
South Korea
Prior art keywords
data
macroblock
group
lines
macro block
Prior art date
Application number
KR1020040062264A
Other languages
English (en)
Other versions
KR20060013617A (ko
Inventor
김순욱
김정권
박철수
Original Assignee
엠큐브웍스(주)
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엠큐브웍스(주) filed Critical 엠큐브웍스(주)
Priority to KR1020040062264A priority Critical patent/KR100621942B1/ko
Publication of KR20060013617A publication Critical patent/KR20060013617A/ko
Application granted granted Critical
Publication of KR100621942B1 publication Critical patent/KR100621942B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/86—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H04N19/423—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation characterised by memory arrangements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding

Abstract

본 발명은 디코딩된 동영상 데이터의 디블럭킹 필터링과 RGB 변환을 위한 메모리 억세스 횟수를 감소시켜서 데이터의 처리 성능을 증대시킬 수 있도록 하는 모바일 멀티미디어 정보 처리 방법을 제공한다. 이를 위해 본 발명은 동영상 압축 코덱에 의해 압축된 동영상 데이터를 매크로 블럭(Macro Block) 단위로 디코딩 처리하는 단계와, 상기 디코딩된 매크로 블럭 데이터를 복수 열의 매크로 블럭 그룹(Group of Macro Block) 단위로 배열하는 단계, 상기 복수 열의 매크로 블럭이 배열된 매크로 블럭의 그룹 단위로 디블럭킹 필터링(Deblocking Filtering)을 수행하는 단계 및, 상기 필터링된 매크로 블럭의 그룹을 원래의 컬러 포맷으로 변환하는 단계로 이루어진 것을 특징으로 한다.
H.264, 매크로 블럭, 디코딩, 디블럭킹 필터링, RGB 변환

Description

모바일 멀티미디어 정보 처리 방법{MOBILE MULTIMEDIA DATA PROCESSING METHOD}
도 1은 종래의 모바일 장치에서 수행되는 멀티미디어 정보 처리방식을 나타낸 도면,
도 2는 종래의 모바일 멀티미디어 정보 처리 방식의 동작을 설명하는 플로우차트,
도 3은 본 발명의 방법이 적용되는 모바일 멀티미디어 정보 처리 장치의 구성을 나타낸 도면,
도 4는 본 발명의 바람직한 실시예에 따라 매크로 블럭 그룹(GoM) 메모리에 매크로 블럭 데이터가 매크로 블럭 그룹 단위로 저장되는 상태를 예시적으로 나타낸 도면,
도 5a 내지 도 5c는 본 발명의 바람직한 실시예에 따라 매크로 블럭 그룹 메모리의 매크로 블럭 데이터가 프레임 메모리에 순차적으로 저장되는 상태를 나타낸 도면,
도 6은 본 발명에 따른 모바일 멀티미디어 정보 처리 방법의 동작을 설명하는 플로우차트이다.
<도면의 주요부분에 대한 부호의 설명>
10:디코더, 20:디블럭킹 필터,
30:RGB 컨버터, 40:내부 메모리,
50:외부 메모리, 60:4×4 블럭 데이터,
62:여백 라인,
64:첫번재 매크로 블럭 그룹에서 저장되는 블럭 데이터 영역,
66:경계 부분이 아닌 매크로 블럭 그룹인 경우 저장되는 블럭 데이터 영역,
68:마지막 매크로 블럭 그룹에서 저장되는 블럭 데이터 영역.
본 발명은 모바일 멀티미디어 정보 처리 방법에 관한 것으로서, 보다 상세하게는 모바일 기기에 적용되는 동영상 압축 표준 코덱인 H.264(MPEG 4 Part 10 AVC)에서 동영상 디코딩 기능과 컬러 데이터 변환 기능을 서로 결합하여 수행할 수 있도록 하는 모바일 멀티미디어 정보 처리 방법에 관한 것이다.
주지된 바와 같이, 이동통신 단말기와 같은 모바일 기기의 경우에는 단순한 통신 수단의 한계를 벗어나서 모바일 멀티미디어 기기로서의 발전을 거듭하고 있는 바, 협소한 무선 주파수 대역폭과 데이터의 저장용량에 대한 한계를 뛰어 넘어서 정상적인 멀티미디어 기기로서의 역할을 수행하기 위한 방편으로 멀티미디어 데이터의 압축 기술이 적용된다.
이러한 모바일 기기에 적용되는 멀티미디어 데이터의 압축 기술로는 국제 전기통신 연합(ITU-T)에서 유무선 통신망 환경에서 동영상 서비스를 위한 표준 규격인 H.261 과 H.263을 제정하였고, 세계표준화 기구(ISO)에서도 동영상 표준 규격인 MPEG-1, MPEG-2, MPEG-4를 마련하게 되었는 바, 무선 통신의 급격한 확산과 종전 압축 방식에 비해서 더욱 향상된 고효율의 압축 방식을 구비하면서 다양한 통신 환경을 수용할 수 있는 동영상 압축 기술이 요구됨에 따라, 표준 동영상 압축 코덱으로서 H.264(MPEG 4 Part 10 AVC)가 제정되었다.
이러한 H.264는 국제 전기통신 연합(ITU-T)와 세계 표준화 기구(ISO)가 공동 제정한 차세대 동영상 압축 표준안으로서, 이는 다양한 네트워크 환경에 쉽게 부응할 수 있는 유연성과, 동영상 부호화의 효율면에서 MPEG 방식에 비해 많은 진보를 가져왔는데, 이러한 기술적 우위점은 향상된 움직임 예측 및 보상이 가능하고, 부정합(Mismatch)이 없는 작은 블럭 크기의 블럭 변환이 가능하며, 각 블럭 사이의 노이즈 제거를 위한 인 루프 디블럭킹 필터링(In-Loop Deblocking Filtering)을 수행하고, 향상된 엔트로피 부호화가 가능하다는 이점을 갖고 있다.
즉, 이러한 H.264 동영상 압축 표준안이 적용된 모바일 기기에서의 디코딩 처리 및 컬러 데이터 변환 처리 기능은 도 1에 도시된 바와 같이 나타난다.
도 1에 도시된 바와 같이, H.264를 적용한 모바일 기기에서는 H.264로 압축된 동영상 데이터의 디코딩 처리와 YUV 데이터의 RGB 변환이 각기 별도의 프로세서를 통해 독립적으로 수행되거나, 하나의 프로세서에서 수행되더라도 동영상의 하나의 프레임에 대해 디코딩이 완료된 이후에, RGB 변환을 수행해야 하는 순차적인 데이터 처리 구조를 갖는다.
도 1에서, 모바일 기기의 디코더에서는 동영상 데이터의 하나의 프레임에 대해서 16×16의 매크로 블럭 단위로 디코딩을 수행하게 되고, 이렇게 디코딩 처리된 매크로 블럭은 인접하는 다른 매크로 블럭과의 사이에서 발생되는 노이즈(Blocky Artifact)를 제거하기 위해서 디블럭킹 필터에 의한 필터링이 필요하지만, 이 디블럭킹 필터링이 인접하는 다른 블럭과의 관계에 의해서 영향을 미치게 되기 때문에, 이를 매크로 블럭 단위로 처리하기 보다는 한장의 프레임 이미지 단위로 처리하는 것이 용이하게 된다.
상기한 바와 같이 동영상 데이터를 하나의 프레임 단위로 각각의 매크로 블럭에 대한 디블럭킹 필터링이 이루어지면, YUV 데이터를 RGB 변환하는 경우에도 동일하게 하나의 프레임 단위로 각각의 매크로 블럭에 대하여 RGB 변환을 수행하게 된다.
한편, 상기 모바일 기기에서의 디코딩과 디블럭킹 필터링 및 RGB 변환 동작을 상세히 설명하면 도 2의 플로우차트에 나타난 바와 같다.
도 2에서, H.264 코덱으로 압축된 동영상 데이터는 16×16의 매크로 블럭 단위로 디코딩이 이루어지게 되고(단계 S10), 디코딩이 이루어진 각 매크로 블럭 단위의 동영상의 YUV 데이터는 프레임 메모리에 한 장의 프레임 단위로 저장된다(단계 S11).
그 상태에서, 상기 디코딩이 한 장의 프레임에서 마지막 매크로 블럭에 대해 수행되는 지의 여부를 판단하게 되는 바(단계 S12), 디코딩이 한 장의 프레임에서 마지막 매크로 블럭에 대해 수행되었다고 판단되면, 디블럭킹 필터링을 수행하는 수단에서는 프레임 메모리에 저장된 YUV 데이터를 패치하게 되고(단계 S13), 상기 동영상 YUV 데이터를 매크로 블럭 단위로 인접하는 다른 매크로 블럭과의 관계에 의해 디블럭킹 필터링을 수행하게 되는 바, 이러한 디블럭킹 필터링은 한장의 프레임 데이터에 대해 전체적으로 수행한다(단계 S14).
그 다음에, 상기 필터링된 YUV 데이터는 프레임 메모리에 저장되고(단계 S15), 상기 디블럭킹 필터링이 한 장의 프레임에서 마지막 매크로 블럭에 대해 수행되는 지의 여부를 판단한다(단계 S16).
상기 판단 결과, 상기 디블럭킹 필터링이 한 장의 프레임에서 마지막 매크로 블럭에 대해 수행되었다고 판단되면, 상기 YUV 데이터를 RGB 변환하는 수단에서는 프레임 메모리의 YUV 데이터를 패치하고서(단계 S17), 각 매크로 블럭 단위의 YUV 데이터를 RGB 데이터로 변환한 다음에(단계 S18), 그 RGB 출력 데이터를 프레임 메모리에 다시 저장하게 된다(단계 S19). 단, 이러한 RGB 변환도 한 장의 프레임 데이터에 대해 전체적으로 수행하게 된다.
그 다음에, 상기 RGB 변환 수단에서는 상기 한 장의 프레임에서 마지막 매크로 블럭에 대해서 RGB 변환이 수행되는 지의 여부를 판단하게 되고(단계 S20), 마지막 매크로 블럭에 대한 RGB 변환이 완료되면 다음 장의 프레임에 대해 디코딩과, 디블럭킹 필터링, RGB 변환이 각기 개별적이고 순차적으로 진행된다.
한편, 모바일 기기와 같은 임베디드(Embedded) 장치에서는 내부의 신호처리 프로세서들이 적은 용량의 내부 메모리를 갖추고 있거나, 전혀 메모리를 갖고 있지 않기 때문에 대용량의 동영상이나 이미지 데이터를 저장하기 위한 프레임 버퍼는 외부 메모리에 두도록 설계하는 것이 일반적이고, 이 때문에 디코더로부터의 출력 데이터와 RGB 변환의 출력 데이터가 외부 메모리에 저장될 수 있도록 되어 있다.
하지만, 통상적으로 외부 메모리는 내부의 메모리보다 데이터의 읽기/기록 속도가 느리기 때문에, 디코딩과 디블럭킹 필터링, RGB 변환을 각각 별도로 수행하는 경우에는 외부 메모리를 빈번하게 억세스하게 되며, 많은 메모리 억세스에 의해 전체적으로 동영상 데이터의 처리 속도가 느려지는 한편, 프로세서의 계산량이 증대되어 전력소모가 많아지게 되면서 전반적인 모바일 기기의 성능 저하가 예상된다 는 문제점이 있다.
따라서, 본 발명은 상기한 종래의 문제점을 해결하기 위해 이루어진 것으로서, 그 목적은 디코딩된 동영상 데이터의 디블럭킹 필터링과 RGB 변환을 위한 메모리 억세스 횟수를 감소시켜서 데이터의 처리 성능을 증대시킬 수 있도록 하는 모바일 멀티미디어 정보 처리 방법을 제공하는 것이다.
본 발명의 다른 목적은 일련의 매크로 블럭의 그룹(Group of Macro Block; GoM)) 단위로 디코딩된 데이터의 디블럭킹 필터링과 RGB 변환을 수행할 수 있도록 하는 모바일 멀티미디어 정보 처리 방법을 제공하는 것이다.
상기한 목적을 달성하기 위해 본 발명에 따르면, 동영상 압축 코덱에 의해 압축된 동영상 데이터를 매크로 블럭 단위로 디코딩 처리하는 제 1단계와, 상기 디코딩된 매크로 블럭 데이터를 복수 열의 매크로 블럭 그룹 단위로 배열하는 단계, 상기 복수 열의 매크로 블럭이 배열된 매크로 블럭의 그룹 단위로 디블럭킹 필터링을 수행하는 단계 및, 상기 필터링된 매크로 블럭의 그룹을 원래의 컬러 포맷으로 변환하는 단계로 이루어진 것을 특징으로 하는 모바일 멀티미디어 정보 처리 방법을 제공한다.
이하, 상기한 바와 같이 구성된 본 발명에 대해 첨부도면을 참조하여 상세히 설명한다.
즉, 도 3은 본 발명의 방법이 적용되는 모바일 멀티미디어 정보 처리 장치의 구성을 나타낸 도면이다.
도 3에 도시된 바와 같이, 본 발명의 모바일 멀티미디어 정보 처리 장치는, 디코더(10)와, 디블럭킹 필터(20), RGB 컨버터(30), 내부 메모리(40), 외부 메모리(50)로 구성된다.
상기 디코더(10)는 H.264 동영상 압축 코덱으로 압축된 동영상 데이터를 상기 내부 메모리(40)에 매크로 블럭의 그룹(GoM) 단위로 저장하고서, 각 매크로 블럭을 순차적으로 디코딩 처리하게 된다.
상기 디블럭킹 필터(20)는 상기 디코딩 처리된 내부 메모리(40)의 동영상 데이터를 매크로 블럭의 그룹(GoM) 단위로 각 매크로 블럭 간의 인접 블럭에 발생되는 노이즈(Blocky Artifact) 제거를 위해 디블럭킹 필터링을 수행한다.
상기 RGB 컨버터(30)는 상기 필터링된 YUV 포맷의 동영상 데이터를 상기 내부 메모리(40)의 매크로 블럭의 그룹(GoM) 단위로 각 매크로 블럭 마다 RGB 포맷의 데이터로 RGB 변환하게 된다.
상기 내부 메모리(40)는 상기 동영상 데이터를 매크로 블럭의 그룹(GoM) 단위로 저장하고서, 상기 디코더(10)에 의한 매크로 블럭 단위의 디코딩 처리와, 상기 디블럭킹 필터(20)에 의한 매크로 블럭의 그룹(GoM) 단위의 디블럭킹 필터링, 상기 RGB 컨버터(30)에 의한 매크로 블럭 단위의 RGB 변환 처리가 이루어지도록 한 다.
여기서, 상기 내부 메모리(40)는 도 4에 도시된 바와 같이, 동영상 데이터의 16×16의 매크로 블럭(60)이 임의 갯수의 열로 배열되어 매크로 블럭의 그룹(GoM)으로서 저장되고, 각 매크로 블럭간의 디블럭킹 필터링을 위한 4×4의 블럭을 감안하여 매크로 블럭의 상부와 좌부에 각각 4×4의 여백 블럭(62)이 매크로 블럭(60)의 열을 따라 배열되어 있는 바, 상기 매크로 블럭의 그룹(GoM)을 구성하는 복수의 매크로 블럭(60)의 임의의 갯수는 해당 모바일 기기의 내부 메모리 크기에 따라 적절히 조절할 수 있다. 예컨대, 화면 크기가 176×144인 경우에 한 줄의 매크로 블럭을 저장하기 위해서는 11개의 매크로 블럭의 열로 매크로 블럭의 그룹(GoM)을 구성할 수 있다.
도 3에서, 상기 외부 메모리(50)는 해당 모바일 기기의 외부로부터 장착이 가능하도록 이루어진 것으로서, 이는 한 장 이상의 데이터 프레임이 저장 가능하도록 대용량의 메모리 공간을 보유하고, 상기 내부 메모리(40)로부터의 매크로 블럭의 그룹(GoM)에 대한 디코딩과, 디블럭킹 필터링 및 RGB 변환이 이루어지면, 해당 매크로 블럭의 그룹(GoM)을 구성하는 매크로 블럭의 YUN 및 RGB 데이터가 저장된다.
여기서, 상기 외부 메모리(50)는 상기 내부 메모리(40)로부터 디코딩과 디블럭킹 필터링 및 RGB 변환이 이루어진 매크로 블럭 데이터가 매크로 블럭의 그룹(GoM) 단위로 순차적으로 저장되도록 되어 있는 바, 도 5a에 도시된 바와 같이 한장의 동영상 프레임 데이터 중에서 최초의 매크로 블럭의 그룹(GoM)을 저장하는 경우에는 4×4의 여백 블럭(62)을 포함하여 16×16의 블럭 데이터가 저장되지만, 실제적으로는 12×16 즉, 12라인의 매크로 블럭 데이터 영역(64)이 저장되고, 나머지 4라인의 블럭은 다음 매크로 블럭의 그룹과 함께 저장된다. 한편, 실제적으로 매크로 블럭 그룹의 아래 4라인은 다른 매크로 블럭 그룹 처리를 위해서 상부 여백 공간에 저장하는 방법으로 구현된다.
또한, 상기 외부 메모리(50)는 도 5a에서와 같이 최초 매크로 블럭의 그룹(GoM)이 12라인으로 저장된 이후에, 도 5b에 도시된 바와 같이 매크로 블럭의 그룹(GoM)이 16라인으로 순차적으로 저장되도록 하되, 이전 매크로 블럭의 나머지 4라인과 이후 매크로 블럭 그룹의 12라인(즉, 다음 매크로 블럭 그룹과 그룹 관계를 갖기 위한 아래 4라인 제외)이 하나의 매크로 블럭 그룹(GoM)을 갖는 블럭 데이터 영역(66)으로서 저장되도록 한다.
또, 상기 외부 메모리(50)는 도 5b와 같이 전반적인 매크로 블럭의 그룹(GoM)이 16라인씩 순차적으로 저장되고 나서, 동영상의 한장 프레임 데이터 중에서 마지막 매크로 블럭의 그룹을 저장하는 경우에, 도 5c에 도시된 바와 같이 이전 매크로 블럭 그룹의 나머지 4라인과 마지막 매크로 블럭 그룹의 온전한 16라인을 합한 전체 20라인의 매크로 블럭 그룹(GoM)이 블럭 데이터 영역(68)으로 저장된다.
즉, 상기 외부 메모리(50)는 상기 내부 메모리(40)로부터의 매크로 블럭의 그룹(GoM) 데이터가 4라인의 여백 블럭과 12라인의 부분적인 매크로 블럭을 포함하여 16라인의 매크로 블럭의 그룹(GoM)으로서 디코딩과 디블럭킹 필터링 및 RGB 변 환을 거쳐서 저장되고, 그 다음의 연속적인 매크로 블럭의 그룹들이 이전 매크로 블럭 그룹의 4라인과 이후 매크로 블럭 그룹의 12라인을 합한 16라인으로서 순차적으로 디코딩과 디블럭킹 필터링 및 RGB 변환을 거쳐서 저장된 다음에, 마지막으로 이전 매크로 블럭 그룹의 4라인과 마지막 매크로 블럭 그룹의 16라인을 합한 20라인이 디코딩과 디블럭킹 필터링 및 RGB 변환을 거쳐서 저장되도록 하는 것이다.
한편, 본 발명에서는 동영상 데이터가 저장되는 메모리 구조를 소용량의 내부 메모리(40)와 대용량의 외부 메모리(50)로 나누어서 설명하였지만, 상기 내부 메모리가 한장 이상의 프레임 데이터가 저장 가능한 대용량의 메모리 구조를 갖게 되는 경우에는 외부 메모리가 삭제되고, 상기 대용량의 내부 메모리에서 디코딩과 디블럭킹 필터링 및 RGB 변환을 순차적으로 수행한 매크로 블럭의 그룹(GoM) 데이터를 자체적으로 순차 저장하여 한장의 프레임 데이터가 형성되도록 하는 것도 가능하다.
이어, 상기한 바와 같이 이루어진 본 발명의 동작에 대해 도 6의 플로우차트를 참조하여 상세히 설명한다.
먼저, 디코더(10)에서는 H.264 코덱으로 압축된 동영상 데이터가 수신되면, 해당 동영상 데이터를 16×16의 매크로 블럭 단위로 디코딩 처리하고(단계 S30), 각각 디코딩 처리된 YUV 포맷의 매크로 블럭 데이터를 내부 메모리(40)에 매크로 블럭의 그룹(GoM) 단위로 저장하게 되는 바, 최초 저장되는 매크로 블럭에 대해서는 다음 매크로 블럭과의 관계에서 발생되는 노이즈를 고려하여 4×4의 여백 블럭 줄을 그 매크로 블럭의 상부와 좌부에 대해서 종/횡 방향으로 배열하여 함께 저장한다(단계 S31).
그 상태에서, 디블럭킹 필터(20)는 상기 내부 메모리(40)에 저장된 동영상 데이터를 매크로 블럭의 그룹(GoM) 단위로 디블럭킹 필터링을 수행하게 되고(단계 S32), 상기 필터링된 YUV 포맷의 매크로 블럭의 그룹(GoM)을 외부 메모리(50)에 저장하게 된다(단계 S33).
또한, RGB 컨버터(30)에서는 상기 내부 메모리(40)의 필터링된 YUV 포맷의 매크로 블럭 데이터를 매크로 블럭의 그룹(GoM) 단위로 RGB 변환하게 되고(단계 S34), RGB 변환된 매크로 블럭의 그룹(GoM)을 상기 외부 메모리(50)에 저장하게 된다(단계 S35).
상기한 바와 같이, 본 발명에서는 매크로 블럭의 그룹(GoM) 메모리를 내부 메모리(40)에 위치시킴으로서 외부 메모리(50)의 반복적이고 잦은 억세스 동작을 수행하지 않고서도 동영상 데이터의 디코딩과, 디블럭킹 필터링 및 RGB 변환 처리를 고속으로 수행할 수 있게 된다.
한편, 본 발명은 전술한 전형적인 바람직한 실시예에만 한정되는 것이 아니라 본 발명의 요지를 벗어나지 않는 범위 내에서 여러 가지로 개량, 변경, 대체 또는 부가하여 실시할 수 있는 것임은 당해 기술분야에 통상의 지식을 가진 자라면 용이하게 이해할 수 있을 것이다. 이러한 개량, 변경, 대체 또는 부가에 의한 실시가 이하의 첨부된 특허청구범위의 범주에 속하는 것이라면 그 기술사상 역시 본 발명에 속하는 것으로 보아야 한다.
이상과 같이 본 발명에 따르면, H.264 코덱으로 압축된 동영상 데이터의 디코딩과 디블럭킹 필터링 및 RGB 변환 처리가 내부 메모리에 임의의 갯수로 매크로 블럭이 배열되는 매크로 블럭의 그룹(GoM) 단위로 이루어질 수 있도록 하여, 외부 메모리의 과도한 횟수의 억세스에 의하지 않고서도 디코딩과 디블럭킹 필터링 및 RGB 변환 처리를 하는 것이 가능하게 되면서, 동영상 데이터의 처리 속도가 크게 향상될 수 있게 됨에 의한 모바일 기기의 성능 향상을 도모할 수 있다는 효과를 갖게 된다.

Claims (10)

  1. 동영상 압축 코덱에 의해 압축된 동영상 데이터를 매크로 블럭(Macro Block) 단위로 디코딩 처리하는 제 1단계와,
    상기 디코딩된 매크로 블럭 데이터를 복수 열의 매크로 블럭 그룹(Group of Macro Block) 단위로 배열하고, 상기 복수 열의 매크로 블럭 데이터를 매크로 블럭의 그룹 단위의 용량을 갖는 메모리에 배열하여 저장하는 제 2단계,
    상기 복수 열의 매크로 블럭이 배열된 매크로 블럭의 그룹 단위로 디블럭킹 필터링(Deblocking Filtering)을 수행하고, 상기 디블럭킹 필터링된 매크로 블럭의 그룹 데이터를 프레임 메모리에 순차 저장하는 제 3단계 및,
    상기 필터링된 매크로 블럭 그룹의 YUV 포맷 데이터를 RGB 포맷으로 변환하는 제 4단계로 이루어진 것을 특징으로 하는 모바일 멀티미디어 정보 처리 방법.
  2. 제 1 항에 있어서,
    제 1단계에서, 상기 동영상 데이터는 H.264(MPEG-4 Part 10 AVC)의 표준 동영상 압축 코덱에 의해 압축된 데이터인 것을 특징으로 하는 모바일 멀티미디어 정보 처리 방법.
  3. 삭제
  4. 제 1 항에 있어서,
    상기 제 2단계에서, 상기 복수열의 매크로 블록 데이터를 저장하기 위한 매크로 블럭의 메모리에는 최초의 매크로 블럭 좌부와 모든 매크로 블럭의 상부에 소정 크기의 여백 블럭을 두도록 이루어진 것을 특징으로 하는 모바일 멀티미디어 정보 처리 방법.
  5. 제 4 항에 있어서,
    상기 제 2단계에서, 상기 여백 블럭은 각 매크로 블럭 간의 노이즈(Blocky Artifact)를 고려한 4×4 크기의 블럭인 것을 특징으로 하는 모바일 멀티미디어 정보 처리 방법.
  6. 삭제
  7. 삭제
  8. 제 1 항에 있어서,
    상기 제 4단계는, 상기 RGB 변환된 매크로 블럭의 그룹 데이터를 프레임 메모리에 순차 저장하는 단계를 더 포함하여 이루어진 것을 특징으로 하는 모바일 멀티미디어 정보 처리 방법.
  9. 제 8 항에 있어서,
    상기 제 4단계에서, 한 장의 동영상 데이터에 포함된 매크로 블럭의 블럭 위치에 따라 프레임 메모리에 저장되는 줄 수가 변경되도록 이루어진 것을 특징으로 하는 모바일 멀티미디어 정보 처리 방법.
  10. 제 4 항 또는 제 9 항에 있어서,
    상기 한 장의 동영상 데이터 중에 최초의 매크로 블럭의 그룹 데이터를 여백 블럭을 제외한 12줄로 프레임 메모리에 저장되도록 하고,
    그 다음의 연속적인 매크로 블럭의 그룹들이 이전 매크로 블럭의 4라인과 이후 매크로 블럭의 12라인을 합한 16라인으로서 순차적으로 프레임 메모리에 저장되도록 하며,
    마지막으로 이전 매크로 블럭 4라인과 마지막 매크로 블럭 16라인을 합한 20라인이 프레임 메모리에 저장되도록 이루어진 것을 특징으로 하는 모바일 멀티미디어 정보 처리 방법.
KR1020040062264A 2004-08-07 2004-08-07 모바일 멀티미디어 정보 처리 방법 KR100621942B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020040062264A KR100621942B1 (ko) 2004-08-07 2004-08-07 모바일 멀티미디어 정보 처리 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020040062264A KR100621942B1 (ko) 2004-08-07 2004-08-07 모바일 멀티미디어 정보 처리 방법

Publications (2)

Publication Number Publication Date
KR20060013617A KR20060013617A (ko) 2006-02-13
KR100621942B1 true KR100621942B1 (ko) 2006-09-13

Family

ID=37122855

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020040062264A KR100621942B1 (ko) 2004-08-07 2004-08-07 모바일 멀티미디어 정보 처리 방법

Country Status (1)

Country Link
KR (1) KR100621942B1 (ko)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100771879B1 (ko) * 2006-08-17 2007-11-01 삼성전자주식회사 내부 메모리 용량을 감소시키는 디블록킹 필터링 방법 및그 방법을 이용하는 영상 처리 장치

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR19990064077A (ko) * 1996-08-02 1999-07-26 요트.게.아. 롤페즈 컴퓨터 그래픽 영상을 위한 포커스/디포커스 효과의 후처리 생성
KR20000050286A (ko) * 1999-01-02 2000-08-05 윤종용 이산 코사인 변환에 의해 부호화 된 영상에 생긴 블록현상의 제거 방법
KR20040084327A (ko) * 2003-03-27 2004-10-06 최윤식 적응적 탐색 영역을 이용한 움직임 예측 방법
KR20040106440A (ko) * 2002-05-01 2004-12-17 코닌클리케 필립스 일렉트로닉스 엔.브이. 데이터 파티셔닝 및 비동등 에러 보호를 사용하여 무선ｌａｎ을 위한 에러-탄력적인 비디오 전송 시스템

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR19990064077A (ko) * 1996-08-02 1999-07-26 요트.게.아. 롤페즈 컴퓨터 그래픽 영상을 위한 포커스/디포커스 효과의 후처리 생성
KR20000050286A (ko) * 1999-01-02 2000-08-05 윤종용 이산 코사인 변환에 의해 부호화 된 영상에 생긴 블록현상의 제거 방법
KR20040106440A (ko) * 2002-05-01 2004-12-17 코닌클리케 필립스 일렉트로닉스 엔.브이. 데이터 파티셔닝 및 비동등 에러 보호를 사용하여 무선ｌａｎ을 위한 에러-탄력적인 비디오 전송 시스템
KR20040084327A (ko) * 2003-03-27 2004-10-06 최윤식 적응적 탐색 영역을 이용한 움직임 예측 방법

Also Published As

Publication number Publication date
KR20060013617A (ko) 2006-02-13

Similar Documents

Publication Publication Date Title
KR100771879B1 (ko) 내부 메모리 용량을 감소시키는 디블록킹 필터링 방법 및그 방법을 이용하는 영상 처리 장치
CN107277539B (zh) 减少用于上下文自适应熵解码中的行缓存的方法及装置
KR101279266B1 (ko) 데이터 트래픽과 전력 소모를 저감시킨 플렉서블 매크로블록 오더링
KR100695141B1 (ko) 영상처리시스템에 있어서 메모리 억세스장치 및 방법, 데이터 기록장치 및 방법과 데이터 독출장치 및 방법
US20060115002A1 (en) Pipelined deblocking filter
US9872015B2 (en) Method and apparatus for improved in-loop filtering
US9860530B2 (en) Method and apparatus for loop filtering
US20060133504A1 (en) Deblocking filters for performing horizontal and vertical filtering of video data simultaneously and methods of operating the same
EP2061250B1 (en) Deblocking filter
US9344717B2 (en) Method and apparatus for sample adaptive offset in a video decoder
JP2008529412A (ja) 中間ループフィルタデータを格納するスクラッチパッド
US20150326886A1 (en) Method and apparatus for loop filtering
KR20070104568A (ko) 오버랩 평활화 및 인-루프 디블록킹의 구분적 프로세싱
CN114402604A (zh) 用于视频编解码的简化调色板预测器更新
JP2006157925A (ja) パイプラインデブロッキングフィルタ
EP2880861B1 (en) Method and apparatus for video processing incorporating deblocking and sample adaptive offset
US20090304078A1 (en) Variable length decoder and animation decoder therewith
JP4735471B2 (ja) 復号処理装置及び復号処理方法並びに復号処理プログラム
KR100359208B1 (ko) 고속 디블럭킹 필터 장치
JP2007258882A (ja) 画像復号装置
KR100621942B1 (ko) 모바일 멀티미디어 정보 처리 방법
JP4515870B2 (ja) 信号処理装置及び映像システム
TWI520618B (zh) 影像資料處理方法以及影像處理裝置
KR101328931B1 (ko) 비디오 복호기 및 복호방법
JP2008289105A (ja) 画像処理装置およびそれを搭載した撮像装置

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20120712

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20130703

Year of fee payment: 8

LAPS Lapse due to unpaid annual fee