KR20090020324A - 멀티미디어 재생장치 및 오디오/비디오 데이터의 처리방법 - Google Patents

멀티미디어 재생장치 및 오디오/비디오 데이터의 처리방법 Download PDF

Info

Publication number
KR20090020324A
KR20090020324A KR1020070085003A KR20070085003A KR20090020324A KR 20090020324 A KR20090020324 A KR 20090020324A KR 1020070085003 A KR1020070085003 A KR 1020070085003A KR 20070085003 A KR20070085003 A KR 20070085003A KR 20090020324 A KR20090020324 A KR 20090020324A
Authority
KR
South Korea
Prior art keywords
video data
video
data
reference clock
time stamp
Prior art date
Application number
KR1020070085003A
Other languages
English (en)
Inventor
김지훈
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020070085003A priority Critical patent/KR20090020324A/ko
Publication of KR20090020324A publication Critical patent/KR20090020324A/ko

Links

Images

Classifications

    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10Digital recording or reproducing
    • G11B20/10009Improvement or modification of read or write signals
    • G11B20/10222Improvement or modification of read or write signals clock-related aspects, e.g. phase or frequency adjustment or bit synchronisation
    • G11B20/10231Improvement or modification of read or write signals clock-related aspects, e.g. phase or frequency adjustment or bit synchronisation wherein an asynchronous, free-running clock is used; Interpolation of sampled signals
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10Digital recording or reproducing
    • G11B20/10527Audio or video recording; Data buffering arrangements
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10Digital recording or reproducing
    • G11B20/12Formatting, e.g. arrangement of data block or words on the record carriers
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10Digital recording or reproducing
    • G11B20/12Formatting, e.g. arrangement of data block or words on the record carriers
    • G11B2020/1264Formatting, e.g. arrangement of data block or words on the record carriers wherein the formatting concerns a specific kind of data
    • G11B2020/1265Control data, system data or management information, i.e. data used to access or process user data

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

비디오/오디오 데이터 동기 성능을 향상시킬 수 있는 멀티미디어 재생장치 및 오디오/비디오 데이터의 처리방법이 개시된다. 상기 멀티미디어 재생장치의 일실시예에 따르면, 수신된 멀티미디어 데이터를 처리하여 상기 수신된 멀티미디어 데이터로부터 비디오 데이터 및 오디오 데이터를 추출하고, 추출된 데이터를 장치 내부로 출력하는 소스 유닛과, 상기 소스 유닛으로부터 비디오 데이터를 제공받아 이를 디코딩하는 비디오 디코더와, 상기 소스 유닛으로부터 오디오 데이터를 제공받아 이를 디코딩하는 오디오 디코더 및 제1 기준클록을 제공받으며, 상기 비디오 데이터 및/또는 상기 오디오 데이터의 타임 스탬프 값을 상기 제1 기준클록과 비교하고, 상기 비교 결과에 따라 상기 소스 유닛의 상기 비디오 데이터 및/또는 상기 오디오 데이터 출력동작을 제어하는 소스 유닛 제어부를 구비하는 것을 특징으로 한다.

Description

멀티미디어 재생장치 및 오디오/비디오 데이터의 처리방법{Multimedia reproducing apparatus and audio/video data Processing Method}
본 발명은 멀티미디어 재생장치 및 오디오/비디오 데이터의 처리방법에 관한 것으로서, 더 상세하게는 정확한 오디오/비디오 데이터의 동기화를 제공할 수 있는 멀티미디어 재생장치 및 오디오/비디오 데이터의 처리방법에 관한 것이다.
일반적으로, VCD, DVD와 같은 일반적인 멀티미디어 매체들과 AVI와 같은 일반적인 멀티미디어 파일 포맷들은 오디오 데이터 및 비디오 데이터를 모두 포함한다. 멀티미디어를 재생하기 위한 장치는, 다양한 경로를 통해 오디오/비디오 데이터를 입력받아, 오디오 데이터 및 비디오 데이터 각각에 대해 디코딩을 수행하며, 복원된 비디오 데이터를 디스플레이 수단으로 제공하고 복원된 오디오 데이터를 오디오 출력수단으로 제공한다. 비디오 데이터 및 오디오 데이터를 포함하는 멀티미디어를 재생시키기 위하여, 비디오 데이터에 해당하는 영상과 오디오 데이터에 해당하는 소리를 동기시킨다.
도 1은 종래의 멀티미디어 재생장치를 나타내는 블록도이다. 도시된 바와 같이 종래의 멀티미디어 재생장치(10)는, 네트워크 등 외부의 여러 경로로부터 제공 될 수 있는 멀티미디어 정보로부터, 압축된 비디오 데이터 및 오디오 데이터를 분리하는 소스 유닛(11)와, 압축된 비디오 데이터를 디코딩하는 비디오 디코더(12) 및 압축된 오디오 데이터를 디코딩하는 오디오 디코더(13)를 구비한다. 또한 상기 장치(10)는, 디코딩된 비디오 데이터를 비디오 디스플레이 장치(미도시)로 출력하기 위한 비디오 렌더러(14)와, 디코딩된 오디오 데이터를 오디오 출력 장치(미도시)로 출력하기 위한 오디오 렌더러(15)를 구비한다. 또한 비디오 데이터와 오디오 데이터의 동기화를 위하여, 상기 비디오 렌더러(14) 및 오디오 렌더러(15)로부터의 데이터 출력 시간을 제어하는 렌더러 제어부(16)를 구비한다. 렌더러 제어부(16)로는 상기 데이터 출력의 기준이 되는 소정의 기준클록(CLK1)이 제공된다.
상기와 같이 구성되는 종래의 멀티미디어 재생장치(10)의 비디오/오디오 데이터의 동기화 동작은 다음과 같다.
렌더러 제어부(16)는, 비디오 렌더러(14)로부터의 비디오 데이터의 출력과 오디오 렌더러(15)로부터의 오디오 데이터의 출력을 제어하기 위한 제어신호들(CTL1, CTL2)을 발생한다. 상기 제어신호들(CTL1, CTL2)을 발생함에 있어서, 렌더러 제어부(16)는 데이터의 타임 스탬프(Time Stamp)의 값과 상기 기준클록(CLK1)을 서로 비교하는 동작을 수행한다. 타임 스탬프(Time Stamp)란 비디오 데이터 및 오디오 데이터의 재생 단위마다 주어지는 값으로서, 복원된 비디오 데이터 및 오디오 데이터가 재생될 시점을 나타내는 정보이다. 도시되지는 않았으나, 타임 스탬프(Time Stamp)는 상기 멀티미디어 정보로부터 추출되어 렌더러 제어부(16)로 제공된다.
렌더러 제어부(16)는 타임 스탬프(Time Stamp) 값과 기준클록(CLK1)을 비교한다. 상기 비교 결과, 타임 스탬프 값이 기준클록(CLK1)보다 큰 경우, 즉 해당 비디오 데이터 및 오디오 데이터가 재생될 시점이 현재 시점보다 늦은 경우에는, 렌더러 제어부(16)는 비디오 렌더러(14) 및 오디오 렌더러(15)를 제어함으로써, 상기 비디오 렌더러(14) 및 오디오 렌더러(15)가 타임 스탬프 값과 기준클록(CLK1)이 같아질 때 까지 기다린 후 데이터를 출력하도록 한다.
한편, 상기 비교 결과, 타임 스탬프 값과 기준클록(CLK1)이 같은 경우에는, 렌더러 제어부(16)의 제어하에서 비디오 렌더러(14) 및 오디오 렌더러(15)는 각각 비디오 데이터 및 오디오 데이터를 출력한다. 또한 상기 비교 결과, 타임 스탬프 값이 기준클록(CLK1)보다 작은 경우에는, 비디오 렌더러(14)는 비디오 데이터를 비디오 출력장치로 제공하지 않음으로써, 해당 데이터의 출력을 스킵(skip)한다. 또한 타임 스탬프 값이 기준클록(CLK1)보다 작은 경우에는 데이터의 출력을 스킵(skip)하지 않고 데이터를 바로 출력할 수도 있는데, 이에 대해서는 재생 장치마다 각각 다르게 구현될 수 있다. 한편 상기와 같은 경우에 있어서, 오디오 렌더러(15)의 동작 또한 비디오 렌더러(14)와 유사하게 동작할 수 있다.
즉, 비디오 데이터와 오디오 데이터의 동기화를 위해서는, 비디오 렌더러(14) 및 오디오 렌더러(15)는 타임 스탬프 값과 기준클록이 정확하게 일치할 때 비디오 데이터 및 오디오 데이터를 각각 출력해야 한다. 타임 스탬프 값이 기준클록(CLK1)보다 큰 경우에는 큰 문제가 되지 않으나, 타임 스탬프 값이 기준클록(CLK1)보다 작은 경우에는 이미 비디오 데이터 및 오디오 데이터를 출력을 해야 할 시간이 지나버렸기 때문에, 오디오/비디오 동기화가 제대로 이루어질 수 없다. 따라서 일반적인 재생장치는, 상기와 같은 경우에 데이터를 곧바로 출력하거나 또는 해당 데이터를 버림으로써 다음 데이터부터 동기화를 맞추도록 동작하게 되어 있다.
그러나, 상기와 같이 구성되는 일반적인 재생장치에 있어서, 해당 데이터의 타임 스탬프 값이 기준클록보다 작은 경우에 데이터의 출력을 스킵하게 되면, 출력되는 화면이나 소리의 질이 떨어질 수 밖에 없다. 또한 해당 데이터를 출력해야 할 시간이 지나버린 경우 상기 데이터의 출력을 스킵하더라도, 이미 늦어진 시간이 누적됨으로 인하여 이후에 입력되는 데이터들 또한 타임 스탬프 값이 기준클록보다 작은 경우가 발생하게 된다. 상기와 같은 문제는 특히 중앙 처리장치(CPU)의 성능에 한계가 있는 휴대용 재생장치에서 자주 발생하게 되며, 특히 처리해야 할 비디오/오디오 데이터의 양이 점차 증가함에 따라 상기와 같은 문제가 자주 발생하게 된다.
본 발명은 상기와 같은 문제점을 해결하기 위한 것으로서, 비디오/오디오 동기화 성능이 저하되거나, 출력되는 화면 및 소리의 질이 저하되는 것을 방지할 수 있는 멀티미디어 재생장치 및 오디오/비디오 데이터의 처리방법을 제공하는 것을 목적으로 한다.
상기와 같은 목적을 달성하기 위하여, 본 발명의 일실시예에 따른 멀티미디어 재생장치에 따르면, 수신된 멀티미디어 데이터를 처리하여 상기 수신된 멀티미디어 데이터로부터 비디오 데이터 및 오디오 데이터를 추출하고, 추출된 데이터를 장치 내부로 출력하는 소스 유닛과, 상기 소스 유닛으로부터 비디오 데이터를 제공받아 이를 디코딩하는 비디오 디코더와, 상기 소스 유닛으로부터 오디오 데이터를 제공받아 이를 디코딩하는 오디오 디코더 및 제1 기준클록을 제공받으며, 상기 비디오 데이터 및/또는 상기 오디오 데이터의 타임 스탬프 값을 상기 제1 기준클록과 비교하고, 상기 비교 결과에 따라 상기 소스 유닛의 상기 비디오 데이터 및/또는 상기 오디오 데이터 출력동작을 제어하는 소스 유닛 제어부를 구비하는 것을 특징으로 한다.
바람직하게는, 상기 소스 유닛 제어부는, 상기 비디오 데이터의 타임 스탬프 값과 상기 제1 기준클록을 비교하고, 상기 비교 결과에 따라 상기 소스 유닛의 비디오 데이터 출력동작을 제어하는 것을 특징으로 한다.
또한 바람직하게는, 상기 소스 유닛 제어부는, 상기 비교 결과, 상기 타임 스탬프 값이 상기 제1 기준클록보다 크거나 같은 경우에, 상기 타임 스탬프에 대응하는 비디오 데이터가 상기 비디오 디코더로 제공되도록 제어하는 것을 특징으로 한다.
또한 바람직하게는, 상기 소스 유닛 제어부는, 상기 비교 결과, 상기 타임 스탬프 값이 상기 제1 기준클록보다 작은 경우에 있어서, 상기 타임 스탬프에 대응하는 비디오 데이터가 제1 형식의 비디오 프레임인 경우에, 상기 비디오 데이터가 상기 비디오 디코더로 제공되도록 제어하며, 상기 타임 스탬프에 대응하는 비디오 데이터가 제2 형식의 비디오 프레임인 경우에, 상기 비디오 디코더로의 비디오 데이터 제공을 차단하도록 제어하는 것을 특징으로 한다.
상기 제1 형식의 비디오 프레임은 인트라 프레임(Intra Frame)이며, 상기 제2 형식의 비디오 프레임은 인터 프레임(Inter Frame)일 수 있다.
한편, 상기 멀티미디어 재생장치는, 상기 비디오 디코더로부터 디코딩된 비디오 데이터를 입력받으며, 상기 입력된 비디오 데이터를 비디오 출력장치로 제공하는 비디오 랜더러와, 상기 오디오 디코더로부터 디코딩된 오디오 데이터를 입력받으며, 상기 입력된 오디오 데이터를 오디오 출력장치로 제공하는 오디오 랜더러 및 제2 기준클록을 입력받으며, 상기 타임 스탬프 값과 상기 제2 기준클록의 비교 결과에 기반하여 상기 비디오 랜더러 및 상기 오디로 랜더러의 데이터 출력을 제어하는 랜더러 제어부를 더 구비할 수 있다.
바람직하게는, 상기 랜더러 제어부는, 상기 비디오 데이터의 타임 스탬프 값이 상기 제2 기준클록보다 큰 경우, 상기 타임 스탬프 값이 상기 제2 기준클록과 같아질 때 상기 비디오 데이터가 비디오 출력장치로 제공되도록 제어하며, 상기 비디오 데이터의 타임 스탬프 값이 상기 제2 기준클록보다 작거나 같은 경우, 상기 비디오 데이터가 비디오 출력장치로 즉시 제공되도록 제어하는 것을 특징으로 한다.
또한 바람직하게는, 상기 랜더러 제어부는, 상기 오디오 데이터의 타임 스탬프 값이 상기 제2 기준클록보다 큰 경우, 상기 타임 스탬프 값이 상기 제2 기준클 록과 같아질 때 상기 오디오 데이터가 오디오 출력장치로 제공되도록 제어하며, 상기 오디오 데이터의 타임 스탬프 값이 상기 제2 기준클록보다 작거나 같은 경우, 상기 오디오 데이터가 오디오 출력장치로 즉시 제공되도록 제어하는 것을 특징으로 한다.
또한 바람직하게는, 상기 제1 기준클록과 제2 기준클록의 위상 차이값은, 상기 비디오 디코더의 디코딩 시간에 기반하는 값을 갖는 것을 특징으로 한다.
또한 바람직하게는, 상기 제1 기준클록과 제2 기준클록의 위상 차이값은, 상기 소스 유닛으로부터 상기 비디오 랜더러로 비디오 데이터가 제공되는 시간에 해당하는 값을 갖는 것을 특징으로 한다.
한편, 상기 소스 유닛 제어부는, 상기 제1 기준클록과 상기 타임 스탬프 값을 비교하기 위한 타임 스탬프/기준 클록 비교부와, 상기 소스 유닛으로 제공된 비디오 데이터의 프레임 형식을 판단하기 위한 프레임 형식 판단부 및 상기 비교 결과 및 상기 판단 결과에 따라 상기 소스 유닛의 비디오 데이터의 출력동작을 제어하기 위한 제어신호를 발생하는 제어신호 발생부를 구비할 수 있다.
한편, 상기 소스 유닛 제어부는, 비디오 데이터의 타임 스탬프 값과 상기 제1 기준클록을 비교하고, 상기 비교 결과에 기반하여 상기 비디오 데이터의 출력을 지연시키는 것을 특징으로 한다.
바람직하게는, 상기 소스 유닛 제어부는, 제1 비디오 데이터의 디코딩 완료 직후, 상기 제1 비디오 데이터에 연속하는 제2 비디오 데이터의 타임 스탬프 값과 상기 제1 기준클록을 비교하고, 그 차이에 해당하는 시간만큼 상기 제2 비디오 데 이터의 출력을 지연시키는 것을 특징으로 한다.
한편, 본 발명의 일실시예에 의한 비디오/오디오 데이터 처리방법에 따르면, 비디오 데이터 및 오디오 데이터를 수신하는 단계와, 상기 수신된 비디오 데이터 및/또는 오디오 데이터의 타임 스탬프 값을 제1 기준클록과 비교하는 단계와, 상기 비교 결과에 따라 상기 비디오 데이터 및/또는 오디오 데이터를 선택적으로 출력하는 단계 및 상기 선택적으로 출력된 비디오 데이터 및/또는 오디오 데이터를 각각 디코딩하는 단계를 구비하는 것을 특징으로 한다.
상기한 바와 같은 본 발명에 따르면, 비디오 데이터 및 오디오 데이터의 동기 성능을 향상시킬 수 있으며, 디스플레이 장치에 출력되는 화면의 질적저하를 방지할 수 있는 효과가 있다.
본 발명과 본 발명의 동작상의 이점 및 본 발명의 실시에 의하여 달성되는 목적을 충분히 이해하기 위해서는 본 발명의 바람직한 실시 예를 예시하는 첨부 도면 및 도면에 기재된 내용을 참조하여야 한다.
이하, 첨부한 도면을 참조하여 본 발명의 바람직한 실시 예를 설명함으로써, 본 발명을 상세히 설명한다. 각 도면에 제시된 동일한 참조부호는 동일한 부재를 나타낸다.
도 2는 본 발명의 일실시예에 따른 멀티미디어 재생장치를 나타내는 블록도이다. 도시된 바와 같이 상기 멀티미디어 재생장치(100)는, 네트워크 등 외부의 여 러 경로로부터 제공될 수 있는 멀티미디어 정보로부터, 압축된 비디오 데이터 및 오디오 데이터를 분리하는 소스 유닛(110)과, 압축된 비디오 데이터를 디코딩하는 비디오 디코더(120) 및 압축된 오디오 데이터를 디코딩하는 오디오 디코더(130)를 구비할 수 있다. 또한 상기 멀티미디어 재생장치(100)는, 디코딩된 비디오 데이터를 입력받아 이를 비디오 디스플레이 장치(미도시)로 출력하는 비디오 랜더러(140)와, 디코딩된 오디오 데이터를 입력받아 이를 오디오 출력 장치(미도시)로 출력하는 오디오 랜더러(150)를 구비할 수 있다.
또한 본 발명의 일실시예에 따르면, 상기 멀티미디어 재생장치(100)는, 비디오 랜더러(140)의 비디오 데이터 출력동작과 오디오 랜더러(150)의 오디오 데이터 출력동작을 제어하는 랜더러 제어부(160)를 더 구비할 수 있으며, 또한 소스 유닛(110)으로부터 비디오 및 오디오 디코더(120,130)로의 데이터 전달을 제어하는 소스 유닛 제어부(170)를 더 구비할 수 있다. 또한, 소스 유닛(110)으로부터의 데이터 전달의 기준이 되는 제1 기준클록(CLK11)이 소스 유닛 제어부(170)로 제공될 수 있으며, 비디오 및 오디오 랜더러(140, 150)로부터의 데이터 출력의 기준이 되는 제2 기준클록(CLK12)이 랜더러 제어부(160)로 제공될 수 있다.
상기와 같이 구성될 수 있는 본 발명의 일실시예에 따른 멀티미디어 재생장치(100)의 상세한 동작은 다음과 같다.
소스 유닛(110)은 수신된 멀티미디어 데이터를 처리하여 압축된 비디오 데이터 및 오디오 데이터를 추출하고, 이를 장치(100) 내부로 출력한다. 상기 출력된 비디오 데이터 및 오디오 데이터는 비디오 디코더(120) 및 오디오 디코더(130)로 각각 제공된다. 비디오 디코더(120)는 압축된 비디오 데이터를 디코딩하여 원본 데이터로 복원하며, 오디오 디코더(130)는 압축된 오디오 데이터를 디코딩하여 원본 데이터로 복원한다.
한편, 소스 유닛(110)이 압축된 비디오 데이터 및 오디오 데이터를 장치(100) 내부로 출력하는 동작은 소스 유닛 제어부(170)에 의해 제어된다. 소스 유닛 제어부(170)는 소정의 제1 기준클록(CLK11)을 입력받으며, 이에 응답하여 소스 유닛(110)을 제어하기 위한 제어신호(CTL11)를 발생한다. 상기 제어신호(CTL11)에 응답하여 소스 유닛(110)은 비디오 데이터 및/또는 오디오 데이터를 장치(100) 내부로 출력하거나 또는 출력하지 않는다. 바람직하게는, 상기 제어신호(CTL11)는 소스 유닛(110)의 비디오 데이터의 출력동작만을 제어할 수 있다.
소스 유닛 제어부(170)는, 소스 유닛(110)이 출력하고자 하는 소정의 단위(일예로서 프레임 단위)의 비디오 데이터의 타임 스탬프(Time Stamp) 값과 상기 제1 기준클록(CLK11)을 서로 비교하는 동작을 수행한다. 타임 스탬프(Time Stamp)란 비디오 데이터 및 오디오 데이터의 재생 단위마다 주어지는 값으로서, 복원된 비디오 데이터 및 오디오 데이터가 재생될 시점을 나타내는 정보이다. 도시되지는 않았으나, 타임 스탬프(Time Stamp)는 상기 수신된 멀티미디어 데이터로부터 추출되어 소스 유닛 제어부(170)로 제공될 수 있다.
소스 유닛 제어부(170)는 상기 비교 결과에 따라 해당 비디오 데이터가 소스 유닛(110)으로부터 출력되거나 또는 출력되지 않도록 제어한다. 바람직하게는, 타임 스탬프(Time Stamp) 값이 제1 기준클록(CLK11)보다 크거나 같은 경우에는, 해당 비디오 데이터가 소스 유닛(110)으로부터 출력되도록 제어한다. 타임 스탬프(Time Stamp) 값이 제1 기준클록(CLK11)보다 크거나 같은 경우, 즉 디코딩된 비디오 데이터가 실제 비디오 데이터가 재생될 시점 이전에 비디오 랜더러(140)로 제공될 수 있는 것으로 판단되는 경우에는, 상기 비디오 데이터는 소스 유닛(110)으로부터 정상적으로 출력된다.
반대로, 상기 타임 스탬프(Time Stamp) 값이 제1 기준클록(CLK11)보다 작은 경우에는, 해당 비디오 데이터를 소스 유닛(110)으로부터 출력하는 동작을 스킵(skip)한다. 바람직하게는, 상기 비디오 데이터의 출력을 스킵함에 있어서, 해당 비디오 데이터의 프레임 형식을 판단하고, 상기 형식의 판단 결과에 따라 비디오 데이터의 출력을 스킵하거나 스킵하지 않는다. 일예로서, 비디오 데이터가 인트라 프레임(Intra Frame)인 경우에는 타임 스탬프(Time Stamp) 값이 제1 기준클록(CLK11)보다 작더라도 소스 유닛(110)은 비디오 데이터를 정상적으로 출력하며, 상기 비디오 데이터가 인터 프레임(Inter Frame)인 경우에는 타임 스탬프(Time Stamp) 값이 제1 기준클록(CLK11)보다 작은 경우에 소스 유닛(110)은 비디오 데이터를 출력하지 않고 스킵한다.
인트라 프레임(Intra Frame)은 일정한 프레임 수 간격으로 입력되며 독립적으로 디코딩될 수 있다. 또한 그 뒤에 이어서 입력되는 인터 프레임(Inter Frame)에 영향을 미친다. 따라서 인트라 프레임(Intra Frame)은 인터 프레임(Inter Frame)보다 더 중요한 정보를 가지게 되므로, 소스 유닛(110)으로부터 인트라 프레임(Intra Frame)의 비디오 데이터의 출력이 스킵된다면, 그 뒤에 이어서 입력되는 인터 프레임(Inter Frame)은 정상적으로 디코딩될 수 없다. 반면에 인터 프레임(Inter Frame)은 인트라 프레임(Intra Frame)에 비해 다소 덜 중요한 정보만을 포함한다. 따라서, 화질히 크게 열화되는 것을 방지하기 위하여, 타임 스탬프(Time Stamp) 값이 제1 기준클록(CLK11)보다 작더라도, 인트라 프레임(Intra Frame)에 대응하는 비디오 데이터는 비디오 디코더(120)로 제공되도록 한다. 반면에 타임 스탬프(Time Stamp) 값이 제1 기준클록(CLK11)보다 작은 경우, 인터 프레임(Inter Frame)에 대응하는 비디오 데이터는 비디오 디코더(120)로 제공되지 않는다.
상기와 같은 과정에 의하여, 소스 유닛(110)으로부터 비디오 데이터가 비디오 디코더(120)로 제공된다. 한편 소스 유닛(110)으로부터 추출된 오디오 데이터는 오디오 디코더(130)로 제공된다. 비디오 디코더(120)는 압축된 비디오 데이터를 입력받아 이를 디코딩하고, 디코딩된 비디오 데이터를 비디오 랜더러(140)로 출력한다. 또한 오디오 디코더(130)는 압축된 오디오 데이터를 입력받아 이를 디코딩하고, 디코딩된 오디오 데이터를 오디오 랜더러(150)로 출력한다. 렌더러 제어부(160)는, 비디오 랜더러(140)로부터의 비디오 데이터의 출력과 오디오 랜더러(150)로부터의 오디오 데이터의 출력을 제어하기 위한 제어신호들(CTL12, CTL13)을 발생한다. 비디오 랜더러(140)는 제어신호 CTL12에 응답하여 비디오 데이터를 비디오 출력장치로 제공하며, 오디오 랜더러(150)는 제어신호 CTL13에 응답하여 오디오 데이터를 오디오 출력장치로 제공한다.
랜더러 제어부(160)는 소정의 제2 기준클록(CLK12)을 입력받으며, 데이터의 타임 스탬프(Time Stamp)의 값과 상기 제2 기준클록(CLK12)을 서로 비교하는 동작 을 수행한다. 즉, 랜더러 제어부(160)는 비디오 데이터의 타임 스탬프(Time Stamp)의 값과 상기 제2 기준클록(CLK12)을 비교하여 제어신호 CTL12를 발생한다. 또한 랜더러 제어부(160)는 오디오 데이터의 타임 스탬프(Time Stamp)의 값과 상기 제2 기준클록(CLK12)을 비교하여 제어신호 CTL13을 발생한다. 도시되지는 않았으나, 타임 스탬프(Time Stamp)는 상기 수신된 멀티미디어 데이터로부터 추출되어 랜더러 제어부(160)로 제공될 수 있다.
먼저, 비디오 데이터의 타임 스탬프 값과 제2 기준클록(CLK12)을 비교한 결과, 타임 스탬프 값이 제2 기준클록(CLK12)보다 큰 경우, 즉 해당 비디오 데이터가 재생될 시점이 현재 시점보다 늦은 경우에는, 렌더러 제어부(160)는 제어신호 CTL12을 비활성화하여 비디오 렌더러(140)가 비디오 데이터의 출력을 대기하도록 한다. 이후 렌더러 제어부(160)는 타임 스탬프 값이 제2 기준클록(CLK12)과 같아지게 될 때 제어신호 CTL12을 활성화하여 비디오 렌더러(140)로 제공하며, 비디오 렌더러(140)는 상기 활성화된 제어신호 CTL12에 응답하여 비디오 데이터를 비디오 출력장치로 제공한다.
한편, 상기 비교 결과 타임 스탬프 값이 제2 기준클록(CLK12)보다 작거나 또는 같은 경우, 렌더러 제어부(160)는 곧바로 제어신호 CTL12을 활성화시켜 비디오 렌더러(140)로 제공한다. 비디오 렌더러(140)는 이에 응답하여 비디오 데이터를 바로 비디오 출력장치로 제공한다.
이는, 이미 상기 소스 유닛 제어부(170)에서 타임 스탬프 값과 제1 기준클록(CLK11)을 서로 비교하였고, 실제 데이터가 재생되어야 할 시점이 지나서 비디오 랜더러(140)로 제공될 것으로 예측되는 비디오 데이터는 비디오 디코더(120)로의 출력을 스킵하였다. 이에 따라서 비디오 렌더러(140)로 제공되는 디코딩된 비디오 데이터는 대부분 실제 재생되어야 할 시점보다 이전에 비디오 렌더러(140)로 제공된다. 따라서, 타임 스탬프 값이 제2 기준클록(CLK12)보다 작을 경우는 극히 드물기 때문에 비디오 및 오디오 출력의 동기 성능을 향상시킬 수 있다.
또한 비디오 데이터가 실제 재생되어야 할 시점이 지나서 비디오 랜더러(140)로 제공되었다고 하더라도, 그 시간의 차이는 아주 작게 된다. 따라서 타임 스탬프 값이 제2 기준클록(CLK12)보다 작더라도, 해당 비디오 데이터의 출력을 스킵하는 것이 아니라 비디오 데이터를 곧바로 비디오 출력장치로 출력한다.
상기한 바와 같이, 본 발명의 일실시예에 따르면, 멀티미디어 재생장치(100)의 소스 유닛 제어부(170)에서 타임 스탬프 값과 소정이 기준클록에 대한 비교 동작을 미리 수행하고, 비교 결과에 따라 소스 유닛(110)으로부터 비디오 데이터를 선택적으로 출력한다. 이에 따라 실제 재생되어야 할 시점이 지나서 비디오 랜더러(140)로 제공될 것으로 예측되는 비디오 데이터를 미리 버림으로써 불필요한 디코딩 시간을 줄일 수 있다. 이에 따라 이후의 비디오 데이터에 대해서도 시간 오차가 누적되는 것을 방지할 수 있으며, 또한 복수의 데이터가 연달아서 비디오 출력장치로 제공되지 않는 문제를 방지할 수 있다.
또한 소스 유닛(110)이 비디오 데이터를 버리는 동작에 관련하여, 해당 비디오 데이터가 중요한 정보를 갖고 있는 인트라 프레임(Intra Frame)인 경우에는, 실제 재생되어야 할 시점이 지나서 비디오 랜더러(140)로 제공될 것으로 예측되더라 도 해당 비디오 데이터를 버리지 않는다. 이에 따라 디스플레이 장치에 실제 출력되는 화면의 질적 저하가 발생하는 것을 막을 수 있다.
한편, 렌더러 제어부(160)는 오디오 데이터의 타임 스탬프 값과 제2 기준클록(CLK12)을 비교하고, 상기 비교 결과에 따라 제어신호 CTL13을 발생하여 오디오 렌더러(150)의 데이터 출력동작을 제어한다. 즉, 오디오 데이터의 타임 스탬프 값이 제2 기준클록(CLK12)보다 큰 지 또는 작은 지를 비교하고, 이에 따라 오디오 렌더러(150)의 데이터 출력동작을 제어한다.
일예로서, 오디오 데이터의 타임 스탬프 값이 제2 기준클록(CLK12)보다 큰 경우에는, 오디오 데이터의 타임 스탬프 값과 제2 기준클록(CLK12)이 같아질 때까지 기다린 후에 오디오 데이터를 출력한다. 반면에 오디오 데이터의 타임 스탬프 값이 제2 기준클록(CLK12)보다 작은 경우에는, 렌더러 제어부(160)의 제어하에서 오디오 렌더러(150)는 곧바로 오디오 데이터를 오디오 출력장치로 출력할 수 있다. 또한 오디오 데이터는 소정의 재생속도로서 오디오 출력장치로 출력되는데, 오디오 데이터의 타임 스탬프 값이 제2 기준클록(CLK12)보다 작은 경우에는, 상기 오디오 데이터가 원래의 재생속도보다 더 빠른 재생속도로 오디오 출력장치로 출력되도록 한다. 즉, 타임 스탬프 값이 제2 기준클록(CLK12)보다 작은 만큼의 비율로 원래의 재생속도보다 빠르게 재생되도록 한다.
한편, 오디오 데이터의 타임 스탬프 값이 제2 기준클록(CLK12)보다 작은 경우에, 해당하는 오디오 데이터를 오디오 출력장치로 출력하지 않고 데이터를 버려도 무방하다.
도 2에 도시된 구성은 본 발명의 일실시예에 따른 멀티미디어 재생장치(100)의 구성을 나타내나, 반드시 이에 국한되지 않고 다양한 형태의 변형이 가능하다. 일예로서 랜더러 제어부가 타임 스탬프와 기준클록의 비교 결과에 기반하여 비디오 랜더러(140) 및 오디오 랜더러(150)의 출력을 제어하는 것이 도시되었으나, 상기 비교 결과에 기반하여 비디오 디코더(120) 및 오디오 디코더(130)의 출력을 제어하는 것으로 구성되어도 무방하다.
도 3은 도 2의 소스 유닛 제어부(170)의 구성의 일예를 나타내는 블록도이다. 도시된 바와 같이 소스 유닛 제어부(170)는 타임 스탬프/기준클록 비교부(171), 프레임 형식 판단부(172) 및 제어신호 발생부(173)를 구비할 수 있다.
타임 스탬프/기준클록 비교부(171)는 비디오 데이터 및/또는 오디오 데이터의 타임 스탬프 정보(TS)를 입력받으며, 또한 제1 기준클록 CLK11을 입력받는다. 입력된 타임 스탬프 값과 제1 기준클록 CLK11은 서로 비교되며, 비교 결과에 따른 신호를 제어신호 발생부(173)로 제공한다.
한편 프레임 형식 판단부(172)는 비디오 데이터의 프레임 형식에 관한 정보(INF), 특히 해당 비디오 데이터가 인트라 프레임(Intra Frame)인지 또는 인터 프레임(Inter Frame)인지에 관한 정보를 입력받는다. 또한 상기 입력된 정보에 대응하는 신호를 제어신호 발생부(173)로 제공한다.
제어신호 발생부(173)는 타임 스탬프/기준클록 비교부(171) 및 프레임 형식 판단부(172)로부터 제공된 신호에 응답하여 소스 유닛(110)을 제어하기 위한 제어신호(CTL11)를 발생한다. 결과적으로, 타임 스탬프 값이 제1 기준클록 CLK11보다 크거나 같은 경우에는, 제어신호 발생부(173)는 제어신호(CTL11)를 소스 유닛(110)으로 출력하여 해당 비디오 데이터가 장치(100) 내부로 출력되도록 제어한다. 또한 타임 스탬프 값이 제1 기준클록 CLK11보다 작더라도, 프레임 형식 판단 결과 인트라 프레임(Intra Frame)인 것으로 판단되면, 해당 비디오 데이터가 장치(100) 내부로 출력되도록 제어한다. 반면에 타임 스탬프 값이 제1 기준클록 CLK11보다 작으며, 프레임 형식 판단 결과 인터 프레임(Inter Frame)인 것으로 판단되면, 해당 비디오 데이터가 장치(100) 내부로 출력되는 것을 차단한다.
데이터의 타임 스탬프 값과 제1 및 제2 기준클록의 비교동작을 도 4a,b를 참조하여 설명한다.
상술하였던 제1 기준클록 CLK11과 제2 기준클록 CLK12은 도 4a,b에 도시된 바와 같은 파형을 가질 수 있다. 또한 도시된 바와 같이 제1 기준클록 CLK11은 제2 기준클록 CLK12에 비해 일정 정도 위상이 앞선 신호일 수 있다. 상기 위상 차이는, 비디오 디코더(140)의 디코딩 시간에 기반하여 그 값이 설정될 수 있으며, 바람직하게는 소스 유닛(110)으로부터 출력된 비디오 데이터가 비디오 랜더러(140)로 제공되기 까지의 시간 차이에 해당하도록 설정될 수 있다. 도 4a,b에서는 상기 위상 차이가 2 CLK 에 해당하는 것을 일예로서 나타낸다.
먼저, 도 4a에 도시된 바와 같이, 비디오 데이터의 타임 스탬프 값(TS)이 시점 5에 해당하고, 비교되는 기준 시점이 CLK11의 시점 4에 해당한다고 가정하자. 이 경우에는 타임 스탬프 값(TS)이 제1 기준클록 CLK11보다 큰 것으로 비교된다. 이에 따라서 해당 비디오 데이터는 디코딩 과정을 거쳐 비디오 랜더러(140)로 제공 된다.
비디오 데이터가 비디오 랜더러(140)로 제공되면, 소스 유닛 제어부(170)는 상기 비디오 데이터의 타임 스탬프 값을 제2 기준클록 CLK12과 비교한다. 도시된 바와 같이 비디오 데이터가 소스 유닛(110)으로부터 비디오 랜더러(140)로 제공되는 동안 2 CLK에 해당하는 시간이 지났지만, 제2 기준클록 CLK12은 제1 기준클록 CLK11보다 위상이 2 CLK 늦으므로, 랜더러 제어부(160)에서의 기준 시점은 제2 기준클록 CLK12의 시점 4에 해당한다. 랜더러 제어부(160)에서는 타임 스탬프 값이 제2 기준클록 CLK12 보다 큰 것으로 판단하므로, 해당 비디오 데이터는 정상적으로 비디오 출력장치로 제공된다.
한편, 도 4b에 도시된 바와 같이, 비디오 데이터의 타임 스탬프 값(TS)이 시점 3에 해당하고, 비교되는 기준 시점이 CLK11의 시점 4에 해당한다고 가정하자. 이 경우에는 타임 스탬프 값(TS)이 제1 기준클록 CLK11보다 작은 것으로 비교된다. 이러한 경우에, 상기 비디오 데이터가 인트라 프레임(Intra Frame)이면 상기 비디오 데이터를 비디오 디코더(140)로 출력하며, 상기 비디오 데이터가 인터 프레임(Inter Frame)이면 상기 비디오 데이터가 비디오 디코더(140)로 출력되는 것을 차단한다. 타임 스탬프 값(TS)이 제1 기준클록 CLK11보다 작은 경우에, 랜더러 제어부(160)에서의 비교 결과 또한 타임 스탬프 값(TS)이 제2 기준클록 CLK12 보다 작게 되는 예가 또한 도시된다.
한편, 본 발명의 일실시예의 멀티미디어 재생장치(100)에 따르면, 소스 유닛(110)의 데이터 출력을 제어하는 소스 유닛 제어부(170)를 구비하므로, 소스 유 닛(110)으로부터 비디오/오디오 데이터가 출력되는 시점을 조절할 수 있다. 특히 소스 유닛(110)이 복수의 비디오 데이터(일예로서 제1 비디오 데이터 내지 제n 비디오 데이터)를 연속으로 장치(100) 내부로 제공함에 있어서, 각각의 비디오 데이터의 타임 스탬프 값과 제1 기준클록 CLK11을 비교하고, 비교 결과에 기반하여 해당 비디오 데이터의 출력 시점을 제어할 수 있다.
제1 비디오 데이터에 대한 디코딩 동작이 완료된 후, 소스 유닛(110)은 제2 비디오 데이터를 비디오 디코더(120)로 선택적으로 출력하게 되는데, 상기 제2 비디오 데이터를 곧바로 비디오 디코더(120)로 출력하는 것이 아니라 상기 비교 결과에 기반하여 그 출력시점이 제어되도록 한다. 자세하게는, 제1 비디오 데이터의 디코딩이 끝나는 시점에서, 제2 비디오 데이터의 타임 스탬프 값과 제1 기준클록 CLK11을 서로 비교하고, 상기 비교 결과에 기반하여 제2 비디오 데이터의 출력을 지연시키도록 한다. 바람직하게는, 제2 비디오 데이터의 타임 스탬프 값과 제1 기준클록 CLK11의 차이만큼에 해당하는 시간동안 상기 제2 비디오 데이터의 출력이 지연되도록 한다. 즉, 제1 비디오 데이터가 소정 시간만큼 일찍 디코딩 동작이 완료된 경우에는, 제2 비디오 데이터 또한 상기 소정의 시간만큼 일찍 소스 유닛(110)으로부터 출력될 수 있다. 그러나, 제2 비디오 데이터의 출력을 지연시킴으로써, 제2 비디오 데이터가 제시간에 비디오 디코더(120)로 제공되도록 할 수 있다.
상기와 같이 동작하는 경우, 비디오 데이터를 정확한 시간에 비디오 디코더(120)로 제공할 수 있으며, 이에 따라 과도한 버퍼링 동작이 수행되는 것을 방지 할 수 있다. 또한 제2 비디오 데이터의 출력을 대기하는 동안 다른 프로세스의 CPU 점유를 할당할 수 있는 장점이 있다. 소스 유닛으로부터 데이터를 정확한 시간에 디코더로 보내는 경우, 열악한 시스템 환경에서는 데이터가 원래 출력되어져야 하는 시간보다 다소 늦게 랜더러에 도착할 수 있다. 그러나 비디오 데이터에 대해서는 이러한 현상을 눈으로 직접 감지할 수 없는 정도이므로 상관이 없다. 그러나 오디오 데이터는 상기와 같은 경우에서 소리가 튀는 현상이 발생할 수 있으므로, 오디오 데이터에 대해서는 상기와 같은 동작을 수행하지 않는 것이 바람직하다.
도 5는 본 발명의 일실시예에 따른 비디오 데이터 처리방법을 나타내는 플로우차트이다.
본 발명의 일실시예에 따른 비디오 데이터 처리방법에 따르면, 도시된 바와 같이 네트워크 등 외부의 여러 경로로부터 제공될 수 있는 멀티미디어 정보에 포함되는 비디오 데이터 및 오디오 데이터를 수신한다(S11). 비디오 데이터 및 오디오 데이터가 수신되면, 수신된 비디오 및/또는 오디오 데이터의 타임 스탬프 값(특히 비디오 데이터의 타임 스탬프 값)과 소정의 제1 기준클록을 서로 비교하는 단계가 수행된다(S12).
상기 비교 결과, 비디오 데이터의 타임 스탬프 값이 제1 기준클록보다 같거나 큰 것으로 판단되면, 상기 비디오 데이터는 비디오 디코더로 출력된다(S13). 비디오 디코더는 입력된 비디오 데이터를 디코딩하고(S14), 디코딩된 비디오 데이터를 비디오 랜더러로 출력한다.
비디오 랜더러는, 재생장치 내에 구비되는 랜더러 제어부에 의해 그 출력이 제어되며, 랜더러 제어부는 비디오 데이터의 타임 스탬프 값과 소정의 제2 기준클록을 서로 비교한다. 상기 비교 결과 타임 스탬프 값이 제2 기준클록보다 크다면, 타임 스탬프 값과 제2 기준클록이 같아질 때까지 기다렸다가 비디오 데이터를 출력한다(S16). 만약 비교 결과 타임 스탬프 값이 제2 기준클록보다 작거나 같다면, 비디오 데이터가 곧바로 비디오 출력장치로 제공되도록 제어한다.
한편, 상기 비디오 데이터와 제1 기준클록을 비교하는 단계(S12 단계)에서, 비디오 데이터의 타임 스탬프 값이 제1 기준클록보다 작은 것으로 비교되면, 비디오 데이터의 프레임 형식을 판단하고(S17), 상기 판단 결과에 기반하여 비디오 데이터의 출력을 제어한다. 일예로서, 비디오 데이터가 인트라 프레임(Intra Frame) 형식인 경우에는, 비디오 데이터의 타임 스탬프 값이 제1 기준클록보다 작더라도 해당 비디오 데이터를 비디오 디코더로 출력한다. 반면에, 비디오 데이터가 인터 프레임(Inter Frame) 형식인 경우에는, 비디오 데이터의 타임 스탬프 값이 제1 기준클록보다 작은 경우에는 해당 비디오 데이터의 출력을 차단한다(S18).
도 6은 본 발명의 일실시예에 따른 오디오 데이터 처리방법을 나타내는 플로우차트이다. 도시된 바와 같이 비디오 데이터 및 오디오 데이터가 수신되면(S21), 수신된 오디오 데이터를 오디오 디코더로 출력한다(S22). 즉, 상술한 비디오 데이터 처리시에는, 소스 유닛에서 비디오 데이터의 타임 스탬프 값을 제1 기준클록과 비교하고, 상기 비교 결과에 따라 비디오 데이터를 디코더로 제공할 것인지 또는 아닌지를 결정하였다. 반면에, 오디오 데이터를 처리하는 경우, 오디오 데이터의 타임 스탬프 값을 제1 기준클록과 비교하지 않고 바로 오디오 디코더로 출력할 수 있다.
오디오 디코더로 오디오 데이터가 전달되면 디코딩 동작이 수행된다(S23). 디코딩된 오디오 데이터는 오디오 랜더러로 제공되며, 오디오 랜더러의 데이터 출력동작을 제어하는 랜더러 제어부는, 오디오 데이터의 타임 스탬프 값과 제2 기준클록을 비교한다(S24). 상기 비교 결과, 오디오 데이터의 타임 스탬프 값이 제2 기준클록보다 큰 것으로 비교되면, 타임 스탬프 값과 제2 기준클록이 같아질 때까지 기다렸다가 오디오 데이터를 출력한다(S25). 한편, 오디오 데이터의 타임 스탬프 값이 제2 기준클록보다 작거나 같은 경우에는, 오디오 데이터를 곧바로 오디오 출력장치로 출력한다.
도 7은 본 발명의 다른 실시예에 따른 비디오 데이터 처리방법을 나타내는 플로우차트이다. 도 7에 도시된 플로우차트는, 제1 비디오 데이터 내지 제n 비디오 데이터가 순차적으로 입력되는 경우 이를 처리하기 위한 방법을 나타낸다.
먼저, 제1 비디오 데이터가 소스 유닛으로 입력되면, 제1 비디오 데이터의 타임 스탬프 값과 제1 기준클록을 비교하는 단계가 수행된다(S31). 상기 비교 결과에 따라 제1 비디오 데이터가 선택적으로 비디오 디코더로 출력된다(S32). 상술하였던 바와 같이 타임 스탬프 값이 제1 기준클록보다 같거나 큰 경우에 제1 비디오 데이터가 비디오 디코더로 출력되며, 또한 타임 스탬프 값이 제1 기준클록보다 작더라도 상기 비디오 데이터가 인트라 프레임(Intra Frame) 형식인 경우에는 비디오 데이터가 비디오 디코더로 출력된다.
제1 비디오 데이터가 디코더로 출력된 경우 이에 대한 디코딩 동작이 수행되 며(S33), 디코딩된 데이터는 비디오 랜더러를 거쳐 비디오 출력장치로 제공된다. 비디오 랜더러에서의 비디오 데이터 출력은, 상술하였던 바와 같이 비디오 데이터의 타임 스탬프 값과 제2 기준클록의 비교 결과에 기반하여 제어될 수 있음은 자명하다.
한편, 제1 비디오 데이터에 대한 디코딩 동작이 완료되면, 소스 유닛에서는 (제2 비디오 데이터의 타임 스탬프 값과 제1 기준클록의 비교 결과에 기반하여) 제2 비디오 데이터를 비디오 디코더로 선택적으로 출력하게 되는데, 상기 제2 비디오 데이터를 출력함에 있어서, 상기 제1 비디오 데이터의 타임 스탬프 값과 제1 기준클록의 비교 결과에 기반하여 제2 비디오 데이터의 출력을 지연시킨다(S34). 바람직하게는, 제1 비디오 데이터의 타임 스탬프 값과 제1 기준클록의 차이만큼에 해당하는 시간동안 제2 비디오 데이터의 출력을 지연시킨다. 상기와 같은 동작에 의하여, 제2 비디오 데이터를 비디오 디코더로 제시간에 맞춰서 제공할 수 있다.
이후, 제2 비디오 데이터가 비디오 디코더로 제공되면(S35), 제공된 제2 비디오 데이터에 대한 디코딩 동작이 수행된다. 디코딩된 데이터는 비디오 랜더러를 거쳐 비디오 출력장치로 제공되며, 상기와 같은 동작은 제n 비디오 데이터에 대해 반복 수행된다. 제n 비디오 데이터가 비디오 디코더로 출력되고(S36), 디코딩된 데이터는 비디오 랜더러를 거쳐 비디오 출력장치로 제공됨으로써 비디오 데이터의 처리 동작이 완료된다.
본 발명은 도면에 도시된 실시예를 참고로 설명되었으나 이는 예시적인 것에 불과하며, 본 기술 분야의 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균 등한 다른 실시예가 가능하다는 점을 이해할 것이다. 따라서, 본 발명의 진정한 기술적 보호 범위는 첨부된 특허청구범위의 기술적 사상에 의하여 정해져야 할 것이다.
도 1은 종래의 멀티미디어 재생장치를 나타내는 블록도이다.
도 2는 본 발명의 일실시예에 따른 멀티미디어 재생장치를 나타내는 블록도이다.
도 3은 도 2의 소스 유닛 제어부의 구성의 일예를 나타내는 블록도이다.
도 4a,b은 데이터의 타임 스탬프 값과 제1 및 제2 기준클록의 비교동작을 나타내기 위한 파형도이다.
도 5는 본 발명의 일실시예에 따른 비디오 데이터 처리방법을 나타내는 플로우차트이다.
도 6은 본 발명의 일실시예에 따른 오디오 데이터 처리방법을 나타내는 플로우차트이다.
도 7은 본 발명의 다른 실시예에 따른 비디오 데이터 처리방법을 나타내는 플로우차트이다.
* 도면의 주요부분에 대한 부호의 설명 *
110: 소스 유닛 120: 비디오 디코더
130: 오디오 디코더 140: 비디오 랜더러
150: 오디오 랜더러 160: 랜더러 제어부
170: 소스 유닛 제어부

Claims (21)

  1. 수신된 멀티미디어 데이터를 처리하여 상기 수신된 멀티미디어 데이터로부터 비디오 데이터 및 오디오 데이터를 추출하고, 추출된 데이터를 장치 내부로 출력하는 소스 유닛;
    상기 소스 유닛으로부터 비디오 데이터를 제공받아 이를 디코딩하는 비디오 디코더;
    상기 소스 유닛으로부터 오디오 데이터를 제공받아 이를 디코딩하는 오디오 디코더; 및
    제1 기준클록을 제공받으며, 상기 비디오 데이터 및/또는 상기 오디오 데이터의 타임 스탬프 값을 상기 제1 기준클록과 비교하고, 상기 비교 결과에 따라 상기 소스 유닛의 상기 비디오 데이터 및/또는 상기 오디오 데이터 출력동작을 제어하는 소스 유닛 제어부를 구비하는 것을 특징으로 하는 멀티미디어 재생장치.
  2. 제1항에 있어서, 상기 소스 유닛 제어부는,
    상기 비디오 데이터의 타임 스탬프 값과 상기 제1 기준클록을 비교하고, 상기 비교 결과에 따라 상기 소스 유닛의 비디오 데이터 출력동작을 제어하는 것을 특징으로 하는 멀티미디어 재생장치.
  3. 제1항에 있어서, 상기 소스 유닛 제어부는,
    상기 비교 결과, 상기 타임 스탬프 값이 상기 제1 기준클록보다 크거나 같은 경우에, 상기 타임 스탬프에 대응하는 비디오 데이터가 상기 비디오 디코더로 제공되도록 제어하는 것을 특징으로 하는 멀티미디어 재생장치.
  4. 제3항에 있어서, 상기 소스 유닛 제어부는,
    상기 비교 결과, 상기 타임 스탬프 값이 상기 제1 기준클록보다 작은 경우에 있어서,
    상기 타임 스탬프에 대응하는 비디오 데이터가 제1 형식의 비디오 프레임인 경우에, 상기 비디오 데이터가 상기 비디오 디코더로 제공되도록 제어하며,
    상기 타임 스탬프에 대응하는 비디오 데이터가 제2 형식의 비디오 프레임인 경우에, 상기 비디오 디코더로의 비디오 데이터 제공을 차단하도록 제어하는 것을 특징으로 하는 멀티미디어 재생장치.
  5. 제4항에 있어서,
    상기 제1 형식의 비디오 프레임은 인트라 프레임(Intra Frame)이며, 상기 제2 형식의 비디오 프레임은 인터 프레임(Inter Frame)인 것을 특징으로 하는 멀티미디어 재생장치.
  6. 제1항에 있어서,
    상기 비디오 디코더로부터 디코딩된 비디오 데이터를 입력받으며, 상기 입력 된 비디오 데이터를 비디오 출력장치로 제공하는 비디오 랜더러;
    상기 오디오 디코더로부터 디코딩된 오디오 데이터를 입력받으며, 상기 입력된 오디오 데이터를 오디오 출력장치로 제공하는 오디오 랜더러; 및
    제2 기준클록을 입력받으며, 상기 타임 스탬프 값과 상기 제2 기준클록의 비교 결과에 기반하여 상기 비디오 랜더러 및 상기 오디로 랜더러의 데이터 출력을 제어하는 랜더러 제어부를 더 구비하는 것을 특징으로 하는 멀티미디어 재생장치.
  7. 제6항에 있어서, 상기 랜더러 제어부는,
    상기 비디오 데이터의 타임 스탬프 값이 상기 제2 기준클록보다 큰 경우, 상기 타임 스탬프 값이 상기 제2 기준클록과 같아질 때 상기 비디오 데이터가 비디오 출력장치로 제공되도록 제어하며,
    상기 비디오 데이터의 타임 스탬프 값이 상기 제2 기준클록보다 작거나 같은 경우, 상기 비디오 데이터가 비디오 출력장치로 즉시 제공되도록 제어하는 것을 특징으로 하는 멀티미디어 재생장치.
  8. 제6항에 있어서, 상기 랜더러 제어부는,
    상기 오디오 데이터의 타임 스탬프 값이 상기 제2 기준클록보다 큰 경우, 상기 타임 스탬프 값이 상기 제2 기준클록과 같아질 때 상기 오디오 데이터가 오디오 출력장치로 제공되도록 제어하며,
    상기 오디오 데이터의 타임 스탬프 값이 상기 제2 기준클록보다 작거나 같은 경우, 상기 오디오 데이터가 오디오 출력장치로 즉시 제공되도록 제어하는 것을 특징으로 하는 멀티미디어 재생장치.
  9. 제6항에 있어서,
    상기 제1 기준클록과 제2 기준클록의 위상 차이값은, 상기 비디오 디코더의 디코딩 시간에 기반하는 값을 갖는 것을 특징으로 하는 멀티미디어 재생장치.
  10. 제9항에 있어서,
    상기 제1 기준클록과 제2 기준클록의 위상 차이값은, 상기 소스 유닛으로부터 상기 비디오 랜더러로 비디오 데이터가 제공되는 시간에 해당하는 값을 갖는 것을 특징으로 하는 멀티미디어 재생장치.
  11. 제1항에 있어서, 상기 소스 유닛 제어부는,
    상기 제1 기준클록과 상기 타임 스탬프 값을 비교하기 위한 타임 스탬프/기준 클록 비교부;
    상기 소스 유닛으로 제공된 비디오 데이터의 프레임 형식을 판단하기 위한 프레임 형식 판단부; 및
    상기 비교 결과 및 상기 판단 결과에 따라 상기 소스 유닛의 비디오 데이터의 출력동작을 제어하기 위한 제어신호를 발생하는 제어신호 발생부를 구비하는 것을 특징으로 하는 멀티미디어 재생장치.
  12. 제1항에 있어서, 상기 소스 유닛 제어부는,
    비디오 데이터의 타임 스탬프 값과 상기 제1 기준클록을 비교하고, 상기 비교 결과에 기반하여 상기 비디오 데이터의 출력을 지연시키는 것을 특징으로 하는 멀티미디어 재생장치.
  13. 제12항에 있어서, 상기 소스 유닛 제어부는,
    제1 비디오 데이터의 디코딩 완료 직후, 상기 제1 비디오 데이터에 연속하는 제2 비디오 데이터의 타임 스탬프 값과 상기 제1 기준클록을 비교하고, 그 차이에 해당하는 시간만큼 상기 제2 비디오 데이터의 출력을 지연시키는 것을 특징으로 하는 멀티미디어 재생장치.
  14. 비디오 데이터 및 오디오 데이터를 수신하는 단계;
    상기 수신된 비디오 데이터 및/또는 오디오 데이터의 타임 스탬프 값을 제1 기준클록과 비교하는 단계;
    상기 비교 결과에 따라 상기 비디오 데이터 및/또는 오디오 데이터를 선택적으로 출력하는 단계; 및
    상기 선택적으로 출력된 비디오 데이터 및/또는 오디오 데이터를 각각 디코딩하는 단계를 구비하는 것을 특징으로 하는 비디오/오디오 데이터 처리방법.
  15. 제14항에 있어서, 상기 비교 단계 및 출력 단계는,
    상기 수신된 비디오 데이터의 타임 스탬프 값을 상기 제1 기준클록과 비교하며, 상기 비교 결과에 따라 상기 비디오 데이터를 비디오 디코더로 선택적으로 제공하는 것을 특징으로 하는 비디오/오디오 데이터 처리방법.
  16. 제15항에 있어서, 상기 비교 단계 및 출력 단계는,
    상기 비교 결과, 상기 타임 스탬프 값이 상기 제1 기준클록보다 큰 경우에, 상기 타임 스탬프에 대응하는 비디오 데이터가 상기 비디오 디코더로 제공되도록 제어하는 것을 특징으로 하는 비디오/오디오 데이터 처리방법.
  17. 제15항에 있어서,
    상기 비디오 데이터의 프레임 형식을 판단하는 단계를 더 구비하는 것을 특징으로 하는 비디오/오디오 데이터 처리방법.
  18. 제17항에 있어서, 상기 비교 단계 및 출력 단계는,
    상기 비교 결과, 상기 타임 스탬프 값이 상기 제1 기준클록보다 작은 경우에 있어서,
    상기 타임 스탬프에 대응하는 비디오 데이터가 인트라 프레임(Intra Frame) 형식인 경우에, 상기 비디오 데이터가 상기 비디오 디코더로 제공되도록 제어하며,
    상기 타임 스탬프에 대응하는 비디오 데이터가 인터 프레임(Inter Frame) 형 식인 경우에, 상기 비디오 디코더로의 비디오 데이터 제공을 차단하도록 제어하는 것을 특징으로 하는 비디오/오디오 데이터 처리방법.
  19. 제14항에 있어서,
    상기 선택적으로 출력된 비디오 데이터 및/또는 오디오 데이터의 타임 스탬프 값과 제2 기준클록을 비교하는 단계;
    상기 비교 결과에 따라, 상기 비디오 데이터 및/또는 오디오 데이터를 각각의 출력장치로 제공하는 단계를 더 구비하는 것을 특징으로 하는 비디오/오디오 데이터 처리방법.
  20. 제19항에 있어서,
    상기 제1 기준클록과 제2 기준클록의 위상 차이값은, 상기 비디오 디코더의 디코딩 시간에 기반하는 값을 갖는 것을 특징으로 하는 비디오/오디오 데이터 처리방법.
  21. 제14항에 있어서,
    상기 비디오 데이터의 타임 스탬프 값과 상기 제1 기준클록과의 비교 결과에 기반하여, 상기 비디오 데이터가 비디오 디코더로 제공되는 시점을 제어하는 것을 특징으로 하는 비디오/오디오 데이터 처리방법.
KR1020070085003A 2007-08-23 2007-08-23 멀티미디어 재생장치 및 오디오/비디오 데이터의 처리방법 KR20090020324A (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020070085003A KR20090020324A (ko) 2007-08-23 2007-08-23 멀티미디어 재생장치 및 오디오/비디오 데이터의 처리방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020070085003A KR20090020324A (ko) 2007-08-23 2007-08-23 멀티미디어 재생장치 및 오디오/비디오 데이터의 처리방법

Publications (1)

Publication Number Publication Date
KR20090020324A true KR20090020324A (ko) 2009-02-26

Family

ID=40687810

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020070085003A KR20090020324A (ko) 2007-08-23 2007-08-23 멀티미디어 재생장치 및 오디오/비디오 데이터의 처리방법

Country Status (1)

Country Link
KR (1) KR20090020324A (ko)

Similar Documents

Publication Publication Date Title
US9489980B2 (en) Video/audio synchronization apparatus and video/audio synchronization method
CN106612452B (zh) 机顶盒音视频同步的方法及装置
US5808722A (en) Apparatus for extending and reproducing video and audio data and a video and audio synchronization controller
JP4991129B2 (ja) 映像音声再生装置および映像音声再生方法
TWI788744B (zh) 動態縮減替換內容之播放以幫助對齊替換內容之結束與已替換內容之結束
CN100588261C (zh) 将视频数据及音频数据同步的方法及系统
US20130083859A1 (en) Method to match input and output timestamps in a video encoder and advertisement inserter
JP4983923B2 (ja) デコーダ装置、およびデコード方法
JP2008236188A (ja) マルチデコーダ装置及び方法
KR101600891B1 (ko) 복수의 단말기에 출력되는 비디오 및 오디오를 동기화시키는 동기화시스템 및 방법
WO2014115295A1 (ja) ビデオ表示装置及びビデオ表示方法
KR100864009B1 (ko) 오디오/비디오 동기화 방법
US7551227B2 (en) Signal processor
US20060024024A1 (en) Playback device capable of synchronizing playback of video signal portion and audio signal portion of av signal and method thereof
KR20090020324A (ko) 멀티미디어 재생장치 및 오디오/비디오 데이터의 처리방법
US8213778B2 (en) Recording device, reproducing device, recording medium, recording method, and LSI
US20090323719A1 (en) Methods and apparatus for transforming first transport stream of first format into second transport stream of second format by emulating arrival time stamp information
US10750233B2 (en) Recording apparatus, recording method, and program
JP2001231035A (ja) 復号同期制御装置、復号装置、及び復号同期制御方法
JP4850041B2 (ja) 映像再生システム、映像再生の同期方法および映像再生端末
US20090074376A1 (en) Apparatus and method for efficient av synchronization
JP2005303816A (ja) 動画再生装置
JP3165661B2 (ja) 音声同期再生装置
JP2009259333A (ja) 再生装置及び再生方法
JP2005229168A (ja) メディア出力システムとその同期誤差制御方法およびプログラム

Legal Events

Date Code Title Description
WITN Withdrawal due to no request for examination