JP2006319552A - マルチメディア再生装置 - Google Patents

マルチメディア再生装置 Download PDF

Info

Publication number
JP2006319552A
JP2006319552A JP2005138733A JP2005138733A JP2006319552A JP 2006319552 A JP2006319552 A JP 2006319552A JP 2005138733 A JP2005138733 A JP 2005138733A JP 2005138733 A JP2005138733 A JP 2005138733A JP 2006319552 A JP2006319552 A JP 2006319552A
Authority
JP
Japan
Prior art keywords
time information
multimedia playback
data
playback device
pts
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
JP2005138733A
Other languages
English (en)
Inventor
Seigo Naota
清吾 直田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Holdings Corp
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Priority to JP2005138733A priority Critical patent/JP2006319552A/ja
Priority to US11/417,157 priority patent/US20060257108A1/en
Priority to CNA2006100801857A priority patent/CN1863298A/zh
Publication of JP2006319552A publication Critical patent/JP2006319552A/ja
Withdrawn legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4341Demultiplexing of audio and video streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/2368Multiplexing of audio and video streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4305Synchronising client clock from received content stream, e.g. locking decoder clock with encoder clock, extraction of the PCR packets
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H04N21/43072Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of multiple content streams on the same device

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Television Signal Processing For Recording (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

【課題】PTSバッファを拡張することなく、映像データおよび音声データの同期再生が可能となるマルチメディア再生装置を実現する。
【解決手段】マルチメディア再生装置は、入力処理部(10)と格納部(11)とを備えている。格納部(11)は、上記の時間情報を格納する。入力処理部(10)は、符号化データを受け、これから、映像データおよび音声データを順次分離し、この分離したデータに係る時間情報を抽出し、抽出した時間情報について、情報量を減らして格納部(11)に格納する。
【選択図】図1

Description

本発明は、マルチメディア再生装置に関し、特に、映像データおよび音声データの同期再生に関するものである。
従来のマルチメディア再生装置は、入力された符号化データから映像データ、音声データおよびこれらのデータに対応するPTS(Presentation Time Stamp)情報をそれぞれ分離する。分離された映像データおよび音声データは分類され、それぞれのバッファに格納される。またPTS情報も専用のバッファに格納される。マルチメディア再生装置におけるデータの同期再生は、映像データおよび音声データをそれぞれ復号し、これらに対応するPTS情報に基づいて行われる(たとえば、特許文献1参照)。
特開2001−169249号公報(第5、6頁、第1図)
同期して再生すべき映像データと音声データとが離れた位置に多重化されている場合には、映像データおよび音声データのバッファサイズを拡張する必要がある。これに伴い、双方のデータの同期をとるためのPTS情報を格納するバッファも拡張する必要がある。
映像データおよび音声データのバッファは外部メモリに配置されているため、バッファのサイズは比較的容易に変更可能である。一方、PTS情報のバッファは内部メモリに配置されているため、バッファのサイズの変更は内部メモリのメモリサイズおよびメモリマップの関係上困難となる。このため、上述した多重化構成によってはPTS情報のバッファがオーバーフローを起こす。この場合、同時に再生するために必要なデータをバッファに格納することができないため、映像データおよび音声データの同期再生が行なわれない。
上記問題に鑑み、本発明は、PTS情報のバッファサイズを拡張することなく、映像データおよび音声データの同期再生を可能にするマルチメディア再生装置の実現を課題とする。
上記課題を解決するために本発明が講じた手段は、映像データおよび音声データの同期をとるための時間情報に基づいて、当該映像データおよび音声データを再生するマルチメディア再生装置であって、上記の時間情報を格納する格納部と、符号化データを受け、これから、映像データおよび音声データを順次分離し、この分離したデータに係る時間情報を抽出し、この抽出した時間情報について、情報量を減らして格納部に格納する入力処理部とを備えたものとする。
この発明によると、入力処理部によって、入力される符号化データから、映像データおよび音声データが順次分離され、この分離されたデータに係る時間情報が抽出され、さらにこの抽出された時間情報は、情報量を減らされて、格納部に格納される。これにより、格納部を拡張することなく、映像データおよび音声データの同期再生が可能となる。
具体的には、入力処理部は、上記の時間情報を間引くことによって、上記の時間情報の情報量を減らすものとする。
好ましくは、入力処理部は、上記の時間情報を間引く間隔が変更可能に構成されている
ものとする。
具体的には、上記の間引く間隔は、上記の符号化データの種類に応じて変更されるものとする。
また、具体的には、入力処理部は、マルチメディア再生装置の動作状態を判定するものであり、上記の動作状態がスタートアップ状態である場合、入力処理部は、この時間情報の間引きを行わない一方、上記の動作状態が上記のスタートアップ状態以外の場合、この時間情報の間引きを行うものとする。
この発明によると、データ同期がずれている可能性が最も高いスタートアップ時には時間情報の間引きが行われないため、データの同期合わせ処理における長期化が抑制される。
また、具体的には、入力処理部は、連続する上記の時間情報の差分をとることによって、上記の時間情報の情報量を減らすものとする。
本発明によると、時間情報の情報量が減らされるため、時間情報を格納するバッファを拡張することなく、当該バッファのオーバーフローが抑制される。これにより、映像データおよび音声データのバッファを拡張する場合でも、時間情報を格納するバッファを拡張することなく、映像データおよび音声データの同期再生が可能となる。
以下、本発明を実施するための最良の形態について、図面を参照しながら説明する。
(第1の実施形態)
図1は、本発明の第1の実施形態に係るマルチメディア再生装置の構成を示す。本実施形態に係るマルチメディア再生装置は、入力処理部10、PTSバッファ11、映像データバッファ12、音声データバッファ13、映像デコード部14、音声デコード部15、およびAV同期処理部16を備えている。
入力処理部10は、入力された符号化データを映像データ、音声データに分類して出力する。さらにこれらのデータに対応するPTS情報を符号化データから抽出する。
PTSバッファ11は、入力処理部10から出力されたPTS情報を格納する。
映像データバッファ12は、入力処理部10から出力された映像データを格納する。
音声データバッファ13は、入力処理部10から出力された音声データを格納する。
AV同期処理部16は、PTSバッファ11に格納されたPTS情報に基づいて、映像デコード部14および音声デコード部15によってそれぞれ復号されたデータを同期再生する。
入力処理部10は、符号化データから抽出したPTS情報を間引いてPTSバッファ11に格納する。なお、マルチメディア再生装置の内部または外部の制御ctlによってPTS情報を間引く間隔が変更されるようにしてもよい。たとえば、再生するために最適な映像データバッファ12および音声データバッファ13のバッファサイズを確保する際、符号化データの種類(たとえば、符号化方式、ビットレートなど)に応じて、PTSバッファ11のサイズも変更する必要がある。このため、制御ctlによってマルチメディア再生装置に入力される符号化データの種類に応じて、PTS情報を間引く間隔が変更されるようにする。
以上、本実施形態によると、PTS情報が間引かれて格納されるため、PTSバッファ11を拡張することなく、拡張された映像データバッファ12および音声データバッファ13に格納されるデータに対応するPTS情報が格納される。これにより、PTSバッファ11を拡張することなく、映像データおよび音声データの同期再生が可能となる。
(第2の実施形態)
次に本発明の第2の実施形態に係るマルチメディア再生装置について説明する。なお本実施形態に係るマルチメディア再生装置の構成は第1の実施形態と同様であるため、ここでの説明は省略する。
図1において、PTS情報を間引いてPTSバッファ11に格納する場合、AV同期処理部16におけるデータの同期合わせ処理にかかる時間が比較的長くなる。このためデータ同期がずれている可能性が最も高いスタートアップ状態から上述した調整を行なう場合、データ同期が確立するまでの時間が長引くことになる。
入力処理部10は、マルチメディア再生装置の動作状態がスタートアップ状態であるか、データ同期確立後の通常再生状態であるかを判定し、判定結果に応じてPTS情報の間引き処理を切り替える。
図2は、入力処理部10が行うPTS情報の処理のフローチャートを示す。ステップS101でマルチメディア再生装置の動作状態がスタートアップ状態か否かが判定される。スタートアップ状態と判定された場合、PTSバッファ11にすべてのPTS情報が格納される(ステップS102)。一方、スタートアップ状態ではなく通常再生状態であると判定された場合、PTSバッファ11にPTS情報が間引かれて格納される(ステップS103)。
以上、本実施形態によると、入力処理部10によってマルチメディア再生装置の動作状態が判定されることで、データ同期がずれている可能性が最も高いスタートアップ時にはPTS情報の間引きが行われないため、データの同期合わせ処理の長期化が抑制される。
(第3の実施形態)
次に、本発明の第3の実施形態に係るマルチメディア再生装置ついて説明する。なお本実施形態に係るマルチメディア再生装置の構成は第1の実施形態と同様であるため、ここでの説明は省略する。
図1において、入力処理部10は、連続する2つのPTS情報の差分をとり、この差分情報をPTSバッファ11に格納する。
図3(a)、(b)は、PTSバッファにおけるPTS情報の格納状態を示す。図3(a)は、従来のPTSバッファにおけるPTS情報の格納状態を示す。この場合、入力処理部10に入力されるPTS情報はすべて一情報ごとにPTSバッファに格納される。一方、図3(b)は、本実施形態に係るPTSバッファ11におけるPTS情報の格納状態を示す。本実施形態では、初めに格納されるPTS0情報以外、PTS情報の差分がPTSバッファ11に格納される。
以上、本実施形態によると、PTS情報の差分がPTSバッファ11に格納されることで、PTSバッファ11に格納すべき情報量が縮減されるため、PTSバッファ11を拡張することなく実質的により多くのPTS情報が格納される。
本発明に係るマルチメディア再生装置は、PTSバッファを拡張することなく、映像データおよび音声データの同期再生が可能となるため、光ディスク再生装置およびデジタルテレビジョン受像機として有用である。
本発明の第1の実施形態に係るマルチメディア再生装置の構成図である。 入力処理部が行うPTS情報の処理のフローチャートである。 PTSバッファにおけるPTS情報の格納状態である。
符号の説明
10 入力処理部
11 PTSバッファ(格納部)

Claims (6)

  1. 映像データおよび音声データの同期をとるための時間情報に基づいて、当該映像データおよび音声データを再生するマルチメディア再生装置であって、
    前記時間情報を格納する格納部と、
    符号化データを受け、これから、映像データおよび音声データを順次分離し、当該分離したデータに係る時間情報を抽出し、当該抽出した時間情報について、情報量を減らして前記格納部に格納する入力処理部とを備えた
    ことを特徴とするマルチメディア再生装置。
  2. 請求項1に記載のマルチメディア再生装置において、
    前記入力処理部は、前記時間情報を間引くことによって、前記時間情報の情報量を減らす
    ことを特徴とするマルチメディア再生装置。
  3. 請求項2に記載のマルチメディア再生装置において、
    前記入力処理部は、前記時間情報を間引く間隔が変更可能に構成されている
    ことを特徴とするマルチメディア再生装置。
  4. 請求項3に記載のマルチメディア再生装置において、
    前記間引く間隔は、前記符号化データの種類に応じて変更される
    ことを特徴とするマルチメディア再生装置。
  5. 請求項2に記載のマルチメディア再生装置において、
    前記入力処理部は、当該マルチメディア再生装置の動作状態を判定するものであり、
    前記動作状態がスタートアップ状態である場合、前記入力処理部は、前記時間情報の間引きを行わない一方、前記動作状態が前記スタートアップ状態以外の場合、前記時間情報の間引きを行う
    ことを特徴とするマルチメディア再生装置。
  6. 請求項1に記載のマルチメディア再生装置において、
    前記入力処理部は、連続する前記時間情報の差分をとることによって、前記時間情報の情報量を減らす
    ことを特徴とするマルチメディア再生装置。
JP2005138733A 2005-05-11 2005-05-11 マルチメディア再生装置 Withdrawn JP2006319552A (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2005138733A JP2006319552A (ja) 2005-05-11 2005-05-11 マルチメディア再生装置
US11/417,157 US20060257108A1 (en) 2005-05-11 2006-05-04 Multimedia reproduction apparatus
CNA2006100801857A CN1863298A (zh) 2005-05-11 2006-05-10 多媒体再生装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2005138733A JP2006319552A (ja) 2005-05-11 2005-05-11 マルチメディア再生装置

Publications (1)

Publication Number Publication Date
JP2006319552A true JP2006319552A (ja) 2006-11-24

Family

ID=37390608

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2005138733A Withdrawn JP2006319552A (ja) 2005-05-11 2005-05-11 マルチメディア再生装置

Country Status (3)

Country Link
US (1) US20060257108A1 (ja)
JP (1) JP2006319552A (ja)
CN (1) CN1863298A (ja)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI377796B (en) * 2008-10-31 2012-11-21 Azure Shine Int Inc Mobile digital signal transceiving device
KR101090356B1 (ko) * 2009-12-28 2011-12-13 주식회사 더블유코퍼레이션 오디오 신호 및 비디오 신호의 동기화 오차 보정 방법 및 장치
US9167296B2 (en) 2012-02-28 2015-10-20 Qualcomm Incorporated Customized playback at sink device in wireless display system

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3422686B2 (ja) * 1998-06-12 2003-06-30 三菱電機株式会社 データ復号装置及びデータ復号方法
EP1148503A1 (en) * 2000-04-08 2001-10-24 Deutsche Thomson-Brandt Gmbh Method and apparatus for recording on a storage medium or replaying from a storage medium data packets of a transport stream
TW499818B (en) * 2001-03-29 2002-08-21 Winbond Electronics Corp Audio/video packet synchronous decoding method

Also Published As

Publication number Publication date
US20060257108A1 (en) 2006-11-16
CN1863298A (zh) 2006-11-15

Similar Documents

Publication Publication Date Title
JP4991129B2 (ja) 映像音声再生装置および映像音声再生方法
KR100661895B1 (ko) 영상 데이터 처리 장치 및 처리 방법
JP5059301B2 (ja) 同期再生装置および同期再生方法
JPH06333341A (ja) 多重化データ分離装置および方法
JP4095559B2 (ja) H.264コーデックic、dvd再生装置、h.264コーデック方法
JP2005123789A (ja) Av同期システム
US7894704B2 (en) Reproducing apparatus and method, and recording medium
JP2008300911A (ja) 画像処理装置および方法、プログラム、並びに記録媒体
JP2006319552A (ja) マルチメディア再生装置
JP2012105236A (ja) 同期制御装置、同期制御方法
JP2007013714A (ja) 情報再生装置及び情報再生方法
JP2010068232A (ja) 映像記録再生装置
JP2006020102A (ja) 放送記録再生装置および放送記録再生処理プログラム
JP4856626B2 (ja) 記録装置、再生装置、記録媒体、記録方法、及びlsi
JP2003348543A (ja) データ復号器およびデータ復号化方法
JP2006352587A (ja) 情報処理装置
JP4690965B2 (ja) データ記録再生装置
JP2006330541A (ja) 音声受信再生装置
JP2005303816A (ja) 動画再生装置
JP5168105B2 (ja) 音声再生装置、及び音声再生方法
JP2009218934A (ja) 映像再生装置及び映像再生方法
JP2010233119A (ja) ビデオエンコーダ装置及び該ビデオエンコーダ装置に用いられる符号化データ出力方法
JP2008011337A (ja) 再生装置及び再生方法
JP2004228627A (ja) データ処理装置、データ再生装置、データ処理方法及びデータ再生方法
JP2001069467A (ja) データ再生装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20080508

A761 Written withdrawal of application

Free format text: JAPANESE INTERMEDIATE CODE: A761

Effective date: 20090129