JP4991129B2 - 映像音声再生装置および映像音声再生方法 - Google Patents

映像音声再生装置および映像音声再生方法 Download PDF

Info

Publication number
JP4991129B2
JP4991129B2 JP2005208247A JP2005208247A JP4991129B2 JP 4991129 B2 JP4991129 B2 JP 4991129B2 JP 2005208247 A JP2005208247 A JP 2005208247A JP 2005208247 A JP2005208247 A JP 2005208247A JP 4991129 B2 JP4991129 B2 JP 4991129B2
Authority
JP
Japan
Prior art keywords
video
audio
output
stream
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2005208247A
Other languages
English (en)
Other versions
JP2007028261A (ja
Inventor
和幸 小柳
知浩 三原
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sharp NEC Display Solutions Ltd
Original Assignee
NEC Display Solutions Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Display Solutions Ltd filed Critical NEC Display Solutions Ltd
Priority to JP2005208247A priority Critical patent/JP4991129B2/ja
Priority to US11/444,452 priority patent/US8620134B2/en
Priority to CN2006100932213A priority patent/CN1901656B/zh
Priority to CNU2006201213326U priority patent/CN2927556Y/zh
Publication of JP2007028261A publication Critical patent/JP2007028261A/ja
Application granted granted Critical
Publication of JP4991129B2 publication Critical patent/JP4991129B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/2368—Multiplexing of audio and video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H04N21/43079—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of additional data with content streams on multiple devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4341—Demultiplexing of audio and video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/44004—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving video buffer management, e.g. video decoder buffer or video display buffer
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440263—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the spatial resolution, e.g. for displaying on a connected PDA
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/8106—Monomedia components thereof involving special audio data, e.g. different tracks for different languages

Description

本発明は、映像音声再生装置および映像音声再生方法に関し、特には、ＭＰＥＧ（Moving Picture Experts Group）形式のストリーム等の映像音声ストリームを再生する映像音声再生装置および映像音声再生方法に関する。
従来、映像音声ストリームを再生する映像音声再生装置が知られている。例えば、ＭＰＥＧ形式のストリームを再生する映像音声再生装置が知られている。
ＭＰＥＧ形式のストリームの送信および再生は、以下のように行われる。
まず、ＭＰＥＧ形式のストリームを送信する送信部について説明する。
送信部は、映像信号を符号化して、複数の映像フレームにて構成されるＭＰＥＧ映像ストリームを生成する。また、送信部は、その映像信号と同期している音声信号を符号化して、複数の音声フレームにて構成されるＭＰＥＧ音声ストリームを生成する。
続いて、送信部は、ＭＰＥＧ映像ストリームを分割して映像データを生成し、その生成された映像データを、ＰＥＳ（Packetized Elementary Stream）パケットに組み込む。また、送信部は、ＭＰＥＧ音声ストリームを分割して音声データを生成し、その生成された音声データを、映像データを含まないＰＥＳパケットに組み込む。ＰＥＳパケットは、映像と音声の同期をとるために使用される時刻情報を含む。
図５は、ＰＥＳパケットを示した説明図である。
図５に示すように、ＰＥＳパケット１００は、ＰＴＳ（Presentation Time Stamp）１００ａと、ＤＴＳ（Decoding Time Stamp）１００ｂとを含む。
ＤＴＳ１００ｂは、ＰＥＳパケット１００に組み込まれたデータをデコードする時刻（デコードタイミング）を示す。また、ＰＴＳ１００ａは、ＰＥＳパケット１００に組み込まれたデータを再生する時刻（出力タイミング）を示す。
送信部は、ある映像フレームのデータを含むＰＥＳパケットのＰＴＳと、その映像フレームと同期する音声フレームのデータを含むＰＥＳパケットのＰＴＳとを、同じ値にする。このため、映像と音声の同期が取られる。
その後、送信部は、映像データを含むＰＥＳパケットと、音声データを含むＰＥＳパケットと、を含むＭＰＥＧ形式のストリーム（映像音声ストリーム）を送信する。よって、ＭＰＥＧ形式のストリームは、同じ出力タイミングを示すＰＴＳを有する映像データおよび音声データの組を複数有する。
次に、ＭＰＥＧ形式のストリームを再生する再生部について説明する。
図６は、従来の再生部を示したブロック図である。
図６において、再生部は、ＭＰＥＧデコーダ１と、表示部２と、音声出力部３とを含む。
ＭＰＥＧデコーダ１は、送信部から送信されたＭＰＥＧ形式のストリーム（映像音声ストリーム）をデコードして、映像信号と音声信号を生成する。ＭＰＥＧデコーダ１は、その生成された映像信号を表示部２に出力し、また、その生成された音声信号を音声出力部３に出力する。
表示部２は、ＭＰＥＧデコーダ１から映像信号を受け付けると、その受け付けられた映像信号に応じた映像を表示する。
音声出力部３は、ＭＰＥＧデコーダ１から音声信号を受け付けると、その受け付けられた音声信号に応じた音声を出力する。
ＭＰＥＧデコーダ１は、分離回路１ａと、バッファ１ｂおよび１ｃと、システムデコーダ１ｄと、ビデオデコーダ１ｅと、オーディオデコーダ１ｆとを含む。
分離回路１ａは、送信部から送信されたＭＰＥＧ形式のストリームから、映像データ、音声データ、ＰＴＳおよびＤＴＳを分離する。分離回路１ａは、映像データをバッファ１ｂに格納し、音声データをバッファ１ｃに格納し、ＰＴＳおよびＤＴＳをシステムデコーダ１ｄに出力する。
バッファ１ｂは、分離回路１ａから提供された映像データを格納する。
バッファ１ｃは、分離回路１ａから提供された音声データを格納する。
システムデコーダ１ｄは、映像データのＤＴＳに示された時刻になると、ビデオデコーダ１ｅにデコード指示を出力し、また、映像データのＰＴＳに示された時刻になると、ビデオデコーダ１ｅに出力指示を出力する。
また、システムデコーダ１ｄは、音声データのＤＴＳに示された時刻になると、オーディオデコーダ１ｆにデコード指示を出力し、また、音声データのＰＴＳに示された時刻になると、オーディオデコーダ１ｆに出力指示を出力する。
ビデオデコーダ１ｅは、デコード指示を受け付けると、バッファ１ｂに格納された映像データをデコードして映像信号を生成し、また、出力指示を受け付けると、その生成された映像信号を表示部２に出力する。
オーディオデコーダ１ｆは、デコード指示を受け付けると、バッファ１ｃに格納された音声データをデコードして音声信号を生成し、また、出力指示を受け付けると、その生成された音声信号を音声出力部３に出力する。
特許文献１（特開２００２−３５４４１９号公報）には、ＭＰＥＧ形式のストリームを再生する記録再生装置が記載されている。
この記録再生装置は、早送り等の特殊再生時に、滑らかに変化する映像と、その映像に同期した音声と、を出力するように、特殊再生の再生速度に対応してＤＴＳの値およびＰＴＳの値を書き換える。
この記録再生装置は、ある映像フレームのＰＴＳの値と、その映像フレームに同期する音声フレームのＰＴＳの値とを、同じ値に書き換える。
一方、液晶表示装置またはプラズマ表示装置のような表示デバイスでは、画素数が固定されている。画素数が固定の表示デバイスは、入力する映像信号の解像度と自己の解像度が異なる場合でも、その入力する映像信号に応じた画像を表示できるように、解像度変換と呼ばれる映像信号処理を行う。
図７は、解像度変換を行う表示部２を含む再生装置を示したブロック図である。なお、図７において、図６に示したものと同一のものには同一符号を付してある。
図７において、表示部２は、映像信号処理部２ａと、駆動回路２ｂと、画素数が固定の表示デバイス２ｃとを含む。映像信号処理部２ａは、メモリ２ａ１と、解像度変換回路２ａ２とを含む。音声出力部３は、音声出力回路３ａと、スピーカー３ｂとを含む。
映像信号処理部２ａは、ＭＰＥＧデコーダ１から受け付けた映像信号の解像度を、表示デバイス２ｃの解像度に基づいて変換する。
具体的には、解像度変換回路２ａ２は、ＭＰＥＧデコーダ１から受け付けた映像信号を、一定時間、メモリ２ａ１に格納し、その後、メモリ２ａ１に格納された映像信号の解像度を変換する。
駆動回路２ｂは、解像度変換回路２ａ２にて解像度が変換された映像信号に基づいて表示デバイス２ｃを駆動して、映像信号に応じた映像を表示デバイス２ｃに表示する。
音声出力回路３ａは、ＭＰＥＧデコーダ１から受け付けた音声信号に基づいてスピーカー３ｂを駆動して、音声信号に応じた音声をスピーカー３ｂから出力する。
特開２００２−３５４４１９号公報
映像信号処理部２ａは、ＭＰＥＧデコーダ１から受け付けた映像信号を一定時間メモリ２ａ１に格納し、その後、解像度変換を行う。このため、表示デバイス２ｃの表示タイミングは、解像度変換に要する時間だけ遅れる。
なお、映像信号処理部２ａは、解像度変換と異なる映像信号処理も行う。このため、実際には、表示デバイス２ｃの表示タイミングは、それらの映像信号処理に要する時間だけ遅れる。
一方、音声出力部３では、映像信号処理と同等な遅延は発生しない。
したがって、例えば、ＭＰＥＧデコーダ１が、ＤＴＳの値およびＰＴＳの値に基づいて映像と音声を同期させても、表示部２にて実行される映像信号処理によって、映像が音声より遅れて出力される。
図８は、映像の遅延を説明するためのタイミングチャートである。図８（ａ）は、映像信号のメモリ２ａ１への書き込みタイミングを示し、図８（ｂ）は、映像信号のメモリ２ａ１からの読み出しタイミングを示し、図８（ｃ）は、音声信号の出力タイミングを示している。
図８（ａ）および（ｃ）に示すように、映像信号処理が実行される以前では、ＰＴＳの値が等しい映像フレーム（映像信号）および音声フレーム（音声信号）は、同期している。
しかしながら、図８（ｂ）および（ｃ）に示すように、映像信号処理が実行されると、ＰＴＳの値が等しい映像フレームおよび音声フレームでは、映像フレームが、音声フレームより遅れて出力される（図８（ｃ）の遅延Ａ参照）。
なお、特許文献１に記載の記録再生装置は、ある映像フレームのＰＴＳの値と、その映像フレームに同期する音声フレームのＰＴＳの値とを、同じ値に書き換える。このため、特許文献１に記載の記録再生装置が、ＭＰＥＧデコーダ１として用いられても、映像信号処理に起因する映像の遅延は生じる。
従来の装置は、映像と音声を、互いの出力タイミングがずれたまま出力するか、もしくは、映像と音声の同期を取る場合には、音声信号用の遅延回路等のハードウェアを必要としていた。
本発明の目的は、解像度変換のような映像信号処理が実行されても、音声信号用の遅延回路を用いることなく、映像と音声を同期させることが可能な映像音声再生装置および映像音声再生方法を提供することである。
上記の目的を達成するために、本発明の映像音声再生装置は、映像の出力タイミングを示す映像出力情報を有する映像データと、音声の出力タイミングを示す音声出力情報を有する音声データと、を含む映像音声ストリームを再生する映像音声再生装置であって、前記映像音声ストリームを受け付けると、前記音声の出力タイミングが遅延するように前記音声出力情報を変更し、かつ、前記映像出力情報を維持する変更部と、前記音声データをデコードして音声信号を生成し、該音声信号を、前記変更部にて変更された音声出力情報にて示された出力タイミングで出力し、また、前記映像データをデコードして映像信号を生成し、該映像信号を、前記映像出力情報にて示された出力タイミングで出力するデコーダと、前記デコーダから出力された映像信号に応じた映像を表示する表示部と、前記デコーダにて出力された音声信号に応じた音声を出力する音声出力部とを含む。
また、本発明の映像音声再生方法は、映像の出力タイミングを示す映像出力情報を有する映像データと、音声の出力タイミングを示す音声出力情報を有する音声データと、を含む映像音声ストリームを再生する映像音声再生装置が行う映像音声再生方法であって、前記映像音声ストリームを受け付ける受付ステップと、前記映像音声ストリームが受け付けられると、前記音声の出力タイミングが遅延するように前記音声出力情報を変更し、かつ、前記映像出力情報を維持する変更ステップと、前記映像データをデコードして映像信号を生成し、該映像信号を、前記映像出力情報にて示された出力タイミングで出力する映像デコードステップと、前記音声データをデコードして音声信号を生成し、該音声信号を、前記変更された音声出力情報にて示された出力タイミングで出力する音声デコードステップと、前記出力された映像信号に応じた映像を表示する表示ステップと、前記出力された音声信号に応じた音声を出力する音声出力ステップとを含む。
上記の発明によれば、音声の出力タイミングが遅延するように、音声出力情報が変更され、かつ、映像出力情報が維持される。
このため、音声出力情報を変更することによって、映像信号処理に起因する映像の遅延時間と同じ時間だけ、音声を遅延させることが可能になる。よって、音声信号用の遅延回路を用いずに、映像と音声を同期させることが可能になる。
また、前記映像信号の処理に要する時間が検出され、前記音声データの出力タイミングが、前記検出された時間だけ遅延するように、前記音声出力情報が変更されることが望ましい。
例えば、ＮＴＳＣ（National Television Standards Committee）信号とＰＡＬ（Phase Alternation by Line）信号のような異なる形式の映像信号が処理される場合、その処理時間が異なる可能性がある。
上記の発明によれば、音声出力情報が、検出された処理時間に応じて自動的に変更される。このため、映像信号の形式に応じて自動的に音声出力情報を変更して、音声と映像を同期させることが可能となる。
また、前記処理は、前記映像信号の解像度を変換する処理であることが望ましい。
上記の発明によれば、解像度変換に起因する映像の遅延が発生しても、音声の出力タイミングを、その遅延分だけを遅らせることが可能になる。
また、前記映像音声ストリームは、ＭＰＥＧ形式のストリームであり、前記映像データは、ＭＰＥＧ映像ストリームに含まれ、前記音声データは、ＭＰＥＧ音声ストリームに含まれ、前記出力情報は、ＰＴＳであることが望ましい。
上記の発明によれば、ＭＰＥＧ形式のストリームを再生する際に、ＰＴＳを変更することによって、映像信号処理に起因する映像の遅延時間と同じ時間だけ、音声を遅延させることが可能になる。よって、音声信号用の遅延回路を用いずに、映像と音声を同期させることが可能になる。
また、前記ＰＴＳとともに、デコードタイミングを示すＤＴＳが変更されることが望ましい。
上記の発明によれば、ＭＰＥＧ形式のストリームを再生する際に、ＰＴＳおよびＤＴＳを変更することによって、映像信号処理に起因する映像の遅延時間と同じ時間だけ、音声を遅延させることが可能になる。よって、音声信号用の遅延回路を用いずに、映像と音声を同期させることが可能になる。
また、本発明の映像音声再生装置は、映像の出力タイミングを示す映像出力情報を有する映像データと、音声の出力タイミングを示す音声出力情報を有する音声データと、を含む映像音声ストリームを再生する映像音声再生装置であって、前記映像音声ストリームを受け付けると、前記音声の出力タイミングの遅延時間が、前記映像の出力タイミングの遅延時間より長くなるように、前記音声出力情報および前記映像出力情報を変更する変更部と、前記音声データをデコードして音声信号を生成し、該音声信号を、前記変更部にて変更された音声出力情報にて示された出力タイミングで出力し、また、前記映像データをデコードして映像信号を生成し、該映像信号を、前記変更部にて変更された映像出力情報にて示された出力タイミングで出力するデコーダと、前記デコーダから出力された映像信号に応じた映像を表示する表示部と、前記デコーダから出力された音声信号に応じた音声を出力する音声出力部とを含む。
また、本発明の映像音声再生方法は、映像の出力タイミングを示す映像出力情報を有する映像データと、音声の出力タイミングを示す音声出力情報を有する音声データと、を含む映像音声ストリームを再生する映像音声再生装置が行う映像音声再生方法であって、前記映像音声ストリームを受け付ける受付ステップと、前記映像音声ストリームが受け付けられると、前記音声の出力タイミングの遅延時間が、前記映像の出力タイミングの遅延時間より長くなるように、前記音声出力情報および前記映像出力情報を変更する変更ステップと、前記映像データをデコードして映像信号を生成し、該映像信号を、前記変更された映像出力情報にて示された出力タイミングで出力する映像デコードステップと、前記音声データをデコードして音声信号を生成し、該音声信号を、前記変更部にて変更された音声出力情報にて示された出力タイミングで出力する音声デコードステップと、前記出力された映像信号に応じた映像を表示する表示ステップと、前記出力された音声信号に応じた音声を出力する音声出力ステップとを含む。
上記の発明によれば、音声の出力タイミングの遅延時間が、映像の出力タイミングの遅延時間より長くなるように、音声出力情報および映像出力情報が変更される。
このため、音声出力情報および映像出力情報を変更することによって、映像信号処理に起因する映像の遅延時間と同じ時間だけ、音声を遅延させることが可能になる。よって、音声信号用の遅延回路を用いずに、映像と音声を同期させることが可能になる。
また、音声出力情報と映像出力情報とが変更されるため、音声と映像の両方の出力タイミングを調整することが可能になる。
本発明によれば、解像度変換のような映像信号処理が実行されても、音声信号用の遅延回路を用いることなく、映像と音声を同期させることが可能になる。
以下、本発明の実施例を図面を参照して説明する。
図１は、本発明の一実施例の映像音声再生装置を示したブロック図である。なお、図１において、図７に示したものと同一のものには同一符号を付してある。
本映像音声再生装置では、図７に示した再生装置に、時刻情報変換部４が加えられている。
図１において、本映像音声再生装置は、ＭＰＥＧデコーダ１と、表示部２と、音声出力部３と、時刻情報変換部４とを含む。
時刻情報変換部４は、変更部の一例であり、ＭＰＥＧ形式のストリーム（映像音声ストリーム）を受け付ける。
ＭＰＥＧ形式のストリームは、映像データおよび所定の値のＰＴＳ（映像出力情報）を含むＰＥＳパケットと、音声データおよび所定の値のＰＴＳ（音声出力情報）を含むＰＥＳパケットと、を含む。
このため、例えば、ＭＰＥＧ形式のストリームは、同じ出力タイミングを示すＰＴＳを有する映像データおよび音声データの組を複数有する。
時刻情報変換部４は、ＭＰＥＧ形式のストリームを受け付けると、ＭＰＥＧ形式のストリームに含まれる音声データの出力タイミングが遅延するように、ＭＰＥＧ形式のストリームに含まれる音声データのＰＴＳを変更する。
例えば、時刻情報変換部４は、音声データの出力タイミングが、映像信号処理部２ａにて実行される映像信号処理に費やされる処理時間だけ遅れるように、ＭＰＥＧ形式のストリームに含まれる音声データのＰＴＳを変更する。具体的には、時刻情報変換部４は、音声データのＰＴＳの値に、その処理時間を加算する。
なお、時刻情報変換部４は、ＭＰＥＧ形式のストリームに含まれる映像データのＰＴＳを変更せずに維持する。
図２は、時刻情報変換部４の一例を示したブロック図である。なお、時刻情報変換部４は、図２に示した構成に限らず適宜変更可能である。
図２において、時刻情報変換部４は、入力部４ａと、メモリ４ｂと、加算部４ｃとを含む。
入力部４ａは、音声データのＰＴＳの値に加算する値を受け付ける。例えば、入力部４ａは、ユーザから、音声データのＰＴＳの値に加算する値を受け付ける。
本実施例では、入力部４ａは、映像信号処理部２ａにて実行される映像信号処理に費やされる処理時間を受け付ける。なお、入力部４ａにて受け付けられる値は、適宜変更可能である。
メモリ４ｂは、入力部４ａにて受け付けられた値を格納する。
加算部４ｃは、メモリ４ｂに格納された値を、音声データのＰＴＳの値に加算する。よって、音声の出力タイミングは遅延される。
なお、本実施例では、加算部４ｃは、メモリ４ｂに格納された値を、音声データのＤＴＳの値にも加算する。このため、音声データのデコードタイミングも遅延される。
図１に戻って、時刻情報変換部４は、音声データのＰＴＳおよびＤＴＳを変更したＭＰＥＧ形式のストリームを、ＭＰＥＧデコーダ１に出力する。
ＭＰＥＧデコーダ１は、ＭＰＥＧ形式のストリームを受け付けると、そのＭＰＥＧ形式のストリームに含まれる映像データを、その映像データのＤＴＳにて示されたデコードタイミングでデコードして、映像信号を生成する。
その後、ＭＰＥＧデコーダ１は、その生成された映像信号を、その映像データのＰＴＳにて示された出力タイミングで、表示部２に出力する。
また、ＭＰＥＧデコーダ１は、ＭＰＥＧ形式のストリームを受け付けた際、そのＭＰＥＧ形式のストリームに含まれる音声データを、時刻情報変換部４にて変更されたその音声データのＤＴＳにて示されたデコードタイミングでデコードして、音声信号を生成する。
その後、ＭＰＥＧデコーダ１は、その生成された音声信号を、時刻情報変換部４にて変更されたその音声データのＰＴＳにて示された出力タイミングで、音声出力部３に出力する。
なお、時刻情報変換部４が、音声データのＰＴＳの値を変更して音声データの出力タイミングを遅延させているため、ＭＰＥＧデコーダ１から出力される音声信号は、その音声信号と同期すべき映像信号より、時間的に遅れて出力される。
解像度変換回路２ａ２は、音声信号より前に出力された映像信号をメモリ２ａ１に格納し、その後、メモリ２ａ１に格納された映像信号の解像度を、表示デバイス２ｃの解像度に基づいて変換する。
解像度変換回路２ａ２は、解像度が変換された映像信号を駆動回路２ｂに出力する。
このとき、具体的には、解像度変換回路２ａ２が映像信号を出力したときが、音声データのＰＴＳの値に示された出力タイミングとなる。このため、ＭＰＥＧデコーダ１は、このタイミングで音声信号を出力する。
よって、駆動回路２ｂが映像信号を受け付けるタイミングは、音声出力回路３ａが音声信号を受け付けるタイミングと同期する。
駆動回路２ｂは、解像度変換回路２ａ２にて解像度が変換された映像信号に基づいて表示デバイス２ｃを駆動して、映像信号に応じた映像を表示デバイス２ｃに表示する。
音声出力回路３ａは、ＭＰＥＧデコーダ１から受け付けた音声信号に基づいてスピーカー３ｂを駆動して、音声信号に応じた音声をスピーカー３ｂから出力する。
このため、映像と音声が同期する。
次に、動作を説明する。
ユーザは、例えば、映像信号処理部２ａにて実行される映像信号処理に費やされる処理時間を、入力部４ａに入力する。
入力部４ａは、その入力された処理時間を受け付けると、その受け付けられた処理時間をメモリ４ｂに格納する。
加算部４ｃは、ＭＰＥＧ形式のストリームを受け付けると、そのＭＰＥＧ形式のストリームに含まれる音声データのＰＴＳおよびＤＴＳに、メモリ４ｂに格納された処理時間を加算する。
加算部４ｃは、音声データのＰＴＳおよびＤＴＳを変更したＭＰＥＧ形式のストリームを、ＭＰＥＧデコーダ１（具体的には、分離回路１ａ）に出力する。
分離回路１ａは、加算部４ｃから送信されたＭＰＥＧ形式のストリームから、映像データ、音声データ、ＰＴＳおよびＤＴＳを分離する。
分離回路１ａは、その分離された映像データをバッファ１ｂに格納し、その分離された音声データをバッファ１ｃに格納し、その分離されたＰＴＳおよびＤＴＳをシステムデコーダ１ｄに出力する。
システムデコーダ１ｄは、バッファ１ｂに格納されている映像データのＤＴＳに示された時刻になると、ビデオデコーダ１ｅにデコード指示を出力し、また、その映像データのＰＴＳに示された時刻になると、ビデオデコーダ１ｅに出力指示を出力する。
また、システムデコーダ１ｄは、バッファ１ｃに格納されている音声データのＤＴＳに示された時刻になると、オーディオデコーダ１ｆにデコード指示を出力し、また、その音声データのＰＴＳに示された時刻になると、オーディオデコーダ１ｆに出力指示を出力する。
ビデオデコーダ１ｅは、システムデコーダ１ｄからデコード指示を受け付けると、バッファ１ｂに格納されている映像データをデコードして映像信号を生成し、システムデコーダ１ｄから出力指示を受け付けると、その生成された映像信号を表示部２に出力する。
オーディオデコーダ１ｆは、システムデコーダ１ｄからデコード指示を受け付けると、バッファ１ｃに格納されている音声データをデコードして音声信号を生成し、システムデコーダ１ｄから出力指示を受け付けると、その生成された音声信号を音声出力部３に出力する。
なお、時刻情報変換部４が、音声データのＰＴＳの値を変更して音声データの出力タイミングを遅延させているため、ＭＰＥＧデコーダ１から出力される音声信号は、その音声信号と同期すべき映像信号より後に出力される。
表示部２の解像度変換回路２ａ２は、音声信号より前に出力された映像信号をメモリ２ａ１に格納し、その後、メモリ２ａ１に格納された映像信号の解像度を、表示デバイス２ｃの解像度に基づいて変換する。
解像度変換回路２ａ２は、解像度が変換された映像信号を駆動回路２ｂに出力する。
このとき、具体的には、解像度変換回路２ａ２が映像信号を出力したとき、ＭＰＥＧデコーダ１は、音声信号を出力する。
よって、表示部２の駆動回路２ｂが映像信号を受け付けるタイミングは、音声出力部３の音声出力回路３ａが音声信号を受け付けるタイミングと同期する。
駆動回路２ｂは、解像度変換回路２ａ２にて解像度が変換された映像信号に基づいて表示デバイス２ｃを駆動して、映像信号に応じた映像を表示デバイス２ｃに表示する。
音声出力回路３ａは、ＭＰＥＧデコーダ１から受け付けた音声信号に基づいてスピーカー３ｂを駆動して、音声信号に応じた音声をスピーカー３ｂから出力する。
このため、映像と音声が同期する。
本実施例によれば、時刻情報変換部４は、音声の出力タイミングが遅延するように音声データのＰＴＳ（音声出力情報）を変更し、かつ、映像データのＰＴＳを変更せずに維持する。
このため、音声データのＰＴＳを変更することによって、映像信号処理に起因する映像の遅延時間と同じ時間だけ、音声を遅延させることが可能になる。よって、音声信号用の遅延回路を用いずに、映像と音声を同期させることが可能になる。
また、音声データのＰＴＳはデジタル値なので、音声を遅延時間の設定が容易になる。
また、本実施例によれば、ＭＰＥＧ形式のストリームが、映像音声ストリームとして用いられ、映像データは、ＭＰＥＧ映像ストリームに含まれ、音声データは、ＭＰＥＧ音声ストリームに含まれ、ＰＴＳが音声出力情報および映像出力情報として用いられる。
この場合、ＭＰＥＧ形式のストリームを再生する際に、ＰＴＳを変更することによって、映像信号処理に起因する映像の遅延時間と同じ時間だけ、音声を遅延させることが可能になる。
よって、ＭＰＥＧ形式のストリームを再生する際に、音声信号用の遅延回路を用いずに、映像と音声を同期させることが可能になる。
また、本実施例では、時刻情報変換部４は、音声データのＰＴＳとともに、音声データのＤＴＳを変更する。
この場合、ＭＰＥＧ形式のストリームを再生する際に、ＰＴＳおよびＤＴＳを変更することによって、映像信号処理に起因する映像の遅延時間と同じ時間だけ、音声を遅延させることが可能になる。また、音声データのデコードタイミングを、音声信号の出力タイミングに応じて調整することが可能となる。
よって、ＭＰＥＧ形式のストリームを再生する際に、音声信号用の遅延回路を用いずに、映像と音声を同期させることが可能になる。
次に、本発明の他の実施例を説明する。
図３は、本発明の他の実施例の映像音声再生装置を示したブロック図である。なお、図３において、図１に示したものと同一のものには同一符号を付してある。
図３に示した映像音声再生装置では、図１に示した映像音声再生装置に、検出部２ａ３が加えられている。
検出部２ａ３は、映像信号処理部２ａにて実行される映像信号処理に要する時間を検出する。本実施例では、検出部２ａ３は、解像度変換回路２ａ２にて実行される解像度変換に要する時間を検出する。なお、検出部２ａ３は、解像度変換に要する時間だけでなく、映像信号処理部２ａにて実行されるすべての映像信号処理に要する時間を検出してもよい。
映像信号処理部２ａが、例えばＮＴＳＣ信号とＰＡＬ信号のような異なる形式の映像信号を処理する場合、映像信号処理部２ａの処理時間は、処理する信号の形式に応じて、変化する可能性がある。検出部２ａ３は、その変化する処理時間を検出する。
検出部２ａ３は、その検出された時間（遅延情報）を、時刻情報変換部４（具体的には入力部４ａ）に提供する。
入力部４ａは、その検出された時間を受け付けると、その受け付けられた時間をメモリ４ｂに格納する。
加算部４ｃは、ＭＰＥＧ形式のストリームを受け付けると、そのストリーム内の音声データのＰＴＳおよびＤＴＳに、メモリ４ｂに格納された処理時間を加算する。加算部４ｃは、音声データのＰＴＳおよびＤＴＳを変更したＭＰＥＧ形式のストリームを、ＭＰＥＧデコーダ１（具体的には、分離回路１ａ）に出力する。
本実施例によれば、時刻情報変換部４は、音声データの出力タイミングが、映像信号処理部２ａにて検出された処理時間だけ遅延するように、音声データのＰＴＳを変更する。
この場合、映像信号の形式に応じて変化する処理時間に基づいて、音声出力情報を自動的に変更するため、映像信号の形式が変わっても、音声と映像を同期させることが可能となる。
また、メモリ４ｂに格納される値を自動的に適切な値に変更することが可能となる。
また、本実施例では、映像信号処理部２ａは、映像信号の解像度を変換する処理に要する時間を検出する。
この場合、解像度変換に起因する映像の遅延が発生しても、音声の出力タイミングを、その遅延分だけを遅らせることが可能になる。
なお、時刻情報変換部４は、以下のように変形されてもよい。
時刻情報変換部４は、ＭＰＥＧ形式のストリームを受け付けると、そのストリーム内の音声データの出力タイミングの遅延時間が、そのストリーム内の映像データの出力タイミングの遅延時間より長くなるように、その音声データのＰＴＳおよび映像データのＰＴＳを変更する。
時刻情報変換部４は、音声データのＰＴＳおよび映像データのＰＴＳを変更したＭＰＥＧ形式のストリームを、ＭＰＥＧデコーダ１に出力する。
図４は、時刻情報変換部４の変形例である時刻情報変換部４０を示したブロック図である。なお、図４において、図２に示したものと同じものには、同一符号を付してある。また、時刻情報変換部４の変形例は、図４に示した構成に限らず適宜変更可能である。
図４において、時刻情報変換部４０は、入力部４ａと、メモリ４ｂと、メモリ４０ａと、加算部４０ｂとを含む。
メモリ４０ａは、映像データの出力タイミングの遅延時間を格納する。
加算部４０ｂは、ＭＰＥＧ形式のストリームを受け付けると、そのストリーム内の映像データのＰＴＳおよびＤＴＳに、メモリ４０ａに格納された遅延時間を加算し、また、そのストリーム内の音声データのＰＴＳおよびＤＴＳに、メモリ４０ａに格納された処理時間とメモリ４ｂに格納された処理時間とを加算する。
加算部４０ｂは、ＰＴＳおよびＤＴＳを変更したＭＰＥＧ形式のストリームを、ＭＰＥＧデコーダ１（具体的には、分離回路１ａ）に出力する。
この場合、ＭＰＥＧデコーダ１は、以下のように動作する。
ＭＰＥＧデコーダ１は、時刻情報変換部４０からＭＰＥＧ形式のストリームを受け付けると、そのストリーム内の映像データを、加算部４０ｂにて変更されたその映像データのＤＴＳにて示されたデコードタイミングでデコードして、映像信号を生成する。
その後、ＭＰＥＧデコーダ１は、その生成された映像信号を、加算部４０ｂにて変更されたその映像データのＰＴＳにて示された出力タイミングで、表示部２に出力する。
また、ＭＰＥＧデコーダ１は、ＭＰＥＧ形式のストリームを受け付けた際、そのストリーム内の音声データを、加算部４０ｂにて変更されたその音声データのＤＴＳにて示されたデコードタイミングでデコードして、音声信号を生成する。
その後、ＭＰＥＧデコーダ１は、その生成された音声信号を、加算部４０ｂにて変更されたその音声データのＰＴＳにて示された出力タイミングで、音声出力部３に出力する。
本変形例によれば、時刻情報変更部４０は、音声の出力タイミングの遅延時間が、映像の出力タイミングの遅延時間より長くなるように、音声データのＰＴＳおよび映像データのＰＴＳを変更する。
この場合、音声データのＰＴＳおよび映像データのＰＴＳを変更することによって、映像信号処理に起因する映像の遅延時間と同じ時間だけ、音声を映像に対して遅延させることが可能になる。よって、音声信号用の遅延回路を用いずに、映像と音声を同期させることが可能になる。
また、音声データのＰＴＳと映像データのＰＴＳとが変更されるため、音声と映像の両方の出力タイミングを調整することが可能になる。
以上説明した各実施例において、図示した構成は単なる一例であって、本発明はその構成に限定されるものではない。
本発明の一実施例の映像音声再生装置を示したブロック図である。 時刻情報変換部４の一例を示したブロック図である。 本発明の他の実施例の映像音声再生装置を示したブロック図である。 時刻情報変換部４０の一例を示したブロック図である。 ＰＥＳパケットを示した説明図である。 従来の再生部を示したブロック図である。 従来の再生装置を示したブロック図である。 映像の遅延を説明するためのタイミングチャートである。
符号の説明
１ ＭＰＥＧデコーダ
１ａ 分離回路
１ｂ バッファ
１ｃ バッファ
１ｄ システムデコーダ
１ｅ ビデオデコーダ
１ｆ オーディオデコーダ
２ 表示部
２ａ 映像信号処理部
２ａ１ メモリ
２ａ２ 解像度変換回路
２ａ３ 検出部
２ｂ 駆動回路
２ｃ 表示デバイス
３ 音声出力部
３ａ 音声出力部
３ｂ スピーカー
４ 時刻情報変換部
４ａ 入力部
４ｂ メモリ
４ｃ 加算部
４０ 時刻情報変換部
４０ａ メモリ
４０ｂ 加算部

Claims (10)

  1. 映像の出力タイミングを示す映像出力情報を有する映像データと、音声の出力タイミングを示す音声出力情報を有する音声データと、を含む映像音声ストリームを再生する映像音声再生装置であって、
    前記映像音声ストリームを受け付けると、前記音声の出力タイミングの遅延時間が、前記映像の出力タイミングの遅延時間より長くなるように、前記音声出力情報および前記映像出力情報を変更する変更部と、
    前記音声データをデコードして音声信号を生成し、該音声信号を、前記変更部にて変更された音声出力情報にて示された出力タイミングで出力し、また、前記映像データをデコードして映像信号を生成し、該映像信号を、前記変更部にて変更された映像出力情報にて示された出力タイミングで出力するデコーダと、
    前記デコーダから出力された映像信号に対して映像信号処理を行い該映像信号処理が行われた映像信号に応じた映像を表示する表示部と、
    前記デコーダから出力された音声信号に応じた音声を出力する音声出力部と、を含み、
    前記変更部は、前記映像音声ストリームを受け付けると、前記映像の出力タイミングが所定の時間遅れ、前記音声の出力タイミングが前記所定の時間に前記映像信号処理に要する時間を加算した時間遅れることによって、前記音声の出力タイミングの遅延時間が、前記映像の出力タイミングの遅延時間より長くなるように、前記音声出力情報および前記映像出力情報を変更する、映像音声再生装置。
  2. 請求項１に記載の映像音声再生装置において、
    前記表示部は、前記映像信号を処理するとともに該処理に要する時間を検出する映像信号処理部を含み、
    前記変更部は、前記音声データの出力タイミングが、前記映像信号処理部にて検出された時間だけ遅延するように、前記音声出力情報を変更する、映像音声再生装置。
  3. 請求項２に記載の映像音声再生装置において、
    前記映像信号処理部は、前記映像信号の解像度を変換する処理を行う、映像音声再生装置。
  4. 請求項１ないし３に記載の映像音声再生装置において、
    前記映像音声ストリームは、ＭＰＥＧ形式のストリームであり、
    前記映像データは、ＭＰＥＧ映像ストリームに含まれ、
    前記音声データは、ＭＰＥＧ音声ストリームに含まれ、
    前記音声出力情報および前記映像出力情報は、ＰＴＳである、映像音声再生装置。
  5. 請求項４に記載の映像音声再生装置において、
    前記変更部は、前記ＭＰＥＧ形式のストリームを受け付けると、前記ＰＴＳとともに、前記音声データのデコードタイミングを示すＤＴＳを変更する、映像音声再生装置。
  6. 映像の出力タイミングを示す映像出力情報を有する映像データと、音声の出力タイミングを示す音声出力情報を有する音声データと、を含む映像音声ストリームを再生する映像音声再生装置が行う映像音声再生方法であって、
    前記映像音声ストリームを受け付ける受付ステップと、
    前記映像音声ストリームが受け付けられると、前記音声の出力タイミングの遅延時間が、前記映像の出力タイミングの遅延時間より長くなるように、前記音声出力情報および前記映像出力情報を変更する変更ステップと、
    前記映像データをデコードして映像信号を生成し、該映像信号を、前記変更された映像出力情報にて示された出力タイミングで出力する映像デコードステップと、
    前記音声データをデコードして音声信号を生成し、該音声信号を、前記変更部にて変更された音声出力情報にて示された出力タイミングで出力する音声デコードステップと、
    前記出力された映像信号に対して映像信号処理を行い該映像信号処理が行われた映像信号に応じた映像を表示する表示ステップと、
    前記出力された音声信号に応じた音声を出力する音声出力ステップと、を含み、
    前記変更ステップでは、前記映像音声ストリームが受け付けられると、前記映像の出力タイミングが所定の時間遅れ、前記音声の出力タイミングが前記所定の時間に前記映像信号処理に要する時間を加算した時間遅れることによって、前記音声の出力タイミングの遅延時間が、前記映像の出力タイミングの遅延時間より長くなるように、前記音声出力情報および前記映像出力情報を変更する、映像音声再生方法。
  7. 請求項６に記載の映像音声再生方法において、
    前記表示ステップは、
    前記出力された映像信号を処理する処理ステップと、
    前記処理に要する時間を検出する検出ステップと、
    前記処理された映像信号に応じた映像を表示する映像表示ステップと、を含み、
    前記変更ステップでは、前記音声データの出力タイミングが、前記検出された時間だけ遅延するように、前記音声出力情報を変更する、映像音声再生方法。
  8. 請求項７に記載の映像音声再生方法において、
    前記処理ステップでは、前記映像信号の解像度を変換する処理が行われる、映像音声再生方法。
  9. 請求項６ないし８に記載の映像音声再生方法において、
    前記映像音声ストリームは、ＭＰＥＧ形式のストリームであり、
    前記映像データは、ＭＰＥＧ映像ストリームに含まれ、
    前記音声データは、ＭＰＥＧ音声ストリームに含まれ、
    前記音声出力情報および前記映像出力情報は、ＰＴＳである、映像音声再生方法。
  10. 請求項９に記載の映像音声再生方法において、
    前記変更ステップでは、前記ＭＰＥＧ形式のストリームを受け付けると、前記ＰＴＳとともに、前記音声データのデコードタイミングを示すＤＴＳを変更する、映像音声再生方法。
JP2005208247A 2005-07-19 2005-07-19 映像音声再生装置および映像音声再生方法 Expired - Fee Related JP4991129B2 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP2005208247A JP4991129B2 (ja) 2005-07-19 2005-07-19 映像音声再生装置および映像音声再生方法
US11/444,452 US8620134B2 (en) 2005-07-19 2006-06-01 Video and audio reproducing apparatus and video and audio reproducing method for reproducing video images and sound based on video and audio streams
CN2006100932213A CN1901656B (zh) 2005-07-19 2006-06-23 视频和音频重放设备及方法、输出时刻改变设备及方法
CNU2006201213326U CN2927556Y (zh) 2005-07-19 2006-06-26 视频和音频重放设备、输出时刻改变设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2005208247A JP4991129B2 (ja) 2005-07-19 2005-07-19 映像音声再生装置および映像音声再生方法

Publications (2)

Publication Number Publication Date
JP2007028261A JP2007028261A (ja) 2007-02-01
JP4991129B2 true JP4991129B2 (ja) 2012-08-01

Family

ID=37657369

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2005208247A Expired - Fee Related JP4991129B2 (ja) 2005-07-19 2005-07-19 映像音声再生装置および映像音声再生方法

Country Status (3)

Country Link
US (1) US8620134B2 (ja)
JP (1) JP4991129B2 (ja)
CN (2) CN1901656B (ja)

Families Citing this family (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4544190B2 (ja) * 2006-03-31 2010-09-15 ソニー株式会社 映像音声処理システム、映像処理装置、音声処理装置、映像音声の出力装置および映像と音声の同期処理方法
US8027560B2 (en) * 2007-02-05 2011-09-27 Thales Avionics, Inc. System and method for synchronizing playback of audio and video
US20120219069A1 (en) * 2011-02-28 2012-08-30 Chong Soon Lim Methods and apparatuses for encoding and decoding images of a plurality of views using multiview video coding standard and mpeg-2 video standard
US9269399B2 (en) * 2011-06-13 2016-02-23 Voxx International Corporation Capture, syncing and playback of audio data and image data
CN103517044B (zh) * 2012-06-25 2016-12-07 鸿富锦精密工业（深圳）有限公司 视频会议装置及其唇形同步的方法
CN104871550B (zh) * 2012-08-01 2018-06-22 汤姆逊许可公司 用于使音频延时适应于画面帧速率的方法和装置
CN103581604A (zh) * 2012-08-01 2014-02-12 希姆通信息技术（上海）有限公司 视频通话装置及方法
DE112013005221T5 (de) * 2012-10-30 2015-08-20 Mitsubishi Electric Corporation Audio/Video-Reproduktionssystem, Video-Anzeigevorrichtung und Audio-Ausgabevorrichtung
CN104125493A (zh) * 2013-04-24 2014-10-29 鸿富锦精密工业（深圳）有限公司 影音同步系统及方法
CN103731716B (zh) * 2014-01-08 2017-01-18 珠海全志科技股份有限公司 一种ts流播放中的音视频同步方法
CN106302375B (zh) * 2015-06-29 2019-07-16 成都鼎桥通信技术有限公司 去除流媒体播放器时延累积的方法及装置
CN106470291A (zh) * 2015-08-19 2017-03-01 飞思卡尔半导体公司 从音频/视频解码器中的时间同步中的中断中恢复
CN106101694A (zh) * 2016-06-12 2016-11-09 深圳创维－Rgb电子有限公司 一种自动校准唇音同步的方法、装置和系统
US10798270B2 (en) 2017-03-10 2020-10-06 Sling Media Pvt. Ltd. Synchronizing media in multiple devices
CN114731456A (zh) * 2019-11-12 2022-07-08 索尼集团公司 信息处理装置、信息处理方法和程序
CN111479154B (zh) * 2020-04-03 2022-03-22 海信视像科技股份有限公司 音画同步的实现设备、方法及计算机可读存储介质
CN111757158A (zh) * 2020-06-29 2020-10-09 北京百度网讯科技有限公司 音视频同步播放方法、装置、设备和存储介质
CN117241080A (zh) * 2022-06-06 2023-12-15 中兴通讯股份有限公司 音视频处理方法及其装置、存储介质
WO2024025076A1 (ko) * 2022-07-26 2024-02-01 삼성전자 주식회사 외부 객체로부터 출력된 소리 신호를 이용하여 볼륨을 조절하기 위한 전자 장치 및 그 방법

Family Cites Families (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5652627A (en) * 1994-09-27 1997-07-29 Lucent Technologies Inc. System and method for reducing jitter in a packet-based transmission network
ID27984A (id) * 1998-05-08 2001-05-03 Koninkl Philips Electronics Nv Metode penyimpanan audio dan video digital yang terkompresi
JP2001251616A (ja) * 2000-03-02 2001-09-14 Media Glue Corp 多重化音響・動画圧縮符号化信号変換方法、装置および変換プログラムを記録した媒体
JP2001291342A (ja) * 2000-04-06 2001-10-19 Matsushita Electric Ind Co Ltd ディジタル情報記録再生装置
US6738427B2 (en) * 2000-09-15 2004-05-18 International Business Machines Corporation System and method of processing MPEG streams for timecode packet insertion
JP2002101395A (ja) * 2000-09-21 2002-04-05 Sony Corp 多重化装置及び方法、並びに、復号装置及び方法
US6724825B1 (en) * 2000-09-22 2004-04-20 General Instrument Corporation Regeneration of program clock reference data for MPEG transport streams
JP4208398B2 (ja) * 2000-10-05 2009-01-14 株式会社東芝 動画像復号再生装置、動画像復号再生方法及びマルチメディア情報受信装置
JP2002176643A (ja) 2000-12-06 2002-06-21 Hitachi Kokusai Electric Inc 映像・音声復号処理における映像・音声の同期再生方式
JP2002344898A (ja) 2001-05-17 2002-11-29 Pioneer Electronic Corp 映像表示装置、音声調整装置及び映像音声出力装置、並びに映像音声同期方法
JP2002354419A (ja) 2001-05-25 2002-12-06 Sony Corp 記録再生装置および方法、記録媒体、並びにプログラム
US7068719B2 (en) * 2001-06-01 2006-06-27 General Instrument Corporation Splicing of digital video transport streams
US20030066094A1 (en) * 2001-09-29 2003-04-03 Koninklijke Philips Electronics N.V. Robust method for recovering a program time base in MPEG-2 transport streams and achieving audio/video sychronization
JP3764878B2 (ja) 2001-10-18 2006-04-12 松下電器産業株式会社 映像音声再生装置，映像音声再生方法，プログラム，および媒体
JP2003169292A (ja) * 2001-11-30 2003-06-13 Victor Co Of Japan Ltd アフレコ装置、コンピュータプログラム、記録媒体、伝送方法及び再生装置
JP2003199045A (ja) * 2001-12-26 2003-07-11 Victor Co Of Japan Ltd 情報記録信号の生成方法、情報信号の再生方法、情報信号の伝送方法、情報記録信号生成装置、情報信号再生装置、情報信号伝送装置、情報信号記録媒体、及び情報信号伝送用プログラム
US7315622B2 (en) * 2002-06-27 2008-01-01 Nxp B.V. Robust method for achieving audio/video synchronization in MPEG decoders in personal video recording applications
US8290353B2 (en) 2003-02-27 2012-10-16 Panasonic Corporation Data processing device and method
JP2004289295A (ja) * 2003-03-19 2004-10-14 Fujitsu Ltd データ処理システム、データ処理装置及びデータ処理方法
EP1786209B1 (en) * 2004-09-02 2019-11-20 Sony Corporation Content receiver, video-audio output timing control method, and content providing system
JP4375313B2 (ja) * 2005-09-16 2009-12-02 セイコーエプソン株式会社 画像音声出力システム、画像音声データ出力装置、音声処理プログラム、及び記録媒体

Also Published As

Publication number Publication date
US8620134B2 (en) 2013-12-31
CN1901656A (zh) 2007-01-24
JP2007028261A (ja) 2007-02-01
US20070019739A1 (en) 2007-01-25
CN1901656B (zh) 2012-10-03
CN2927556Y (zh) 2007-07-25

Similar Documents

Publication Publication Date Title
JP4991129B2 (ja) 映像音声再生装置および映像音声再生方法
KR100661895B1 (ko) 영상 데이터 처리 장치 및 처리 방법
JP4983923B2 (ja) デコーダ装置、およびデコード方法
JPH10507597A (ja) マルチメディア・システムのためのプログラマブルなオーディオ−ビデオ同期方法および装置
JP2006340102A (ja) 同期再生装置および同期再生方法
JP3438223B2 (ja) 多重化装置および多重化方法、並びに伝送装置および伝送方法
JP2005229331A (ja) Ｈ．２６４コーデックｉｃ、ｄｖｄ再生装置、ｈ．２６４コーデック方法
JP5106039B2 (ja) 画像音声同期再生装置
JP2007259313A (ja) ストリーム再生方法及び再生装置
JP2002176643A (ja) 映像・音声復号処理における映像・音声の同期再生方式
JP4850041B2 (ja) 映像再生システム、映像再生の同期方法および映像再生端末
KR100240331B1 (ko) 디코더 시스템의 비디오/오디오 동기화 장치
JP2006319552A (ja) マルチメディア再生装置
JP5207866B2 (ja) 映像信号処理方法、映像信号処理装置
JP5168105B2 (ja) 音声再生装置、及び音声再生方法
WO2022137326A1 (ja) 映像音響合成装置、方法及びプログラム
JP2010141498A (ja) 映像受信装置及び映像送信装置
JP2007201797A (ja) 伝送システム及び映像出力方法
JP2006339857A (ja) 復号化装置
JP2002185849A (ja) 出力装置、及びテレシネ表示方法
JP2005303816A (ja) 動画再生装置
JP2009038616A (ja) 映像再生装置及び映像再生方法
JP2006180091A (ja) コンテンツ合成装置及び方法
JP2007300395A (ja) ビデオビットストリーム復号化出力装置
JP2010109404A (ja) 再生装置、再生制御方法、およびプログラム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20080318

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100426

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100623

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20100721

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20101013

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20101027

A912 Re-examination (zenchi) completed and case transferred to appeal board

Free format text: JAPANESE INTERMEDIATE CODE: A912

Effective date: 20101119

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20120507

R150 Certificate of patent or registration of utility model

Ref document number: 4991129

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150511

Year of fee payment: 3

S533 Written request for registration of change of name

Free format text: JAPANESE INTERMEDIATE CODE: R313533

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

LAPS Cancellation because of no payment of annual fees