JP2007533240A - 再符号化が不要なマルチメディア・セクションのシームレス接続のためのブリッジ・クリップの生成 - Google Patents

再符号化が不要なマルチメディア・セクションのシームレス接続のためのブリッジ・クリップの生成 Download PDF

Info

Publication number
JP2007533240A
JP2007533240A JP2007507908A JP2007507908A JP2007533240A JP 2007533240 A JP2007533240 A JP 2007533240A JP 2007507908 A JP2007507908 A JP 2007507908A JP 2007507908 A JP2007507908 A JP 2007507908A JP 2007533240 A JP2007533240 A JP 2007533240A
Authority
JP
Japan
Prior art keywords
section
packet
stream
exit
entry
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
JP2007507908A
Other languages
English (en)
Inventor
トカチェンコ,セルヒー
クーネ,アリー
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Koninklijke Philips NV
Original Assignee
Koninklijke Philips NV
Koninklijke Philips Electronics NV
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Koninklijke Philips NV, Koninklijke Philips Electronics NV filed Critical Koninklijke Philips NV
Publication of JP2007533240A publication Critical patent/JP2007533240A/ja
Withdrawn legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/91Television signal processing therefor
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/4104Peripherals receiving signals from specially adapted client devices
    • H04N21/4135Peripherals receiving signals from specially adapted client devices external recorder
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44016Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving splicing one content stream with another content stream, e.g. for substituting a video clip
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/482End-user interface for program selection
    • H04N21/4825End-user interface for program selection using a list of items to be played back in a given order, e.g. playlists
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845Structuring of content, e.g. decomposing content into time segments
    • H04N21/8455Structuring of content, e.g. decomposing content into time segments involving pointers to the content, e.g. pointers to the I-frames of the video stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/84Television signal recording using optical recording
    • H04N5/85Television signal recording using optical recording on discs or drums
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/91Television signal processing therefor
    • H04N5/93Regeneration of the television signal or of selected parts thereof

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Television Signal Processing For Recording (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)
  • Indexing, Searching, Synchronizing, And The Amount Of Synchronization Travel Of Record Carriers (AREA)

Abstract

複数のマルチメディア・ストリーム・セクションをブリッジするための方法、装置およびコンピュータ・プログラム・コード(10)に関する。当該方法は、第一のセクション(TS1)から第二のセクション(TS2)への、前記第一のセクションのある出口時刻(USEX)および前記第二のセクションのある入口時刻(USEN)におけるユーザー選択による切り換えを検出し、出口時刻に基づいてシーケンス開始マーカーを有する出口位置(AEX)を決定し、前記開始マーカーに関連付けられた前記第一のセクション中のすべてのメディア・パケットおよび以前のシーケンスに関連付けられた出口位置より後に提供される、可能性のあるメディア・パケット(A1)を選択し、選択されたパケットについてシーケンス終了マーカー(E)を生成し、前記入口時刻に基づいてシーケンス開始マーカーを有する入口位置(AEN)を決定し、前記入口位置より前に提供されるストリーム制御情報(SC)を選択し、コピーされた選択されたメディア・パケット、シーケンス終了マーカー、コピーされた選択されたストリーム制御情報および可能性としての埋め草パケット(N)を有するブリッジ・クリップ(BC)を生成する、ことを含む。

Description

本発明は一般にマルチメディア・データ・ストリームを操作することに関係しており、より詳細には2つのマルチメディア・ストリーム・セクションをブリッジするための方法、装置およびコンピュータ・プログラム・プロダクトに関係する。
近年、マルチメディア・データをデータ担体に記録するいくつかの規格が開発されてきている。そのような規格の例がDVD(デジタル多用途ディスク)およびブルーレイ・ディスク・ビデオである。たとえばブルーレイでは、ユーザーがブルーレイ・ディスク上に与えられた2つのストリームまたはクリップをシームレスにつなぐことを許容することが可能である。
ユーザーはこれをいわゆるプレイリストを操作することによって行う。プレイリストというのは、再生されるべきストリームまたはクリップをポイントするものである。シームレスな接続を提供する一つの方法は、いわゆるブリッジ・クリップを使うことである。ブリッジ・クリップは、2つのストリームから生成され、ディスク上に保存される。ブリッジ・クリップを含めることで、ユーザーはオリジナル・クリップを変更する必要なく、クリップの第一のもののある位置からクリップの別のものの別の位置へとシームレスにジャンプすることが許容される。
これを行う一つの方法がEP-1198133に記載されている。この文献は第一のクリップ素材および第二のクリップ素材からのブリッジ・クリップの生成を記載している。しかし、このブリッジ・クリップの生成においては、オリジナル・クリップのデータのいくつかは、ブリッジ・クリップにおいて提供される前に再符号化される。そのような再符号化はかなり複雑で、きわめて重い処理を要求し、したがって遅いだけでなくその性質上、高価である。したがって、この種のブリッジ・クリップ生成は通例、マルチメディア・ストリームのプロの編集に好適である。
しかしながら、この種の機能を消費者市場内でも提供することは興味深いことであろう。その場合、マルチメディア編集の状況においてブリッジ・クリップを与える、さほど複雑でない方法が必要となる。
したがって、本発明は、消費者装置などのためにより簡単な方法でブリッジ・クリップを提供するという上述の問題を解決することに向けられるものである。
よって、本発明の一つの目的は、マルチメディア・ストリームの再符号化を必要としない、より簡単な方法でブリッジ・クリップを提供することである。
本発明の第一の側面によれば、この目的は2つのマルチメディア・ストリーム・セクションをブリッジする方法によって達成される。当該方法は:
第一のセクションから第二のセクションへの、前記第一のセクションのある出口時刻および前記第二のセクションのある入口時刻におけるユーザー選択による切り換えを検出し、
前記第一のセクション内のユーザー選択された出口時刻に基づいて、シーケンス開始マーカーを有する出口位置を決定し、
前記シーケンス開始マーカーに関連付けられた前記第一のセクション内のすべてのメディア・パケットと、前記第一のセクション内の以前の諸シーケンスに関連付けられた、前記出口位置より後に提供される、可能性のあるメディア・パケットとを選択し、
前記第一のセクション内の前記選択されたメディア・パケットについてシーケンス終了マーカーを生成し、
前記第二のセクション内のユーザー選択された入口時刻に基づいて、シーケンス開始マーカーを有する入口位置を決定し、
前記入口位置より前に前記第二のセクション内で提供されるストリーム制御情報を選択し、
前記第一のセクション内での前記選択されたメディア・パケットのコピー、前記シーケンス終了マーカー、前記選択されたストリーム制御情報のコピーならびに可能性のある埋め草パケットを有するブリッジ・クリップを生成する、
ステップを有しており、前記ブリッジ・クリップは、2つのセクションの間のシームレスな接続を提供するために前記入口位置および前記出口位置の間で再生されることができる。
よって、本発明のもう一つの目的は、マルチメディア・ストリームの再符号化を必要としない、簡単な方法でブリッジ・クリップを生成する装置を提供することである。
本発明の第二の側面によれば、この目的は記憶媒体(18)上で与えられる2つのマルチメディア・ストリーム・セクションをブリッジする装置によって達成される。当該装置は:
記憶媒体上でマルチメディア・データを読み書きする読み書きユニットと、
記憶媒体上で与えられる少なくとも一つのマルチメディア・ストリームを操作する制御ユニットとを有しており、前記制御ユニットは:
第一のセクションから第二のセクションへの、前記第一のセクションのある出口時刻および前記第二のセクションのある入口時刻におけるユーザー選択による切り換えを検出し、
前記第一のセクション内のユーザー選択された出口時刻に基づいて、シーケンス開始マーカーを有する出口位置を決定し、
前記シーケンス開始マーカーに関連付けられた前記第一のセクション内のすべてのメディア・パケットと、前記第一のセクション内の以前の諸シーケンスに関連付けられた、前記出口位置より後に提供される、可能性のあるメディア・パケットとを選択し、
前記第一のセクション内の前記選択されたメディア・パケットについてシーケンス終了マーカーを生成し、
前記第二のセクション内のユーザー選択された入口時刻に基づいて、シーケンス開始マーカーを有する入口位置を決定し、
前記入口位置より前に前記第二のセクション内で提供されるストリーム制御情報を選択し、
前記第一のセクション内での前記選択されたメディア・パケットのコピー、前記シーケンス終了マーカー、前記選択されたストリーム制御情報のコピーならびに可能性のある埋め草パケットを有するブリッジ・クリップを生成する、
よう構成されており、前記ブリッジ・クリップは、2つのセクションの間のシームレスな接続を提供するために前記入口位置および前記出口位置の間で再生されることができる。
もう一つの目的は、マルチメディア・ストリームの再符号化を必要としない簡単な方法でブリッジ・クリップを生成するマルチメディア・データ呈示装置を提供することである。
この目的は、本発明の第三の側面に基づき、本発明の前記第二の側面に基づく2つのマルチメディア・ストリーム・セクションをブリッジするための装置を有するマルチメディア・データ呈示装置によって達成される。
本発明のもう一つの目的は、マルチメディア・ストリームの再符号化を必要としない、簡単な方法でブリッジ・クリップを生成するコンピュータ・プログラム・プロダクトを提供することである。
本発明の第四の側面によれば、この目的は、2つのマルチメディア・ストリーム・セクションをブリッジするための、コンピュータ上で使われるものであって、該コンピュータに読み込まれたときに該コンピュータをして以下の機能:
第一のセクションから第二のセクションへの、前記第一のセクションのある出口時刻および前記第二のセクションのある入口時刻におけるユーザー選択による切り換えを検出し、
前記第一のセクション内のユーザー選択された出口時刻に基づいて、シーケンス開始マーカーを有する出口位置を決定し、
前記シーケンス開始マーカーに関連付けられた前記第一のセクション内のすべてのメディア・パケットと、前記第一のセクション内の以前の諸シーケンスに関連付けられた、前記出口位置より後に提供される、可能性のあるメディア・パケットとを選択し、
前記第一のセクション内の前記選択されたメディア・パケットについてシーケンス終了マーカーを生成し、
前記第二のセクション内のユーザー選択された入口時刻に基づいて、シーケンス開始マーカーを有する入口位置を決定し、
前記入口位置より前に前記第二のセクション内で提供されるストリーム制御情報を選択し、
前記第一のセクション内での前記選択されたメディア・パケットのコピー、前記シーケンス終了マーカー、前記選択されたストリーム制御情報のコピーならびに可能性のある埋め草パケットを有するブリッジ・クリップを生成し、
前記ブリッジ・クリップは、2つのセクションの間のシームレスな接続を提供するために前記入口位置および前記出口位置の間で再生されることができるようなものである、
という機能を実行せしめるコンピュータ・プログラム・コードを有する、コンピュータ・プログラム・プロダクトによって達成される。
請求項2は出口位置および入口位置をユーザー選択された出口時刻および入口時刻に最も近いものとして提供することに向けられている。これは所望の出口時刻および入口時刻からのずれを最小にするためである。
請求項3によれば、選択されたストリーム制御情報は第二のセクションの以前の諸セクションにおける最も近い情報である。このようにして、最も有意な情報が使われ、不必要な探索が回避される。
請求項4は、ブリッジ・クリップ内に、第二のセクションの実際の入口点より後のいくつかのメディア・パケットを含めることに向けられている。これは使用される記録規格の要件を満たすために必要となることがありうる。
請求項5は、ブリッジ・クリップ内に、第一のセクションの、実際の出口点より前のいくつかのメディア・パケットを含めることに向けられている。これは使用される記録規格の要件を満たすために必要となることがありうる。
請求項6によれば、メディア・パケットは、シーケンス開始マーカーに関連付けられた最後のビデオ・パケット後に提供されているビデオ・パケット、シーケンス終了マーカーを含む。これは、第一のセクションに起源をもつビデオ情報の終わりを明確に定義するために行われる。これもまた、使用される記録規格の要件を満たすために必要となることがありうる。
請求項7および8によれば、ヌル・パケットがブリッジ・クリップ内で非選択メディア・パケットと、第一のセクションに起源をもつ選択オーディオ・パケットもしくは第二のセクションに起源をもつパケットとの間に挿入される。これは、使用される記録規格の要件を満たすために必要となることがありうる。
請求項9は、入口点マップの形でのオーバーヘッド・データをシーケンス開始マーカーを位置特定することに使うことに向けられている。これは位置特定プロセスを高速で効率的なものにする。
請求項10は、第一および第二のセクションの入口点マップに基づいてブリッジ・クリップのための入口点マップを生成することに向けられている。これは使用される記録規格の要件を満たすために必要となることがありうる。
請求項11および12はそれぞれ同一ストリーム内において提供されるブリッジング・セクションおよび異なるストリームにおいて提供されるブリッジング・セクションに向けられている。
本発明を用いることで、マルチメディア・ストリームを再符号化する必要なしに、単にコピーして、可能性としてはヌル・パケットおよび/またはストリーム制御パケットを追加することにより、ブリッジ・クリップの生成が達成される。このため、ブリッジングは低コストで、前記再符号化に付随する複雑さなしに可能となる。さらにブリッジ・クリップの生成は高速であり、ユーザーにとって知覚可能な遅延なしに実行できる。本発明はさらに、実装のためにエンコーダを必要としない。これは全体としてより簡素で安価な装置において提供されうることを意味している。
本発明の基本的発想は、ユーザー入力されたある第一のマルチメディア・ストリーム・セクションからある第二のマルチメディア・ストリーム・セクションへの入口時刻への出口時刻を検出し、前記ユーザー選択された出口時刻に基づく出口位置および前記ユーザー選択された入口時刻に基づく入口位置を決定し、この入口位置および出口位置のそれぞれはシーケンス開始マーカーを有しており、前記シーケンス開始マーカーに関連付けられたすべてのメディア・パケットおよび前記第一のセクション内の以前のシーケンスに関連付けられた出口位置より後に提供される可能性のあるメディア・パケットを選択し、前記第一のセクションの選択されたメディア・パケットについてシーケンス終了マーカーを生成し、前記入口位置より前に前記第二のセクションにおいて提供されるストリーム制御情報を選択し、前記第一のセクションの前記選択されたメディア・パケットのコピー、前記シーケンス終了マーカー、前記選択されたストリーム制御情報ならびに可能性としての埋め草パケットを有するブリッジ・クリップを生成する、というものである。このようにして、ブリッジ・クリップは入口位置と出口位置の間で再生されることができ、2つのセクションの間のシームレスな接続が提供される。
上述したことを含め本発明のさまざまな側面は以下に述べる実施形態を参照することから明らかであり、また明快にされるであろう。
本発明についてさらに付属の図面との関係で述べる。
本発明は一般にはマルチメディアコンテンツの再符号化なしにマルチメディア・ストリームのセクションをシームレスに互いにつなぐことに向けられている。以下では、この機能を与えるシステムは、ブルーレイ規格に基づく光ディスク上に保存されているMPEGトランスポート・ストリームの形のMPEG符号化されたマルチメディア・データとの関連で述べることになるが、本発明がブルーレイ・ディスクに限られず、MPEGにさえ限られるものでなく、同様の好適な属性を有する他の諸規格でも使えるものであることは認識しておくべきである。本発明はさらに、光ディスク上で与えられるかかるマルチメディア・ストリームに限定されるものでもなく、ハードディスクまたはメモリースティックといった、いかなる好適な記憶媒体上のかかるマルチメディア・ストリームの保存をも含むものである。
図1は簡略化されたブルーレイ・プレーヤーの形でのマルチメディア呈示装置10のブロック概略図を示している。プレーヤーは、ブルーレイ規格に従って符号化されたいくつかのマルチメディア・ストリームが保存されているブルーレイ・ディスク18を受け容れるよう構成された光ディスクドライブ14を含んでいる。ディスクドライブ14は、ブルーレイ符号化/復号器の形で2つのマルチメディア・ストリーム・セクションをブリッジするデバイス12に接続されている。このデバイス12は破線のボックスで示されている。ユーザー・インターフェース・ユニット16がデバイス12の制御ユニット26に接続されていて、ユーザーは、マルチメディア・ストリームまたはクリップの選択部分を再生させたり、一つのストリームを別のストリームとシームレスな仕方でブリッジしたりすることもできるようになっている。したがって、デバイス12は、ディスク18上の情報を読むための読み取りユニット20を有している。この読み取りユニットはさらにストリーム分離ユニット22に接続されている。ストリーム分離ユニット22とはMPEGマルチメディア・データのトランスポート・ストリームと一緒にエンコードされている追加的なデータを除去するものである。ストリーム分離ユニット22は、制御ユニット26、バッファ24およびマルチメディア復号ユニット32に接続されている。このマルチメディア復号ユニット32が復号されたマルチメディア信号を与える。復号されたマルチメディア信号とは、この実施例ではテレビ用の復号されたMPEGビデオおよびオーディオ信号である。ディスク18にデータを書き込むために、書き込みユニット30がディスクドライブ14に接続されている。書き込みユニット30はさらに、ストリーム合成ユニット28に接続されている。ストリーム合成ユニット28は制御ユニット26およびバッファ24の両方に接続されている。
図1では、デバイス12は、本発明の記述の都合上、マルチメディア・データの再生だけのために設けられているが、実際のマルチメディア記録機能を与えられてもよいことは認識しておくべきである。その場合にはマルチメディア符号化ユニットが必要になる。マルチメディア復号ユニット32は標準的なMPEGデコーダであり、オーディオストリームとビデオストリームを分離し、符号化されたビデオおよびオーディオ情報を復号する。種々のマルチメディア・ストリームの一時記憶のためにいくつかのバッファが設けられていてもよいことも認識しておくべきであろう。
図2は、ディスク18から取得される2つのトランスポート・ストリームTS1およびTS2すなわち2つのビデオクリップを概略的に描いている。これらのストリームはフレームにまとめられたいくつかのマルチメディア・パケットを含んでいる。第一のストリームTS1においては、ビデオ・パケットの第一のフレームV1があり、その隣にビデオ・パケットの別のフレームV2がある。このフレームV2から離れて、ビデオ・フレームV1に対応するいくつかのオーディオ・パケットA1が、そしてさらに先にはビデオ・フレームV2に対応するいくつかのオーディオ・パケットA2がある。ビデオ・フレームV2はセクション開始マーカーまたはセクション開始符号を有する第一のデータパケットを有している。これがGOP(ピクチャー・グループ)Iフレームを有するセクションの開始を指示する。このIフレームというのは、このパケットがある場面を示すために必要なすべてのビデオ情報を有するということを意味している。このパケットはさらに、タイムスタンプを有しており、入口点(entry point)テーブルEP1に関連付けられている。このテーブルは第一のトランスポート・ストリームTS1に関してオーバーヘッド情報として与えられ、よってこのトランスポート・ストリームの外部である。また、シーケンス中のパケット数といった情報を含んでいる。この入口点テーブルEP1はシーケンス開始符号を直接ポイントしており、このためシーケンス開始符号を位置特定するのが容易になっている。
第二のトランスポート・ストリームTS2はいくつかのストリーム制御(stream control)パケットSCを有している。ブルーレイ規格によれば、ストリーム制御パケットはPAT(Program Association Table[プログラム関連付けテーブル])、PMT(Program Map Table[プログラム・マップ・テーブル])またはPCR(Program Clock Reference[プログラムクロック参照])のパケットでありえ、これらはビデオ・パケットV3のフレームから分離されている。ここで、このフレームの第一のパケットは、セクション開始符号、タイムスタンプを有しており、入口点テーブルEP2に関連付けられているデータパケットも有している。このテーブルは第二のトランスポート・ストリームTS2に関してオーバーヘッド情報として与えられ、このトランスポート・ストリームの外部である。このフレームV3はGOPのIフレームをも有している。ビデオ・フレームV3からある距離において、このビデオ・フレームV3に関連付けられたいくつかのオーディオ・パケットA3が提供される。オーディオ・パケットをビデオ・パケットから距離を置いて提供する理由は、デコーダ32でのオーディオおよびビデオの処理はかかる時間が違うということである。しかしながら、最終的な結果としては、これらは互いに同期されるようにしてユーザーに提供されるべきである。
本発明のある実施形態についてこれから図1、図2、図3を参照しつつ説明する。ここで、図3はトランスポート・ストリームTS1およびTS2とともに本発明に従って生成されるブリッジ・クリップ(bridge clip)BCの概略図を示している。
マルチメディアを再生したいユーザーは、制御ユニット26によって提供されるプレイリストを編集することによってこれを選択できる。本発明の説明の都合上、ユーザーは、ディスク18上に保存されているマルチメディア・ストリームTS1を再生のために選択したと想定する。この場合、読み取りユニット20がディスクからデータを読み取り、ストリーム分離ユニット22が入口点マップEP1のようなオーバーヘッド・データをトランスポート・ストリームTS1から分離し、この情報を制御ユニット26に提供する。データの残り、すなわちトランスポート・ストリームTS1はデコーダ32に転送され、該デコーダが通常のよく知られた仕方で当該ストリームを復号する。
前述したように、ユーザーはプレイリストを設定することができる。プレイリストでは、ユーザーはたとえばまず第一のトランスポートストリームTS1を、次いで第二のトランスポートストリームTS2を再生することを望む。このプレイリストはインターフェース16を使って入力される。存在する一つのオプションは、ユーザーはトランスポート・ストリームTS1およびTS2をブリッジするよう、すなわち第一のトランスポート・ストリームTS1を第二のトランスポート・ストリームTS2とどこか途中で、あるいはその逆に、接続するよう選択できるということである。今の場合、この可能な選択は、トランスポート・ストリームTS1およびTS2に影響したり変えたりすべきでないものである。すなわち、それらのトランスポート・ストリームは、たとえユーザーがブリッジングをつくるよう選択しても、後刻完全に再生することが可能であるべきである。
ユーザーがそのような選択をするとき、ユーザーは第一のストリームからの出口時刻および第二のストリームへの入口時刻を選択する。これらの選択は、インターフェース16を通じてなされ、そして制御ユニット26によって検出される。これらの選択の結果として、制御ユニット26はさらに、タイムスタンプの形でのマーカーまたは点をストリームTS1およびTS2に入れる。それらのマーカーまたは点は、図3では、第一のストリームTS1においてはユーザー選択の(user-selected)出時間または出口(exit)時間(USEX)によって、第二のストリームTS2においてはユーザー選択の入り時間または入口(entry)時間によって示される。
制御ユニット26は次いで第一のストリームTS1においてユーザー選択出口時間のまわりで前後を見てセクション開始符号をさがす。これは、ストリームに関連付けられる対応する入口点テーブルを使ってなされる。この入口点テーブルは、制御ユニット26がストリーム分離ユニット22から受け取ったものである。制御ユニット26は次いで、第一のストリームTS1の実際の出口(actual exit)の位置AEXを決定する。これはフレームV2のフレームの最初のビデオ・パケットをポイントする。それはよって、ユーザー選択された出口点USEXをこのセクション開始符号と接続する。選択された位置は、いずれかの方向で(すなわち前または後で)ユーザー選択された出口時刻に最も近いものであり、よってGOPのIフレームを有する最も近いフレームである。ブルーレイ規格のおかげで、この差は決して0.5秒を超えない。0.5秒というのはほとんどの消費者用途にとってちょうど十分である。制御ユニット26はブリッジ処理において使われるべきいくつかのマルチメディア・パケットを選択する。それは、このセクション開始符号に関連付けられたフレームV2のいくつかのビデオ・パケットおよびこのセクション開始符号に関連付けられたすべてのオーディオ・パケットA2を選択する。フレームV2は呈示されるべき第一のストリームTS1の最後のビデオ・パケットを含んでいる。それはまた、ポインタとA2の最後のオーディオ・パケットとの間で提供される以前のセクション開始符号に関連付けられた、可能性のあるメディア・パケットをも選択する。好ましい実施形態では、ここで選択されるパケットの種別はオーディオ・パケットである。これらの選択されたパケットはフレームV2のタイムスタンプに等しいかそれより小さいタイムスタンプをもつ。よってここでは、TS1における以前のセクションのビデオ・フレームV1に関連付けられているパケットA1も選択される。セクション開始符号より前のいくつかのパケットV1も選択されている。選択された諸パケットはバッファ24にコピーされる。
同じようにして、制御ユニット26は第二のストリームTS2を見る。ここで、制御ユニット26はユーザー選択の入口時刻USENに対応する入口点にはいっている。制御ユニット26は、入口点テーブルを見ることによって両方の方向、すなわちユーザー選択の入口点USENから後および前でセクション開始符号をさがし、入口点テーブルEP2を識別する。該入口点テーブルEP2は、場面についてのあらゆる必要なビデオ情報を含んでいる、すなわちGOP Iフレームであるビデオ・フレームV3に関連付けられたセクション開始符号をポイントしている。また、この実際の入口点AENは、ユーザー選択された入口点USENに最も近いシーケンス開始符号を有する点である。制御ユニット26は次いでこの点を実際の入口点AENとし、ユーザー選択された入口点USENをこの実際の入口位置に関連付ける。その後は、制御ユニット26は、第二のトランスポート・ストリームTS2を後ろ向きに見ていく。最新のストリーミング制御パケットSC、すなわち自分が選んでいる実際の入口位置AENより前の最後のそのようなパケットを見出すためである。これらのパケットはPCRパケット、PATパケットおよびPMTパケットのようなパケットである。制御ユニット26はさらに、実際の入口位置に関連付けられたフレームV3のいくつかのビデオ・パケットを選択する。制御ユニット26は次いで選択されたパケットをバッファ24にコピーする。
2つのトランスポート・ストリームからこのすべての情報がひとたびバッファにコピーされ終わったら、制御ユニット26は先に進んで、バッファ24内のデータからブリッジ・クリップBCを生成する。ブリッジ・クリップBCは余剰パケットV1で始まり、パケットV2がそれに続く。その後は、フレームV2の最後のビデオ・パケットよりあとにセクション終了マーカーまたは符号Eを生成して、位置させる。このセクション終了符号Eよりあとでは、TS1の以前のビデオ・フレームに関連付けられたオーディオ・パケットA1を位置させる。制御ユニット26はその後、ストリームTS1におけるA1とA2の間で与えられるパケットの量に応じて一つまたは複数のヌル・パケットNを生成し、そのあとにオーディオ・パケットA2が続く。制御ユニット26は次いでいくつかのヌル・パケットNを加える。オーディオ・パケットを整列した単位の境界にパディングするためである。これは使用される記録規格の要件を満たすために必要となることがある。これらのヌル・パケットNのあとに続くのが第二のストリームTS2のストリーム制御パケットSCならびに第二のストリームTS2のビデオ・データV3の最初のフレームの選択されたパケットである。ストリーム制御パケットSCがPCRパケットをビデオ・データとともに含む場合、このビデオ・データは、ブルーレイ規格の制限を満たすためにパディングおよび適応フラグ(MPEGSYS)で置き換えられる。出口位置および入口位置より前および後に選択された余剰ビデオ・パケットV1およびV3が選択され、コピーされる。最小クリップ・サイズについてのブルーレイの要件を満たすために十分大きなサイズを有するブリッジ・クリップを提供するためである。挿入される前記いくつかのヌル・パケットは同じ理由により選択される。他の規格では、これらのビデオ・パケットはブリッジ・クリップに含められる必要があることがありうる。こうして生成されたブリッジ・クリップBCは図3の中段に示されている。
これでブリッジ・クリップBCが生成されたので、それに付随するメタデータまたはオーバーヘッド・データが生成されるべきである。すなわち、入口点テーブルEPBCである。この入口点テーブルは、第一のトランスポート・ストリームTS1の実際の出口位置AEXおよび第二のトランスポート・ストリームTS2の実際の入口位置AENに関連付けられた2つの以前に触れた入口点テーブルEP1およびEP2から生成される。テーブルEPBCはEP1およびEP2のエントリーをコピーすることを通じて生成される。実際のSPN(Source Packet Number[ソースパケット番号])値は、実際のブリッジ・クリップの状況に一致するために補正される。EP1からコピーされる諸エントリーはV2のSPNの値を用いて減算される。EP2からコピーされる諸エントリーはV3のSPNの値マイナス第一のストリームTS1から発するブリッジ・クリップの部分におけるビデオ・パケットの数を用いて減算される。
その後、制御ユニット26は、ブリッジ・クリップがバッファ24からストリーム合成ユニット28に転送されることを保障する。ストリーム合成ユニット28には入口点テーブルEPBCも供給されており、そこでこの2つが合成されて書き込みユニット30に供給され、ディスクドライブ14を介してディスク18上での書き込みおよび保存が行われる。
このようにして、ユーザーは、TS1とTS2の間のプレイリストにブリッジ・クリップを入れることによって、ブリッジ・クリップを使って、2つのストリームの実際の入口位置および出口位置をシームレスに接続することができる。
記載された方法は、両ストリームのためのストリーム化されたデータのいかなる再符号化も必要とせず、ヌル・パケットまたはその他のストリーム制御パケットの追加を伴ってコピーすることを必要とするだけなので有利である。このため、ブリッジング工程が低いコストで、前述した複雑さなしで可能となる。しかも高速であり、ユーザーには何ら知覚可能な遅延なく実行されうる。ユーザーが第一のストリームから第二のストリームに接続したいとき、ブリッジ・クリップがプレイリストに入れられ、シームレスな接続が得られる。ブリッジング位置はおそらくはユーザーによって選択された位置からはわずかにずれるであろうが、これは消費者環境においてはほとんど気づかれないものである。本発明はさらに、その実装のためにエンコーダを必要としない。これはすなわち、たとえばブルーレイ・プレーヤーのようなより簡単でより安価な装置に設けることができることを意味している。
上記の例では、2つの別個のストリームの複数のセクションに関係してブリッジング工程を述べた。ブリッジングは同一のストリームの2つの異なるセクションどうしの間で設けることも可能であることは認識しておくべきである。接続の位置についても、セクション開始符号が近くにありさえすれば、トランスポート・ストリーム内の事実上どこに選ぶこともできる。オーバーヘッド情報が近くにない場合、すなわち入口点テーブルがない場合、制御ユニットは実際のトランスポート・ストリーム内を探索してセクション開始符号を見出す必要があるだろう。そのようなオーバーヘッド情報がない場合には、マルチメディア・ストリーム・セクションをブリッジングするための装置内にはストリーム分離ユニットもストリーム合成ユニットもないことになる。
制御ユニットは好ましくは本発明に基づく方法を実行するための付随するプログラムコードをもつプロセッサの形で提供される。このプログラムコードは、図4に示されるようなCD-ROMディスクの形のデータ担体34でも提供されうる。プログラムコードはさらにサーバー上に提供されて、マルチメディア呈示装置にダウンロードされてもよい。マルチメディア呈示装置はさらにブルーレイ・ディスク・プレーヤーである必要はなく、たとえばパソコン(パーソナル・コンピュータ)のようなコンピュータであってもよい。
本明細書において使用される「有する」の語は述べられている特徴、整数、ステップまたは構成要素の存在を指定すると解釈されるが、一つまたは複数のその他の特徴、整数、ステップ、構成要素またはそのグループの存在を排除するものではないことを強調しておくべきであろう。さらに、請求項において参照符号があったとしても、それが本発明の範囲をいかなる仕方であれ限定するものと解釈するべきではないことも認識しておくべきである。
図1は、本発明に基づく、2つのマルチメディア・ストリーム・セクションをブリッジする装置を有するマルチメディア呈示装置のブロック概略図である。 ブリッジされるべき2つの転送ストリームを概略的に示す図である。 本発明に基づく、2つの転送ストリームからのブリッジ・クリップの生成を概略的に示す図である。 本発明に基づく方法を実行するためのコンピュータ・プログラム・コードを有するCD-ROMの形でのコンピュータ・プログラム・プロダクトを概略的に示す図である。

Claims (16)

  1. 2つのマルチメディア・ストリーム・セクションをブリッジする方法であって:
    第一のセクションから第二のセクションへの、前記第一のセクションのある出口時刻および前記第二のセクションのある入口時刻におけるユーザー選択による切り換えを検出し、
    前記第一のセクション内のユーザー選択された出口時刻に基づいて、シーケンス開始マーカーを有する出口位置(AEX)を決定し、
    前記シーケンス開始マーカーに関連付けられた前記第一のセクション内のすべてのメディア・パケットと、前記第一のセクション内の以前の諸シーケンスに関連付けられた、前記出口位置より後に提供される、可能性のあるメディア・パケットとを選択し、
    前記第一のセクションの選択されたメディア・パケットについてシーケンス終了マーカーを生成し、
    前記第二のセクション内のユーザー選択された入口時刻に基づいて、シーケンス開始マーカーを有する入口位置(AEN)を決定し、
    前記入口位置より前に前記第二のセクション内で提供されるストリーム制御情報を選択し、
    前記第一のセクション内での前記選択されたメディア・パケットのコピー、前記シーケンス終了マーカー、前記選択されたストリーム制御情報のコピーならびに可能性としての埋め草パケットを有するブリッジ・クリップを生成する、
    ステップを有しており、前記ブリッジ・クリップは、2つのセクションの間のシームレスな接続を提供するために前記入口位置および前記出口位置の間で再生されることができることを特徴とする方法。
  2. 前記実際の入口位置および出口位置が、前記ユーザー選択された入口時刻および出口時刻に最も近い位置であることを特徴とする、請求項1記載の方法。
  3. 前記選択されたストリーム制御情報が、前記第二のセクションの以前の諸シーケンスにおいて提供される最も近いストリーム制御情報であることを特徴とする、請求項1記載の方法。
  4. 前記第二のセクションにおいて前記入口位置より後に限られた数のメディア・パケットを選択し、該メディア・パケットを当該ブリッジ・クリップ中にて提供するステップをさらに有することを特徴とする、請求項1記載の方法。
  5. 前記第一のセクションにおいて前記出口位置より前に提供される限られた数のメディア・パケットを選択するステップをさらに有することを特徴とする、請求項1記載の方法。
  6. 前記メディア・パケットがビデオ・パケットおよびオーディオ・パケットを含んでおり、前記シーケンス終了マーカーが当該ブリッジ・クリップ中で前記出口位置のシーケンス開始マーカーに関連付けられた最後のビデオ・パケットより後に提供されることを特徴とする、請求項1記載の方法。
  7. 前記メディア・パケットがオーディオ・パケットを含んでおり、当該方法がさらに、第一のセクションにおける前記出口位置と前記シーケンス開始マーカーに関連付けられた最後のオーディオ・パケットとの間の非選択メディア・パケットをコピーし、該コピーされたパケットをヌル・パケットおよび/またはストリーム制御パケットで置き換えるステップをさらに有することを特徴とする、請求項6記載の方法。
  8. 当該ブリッジ・クリップ中で前記第二のセクションに由来するパケットにヌル・パケットを追加するステップをさらに有することを特徴とする、請求項1記載の方法。
  9. 前記第一のセクションの少なくとも前記出口位置および前記第二のセクションの前記入口位置がそれぞれ、出口位置および入口位置を同定するために使われる入口点マップを有していることを特徴とする、請求項1記載の方法。
  10. 前記第一および第二のセクションの入口点マップからブリッジ・クリップのための入口点マップを生成するステップをさらに有することを特徴とする、請求項9記載の方法。
  11. 前記2つのセクションが同一のマルチメディア・ストリーム内で与えられることを特徴とする、請求項1記載の方法。
  12. 前記2つのセクションが2つの異なるマルチメディア・ストリーム内で与えられることを特徴とする、請求項1記載の方法。
  13. 記憶媒体上で与えられる2つのマルチメディア・ストリーム・セクションをブリッジする装置であって:
    記憶媒体上でのマルチメディア・データの読み出しおよび書き込みのための読み出しユニットおよび書き込みユニットと、
    記憶媒体上で与えられる少なくとも一つのマルチメディア・ストリームを操作する制御ユニットとを有しており、
    前記制御ユニットは:
    第一のセクションから第二のセクションへの、前記第一のセクションのある出口時刻および前記第二のセクションのある入口時刻におけるユーザー選択による切り換えを検出し、
    前記第一のセクション内のユーザー選択された出口時刻に基づいて、シーケンス開始マーカーを有する出口位置(AEX)を決定し、
    前記シーケンス開始マーカーに関連付けられた前記第一のセクション内のすべてのメディア・パケットと、前記第一のセクション内の以前の諸シーケンスに関連付けられた、前記出口位置より後に提供される、可能性のあるメディア・パケットとを選択し、
    前記第一のセクションの選択されたメディア・パケットについてシーケンス終了マーカーを生成し、
    前記第二のセクション内のユーザー選択された入口時刻に基づいて、シーケンス開始マーカーを有する入口位置(AEN)を決定し、
    前記入口位置より前に前記第二のセクション内で提供されるストリーム制御情報を選択し、
    前記第一のセクション内での前記選択されたメディア・パケットのコピー、前記シーケンス終了マーカー、前記選択されたストリーム制御情報のコピーならびに可能性としての埋め草パケットを有するブリッジ・クリップを生成する、
    よう構成されており、前記ブリッジ・クリップは、2つのセクションの間のシームレスな接続を提供するために前記入口位置および前記出口位置の間で再生されることができることを特徴とする装置。
  14. マルチメディア・ストリームに関係する追加的なオーバーヘッド・データのストリームを提供するためのストリーム分離ユニットおよびストリーム合成ユニットをさらに有することを特徴とする、請求項13記載の装置。
  15. 2つのマルチメディア・ストリーム・セクションをブリッジするための請求項13記載の装置を有することを特徴とする、マルチメディア・データ・呈示装置。
  16. 2つのマルチメディア・ストリーム・セクションをブリッジするための、コンピュータ上で使われるものであって、該コンピュータに読み込まれたときに該コンピュータをして以下の機能:
    第一のセクションから第二のセクションへの、前記第一のセクションのある出口時刻および前記第二のセクションのある入口時刻におけるユーザー選択による切り換えを検出し、
    前記第一のセクション内のユーザー選択された出口時刻に基づいて、シーケンス開始マーカーを有する出口位置(AEX)を決定し、
    前記シーケンス開始マーカーに関連付けられた前記第一のセクション内のすべてのメディア・パケットと、前記第一のセクション内の以前の諸シーケンスに関連付けられた、前記出口位置より後に提供される、可能性のあるメディア・パケットとを選択し、
    前記第一のセクションの選択されたメディア・パケットについてシーケンス終了マーカーを生成し、
    前記第二のセクション内のユーザー選択された入口時刻に基づいて、シーケンス開始マーカーを有する入口位置(AEN)を決定し、
    前記入口位置より前に前記第二のセクション内で提供されるストリーム制御情報を選択し、
    前記第一のセクション内での前記選択されたメディア・パケットのコピー、前記シーケンス終了マーカー、前記選択されたストリーム制御情報のコピーならびに可能性としての埋め草パケットを有するブリッジ・クリップを生成し、
    前記ブリッジ・クリップは、2つのセクションの間のシームレスな接続を提供するために前記入口位置および前記出口位置の間で再生されることができるようなものである、
    という機能を実行せしめるコンピュータ・プログラム・コードを有する、コンピュータ・プログラム。
JP2007507908A 2004-04-15 2005-04-11 再符号化が不要なマルチメディア・セクションのシームレス接続のためのブリッジ・クリップの生成 Withdrawn JP2007533240A (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
EP04101539 2004-04-15
PCT/IB2005/051184 WO2005101848A1 (en) 2004-04-15 2005-04-11 Creating a bridge clip for seamless connection of multimedia sections without requiring recoding

Publications (1)

Publication Number Publication Date
JP2007533240A true JP2007533240A (ja) 2007-11-15

Family

ID=34963763

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2007507908A Withdrawn JP2007533240A (ja) 2004-04-15 2005-04-11 再符号化が不要なマルチメディア・セクションのシームレス接続のためのブリッジ・クリップの生成

Country Status (7)

Country Link
US (1) US20070195717A1 (ja)
EP (1) EP1738587A1 (ja)
JP (1) JP2007533240A (ja)
KR (1) KR20070010176A (ja)
CN (1) CN1943237A (ja)
TW (1) TW200601850A (ja)
WO (1) WO2005101848A1 (ja)

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20010013123A1 (en) * 1991-11-25 2001-08-09 Freeman Michael J. Customized program creation by splicing server based video, audio, or graphical segments
PL337095A1 (en) * 1998-03-19 2000-07-31 Koninkl Philips Electronics Nv Real-time recording/reading and/or editing an information on disk-type data carrier medium
GB9813831D0 (en) * 1998-06-27 1998-08-26 Philips Electronics Nv Frame-accurate editing of encoded A/V sequences
JP3867447B2 (ja) * 1999-06-22 2007-01-10 ソニー株式会社 ディスク型データ記録再生装置、及び、ディスク型データ記録再生装置を搭載する情報処理システム
GB0007868D0 (en) * 2000-03-31 2000-05-17 Koninkl Philips Electronics Nv Methods and apparatus for editing digital video recordings and recordings made by such methods
WO2001082610A1 (en) * 2000-04-21 2001-11-01 Sony Corporation Information processing apparatus and method, program, and recorded medium
CN1199446C (zh) * 2000-04-21 2005-04-27 索尼公司 信息处理设备和方法

Also Published As

Publication number Publication date
US20070195717A1 (en) 2007-08-23
KR20070010176A (ko) 2007-01-22
EP1738587A1 (en) 2007-01-03
WO2005101848A1 (en) 2005-10-27
CN1943237A (zh) 2007-04-04
TW200601850A (en) 2006-01-01

Similar Documents

Publication Publication Date Title
KR101361960B1 (ko) 오디오, 비디오 및/또는 기타 데이터를 포함하는 데이터 스트림을 동기화하기 위한 방법 및 장치
JP4288613B2 (ja) 再生装置および再生方法、プログラム、記録媒体、並びにデータ構造
JP4328989B2 (ja) 再生装置、再生方法、並びに記録媒体
US7978955B2 (en) Recording device, recording method, reproducing device, reproducing method, program, and recording medium
US9076495B2 (en) Reproducing apparatus, reproducing method, computer program, program storage medium, data structure, recording medium, recording device, and manufacturing method of recording medium
JP4210948B2 (ja) 情報処理装置および情報処理方法、プログラム格納媒体、並びに、プログラム
JP2005312071A (ja) 映像データの記録された情報貯蔵媒体、その記録方法、記録装置、再生方法及び再生装置
JP2008512919A (ja) コンテンツ関係メディアストリーム間の単純化された切り換え
JP2007533240A (ja) 再符号化が不要なマルチメディア・セクションのシームレス接続のためのブリッジ・クリップの生成
KR100393918B1 (ko) 디지털 엠펙 데이터를 저장 매체에 저장하고 재생하는시스템 및 그 방법
JP4114137B2 (ja) 情報処理装置および方法、記録媒体、並びにプログラム
WO2005101414A1 (en) Creating a seamless connection of multimedia sections without requiring recoding
JP4846502B2 (ja) 音声出力装置及び音声出力方法
JP4915412B2 (ja) 記録装置および方法、再生装置および方法、並びに記録媒体
JP5557057B2 (ja) 記録媒体
MXPA06007710A (en) Reproduction device, reproduction method, program, recording medium, and data structure

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20080408

A761 Written withdrawal of application

Free format text: JAPANESE INTERMEDIATE CODE: A761

Effective date: 20090512