JP3594479B2

JP3594479B2 - Time series information extraction method and system for implementing it

Info

Publication number: JP3594479B2
Application number: JP6389898A
Authority: JP
Inventors: 充照片岡; 武之助原田
Original assignee: Panasonic Corp; Matsushita Electric Industrial Co Ltd
Current assignee: Panasonic Corp; Panasonic Holdings Corp
Priority date: 1998-03-02
Filing date: 1998-03-02
Publication date: 2004-12-02
Anticipated expiration: 2018-03-02
Also published as: JPH11252553A

Description

【０００１】
【発明の属する技術分野】
本発明は、伝送される映像や音声などの時系列情報から一部分の情報を切り出す切り出し方法と、それを実施するシステムに関し、特に、正確な精度での部分情報の切り出しを実現するものである。
【０００２】
【従来の技術】
デジタル衛星放送では、マルチプログラムへの対応を可能にするため、映像、音声及びデータが、ＭＰＥＧ２システムのトランスポート・ストリーム（ＴＳ）に多重化されて放送される。
【０００３】
このＴＳでは、多重化に１８８バイトの固定長のトランスポート・パケット（ＴＳパケット）が用いられ、このＴＳパケットには、図３に示すように、ペイロード（情報）の前にパケット・データの内容識別情報が付加される。
【０００４】
ＴＳでは、個別のプログラムのパケット（ＰＥＳ（ＰａｃｋｅｔｉｚｅｄＥｌｅｍｅｎｔａｒｙＳｔｒｅａｍ）パケット）情報（図４に図示）を再分割して複数のＴＳパケットにより伝送する。
【０００５】
受信装置では、変調されているＴＳを受信すると、復調した後、選択したプログラムのパケットを分離して復号再生する。
【０００６】
このＭＰＥＧ方式による映像・音声の伝送では、映像や音声の復号単位（映像は１フレーム、音声は１オーディオ・フレーム）の復号再生時点を復号側に伝えるため、図４に示すように、ＰＴＳ（ＰｒｅｓｅｎｔａｓｉｏｎＴｉｍｅＳｔａｍｐ）及びＤＴＳ（ＤｅｃｏｄｉｎｇＴｉｍｅＳｔａｍｐ）の２種類のタイムスタンプが用いられる。ＰＴＳは再生出力の時刻管理情報であり、ＤＴＳは復号の時刻管理情報である。これらのタイムスタンプは、パケットの中に復号単位の先頭がある場合にはパケットに付加され、パケットの中に復号単位の先頭が無い場合には付加されない。
【０００７】
また、ＴＳパケットには、図３に示すように、これらのタイムスタンプに対して時間基準を与えるＰＣＲ（ＰｒｏｇｒａｍＣｌｏｃｋＲｅｆｅｒｅｎｃｅ）が付加される。
【０００８】
こうしたデジタル放送では、多チャネル化が可能となり、視聴者の選択肢は増加するが、番組選択操作は煩雑になる。そのため、デジタル多チャネル放送では、番組名や放送スケジュール、出演者名などの情報を含むＥＰＧ（電子番組ガイド）をデータ放送して番組選択の便を図っている。視聴者は、テレビ画面にそれを表示して、番組表上で直接、選局や視聴予約などを操作したり、選択した番組の次回番組予告を見たりすることが可能となる。
【０００９】
本発明者を含むグループでは、視聴者が、放送時刻に縛られずに自分のペースで観たい番組を観ることができる次世代のデジタル放送システムの開発を進めている。
【００１０】
この放送システムでは、受信装置が、放送される情報の中から、視聴者の操作を待つことなく、視聴者の嗜好に適合する番組を選択して自動的に蓄積する。例えば、ＥＰＧ情報から視聴者がよく見る番組の次回番組予告を蓄積したり、視聴者が車好きであるときには、車のＣＭを蓄積する。視聴者は、こうして蓄積された情報を都合のよい時間に受信装置の画面に表示して楽しむことができる。
【００１１】
この放送システムでは、放送される映像・音声情報の中から所定の部分情報を切り出すことが必要になる。また、伝送される映像・音声情報の中から部分情報を抽出することは、こうしたシステムだけで無く、多くの伝送システムにおいて求められる。
【００１２】
映像・音声などの時系列情報から部分情報を抽出するシステムは、これまで、図６に示すように構成されている。時系列情報が映像である場合に、映像を送出する側の送出部１は、映像を生成する映像生成手段１２と、切り出すべき部分映像の送出予定時刻を出力する送出予定時刻生成手段１１とを具備し、また、映像を受信する側の受信部３は、時刻を計時する計時手段３３と、伝送手段２を通じて伝送された映像から所定時刻の部分映像を切り出す時刻トリミング手段３１と、切り出された部分映像を表示する表示手段３２とを具備している。
【００１３】
このシステムでは、送出部１の映像生成手段１２が、映像を出力し、また、送出予定時刻生成手段１１が、切り出しの対象となる部分映像の送出開始予定時刻及び送出終了予定時刻を予め受信部３に通知する。
【００１４】
受信部３の時刻トリミング手段３１は、計時手段３３が出力する時刻情報に基づいて、受信した映像の中から、送出開始予定時刻から送出終了予定時刻までの映像を切り出す。切り出された部分映像は、表示手段３２に出力されて表示される。
【００１５】
このように、送出側で、映像を送出する前にビデオクリップの場所を時刻指定することにより、受信側での部分映像の抽出が可能となる。
【００１６】
【発明が解決しようとする課題】
しかし、時系列情報が実際に送出部から送出される時刻は、送出部内でのバッファリングの作用などが影響するため、実際にそれが送出されるまでは、正確な時刻を確定することができない。また、衛星を利用する放送などでは、伝送手段による伝送遅延が可成り大きく、放送波が衛星を往復するだけで０．２秒程度の時間が経過する。そのため、時系列情報の切り出すべき時間帯を事前に時刻指定する方法では、受信側で部分情報を正確に切り出すことができないという問題点を有している。
【００１７】
本発明は、こうした従来の問題点を解決するものであり、時系列情報から部分情報を正確に切り出すことができる時系列情報切り出し方法を提供し、その方法を実施するシステムを提供することを目的としている。
【００１８】
【課題を解決するための手段】
そこで、本発明では、時系列情報の送出側が、部分情報の送出予定時刻を予め送出するとともに、実際に送出された時系列情報の特定が可能な指標（インデックスや実績時刻）によって部分情報を指定する指定情報を送出し、時系列情報の受信側が、送出予定時刻に基づいて、部分情報を含む時系列情報を暫定的に切り出し、指定情報に基づいて、暫定的に切り出した時系列情報から部分情報を再度切り出すようにしている。
【００１９】
そのため、送出済みになるまで送出時刻を正確に確定できない部分情報を、受信側では、多くのメモリ容量を必要とすること無く、正確に切り出すことができる。
【００２０】
【発明の実施の形態】
本発明の請求項１に記載の発明は、伝送された時系列情報から部分情報を切り出す時系列情報切り出し方法において、時系列情報の送出側が、部分情報の送出開始予定時刻と送出終了予定時刻とを予め送出し、時系列情報にインデックスを付加して送出し、また、部分情報をこのインデックスで指定するインデックス指定情報を送出し、時系列情報の受信側が、送出開始予定時刻と送出終了予定時刻との間の部分情報を含む時系列情報を切り出し、インデックス指定情報に基づいて、切り出した時系列情報から部分情報を再度切り出すようにしたものであり、時系列情報から部分情報を正確に切り出すことができる。
【００２１】
請求項２に記載の発明は、送出側が、時系列情報としてＭＰＥＧ２システムのトランスポートストリームを送出し、インデックスとしてプログラム・クロック・リファレンスを用いるようにしたものであり、誤差が１００ｍｓ以下（３フレーム前後）の精度で部分情報を切り出すことができる。
【００２２】
請求項３に記載の発明は、送出側が、時系列情報としてＭＰＥＧ２システムのストリームを送出し、インデックスとしてプレゼンテーション・タイムスタンプを用いるようにしたものであり、１フレームの精度で部分情報を切り出すことができる。
【００２３】
請求項４に記載の発明は、送出側が、時系列情報としてＭＰＥＧ２システムのストリームを送出し、インデックスとしてデコード・タイムスタンプを用いるようにしたものであり、１フレームの精度で部分情報を切り出すことができる。
【００２４】
請求項５に記載の発明は、伝送された時系列情報から部分情報を切り出す時系列情報切り出し方法において、時系列情報の送出側が、部分情報の送出開始予定時刻と送出終了予定時刻とを予め送出し、また、時系列情報を送出するとともに、部分情報が実際に送出された時刻を特定する実績時刻情報を送出し、時系列情報の受信側が、送出開始予定時刻と送出終了予定時刻との間の部分情報を含む時系列情報を切り出し、実績時刻情報に基づいて、切り出した時系列情報から部分情報を再度切り出すようにしたものであり、簡便な構成で時系列情報から部分情報を正確に切り出すことができる。
【００２５】
請求項６に記載の発明は、時系列情報を送出する送出装置と、時系列情報を受信して部分情報を切り出す受信装置とから成る時系列情報伝送システムにおいて、送出装置に、時系列情報を生成する時系列情報生成手段と、部分情報の送出開始予定時刻と送出終了予定時刻とを生成して、部分情報が送出される前に送出する送出予定時刻生成手段と、時系列情報にインデックスを付加して送出する時系列情報送出手段と、部分情報をインデックスで指定するインデックス指定情報を生成して送出するインデックス指定情報生成手段とを設け、受信装置に、送出開始予定時刻及び送出終了予定時刻に基づいて、送出開始予定時刻と送出終了予定時刻との間の部分情報を含む時系列情報を切り出す時刻トリミング手段と、インデックス指定情報に基づいて、切り出された時系列情報から部分情報を切り出すインデックス・トリミング手段とを設けたものであり、請求項１の時系列情報切り出し方法を実施することができる。
【００２６】
請求項７に記載の発明は、時系列情報送出手段が、プログラム・クロック・リファレンスをインデックスとするＭＰＥＧ２システムのトランスポートストリームを送出し、インデックス指定情報生成手段が、部分情報をプログラム・クロック・リファレンスによって指定するインデックス指定情報を生成するようにしたものであり、請求項２の時系列情報切り出し方法を実施することができる。
【００２７】
請求項８に記載の発明は、時系列情報送出手段が、プレゼンテーション・タイムスタンプをインデックスとするＭＰＥＧ２システムのストリームを送出し、インデックス指定情報生成手段が、部分情報をプレゼンテーション・タイムスタンプによって指定するインデックス指定情報を生成するようにしたものであり、請求項３の時系列情報切り出し方法を実施することができる。
【００２８】
請求項９に記載の発明は、時系列情報送出手段が、デコード・タイムスタンプをインデックスとするＭＰＥＧ２システムのストリームを送出し、インデックス指定情報生成手段が、部分情報をデコード・タイムスタンプによって指定するインデックス指定情報を生成するようにしたものであり、請求項４の時系列情報切り出し方法を実施することができる。
【００２９】
請求項１０に記載の発明は、時系列情報を送出する送出装置と、時系列情報を受信して部分情報を切り出す受信装置とから成る時系列情報伝送システムにおいて、送出装置に、時系列情報を生成して送出する時系列情報生成手段と、部分情報の送出開始予定時刻と送出終了予定時刻とを生成して、部分情報が送出される前に送出する送出予定時刻生成手段と、部分情報が実際に送出された時刻を特定する実績時刻情報を生成して送出する実績時刻生成手段とを設け、受信装置に、送出開始予定時刻及び送出終了予定時刻に基づいて、送出開始予定時刻と送出終了予定時刻との間の部分情報を含む時系列情報を切り出す第１の時刻トリミング手段と、実績時刻情報に基づいて、切り出された時系列情報から部分情報を切り出す第２の時刻トリミング手段とを設けたものであり、請求項５の時系列情報切り出し方法を実施することができる。
【００３０】
以下、本発明の実施の形態について、図面を用いて説明する。
【００３１】
（第１の実施形態）
第１の実施形態の時系列情報伝送システムは、図１に示すように、送出部１が、映像を生成する映像生成手段１２と、切り出すべき部分映像の送出予定時刻を出力する送出予定時刻生成手段１１と、映像に付加されるインデックスを生成するインデックス生成手段１４と、映像生成手段１２が生成した映像にこのインデックスを付加するインデックス付加手段１３と、切り出すべき部分情報についてインデックスで指定したインデックス指定情報を生成して送出するインデックス指定情報生成手段１５とを備え、また、受信部３が、時刻を計時する計時手段３３と、伝送手段２を通じて伝送された映像から時刻指定された部分映像を大まかに切り出す時刻トリミング手段３１と、時刻トリミング手段３１によって切り出された部分映像の中からインデックス指定情報に基づいて部分映像を正確に切り出すインデックストリミング手段３４と、インデックストリミング手段３４により切り出された部分映像を表示する表示手段３２とを備えている。
【００３２】
このシステムの動作を図２に示すフローチャートを用いて説明する。
【００３３】
ステップ１：送出部１の映像生成手段１２は、映像を生成してインデックス付加手段１３に出力し、同時に、映像の実際の出力実績を表す実績情報をインデックス指定情報生成手段１５に出力する。また、送出予定時刻生成手段１１は、切り出しの対象となる部分映像の送出開始予定時刻及び送出終了予定時刻を生成し、事前に受信部３に送出する。
【００３４】
ステップ２：送出部１のインデックス生成手段１４は、映像に付加されるインデックスを生成して、インデックス付加手段１３とインデックス指定情報生成手段１５とに出力し、インデックス付加手段１３は、映像生成手段１２から出力された映像にこのインデックスを付加し、
ステップ３：このインデックスが付加された映像情報を、伝送手段２を通じて受信部３に送出する。
【００３５】
ステップ４：受信部３の時刻トリミング手段３１は、計時手段３３が出力する時刻情報に基づいて、受信した映像情報の中から、送出部１より事前に受信した送出開始予定時刻と送出終了予定時刻との間の映像を、余裕を持って大き目に切り出す。
【００３６】
ステップ５：送出部１のインデックス指定情報生成手段１５は、映像生成手段１２から入力した実績情報とインデックス生成手段１４から入力したインデックスとを基に、切り出すべき部分映像の先頭及び末尾に付加されたインデックスを求め、このインデックスで部分映像を特定するインデックス指定情報を生成して受信部３に送出する。
【００３７】
ステップ６：受信部３のインデックストリミング手段３４は、時刻トリミング手段３１によって切り出された部分映像（暫定部分映像）の中からインデックス指定情報によって特定された部分映像を切り出す。表示手段３２は、切り出された部分映像を表示する。
【００３８】
このように、この実施形態のシステムでは、時系列情報を伝送する送出側が、部分情報の送出予定時刻を事前に受信側に伝えるとともに、実際の時系列情報に付したインデックスによって部分情報を指定するインデックス指定情報を受信側に伝送する。一方、受信側は、受信した時系列情報を、送出予定時刻に基づいて暫定的に切り出し、次いで、この暫定的に切り出した時系列情報の中から、正確な部分情報をインデックス指定情報に基づいて切り出している。
【００３９】
そのため、受信側では、時系列情報を蓄積するための大きなメモリを持たなくとも、部分情報を正確に抽出することができる。
【００４０】
この時系列情報として、送出側と受信側との間でＭＰＥＧ２システムのＴＳを伝送するシステムでは、ＴＳパケットに付すＰＣＲをインデックスとして用いることができる。
【００４１】
この場合、送出側は、部分情報の送出に先立って、その部分情報の送出予定時刻を時刻指定し、また、実際に時系列情報を送出した後、送出時のＴＳパケットに付したＰＣＲを解析して、部分情報をＰＣＲにより再指定する。
【００４２】
一方、受信側は、受信したＴＳパケットの中で、時刻指定された範囲よりも多めのＴＳパケットを記憶手段に保存し、ＰＣＲでの再指定を受信した時点で、不要なＴＳパケットを記憶手段から削除する。なお、このＰＣＲは、ペイロードがスクランブルされていても参照することが可能である。
【００４３】
こうして、ＰＣＲをインデックスとすることにより、誤差範囲が１００ｍｓ以下（３フレーム前後）の精度で部分映像を切り出すことができる。
【００４４】
また、この場合、ＰＴＳまたはＤＴＳをインデックスとして併用することにより、部分情報の切り出し精度をさらに上げることができる。
【００４５】
このとき、送出側は、ＴＳパケットをＰＣＲで再指定した後、送出時のＰＴＳまたはＤＴＳの実績を解析して、部分情報をＰＴＳまたはＤＴＳにより再々指定する。
【００４６】
受信側は、ＰＣＲに基づいて選択したＴＳパケットから、さらに該当するＰＴＳまたはＤＴＳを有する情報だけを選択する。
【００４７】
こうして、ＰＴＳまたはＤＴＳをインデックスとすることにより、１フレームの精度で部分映像を切り出すことができる。但し、ＰＴＳ及びＤＴＳは、ペイロードがスクランブルされている場合、デスクランブル後に始めて参照することが可能となる。
【００４８】
また、ＰＥＳパケットをパックしたＭＰＥＧ２−ＰＳ（ＰｒｏｇｒａｍＳｔｒｅａｍ）を時系列情報として伝送するＭＰＥＧ２ビデオのシステムでも、同様に、ＰＥＳパケットに付されたＰＴＳまたはＤＴＳをインデックスとして用いることにより、フレーム単位の精度で部分映像を切り出すことができる。
【００４９】
（第２の実施形態）
第２の実施形態では、簡単な構成で部分情報の正確な切り出しが可能なシステムについて説明する。
【００５０】
このシステムは、図５に示すように、送出部１が、映像を生成する映像生成手段１２と、切り出すべき部分映像の送出予定時刻を出力する送出予定時刻生成手段１１と、時刻を計時する計時手段１６と、映像の実際の送出時刻を表示する実績時刻の情報を生成して送出する実績時刻生成手段１７とを備え、また、受信部３が、時刻を計時する計時手段３３と、伝送手段２を通じて伝送された映像から送出予定時刻に基づいて部分映像を大まかに切り出す第１時刻トリミング手段３５と、第１時刻トリミング手段３５によって切り出された暫定部分映像の中から実績時刻情報に基づいて部分映像を正確に切り出す第２時刻トリミング手段３６と、第２時刻トリミング手段３２によって切り出された部分映像を表示する表示手段３２とを備えている。
【００５１】
このシステムの送出部１では、送出予定時刻生成手段１１が、切り出しの対象となる部分映像の送出開始予定時刻及び送出終了予定時刻を生成して、事前に受信部３に送出する。また、映像生成手段１２は、生成した映像を送出するとともに、映像の実際の出力実績を表す実績情報を実績時刻生成手段１７に出力する。
【００５２】
実績時刻生成手段１７は、映像生成手段１２から入力した実績情報と計時手段１６から入力する時刻情報とを基に、切り出すべき部分映像の先頭及び末尾が実際に送出された時刻を求め、それを実績情報として受信部３に送出する。
【００５３】
受信部３では、第１時刻トリミング手段３５が、計時手段３３より出力される時刻情報に基づいて、受信した映像情報の中から、送出部１より事前に受信した送出開始予定時刻と送出終了予定時刻との間の映像を、余裕を持って大き目に切り出す。
【００５４】
第２時刻トリミング手段３６は、第１時刻トリミング手段３５によって切り出された部分映像（暫定部分映像）の中から、実績時刻情報に基づいて、部分映像を正確に切り出す。表示手段３２は、切り出された部分映像を表示する。
【００５５】
このように、この実施形態のシステムでは、時系列情報を伝送する送出側が、部分情報の送出予定時刻を事前に受信側に伝えるとともに、部分情報の実際の送出時刻を求め、これを受信側に伝送する。一方、受信側は、受信した時系列情報を、送出予定時刻に基づいて暫定的に切り出し、次いで、この暫定的に切り出した時系列情報の中から、実際の部分情報の送出時刻に相当する部分を切り出している。
【００５６】
そのため、伝送手段２による遅延を無視できるような環境の下では、受信側において、簡単な構成によって、時系列情報から部分情報を正確に抽出することができる。
【００５７】
なお、各実施形態では、切り出された部分情報を直接表示手段で表示しているが、この部分情報を一旦蓄積手段に蓄積するようにしてもよい。
【００５８】
【発明の効果】
以上の説明から明らかなように、本発明の時系列情報切り出し方法は、受信側において、多くのメモリ容量を必要とすること無く、時系列情報から部分情報を正確に切り出すことを可能にする。
【００５９】
また、本発明の時系列情報伝送システムは、この時系列情報切り出し方法を実現することができ、また、従来の送出装置が備えている多重化装置などに手を加えること無く、構成することができる。
【図面の簡単な説明】
【図１】第１の実施形態の時系列情報伝送システムの構成を示すブロック図、
【図２】第１の実施形態の時系列情報切り出し方法の手順を示すフローチャート、
【図３】ＭＰＥＧ２トランスポート・パケットのデータ構造、
【図４】ＰＥＳパケットのデータ構造、
【図５】第２の実施形態の時系列情報伝送システムの構成を示すブロック図、
【図６】従来の時系列情報伝送システムの構成を示すブロック図である。
【符号の説明】
１送出部
２伝送手段
３受信部
１１送出予定時刻生成手段
１２映像生成手段
１３インデックス付加手段
１４インデックス生成手段
１５インデックス指定情報生成手段
１６、３３計時手段
１７実績時刻生成手段
３１時刻トリミング手段
３２表示手段
３４インデックストリミング手段
３５第１時刻トリミング手段
３６第２時刻トリミング手段[0001]
TECHNICAL FIELD OF THE INVENTION
The present invention relates to a method for extracting a part of information from time-series information such as video and audio to be transmitted and a system for implementing the method, and more particularly to a method for extracting partial information with accurate accuracy.
[0002]
[Prior art]
In digital satellite broadcasting, video, audio, and data are multiplexed on a transport stream (TS) of an MPEG2 system and broadcast in order to support multi-programs.
[0003]
In this TS, a 188-byte fixed-length transport packet (TS packet) is used for multiplexing. As shown in FIG. 3, the TS packet includes, as shown in FIG. Identification information is added.
[0004]
In the TS, information of a packet (PES (Packetized Elementary Stream) packet) (shown in FIG. 4) of an individual program is subdivided and transmitted by a plurality of TS packets.
[0005]
When the receiving apparatus receives the modulated TS, it demodulates and then decodes and reproduces the packets of the selected program.
[0006]
In the video / audio transmission by the MPEG system, the decoding side of the video / audio decoding unit (video is one frame, audio is one audio frame) is transmitted to the decoding side, so as shown in FIG. Two types of time stamps are used: Presentation Time Stamp and DTS (Decoding Time Stamp). PTS is time management information for reproduction output, and DTS is time management information for decoding. These time stamps are added to the packet when the packet has the head of the decoding unit, and are not added when the packet does not have the head of the decoding unit.
[0007]
In addition, as shown in FIG. 3, a PCR (Program Clock Reference) that gives a time reference to these time stamps is added to the TS packet.
[0008]
In such digital broadcasting, multi-channels can be provided and the number of options for viewers increases, but the program selection operation becomes complicated. Therefore, in digital multi-channel broadcasting, an EPG (Electronic Program Guide) including information such as a program name, a broadcast schedule, and cast names is data broadcasted to facilitate program selection. The viewer can display it on the television screen and operate channel selection and viewing reservation directly on the program guide, and can watch the next program announcement of the selected program.
[0009]
A group including the present inventors is developing a next-generation digital broadcasting system that enables a viewer to watch a desired program at his own pace without being restricted by the broadcast time.
[0010]
In this broadcasting system, the receiving device selects a program that matches the viewer's preference from the information to be broadcast and automatically accumulates the program without waiting for the viewer's operation. For example, the next program announcement of a program often viewed by the viewer is stored from the EPG information, and the CM of the car is stored when the viewer likes the car. The viewer can enjoy the information thus accumulated displayed on the screen of the receiving device at a convenient time.
[0011]
In this broadcasting system, it is necessary to cut out predetermined partial information from the broadcasted video / audio information. Extraction of partial information from video / audio information to be transmitted is required not only in such systems but also in many transmission systems.
[0012]
A system for extracting partial information from time-series information such as video and audio has been configured as shown in FIG. When the time-series information is a video, the transmitting unit 1 on the video transmitting side includes a video generating unit 12 for generating a video and a scheduled transmission time generating unit 11 for outputting a scheduled transmission time of a partial video to be cut out. The receiving unit 3 on the side receiving the video includes a clocking unit 33 that measures time, a time trimming unit 31 that cuts out a partial video at a predetermined time from the video transmitted through the transmission unit 2, Display means 32 for displaying a partial image.
[0013]
In this system, the video generation means 12 of the transmission unit 1 outputs a video, and the scheduled transmission time generation means 11 determines in advance the scheduled transmission start time and transmission end time of the partial video to be cut out by the receiving unit. Notify 3.
[0014]
The time trimming unit 31 of the receiving unit 3 cuts out the video from the scheduled transmission start time to the scheduled transmission end time from the received video based on the time information output by the clock unit 33. The cut-out partial video is output to the display means 32 and displayed.
[0015]
In this way, by specifying the time of the video clip before transmitting the video on the transmitting side, the partial video can be extracted on the receiving side.
[0016]
[Problems to be solved by the invention]
However, the time at which the time-series information is actually transmitted from the transmission unit is affected by the buffering operation in the transmission unit and the like, so that an accurate time cannot be determined until the time is actually transmitted. . Further, in a broadcast using a satellite or the like, a transmission delay by a transmission means is considerably large, and a time of about 0.2 seconds elapses just by a broadcast wave reciprocating between satellites. Therefore, the method of specifying the time zone in which the time series information is to be extracted in advance has a problem that the receiving side cannot accurately extract the partial information.
[0017]
SUMMARY OF THE INVENTION The present invention has been made to solve the conventional problems, and has as its object to provide a time-series information extraction method capable of accurately extracting partial information from time-series information, and to provide a system for implementing the method. And
[0018]
[Means for Solving the Problems]
Therefore, in the present invention, the sending side of the time-series information sends the scheduled time of sending the partial information in advance, and designates the partial information by an index (index or actual time) that can specify the actually sent time-series information. The specified information to be transmitted, and the receiving side of the time-series information tentatively cuts out the time-series information including the partial information based on the scheduled transmission time, and partially extracts the time-series information temporarily cut out based on the specified information. The information is cut out again.
[0019]
Therefore, the receiving side can accurately extract the partial information for which the transmission time cannot be accurately determined until the transmission has been completed, without requiring a large memory capacity.
[0020]
BEST MODE FOR CARRYING OUT THE INVENTION
An invention according to claim 1 of the present invention is directed to a time-series information extracting method for extracting partial information from transmitted time-series information, wherein the transmitting side of the time-series information includes a scheduled transmission start time and a scheduled transmission end time of the partial information. Is transmitted in advance, an index is added to the time-series information and transmitted, and index designation information for designating the partial information by this index is transmitted. cut out time-series information including the partial information between, based on the index specifying information is obtained by the time-series information cut to cut out partial information again, when precisely cutting it the partial information from the sequence information Can be.
[0021]
According to a second aspect of the present invention, the transmitting side transmits a transport stream of the MPEG2 system as time-series information and uses a program clock reference as an index, and an error is 100 ms or less (around 3 frames). The partial information can be cut out with the accuracy of ()).
[0022]
According to a third aspect of the present invention, the transmitting side transmits an MPEG2 system stream as time-series information and uses a presentation timestamp as an index, and can cut out partial information with an accuracy of one frame. it can.
[0023]
According to a fourth aspect of the present invention, the transmitting side transmits an MPEG2 system stream as time-series information and uses a decode time stamp as an index, and can cut out partial information with an accuracy of one frame. it can.
[0024]
According to a fifth aspect of the present invention, in the time-series information extracting method for extracting partial information from the transmitted time-series information, the transmitting side of the time-series information transmits a scheduled start time and a scheduled end time of the partial information in advance. In addition, the time-series information is transmitted, and the actual time information for specifying the time at which the partial information is actually transmitted is transmitted. cut out time-series information including the partial information of, based on the actual time information is obtained by the time-series information cut to cut out partial information again, cut exactly the partial information from the time-series information with a simple structure be able to.
[0025]
According to a sixth aspect of the present invention, in a time-series information transmission system including a transmitting device that transmits time-series information and a receiving device that receives the time-series information and cuts out partial information, the time-series information is transmitted to the transmitting device. Time series information generating means for generating, a scheduled transmission start time and a scheduled transmission end time for the partial information, and a scheduled transmission time generating means for transmitting the partial information before the partial information is transmitted; and time-series information sending means for sending additional to, the index specifying information generating means for transmitting and generates the index specifying information specifying the partial information in the index provided to the receiving apparatus, the transmission start scheduled time and scheduled finish time of transmission based on, and time trimming means for cutting out the time-series information including the partial information between the scheduled delivery start time and transmission end scheduled time, based on the index specifying information There are, which provided an index trimming means for cutting the partial information from the time-series information cut out, it is possible to implement the time-series information excision method of claim 1.
[0026]
According to a seventh aspect of the present invention, the time-series information transmitting means transmits the transport stream of the MPEG2 system using the program clock reference as an index, and the index designation information generating means transmits the partial information to the program clock reference. The index specifying information specified by the method is generated, and the time-series information extracting method according to claim 2 can be implemented.
[0027]
According to an eighth aspect of the present invention, the time series information transmitting means transmits a stream of the MPEG2 system using the presentation time stamp as an index, and the index specification information generating means generates an index specifying the partial information by the presentation time stamp. The designated information is generated, and the method for extracting time-series information according to claim 3 can be implemented.
[0028]
According to a ninth aspect of the present invention, the time-series information transmitting means transmits an MPEG2 system stream using the decode time stamp as an index, and the index specification information generating means generates an index specifying the partial information by the decode time stamp. The designated information is generated, and the method for extracting time-series information according to claim 4 can be implemented.
[0029]
According to a tenth aspect of the present invention, in a time-series information transmission system including a transmission device that transmits time-series information and a reception device that receives the time-series information and cuts out partial information, the transmission device transmits the time-series information to the transmission device. A time-series information generating means for generating and transmitting; a scheduled transmission start time and a scheduled transmission end time for the partial information; and a scheduled transmission time generating means for transmitting before the partial information is transmitted; Actual time generating means for generating and transmitting actual time information for specifying an actual transmission time; and providing the receiving device with an estimated transmission start time and an end transmission based on the estimated transmission start time and the expected transmission end time. a first time trimming means for cutting out the time-series information including the partial information between scheduled time, based on actual time information, second time to cut out partial information from the time-series information cut out Torimi Are those provided with a grayed means may perform time-series information excision method of claim 5.
[0030]
Hereinafter, embodiments of the present invention will be described with reference to the drawings.
[0031]
(1st Embodiment)
In the time-series information transmission system according to the first embodiment, as shown in FIG. 1, a sending unit 1 includes a video generation unit 12 that generates a video and a scheduled transmission time generation that outputs a scheduled transmission time of a partial video to be cut out. Means 11, an index generating means 14 for generating an index to be added to the video, an index adding means 13 for adding the index to the video generated by the video generating means 12, and an index specification designated by the index for the partial information to be cut out Index receiving information generating means 15 for generating and transmitting information; and a receiving unit 3 comprising: a time measuring means 33 for measuring time; and a time-specific partial video from a video transmitted through the transmitting means 2. Time trimming means 31 to cut out the video and whether the partial video cut out by the time trimming means 31 An index trimming means 34 for cutting accurately the partial image based on the index specifying information, and a display unit 32 for displaying the partial image cut out by the index trimming means 34.
[0032]
The operation of this system will be described with reference to the flowchart shown in FIG.
[0033]
Step 1: The video generation unit 12 of the transmission unit 1 generates a video and outputs it to the index addition unit 13, and at the same time, outputs actual information indicating the actual output performance of the video to the index designation information generation unit 15. Further, the scheduled transmission time generation means 11 generates a scheduled transmission start time and a scheduled transmission end time of the partial video to be cut out, and transmits them to the receiving unit 3 in advance.
[0034]
Step 2: The index generating means 14 of the sending unit 1 generates an index to be added to the video and outputs it to the index adding means 13 and the index designation information generating means 15. This index is added to the video output from
Step 3: The video information to which the index is added is transmitted to the receiving unit 3 through the transmission unit 2.
[0035]
Step 4: The time trimming unit 31 of the receiving unit 3 uses the time information output by the clocking unit 33 to select, from the received video information, the scheduled transmission start time and the scheduled transmission end time previously received from the transmission unit 1. The video between and is cut out to a large size with plenty of time.
[0036]
Step 5: The index designation information generating means 15 of the sending unit 1 is added to the beginning and end of the partial video to be cut out based on the result information input from the video generating means 12 and the index input from the index generating means 14. An index is obtained, index specifying information for specifying a partial video is generated using the index, and the index specifying information is transmitted to the receiving unit 3.
[0037]
Step 6: The index trimming unit 34 of the receiving unit 3 cuts out the partial video specified by the index designation information from the partial video (temporary partial video) cut out by the time trimming unit 31. The display means 32 displays the clipped partial video.
[0038]
As described above, in the system of this embodiment, the transmitting side transmitting the time-series information notifies the receiving side in advance of the scheduled transmission time of the partial information, and specifies the partial information by the index attached to the actual time-series information. The index designation information is transmitted to the receiving side. On the other hand, the receiving side tentatively cuts out the received time-series information based on the scheduled transmission time, and then, from the tentatively cut-out time-series information, extracts accurate partial information based on the index designation information. It has been cut out.
[0039]
Therefore, the receiving side can accurately extract the partial information without having a large memory for storing the time-series information.
[0040]
As the time-series information, in a system for transmitting a TS of the MPEG2 system between the sending side and the receiving side, a PCR attached to a TS packet can be used as an index.
[0041]
In this case, before sending the partial information, the sending side designates the scheduled sending time of the partial information, and after actually sending the time-series information, analyzes the PCR attached to the TS packet at the time of sending. Then, the partial information is redesignated by PCR.
[0042]
On the other hand, the receiving side stores in the storage means a larger number of TS packets in the received TS packets than the time-specified range, and stores unnecessary TS packets when the re-designation by PCR is received. Remove from. This PCR can be referred to even if the payload is scrambled.
[0043]
In this way, by using the PCR as an index, a partial image can be cut out with an error range of 100 ms or less (around 3 frames).
[0044]
Further, in this case, by using PTS or DTS as an index, the cutout accuracy of the partial information can be further increased.
[0045]
At this time, after re-designating the TS packet by PCR, the transmitting side analyzes the PTS or DTS performance at the time of transmission, and re-specifies the partial information again by PTS or DTS.
[0046]
The receiving side further selects only information having the corresponding PTS or DTS from the TS packets selected based on the PCR.
[0047]
In this way, by using the PTS or DTS as an index, a partial video can be cut out with an accuracy of one frame. However, when the payload is scrambled, the PTS and DTS can be referred to only after descrambling.
[0048]
Similarly, in an MPEG2 video system that transmits MPEG2-PS (Program Stream) in which PES packets are packed as time-series information, the PTS or DTS attached to the PES packets is used as an index to improve the accuracy of each frame. Can be used to cut out a partial image.
[0049]
(Second embodiment)
In the second embodiment, a system that can accurately extract partial information with a simple configuration will be described.
[0050]
In this system, as shown in FIG. 5, a sending unit 1 includes a video generating unit 12 for generating a video, a scheduled sending time generating unit 11 for outputting a scheduled sending time of a partial video to be cut out, and a clock for counting time. Means 16 and actual time generating means 17 for generating and transmitting actual time information for displaying the actual transmission time of the video, and the receiving unit 3 comprises: a time measuring means 33 for measuring the time; A first time trimming means 35 for roughly cutting out a partial video from the video transmitted through the second device based on the scheduled transmission time, and a partial time based on the actual time information from the provisional partial video cut out by the first time trimming means 35 A second time trimming means 36 for accurately cutting out the video and a display means 32 for displaying the partial video cut out by the second time trimming means 32 are provided. .
[0051]
In the sending unit 1 of this system, the scheduled sending time generating means 11 generates the scheduled sending start time and the scheduled sending end time of the partial video to be cut out, and sends them to the receiving unit 3 in advance. In addition, the video generation unit 12 outputs the generated video, and outputs the performance information indicating the actual output performance of the video to the performance time generation unit 17.
[0052]
The actual time generation unit 17 obtains the time at which the head and the end of the partial video to be cut are actually transmitted based on the actual information input from the video generation unit 12 and the time information input from the clock unit 16, and calculates the time. The result information is sent to the receiving unit 3.
[0053]
In the receiving unit 3, the first time trimming unit 35 uses the time information output from the clocking unit 33 to select, from the received video information, the scheduled transmission start time and the transmission end schedule received in advance from the transmission unit 1. The video before the time is cut out to a large size with plenty of time.
[0054]
The second time trimming means 36 accurately cuts out the partial video from the partial video (temporary partial video) cut out by the first time trimming means 35 based on the actual time information. The display means 32 displays the clipped partial video.
[0055]
As described above, in the system of this embodiment, the transmitting side transmitting the time-series information notifies the receiving side in advance of the scheduled transmission time of the partial information, obtains the actual transmitting time of the partial information, and sends this to the receiving side. Transmit. On the other hand, the receiving side tentatively cuts out the received time-series information based on the scheduled transmission time, and then selects, from the tentatively cut-out time-series information, a part corresponding to the actual transmission time of the partial information. Is cut out.
[0056]
Therefore, in an environment where the delay caused by the transmission unit 2 can be ignored, the partial information can be accurately extracted from the time-series information on the receiving side with a simple configuration.
[0057]
In each embodiment, the cut-out partial information is directly displayed on the display unit, but this partial information may be temporarily stored in the storage unit.
[0058]
【The invention's effect】
As is clear from the above description, the time-series information extracting method of the present invention enables a receiving side to accurately extract partial information from time-series information without requiring a large memory capacity.
[0059]
In addition, the time-series information transmission system of the present invention can realize this time-series information extraction method, and can be configured without modifying a multiplexing device or the like provided in a conventional transmission device. it can.
[Brief description of the drawings]
FIG. 1 is a block diagram showing a configuration of a time-series information transmission system according to a first embodiment;
FIG. 2 is a flowchart showing a procedure of a method for extracting time-series information according to the first embodiment;
FIG. 3 shows the data structure of an MPEG2 transport packet,
FIG. 4 shows a data structure of a PES packet;
FIG. 5 is a block diagram illustrating a configuration of a time-series information transmission system according to a second embodiment;
FIG. 6 is a block diagram showing a configuration of a conventional time-series information transmission system.
[Explanation of symbols]
DESCRIPTION OF SYMBOLS 1 Sending part 2 Transmission means 3 Receiving part 11 Scheduled sending time generating means 12 Video generating means 13 Index adding means 14 Index generating means 15 Index designation information generating means 16, 33 Clocking means 17 Actual time generating means 31 Time trimming means 32 Display means 34 index trimming means 35 first time trimming means 36 second time trimming means

Claims

In a time-series information extraction method for extracting partial information from transmitted time-series information,
The transmitting side of the time-series information previously transmits the scheduled transmission start time and the scheduled transmission end time of the partial information, adds an index to the time-series information and transmits the time-series information, and designates the partial information by the index. Sends the index specification information,
The cut out time-series information including the partial information, based on the index specifying information, from said time-series information cut out portion between the receiving side, the transmission end scheduled time and the scheduled delivery start time of the time-series information A time-series information extracting method characterized by extracting information again.

2. The time-series information extracting method according to claim 1, wherein a transmitting side transmits a transport stream of an MPEG2 system as the time-series information, and uses a program clock reference as the index.

2. The method according to claim 1, wherein the transmitting side transmits an MPEG2 system stream as the time series information and uses a presentation time stamp as the index.

2. The time-series information extracting method according to claim 1, wherein the transmitting side transmits an MPEG2 system stream as the time-series information, and uses a decoding time stamp as the index.

In a time-series information extraction method for extracting partial information from transmitted time-series information,
The transmitting side of the time-series information previously transmits the scheduled transmission start time and the scheduled transmission end time of the partial information, transmits the time-series information, and specifies the time at which the partial information was actually transmitted. Send actual time information,
The cut out time-series information including the partial information, based on the actual time information, wherein the time-series information cut out portion between the receiving side, the transmission end scheduled time and the scheduled delivery start time of the time-series information A time-series information extracting method characterized by extracting information again.

In a time-series information transmission system including a transmission device that transmits time-series information and a reception device that receives the time-series information and cuts out partial information,
The sending device is
Time-series information generating means for generating the time-series information,
Scheduled transmission time generation means for generating a scheduled transmission start time and a scheduled transmission end time of the partial information and transmitting the partial information before the partial information is transmitted;
Time-series information sending means for sending an index added to the time-series information,
Index specifying information generating means for generating and transmitting index specifying information specifying the partial information by the index,
The receiving device is
Time trimming means for cutting out time-series information including the partial information between the scheduled transmission start time and the scheduled transmission end time based on the scheduled transmission start time and the scheduled transmission end time ,
Time-series information transmission system characterized by comprising an index-trimming means for cutting the partial information from the based on the index specifying information, cut the time-series information was.

The time-series information transmitting means transmits a transport stream of an MPEG2 system using a program clock reference as the index, and the index specification information generating means specifies an index specifying the partial information by the program clock reference. The time-series information transmission system according to claim 6, wherein the specified information is generated.

The time-series information transmitting means transmits an MPEG2 system stream using a presentation time stamp as the index, and the index specifying information generating means generates index specifying information specifying the partial information by the presentation time stamp. The time-series information transmission system according to claim 6, wherein

The time-series information transmitting means transmits an MPEG2 system stream using a decoding time stamp as the index, and the index specifying information generating means generates index specifying information specifying the partial information by the decoding time stamp. The time-series information transmission system according to claim 6, wherein

In a time-series information transmission system including a transmission device that transmits time-series information and a reception device that receives the time-series information and cuts out partial information,
The sending device is
Time-series information generating means for generating and transmitting the time-series information,
Scheduled transmission time generation means for generating a scheduled transmission start time and a scheduled transmission end time of the partial information and transmitting the partial information before the partial information is transmitted;
Actual time generating means for generating and transmitting actual time information specifying the time at which the partial information was actually transmitted,
The receiving device is
A first time trimming unit that cuts out time-series information including the partial information between the scheduled transmission start time and the scheduled transmission end time based on the scheduled transmission start time and the scheduled transmission end time ;
Time-series information transmission system characterized in that it comprises, based on the actual time information, and a second time trimming means from the time-series information cut out cutting the partial information.