JP2004274619A

JP2004274619A - Moving picture distribution server, moving picture receiving terminal, image packet transmission method, and image packet receiving method

Info

Publication number: JP2004274619A
Application number: JP2003065650A
Authority: JP
Inventors: Takehiro Hattori; 雄大服部; Koichi Matsumura; 浩一松村
Original assignee: Matsushita Electric Industrial Co Ltd
Current assignee: Panasonic Holdings Corp
Priority date: 2003-03-11
Filing date: 2003-03-11
Publication date: 2004-09-30

Abstract

<P>PROBLEM TO BE SOLVED: To provide a moving picture distribution system for distributing a moving picture without disturbance to a user at transmission restart after a temporary stop. <P>SOLUTION: The moving picture distribution server includes: a storage section for storing an image packet resulting from packetizing moving picture compression coding data including an intra-coding image and a forward or two-way prediction coded image; and a communication section that transmits the image packet read from the storage section to a moving picture receiving terminal when receiving a command of transmission start from the moving picture receiving terminal, searches the storage section when receiving a command of transmission stop from the terminal, stops the transmission of the image packet just before a temporary stop image packet being an image packet including a first intra-coded image after input of the transmission stop command, and restarts transmission from the temporary stop image packet when receiving a command of the transmission restart from the terminal. <P>COPYRIGHT: (C)2004,JPO&NCIPI

Description

【０００１】
【発明の属する技術分野】
本発明は、動画配信サーバ、動画受信端末装置、画像パケット送信方法及び画像パケット受信方法に関する。
【０００２】
【従来の技術】
近年、インターネットの高速化（例えばブロードバンド通信）により、インターネットを利用した動画配信サービスが行われている。特に、インターネットを通じてテレビ放送等で実績があるＭＰＥＧ２−ＴＳ（ＭｏｖｉｎｇＰｉｃｔｕｒｅＥｘｐｅｒｔｓＧｒｏｕｐ２ − ＴｒａｎｓｐｏｒｔＳｔｒｅａｍ）フォーマットの動画（ＴＳパケット）を配信する方法が広く使用されるようになってきている（例えば、特許文献１参照。）。
インターネットを利用した双方向通信により、ＶＯＤ（ＶｉｄｅｏＯｎＤｅｍａｎｄ）型の動画配信サービスが可能である。双方向通信により、送信装置（動画配信サーバと呼ぶ。）からユーザの動画受信端末装置への一方的な配信のみならず、ユーザから動画配信サーバに、一時停止、早送り、巻き戻し等の操作を要求することができる。これにより、ユーザは、あたかも自宅に設置したＶＴＲと同じように、動画配信サーバを便利に操作することができる。
【０００３】
【特許文献１】
特開平９−３１２８４２号公報
【０００４】
【発明が解決しようとする課題】
しかし、ＭＰＥＧ２−ＴＳフォーマットの画像データはイントラ符号化画像のみならず、前又は前後の画像データを基にして予測符号化された順方向又は双方向の予測符号化画像を含む。ユーザが動画受信端末装置の操作入力部に画像の復号化の停止指令を入力した場合、停止期間が非常に長くなる可能性があり又は停止後復号化が再開されない可能性もある故に、動画受信端末装置は停止期間中に先行する画像の符号化データ（再開後に入力する予測符号化画像を復号化するのに必要な情報）を放棄することが多い。動画配信サーバが適切でない位置（典型的には予測符号化画像の直前の位置）で送信を停止し、次に送信を再開した場合、又は動画受信端末装置が適切でない位置で復号化を停止し、次に復号化を再開した場合、再開後に入力する先頭の画像（予測符号化画像）を復号化するのに必要な情報（先行する画像の符号化データ）が停止期間中に失われている故に、動画受信端末装置の復号化部は、先頭の画像を正しく復号化することができない。そのため動画受信端末装置は、復号化を再開後暫くの間、乱れた画像を出力することがあった。
【０００５】
現在市販されているＭＰＥＧ２−ＴＳデコーダのＬＳＩは、途切れることなく連続して送信されるビットストリームのＴＳパケット（例えば放送信号）を入力することを想定して設計されたものが多い。そのようなＭＰＥＧ２−ＴＳデコーダのＬＳＩを有する動画受信端末装置においては、送信信号の受信を停止することによって復号化を一時停止し、その後復号化を再開した場合、ＬＳＩのみの機能によっては、暫くの間、乱れた画像を出力することがあった。
【０００６】
本発明は上記従来の問題点を解決するもので、インターネット等の通信網を介して動画配信サーバから動画受信端末装置に、イントラ符号化画像と順方向又は双方向の予測符号化画像とを含む動画の圧縮符号化方式（例えばＭＰＥＧ２方式）により圧縮された動画の配信を行うシステムにおいて、動画受信端末装置のユーザが動画の一時停止要求を動画配信サーバに送信し、次に送信の再開要求を動画配信サーバに送信した場合に、送信再開時に乱れのない動画をユーザに表示する動画配信サーバ、動画受信端末装置、画像パケット送信方法及び画像パケット受信方法を提供することを目的とする。
本発明は、現在市販されているＭＰＥＧ２−ＴＳデコーダのＬＳＩを用いて、送信再開時に乱れのない動画をユーザに表示する動画配信サーバ、動画受信端末装置、画像パケット送信方法及び画像パケット受信方法を提供することを目的とする。
【０００７】
【課題を解決するための手段】
上記課題を解決するため、本発明は以下の構成を有する。
請求項１に記載の発明は、イントラ符号化画像と順方向又は双方向の予測符号化画像とを含む動画の圧縮符号化データをパケット化した画像パケットを格納する記憶部と、動画受信端末装置から送信開始の指令を受信すると、前記記憶部から読み出された前記画像パケットを前記動画受信端末装置に送信し、前記動画受信端末装置から送信停止の指令を受信すると、前記記憶部を検索し、送信停止指令入力後の最初のイントラ符号化画像を含む前記画像パケットである一時停止画像パケットの直前で前記画像パケットの送信を停止し、前記動画受信端末装置から送信再開の指令を入力すると、前記一時停止画像パケットから送信を再開する通信部と、を有することを特徴とする動画配信サーバである。
【０００８】
請求項２に記載の発明は、ＭＰＥＧ２（ＭｏｖｉｎｇＰｉｃｔｕｒｅＥｘｐｅｒｔｓＧｒｏｕｐ２）方式で圧縮し、ＭＰＥＧ２−ＴＳ（ＭＰＥＧ２−ＴｒａｎｓｐｏｒｔＳｔｒｅａｍ）フォーマットに従った画像パケットを格納する記憶部と、動画受信端末装置から送信開始の指令を受信すると、前記記憶部から読み出された前記画像パケットを前記動画受信端末装置に送信し、前記動画受信端末装置から送信停止の指令を受信すると、前記記憶部を検索し、送信停止指令入力後の最初のグループスタートコード又はシーケンスヘッダコードを含む前記画像パケットである一時停止画像パケットの直前で前記画像パケットの送信を停止し、前記動画受信端末装置から送信再開の指令を入力すると、前記一時停止画像パケットから送信を再開する通信部と、を有することを特徴とする動画配信サーバである。
【０００９】
請求項３に記載の発明は、動画配信サーバから送信された、イントラ符号化画像と順方向又は双方向の予測符号化画像とを含む動画の圧縮符号化画像ストリームから生成された、１又は複数の前記画像を含む画像パケットを受信し、前記動画配信サーバに送信停止指令及び送信開始指令を含む指令を送信する通信部と、前記画像パケットを格納する記憶部と、前記記憶部から読み出した画像パケットを復号化して出力する復号化部と、ユーザからの受信停止指令及び受信開始指令を含む指令を入力する操作入力部と、前記操作入力部から受信停止指令を入力すると、前記記憶部に記憶された画像パケットの中で受信停止指令入力後の最初のイントラ符号化画像を含む前記画像パケットである一時停止画像パケットの直前で、前記画像パケットの復号化を停止することを前記復号化部に指令し、前記通信部を通じて前記動画配信サーバに送信停止指令を送信し、前記操作入力部から受信再開指令を入力すると、前記通信部を通じて前記動画配信サーバに送信再開指令を送信し、前記一時停止画像パケットから復号化を再開することを前記復号化部に指令する制御部と、を有することを特徴とする動画受信端末装置である。
【００１０】
請求項４に記載の発明は、動画配信サーバから送信された、ＭＰＥＧ２方式で圧縮された動画の圧縮符号化画像ストリームから生成されたＭＰＥＧ２−ＴＳフォーマットに従った画像パケットである１又は複数の画像を含むＴＳパケットを受信し、前記動画配信サーバに送信停止指令及び送信開始指令を含む指令を送信する通信部と、前記画像パケットを格納する記憶部と、前記記憶部から読み出した画像パケットを復号化して出力する復号化部と、ユーザからの受信停止指令及び受信開始指令を含む指令を入力する操作入力部と、前記操作入力部から受信停止指令を入力すると、前記記憶部に記憶された画像パケットの中で受信停止指令入力後の最初のグループスタートコード又はシーケンスヘッダコードを含む前記画像パケットである一時停止画像パケットの直前で、前記画像パケットの復号化を停止することを前記復号化部に指令し、前記通信部を通じて前記動画配信サーバに送信停止指令を送信し、前記操作入力部から受信再開指令を入力すると、前記通信部を通じて送信再開指令を前記動画配信サーバに送信し、前記一時停止画像パケットから復号化を再開することを前記復号化部に指令する制御部と、を有することを特徴とする動画受信端末装置である。
【００１１】
請求項５に記載の発明は、イントラ符号化画像と順方向又は双方向の予測符号化画像とを含む動画の圧縮符号化データをパケット化した画像パケットを動画受信端末装置に送信する送信ステップと、前記動画受信端末装置から送信停止の指令を入力すると、送信停止指令入力後の最初のイントラ符号化画像を含む前記画像パケットである一時停止画像パケットの直前で、前記画像パケットの送信を停止する送信停止ステップと、前記動画受信端末装置から送信再開の指令を入力すると、前記一時停止画像パケットから送信を再開する送信再開ステップと、を有することを特徴とする画像パケット送信方法である。
【００１２】
請求項６に記載の発明は、ＭＰＥＧ２方式で圧縮し、ＭＰＥＧ２−ＴＳフォーマットに従った画像パケットを配信中に、前記動画受信端末装置から送信停止の指令を入力すると、送信停止指令入力後の最初のグループスタートコード又はシーケンスヘッダコードを含む前記画像パケットである一時停止画像パケットの直前で前記画像パケットの送信を停止する送信停止ステップと、前記動画受信端末装置から送信再開の指令を入力すると、前記一時停止画像パケットから送信を再開する送信再開ステップと、を有することを特徴とする画像パケット送信方法である。
【００１３】
請求項７に記載の発明は、動画配信サーバから送信された、イントラ符号化画像と順方向又は双方向の予測符号化画像とを含む動画の圧縮符号化画像ストリームから生成された、１又は複数の前記画像を含む画像パケットを受信する受信ステップと、前記画像パケットを復号化して出力する復号化ステップと、ユーザからの受信停止指令を入力すると、記憶部に記憶された画像パケットの中で、受信停止指令入力後の最初のイントラ符号化画像を含む前記画像パケットである一時停止画像パケットの直前で、前記画像パケットの復号化を停止し、前記動画配信サーバに送信停止指令を送信する復号停止ステップと、ユーザからの受信再開指令を入力すると、前記動画配信サーバに送信再開指令を送信し、前記一時停止画像パケットから復号化を再開する復号化再開ステップと、を有することを特徴とする画像パケット受信方法である。
【００１４】
請求項８に記載の発明は、動画配信サーバから送信された、ＭＰＥＧ２方式で圧縮された動画の圧縮符号化画像ストリームから生成されたＭＰＥＧ２−ＴＳフォーマットに従った画像パケットである１又は複数の画像を含むＴＳパケットを受信する受信ステップと、前記画像パケットを復号化して出力する復号化ステップと、ユーザからの受信停止指令を入力すると、記憶部に記憶された画像パケットの中で、受信停止指令入力後の最初のグループスタートコード又はシーケンスヘッダコードを含む前記画像パケットである一時停止画像パケットの直前で、前記画像パケットの復号化を停止し、前記動画配信サーバに送信停止指令を送信する復号停止ステップと、ユーザからの受信再開指令を入力すると、前記動画配信サーバに送信再開指令を送信し、前記一時停止画像パケットから復号化を再開する復号化再開ステップと、を有することを特徴とする画像パケット受信方法である。
【００１５】
本発明は、通信網を介して動画配信サーバから動画受信端末装置にＭＰＥＧ２方式等により圧縮された動画の配信を行うシステムにおいて、動画受信端末装置のユーザが動画の一時停止要求を動画配信サーバに送信し、次に送信の再開要求を動画配信サーバに送信した場合に、送信再開時に乱れのない動画をユーザに表示する動画配信サーバ、動画受信端末装置、画像パケット送信方法及び画像パケット受信方法を実現できるという作用を有する。
本発明は、現在市販されているＭＰＥＧ２−ＴＳデコーダのＬＳＩを用いて、送信再開時に乱れのない動画をユーザに表示する動画配信サーバ、動画受信端末装置、画像パケット送信方法及び画像パケット受信方法を実現できるという作用を有する。
【００１６】
【発明の実施の形態】
以下本発明の実施をするための最良の形態を具体的に示した実施の形態について、図面とともに記載する。
【００１７】
《実施の形態１》
図１〜図３を用いて、本発明の実施の形態１の動画配信システムを説明する。図１は、本発明の実施の形態１の動画配信システムの概略的な構成を示すブロック図である。図１において、１００は動画配信サーバ、１２０は動画受信端末装置、１３０は双方向の通信網（実施の形態１においてはインターネット）である。通信網１３０には複数の動画受信端末装置１２０が接続されているが、図１においては、そのうちの１つのみを表示している。ユーザが動画受信端末装置１２０に入力する操作指令に応じて、動画受信端末装置１２０は動画配信サーバ１００にインターネット１３０を介して動画の送信の開始指令（停止後の再開指令を含む。）、停止指令等を送信する。動画配信サーバ１００は、動画受信端末装置１２０から送信された指令に応じて、動画の画像パケットを送信し、送信を停止する。送信される画像パケットは、イントラ符号化画像と順方向又は双方向の予測符号化画像とを含む動画の圧縮符号化方式で圧縮された１又は複数の画像を含む画像パケットである。実施の形態１においては、画像パケットは、ＭＰＥＧ２−ＴＳフォーマットに従った画像パケットである１又は複数の画像を含むＴＳパケットである。
【００１８】
動画配信サーバ１００は、記憶部１０１と通信部１０２とを有する。記憶部１０１は、ＭＰＥＧ２−ＴＳフォーマットのコンテンツを格納している。通信部１０２は、動画受信端末装置１２０からインターネット１３０を介して送信された画像パケットの送信指令を受信し、記憶部１０１から読み出したＴＳパケットをインターネット１３０を介して動画受信端末装置１２０に送信する。
【００１９】
動画受信端末装置１２０は、通信部１２１、記憶部１２２、復号化部１２３、制御部１２４、操作入力部１２５を有する。ユーザは、操作入力部１２５（動画受信端末装置１２０の操作パネル及びリモートコントローラ）から再生するコンテンツの選択指令、コンテンツの送信開始指令、中止指令、送信再開指令等を入力する。制御部１２４は、操作入力部１２５が入力したユーザからの指令を通信部１２１に伝送し、ユーザからの指令に応じて、記憶部１２２及び復号化部１２３を制御する。通信部１２１は、操作入力部１２５が入力したユーザからの指令をインターネット１３０を介して動画配信サーバ１００の通信部１０２に送信し、動画配信サーバ１００の通信部１０２が送信したＴＳパケットをインターネット１３０を介して受信する。記憶部１２２は、通信部が入力したＴＳパケットを格納する。復号化部１２３は、制御部１２４からの指令に応じて記憶部１２２から読み出されたＴＳパケットを入力し、ＭＰＥＧ２方式で圧縮符号化された画像データを伸長し、連続する画像データとして出力する。復号化部１２３は、途切れることなく連続して送信されるビットストリームのＴＳパケット（例えば放送信号）を入力することを想定して設計されたＭＰＥＧ２−ＴＳデコーダのＬＳＩを有する。
【００２０】
図３は、本発明の実施の形態１のＭＰＥＧ２−ＴＳファイル（１つのコンテンツの画像データを含む。）３１０の構成図である。ＭＰＥＧ２−ＴＳファイル３１０は、記憶部１０１に格納されている。ＭＰＥＧ２−ＴＳファイル３１０はノーマルＴＳパケット３２０及び一時停止ＴＳパケット（一時停止画像パケット）３３０の２種類のＴＳパケットで構成されている。ノーマルＴＳパケット３２０及び一時停止ＴＳパケット３３０は、ＴＳヘッダ３４１及びペイロード３４２から構成されている。ＴＳヘッダ３４１の中には同期バイト３４３が含まれる。ペイロード３４２には、配信する画像データが含まれている。
【００２１】
一時停止ＴＳパケット３３０は、グループスタートコード又はシーケンスヘッダコード（ＳＨＣ（ＳｅｑｕｅｎｃｅＨｅａｄｅｒＣｏｄｅ））を含む画像データをペイロード３４２に含む。ＭＰＥＧ２方式において、グループスタートコード又はシーケンスヘッダコードを含む画像パケットは、先頭にイントラ符号化画像を有する。ノーマルＴＳパケット３２０は、グループスタートコード及びシーケンスヘッダコードのいずれをも含まない画像データ（予測符号化画像を含む。）をペイロード３４２に含む。
【００２２】
通常、ＭＰＥＧ２−ＴＳフォーマットにおいては、ＴＳパケットの同期バイト３４３には１６進数で４７（以下「０ｘ４７」と記述する。）という値を格納されている。放送信号のように途切れることなく連続して送信されるビットストリームとしてＴＳパケットを送信する場合に、ビットストリームの中から各ＴＳパケットの先頭を検出するために同期バイト３４３が使用される。
インターネット１３０を介したＩＰ通信のようなパケット通信においては、１つのＩＰパケットの中に１又は複数のＴＳパケットを格納して送信することができ、ＩＰパケットの中のＩＰパケットサイズなどの情報から、各ＴＳパケットの先頭を検出することが容易である。このためパケット通信においては、同期バイト３４３は必ずしも固有の値０ｘ４７である必要はない。本実施の形態においては、ＴＳパケットの同期バイト３４３の値を０ｘ４７又は０ｘ００として、そのＴＳパケットがノーマルＴＳパケット３２０か又は一時停止ＴＳパケット３３０かという情報を動画受信端末装置に伝達する。
動画配信サーバ１００は、予め実行プログラムを走らせ、外部のＭＰＥＧ２−ＴＳエンコーダ（図示しない。）からの出力データを解析し、一時停止ＴＳパケット３３０の同期バイト３４３を０ｘ４７から０ｘ００に変更する。
【００２３】
図２は、実施の形態１の動画配信方法（画像パケット送信方法及び画像パケット受信方法）のフローチャートである。図２において、最初に、ユーザが動画受信端末装置１２０の操作入力部１２５に、画像パケットの送信指令（コンテンツ（画像ファイル）の指定を含む。）を入力する。動画受信端末装置１２０の通信部１２１は、画像パケットの送信指令を送信する（ステップ２０１）。動画配信サーバ１００の通信部１０２は、画像パケットの送信指令を受信する（ステップ２０２）。通信部１０２は、記憶部１０１から画像パケットを読み出し、送信する（ステップ２０４）。
【００２４】
動画受信装置１２０の通信部１２１が画像パケットを受信し、受信した画像パケットを記憶部１２２に格納する（ステップ２０５）。復号化部１２３が記憶部１２２から画像データを読み出し、復号化して（伸長して）出力する（ステップ２０６）。
ユーザが操作入力部１２５を通じて、制御部１２４に画像パケットの送信停止指令を入力する。制御部１２４は、通信部１２１、インターネット１３０を通じて動画配信サーバ１００に、画像パケットの送信停止指令を送信する（ステップ２０７）。動画配信サーバ１００の通信部１０２は、画像パケットの送信停止指令を受信する（ステップ２０８）。通信部１０２は、記憶部１０１に記憶された画像パケットの中から、次に送信する予定の一時停止画像パケット３３０を検索する（ステップ２０９）。通信部１０２は、ＴＳパケットの同期バイト３４３の値に基づいて、次に送信する予定の一時停止画像パケット３３０を容易に検出する。通信部１０２は、検出された一時停止画像パケットの直前で送信を停止する（ステップ２１０）。
【００２５】
動画受信端末装置１２０の復号化部１２３は、受信して記憶部１２２に格納された全ての画像パケットを復号化し、出力した時点で、出力を停止する（ステップ２１１）。
ユーザが操作入力部１２５を通じて、制御部１２４に画像パケットの送信再開指令を入力する。制御部１２４は、通信部１２１、インターネット１３０を通じて動画配信サーバ１００に、画像パケットの送信再開指令を送信する（ステップ２１２）。動画配信サーバ１００の通信部１０２は、画像パケットの送信再開指令を受信する（ステップ２１３）。通信部１０２は、一時停止を行った際に最後に送信したノーマルＴＳパケット３２０の直後の一時停止画像パケット３３０から送信を再開する（ステップ２１４）。動画受信端末装置１２０の通信部１２１は再び送信されてきた画像パケットを受信する。復号化部１２３は、受信した一時停止画像パケットから、復号化及び出力を再開する（ステップ２１５）。一時停止画像パケットの先頭は必ずイントラ符号化画像である故に、復号化部１２３は、圧縮復号化された画像データを正しく復号化できる。
【００２６】
動画配信サーバ１００は送信する全てのＴＳパケットの同期バイト３４３を、通常の値である０ｘ４７に置き換えて動画受信端末装置２００に送信しても良い。同期バイト３４３を使用する動画受信端末装置１２０において、同期バイト３４３が０ｘ４７でないことによる誤動作を防止できる。実施の形態１においては、動画配信サーバ１００が一時停止ＴＳパケットを検出しており、動画受信端末装置１２０はＴＳパケットがノーマルＴＳパケットか又は一時停止ＴＳパケットかを識別していない。それ故に、動画配信サーバ１００が全てのＴＳパケットの同期バイト３４３を０ｘ４７にして動画受信端末装置２００に送信した場合にも、実施の形態１と同様の効果が得られる。
【００２７】
実施の形態１によれば、ＴＳパケット全体ではなく、そのヘッダ部の一部を検索することにより、そのＴＳパケットがノーマルＴＳパケット３２０か又は一時停止ＴＳパケット３３０かを検索できるので、動画配信サーバ１００への負荷が軽減できる。なお、エラーインジケータフィールドのビットによって、そのＴＳパケットがノーマルＴＳパケット３２０か又は一時停止ＴＳパケット３３０かという情報を動画受信端末装置に伝達してもよい。
【００２８】
実施の形態１によれば、動画配信サーバ１００が、ＭＰＥＧ２−ＴＳファイル３１０の送信の一時停止・再開を行う。これにより、現在市販されているＭＰＥＧ２−ＴＳデコーダのＬＳＩを用いて、送信再開時に乱れのない動画をユーザに表示する動画受信端末装置を実現できる。
【００２９】
《実施の形態２》
図１、図３及び図４を用いて、本発明の実施の形態２の動画配信システムを説明する。図１は、本発明の実施の形態２の動画配信システムの概略的な構成を示すブロック図であり、実施の形態１と同じであるので説明を省略する。図３は、本発明の実施の形態２のＭＰＥＧ２−ＴＳファイル３１０の構成図であり、実施の形態１と同じであるので説明を省略する。
【００３０】
実施の形態１では、動画配信サーバ１００がＭＰＥＧ２−ＴＳファイル３１０の送信一時停止・再開の位置を管理することにより、動画受信端末装置１２０は、送信再開時に乱れのない動画をユーザに表示した。実施の形態２においては、動画受信端末装置１２０の制御部１２４がＭＰＥＧ２−ＴＳファイル３１０の送信一時停止・再開の位置を管理する。実施の形態２は、この点においてのみ実施の形態１と異なる。
【００３１】
図４は、実施の形態２の動画配信方法（画像パケット送信方法及び画像パケット受信方法）のフローチャートである。図４において、最初に、ユーザが動画受信端末装置１２０の操作入力部１２５に、画像パケットの送信指令（コンテンツ（画像ファイル）の指定を含む。）を入力する。動画受信端末装置１２０の通信部１２１は、画像パケットの送信指令を送信する（ステップ４０１）。動画配信サーバ１００の通信部１０２は、画像パケットの送信指令を受信する（ステップ４０２）。通信部１０２は、記憶部１０１から画像パケットを読み出し、送信する（ステップ４０４）。
【００３２】
動画受信装置１２０の通信部１２１が画像パケットを受信し、受信した画像パケットを記憶部１２２に格納する（ステップ４０５）。復号化部１２３が記憶部１２２から画像データを読み出し、復号化して（伸長して）出力する（ステップ４０６）。
ユーザが操作入力部１２５を通じて、制御部１２４に画像パケットの送信停止指令を入力する。制御部１２４は、通信部１２１、インターネット１３０を通じて動画配信サーバ１００に、画像パケットの送信停止指令を送信する（ステップ４０７）。動画受信端末装置１２０から動画配信サーバ１００に、画像パケットの送信停止指令を送信する時、記憶部１２２に少なくとも１つの未だ復号化されていない一時停止ＴＳパケットが格納されているものとする。もし、格納されていない場合は、動画受信端末装置１２０は、新たな一時停止ＴＳパケットを受信して記憶部１２２に格納した後、動画配信サーバ１００に画像パケットの送信停止指令を送信する。動画配信サーバ１００の通信部１０２は、画像パケットの送信停止指令を受信する（ステップ４０８）。通信部１０２は、画像パケットの送信を停止する（ステップ４０９）。
【００３３】
制御部１２４は、記憶部１２２に記憶された画像パケットの中から、次に復号化する予定の一時停止画像パケット３３０を検索する。制御部１２４は、ＴＳパケットの同期バイト３４３の値に基づいて、次に復号化する予定の一時停止画像パケット３３０を容易に検出する。制御部１２４の指令に基づいて、動画受信端末装置１２０の復号化部１２３は、受信して記憶部１２２に格納された画像パケットの中で、次に復号化する予定の一時停止画像パケット３３０の直前まで復号化し、出力した時点で、出力を停止する（ステップ４１０）。
制御部１２４は、送信を再開する時に動画配信サーバ１００が最初に送信する画像パケットを特定する任意の情報を記憶する（ステップ４１１）。実施の形態２においては、一時停止期間の間、記憶部１２２は一時停止ＴＳパケット３３０以降の受信した全てのＴＳパケットを記憶しておくが、もし記憶部１２２に全てのＴＳパケットを格納しきれない場合は、格納できないＴＳパケットを破棄し、破棄したＴＳパケットの数をカウントしておく。
【００３４】
ユーザが操作入力部１２５を通じて、制御部１２４に画像パケットの送信再開指令を入力する。制御部１２４は、通信部１２１、インターネット１３０を通じて動画配信サーバ１００に、画像パケットの送信再開指令及び最初に送信する画像パケットを特定する情報（実施の形態２においては、一時停止中に、動画受信端末装置１２０の記憶部１２２が格納しきれずに破棄したＴＳパケットの数）を送信する（ステップ４１２）。動画配信サーバ１００の通信部１０２は、画像パケットの送信再開指令及び最初に送信する画像パケットを特定する情報を受信する（ステップ４１３）。通信部１０２は、最初に送信する画像パケットを特定し、その画像パケットから送信を再開する（ステップ４１４）。動画受信端末装置１２０の通信部１２１は再び送信されてきた画像パケットを受信する。復号化部１２３は、記憶部１２２に記憶されている、復号化を停止した直後の一時停止ＴＳパケット３３０から、復号化及び出力を再開する（ステップ４１５）。一時停止画像パケットの先頭は必ずイントラ符号化画像である故に、復号化部１２３は、圧縮復号化された画像データを正しく復号化できる。
【００３５】
動画受信端末装置１２０の記憶部１２２から復号化部１２３にＴＳパケットを送信する前に、記憶部１２２に記憶された全てのＴＳパケットの同期バイト３４３を通常の値である０ｘ４７に置き換える。同期バイト３４３を使用する復号化部１２３において、同期バイト３４３が０ｘ４７でないことによる誤動作を防止できる。
【００３６】
一時停止の後、最初に送信する画像パケットを特定する情報として、実施の形態２の動画受信端末装置１２０は、一時停止中に、動画受信端末装置１２０の記憶部１２２が格納しきれずに破棄したＴＳパケットの数を記憶した。これに代えて、例えば動画受信端末装置は、復号化を停止した時点の次の一時停止画像パケットに含まれるタイムコード情報を記憶し、一時停止時に全ての画像パケットを破棄しても良い。この場合ステップ４１２において、動画受信端末装置は、動画配信サーバ１００に、画像パケットの送信再開指令及び復号化を停止した時点の次の一時停止画像パケットに含まれるタイムコード情報を送信する。
【００３７】
実施の形態２は、現在市販されているＭＰＥＧ２−ＴＳデコーダのＬＳＩを用いて、送信再開時に乱れのない動画をユーザに表示する動画受信端末装置を実現できる。
【００３８】
実施の形態２によれば、ＴＳパケット全体ではなく、そのヘッダ部の一部を検索することにより、そのＴＳパケットがノーマルＴＳパケット３２０か又は一時停止ＴＳパケット３３０かを検索できるので、動画受信端末装置１２０への負荷が軽減できる。なお、エラーインジケータフィールドのビットによって、そのＴＳパケットがノーマルＴＳパケット３２０か又は一時停止ＴＳパケット３３０かという情報を動画受信端末装置に伝達してもよい。
【００３９】
実施の形態１の動画配信システムにおいては、動画受信端末装置１２０にインターネット１３０を介して接続された動画配信サーバ１００が映像パケットの送信及び停止を管理する故に、ユーザが動画受信端末装置１２０に一時停止指令又は復号化再開指令を入力してから実際に動画受信端末装置１２０が復号化を一時停止し又は復号化を再開するまで、ある程度の時間遅れが生じた。
実施の形態２の動画配信システムにおいては、動画受信端末装置１２０が映像パケットの復号化及び停止を管理する故に、ユーザが動画受信端末装置１２０に一時停止指令又は復号化再開指令を入力してから実際に動画受信端末装置１２０が復号化を一時停止し又は復号化を再開するまでの時間遅れをほとんどなくすことができる（ユーザが入力した指令に対する動画配信システムの反応速度を向上させることができる。）。
【００４０】
【発明の効果】
本発明によれば、通信網を介して動画配信サーバから動画受信端末装置にＭＰＥＧ２方式等により圧縮された動画の配信を行うシステムにおいて、動画受信端末装置のユーザが動画の一時停止要求を動画配信サーバに送信し、次に送信の再開要求を動画配信サーバに送信した場合に、送信再開時に乱れのない動画をユーザに表示する動画配信サーバ、動画受信端末装置、画像パケット送信方法及び画像パケット受信方法を実現できるという有利な効果が得られる。
本発明によれば、現在市販されているＭＰＥＧ２−ＴＳデコーダのＬＳＩを用いて、送信再開時に乱れのない動画をユーザに表示する動画配信サーバ、動画受信端末装置、画像パケット送信方法及び画像パケット受信方法を実現できるという有利な効果が得られる。
【図面の簡単な説明】
【図１】本発明の実施の形態１及び２の動画配信システムの概略的な構成を示すブロック図
【図２】本発明の実施の形態１の動画配信方法（画像パケット送信方法及び画像パケット受信方法）のフローチャート
【図３】本発明の実施の形態１及び２のＭＰＥＧ２−ＴＳファイル３１０の構成図
【図４】本発明の実施の形態２の動画配信方法（画像パケット送信方法及び画像パケット受信方法）のフローチャート
【符号の説明】
１００動画配信サーバ
１２０動画受信端末装置
１３０インターネット
１０１、１２２記憶部
１０２、１２１通信部
１２３復号化部
１２４制御部
１２５操作入力部
３１０ＭＰＥＧ２−ＴＳファイル
３２０ノーマルＴＳパケット
３３０一時停止ＴＳパケット
３４１ＴＳヘッダ
３４２ペイロード
３４３同期バイト[0001]
TECHNICAL FIELD OF THE INVENTION
The present invention relates to a moving image distribution server, a moving image receiving terminal device, an image packet transmitting method, and an image packet receiving method.
[0002]
[Prior art]
In recent years, with the speeding-up of the Internet (for example, broadband communication), a moving image distribution service using the Internet has been provided. In particular, a method of distributing a moving picture (TS packet) in the MPEG2-TS (Moving Picture Experts Group 2-Transport Stream) format, which has a track record in television broadcasting and the like, via the Internet has been widely used (for example, see Patents). Reference 1).
VOD (Video On Demand) type moving image distribution service is possible by two-way communication using the Internet. By the two-way communication, not only one-sided distribution from the transmitting device (referred to as a moving image distribution server) to the user's moving image receiving terminal device, but also operations such as pause, fast forward, and rewind from the user to the moving image distribution server. Can be requested. This allows the user to conveniently operate the video distribution server as if it were a VTR installed at home.
[0003]
[Patent Document 1]
JP-A-9-312842
[0004]
[Problems to be solved by the invention]
However, the image data in the MPEG2-TS format includes not only an intra-coded image but also a forward or bidirectional predicted coded image that is predictively coded based on the preceding or preceding or following image data. When the user inputs an instruction to stop decoding an image to the operation input unit of the moving image receiving terminal device, the stop period may be extremely long, or the decoding may not be restarted after the stop. The terminal device often discards the coded data of the preceding image (information necessary for decoding the predicted coded image input after the restart) during the stop period. When the moving image distribution server stops transmission at an inappropriate position (typically, the position immediately before the predicted coded image) and then resumes transmission, or the moving image receiving terminal device stops decoding at an inappropriate position. Next, when decoding is restarted, information (encoded data of the preceding image) necessary for decoding the first image (predicted coded image) input after the restart is lost during the stop period. Therefore, the decoding unit of the moving image receiving terminal device cannot correctly decode the first image. For this reason, the moving image receiving terminal device may output a distorted image for a while after decoding is restarted.
[0005]
Many of currently available MPEG2-TS decoder LSIs are designed on the assumption that a TS packet (for example, a broadcast signal) of a bit stream that is continuously transmitted without interruption is input. In a moving image receiving terminal device having such an MPEG2-TS decoder LSI, decoding is temporarily stopped by stopping reception of a transmission signal, and then decoding is resumed. During this time, a distorted image was sometimes output.
[0006]
The present invention solves the above-mentioned conventional problems, and includes an intra-coded image and a forward or bidirectional predicted coded image from a moving image distribution server to a moving image receiving terminal device via a communication network such as the Internet. In a system for distributing a moving image compressed by a moving image compression encoding method (for example, MPEG2 method), a user of a moving image receiving terminal device transmits a moving image pause request to a moving image distribution server, and then transmits a transmission restart request. It is an object of the present invention to provide a moving image distribution server, a moving image receiving terminal device, an image packet transmitting method, and an image packet receiving method for displaying, to a user, a moving image without disturbance when transmission is resumed to the moving image distribution server.
The present invention provides a moving image distribution server, a moving image receiving terminal device, an image packet transmitting method, and an image packet receiving method for displaying, to a user, a moving image without disturbance when transmission is resumed, using an LSI of a currently marketed MPEG2-TS decoder. The purpose is to provide.
[0007]
[Means for Solving the Problems]
In order to solve the above problems, the present invention has the following configurations.
A storage unit that stores an image packet obtained by packetizing compressed and encoded data of a moving image including an intra-coded image and a forward or bidirectional predicted coded image, and a moving image receiving terminal device. When the transmission start command is received from the storage unit, the image packet read from the storage unit is transmitted to the video reception terminal device.When the transmission stop command is received from the video reception terminal device, the storage unit is searched. When the transmission of the image packet is stopped immediately before the pause image packet which is the image packet including the first intra-coded image after the transmission stop instruction is input, and a transmission restart instruction is input from the video receiving terminal device, A communication unit for restarting transmission from the paused image packet.
[0008]
According to a second aspect of the present invention, there is provided a storage unit that stores an image packet in accordance with an MPEG2-TS (MPEG2-Transport Stream) format, which is compressed by an MPEG2 (Moving Picture Experts Group 2) format, and transmitted from a moving image receiving terminal device. When receiving a start command, the image packet read from the storage unit is transmitted to the video receiving terminal device. When a transmission stop command is received from the video receiving terminal device, the storage unit is searched and transmitted. When the transmission of the image packet is stopped immediately before the pause image packet which is the image packet including the first group start code or the sequence header code after the stop instruction is input, and a transmission restart instruction is input from the video receiving terminal device. Restart transmission from the paused image packet. A communication unit which is a moving image distribution server characterized in that it comprises a.
[0009]
According to a third aspect of the present invention, there is provided one or more compressed video streams generated from a video compression-encoded image stream including an intra-coded image and a forward or bidirectional predicted coded image transmitted from a video distribution server. A communication unit that receives an image packet including the image of the above, and transmits a command including a transmission stop command and a transmission start command to the video distribution server, a storage unit that stores the image packet, and an image that is read from the storage unit. A decoding unit for decoding and outputting a packet, an operation input unit for inputting a command including a reception stop command and a reception start command from a user, and a reception stop command input from the operation input unit, stored in the storage unit. Immediately before the paused image packet, which is the image packet including the first intra-coded image after the reception stop command is input among the received image packets, the image packet Instructing the decoding unit to stop decoding, transmitting a transmission stop command to the video distribution server through the communication unit, and inputting a reception resume command from the operation input unit, the video distribution through the communication unit A moving image receiving terminal device, comprising: a control unit that transmits a transmission restart instruction to a server and instructs the decoding unit to restart decoding from the paused image packet.
[0010]
According to a fourth aspect of the present invention, there is provided one or more images which are image packets in accordance with the MPEG2-TS format generated from a compression-encoded image stream of a moving image compressed by the MPEG2 system and transmitted from a moving image distribution server. , A communication unit that transmits a command including a transmission stop command and a transmission start command to the video distribution server, a storage unit that stores the image packet, and decodes the image packet read from the storage unit. A decoding unit for converting and outputting, an operation input unit for inputting a command including a reception stop command and a reception start command from a user, and an image stored in the storage unit when a reception stop command is input from the operation input unit. One of the image packets including the first group start code or sequence header code after the reception stop command is input in the packet. Immediately before the stop image packet, the decoding unit instructs the decoding unit to stop decoding the image packet, transmits a transmission stop instruction to the moving image distribution server through the communication unit, and receives a reception restart instruction from the operation input unit. And a control unit that transmits a transmission restart command to the video distribution server through the communication unit and instructs the decoding unit to restart decoding from the paused image packet. Moving image receiving terminal device.
[0011]
A transmission step of transmitting, to a moving image receiving terminal device, an image packet obtained by packetizing compressed and encoded data of a moving image including an intra-coded image and a forward or bidirectional predicted coded image, When a transmission stop command is input from the video receiving terminal device, the transmission of the image packet is stopped immediately before the pause image packet which is the image packet including the first intra-coded image after the transmission stop command is input. An image packet transmission method comprising: a transmission stop step; and a transmission restart step of restarting transmission from the paused image packet when a transmission restart instruction is input from the moving image receiving terminal device.
[0012]
According to a sixth aspect of the present invention, when a command to stop transmission is input from the moving image receiving terminal device during distribution of an image packet conforming to the MPEG2-TS format after being compressed by the MPEG2 system, A transmission stop step of stopping transmission of the image packet immediately before a pause image packet that is the image packet including a group start code or a sequence header code, and when a command to restart transmission is input from the video receiving terminal device, A transmission restarting step of restarting transmission from a paused image packet.
[0013]
The invention according to claim 7, wherein one or a plurality of compressed and coded image streams of a moving image including an intra-coded image and a forward or bidirectional predicted coded image transmitted from a moving image distribution server are generated. A receiving step of receiving an image packet including the image, a decoding step of decoding and outputting the image packet, and when a reception stop command is input from the user, among the image packets stored in the storage unit, Immediately before the paused image packet which is the image packet including the first intra-coded image after the reception stop command is input, the decoding of the image packet is stopped and the transmission stop command is transmitted to the video distribution server. Step: When a receiving restart command is input from the user, a transmitting restart command is transmitted to the moving image distribution server, and decoding is performed from the paused image packet. Resuming the decoding restart step, an image packet receiving method characterized by having a.
[0014]
According to an eighth aspect of the present invention, there is provided one or a plurality of images, which are image packets in accordance with the MPEG2-TS format generated from a compression-encoded image stream of a moving image compressed by the MPEG2 system and transmitted from a moving image distribution server. Receiving a TS packet including: a decoding step of decoding and outputting the image packet; and receiving a reception stop command from a user, the reception stop command among the image packets stored in the storage unit. Immediately before the paused image packet which is the image packet including the first group start code or sequence header code after input, decoding of the image packet is stopped, and the decoding of transmitting the transmission stop command to the video distribution server is stopped. Step: When receiving a command to resume reception from the user, a command to resume transmission to the video distribution server Transmitted, an image packet receiving method, characterized by having a decoding restart resuming decoding from said temporary stop image packet.
[0015]
The present invention relates to a system for distributing a moving image compressed by the MPEG2 system or the like from a moving image distribution server to a moving image receiving terminal device via a communication network, wherein a user of the moving image receiving terminal device sends a moving image pause request to the moving image distribution server. A moving image distribution server, a moving image receiving terminal device, an image packet transmitting method, and an image packet receiving method for displaying a moving image without disturbance when the transmission is resumed, and then transmitting a transmission restart request to the moving image distribution server. It has the effect that it can be realized.
The present invention provides a moving image distribution server, a moving image receiving terminal device, an image packet transmitting method, and an image packet receiving method for displaying, to a user, a moving image without disturbance when transmission is resumed, using an LSI of a currently marketed MPEG2-TS decoder. It has the effect that it can be realized.
[0016]
BEST MODE FOR CARRYING OUT THE INVENTION
DESCRIPTION OF THE PREFERRED EMBODIMENTS Embodiments that specifically show the best mode for carrying out the present invention will be described below with reference to the drawings.
[0017]
<< Embodiment 1 >>
The moving image distribution system according to the first embodiment of the present invention will be described with reference to FIGS. FIG. 1 is a block diagram illustrating a schematic configuration of the moving image distribution system according to the first embodiment of the present invention. In FIG. 1, reference numeral 100 denotes a moving image distribution server, 120 denotes a moving image receiving terminal device, and 130 denotes a two-way communication network (the Internet in the first embodiment). Although a plurality of moving image receiving terminal devices 120 are connected to the communication network 130, only one of them is displayed in FIG. In response to an operation command input to the moving image receiving terminal device 120 by the user, the moving image receiving terminal device 120 instructs the moving image distribution server 100 to start moving image transmission via the Internet 130 (including a restart instruction after stopping) and stop. Send a command etc. The moving image distribution server 100 transmits a moving image packet in response to a command transmitted from the moving image receiving terminal device 120, and stops transmission. The transmitted image packet is an image packet including one or a plurality of images compressed by a moving image compression encoding method including an intra-coded image and a forward or bidirectional predicted coded image. In the first embodiment, the image packet is a TS packet including one or a plurality of images, which is an image packet according to the MPEG2-TS format.
[0018]
The moving image distribution server 100 includes a storage unit 101 and a communication unit 102. The storage unit 101 stores contents in the MPEG2-TS format. The communication unit 102 receives a transmission instruction of an image packet transmitted from the moving image receiving terminal device 120 via the Internet 130, and transmits the TS packet read from the storage unit 101 to the moving image receiving terminal device 120 via the Internet 130. .
[0019]
The moving image receiving terminal device 120 includes a communication unit 121, a storage unit 122, a decoding unit 123, a control unit 124, and an operation input unit 125. The user inputs a content selection command to be reproduced, a content transmission start command, a content transmission start command, a stop command, a transmission restart command, and the like from the operation input unit 125 (the operation panel and the remote controller of the video receiving terminal device 120). The control unit 124 transmits the command from the user input by the operation input unit 125 to the communication unit 121, and controls the storage unit 122 and the decoding unit 123 according to the command from the user. The communication unit 121 transmits the command from the user input by the operation input unit 125 to the communication unit 102 of the video distribution server 100 via the Internet 130, and transmits the TS packet transmitted by the communication unit 102 of the video distribution server 100 to the Internet 130 Receive through. The storage unit 122 stores the TS packet input by the communication unit. The decoding unit 123 receives the TS packet read from the storage unit 122 in response to a command from the control unit 124, expands the image data that has been compression-encoded by the MPEG2 system, and outputs it as continuous image data. . The decoding unit 123 has an LSI of an MPEG2-TS decoder designed on the assumption that a TS packet (for example, a broadcast signal) of a bit stream transmitted continuously without interruption is designed.
[0020]
FIG. 3 is a configuration diagram of an MPEG2-TS file (including image data of one content) 310 according to the first embodiment of the present invention. The MPEG2-TS file 310 is stored in the storage unit 101. The MPEG2-TS file 310 is composed of two types of TS packets: a normal TS packet 320 and a pause TS packet (pause image packet) 330. Each of the normal TS packet 320 and the pause TS packet 330 includes a TS header 341 and a payload 342. The TS header 341 includes a synchronization byte 343. The payload 342 includes image data to be distributed.
[0021]
The pause TS packet 330 includes in the payload 342 image data including a group start code or a sequence header code (SHC (Sequence Header Code)). In the MPEG2 system, an image packet including a group start code or a sequence header code has an intra-coded image at the head. The normal TS packet 320 includes in the payload 342 image data (including a predicted coded image) that does not include any of the group start code and the sequence header code.
[0022]
Normally, in the MPEG2-TS format, a value of 47 in hexadecimal (hereinafter referred to as “0x47”) is stored in the synchronization byte 343 of the TS packet. When transmitting a TS packet as a bit stream transmitted continuously without interruption like a broadcast signal, a synchronization byte 343 is used to detect the head of each TS packet from the bit stream.
In packet communication such as IP communication via the Internet 130, one or more TS packets can be stored and transmitted in one IP packet, and information such as the IP packet size in the IP packet can be used. , It is easy to detect the head of each TS packet. Therefore, in the packet communication, the synchronization byte 343 does not necessarily need to have the unique value 0x47. In the present embodiment, the value of the synchronization byte 343 of the TS packet is set to 0x47 or 0x00, and information indicating whether the TS packet is the normal TS packet 320 or the pause TS packet 330 is transmitted to the moving image receiving terminal device.
The moving image distribution server 100 runs an execution program in advance, analyzes output data from an external MPEG2-TS encoder (not shown), and changes the synchronization byte 343 of the pause TS packet 330 from 0x47 to 0x00.
[0023]
FIG. 2 is a flowchart of the moving image distribution method (image packet transmission method and image packet reception method) according to the first embodiment. In FIG. 2, first, the user inputs an image packet transmission command (including designation of content (image file)) to the operation input unit 125 of the moving image receiving terminal device 120. The communication unit 121 of the moving image receiving terminal device 120 transmits an image packet transmission instruction (step 201). The communication unit 102 of the moving image distribution server 100 receives the image packet transmission instruction (Step 202). The communication unit 102 reads out the image packet from the storage unit 101 and transmits the image packet (Step 204).
[0024]
The communication unit 121 of the moving image receiving apparatus 120 receives the image packet, and stores the received image packet in the storage unit 122 (Step 205). The decoding unit 123 reads out the image data from the storage unit 122, decodes (decompresses), and outputs (decompressed) (Step 206).
The user inputs an image packet transmission stop command to the control unit 124 through the operation input unit 125. The control unit 124 transmits an image packet transmission stop command to the moving image distribution server 100 via the communication unit 121 and the Internet 130 (Step 207). The communication unit 102 of the moving image distribution server 100 receives the image packet transmission stop command (Step 208). The communication unit 102 searches the image packet stored in the storage unit 101 for a paused image packet 330 to be transmitted next (step 209). The communication unit 102 easily detects the paused image packet 330 to be transmitted next, based on the value of the synchronization byte 343 of the TS packet. The communication unit 102 stops transmission immediately before the detected paused image packet (step 210).
[0025]
The decoding unit 123 of the moving image receiving terminal device 120 decodes all the image packets received and stored in the storage unit 122, and stops outputting when they are output (Step 211).
The user inputs a command to restart image packet transmission to the control unit 124 through the operation input unit 125. The control unit 124 transmits an image packet transmission restart command to the moving image distribution server 100 via the communication unit 121 and the Internet 130 (Step 212). The communication unit 102 of the moving image distribution server 100 receives the image packet transmission restart instruction (Step 213). The communication unit 102 resumes transmission from the paused image packet 330 immediately after the normal TS packet 320 transmitted last when the pause was performed (step 214). The communication unit 121 of the moving image receiving terminal device 120 receives the transmitted image packet again. The decoding unit 123 restarts decoding and output from the received paused image packet (Step 215). Since the head of the paused image packet is always an intra-coded image, the decoding unit 123 can correctly decode the compressed and decoded image data.
[0026]
The moving image distribution server 100 may replace the synchronization byte 343 of all the TS packets to be transmitted with the normal value of 0x47 and transmit the same to the moving image receiving terminal device 200. In the moving image receiving terminal device 120 using the synchronization byte 343, a malfunction due to the synchronization byte 343 not being 0x47 can be prevented. In the first embodiment, moving image distribution server 100 detects a pause TS packet, and moving image receiving terminal device 120 does not identify whether the TS packet is a normal TS packet or a pause TS packet. Therefore, even when the moving image distribution server 100 sets the synchronization byte 343 of all TS packets to 0x47 and transmits it to the moving image receiving terminal device 200, the same effect as in the first embodiment can be obtained.
[0027]
According to the first embodiment, by searching not the entire TS packet but a part of the header portion, the TS packet can be searched for the normal TS packet 320 or the pause TS packet 330. The load on 100 can be reduced. It should be noted that information indicating whether the TS packet is the normal TS packet 320 or the temporary stop TS packet 330 may be transmitted to the moving image receiving terminal device according to the bit of the error indicator field.
[0028]
According to the first embodiment, the moving image distribution server 100 pauses and resumes the transmission of the MPEG2-TS file 310. As a result, it is possible to realize a moving image receiving terminal device that displays a moving image without disturbance at the time of resuming the transmission to the user by using a currently marketed MPEG2-TS decoder LSI.
[0029]
<< Embodiment 2 >>
A moving image distribution system according to a second embodiment of the present invention will be described with reference to FIGS. 1, 3, and 4. FIG. 1 is a block diagram illustrating a schematic configuration of a moving image distribution system according to a second embodiment of the present invention. FIG. 3 is a configuration diagram of an MPEG2-TS file 310 according to the second embodiment of the present invention.
[0030]
In the first embodiment, the moving image distribution server 100 manages the transmission pause / resume position of the MPEG2-TS file 310, so that the moving image receiving terminal device 120 displays a moving image without disturbance when the transmission is resumed. In the second embodiment, the control unit 124 of the moving image receiving terminal device 120 manages the transmission pause / restart position of the MPEG2-TS file 310. The second embodiment differs from the first embodiment only in this point.
[0031]
FIG. 4 is a flowchart of a moving image distribution method (image packet transmission method and image packet reception method) according to the second embodiment. In FIG. 4, first, the user inputs an image packet transmission command (including designation of content (image file)) to the operation input unit 125 of the moving image receiving terminal device 120. The communication unit 121 of the moving image receiving terminal device 120 transmits an image packet transmission command (step 401). The communication unit 102 of the moving image distribution server 100 receives the image packet transmission command (Step 402). The communication unit 102 reads out the image packet from the storage unit 101 and transmits the image packet (Step 404).
[0032]
The communication unit 121 of the moving image receiving apparatus 120 receives the image packet, and stores the received image packet in the storage unit 122 (Step 405). The decoding unit 123 reads out the image data from the storage unit 122, decodes (decompresses) and outputs (Step 406).
The user inputs an image packet transmission stop command to the control unit 124 through the operation input unit 125. The control unit 124 transmits an image packet transmission stop command to the moving image distribution server 100 via the communication unit 121 and the Internet 130 (Step 407). It is assumed that at the time of transmitting the image packet transmission stop command from the moving image receiving terminal device 120 to the moving image distribution server 100, at least one undecoded pause TS packet has been stored in the storage unit 122. If it is not stored, the moving image receiving terminal device 120 receives the new pause TS packet, stores it in the storage unit 122, and then transmits an image packet transmission stop command to the moving image distribution server 100. The communication unit 102 of the moving image distribution server 100 receives the image packet transmission stop instruction (Step 408). The communication unit 102 stops transmitting the image packet (Step 409).
[0033]
The control unit 124 searches the image packets stored in the storage unit 122 for a paused image packet 330 to be decoded next. The control unit 124 easily detects the paused image packet 330 to be decoded next, based on the value of the synchronization byte 343 of the TS packet. Based on the instruction from the control unit 124, the decoding unit 123 of the moving image receiving terminal device 120 selects the paused image packet 330 to be decoded next among the image packets received and stored in the storage unit 122. The output is stopped at the time when the data has been decoded and output immediately before (step 410).
The control unit 124 stores any information for specifying the image packet transmitted first by the moving image distribution server 100 when the transmission is restarted (step 411). In the second embodiment, during the suspension period, the storage unit 122 stores all the received TS packets after the suspension TS packet 330. However, if the storage unit 122 can store all of the TS packets. If not, the TS packets that cannot be stored are discarded, and the number of discarded TS packets is counted.
[0034]
The user inputs a command to restart image packet transmission to the control unit 124 through the operation input unit 125. The control unit 124 sends an instruction to restart the transmission of the image packet and information specifying the image packet to be transmitted first to the moving image distribution server 100 through the communication unit 121 and the Internet 130 (in the second embodiment, the moving image reception The number of TS packets that the storage unit 122 of the terminal device 120 cannot store and discards is transmitted (step 412). The communication unit 102 of the moving image distribution server 100 receives the image packet transmission restart instruction and the information specifying the image packet to be transmitted first (step 413). The communication unit 102 specifies an image packet to be transmitted first, and restarts transmission from the image packet (step 414). The communication unit 121 of the moving image receiving terminal device 120 receives the transmitted image packet again. The decoding unit 123 restarts decoding and output from the pause TS packet 330 immediately after stopping the decoding, which is stored in the storage unit 122 (Step 415). Since the head of the paused image packet is always an intra-coded image, the decoding unit 123 can correctly decode the compressed and decoded image data.
[0035]
Before transmitting the TS packets from the storage unit 122 of the video receiving terminal device 120 to the decoding unit 123, the synchronization bytes 343 of all the TS packets stored in the storage unit 122 are replaced with a normal value of 0x47. In the decoding unit 123 using the synchronization byte 343, it is possible to prevent malfunction due to the fact that the synchronization byte 343 is not 0x47.
[0036]
After the suspension, the moving image receiving terminal device 120 according to the second embodiment discards the information as the information for specifying the image packet to be transmitted first during the pause because the storage unit 122 of the moving image receiving terminal device 120 cannot completely store the image packet. The number of TS packets was stored. Alternatively, for example, the moving image receiving terminal device may store the time code information included in the next paused image packet at the time of stopping the decoding, and may discard all the image packets at the time of the pause. In this case, in step 412, the moving image receiving terminal device transmits to the moving image distribution server 100 the transmission restart instruction of the image packet and the time code information included in the next paused image packet after the decoding is stopped.
[0037]
The second embodiment can realize a moving image receiving terminal device that displays a moving image without disturbance to a user when transmission is restarted, using an LSI of a currently commercially available MPEG2-TS decoder.
[0038]
According to the second embodiment, by searching not a whole TS packet but a part of its header, it is possible to search whether the TS packet is a normal TS packet 320 or a paused TS packet 330. The load on the device 120 can be reduced. It should be noted that information indicating whether the TS packet is the normal TS packet 320 or the temporary stop TS packet 330 may be transmitted to the moving image receiving terminal device according to the bit of the error indicator field.
[0039]
In the moving image distribution system according to the first embodiment, since the moving image distribution server 100 connected to the moving image receiving terminal device 120 via the Internet 130 manages transmission and stop of the video packet, the user temporarily stops the moving image receiving terminal device 120. There is a certain time delay from when the stop command or the decoding restart command is input to when the moving image receiving terminal apparatus 120 temporarily stops decoding or restarts decoding.
In the moving image distribution system according to the second embodiment, since the moving image receiving terminal device 120 manages decoding and stopping of the video packet, the user inputs a pause command or a decoding restart command to the moving image receiving terminal device 120. It is possible to substantially eliminate the time delay until the moving image receiving terminal apparatus 120 temporarily stops decoding or restarts decoding (it is possible to improve the response speed of the moving image distribution system to a command input by the user. ).
[0040]
【The invention's effect】
According to the present invention, in a system for distributing a moving image compressed by the MPEG2 method or the like from a moving image distribution server to a moving image receiving terminal device via a communication network, a user of the moving image receiving terminal device transmits a moving image pause request to the moving image distribution request. A video distribution server, a video receiving terminal device, a video packet transmission method, and an image packet reception method that, when transmitting a transmission resumption request to a video distribution server, display a non-disrupted video to the user when transmission is resumed. The advantageous effect that the method can be realized is obtained.
According to the present invention, a moving image distribution server, a moving image receiving terminal device, a method for transmitting an image packet, and an image packet receiving method for displaying, to a user, a moving image without disturbance when transmission is resumed, using an LSI of a currently marketed MPEG2-TS decoder The advantageous effect that the method can be realized is obtained.
[Brief description of the drawings]
FIG. 1 is a block diagram illustrating a schematic configuration of a moving image distribution system according to Embodiments 1 and 2 of the present invention.
FIG. 2 is a flowchart of a moving image distribution method (image packet transmission method and image packet reception method) according to the first embodiment of the present invention;
FIG. 3 is a configuration diagram of an MPEG2-TS file 310 according to the first and second embodiments of the present invention.
FIG. 4 is a flowchart of a moving image distribution method (image packet transmission method and image packet reception method) according to the second embodiment of the present invention;
[Explanation of symbols]
100 video distribution server
120 Video receiving terminal device
130 Internet
101, 122 storage unit
102, 121 communication unit
123 Decoding unit
124 control unit
125 Operation input section
310 MPEG2-TS file
320 Normal TS packet
330 Pause TS packet
341 TS header
342 payload
343 sync byte

Claims

A storage unit that stores an image packet obtained by packetizing compressed encoded data of a moving image including an intra-coded image and a forward or bidirectional predicted encoded image,
Upon receiving a transmission start command from the video receiving terminal device, transmitting the image packet read from the storage unit to the video receiving terminal device, and upon receiving a transmission stop command from the video receiving terminal device, storing the image packet. Section, and stops transmission of the image packet immediately before a pause image packet that is the image packet including the first intra-coded image after the transmission stop command is input, and a command to restart transmission from the video receiving terminal device. When a is input, a communication unit that resumes transmission from the paused image packet,
A moving image distribution server comprising:

A storage unit that stores image packets that are compressed according to the MPEG2 (Moving Picture Experts Group 2) format and that conform to the MPEG2-TS (MPEG2-Transport Stream) format;
Upon receiving a transmission start command from the video receiving terminal device, transmitting the image packet read from the storage unit to the video receiving terminal device, and upon receiving a transmission stop command from the video receiving terminal device, storing the image packet. Section, and stops the transmission of the image packet immediately before the pause image packet which is the image packet including the first group start code or sequence header code after the transmission stop command is input, and transmits the image packet from the moving image reception terminal device. When a restart command is input, a communication unit that restarts transmission from the paused image packet,
A moving image distribution server comprising:

Receiving an image packet including one or more images generated from a compression-encoded image stream of a moving image including an intra-coded image and a forward or bidirectional predicted coded image transmitted from a moving image distribution server A communication unit that transmits a command including a transmission stop command and a transmission start command to the video distribution server;
A storage unit for storing the image packet,
A decoding unit for decoding and outputting the image packet read from the storage unit,
An operation input unit for inputting a command including a reception stop command and a reception start command from a user,
When a reception stop command is input from the operation input unit, immediately before a pause image packet that is the image packet including the first intra-coded image after the reception stop instruction input among the image packets stored in the storage unit. Commanding the decoding unit to stop decoding the image packet, transmitting a transmission stop command to the video distribution server through the communication unit, and inputting a reception restart command from the operation input unit, the communication is performed. A control unit that transmits a transmission restart command to the video distribution server through the unit, and instructs the decoding unit to restart decoding from the paused image packet;
A moving image receiving terminal device comprising:

Receiving a TS packet including one or a plurality of images, which is an image packet in accordance with the MPEG2-TS format, generated from a compression-encoded image stream of a moving image compressed by the MPEG2 system, transmitted from the moving image distribution server; A communication unit that transmits a command including a transmission stop command and a transmission start command to the video distribution server;
A storage unit for storing the image packet,
A decoding unit for decoding and outputting the image packet read from the storage unit,
An operation input unit for inputting a command including a reception stop command and a reception start command from a user,
When a reception stop command is input from the operation input unit, a pause image packet which is the image packet including a first group start code or a sequence header code after the reception stop instruction is input among the image packets stored in the storage unit. Immediately before, when instructing the decoding unit to stop decoding the image packet, transmitting a transmission stop command to the video distribution server through the communication unit, and inputting a reception restart command from the operation input unit, A control unit that transmits a transmission restart command to the video distribution server through the communication unit, and instructs the decoding unit to restart decoding from the paused image packet.
A moving image receiving terminal device comprising:

A transmitting step of transmitting an image packet obtained by packetizing the compressed and encoded data of the moving image including the intra-coded image and the forward or bidirectional predicted coded image to the moving image receiving terminal device,
When a transmission stop command is input from the moving image receiving terminal device, transmission for stopping transmission of the image packet immediately before a pause image packet which is the image packet including the first intra-coded image after the transmission stop command is input. A stop step;
When a transmission restart command is input from the video receiving terminal device, a transmission restart step of restarting transmission from the paused image packet,
An image packet transmission method comprising:

When a command to stop transmission is input from the moving image receiving terminal device during distribution of an image packet according to the MPEG2-TS format after being compressed by the MPEG2 system, the first group start code or sequence header code after the transmission stop command is input is changed. A transmission stop step of stopping transmission of the image packet immediately before a pause image packet that is the image packet,
When a transmission restart command is input from the video receiving terminal device, a transmission restart step of restarting transmission from the paused image packet,
An image packet transmission method comprising:

Receiving an image packet including one or more images generated from a compression-encoded image stream of a moving image including an intra-coded image and a forward or bidirectional predicted coded image transmitted from a moving image distribution server Receiving step,
A decoding step of decoding and outputting the image packet;
When a reception stop command is input from the user, in the image packets stored in the storage unit, immediately before the pause image packet which is the image packet including the first intra-coded image after the reception stop command input, the A decoding stop step of stopping decoding of the image packet and transmitting a transmission stop command to the video distribution server;
Upon receiving a reception restart command from the user, a decoding restart step of transmitting a transmission restart command to the video distribution server and restarting decoding from the paused image packet;
An image packet receiving method, comprising:

A receiving step of receiving a TS packet including one or more images, which is an image packet in accordance with the MPEG2-TS format, generated from a compression-encoded image stream of a moving image compressed by the MPEG2 system and transmitted from the moving image distribution server. When,
A decoding step of decoding and outputting the image packet;
When a reception stop command is input from the user, in the image packets stored in the storage unit, immediately before the pause image packet which is the image packet including the first group start code or sequence header code after the reception stop command is input. A decoding stop step of stopping decoding of the image packet and transmitting a transmission stop command to the video distribution server;
Upon receiving a reception restart command from the user, a decoding restart step of transmitting a transmission restart command to the video distribution server and restarting decoding from the paused image packet;
An image packet receiving method, comprising:

It has image packets obtained by packetizing moving image compression-encoded data including an intra-encoded image and a forward or bidirectional predictive-encoded image, and each of the image packets has the image packet representing an intra-encoded image. Data characterized by having information in a header portion capable of determining whether or not the image packet is a paused image packet that is a contained image packet.

A paused image packet that has a plurality of image packets compressed according to the MPEG2 system and conforms to the MPEG2-TS format, each of the image packets being the image packet including a group start code or a sequence header code; Data having information in a header portion capable of determining whether or not the data is the data.