JP2016192658A

JP2016192658A - 通信システム、通信装置、通信方法および通信制御方法

Info

Publication number: JP2016192658A
Application number: JP2015071208A
Authority: JP
Inventors: 基伸木村; Motonobu Kimura
Original assignee: NEC Corp
Current assignee: NEC Corp
Priority date: 2015-03-31
Filing date: 2015-03-31
Publication date: 2016-11-10

Abstract

【課題】高画質動画の配信およびネットワーク帯域の有効利用を可能にする通信システム、通信装置、通信方法および通信制御方法を提供する。【解決手段】第一通信装置（１０）から第二通信装置（３０）へネットワーク（２０）を介して動画を送信する通信システムであって、第一通信装置（１０）が、キーフレームおよび参照フレームからなる動画フレームとキーフレームより高い画像品質を有する高画質キーフレームとを第二通信装置へ送信し（１０６、１０７）、第二通信装置（３０）が、動画フレームの前記キーフレームを高画質キーフレームに差し替えて動画再生を行う。【選択図】図１

Description

本発明は動画を送信する通信システムに係り、特に動画トラフィックを削減するための制御技術に関する。

モバイルネットワークを用いた動画配信では、ユーザが使用できるネットワーク帯域が常に変動するために、ネットワーク帯域の変動に応じてリアルタイムに動画圧縮率あるいは圧縮方法を変更する方式が採用されている。たとえば、H.264、SVC(Scalable Video Coding)、HLS(HTTP Live Streaming)、MPEG-DASH(Dynamic Adaptive Streaming over HTTP)のように予め何種類かの帯域の動画を配信サーバ側に用意しておき、ネットワーク帯域に応じて切り替える方式が用いられている。

また、特許文献１には、高品質映像ストリームと低品質映像ストリームとを同時に送信し、受信側でチャネル状態が良好な場合に高品質映像ストリームを選択する方式が開示されている。特許文献２には、異なる解像度のフレームを送信し、受信側で受信フレームから補完フレームを生成するシステムが開示されている。

特表２０１２−５１２５６０号公報特開平１１−２３４６４４号公報号公報

しかしながら、ネットワーク帯域に応じて圧縮率を変更する方式では、コンテンツを細かく細分化する必要があり、それによるファイルのオーバヘッド、コンテンツ管理のためのコスト等が増加する。このために、たとえば１０秒程度の遅延が生じてしまい、厳密な意味のリアルタイムでの追従が実現できない。さらに、コンテンツの内容に関係なく、ネットワーク帯域に従属して圧縮率が切り替えられるために、映像の品質がネットワーク品質に左右されるという問題もある。

また、上述した特許文献に開示されたシステムでは、複数の映像ストリームを送信し、受信側で合成あるいは選択するために、送信側の負荷が大きくなるだけでなく、ネットワーク帯域の有効利用ができないという難点がある。

そこで、本発明の目的は、高画質動画の配信およびネットワーク帯域の有効利用を可能にする通信システム、通信装置、通信方法および通信制御方法を提供することにある。

本発明による通信システムは、第一通信装置から第二通信装置へネットワークを介して動画を送信する通信システムであって、前記第一通信装置が、キーフレームおよび参照フレームからなる動画フレームと前記キーフレームより高い画像品質を有する高画質キーフレームとを前記第二通信装置へ送信し、前記第二通信装置が、前記動画フレームの前記キーフレームを前記高画質キーフレームに差し替えて動画再生を行う、ことを特徴とする。
本発明による通信装置は、ネットワークを介して他の通信装置へ動画を送信する通信装置であって、キーフレームおよび参照フレームからなる動画フレームを前記他の通信装置へ送信する第一送信手段と、前記キーフレームより高い画像品質を有する高画質キーフレームを前記他の通信装置へ送信する第二送信手段と、前記動画フレームのキーフレームより先に当該キーフレームに対応する前記高画質キーフレームを前記他の通信装置へ送信するように前記第二送信手段を制御する制御手段と、を有することを特徴とする。
本発明による通信装置は、ネットワークを介して他の通信装置から動画を受信する通信装置であって、キーフレームおよび参照フレームからなる動画フレームを前記他の通信装置から受信する第一受信手段と、前記キーフレームより高い画像品質を有する高画質キーフレームを前記他の通信装置から受信する第二受信手段と、前記動画フレームのキーフレームに対応する前記高画質キーフレームを受信していれば、前記キーフレームを前記高画質キーフレームにより差し替えて動画復号を実行する再生制御手段と、を有することを特徴とする。
本発明による通信方法は、第一通信装置から第二通信装置へネットワークを介して動画を送信する通信システムにおける通信方法であって、前記第一通信装置が、キーフレームおよび参照フレームからなる動画フレームと前記キーフレームより高い画像品質を有する高画質キーフレームとを前記第二通信装置へ送信し、前記第二通信装置が、前記動画フレームの前記キーフレームを前記高画質キーフレームに差し替えて動画再生を行う、ことを特徴とする。
本発明による通信制御方法は、ネットワークを介して他の通信装置へ動画を送信する通信装置の通信制御方法であって、キーフレームおよび参照フレームからなる動画フレームを前記他の通信装置へ送信し、前記キーフレームより高い画像品質を有する高画質キーフレームを生成し、前記動画フレームのキーフレームより先に当該キーフレームに対応する前記高画質キーフレームを前記他の通信装置へ送信する、ことを特徴とする。
本発明による通信制御方法は、ネットワークを介して他の通信装置から動画を受信する通信装置の通信制御方法であって、キーフレームおよび参照フレームからなる動画フレームを前記他の通信装置から受信し、前記キーフレームより高い画像品質を有する高画質キーフレームを前記他の通信装置から受信し、前記動画フレームのキーフレームに対応する前記高画質キーフレームを受信していれば、前記キーフレームを前記高画質キーフレームにより差し替えて動画復号を実行する、ことを特徴とする。

本発明によれば、配信動画の画質を向上させると共にネットワーク帯域の有効利用を可能にする。

図１は本発明の一実施形態による通信システムにおける動画トラフィック制御装置の機能的構成を示すブロック図である。図２は本実施形態における基本動画について説明するためのフレーム構成を示す模式図である。図３は本実施形態における高画質キーフレームおよびキーフレーム情報について説明するためのフレーム構成を示す模式図である。図４は本実施形態による通信制御方法を例示するフローチャートである。図５は本実施形態における高画質キーフレームの送信抑制制御について説明するためのネットワーク帯域の経時変動の一例を示すグラフである。図６は本実施形態における高画質キーフレームの優先度と動きの大きさとの関係を示すグラフである。図７は本実施形態における動画再生端末の機能的構成を示すブロック図である。図８は本実施形態による動画再生制御方法を例示するフローチャートである。図９は本実施形態における動画再生端末の動画合成の一例を説明するための模式図である。図１０は本発明の他の実施形態における高画質キーフレームおよびキーフレーム情報について説明するためのフレーム構成を示す模式図である。

＜実施形態の概要＞
本発明の実施形態によれば、動画信号の送信とは別に、当該動画のユーザからみた品質に最も大きく影響するフレームだけを高精細で送信することで、ネットワーク帯域の有効利用を図りつつ再生画質を向上させることができる。より詳しくは、配信フレームとは別に、配信フレームのキーフレーム（たとえば、フレーム内圧縮のＩフレーム）の高品質バージョンを送信し、受信側で、配信されたフレームのなかの対応するキーフレームを高品質キーフレームに差し替えて動画再生を行う。これにより、動画のトラフィックを削減すると共に、ネットワーク帯域の変動にリアルタイムに追従して可能な限り高品質な動画を再生することが可能となる。以下、本発明の実施形態について図面を参照しながら詳細に説明する。

１．構成
図１に示すように、本実施形態による動画トラフィック制御装置１０は、サーバ４０からの動画フレームをネットワーク２０を通して動画再生端末３０へ配信するものとする。動画トラフィック制御装置１０は、ネットワークを介してサーバ４０と動画再生端末３０との間に介在する通信装置であってもよいし、サーバ４０内に設けられてもよい。以下、ネットワーク２０はモバイルネットワーク、動画再生端末３０はモバイルネットワーク２０に接続した移動局であるものとする。ネットワーク２０は、ネットワーク帯域が変動しやすい通信区間を一部に含むネットワークであってもよい。

動画トラフィック制御装置１０は、サーバ４０から受信したオリジナル動画信号の復号を行う動画復号部１０１と、復号されたオリジナル動画信号を再符号化（トランスコード）する動画符号化部１０２と、を有する。動画符号化部１０２は、ベースとなる画像解像度およびフレームレート（以下、動画品質という。）でオリジナル動画を再符号化（トランスコード）することにより基本動画を生成し、基本動画蓄積部１０３に蓄積する。

さらに、動画符号化部１０２は、オリジナル動画の各キーフレーム（Ｉピクチャ）を再符号化（トランスコード）することにより、オリジナル動画と同じ解像度の品質あるいは上記基本動画のベース品質よりも高品質のフレーム（以下、高画質キーフレームという。）を生成し、高画質キーフレーム蓄積部１０４に蓄積する。その際、各キーフレームの位置を示すタイムスタンプ情報を高画質キーフレーム用のメタデータとしてメタデータ蓄積部１０５に蓄積する。メタデータ蓄積部１０５に動きの大きさを示す情報を蓄積することもできる。後述するように、動きが小さい高画質キーフレームほど優先的に送信し、再生側で基本動画の対応キーフレームと差し替えることで、再生動画のユーザ体感画質が向上する。

高画質キーフレーム配信制御部１０６は、制御部１０９の制御に従って、高画質キーフレーム蓄積部１０４に蓄積された高画質キーフレームを動画要求元の端末３０へ送信する。基本動画配信制御部１０７は、制御部１０９の制御に従って、基本動画蓄積部１０３に蓄積された基本動画フレームを動画要求元の端末３０へ送信する。なお、高画質キーフレーム配信制御部１０６および基本動画配信制御部１０７の各々は、ネットワーク２０のデータ転送速度、遅延等のネットワーク状況をモニタし、モニタ結果をネットワーク帯域予測部１０８へ通知するものとする。ネットワーク帯域予測部１０８は、ネットワーク２０のモニタ結果からネットワーク利用可能帯域を予測し、帯域予測値を制御部１０９へ通知する。なお、ネットワークの利用可能帯域は、端末３０との間で送受信されるパケットのサイズ、および動画トラフィック制御装置１０がパケットを送信してから端末３０からその応答を受信するまでの時間の統計により、推定することが可能である。

制御部１０９は動画トラフィック制御装置１０の全体的な動作を制御する。後述するように、制御部１０９は、ネットワーク帯域に所定値以上の余裕がある場合に高画質キーフレームを送信する。たとえば、ネットワーク帯域予測部１０８からのネットワーク帯域予測値と基本動画の平均コンテンツビットレートとを比較し、その比較結果に応じて、高画質キーフレームの送信可否を制御する。

図２に例示するように、動画符号化部１０２は、キーフレームと参照フレームからなるオリジナル動画（ＧＯＰ：Group Of Pictures）をベースとなる画質およびフレームレートで再符号化（トランスコード）して基本動画を生成する。

図３に例示するように、動画符号化部１０２は、オリジナル動画（ＧＯＰ）のキーフレームを再符号化（トランスコード）し、オリジナル動画の解像度以下であって基本動画の解像度より高い高画質キーフレームを高画質キーフレーム蓄積部１０４に蓄積し、さらに当該高画質キーフレームの位置情報（たとえばタイムスタンプ情報）をメタデータ蓄積部１０５に蓄積する。なお、メタデータ蓄積部１０５には、タイムスタンプ情報と共に、当該高画質キーフレームの動きの大きさを示す動き情報を蓄積してもよい。

なお、図１における動画復号部１０１、動画符号化部１０２、高画質キーフレーム配信制御部１０６、基本動画配信制御部１０７およびネットワーク帯域予測部１０８からなる機能は、図示しないメモリに格納されたプログラムをコンピュータ（ここでは、動画トラフィック制御装置あるいはサーバのＣＰＵ(Central Processing Unit)）上で実行することにより実現することもできる。

２．動作
以下、本実施形態による動画トラフィック制御について図４〜図６を参照しながら詳細に説明する。

図４に示すように、制御部１０９は、端末３０からの動画視聴要求に応じて、サーバ４０から動画信号を受信する（動作２０１）。続いて、制御部１０９は、動画復号部１０１および動画符合化部１０２を制御して、復号および再符号化することで基本動画を基本動画蓄積部１０３に、高画質キーフレームを高画質キーフレーム蓄積部１０４に、高画質キーフレームのタイムスタンプ等のメタデータをメタデータ蓄積部１０５に、それぞれ蓄積する（動作２０２）。

続いて、ネットワーク帯域予測部１０８は、高画質キーフレーム配信制御部１０６および基本動画配信制御部１０７からのネットワーク状況に関する情報を用いてネットワーク帯域を推定する（動作２０３）。

制御部１０９は、ネットワーク帯域予測部１０８により推定されたネットワーク帯域予測値が基本動画の平均コンテンツビットレートより小さいか否かを判断する（動作２０４）。ネットワーク帯域予測値が平均コンテンツビットレート以下であれば（動作２０４；ＮＯ）、制御部１０９は高画質キーフレーム配信制御部１０６を制御して高画質キーフレームの送信を停止する（動作２０５）。たとえば、図５に示すように、ネットワーク帯域予測値が平均コンテンツビットレートより小さい時間帯域Ｔ１、Ｔ２およびＴ３では、高画質キーフレームの送信が抑制される。

ネットワーク帯域予測値が平均コンテンツビットレートより高ければ（動作２０４；ＹＥＳ）、制御部１０９は、高画質キーフレーム配信制御部１０６を制御して、優先度に従って高画質キーフレームおよびそのタイムスタンプ情報を送信する（動作２０６）。高画質キーフレームの送信停止（動作２０５）あるいは高画質キーフレームの送信（動作２０６）のいずれの場合も、制御部１０９は、基本動画蓄積部１０３に蓄積された基本動画を基本動画配信制御部１０７から端末３０へネットワーク２０を通して送信する（動作２０７）。以下、動作２０１〜２０７を繰り返す。

高画質キーフレームは、動画の再生位置に関わらず、優先度の高いフレームから先に送信され、端末側でバッファリングされる。ただし、動画再生位置よりも前の高画質フレームは配信されない。図６に示すように、高画質キーフレームの優先度は動画の動きの大小により複数段階に分けられ、静止画の優先度が一番高く、相対的に動きが大きい画像ほど優先度が低くなる。その理由は、静止画あるいは動きの少ない画像はユーザにあらが見えやすいからである。したがって、動きの少ない高画質キーフレームほど優先的に端末３０へ送信され、端末３０において、基本動画のうち対応するキーフレームを高画質キーフレームに差し替えることで再生動画の品質を向上させることができる。

３．動画再生端末
図７に例示するように、動画再生端末３０は、高画質キーフレーム受信部３０１、基本動画受信部３０２、動画合成部３０３、制御部３０４、動画復号部３０５および動画表示部３０６を有し、さらに、図示されていないが、動画表示部３０６以外の入力操作部等のユーザインタフェース、ネットワーク２０との通信を行う通信部等を有する。言い換えれば、図７には動画再生端末３０における動画プレーヤの概略的構成のみが図示されている。

図８に示すように、動画再生端末３０は、まずサーバ４０に対して動画の視聴要求を送信すると（動作４０１）、高画質キーフレーム受信部３０１および基本動画受信部３０２は、ネットワーク２０から要求した動画の高画質キーフレームおよびタイムスタンプ情報と基本動画フレームとをそれぞれ受信し、バッファリングする（動作４０２）。制御部３０４は、受信した基本動画フレームを復号する前に、高画質キーフレームのタイムスタンプを参照して基本動画のキーフレームに対応する高画質キーフレームを受信しているか否かを判断する（動作４０３）。

高画質キーフレームを受信していれば（動作４０３；ＹＥＳ）、制御部３０４は、動画合成部３０３を制御して、基本動画のキーフレームを当該高画質キーフレームに差し替え（動作４０４）、動画復号部３０５へ出力する。動画復号部３０５は、高画質キーフレームに置き換わった基本動画フレームを復号し、復号された動画を動画表示部３０５に表示する（動作４０５）。図９に本実施形態による動画合成動作を模式的に示す。

図９に示すように、動画トラフィック制御装置１０から送信された基本動画フレームとそのキーフレームに対応する高画質キーフレームとを受信した場合、動画再生端末３０は、基本動画のキーフレームをそれに対応する高画質キーフレームに差し替え、高画質キーフレームに置き換わった基本動画フレームが復号され出力される。

なお、図７における高画質キーフレーム受信部３０１、基本動画受信部３０２、動画合成部３０３、制御部３０４および動画復号部３０５からなる機能は、図示しないメモリに格納されたプログラムをコンピュータ（ここでは、動画トラフィック制御装置あるいはサーバのＣＰＵ(Central Processing Unit)）上で実行することにより実現することもできる。

４．効果
上述したように、本発明の実施形態によれば、配信動画フレームとは別に、そのキーフレームに対応する高品質キーフレームを送信し、受信側で、配信されたフレームのなかの対応するキーフレームを高品質キーフレームに差し替えて動画再生を行う。これにより、動画のトラフィックを削減すると共に、ネットワーク帯域の変動にリアルタイムに追従して可能な限り高品質な動画を再生することが可能となる。さらに、高画質キーフレームをネットワーク帯域に余裕があるときに送信するために、ネットワーク帯域を有効に利用することができる。

さらに、動きが小さいあるいは静止したシーンの高画質キーフレームを優先的に動画再生端末へ送信することで、再生動画の品質を向上させることができる。

５．他の実施形態
本発明の他の実施形態によれば、図１０に示すように、動画符合化部１０２が複数の異なる画質（解像度）の高画質キーフレームを生成することもできる。このような複数の高画質キーフレームを高画質キーフレーム蓄積部１０４に蓄積しておき、ネットワーク帯域の予測状況に応じた画質レベルの高画質キーフレームを選択して端末３０へ送信することもできる。このようにネットワーク状況に応じた高画質キーフレームを送信できるので、ネットワーク帯域を更に有効に利用することが可能となる。

６．付記
上述した実施形態の一部あるいは全部は、以下の付記のようにも記載されうるが、これらに限定されるものではない。
（付記１）
第一通信装置から第二通信装置へネットワークを介して動画を送信する通信システムであって、
前記第一通信装置が、キーフレームおよび参照フレームからなる動画フレームと前記キーフレームより高い画像品質を有する高画質キーフレームとを前記第二通信装置へ送信し、
前記第二通信装置が、前記動画フレームの前記キーフレームを前記高画質キーフレームに差し替えて動画再生を行う、
ことを特徴とする通信システム。
（付記２）
前記第一通信装置は、前記ネットワークの利用可能帯域が所定値より大きいときのみ、前記高画質キーフレームを送信することを特徴とする付記１に記載の通信システム。
（付記３）
前記第一通信装置は、動きがより小さいシーンの高画質キーフレームをより優先的に前記第二通信装置へ送信することを特徴とする付記１または２に記載の通信システム。
（付記４）
前記第一通信装置は、画像品質が異なる複数の高画質キーフレームを用意し、前記ネットワークの帯域状況に応じて、前記複数の高画質キーフレームから一つを選択して送信することを特徴とする付記１−３のいずれか１項に記載の通信システム。
（付記５）
ネットワークを介して他の通信装置へ動画を送信する通信装置であって、
キーフレームおよび参照フレームからなる動画フレームを前記他の通信装置へ送信する第一送信手段と、
前記キーフレームより高い画像品質を有する高画質キーフレームを前記他の通信装置へ送信する第二送信手段と、
前記動画フレームのキーフレームより先に当該キーフレームに対応する前記高画質キーフレームを前記他の通信装置へ送信するように前記第二送信手段を制御する制御手段と、
を有することを特徴とする通信装置。
（付記６）
前記制御手段が、前記ネットワークの利用可能帯域が所定値より大きいときのみ、前記高画質キーフレームを送信することを特徴とする付記５に記載の通信装置。
（付記７）
前記制御手段が、動きがより小さいシーンの高画質キーフレームをより優先的に送信することを特徴とする付記５または６に記載の通信装置。
（付記８）
前記制御手段が、画像品質が異なる複数の高画質キーフレームを用意し、前記ネットワークの帯域状況に応じて、前記複数の高画質キーフレームから一つを選択して送信することを特徴とする付記５−７のいずれか１項に記載の通信装置。
（付記９）
ネットワークを介して他の通信装置から動画を受信する通信装置であって、
キーフレームおよび参照フレームからなる動画フレームを前記他の通信装置から受信する第一受信手段と、
前記キーフレームより高い画像品質を有する高画質キーフレームを前記他の通信装置から受信する第二受信手段と、
前記動画フレームのキーフレームに対応する前記高画質キーフレームを受信していれば、前記キーフレームを前記高画質キーフレームにより差し替えて動画復号を実行する再生制御手段と、
を有することを特徴とする通信装置。
（付記１０）
第一通信装置から第二通信装置へネットワークを介して動画を送信する通信システムにおける通信方法であって、
前記第一通信装置が、キーフレームおよび参照フレームからなる動画フレームと前記キーフレームより高い画像品質を有する高画質キーフレームとを前記第二通信装置へ送信し、
前記第二通信装置が、前記動画フレームの前記キーフレームを前記高画質キーフレームに差し替えて動画再生を行う、
ことを特徴とする通信方法。
（付記１１）
前記第一通信装置は、前記ネットワークの利用可能帯域が所定値より大きいときのみ、前記高画質キーフレームを送信することを特徴とする付記１０に記載の通信方法。
（付記１２）
前記第一通信装置は、動きがより小さいシーンの高画質キーフレームをより優先的に前記第二通信装置へ送信することを特徴とする付記１０または１１に記載の通信方法。
（付記１３）
前記第一通信装置は、画像品質が異なる複数の高画質キーフレームを用意し、前記ネットワークの帯域状況に応じて、前記複数の高画質キーフレームから一つを選択して送信することを特徴とする付記１０−１２のいずれか１項に記載の通信方法。
（付記１４）
ネットワークを介して他の通信装置へ動画を送信する通信装置の通信制御方法であって、
キーフレームおよび参照フレームからなる動画フレームを前記他の通信装置へ送信し、
前記キーフレームより高い画像品質を有する高画質キーフレームを生成し、
前記動画フレームのキーフレームより先に当該キーフレームに対応する前記高画質キーフレームを前記他の通信装置へ送信する、
ことを特徴とする通信制御方法。
（付記１５）
前記ネットワークの利用可能帯域が所定値より大きいときのみ、前記高画質キーフレームを送信することを特徴とする付記１４に記載の通信制御方法。
（付記１６）
動きがより小さいシーンの高画質キーフレームをより優先的に送信することを特徴とする付記１４または１５に記載の通信制御方法。
（付記１７）
画像品質が異なる複数の高画質キーフレームを用意し、前記ネットワークの帯域状況に応じて、前記複数の高画質キーフレームから一つを選択して送信することを特徴とする付記１４−１６のいずれか１項に記載の通信制御方法。
（付記１８）
ネットワークを介して他の通信装置から動画を受信する通信装置の通信制御方法であって、
キーフレームおよび参照フレームからなる動画フレームを前記他の通信装置から受信し、
前記キーフレームより高い画像品質を有する高画質キーフレームを前記他の通信装置から受信し、
前記動画フレームのキーフレームに対応する前記高画質キーフレームを受信していれば、前記キーフレームを前記高画質キーフレームにより差し替えて動画復号を実行する、
ことを特徴とする通信制御方法。
（付記１９）
ネットワークを介して他の通信装置へ動画を送信する通信装置としてコンピュータを機能させるプログラムであって、
キーフレームおよび参照フレームからなる動画フレームを前記他の通信装置へ送信する第一送信機能と、
前記キーフレームより高い画像品質を有する高画質キーフレームを前記他の通信装置へ送信する第二送信機能と、
前記動画フレームのキーフレームより先に当該キーフレームに対応する前記高画質キーフレームを前記他の通信装置へ送信するように前記第二送信手段を制御する制御機能と、
を前記コンピュータに実現することを特徴とするプログラム。
（付記２０）
ネットワークを介して他の通信装置から動画を受信する通信装置としてコンピュータを機能させるプログラムであって、
キーフレームおよび参照フレームからなる動画フレームを前記他の通信装置から受信する第一受信機能と、
前記キーフレームより高い画像品質を有する高画質キーフレームを前記他の通信装置から受信する第二受信機能と、
前記動画フレームのキーフレームに対応する前記高画質キーフレームを受信していれば、前記キーフレームを前記高画質キーフレームにより差し替えて動画復号を実行する再生制御機能と、
を前記コンピュータに実現することを特徴とするプログラム。

本発明は、動画配信システム全般に利用可能である。

１０動画トラフィック制御装置
２０ネットワーク
３０動画再生端末
４０動画配信サーバ
１０１動画復号部
１０２動画符合化部
１０３基本動画蓄積部
１０４高画質キーフレーム蓄積部
１０５メタデータ蓄積部
１０６高画質キーフレーム配信制御部
１０７基本動画配信制御部
１０８ネットワーク帯域予測部
１０９制御部
３０１高画質キーフレーム受信部
３０２基本動画受信部
３０３動画合成部
３０４制御部
３０５動画復号部
３０６動画表示部

Claims

第一通信装置から第二通信装置へネットワークを介して動画を送信する通信システムであって、
前記第一通信装置が、キーフレームおよび参照フレームからなる動画フレームと前記キーフレームより高い画像品質を有する高画質キーフレームとを前記第二通信装置へ送信し、
前記第二通信装置が、前記動画フレームの前記キーフレームを前記高画質キーフレームに差し替えて動画再生を行う、
ことを特徴とする通信システム。
前記第一通信装置は、前記ネットワークの利用可能帯域が所定値より大きいときのみ、前記高画質キーフレームを送信することを特徴とする請求項１に記載の通信システム。
前記第一通信装置は、動きがより小さいシーンの高画質キーフレームをより優先的に前記第二通信装置へ送信することを特徴とする請求項１または２に記載の通信システム。
前記第一通信装置は、画像品質が異なる複数の高画質キーフレームを用意し、前記ネットワークの帯域状況に応じて、前記複数の高画質キーフレームから一つを選択して送信することを特徴とする請求項１−３のいずれか１項に記載の通信システム。
ネットワークを介して他の通信装置へ動画を送信する通信装置であって、
キーフレームおよび参照フレームからなる動画フレームを前記他の通信装置へ送信する第一送信手段と、
前記キーフレームより高い画像品質を有する高画質キーフレームを前記他の通信装置へ送信する第二送信手段と、
前記動画フレームのキーフレームより先に当該キーフレームに対応する前記高画質キーフレームを前記他の通信装置へ送信するように前記第二送信手段を制御する制御手段と、
を有することを特徴とする通信装置。
ネットワークを介して他の通信装置から動画を受信する通信装置であって、
キーフレームおよび参照フレームからなる動画フレームを前記他の通信装置から受信する第一受信手段と、
前記キーフレームより高い画像品質を有する高画質キーフレームを前記他の通信装置から受信する第二受信手段と、
前記動画フレームのキーフレームに対応する前記高画質キーフレームを受信していれば、前記キーフレームを前記高画質キーフレームにより差し替えて動画復号を実行する再生制御手段と、
を有することを特徴とする通信装置。
第一通信装置から第二通信装置へネットワークを介して動画を送信する通信システムにおける通信方法であって、
前記第一通信装置が、キーフレームおよび参照フレームからなる動画フレームと前記キーフレームより高い画像品質を有する高画質キーフレームとを前記第二通信装置へ送信し、
前記第二通信装置が、前記動画フレームの前記キーフレームを前記高画質キーフレームに差し替えて動画再生を行う、
ことを特徴とする通信方法。
ネットワークを介して他の通信装置へ動画を送信する通信装置の通信制御方法であって、
キーフレームおよび参照フレームからなる動画フレームを前記他の通信装置へ送信し、
前記キーフレームより高い画像品質を有する高画質キーフレームを生成し、
前記動画フレームのキーフレームより先に当該キーフレームに対応する前記高画質キーフレームを前記他の通信装置へ送信する、
ことを特徴とする通信制御方法。
ネットワークを介して他の通信装置から動画を受信する通信装置の通信制御方法であって、
キーフレームおよび参照フレームからなる動画フレームを前記他の通信装置から受信し、
前記キーフレームより高い画像品質を有する高画質キーフレームを前記他の通信装置から受信し、
前記動画フレームのキーフレームに対応する前記高画質キーフレームを受信していれば、前記キーフレームを前記高画質キーフレームにより差し替えて動画復号を実行する、
ことを特徴とする通信制御方法。
ネットワークを介して他の通信装置へ動画を送信する通信装置としてコンピュータを機能させるプログラムであって、
キーフレームおよび参照フレームからなる動画フレームを前記他の通信装置へ送信する第一送信機能と、
前記キーフレームより高い画像品質を有する高画質キーフレームを前記他の通信装置へ送信する第二送信機能と、
前記動画フレームのキーフレームより先に当該キーフレームに対応する前記高画質キーフレームを前記他の通信装置へ送信するように前記第二送信手段を制御する制御機能と、
を前記コンピュータに実現することを特徴とするプログラム。