JP3865190B2 - Encoded moving image data reproducing apparatus and storage medium thereof - Google Patents

Encoded moving image data reproducing apparatus and storage medium thereof Download PDF

Info

Publication number
JP3865190B2
JP3865190B2 JP2000000950A JP2000000950A JP3865190B2 JP 3865190 B2 JP3865190 B2 JP 3865190B2 JP 2000000950 A JP2000000950 A JP 2000000950A JP 2000000950 A JP2000000950 A JP 2000000950A JP 3865190 B2 JP3865190 B2 JP 3865190B2
Authority
JP
Japan
Prior art keywords
moving image
image data
decoding
output
screen
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2000000950A
Other languages
Japanese (ja)
Other versions
JP2001197433A (en
Inventor
康之 中島
広昌 柳原
暁夫 米山
勝 菅野
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
KDDI Corp
Original Assignee
KDDI Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by KDDI Corp filed Critical KDDI Corp
Priority to JP2000000950A priority Critical patent/JP3865190B2/en
Publication of JP2001197433A publication Critical patent/JP2001197433A/en
Application granted granted Critical
Publication of JP3865190B2 publication Critical patent/JP3865190B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Description

【0001】
【発明の属する技術分野】
本発明は符号化動画像データ再生装置およびその記憶媒体に関し、特に複数の動画像データストリーム(以下、ストリームと略す)を効率的に再生できるようにした符号化動画像データ再生装置およびその記憶媒体に関する。
【0002】
【従来の技術】
従来の符号化動画像データ再生装置について、図10、図11を用いて説明する。図10は従来の符号化動画像音声データ再生装置の構成を示すブロック図、図11(a) は符号済みのストリーム供給装置の一例を示すブロック図、同図(b) はライブ映像のストリーム供給装置の一例を示すブロック図である。
【0003】
図10に示されているように、従来の符号化動画像音声データ再生装置においては、復号制御器56で指定されたストリームが、ネットワークで接続された第1のストリーム11から第pのストリーム12までのいずれか一つである場合、該指定されたストリームはネットワーク13を介して入力選択器51に入力される。
【0004】
例えば、前記指定されたストリームが符号済みの映像ファイルの場合、図11(a) のように、復号制御器56で指定されたストリームのアドレスにしたがってビデオデータ制御器62から蓄積装置61に格納されたビデオデータが読み出され、ストリーム送出器63を通じてネットワーク13に送出される。一方、前記指定されたストリームがライブ映像の場合は、同図(b) のように、カメラ64から入力される映像がライブエンコーダ65にて実時間で符号化され、ストリーム送出器63からネットワーク13に送出される。
【0005】
復号制御器56で指定されたストリームが、ネットワーク13を介さずにローカルで接続された第p+1のストリーム14から第p+qのストリーム15までのいずれか一つである場合には、該指定されたストリームは直接入力選択器51に入力される。そして、例えば第p+1 のストリーム14が符号済みの映像ファイルであれば図11(a) のように、一方、ライブ映像の場合は同図(b) のようにして、ストリームが入力選択器51に送出される。
【0006】
入力選択器51では、入力されたストリームに対して復号制御器56で指定されたストリームが選択されストリームst1 として第1の復号器52に入力される。第1の復号器52は復号制御器56によって起動され復号動作が開始される。第1の復号器52から出力された信号は出力メモリ53に入力される。出力メモリ53では復号制御器56によって第1の復号器52からの出力に応じたメモリ空間#1を確保して、出力信号を該メモリ空間#1に蓄積する。
【0007】
画面出力回路54では復号制御器56からの制御にしたがって、出力メモリ53からメモリ空間#1に蓄積されているデータを読み込み、画面出力回路54に出力する。画面出力回路54では入力されたメモリ内容を出力画面55に出力する。
【0008】
【発明が解決しようとする課題】
さて、前記した従来の符号化動画像音声データ再生装置を用いて、複数の映像を同時に再生する場合は、図10のような構成を複数個起動して複数の画面出力を行う。一例としてパーソナルコンピュータのCPUを用いてソフトウェアで復号処理を行う場合を考える。例えば、1つのストリームを復号するためにCPUの80%の処理量が必要な場合、1つのストリームを再生することは可能であるが、複数のストリームを同時に再生することはできない。また、例えば、複数のストリームの復号を同時に起動してもCPU負荷が100%に満たない場合には、各ストリームの復号を個別に起動して、出力画面55に映出する画面配列をその都度調整する必要があるという問題があった。
【0009】
本発明の目的は、前記した従来技術の問題点を解決し、複数のストリームを同時に効率的に復号できる符号化動画像データ再生装置およびその記憶媒体を提供することにある。
【0010】
【課題を解決するための手段】
前記目的を達成するために、本発明は、ネットワーク上に存在する蓄積装置に蓄積された圧縮符号化動画像データを復号する符号化動画像データ再生装置において、入力する動画像データを1個または複数個選択する入力データ選択手段と、該選択される動画像データの個数に応じて復号するための処理量が予め決められている、異なる処理量を有する複数の復号手段と、該復号手段で復号された各動画像データを蓄積する複数の蓄積領域を有する蓄積手段と、該蓄積手段に蓄積された動画像データ数に応じて、1または複数の動画像データを選択する復号データ選択手段と、該復号データ選択手段で選択された動画像データを、1個または複数個同時に表示する表示手段とを具備し、前記復号手段は、復号する動画像データ数に応じて、異なった処理量の復号手段を全体の復号処理量を変えることなく適応的に選択されるようにした点に第1の特徴がある。この特徴によれば、複数の動画像データのストリームを、体系的にかつ効率的に再生することが可能になる。
【0011】
また、本発明は、前記復号手段は、復号する動画像データ数が多くなるに従い処理量の少ない復号手段を選択されるようにした点に第2の特徴がある。この特徴によれば、全体の処理量を変えることなく、複数のストリームの再生処理が可能になる。
【0012】
また、本発明は、前記復号手段は、復号する動画像データごとに特定の処理量を割当てた復号手段を用いるようにした点に第3の特徴がある。この特徴によれば、全体の処理量を変えることなく複数のストリームの再生処理が行え、かつ特定のストリームには品質の高い再生が可能になる。
【0013】
また、本発明は、出力する画面を制御する出力画面制御手段を有し、該出力画面制御手段の制御手順によって画面出力を行うようにした点に第4の特徴がある。この特徴によれば、再生された複数のストリームの表示の画面配列をその都度調整する必要がなくなり、操作性が向上する。
【0014】
また、本発明は、再生する複数のストリームを選択する機能と、該選択した複数のストリームを復号する機能と、該復号したデータを予め定められたメモリ位置に記憶させる機能と、該メモリ位置から読み出されたデータを画面に出力する機能と、該データが出力される画面位置を制御する機能とからなる、コンピュータに実行させるためのプログラムを記録したコンピュータ読取り可能な記録媒体である点に第5の特徴がある。この特徴によれば、複数のストリームを効率的に再生することができるコンピュータ読取り可能な記録媒体を提供することができる。
【0015】
【発明の実施の形態】
以下に、図面を参照して、本発明を詳細に説明する。図1は、本発明の一実施形態の符号化動画像音声データ再生装置の構成を示すブロック図である。
【0016】
復号制御器24で指定されたストリームが、ネットワーク13で接続された第1のストリーム11から第pのストリーム12までの場合、該指定されたストリームはネットワーク13を介して入力選択器17に入力される。一方、該復号制御器24で指定されたストリームが、ネットワークを介さずにローカルで接続された第p+1のストリーム14から第p+qのストリーム15までの場合、該指定されたストリームは直接入力選択器17に入力される。
【0017】
なお、前記指定されたストリームが符号済みの映像ファイルの場合は図11(a) のようにして、また該指定されたストリームがライブ映像の場合は同図(b) のようにして、入力選択器17に供給されるのは、従来と同様である。以下の、他の実施形態においても同様である。
【0018】
入力選択器17では、入力されたストリームに対して復号制御器24で指定されたj個のストリームが選択され、ストリームst1 からストリームstj としてそれぞれ第1の復号器18から第jの復号器19に入力される。第1の復号器18から第jの復号器19は復号制御器24によって起動され復号動作が開始される。第1〜第jの復号器18〜19から出力された信号は、出力メモリ20に入力される。出力メモリ20では、復号制御器24によって第1の復号器18から第jの復号器19までの出力に応じたメモリ空間#1からメモリ空間#jを確保して、各出力信号を該当のメモリ空間#1〜#jに蓄積する。
【0019】
出力切替器21では復号制御器24からの制御にしたがって、第kから第lまでの出力チャネルに接続するストリーム番号に該当するメモリ空間を選択し、出力メモリ20から該当のメモリ内容を読み込み画面出力回路22に出力する。画面出力回路22では入力されたメモリ内容をアナログ信号に変換し、復号制御器24によって指定された順番に出力画面23に出力する。出力画面23には、例えば、横にM画面、縦にN画面表示する場合、左上から右に第kの出力チャネル画面、第k+1の出力チャネル画面、…、第(k+M−1)出力チャネル画面が表示される。また、左下から右には第{k+M(N−1)}の出力チャネル画面、…、第(k+MN−1)出力チャネル画面が表示される。
【0020】
入力選択器17の選択手順としては、以下のような選択方法が利用可能である。
(a) 選択方法1
(a-1) p+qがjよりも大きい場合、#1から#jまでのストリームをst1 からstj として出力する。
【0021】
(a-2) 出力画面制御器25で次画面出力が選択された場合、#j+1から#2jまでのストリームをst1 からstj として出力する。
(b) 選択方法2
(b-1) (p+q)個のストリームのうち出力画面制御器25で選択されたj個のストリームをst1 からstj として出力する。
【0022】
また、出力切替器21の選択順序としては以下のような選択方法が利用可能である。
(a) 選択方法1
ストリームファイル名順に選択する。
(b) 選択方法2
IPアドレスやポート番号などのストリームアドレス順に選択する。
(c) 選択方法3
符号化ビットレートの順に選択する。
【0023】
さらに、出力画面制御器25で以下のような制御により、再生画面数の変更が可能である。
(a) 変更方法1
(a-1) 複数の画面が同時に表示されている状態の時、ある画面が前記出力画面制御器25により選択された場合、他のストリームの復号器を停止させ、選択されたストリームの復号画面のみを出力画面23全体に表示する。
【0024】
(a-2) 1つのストリームのみが選択されて再生されている途中で出力画面制御器25で複数画面表示が選択された場合、現在再生中のストリームを出力切替器21で第k出力として出力画面23に出力する。前記出力画面制御器25で選択された複数画面は入力選択器17で選択し、該選択した複数ストリームに対して復号器を起動させ、出力切替器21の選択順序にそって出力された画像を第k+1出力を始点として、出力画面23に出力する。
(b) 変更方法2
出力画面制御器25で出力画面数が現在よりm個減少するように変更された場合、第k出力からm個減少した画面数分のみを出力画面23にて表示して、減少させたm個のストリームに対しては復号器を停止させる。
(c) 変更方法3
出力画面制御器25で出力画面数が現在よりm個増加するように変更された場合、現在復号中のストリームはそのまま継続する。復号制御器24によりm個のストリームを入力選択器17で新たに選択し、それらのストリームに対するm個の復号器を起動させる。復号された映像音声データは出力メモリ21のm個のメモリ空間に蓄積され、出力切替器21にて現在出力中の画面に続く出力順序に設定し、出力画面23にて画面出力を行う。
【0025】
以上の構成を有する本実施形態によれば、複数のストリームを復号して出力画面に表示する場合、あるいは既に表示しているストリームの数を変更(増減)する場合に、従来のように、複数のストリームの各ストリームの復号を個別に起動して、画面配列をその都度調整する必要がなくなる。すなわち、信号制御器24すなわちCPUからの指令により、各ストリームの復号を体系的に起動し、かつ画面配列を体系的に調整することができるようになり、複数のストリームの復号、表示を効率的にかつ簡単に行えるようになる。
【0026】
次に、本発明の第2の実施形態を、図2を参照して説明する。復号制御器24で指定されたストリームが、ネットワークで接続された第1のストリーム11から第pのストリーム12までの場合、該指定されたストリームはネットワーク13を介して入力選択器17に入力される。一方、該復号制御器24で指定されたストリームが、ネットワークを介さずにローカルで接続された第p+1のストリーム14から第p+qのストリーム15までの場合、該指定されたストリームは直接入力選択器17に入力される。
【0027】
入力選択器17では、入力されたストリームに対して復号制御器24で指定されたj個のストリームが選択され、ストリームst1 からストリームstj として出力される。出力されたストリームは以下のようにjの数に応じて復号器が決定されて復号器に入力される。
(a) j=1の場合
この場合には、復号制御器24によってストリームst1 が第11の復号器31に入力され、第11の復号器31が起動されて復号処理を行い第11の復号器31から出力された信号は出力メモリ20に入力される。出力メモリ20では復号制御器24によってメモリ空間#1を確保して、出力信号を該メモリ空間#1に蓄積する。
(b) j=2の場合、
この場合には、復号制御器24によってストリームst1 とストリームst2 がそれぞれ第21の復号器32と第22の復号器33に入力され、第21の復号器32と第22の復号器33が起動されて復号処理を行い各復号器から出力された信号は出力メモリ20に入力される。出力メモリ20では復号制御器24によって第21の復号器32と第22の復号器33に対してそれぞれメモリ空間#1とメモリ空間#2を確保して、出力信号をメモリ空間に蓄積する。
(c) j=nの場合、
この場合には、復号制御器24によってストリームst1 からストリームstn がそれぞれ第j1の復号器34から第jjの復号器36に入力され、第j1 の復号器34から第jjの復号器36が起動されて復号処理を行い、各復号器から出力された信号は出力メモリ20に入力される。出力メモリ20では、復号制御器24によって第j1の復号器34から第jjの復号器36に対してメモリ空間#1とメモリ空間#jが確保され、出力信号をメモリ空間#1〜#jに蓄積する。
【0028】
さらにjの数に応じて異なった処理量の復号器を起動させて復号処理を行うことにより、全体の復号処理量を変えることなく複数のストリームの復号処理を行うことが可能となる。
【0029】
復号器の処理量としては以下のような構成が可能である。
(a) j=1の場合、
復号器は通常の復号を行う。すなわち、音声と映像を復号器の最大の処理能力を用いて処理を行う。
(b) j=2の場合
各復号器はj=1の場合の復号処理(100%)に対して1/2の処理能力(50%)で復号を行う。例えば、映像の復号処理がj=1で復号処理全体のX11(>50)%の場合、図3のように映像の復号処理をX21=X22=(X11−50)%に削減することにより、第21、第22の復号器の処理量をそれぞれ元の復号処理量の1/2に削減することができる。たとえばX=80%の場合には、各復号器の映像の復号処理量を元の復号処理の30%にすることにより、全体の復号処理量を変えることなく2個の復号処理を同時に行うことが可能となる。処理の削減方法としては、復号フレーム数の削減や復号周波数成分の限定により実現することが可能である。なお、図3中の100−X11は音声データの処理量を示す。
(c) j=nの場合
各復号器はj=1の場合の復号処理(100%)に対して1/nの処理能力((100/n)%)で復号を行う。例えば、映像の復号処理がj=1で復号処理全体のX11%の場合、図3のように映像の復号処理をXj1=Xj2=…=Xjj=(X11−100+100/n)%に削減することにより、第j1、第j2、…、第jjの復号器の処理量を、それぞれ元の復号処理量の1/nに削減することができる。この削減により、全体の復号処理量を変えることなくj個の復号処理を同時に行うことが可能となる。
【0030】
また、例えば、映像の復号処理がj=1で復号処理全体の100%の場合、図4のように映像の復号処理のみに限定し、(100/n)%に削減することにより、各復号器の処理量を元の復号処理量の1/nに削減することができる。
【0031】
その後、出力切替器21では復号制御器24からの制御にしたがって、第kから第lまでの出力チャネルに接続するストリーム番号に該当するメモリ空間を選択し、出力メモリ20から該当のメモリ内容を読みこみ画面出力回路22に出力する。画面出力回路22では入力されたメモリ内容を復号制御器24に指定された順番に出力画面23に出力する。たとえば、横にM画面、縦にN画面表示する場合、左上から右に第kの出力チャネル画面、第k+1の出力チャネル画面、第(k+M−1)出力チャネル画面が表示される。また、左下から右には第{k+M(N−1)}の出力チャネル画面、…、第(k+MN−1)出力チャネル画面が表示される。
【0032】
このように、本実施形態によれば、1ストリームの再生処理にCPUの50%以上の処理量、例えば80%の処理量が必要であっても、1個のCPUで複数のストリームの再生処理を行うことができるようになる。換言すれば、全体の処理量を変えることなく、複数のストリームの再生処理が可能になる。
【0033】
次に、本発明の第3の実施形態を図2を用いて説明する。この実施形態では、復号制御器24で指定されたストリームが、ネットワーク13で接続された第1のストリーム11から第pのストリーム12までの場合、該指定されたストリームはネットワーク13を介して入力選択器17に入力される。一方、復号制御器24で指定されたストリームが、ネットワークを介さずにローカルで接続された第p+1のストリーム14から第p+qのストリーム15までの場合、該指定されたストリームは直接入力選択器17に入力される。
【0034】
入力選択器17では、入力されたストリームに対して復号制御器24で指定されたj個のストリームが選択され、ストリームst1 からストリームstj として出力される。出力されたストリームは、以下のようにjの数に応じて復号器が決定されて復号器に入力される。
(a) j=1、j=2の場合の復号器の決定および復号された信号を記憶する出力メモリ20のメモリ空間は、前記第2の実施形態と同様であるので、説明を省略する。
(b) j=nの場合、
この場合には、復号制御器24によってストリームst1 は第21の復号器32に入力され、残るストリームst2 からストリームstj までがそれぞれ第j2の復号器35から第jjの復号器36に入力され、前記第21の復号器32、第j2の復号器35から第jjの復号器36が起動されて復号処理を行い、各復号器から出力された信号は出力メモリ20に入力される。出力メモリ20では復号制御器24によって第21の復号器32に対してメモリ空間#1、第j2の復号器35から第jjの復号器36に対してメモリ空間#2からメモリ空間#jを確保して、出力信号をメモリ空間#1〜#jに蓄積する。
【0035】
さらにjの数に応じて異なった処理量の復号器を起動させて復号処理を行うことにより、全体の復号処理量を変えることなく複数の復号処理を行うことが可能となる。
【0036】
復号器の処理量としては、j=1の場合、j=2の場合は、前記第2の実施形態と同様である。すなわち、j=1の場合は復号器は通常の復号、つまり音声と映像を復号器の最大の処理能力を用いて処理を行う。j=2の場合は、各復号器はj=1の場合の復号処理に対して1/2の処理能力で復号を行う。
【0037】
一方、j=nの場合は、次の処理量とする。
【0038】
ストリームst1 は第21の復号器32に入力され、元の復号処理の1/2で復号される。残るストリームst2 からストリームstn はそれぞれ第j2の復号器35から第jjの復号器36に入力され、各復号器では図5のように元の復号処理の1/(2(j−1))で復号処理を行う。これにより、ストリームst1 は品質の高い復元を行い、他のストリームについてはより少ない処理量で復元して、重要なストリームst1 をより高い品質で復元することが可能となる。
【0039】
これを一般化するとストリームst1 を元の復号処理のX%で復号される場合、残るストリームst2 からストリームstn をそれぞれ図6のように元の復号処理の(100−X)/(j−1)%で復号処理を行うことにより、ストリームst1 は品質の高い復元を行い、他のストリームについてはより少ない処理量で復元して重要なストリームst1 をより高い品質で復元することが可能となる。しかも、前記復号手段の復号処理量の合計は、1つの動画像データの最大信号処理量(100%)を越えないようにすることができる。
【0040】
出力切替器21では復号制御器24からの制御にしたがって、第kから第lまでの出力チャネルに接続するストリーム番号に該当するメモリ空間を選択し、出力メモリ20から該当のメモリ内容を読みこみ画面出力回路22に出力する。画面出力回路22では入力されたメモリ内容を復号制御器に指定された順番に出力画面23に画面を出力する。たとえば、横にM画面、縦にN画面表示する場合、左上から右に第kの出力チャネル画面、第k+1の出力チャネル画面、、第(k+M−1)出力チャネル画面が表示される。また、左下から右には第{k+M(n−1)}の出力チャネル画面、…、第(k+MN−1)出力チャネル画面が表示される。
【0041】
この実施形態によれば、全体の処理量を変えることなく複数のストリームの再生処理が行え、かつ特定のストリームには品質の高い再生が可能になる。
【0042】
図7は本発明の第4実施形態の要部のブロック図である。画面出力回路31は、図1、図2の画面出力回路22と置換されるものである。画面出力回路31は、拡大縮小処理部31aと画面出力部31bから構成される。
【0043】
本実施形態では、復号制御器24から出力解像度が指定されると、拡大縮小処理部31aは出力メモリ20から出力切替器21を経て入力される画像に対して前記指定された出力解像度に変換する。例えば、入力された画像の解像度が320画素×240ラインで、指定された出力解像度が640画素×480ラインの場合には、横および縦方向に2倍の拡大処理を行う。拡大処理の方法としては、例えば元の画像をコピーして補間する方法や、元の画素間の平均値を補間する方法を用いることができる。
【0044】
次に、前記第1〜4実施形態で説明した複数ストリームの再生機能はソフトウェア(プログラム)で実現でき、該ソフトウェアは、光ディスク、フロッピディスク、ハードディスクなどの可般型記録媒体に記録することができる。また、コンピュータなどのハードディスクなどのメモリ中に予め入れておいても、また該コンピュータが接続されたネットワークから該コンピュータのハードディスクなどのメモリ中に取込むようにしても良い。
【0045】
図8は、前記記録媒体に記憶させる複数ストリームの再生機能の概念図であり、本発明の実施形態では、ストリーム選択機能、入力選択機能、復号機能、メモリ機能、出力切替機能、画面出力機能(または、拡大縮小画面出力機能)、および出力画面制御機能を記憶させることができる。
【0046】
図9は、前記可般型記録媒体あるいはハードディスクなどの記録媒体に記録されたプログラムを読み取って、前記ストリームの再生機能を実行するコンピュータのハード構成を示すブロック図である。該コンピュータ100は、前記した複数ストリームの再生プログラムが記録された記録媒体110と、該記録媒体110から再生プログラムを読取る読取装置111と、該再生プログラムを実行するCPU112と、各種のデータを記憶するROM113と、演算パラメータなどを記憶するRAM114と、キーボード、マウスなどの入力装置115と、ディスプレー、プリンタなどの出力装置116と、ネットワークなどと接続される入出力インタフェース117などから構成されている。
【0047】
CPU112は、読取装置111を経由して記録媒体110に記録されている複数ストリームの再生プログラムを実行することにより、前記第1〜4実施形態の再生処理を実行する。
【0048】
【発明の効果】
以上のように、本発明によれば、再生する動画像データストリームを複数個選択し、これらを並列的に復号し、同時に表示手段に表示する動作を体系的に行うようにしたので、従来装置のように、複数の動画像データの各ストリームの復号を個別に起動したり、出力画面に映出する画面配列をその都度調整したりする必要がなくなり、従来よりも効率的にかつ簡単に再生することが可能となる。
【0049】
また、同時再生するストリーム数に応じて復号器の処理負荷を変化させるようにしたので、全体の処理量を変えることなく、複数のストリームの再生処理が可能になる。
【0050】
また、復号する動画像データごとに異なった処理量の復号手段を用いるようにしたので、重要なストリームのみを高品質に再生し、他のストリームを低品質で再生できるようになる。
【0051】
また、出力画面制御手段の制御手順によって画面出力を行うようにしたので、再生された複数のストリームの表示の画面配列をその都度調整する必要がなくなり、操作性が向上する。
【0052】
また、複数の動画像データのストリームを従来よりも効率的に再生することができるプログラムを記録したコンピュータ読取り可能な記録媒体を提供することができるようになる。
【図面の簡単な説明】
【図1】 本発明の第1実施形態の構成を示すブロック図である。
【図2】 本発明の第2、3実施形態の構成を示すブロック図である。
【図3】 第2実施形態の復号器の処理量の一例を示す図である。
【図4】 第2実施形態の復号器の処理量の他の例を示す図である。
【図5】 第3実施形態の復号器の処理量の一例を示す図である。
【図6】 第3実施形態の復号器の処理量の他の例を示す図である。
【図7】 本発明の第4実施形態の要部の構成を示すブロック図である。
【図8】 記録媒体に記録されたプログラムの概要を示す図である。
【図9】 本発明の記録媒体に記録された再生プログラムを実行するコンピュータの構成を示すブロック図である。
【図10】 従来の構成例を示すブロック図である。
【図11】 再生されるストリームが、符号済みの映像ファイルの場合とライブ映像の場合のストリーム送出装置を示すブロック図である。
【符号の説明】
11〜12…第1〜第pストリーム、13…ネットワーク、14〜15…第p+1〜第p+qストリーム、17…入力選択器、18〜19…第1〜第j復号器、20…出力メモリ、21…出力切替器、22…画面出力回路、23…出力画面、24…復号制御器、25…出力画面制御器、100…コンピュータ、110…記録媒体。
[0001]
BACKGROUND OF THE INVENTION
The present invention relates to an encoded moving image data reproduction device and a storage medium thereof, and more particularly to an encoded moving image data reproduction device and a storage medium thereof capable of efficiently reproducing a plurality of moving image data streams (hereinafter abbreviated as streams). About.
[0002]
[Prior art]
A conventional encoded moving image data reproducing apparatus will be described with reference to FIGS. FIG. 10 is a block diagram showing the configuration of a conventional encoded video / audio data reproducing device, FIG. 11 (a) is a block diagram showing an example of a coded stream supply device, and FIG. 10 (b) is a live video stream supply. It is a block diagram which shows an example of an apparatus.
[0003]
As shown in FIG. 10, in the conventional encoded moving image / audio data reproducing apparatus, the stream designated by the decoding controller 56 is changed from the first stream 11 to the pth stream 12 connected by the network. In the case of any one of the above, the designated stream is input to the input selector 51 via the network 13.
[0004]
For example, when the designated stream is an encoded video file, it is stored in the storage device 61 from the video data controller 62 according to the stream address designated by the decoding controller 56 as shown in FIG. The video data is read out and sent to the network 13 through the stream transmitter 63. On the other hand, when the designated stream is a live video, the video input from the camera 64 is encoded in real time by the live encoder 65 as shown in FIG. Is sent out.
[0005]
If the stream designated by the decoding controller 56 is any one of the (p + 1) th stream 14 to the p + qth stream 15 connected locally without going through the network 13, the designated stream Is directly input to the input selector 51. For example, if the p + 1-th stream 14 is an encoded video file, the stream is input to the input selector 51 as shown in FIG. 11A, whereas if it is a live video, the stream is input to the input selector 51 as shown in FIG. Sent out.
[0006]
In the input selector 51, the stream designated by the decoding controller 56 is selected for the input stream and is input to the first decoder 52 as the stream st1. The first decoder 52 is activated by the decoding controller 56 and the decoding operation is started. The signal output from the first decoder 52 is input to the output memory 53. In the output memory 53, the memory space # 1 corresponding to the output from the first decoder 52 is secured by the decoding controller 56, and the output signal is stored in the memory space # 1.
[0007]
The screen output circuit 54 reads the data stored in the memory space # 1 from the output memory 53 and outputs it to the screen output circuit 54 according to the control from the decoding controller 56. The screen output circuit 54 outputs the input memory contents to the output screen 55.
[0008]
[Problems to be solved by the invention]
When a plurality of videos are simultaneously reproduced using the above-described conventional encoded moving image / audio data reproducing apparatus, a plurality of configurations as shown in FIG. 10 are activated to output a plurality of screens. As an example, consider a case where a decryption process is performed by software using a CPU of a personal computer. For example, when a processing amount of 80% of the CPU is required to decode one stream, one stream can be reproduced, but a plurality of streams cannot be reproduced simultaneously. Also, for example, if the CPU load is less than 100% even when the decoding of a plurality of streams is started simultaneously, the decoding of each stream is started individually, and the screen arrangement displayed on the output screen 55 is changed each time. There was a problem that it was necessary to adjust.
[0009]
An object of the present invention is to solve the above-described problems of the prior art and provide an encoded moving image data reproducing apparatus and a storage medium thereof capable of efficiently decoding a plurality of streams simultaneously.
[0010]
[Means for Solving the Problems]
In order to achieve the above object, the present invention provides an encoded moving image data reproducing apparatus for decoding compressed and encoded moving image data stored in a storage device existing on a network, wherein one piece of input moving image data or A plurality of input data selecting means, a plurality of decoding means having different amounts of processing, wherein the amount of processing for decoding is determined in advance according to the number of the selected moving image data, and the decoding means Storage means having a plurality of storage areas for storing the decoded moving image data, and decoded data selection means for selecting one or more moving image data in accordance with the number of moving image data stored in the storage means; Display means for simultaneously displaying one or more moving image data selected by the decoded data selecting means, the decoding means depending on the number of moving image data to be decoded Decoding means with different processing amount without changing the entire decoding processing amount The first feature is that the adaptive selection is performed. According to this feature, it is possible to systematically and efficiently reproduce a plurality of moving image data streams.
[0011]
In the present invention, the decoding means is a decoding means having a smaller processing amount as the number of moving image data to be decoded increases. choose There is a second feature in the point made to do. According to this feature, a plurality of streams can be played back without changing the overall processing amount.
[0012]
Further, the present invention has a third feature in that the decoding means uses decoding means to which a specific processing amount is assigned for each moving image data to be decoded. According to this feature, a plurality of streams can be played back without changing the overall processing amount, and a specific stream can be played back with high quality.
[0013]
In addition, the present invention has a fourth feature in that output screen control means for controlling the screen to be output is provided, and screen output is performed by a control procedure of the output screen control means. According to this feature, it is not necessary to adjust the display screen arrangement of a plurality of reproduced streams each time, and the operability is improved.
[0014]
Further, the present invention provides a function for selecting a plurality of streams to be reproduced, a function for decoding the selected plurality of streams, a function for storing the decoded data in a predetermined memory location, It is a computer-readable recording medium having a function for outputting the read data to the screen and a function for controlling the screen position from which the data is output. There are 5 features. According to this feature, it is possible to provide a computer-readable recording medium that can efficiently reproduce a plurality of streams.
[0015]
DETAILED DESCRIPTION OF THE INVENTION
Hereinafter, the present invention will be described in detail with reference to the drawings. FIG. 1 is a block diagram showing a configuration of an encoded moving image / audio data reproducing apparatus according to an embodiment of the present invention.
[0016]
When the stream designated by the decoding controller 24 is from the first stream 11 connected to the network 13 to the p-th stream 12, the designated stream is inputted to the input selector 17 via the network 13. The On the other hand, when the streams designated by the decoding controller 24 are from the (p + 1) th stream 14 to the (p + q) th stream 15 connected locally without going through the network, the designated stream is the direct input selector 17. Is input.
[0017]
If the designated stream is an encoded video file, the input selection is performed as shown in FIG. 11 (a). If the designated stream is a live video, the input selection is performed as shown in FIG. 11 (b). The supply to the container 17 is the same as in the prior art. The same applies to other embodiments described below.
[0018]
In the input selector 17, j streams designated by the decoding controller 24 are selected from the input streams, and from the first decoder 18 to the jth decoder 19 as the streams st1 to stj, respectively. Entered. The first decoder 18 to the jth decoder 19 are activated by the decoding controller 24 to start the decoding operation. The signals output from the first to jth decoders 18 to 19 are input to the output memory 20. In the output memory 20, the memory space # 1 to the memory space #j corresponding to the outputs from the first decoder 18 to the j-th decoder 19 are secured by the decoding controller 24, and each output signal is assigned to the corresponding memory. Accumulate in spaces # 1 to #j.
[0019]
The output switch 21 selects the memory space corresponding to the stream number connected to the kth to lth output channels according to the control from the decoding controller 24, reads the corresponding memory contents from the output memory 20, and outputs the screen. Output to the circuit 22. The screen output circuit 22 converts the input memory contents into an analog signal and outputs it to the output screen 23 in the order specified by the decoding controller 24. For example, when the M screen is displayed horizontally and the N screen is displayed vertically, the output screen 23 is the kth output channel screen from the upper left to the right, the k + 1th output channel screen,..., The (k + M−1) th output channel screen. Is displayed. From the lower left to the right, the {k + M (N−1)} output channel screen,..., The (k + MN−1) th output channel screen are displayed.
[0020]
As a selection procedure of the input selector 17, the following selection methods can be used.
(a) Selection method 1
(a-1) When p + q is larger than j, the streams from # 1 to #j are output as st1 to stj.
[0021]
(a-2) When the next screen output is selected by the output screen controller 25, the streams from # j + 1 to # 2j are output as st1 to stj.
(b) Selection method 2
(b-1) Out of (p + q) streams, j streams selected by the output screen controller 25 are output as st1 to stj.
[0022]
Further, as the selection order of the output switching device 21, the following selection methods can be used.
(a) Selection method 1
Select in order of stream file name.
(b) Selection method 2
Select in order of stream address such as IP address and port number.
(c) Selection method 3
Select in order of coding bit rate.
[0023]
Further, the number of playback screens can be changed by the following control by the output screen controller 25.
(a) Change method 1
(a-1) When a plurality of screens are displayed at the same time, when a certain screen is selected by the output screen controller 25, the decoder of the other stream is stopped and the decoding screen of the selected stream Are displayed on the entire output screen 23.
[0024]
(a-2) When multiple screen display is selected by the output screen controller 25 while only one stream is being selected and played back, the currently playing stream is output as the k-th output by the output switch 21 Output to the screen 23. A plurality of screens selected by the output screen controller 25 are selected by the input selector 17, a decoder is activated for the selected plurality of streams, and images output in accordance with the selection order of the output switch 21 are displayed. The output is output to the output screen 23, starting from the (k + 1) th output.
(b) Change method 2
When the output screen controller 25 is changed so that the number of output screens is reduced by m from the present, only the number of screens that have been reduced by m from the k-th output is displayed on the output screen 23, and the reduced number m The decoder is stopped for the other stream.
(c) Change method 3
When the output screen controller 25 changes the number of output screens so that it increases by m, the stream currently being decoded continues as it is. The decoding controller 24 newly selects m streams by the input selector 17 and activates m decoders for these streams. The decoded video / audio data is accumulated in m memory spaces of the output memory 21, set in the output order following the screen currently being output by the output switch 21, and screen output is performed on the output screen 23.
[0025]
According to the present embodiment having the above configuration, when a plurality of streams are decoded and displayed on the output screen, or when the number of already displayed streams is changed (increase / decrease), a plurality of streams are conventionally used. It is no longer necessary to individually activate the decoding of each stream and adjust the screen layout each time. That is, it becomes possible to systematically start decoding of each stream and systematically adjust the screen arrangement in accordance with a command from the signal controller 24, that is, the CPU, and efficiently decode and display a plurality of streams. It becomes easy and easy to do.
[0026]
Next, a second embodiment of the present invention will be described with reference to FIG. When the stream designated by the decoding controller 24 is from the first stream 11 to the p-th stream 12 connected via the network, the designated stream is input to the input selector 17 via the network 13. . On the other hand, when the streams designated by the decoding controller 24 are from the (p + 1) th stream 14 to the (p + q) th stream 15 connected locally without going through the network, the designated stream is the direct input selector 17. Is input.
[0027]
In the input selector 17, j streams designated by the decoding controller 24 are selected from the input streams, and output from the streams st1 to stj. In the output stream, a decoder is determined according to the number j and input to the decoder as follows.
(a) When j = 1
In this case, the stream st1 is input to the eleventh decoder 31 by the decoding controller 24, the eleventh decoder 31 is activated to perform the decoding process, and the signal output from the eleventh decoder 31 is output. Input to the memory 20. In the output memory 20, the decoding controller 24 secures the memory space # 1 and stores the output signal in the memory space # 1.
(b) When j = 2
In this case, the decoding controller 24 inputs the stream st1 and the stream st2 to the twenty-first decoder 32 and the twenty-second decoder 33, respectively, and activates the twenty-first decoder 32 and the twenty-second decoder 33. Then, the decoding process is performed, and the signal output from each decoder is input to the output memory 20. In the output memory 20, the decoding controller 24 secures the memory space # 1 and the memory space # 2 for the twenty-first decoder 32 and the twenty-second decoder 33, respectively, and stores the output signal in the memory space.
(c) If j = n,
In this case, the decoding controller 24 inputs the streams st1 to stn to the jj decoder 36 from the j1 decoder 34, respectively, and the jj decoder 36 is activated from the j1 decoder 34. The signal output from each decoder is input to the output memory 20. In the output memory 20, the decoding controller 24 secures the memory space # 1 and the memory space #j from the j1 decoder 34 to the jj decoder 36, and the output signals are transferred to the memory spaces # 1 to #j. accumulate.
[0028]
Furthermore, it is possible to perform decoding processing of a plurality of streams without changing the overall decoding processing amount by activating decoders having different processing amounts according to the number of j and performing decoding processing.
[0029]
As the processing amount of the decoder, the following configuration is possible.
(a) When j = 1
The decoder performs normal decoding. That is, audio and video are processed using the maximum processing capability of the decoder.
(b) When j = 2
Each decoder performs decoding with half the processing capacity (50%) with respect to the decoding process (100%) when j = 1. For example, when the video decoding process is j = 1 and X11 (> 50)% of the entire decoding process, the video decoding process is reduced to X21 = X22 = (X11-50)% as shown in FIG. The throughput of the 21st and 22nd decoders can be reduced to 1/2 of the original decoding throughput. For example, when X = 80%, the decoding processing amount of video of each decoder is set to 30% of the original decoding processing, so that two decoding processes can be performed simultaneously without changing the entire decoding processing amount. Is possible. The processing reduction method can be realized by reducing the number of decoded frames or limiting the decoding frequency components. Note that 100-X11 in FIG. 3 indicates the processing amount of audio data.
(c) When j = n
Each decoder performs decoding with a processing capacity of 1 / n ((100 / n)%) with respect to the decoding process (100%) when j = 1. For example, when the video decoding process is j = 1 and X11% of the entire decoding process, the video decoding process is reduced to Xj1 = Xj2 =... = Xjj = (X11-100 + 100 / n)% as shown in FIG. Thus, the processing amount of the j1, j2,..., Jj decoders can be reduced to 1 / n of the original decoding processing amount. This reduction makes it possible to simultaneously perform j decoding processes without changing the entire decoding processing amount.
[0030]
Also, for example, when the video decoding process is j = 1 and 100% of the entire decoding process, the video decoding process is limited to only the video decoding process as shown in FIG. 4, and each decoding is reduced to (100 / n)%. The processing amount of the device can be reduced to 1 / n of the original decoding processing amount.
[0031]
Thereafter, the output switch 21 selects a memory space corresponding to the stream number connected to the kth to lth output channels according to the control from the decoding controller 24, and reads the corresponding memory contents from the output memory 20. This is output to the garbage screen output circuit 22. The screen output circuit 22 outputs the input memory contents to the output screen 23 in the order specified by the decoding controller 24. For example, when displaying M screens horizontally and N screens vertically, the kth output channel screen, the (k + 1) th output channel screen, and the (k + M−1) th output channel screen are displayed from the upper left to the right. From the lower left to the right, the {k + M (N−1)} output channel screen,..., The (k + MN−1) th output channel screen are displayed.
[0032]
As described above, according to the present embodiment, even if a processing amount of 50% or more of the CPU, for example, 80%, is required for the playback processing of one stream, the playback processing of a plurality of streams is performed by one CPU. Will be able to do. In other words, a plurality of streams can be played back without changing the overall processing amount.
[0033]
Next, a third embodiment of the present invention will be described with reference to FIG. In this embodiment, when the stream designated by the decoding controller 24 is from the first stream 11 connected to the network 13 to the p-th stream 12, the designated stream is selected via the network 13. Is input to the device 17. On the other hand, when the stream designated by the decoding controller 24 is from the (p + 1) th stream 14 to the (p + q) stream 15 connected locally without going through the network, the designated stream is sent to the direct input selector 17. Entered.
[0034]
In the input selector 17, j streams designated by the decoding controller 24 are selected from the input streams, and output from the streams st1 to stj. For the output stream, the decoder is determined according to the number j and input to the decoder as follows.
(a) The determination of the decoder in the case of j = 1 and j = 2, and the memory space of the output memory 20 for storing the decoded signal are the same as those in the second embodiment, and thus the description thereof is omitted.
(b) If j = n,
In this case, the stream controller 1 inputs the stream st1 to the 21st decoder 32, and the remaining streams st2 to stj are input from the j2 decoder 35 to the jj decoder 36, respectively. The 21st decoder 32 and the j2th decoder 35 to the jjth decoder 36 are activated to perform a decoding process, and the signal output from each decoder is input to the output memory 20. In the output memory 20, the decoding controller 24 secures the memory space # 1 for the 21st decoder 32 and the memory space # 2 from the memory space # 2 for the j2 decoder 35 to the jj decoder 36. Then, the output signals are stored in the memory spaces # 1 to #j.
[0035]
Furthermore, a plurality of decoding processes can be performed without changing the entire decoding process amount by activating decoders having different processing amounts depending on the number of j and performing the decoding process.
[0036]
The processing amount of the decoder is the same as in the second embodiment when j = 1 and when j = 2. That is, when j = 1, the decoder performs normal decoding, that is, processes audio and video using the maximum processing capability of the decoder. In the case of j = 2, each decoder performs decoding with half the processing capacity of the decoding process in the case of j = 1.
[0037]
On the other hand, when j = n, the next processing amount is set.
[0038]
The stream st1 is input to the 21st decoder 32 and decoded by 1/2 of the original decoding process. The remaining streams st2 to stn are respectively input from the j2th decoder 35 to the jjth decoder 36, and each decoder 1 / (2 (j-1)) of the original decoding process as shown in FIG. Perform decryption. As a result, the stream st1 is restored with high quality, the other streams are restored with a smaller processing amount, and the important stream st1 can be restored with higher quality.
[0039]
To generalize this, when stream st1 is decoded by X% of the original decoding process, the remaining streams st2 to stn are respectively (100-X) / (j-1) of the original decoding process as shown in FIG. By performing the decoding process at%, the stream st1 can be restored with high quality, and the other streams can be restored with a smaller processing amount and the important stream st1 can be restored with higher quality. Moreover, the total decoding processing amount of the decoding means can be prevented from exceeding the maximum signal processing amount (100%) of one moving image data.
[0040]
The output switch 21 selects a memory space corresponding to the stream number connected to the kth to lth output channels according to the control from the decoding controller 24, and reads the corresponding memory contents from the output memory 20. Output to the output circuit 22. The screen output circuit 22 outputs the input memory contents to the output screen 23 in the order specified by the decoding controller. For example, when M screens are displayed horizontally and N screens are displayed vertically, the kth output channel screen, the (k + 1) th output channel screen, and the (k + M−1) th output channel screen are displayed from the upper left to the right. Further, from the lower left to the right, {k + M (n−1)} output channel screens,..., (K + MN−1) output channel screens are displayed.
[0041]
According to this embodiment, a plurality of streams can be played back without changing the overall processing amount, and a specific stream can be played back with high quality.
[0042]
FIG. 7 is a block diagram of an essential part of the fourth embodiment of the present invention. The screen output circuit 31 replaces the screen output circuit 22 shown in FIGS. The screen output circuit 31 includes an enlargement / reduction processing unit 31a and a screen output unit 31b.
[0043]
In the present embodiment, when an output resolution is specified from the decoding controller 24, the enlargement / reduction processing unit 31a converts the image input from the output memory 20 via the output switch 21 to the specified output resolution. . For example, when the resolution of the input image is 320 pixels × 240 lines and the designated output resolution is 640 pixels × 480 lines, the enlargement process is performed twice in the horizontal and vertical directions. As an enlargement processing method, for example, a method of copying and interpolating an original image, or a method of interpolating an average value between original pixels can be used.
[0044]
Next, the multiple stream playback function described in the first to fourth embodiments can be realized by software (program), and the software can be recorded on a general-purpose recording medium such as an optical disk, a floppy disk, or a hard disk. . Alternatively, it may be previously stored in a memory such as a hard disk of a computer, or may be taken into a memory such as a hard disk of the computer from a network to which the computer is connected.
[0045]
FIG. 8 is a conceptual diagram of a reproduction function of a plurality of streams stored in the recording medium. In the embodiment of the present invention, a stream selection function, an input selection function, a decoding function, a memory function, an output switching function, a screen output function ( Alternatively, an enlargement / reduction screen output function) and an output screen control function can be stored.
[0046]
FIG. 9 is a block diagram illustrating a hardware configuration of a computer that reads a program recorded on a recording medium such as the general-purpose recording medium or a hard disk and executes the playback function of the stream. The computer 100 stores various data such as a recording medium 110 on which a plurality of streams of reproduction programs are recorded, a reading device 111 that reads the reproduction programs from the recording medium 110, a CPU 112 that executes the reproduction programs, and the like. It includes a ROM 113, a RAM 114 for storing calculation parameters, an input device 115 such as a keyboard and a mouse, an output device 116 such as a display and a printer, an input / output interface 117 connected to a network and the like.
[0047]
The CPU 112 executes the reproduction process of the first to fourth embodiments by executing a reproduction program of a plurality of streams recorded on the recording medium 110 via the reading device 111.
[0048]
【The invention's effect】
As described above, according to the present invention, a plurality of moving image data streams to be reproduced are selected, decoded in parallel, and simultaneously displayed on the display means. This eliminates the need to individually start decoding each stream of multiple video data and adjust the screen layout displayed on the output screen each time, making playback more efficient and easier than before. It becomes possible to do.
[0049]
In addition, since the processing load of the decoder is changed according to the number of streams to be reproduced simultaneously, it is possible to reproduce a plurality of streams without changing the overall processing amount.
[0050]
In addition, since the decoding means having a different processing amount is used for each moving image data to be decoded, only important streams can be reproduced with high quality and other streams can be reproduced with low quality.
[0051]
Further, since the screen output is performed according to the control procedure of the output screen control means, it is not necessary to adjust the display screen arrangement of the plurality of reproduced streams each time, and the operability is improved.
[0052]
In addition, it is possible to provide a computer-readable recording medium on which a program capable of reproducing a plurality of moving image data streams more efficiently than before can be recorded.
[Brief description of the drawings]
FIG. 1 is a block diagram showing a configuration of a first embodiment of the present invention.
FIG. 2 is a block diagram showing a configuration of second and third embodiments of the present invention.
FIG. 3 is a diagram illustrating an example of a processing amount of a decoder according to a second embodiment.
FIG. 4 is a diagram illustrating another example of the processing amount of the decoder according to the second embodiment.
FIG. 5 is a diagram illustrating an example of a processing amount of a decoder according to a third embodiment.
FIG. 6 is a diagram illustrating another example of the processing amount of the decoder according to the third embodiment.
FIG. 7 is a block diagram showing a configuration of a main part of a fourth embodiment of the present invention.
FIG. 8 is a diagram showing an outline of a program recorded on a recording medium.
FIG. 9 is a block diagram showing a configuration of a computer that executes a reproduction program recorded on a recording medium of the present invention.
FIG. 10 is a block diagram illustrating a conventional configuration example.
FIG. 11 is a block diagram showing a stream transmission device when a stream to be played is an encoded video file and a live video.
[Explanation of symbols]
11-12: 1st to pth stream, 13: network, 14-15: p + 1 to p + q stream, 17: input selector, 18-19: 1st to jth decoder, 20: output memory, 21 DESCRIPTION OF SYMBOLS ... Output switcher, 22 ... Screen output circuit, 23 ... Output screen, 24 ... Decoding controller, 25 ... Output screen controller, 100 ... Computer, 110 ... Recording medium.

Claims (15)

ネットワーク上に存在する蓄積装置に蓄積された圧縮符号化動画像データを復号する符号化動画像データ再生装置において、
入力する動画像データを1個または複数個選択する入力データ選択手段と、
該選択される動画像データの個数に応じて復号するための処理量が予め決められている、異なる処理量を有する複数の復号手段と、
該復号手段で復号された各動画像データを蓄積する複数の蓄積領域を有する蓄積手段と、
該蓄積手段に蓄積された動画像データ数に応じて、1または複数の動画像データを選択する復号データ選択手段と、
該復号データ選択手段で選択された動画像データを、1個または複数個同時に表示する表示手段とを具備し、
前記復号手段は、復号する動画像データ数に応じて、異なった処理量の復号手段を全体の復号処理量を変えることなく適応的に選択されることを特徴とする符号化動画像データ再生装置。
In an encoded moving image data reproducing device for decoding compressed encoded moving image data stored in a storage device existing on a network,
Input data selection means for selecting one or more moving image data to be input;
A plurality of decoding means having different processing amounts, wherein a processing amount for decoding is determined in advance according to the number of the selected moving image data;
Storage means having a plurality of storage areas for storing the moving image data decoded by the decoding means;
Decoded data selecting means for selecting one or a plurality of moving image data according to the number of moving image data stored in the storage means;
Display means for simultaneously displaying one or a plurality of moving image data selected by the decoded data selection means,
According to the number of moving image data to be decoded, the decoding unit adaptively selects a decoding unit having a different processing amount without changing the entire decoding processing amount. .
請求項1に記された符号化動画像データ再生装置において、
前記復号手段は、復号する動画像データ数が多くなるに従い処理量の少ない復号手段を選択されることを特徴とする符号化動画像データ再生装置。
In the encoded moving image data reproducing device according to claim 1,
The encoded moving image data reproducing apparatus, wherein the decoding unit selects a decoding unit having a smaller processing amount as the number of moving image data to be decoded increases.
請求項2に記された符号化動画像データ再生装置において、
前記復号手段は、n個(ただし、nは2以上の整数)の動画像データを再生する場合、1つの動画像データの最大復号処理量の1/nの処理量で各動画像データを復号することを特徴とする符号化動画像データ再生装置。
In the encoded moving image data reproducing device according to claim 2,
The decoding means decodes each moving image data with a processing amount of 1 / n of the maximum decoding processing amount of one moving image data when reproducing n moving image data (where n is an integer of 2 or more). An encoded moving image data reproducing apparatus characterized by:
請求項1に記された符号化動画像データ再生装置において、
前記復号手段は、復号する動画像データごとに特定の処理量を割当てた復号手段を用いることを特徴とする符号化動画像データ再生装置。
In the encoded moving image data reproducing device according to claim 1,
The encoded moving image data reproducing apparatus, wherein the decoding means uses decoding means to which a specific processing amount is assigned for each moving image data to be decoded.
請求項4に記された符号化動画像データ再生装置において、
前記復号する動画像データごとに特定の処理量を割当てられた復号手段の復号処理量の合計が、1つの動画像データを復号する場合の復号処理量である最大信号処理量を越えないようにすることを特徴とする符号化動画像データ再生装置。
In the encoded moving image data reproducing device according to claim 4,
The total decoding processing amount of the decoding means assigned with a specific processing amount for each moving image data to be decoded does not exceed the maximum signal processing amount that is the decoding processing amount when decoding one moving image data. An encoded moving image data reproducing apparatus characterized by:
請求項4または5に記された符号化動画像データ再生装置において、
特定の符号化動画像データに、他の符号化動画像データに比べて多くの復号処理量を割当て、該特定の符号化動画像データをより高い品質で復元するようにしたことを特徴とする符号化動画像データ再生装置。
In the encoded moving image data reproducing device according to claim 4 or 5,
A larger amount of decoding processing is assigned to specific encoded video data than other encoded video data, and the specific encoded video data is restored with higher quality. Encoded moving image data reproduction device.
請求項4に記された符号化動画像データ再生装置において、
該復号手段は、ある1つの符号化動画像を1つの動画像データの最大復号処理量のX%で復号し、他の(n−1)個の動画像データについては該1つの動画像データの最大復号処理量の(100−X)/(n−1)%の処理量で各動画像データを復号することを特徴とする符号化動画像データ再生装置。
In the encoded moving image data reproducing device according to claim 4,
The decoding means decodes one encoded moving image with X% of the maximum decoding processing amount of one moving image data, and the other moving image data is the one moving image data. An encoded moving image data reproducing apparatus, wherein each moving image data is decoded at a processing amount of (100−X) / (n−1)% of the maximum decoding processing amount.
請求項1ないし7のいずれかに記された符号化動画像データ再生装置において、
出力する画面を制御する出力画面制御手段を有し、該出力画面制御手段の制御手順によって画面出力を行うことを特徴とする符号化動画像データ再生装置。
In the encoded moving image data reproducing device according to any one of claims 1 to 7,
An encoded moving image data reproducing apparatus comprising output screen control means for controlling a screen to be output, and performing screen output according to a control procedure of the output screen control means.
請求項8に記された符号化動画像データ再生装置において、
前記制御手順は、動画像データが蓄積されたIPアドレス、ポート番号、ファイル名、および符号化ビットレートのいずれかの順に画面出力するエリアを決定することを特徴とする符号化動画像データ再生装置。
In the encoded moving image data reproducing device according to claim 8,
The control procedure determines an area for screen output in the order of any one of an IP address, a port number, a file name, and an encoding bit rate in which the moving image data is stored. .
請求項8または9に記された符号化動画像データ再生装置において、
複数の画面が同時に表示されている状態で、特定の画面が前記出力画面制御手段により選択された場合に、該画面以外のストリームの復号を停止し、該画面のみを画面出力することを特徴とする符号化動画像データ再生装置。
In the encoded moving image data reproducing device according to claim 8 or 9,
When a specific screen is selected by the output screen control means while a plurality of screens are displayed at the same time, decoding of a stream other than the screen is stopped and only the screen is output to the screen. An encoded moving image data reproducing apparatus.
請求項8または9に記された符号化動画像データ再生装置において、
複数の画面が同時に表示されている状態で、前記出力画面制御手段によりm個のストリームが削減された場合に、該m個(ただし、mは正の整数)のストリームの復号を停止させ、削減されたストリームに対応する画面を画面出力制御手順にしたがって削減して画面出力を行うことを特徴とする符号化動画像データ再生装置。
In the encoded moving image data reproducing device according to claim 8 or 9,
When m streams are reduced by the output screen control means while a plurality of screens are displayed at the same time, decoding of the m streams (where m is a positive integer) is stopped and reduced. An encoded moving image data reproducing apparatus, wherein screen output is performed by reducing a screen corresponding to the stream thus produced according to a screen output control procedure.
請求項8または9に記された符号化動画像データ再生装置において、
複数の画面が同時に表示されている状態で、前記出力画面制御手段によりm個のストリームが追加された場合に、m個のストリームの復号を起動させ、追加されたストリームの復号後の画面を画面出力制御手順にしたがって追加して画面出力を行うことを特徴とする符号化動画像データ再生装置。
In the encoded moving image data reproducing device according to claim 8 or 9,
When m streams are added by the output screen control means while a plurality of screens are displayed at the same time, the decoding of the m streams is started, and the screen after the decoding of the added streams is displayed. An encoded moving image data reproducing apparatus, wherein screen output is performed in accordance with an output control procedure.
請求項1に記された符号化動画像データ再生装置において、
さらに、画像を指定された解像度に変換する手段を有し、前記復号データ選択手段によって選択された復号データを指定された解像度に変換して、前記表示手段に出力するようにしたことを特徴とする符号化動画像データ再生装置。
In the encoded moving image data reproducing device according to claim 1,
And a means for converting the image to a designated resolution, wherein the decoded data selected by the decoded data selection means is converted to a designated resolution and output to the display means. An encoded moving image data reproducing apparatus.
請求項1ないし13のいずれかに記載の符号化動画像データ再生装置において、
前記動画像データは、動画像音声データであることを特徴とする符号化動画像データ再生装置。
In the encoded moving image data reproducing device according to any one of claims 1 to 13,
The encoded moving image data reproducing apparatus, wherein the moving image data is moving image audio data.
コンピュータを、
再生する複数のストリームを選択する機能と、
該選択される動画像データの個数に応じて復号するための処理量が予め決められている、複数の復号能力で復号する機能と、
該復号したデータを予め定められたメモリ位置に記憶させる機能と、
該メモリ位置から読み出されたデータを画面に出力する機能と、
該データが出力される画面位置を制御する機能として機能させるためのプログラムを記録したコンピュータ読取り可能な記録媒体。
Computer
The ability to select multiple streams to play,
A function of decoding with a plurality of decoding capabilities, in which a processing amount for decoding is determined in advance according to the number of the selected moving image data;
A function of storing the decrypted data in a predetermined memory location;
A function of outputting data read from the memory location to the screen;
A computer-readable recording medium having recorded thereon a program for functioning as a function for controlling a screen position where the data is output.
JP2000000950A 2000-01-06 2000-01-06 Encoded moving image data reproducing apparatus and storage medium thereof Expired - Fee Related JP3865190B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2000000950A JP3865190B2 (en) 2000-01-06 2000-01-06 Encoded moving image data reproducing apparatus and storage medium thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2000000950A JP3865190B2 (en) 2000-01-06 2000-01-06 Encoded moving image data reproducing apparatus and storage medium thereof

Publications (2)

Publication Number Publication Date
JP2001197433A JP2001197433A (en) 2001-07-19
JP3865190B2 true JP3865190B2 (en) 2007-01-10

Family

ID=18530217

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2000000950A Expired - Fee Related JP3865190B2 (en) 2000-01-06 2000-01-06 Encoded moving image data reproducing apparatus and storage medium thereof

Country Status (1)

Country Link
JP (1) JP3865190B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2009020212A1 (en) 2007-08-09 2009-02-12 Osaka University Video stream processing device, its control method, program, and recording medium

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4632868B2 (en) * 2005-06-03 2011-02-16 日本電気株式会社 Real-time moving image processing system, moving image decoding method and program
JP2007110563A (en) * 2005-10-14 2007-04-26 Sharp Corp Intelligent switch
KR100827107B1 (en) 2006-10-20 2008-05-02 삼성전자주식회사 Multi thread h.264 decoder and encoded video data decoding method thereof
EP2469795B1 (en) * 2010-02-25 2013-04-17 Ntt Docomo, Inc. Method and apparatus for rate shaping

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2009020212A1 (en) 2007-08-09 2009-02-12 Osaka University Video stream processing device, its control method, program, and recording medium

Also Published As

Publication number Publication date
JP2001197433A (en) 2001-07-19

Similar Documents

Publication Publication Date Title
CA2326898C (en) A multi stream switch-based video editing architecture
JP3742167B2 (en) Image display control device
US6633725B2 (en) Layered coding of image data using separate data storage tracks on a storage medium
EP1003339A1 (en) Reproduction of data
WO1999029107A2 (en) Method and apparatus for video-on-demand with fast play capability
US6357047B1 (en) Media pipeline with multichannel video processing and playback
JPH04360484A (en) Coding circuit for transform coding of picture signal and decoding circuit for decoding said signal
US7319811B2 (en) Information processing apparatus and method
JP3865190B2 (en) Encoded moving image data reproducing apparatus and storage medium thereof
JPH0622289A (en) Multi-resolution image signal coder and decoder
US20040233806A1 (en) Recording device and method, recording medium and program
JPH11313339A (en) Display controller and dynamic image/graphics composite display method
JPH06197337A (en) Picture transmitter
WO1999052277A1 (en) A multi stream video editing system using uncompressed video data for real-time rendering performance, and for non real-time rendering acceleration
US20050002645A1 (en) Reproducing device and method, recording medium and program
JP3775525B2 (en) Decoding device and decoding method
JP3843489B2 (en) Video playback device and baseband memory device
JP3587376B2 (en) Image information playback device
JPH0816610A (en) Animation retrieving system and animation retrieving data extraction method
JP2001103427A (en) Compressed image reproducing device and program recording medium
JP2005020242A (en) Reproducing device
JP3004763B2 (en) Video signal multiplex decoder
US8149679B2 (en) Recording/reproducing device and method, recording medium, and program
JPH08223534A (en) Image reproducing device
JP2005269283A (en) Method and apparatus for reproducing digital image

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20050608

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20050622

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20050822

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20060823

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20060830

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20060927

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20060928

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121013

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20131013

Year of fee payment: 7

LAPS Cancellation because of no payment of annual fees