JP2004064366A - Information providing apparatus and method, information processing apparatus and method, recording medium, and program - Google Patents
Information providing apparatus and method, information processing apparatus and method, recording medium, and program Download PDFInfo
- Publication number
- JP2004064366A JP2004064366A JP2002219086A JP2002219086A JP2004064366A JP 2004064366 A JP2004064366 A JP 2004064366A JP 2002219086 A JP2002219086 A JP 2002219086A JP 2002219086 A JP2002219086 A JP 2002219086A JP 2004064366 A JP2004064366 A JP 2004064366A
- Authority
- JP
- Japan
- Prior art keywords
- moving image
- frame
- image
- network
- transmission
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
Images
Abstract
Description
【0001】
【発明の属する技術分野】
本発明は、情報提供装置および方法、情報処理装置および方法、記録媒体、並びにプログラムに関し、特に、動画像を提供するか、または提供された動画像を再生する情報提供装置および方法、情報処理装置および方法、記録媒体、並びにプログラムに関する。
【0002】
【従来の技術】
低解像度の画像または音声を、ネットワークを介して、送受信することは、一般的に行われている。
【0003】
第1に、観賞用に、画像または音声を送受信することが行われている。
【0004】
観賞用に、画像または音声を送受信する場合、原則にPLAYモード(いわゆる、ストリーム)で、画像または音声が送受信される。PLAYモードで、画像または音声を送受信する場合、一般的に受信側にバッファを設け、このバッファの作用により、ネットワークの帯域やパーソナルコンピュータの演算速度による揺らぎが吸収される。PLAY以外のモードでも、画像または音声の送受信は可能であるが、バッファが設けられているので、リアルタイム性に欠ける。
【0005】
第2に、オンライン編集のために、ファイルとして完全なデータが送受信される場合がある。この場合、リアルタイム性は要求されない。
【0006】
第3に、ファイル作成のため、ファイルの先頭やファイルの終了点を探すために画像または音声が送受信される。この場合、反転や速度変化に対応するリアルタイム性が強く求められる。
【0007】
特に、第3の用途では、リアルタイム性が強く求められるが、画像および音声のデータを全て送信する場合、要求される送信速度に対して、ネットワークの帯域が狭い場合、または受信側のパーソナルコンピュータの演算速度が遅い場合、処理が間に合わなくなり、その結果、リアルタイム性は悪化してしまう。
【0008】
【発明が解決しようとする課題】
このように動画像を通信するとき、ネットワークの帯域が狭いとき、または受信側のパーソナルコンピュータの演算速度が遅いとき、リアルタイム性を維持できない場合があるという問題がある。
【0009】
本発明はこのような状況に鑑みてなされたものであり、ネットワークの帯域、または受信側の演算速度に関わらず、動画像のリアルタイム性を維持できるようにすることを目的とする。
【0010】
【課題を解決するための手段】
本発明の情報提供装置は、提供しようとする第1の動画像を基に、第1の動画像に比較して解像度の低い第2の動画像を生成する生成手段と、生成された第2の動画像の記憶を制御する記憶制御手段と、受信側からフレームの送信要求が受信された場合、ネットワークを介した、記憶されている第2の動画像のうちの、最後に記憶された1つのフレームの受信側への送信を制御する送信制御手段と、送信されたフレームより以前に記憶されたフレームを消去する消去手段とを含むことを特徴とする。
【0011】
本発明の情報提供方法は、提供しようとする第1の動画像を基に、第1の動画像に比較して解像度の低い第2の動画像を生成する生成ステップと、生成された第2の動画像の記憶を制御する記憶制御ステップと、受信側からフレームの送信要求が受信された場合、ネットワークを介した、記憶されている第2の動画像のうちの、最後に記憶された1つのフレームの受信側への送信を制御する送信制御ステップと、送信されたフレームより以前に記憶されたフレームを消去する消去ステップとを含むことを特徴とする。
【0012】
本発明の第1の記録媒体のプログラムは、提供しようとする第1の動画像を基に、第1の動画像に比較して解像度の低い第2の動画像を生成する生成ステップと、生成された第2の動画像の記憶を制御する記憶制御ステップと、受信側からフレームの送信要求が受信された場合、ネットワークを介した、記憶されている第2の動画像のうちの、最後に記憶された1つのフレームの受信側への送信を制御する送信制御ステップと、送信されたフレームより以前に記憶されたフレームを消去する消去ステップとを含むことを特徴とする。
【0013】
本発明の第1のプログラムは、提供しようとする第1の動画像を基に、第1の動画像に比較して解像度の低い第2の動画像を生成する生成ステップと、生成された第2の動画像の記憶を制御する記憶制御ステップと、受信側からフレームの送信要求が受信された場合、ネットワークを介した、記憶されている第2の動画像のうちの、最後に記憶された1つのフレームの受信側への送信を制御する送信制御ステップと、送信されたフレームより以前に記憶されたフレームを消去する消去ステップとをコンピュータに実行させることを特徴とする。
【0014】
本発明の情報処理装置は、動画像を提供する情報提供装置への、ネットワークを介した、動画像の1つのフレームの送信要求の送信を制御する送信制御手段と、ネットワークを介して、情報提供装置から送信された、動画像の1つのフレームの受信を制御する受信制御手段と、受信された動画像のフレームを基に、動画像を再生する再生手段とを含むことを特徴とする。
【0015】
本発明の情報処理方法は、動画像を提供する情報提供装置への、ネットワークを介した、動画像の1つのフレームの送信要求の送信を制御する送信制御ステップと、ネットワークを介して、情報提供装置から送信された、動画像の1つのフレームの受信を制御する受信制御ステップと、受信された動画像のフレームを基に、動画像を再生する再生ステップとを含むことを特徴とする。
【0016】
本発明の第2の記録媒体のプログラムは、動画像を提供する情報提供装置への、ネットワークを介した、動画像の1つのフレームの送信要求の送信を制御する送信制御ステップと、ネットワークを介して、情報提供装置から送信された、動画像の1つのフレームの受信を制御する受信制御ステップと、受信された動画像のフレームを基に、動画像を再生する再生ステップとを含むことを特徴とする。
【0017】
本発明の第2のプログラムは、動画像を提供する情報提供装置への、ネットワークを介した、動画像の1つのフレームの送信要求の送信を制御する送信制御ステップと、ネットワークを介して、情報提供装置から送信された、動画像の1つのフレームの受信を制御する受信制御ステップと、受信された動画像のフレームを基に、動画像を再生する再生ステップとをコンピュータに実行させることを特徴とする。
【0018】
本発明の情報提供装置および方法、第1の記録媒体、並びに第1のプログラムにおいては、提供しようとする第1の動画像を基に、第1の動画像に比較して解像度の低い第2の動画像が生成され、生成された第2の動画像が記憶される。受信側からフレームの送信要求が受信された場合、ネットワークを介して、記憶されている第2の動画像のうちの、最後に記憶された1つのフレームが受信側に送信される。そして、送信されたフレームより以前に記憶されたフレームが消去される。
【0019】
ネットワークとは、少なくとも2つの装置が接続され、ある装置から、他の装置に対して、情報の伝達をできるようにした仕組みをいう。ネットワークを介して通信する装置は、独立した装置どうしであっても良いし、1つの装置を構成している内部ブロックどうしであってもよい。
【0020】
また、受信または送信は、無線による受信または送信および有線による受信または送信は勿論、無線と有線が混在した受信または送信、即ち、ある区間では無線による受信または送信が行われ、他の区間では有線による受信または送信が行われるものであっても良い。さらに、ある装置から他の装置への受信または送信が有線でおこなわれ、他の装置からある装置への受信または送信が無線通信で行われるようなものであってもよい。
【0021】
情報提供装置は、独立した装置であっても良いし、情報処理装置の情報提供処理を行うブロックであっても良い。
【0022】
本発明の情報処理装置および方法、第2の記録媒体、並びに第2のプログラムにおいては、動画像を提供する情報提供装置に、ネットワークを介して、動画像の1つのフレームの送信要求が送信され、ネットワークを介して、情報提供装置から送信された、動画像の1つのフレームが受信される。受信された動画像のフレームを基に、動画像が再生される。
【0023】
ネットワークとは、少なくとも2つの装置が接続され、ある装置から、他の装置に対して、情報の伝達をできるようにした仕組みをいう。ネットワークを介して通信する装置は、独立した装置どうしであっても良いし、1つの装置を構成している内部ブロックどうしであってもよい。
【0024】
また、受信または送信は、無線による受信または送信および有線による受信または送信は勿論、無線と有線が混在した受信または送信、即ち、ある区間では無線による受信または送信が行われ、他の区間では有線による受信または送信が行われるものであっても良い。さらに、ある装置から他の装置への受信または送信が有線でおこなわれ、他の装置からある装置への受信または送信が無線通信で行われるようなものであってもよい。
【0025】
情報処理装置は、独立した装置であっても良いし、電子機器の情報処理を行うブロックであっても良い。
【0026】
【発明の実施の形態】
図1は、本発明に係る通信システムの一実施の形態を示す図である。
【0027】
記録再生装置1は、例えば、VCR(Videocassette Recorder)などであり、ローカルエリアネットワークまたはインターネットなどのネットワーク2を介して、パーソナルコンピュータ3と接続されている。
【0028】
記録再生装置1は、例えば、100Base−Tなどの規格に準拠するネットワークケーブル4−1を介して、ネットワーク2に接続されている。
【0029】
パーソナルコンピュータ3は、例えば、100Base−Tなどのネットワークケーブル4−2を介して、ネットワーク2に接続されている。
【0030】
記録再生装置1は、後述するような、アシンクロナスな動作により、画像および音声のデータを記録するか、または記録されている画像および音声のデータを読み出す。
【0031】
記録再生装置1は、装着されているビデオカセットから読み出した画像および音声のデータをネットワーク2を介してパーソナルコンピュータ3に送信する。記録再生装置1は、ネットワーク2を介して、例えばパーソナルコンピュータ3から供給された画像および音声のデータを装着されているビデオカセットに記録する。
【0032】
パーソナルコンピュータ3は、ネットワーク2を介して、所定のコマンドを記録再生装置1に送信し、記録再生装置1を制御する。
【0033】
画像を表示するとき、パーソナルコンピュータ3は、ネットワーク2を介して、記録再生装置1に1フレームの画像のデータを要求する。
【0034】
パーソナルコンピュータ3から1フレームの画像のデータが要求されたとき、記録再生装置1は、ネットワーク2を介して、1フレームの画像のデータをパーソナルコンピュータ3に送信する。
【0035】
パーソナルコンピュータ3は、記録再生装置1から送信された、1フレームの画像のデータを基に、画像を表示する。
【0036】
なお、記録再生装置1から送信されるデータには、タイムコードデータ等のメタデータを重畳することができる。
【0037】
また、ネットワーク2の方式は、有線または無線などの任意の方式を採用することができ、本発明を限定するものではない。
【0038】
図2は、記録再生装置1の構成を示すブロック図である。
【0039】
システム制御CPU(Central Processing Unit)11は、例えば、RAM(Random−Access Memory)またはROM(Read−only Memory)などを内蔵するエンベデットコンピュータからなり、所定の制御プログラムを実行し、記録再生装置1全体を制御する。VCRシステム部12は、システム制御CPU11の制御の基に、記録再生装置1に装着されているビデオカセットのテープを走行させ、画像および音声のデータの記録または再生を実行する。VCRシステム部12は、装着されているビデオカセットに記録されている画像および音声のデータを再生するとき、装着されているビデオカセットに記録されている画像および音声のデータを読み出して、読み出した画像および音声のデータをデコーダ13に供給する。VCRシステム部12は、画像および音声のデータを装着されているビデオカセットに記録するとき、エンコーダ14から供給された画像および音声のデータをビデオカセットに記録する。
【0040】
デコーダ13は、システム制御CPU11の制御の基に、VCRシステム部12から供給された画像および音声のデータを、復号し、復号された画像および音声のデータをメモリコントローラ15および低解像度エンコーダ20に供給する。例えば、デコーダ13は、システム制御CPU11の制御の基に、モーションJPEG(Joint Photographic Experts Group)方式、またはMPEG(Motion Picture Experts Group)2方式で符号化されている画像および音声のデータを復号する。
【0041】
エンコーダ14は、システム制御CPU11の制御の基に、メモリコントローラ15から供給された画像および音声のデータを、所定の方式で符号化し、符号化された画像および音声のデータをVCRシステム部12に供給する。例えば、エンコーダ14は、システム制御CPU11の制御の基に、メモリコントローラ15から供給された画像および音声のデータを、モーションJPEG方式、またはMPEG2方式で符号化する。
【0042】
なお、画像および音声のデータの方式は、所望の方式を採用することができ、本発明を限定するものではない。
【0043】
メモリコントローラ15は、デコーダ13またはTCP/IP処理部18から供給された画像および音声のデータをバッファメモリ16に順に記憶させ、バッファメモリ16に記憶されている画像および音声のデータを、エンコーダ14またはTCP/IP処理部18に順に供給する。
【0044】
バッファメモリ16は、DRAM(Dynamic RAM)などからなる、所定の容量の半導体メモリであり、メモリコントローラ15の制御の基に、画像および音声のデータを記憶し、記憶されている画像および音声のデータを読み出す。バッファメモリ16は、例えば、リングバッファとして、メモリコントローラ15に制御される。
【0045】
メモリ監視器17は、メモリコントローラ15からバッファメモリ16に格納されている画像および音声のデータの量を示すデータを取得し、取得したデータをシステム制御CPU11に供給する。
【0046】
TCP/IP処理部18は、システム制御CPU11の制御の基に、TCP(TransmissionControl Protocol)の処理およびIP(Internet Protocol)の処理を実行し、メモリコントローラ15から供給された画像および音声のデータを所定のパケットに格納して、ネットワークインタフェース19に供給する。TCP/IP処理部18は、ネットワークインタフェース19からパケットを受信したとき、TCPの処理およびIPの処理を実行し、パケットに格納されているデータ抽出して、抽出したデータをメモリコントローラ15に供給するか、またはパケットに格納されているコマンドを抽出して、抽出したコマンドをコマンドインタプリタ21に供給する。
【0047】
ネットワークインタフェース19は、例えば、NIC(Network Interface Card)などからなり、TCP/IP処理部18から供給されたパケットをネットワーク2に送信し、ネットワーク2から受信したパケットをTCP/IP処理部18に供給する。
【0048】
低解像度エンコーダ20は、システム制御CPU11の制御の基に、デコーダ13から供給された画像および音声のデータを、より低解像度の画像および音声のデータ、すなわち単位時間当たりの情報量の少ないデータ(低レートのデータ)に変換し、変換した画像および音声のデータをメモリコントローラ15に供給する。
【0049】
デコーダ13に供給されるデータは、高レートのデータ(単位時間当たりの情報量の多いデータ)であり、そのままネットワーク2に送出すると、ネットワーク2の帯域(単位時間当たりに通信可能なデータ量)の制限により、後述するように、VCRシステム部12のビデオカセットからの画像および音声のデータの読み出しが停止される可能性が高い。
【0050】
そこで、デコーダ13の出力を低解像度エンコーダ20に通して、低レートな画像および音声のデータに変換し、低レートとされた画像および音声のデータをメモリコントローラ15を介して、バッファメモリ16に記憶させる経路を追加する。
【0051】
コマンドインタプリタ21は、TCP/IP処理部18から供給された、パケットから抽出されたコマンドを解釈して、解釈された結果を示すデータをシステム制御CPU11に供給する。例えば、コマンドインタプリタ21は、パケットから抽出されたVCRテープ走行制御コマンドを解釈して、解釈された結果を示すデータをシステム制御CPU11に供給する。
【0052】
システム制御CPU11は、コマンドインタプリタ21から、コマンドが解釈された結果を示すデータが供給されたとき、コマンドに対応する制御を実行する。例えば、システム制御CPU11は、VCRテープ走行制御コマンドに対応するデータを基に、VCRシステム部12の速度制御を実行する。VCRシステム部12は、システム制御CPU11による速度制御の基に、装着されているビデオカセットから画像および音声のデータを読み出し、読み出した画像および音声のデータをデコーダ13に供給する。
【0053】
ドライブ22は、装着されている磁気ディスク41、光ディスク42、光磁気ディスク43、または半導体メモリ44からプログラムまたはデータを読み出し、読み出したプログラムまたはデータをシステム制御CPU11に供給する。
【0054】
次に、VCRシステム部12に装着されたビデオカセットに記録されている画像および音声を再生するときの、記録再生装置1の動作を説明する。
【0055】
メモリ監視器17は、バッファメモリ16に格納される画像および音声のデータの量を常に監視する。メモリ監視器17は、予め記憶している閾値以上の画像および音声のデータがバッファメモリ16に格納されたとき、その旨をシステム制御CPU11に通知する。例えば、メモリ監視器17は、バッファメモリ16の容量の85%以上の量の画像および音声のデータがバッファメモリ16に格納されたとき、その旨をシステム制御CPU11に通知する。
【0056】
システム制御CPU11の通知に使用する閾値の値は、任意に設定することができる。
【0057】
なお、メモリ監視器17は、単に、バッファメモリ16に格納される画像および音声のデータの量をシステム制御CPU11に通知し、システム制御CPU11が、閾値以上の画像および音声のデータがバッファメモリ16に格納されたか否かを判定するようにしてもよい。
【0058】
システム制御CPU11は、一定以上の画像および音声のデータがバッファメモリ16に格納された旨の通知がメモリ監視器17から供給されたとき、VCRシステム部12に、ビデオカセットのテープの走行を停止させ、次の再生に備え待機させる。
【0059】
メモリ監視器17は、バッファメモリ16に格納されている画像および音声のデータの量が、予め記憶している閾値以下になったとき、その旨をシステム制御CPU11に通知する。例えば、メモリ監視器17は、バッファメモリ16に格納されている画像および音声のデータの量が、バッファメモリ16の容量の15%以下になったとき、その旨をシステム制御CPU11に通知する。
【0060】
システム制御CPU11の通知に使用する閾値の値は、任意に設定することができる。
【0061】
なお、メモリ監視器17は、単に、バッファメモリ16に格納される画像および音声のデータの量をシステム制御CPU11に通知し、システム制御CPU11が、バッファメモリ16に格納されている画像および音声のデータの量が、予め記憶している閾値以下になったか否かを判定するようにしてもよい。
【0062】
システム制御CPU11は、バッファメモリ16に格納されている、画像および音声のデータが一定以下になった旨の通知がメモリ監視器17から供給されたとき、VCRシステム部12に、ビデオカセットのテープの走行を開始させる。VCRシステム部12は、ビデオカセットから読み出した画像および音声のデータをデコーダ13に供給する。
【0063】
このように、バッファメモリ16に格納されている画像および音声のデータの量に対応して、VCRシステム部12によるビデオカセットからの画像および音声のデータの読み出しを停止する動作、および開始する動作が繰り返される。
【0064】
デコーダ13は、VCRシステム部12から供給された画像および音声のデータを復号し、復号された画像および音声のデータを、メモリコントローラ15または低解像度エンコーダ20に供給する。デコーダ13が復号した画像および音声のデータをそのままパーソナルコンピュータ3に送信するとき、デコーダ13は、復号された画像および音声のデータをメモリコントローラ15に供給する。
【0065】
デコーダ13が復号した画像および音声のデータに比較し、より低解像度の画像および音声のデータをパーソナルコンピュータ3に送信するとき、デコーダ13は、復号された画像および音声のデータを低解像度エンコーダ20に供給する。
【0066】
低解像度エンコーダ20は、デコーダ13から供給された画像および音声のデータを基に、より低解像度の画像および音声のデータを生成する。ここで、低解像度とは、空間方向に低解像度である場合、すなわち、1フレーム当たりの画素の数を減らした場合と、時間方向に低解像度である場合、すなわち、単位時間当たりのフレームの数を減らした場合の双方を含む。
【0067】
低解像度エンコーダ20は、生成した低解像度の画像および音声のデータをメモリコントローラ15に供給する。
【0068】
メモリコントローラ15は、デコーダ13または低解像度エンコーダ20から供給された画像および音声のデータをバッファメモリ16に記憶させる。
【0069】
システム制御CPU11は、メモリ監視器17から供給された信号(メモリ格納情報)を基に、バッファメモリ16に格納されている画像および音声のデータの量を認識する。システム制御CPU11は、所定の量の画像および音声のデータがバッファメモリ16に格納されているとき、ネットワーク2の帯域に合わせて、メモリコントローラ15に、バッファメモリ16に記憶されている、次に送信すべき画像および音声のデータを読み出させる。メモリコントローラ15は、読み出した画像および音声のデータを、TCP/IP処理部18に供給する。
【0070】
TCP/IP処理部18は、メモリコントローラ15から供給された、画像および音声のデータを所定のパケットに格納して、ネットワークインターフェース19に供給する。ネットワークインターフェース19は、TCP/IP処理部18から供給された、画像および音声のデータが格納されているパケットを、ネットワーク2を介して、パーソナルコンピュータ3に送信する。
【0071】
このように、記録再生装置1において、バッファメモリ16に格納されている画像および音声のデータの量を基に、VCRシステム部12によるビデオカセットのテープの走行が制御され、ネットワーク2への画像および音声のデータの送出も、バッファメモリ16に格納されている画像および音声のデータの量を基に、制御される。すなわち、記録再生装置1において、バッファメモリ16を境に、ビデオカセットからの画像および音声のデータの読み出しの動作と、ネットワーク2への画像および音声のデータの送出の動作とは、完全に独立している(アシンクロナス)と言える。
【0072】
次に、ネットワーク2を介して受信した画像および音声のデータを、VCRシステム部12に装着されたビデオカセットに記録するときの、記録再生装置1の動作を説明する。
【0073】
ネットワークインターフェース19は、VCRシステム部12に装着されているビデオカセットに記録可能なレート以下の任意のレートで、ネットワーク2を介して送信されて来た、画像および音声のデータが格納されているパケットを受信し、受信したパケットをTCP/IP処理部18に供給する。
【0074】
TCP/IP処理部18は、ネットワークインターフェース19から供給されたパケットから画像および音声のデータを抽出して、抽出した画像および音声のデータをメモリコントローラ15に供給する。
【0075】
メモリコントローラ15は、TCP/IP処理部18から供給された画像および音声のデータをバッファメモリ16に格納する。
【0076】
メモリ監視器17は、バッファメモリ16に格納されている画像および音声のデータの量を常に監視し、予め記憶している閾値以上の画像および音声のデータがバッファメモリ16に格納されたとき、その旨をシステム制御CPU11に通知する。また、メモリ監視器17は、バッファメモリ16に格納されている画像および音声のデータの量が、予め記憶している閾値以下になったとき、その旨をシステム制御CPU11に通知する。
【0077】
なお、閾値以上の画像および音声のデータがバッファメモリ16に格納されたか否かの判定の処理、およびバッファメモリ16に格納されている画像および音声のデータの量が、閾値以下になったか否かの判定の処理は、システム制御CPU11により実行されるようにしてもよい。
【0078】
システム制御CPU11は、一定以上の画像および音声のデータがバッファメモリ16に格納された旨の通知がメモリ監視器17から供給されたとき、メモリコントローラ15に、画像および音声のデータをバッファメモリ16から読み出させる。メモリコントローラ15は、読み出した画像および音声のデータをエンコーダ14に供給する。
【0079】
エンコーダ14は、メモリコントローラ15から供給された画像および音声のデータを、所定の符号化方式で符号化し、符号化された画像および音声のデータをVCRシステム部12に供給する。
【0080】
システム制御CPU11は、一定以上の画像および音声のデータがバッファメモリ16に格納された旨の通知がメモリ監視器17から供給されたとき、VCRシステム部12に、装着されているビデオカセットのテープの走行を開始させ、エンコーダ14から供給された、符号化された画像および音声のデータを、ビデオカセットに記録させる。
【0081】
システム制御CPU11は、バッファメモリ16に格納されている、画像および音声のデータが一定以下になった旨の通知がメモリ監視器17から供給されたとき、VCRシステム部12に、ビデオカセットのテープの走行を停止させ、次の記録に備え待機させる。このとき、システム制御CPU11は、メモリコントローラ15による、画像および音声のデータのバッファメモリ16からの読み出しを、停止させる。
【0082】
バッファメモリ16に格納されている画像および音声のデータの量に対応して、VCRシステム部12によるビデオカセットへの画像および音声のデータの記録を停止する動作、および記録を開始する動作が繰り返される。ビデオカセットへの画像および音声のデータの記録が停止した後、記録が開始されたとき、前回の記録において最後に記録された画像および音声のデータに続いて、画像および音声のデータが記録される。
【0083】
このように、記録再生装置1において、ネットワーク2からの画像および音声のデータの受信とは独立に、バッファメモリ16に格納されている画像および音声のデータの量を基に、VCRシステム部12によるビデオカセットのテープの走行が制御される。すなわち、記録再生装置1において、バッファメモリ16を境に、ビデオカセットへの画像および音声のデータの記録の動作と、ネットワーク2からの画像および音声のデータの受信の動作とは、完全に独立している(アシンクロナス)と言える。言い換えれば、ネットワーク2から送信される、画像および音声のデータのレートと無関係に、記録再生装置1において、バッファメモリ16に格納されている画像および音声のデータの量のみを基に、VCRシステム部12によるビデオカセットへの記録が独立して制御される。
【0084】
図3は、パーソナルコンピュータ3の構成を説明する図である。CPU101は、各種アプリケーションプログラムや、OS(Operating System)を実際に実行する。ROM102は、一般的には、CPU101が使用するプログラムや演算用のパラメータのうちの基本的に固定のデータを格納する。RAM103は、CPU101の実行において使用するプログラムや、その実行において適宜変化するパラメータを格納する。これらはCPUバスなどから構成されるホストバス104により相互に接続されている。
【0085】
ホストバス104は、ブリッジ105を介して、PCI(Peripheral Component Interconnect/Interface)バスなどの外部バス106に接続されている。
【0086】
キーボード108は、CPU101に各種の指令を入力するとき、使用者により操作される。ポインティングデバイスの一例としてのマウス109は、ディスプレイ110の画面上のポイントの指示や選択を行うとき、使用者により操作される。ディスプレイ110は、液晶表示装置またはCRT(Cathode Ray Tube)などから成り、各種情報をテキストやイメージで表示する。HDD(Hard Disk Drive)111は、ハードディスクを駆動し、それらにCPU101によって実行するプログラムや情報を記録または再生させる。
【0087】
ドライブ112は、装着されている磁気ディスク131、光ディスク132、光磁気ディスク133、または半導体メモリ134に記録されているデータまたはプログラムを読み出して、そのデータまたはプログラムを、インターフェース107、外部バス106、ブリッジ105、およびホストバス104を介して接続されているRAM103に供給する。これらのキーボード108乃至ドライブ112は、インターフェース107に接続されており、インターフェース107は、外部バス106、ブリッジ105、およびホストバス104を介してCPU101に接続されている。
【0088】
通信ボード113は、ネットワーク2が接続され、CPU101、またはHDD111から供給されたデータを、所定の方式のパケットに格納して、ネットワーク2を介して、送信するとともに、ネットワーク2を介して、受信したパケットに格納されているデータをCPU101、RAM103、またはHDD111に出力する。
【0089】
通信ボード113は、外部バス106、ブリッジ105、およびホストバス104を介してCPU101に接続されている。
【0090】
図4は、ビデオカセットに記録されている画像および音声のデータをネットワーク2を介して送信するときの、制御プログラムを実行するシステム制御CPU11による、バッファメモリ制御の処理を説明するフローチャートである。
【0091】
ステップS11において、システム制御CPU11は、VCRシステム部12に、再生を開始させる。すなわち、システム制御CPU11は、VCRシステム部12に、装着されているビデオカセットから画像および音声のデータを読み出させる動作を開始させ、読み出したデータをデコーダ13に供給させる。
【0092】
ステップS12において、システム制御CPU11は、例えば、予め記憶されている第1の閾値、およびメモリ監視器17から供給されたデータを基に、バッファメモリ16に格納されているデータの量が一定以上であるか否かを判定する。ステップS12において、バッファメモリ16に格納されているデータの量が一定以上であると判定された場合、ステップS13に進み、システム制御CPU11は、VCRシステム部12に、再生を停止させ、待機させる。
【0093】
ステップS14において、システム制御CPU11は、予め記憶されている第2の閾値、およびメモリ監視器17から供給されたデータを基に、バッファメモリ16に格納されているデータの量が一定以下であるか否かを判定する。ステップS12およびステップS14の処理において、判定の基準となるデータの量は、同じ値であっても良く、異なる値であっても良い。
【0094】
ステップS14において、バッファメモリ16に格納されているデータの量が一定以下でないと判定された場合、ステップS14に戻り、判定の処理を繰り返す。
【0095】
ステップS13の処理で、VCRシステム部12の再生が停止されて、ステップS14の処理で判定が繰り返されている間、バッファメモリ16に格納されているデータがネットワーク2を介して送信されるので、バッファメモリ16に格納されているデータの量は、減少する。
【0096】
ステップS14において、バッファメモリ16に格納されているデータの量が一定以下であると判定された場合、ステップS11に戻り、システム制御CPU11は、VCRシステム部12に、再生を開始させ、処理を繰り返す。
【0097】
ステップS12において、バッファメモリ16に格納されているデータの量が一定以上でないと判定された場合、ステップS15に進み、システム制御CPU11は、図示せぬ入力部からの信号などを基に、再生を終了するか否かを判定する。
【0098】
ステップS15において、再生を終了しないと判定された場合、ステップS12に戻り、バッファメモリ16に格納されているデータの量が一定以上であるか否かの判定の処理を繰り返す。
【0099】
ステップS15において、再生を終了すると判定された場合、処理は終了する。
【0100】
このように、データの送信において、バッファメモリ16に格納されている画像および音声のデータの量によって、VCRシステム部12により、ビデオカセットから画像および音声のデータが読み出されるか、または読み出しが停止される。このようにすることで、ネットワーク2を介したデータの送信の速度が、変化しても、バッファメモリ16がオーバーフローせず、送信される画像および音声の連続性が保証される。
【0101】
図5は、ネットワーク2を介して受信された画像および音声のデータをビデオカセットに記録するときの、制御プログラムを実行するシステム制御CPU11による、バッファメモリ制御の処理を説明するフローチャートである。
【0102】
ステップS31において、システム制御CPU11は、予め記憶されている第1の閾値、およびメモリ監視器17から供給されたデータを基に、バッファメモリ16に格納されているデータの量が一定以上であるか否かを判定する。
【0103】
ステップS31において、バッファメモリ16に格納されているデータの量が一定以上でないと判定された場合、ステップS31に戻り、データの量が一定以上になるまで、判定の処理を繰り返す。
【0104】
ステップS31において、バッファメモリ16に格納されているデータが一定以上であると判定された場合、ステップS32に進み、システム制御CPU11は、VCRシステム部12に、記録を開始させる。すなわち、システム制御CPU11は、VCRシステム部12に、エンコーダ14から供給された画像および音声のデータを取得させ、装着されているビデオカセットに画像および音声のデータに記録させる。
【0105】
ステップS33において、システム制御CPU11は、予め記憶されている第2の閾値、およびメモリ監視器17から供給されたデータを基に、バッファメモリ16に格納されているデータの量が一定以下であるか否かを判定する。ステップS12およびステップS14の処理において、判定の基準となるデータの量は、同じ値であっても良く、異なる値であっても良い。
【0106】
ステップS33において、バッファメモリ16に格納されているデータの量が一定以下であると判定された場合、ステップS34に進み、システム制御CPU11は、VCRシステム部12に、記録を停止させ、待機させ、ステップS31に戻り、バッファメモリ16に格納されているデータの量の判定の処理から、処理を繰り返す。
【0107】
ステップS33において、バッファメモリ16に格納されているデータが一定以下でないと判定された場合、ステップS35に進み、システム制御CPU11は、図示せぬ入力部からの信号などを基に、記録を終了するか否かを判定する。
【0108】
ステップS35において、記録を終了しないと判定された場合、ステップS33に戻り、バッファメモリ16に格納されているデータの量が一定以下であるか否かの判定の処理を繰り返す。
【0109】
ステップS35において、記録を終了すると判定された場合、処理は終了する。
【0110】
このように、データの受信において、バッファメモリ16に格納されている画像および音声のデータの量によって、VCRシステム部12により、ビデオカセットに画像および音声のデータが記録されるか、または記録が停止される。このようにすることで、データの受信の速度が、変化しても、バッファメモリ16がオーバーフローせず、受信された画像および音声のデータが確実にビデオカセットに記録される。
【0111】
次に、記録再生装置1からパーソナルコンピュータ3に低レートの画像および音声のデータを送信する処理について説明する。
【0112】
低解像度エンコーダ20により低レートとされた画像および音声のデータは、ほとんどのネットワーク2において、遅れなく目的デバイスであるパーソナルコンピュータ3に到達し、パーソナルコンピュータ3から送信された、VCR走行制御情報であるコマンドに対して、レスポンス良く、パーソナルコンピュータ3が画像および音声のデータを取得できると考えられる。
【0113】
しかしながら、ネットワーク2の帯域がより狭い場合、またはパーソナルコンピュータ3の演算能力が低い場合には、記録再生装置1からパーソナルコンピュータ3への画像および音声のデータの送信速度が、バッファメモリ16への低レートの画像および音声のデータの格納の速度に比較して、遅くなり、レスポンスが低下する可能性がある。すなわち、記録再生装置1から読み出される画像および音声のデータと、パーソナルコンピュータ3で表示される画像または出力される音声のタイムラグが大きくなり、リアルタイム性が低下する可能性がある。
【0114】
そこで、パーソナルコンピュータ3によるフレームの要求に応じて、記録再生装置1が画像のフレームを送信するようにする。
【0115】
このように場合における、システム制御CPU11により制御プログラムを実行する記録再生装置1、およびCPU101により再生プログラムを実行するパーソナルコンピュータ3による、画像および音声のデータの通信の処理を図6のフローチャートを参照して説明する。
【0116】
ステップS101において、制御プログラムは、低解像度エンコーダ20に、デコーダ13から出力された画像および音声のデータを、低レートの画像および音声のデータに変換させる。低レートの画像および音声のデータは、メモリコントローラ15に供給され、メモリコントローラ15の制御の基に、バッファメモリ16に記憶される。
【0117】
ステップS201において、再生プログラムは、通信部113に、ネットワーク2を介して、記録再生装置1宛てにフレーム送信要求を送信させる。
【0118】
ステップS102において、制御プログラムは、TCP/IP処理部18およびネットワークインタフェース19に、パーソナルコンピュータ3から送信されたフレーム送信要求を受信させる。受信されたフレーム送信要求は、TCP/IP処理部18から、コマンドインタプリタ21に供給される。コマンドインタプリタ21は、フレーム送信要求に対応する、1フレームの送信を要求するデータをシステム制御CPU11に供給する。
【0119】
ステップS103において、制御プログラムは、最新の1フレームのデータをパーソナルコンピュータ3に送信する。すなわち、制御プログラムは、メモリコントローラ15に、バッファメモリ16から最新の(最後にバッファメモリ16に格納された)1フレームのデータを読み出させ、読み出した1フレームのデータをTCP/IP処理部18に供給させる。TCP/IP処理部18は、システム制御CPU11の制御の基に、最新の1フレームのデータを格納したパケットを生成し、ネットワーク2を介してパーソナルコンピュータ3宛てに、生成したパケットをネットワークインタフェース19に送信させる。
【0120】
ステップS202において、再生プログラムは、記録再生装置1から送信された1フレームのデータを受信する。
【0121】
より詳細には、再生プログラムを実行するCPU101は、通信部113に、ネットワーク2を介して送信されたパケットを受信させる。通信部113は、パケットに格納されている1フレームのデータを抽出し、抽出したデータをRAM103に記憶させる。
【0122】
ステップS203において、再生プログラムは、ステップS202の処理で受信したデータを基に、画像または音声を再生して、例えば、画像をディスプレイ110に表示し、図示せぬスピーカから音声を出力して、ステップS201に戻り、再生の処理を繰り返す。
【0123】
ステップS104において、制御プログラムは、メモリコントローラ15に、バッファメモリ16に記憶されている画像および音声のデータのうち、ステップS104の処理で送信したフレームの前のデータを破棄させ、ステップS101に戻り、送信の処理を繰り返す。ステップS104の処理で、送信したフレームの前のデータが破棄され、すなわち、送信したフレームに比較して、古いフレーム(送信したフレームより以前にバッファ16に格納されたフレーム)がバッファメモリ16上から消去されるので、バッファメモリ16には、送信したフレーム以後のフレームのみが格納されることになる。
【0124】
なお、ステップS104の処理における、フレームの消去は、フレームのデータの実体を他のデータに書き換える処理に限らず、バッファメモリ16の管理用のデータなどを変更することにより、フレームを読み出すことができないようにするなどの処理を含む。例えば、バッファメモリ16をリングバッファとした場合において、ポインタを移動させることにより、フレームを読み出すことができない状態にすることも、フレームの消去である。
【0125】
このようにすることで、ネットワーク2の帯域が狭い場合、またはCPU101の演算能力が低い場合であっても、単位時間に送信されるフレームの数が少なくなるものの、バッファメモリ16に最も新しく格納されたフレームのデータがパーソナルコンピュータ3に送信されることになり、きわめて良好なレスポンスを得ることができる。すなわち、VCRシステム部12がビデオカセットから画像および音声のデータを読み出すタイミングと、パーソナルコンピュータ3において、ビデオカセットから読み出された画像および音声のデータを基に、画像を表示し、音声を出力するタイミングとのずれを、最小とすることができる。
【0126】
さらに言えば、パーソナルコンピュータ3から記録再生装置1に、再生、または高速再生などのVCRテープ走行制御コマンドが送信された場合、VCRテープ走行制御コマンドの送信に対して、迅速かつリアルタイムに、記録再生装置1が応答することができるようになる。
【0127】
このように、ネットワークを介して、動画像を送信するようにした場合には、受信側で動画像を受信することができるようになる。
【0128】
また、提供しようとする第1の動画像を基に、第1の動画像に比較して解像度の低い第2の動画像を生成し、生成された第2の動画像の記憶を制御し、受信側からフレームの送信要求が受信された場合、ネットワークを介した、記憶されている第2の動画像のうちの、最後に記憶された1つのフレームの受信側への送信を制御し、送信されたフレームより以前に記憶されたフレームを消去するようにした場合には、ネットワークの帯域、または受信側の演算速度に関わらず、受信側において動画像のリアルタイム性を維持できるようになる。
【0129】
ネットワークを介して、情報提供装置から送信された、動画像を受信するようにした場合には、動画像を再生することができるようになる。
【0130】
また、動画像を提供する情報提供装置への、ネットワークを介した、動画像の1つのフレームの送信要求の送信を制御し、ネットワークを介して、情報提供装置から送信された、動画像の1つのフレームの受信を制御し、受信された動画像のフレームを基に、動画像を再生するようにした場合には、ネットワークの帯域、または演算速度に関わらず、動画像のリアルタイム性を維持できるようになる。
【0131】
なお、画像および音声のデータは、ビデオカセットに記録されると説明したが、ビデオカセットなどのテープに限らず、磁気ディスク、光ディスク、光磁気ディスク、または半導体メモリなど他の種類の記録媒体に記録するようにしてもよい。同様に、情報提供装置の一例である記録再生装置1は、VCRに限らず、パーソナルコンピュータ、DVDレコーダー、MD(Mini−Disc)(商標)レコーダ、またはサーバなど他の種類の装置とすることもできる。
【0132】
また、画像および音声のデータが記録され、送信されると説明したが、画像および音声のデータに限らず、音声のみのデータ、画像のみのデータ、または数値データなどストリームとして送信されるデータであれば本発明を適用することができる。
【0133】
なお、情報処理装置の一例であるパーソナルコンピュータ3は、PDA(Personal Digital Assistant)、または携帯電話機など他の種類の装置とすることもできる。
【0134】
上述した一連の処理は、ハードウェアにより実行させることもできるが、ソフトウェアにより実行させることもできる。一連の処理をソフトウェアにより実行させる場合には、そのソフトウェアを構成するプログラムが、専用のハードウェアに組み込まれているコンピュータ、または、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば汎用のパーソナルコンピュータなどに、記録媒体からインストールされる。
【0135】
この記録媒体は、図2または図3に示すように、コンピュータとは別に、ユーザにプログラムを提供するために配布される、プログラムが記録されている磁気ディスク41若しくは磁気ディスク131(フレキシブルディスクを含む)、光ディスク42若しくは光ディスク132(CD−ROM(Compact Disc−Read Only Memory)、DVD(Digital Versatile Disc)を含む)、光磁気ディスク43若しくは光磁気ディスク133(MD(Mini−Disc)(商標)を含む)、若しくは半導体メモリ44若しくは半導体メモリ134などよりなるパッケージメディアにより構成されるだけでなく、コンピュータに予め組み込まれた状態でユーザに提供される、プログラムが記録されているシステム制御CPU11の内部に設けられている図示せぬROM若しくはROM102や、HDD111などで構成される。
【0136】
なお、上述した一連の処理を実行させるプログラムは、必要に応じてルータ、モデムなどのインタフェースを介して、ローカルエリアネットワーク、インターネット、デジタル衛星放送といった、有線または無線の通信媒体を介してコンピュータにインストールされるようにしてもよい。
【0137】
また、本明細書において、記録媒体に格納されるプログラムを記述するステップは、記載された順序に沿って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的あるいは個別に実行される処理をも含むものである。
【0138】
なお、本明細書において、システムとは、複数の装置により構成される装置全体を表すものである。
【0139】
【発明の効果】
以上のように、第1の本発明によれば、受信側で動画像を受信することができる。
【0140】
また、第1の本発明によれば、ネットワークの帯域、または受信側の演算速度に関わらず、受信側において動画像のリアルタイム性を維持できるようになる。
【0141】
第2の本発明によれば、動画像を再生することができる。
【0142】
また、第2の本発明によれば、ネットワークの帯域、または演算速度に関わらず、動画像のリアルタイム性を維持できるようになる。
【図面の簡単な説明】
【図1】本発明に係る通信システムの一実施の形態を示す図である。
【図2】記録再生装置1の構成を示すブロック図である。
【図3】パーソナルコンピュータ3の構成を説明する図である。
【図4】ビデオカセットに記録されている画像および音声のデータをネットワーク2を介して送信するときの、バッファメモリ制御の処理を説明するフローチャートである。
【図5】ネットワーク2を介して受信された画像および音声のデータをビデオカセットに記録するときの、バッファメモリ制御の処理を説明するフローチャートである。
【図6】画像および音声のデータの通信の処理を説明するフローチャートである。
【符号の説明】
1 記録再生装置, 2 ネットワーク, 3 パーソナルコンピュータ, 11 システム制御CPU, 12 VCRシステム部, 15 メモリコントローラ, 16 バッファメモリ, 17 メモリ監視器, 18 TCP/IP処理部, 19 ネットワークインターフェース, 20 低解像度エンコーダ, 22 ドライブ, 41 磁気ディスク, 42 光ディスク, 43 光磁気ディスク, 44 半導体メモリ, 101 CPU, 102 ROM, 103 RAM,110 ディスプレイ, 111 HDD, 113 通信部, 131 磁気ディスク, 132 光ディスク, 133 光磁気ディスク, 134 半導体メモリ[0001]
TECHNICAL FIELD OF THE INVENTION
The present invention relates to an information providing apparatus and method, an information processing apparatus and method, a recording medium, and a program, and particularly to an information providing apparatus and method for providing a moving image or reproducing the provided moving image, and an information processing apparatus. And a method, a recording medium, and a program.
[0002]
[Prior art]
It is common practice to transmit and receive low-resolution images or sounds via a network.
[0003]
First, images or sounds are transmitted and received for viewing.
[0004]
When an image or a sound is transmitted and received for viewing, the image or the sound is transmitted and received in a PLAY mode (so-called stream) in principle. When transmitting or receiving an image or sound in the PLAY mode, a buffer is generally provided on the receiving side, and the effect of the buffer absorbs fluctuations due to the network bandwidth and the calculation speed of the personal computer. Even in modes other than PLAY, transmission or reception of images or sounds is possible, but lacks real-time performance because a buffer is provided.
[0005]
Second, complete data may be transmitted and received as a file for online editing. In this case, no real-time property is required.
[0006]
Third, in order to create a file, an image or sound is transmitted and received in order to find the beginning of the file and the end point of the file. In this case, real-time property corresponding to reversal and speed change is strongly required.
[0007]
In particular, in the third application, real-time performance is strongly required, but when transmitting all image and audio data, when the network bandwidth is narrow relative to the required transmission speed, or when the personal computer on the receiving side is used. When the calculation speed is slow, the processing cannot be performed in time, and as a result, the real-time property deteriorates.
[0008]
[Problems to be solved by the invention]
As described above, when moving images are communicated, when the bandwidth of the network is narrow, or when the calculation speed of the personal computer on the receiving side is low, there is a problem that the real-time property may not be maintained.
[0009]
The present invention has been made in view of such a situation, and it is an object of the present invention to maintain the real-time property of a moving image irrespective of a network band or a calculation speed of a receiving side.
[0010]
[Means for Solving the Problems]
An information providing apparatus according to the present invention includes: a generation unit configured to generate a second moving image having a lower resolution than a first moving image based on a first moving image to be provided; Storage control means for controlling the storage of a moving image of a second moving image via a network, when a frame transmission request is received from a receiving side; Transmission control means for controlling transmission of one frame to the receiving side, and erasing means for erasing a frame stored before the transmitted frame.
[0011]
The information providing method according to the present invention includes a generating step of generating a second moving image having a lower resolution than a first moving image based on a first moving image to be provided; A storage control step of controlling the storage of a moving image of the second moving image, when a frame transmission request is received from the receiving side, the last stored one of the stored second moving images via the network. A transmission control step of controlling transmission of one frame to a receiving side; and an erasing step of erasing a frame stored before the transmitted frame.
[0012]
The program of the first recording medium according to the present invention includes: a generating step of generating a second moving image having a lower resolution than the first moving image based on the first moving image to be provided; A storage control step of controlling the storage of the stored second moving image, and, if a frame transmission request is received from the receiving side, the last of the stored second moving images via the network. A transmission control step of controlling transmission of one stored frame to a receiving side and an erasing step of erasing a frame stored before the transmitted frame are included.
[0013]
A first program according to the present invention includes a generating step of generating a second moving image having a lower resolution than a first moving image based on a first moving image to be provided; And a storage control step of controlling storage of the second moving image, and when a frame transmission request is received from the receiving side, the last stored second moving image of the stored second moving images via the network. The computer is characterized by causing a computer to execute a transmission control step of controlling transmission of one frame to a receiving side and an erasing step of erasing a frame stored before the transmitted frame.
[0014]
An information processing apparatus according to the present invention includes: a transmission control unit configured to control transmission of a transmission request of one frame of a moving image to an information providing apparatus that provides a moving image via a network; It is characterized by including reception control means for controlling reception of one frame of a moving image transmitted from the apparatus, and reproducing means for reproducing a moving image based on the received frame of the moving image.
[0015]
An information processing method according to the present invention includes a transmission control step of controlling transmission of a transmission request for one frame of a moving image to an information providing apparatus that provides a moving image via a network, and providing information via the network. The method includes a reception control step of controlling reception of one frame of a moving image transmitted from the apparatus, and a reproduction step of reproducing a moving image based on the received frame of the moving image.
[0016]
A program on a second recording medium according to the present invention includes a transmission control step of controlling transmission of a transmission request for one frame of a moving image to an information providing apparatus for providing a moving image via a network, A reception control step of controlling reception of one frame of the moving image transmitted from the information providing apparatus, and a reproduction step of reproducing the moving image based on the received frame of the moving image. And
[0017]
A second program according to the present invention includes: a transmission control step of controlling transmission of a transmission request for one frame of a moving image to an information providing apparatus for providing a moving image via a network; A computer controls a reception control step of controlling reception of one frame of a moving image transmitted from the providing apparatus, and a reproduction step of reproducing a moving image based on the received frame of the moving image. And
[0018]
In the information providing apparatus and method, the first recording medium, and the first program according to the present invention, based on the first video to be provided, the second video having a lower resolution than the first video. Is generated, and the generated second moving image is stored. When a frame transmission request is received from the receiving side, one last stored frame of the stored second moving images is transmitted to the receiving side via the network. Then, the frames stored before the transmitted frame are deleted.
[0019]
A network refers to a mechanism in which at least two devices are connected and information can be transmitted from one device to another device. Devices communicating via the network may be independent devices or internal blocks constituting one device.
[0020]
In addition, reception or transmission is not only reception or transmission by wireless and reception or transmission by wire, but also reception or transmission in which wireless and wire are mixed, that is, reception or transmission by wireless is performed in a certain section, and wired or wireless in another section. May be received or transmitted. Furthermore, reception or transmission from a certain device to another device may be performed by wire, and reception or transmission from another device to a certain device may be performed by wireless communication.
[0021]
The information providing device may be an independent device or a block that performs an information providing process of the information processing device.
[0022]
In the information processing apparatus and method, the second recording medium, and the second program according to the present invention, a transmission request for one frame of a moving image is transmitted to the information providing apparatus that provides the moving image via a network. One frame of a moving image transmitted from the information providing apparatus via the network is received. The moving image is reproduced based on the received frame of the moving image.
[0023]
A network refers to a mechanism in which at least two devices are connected and information can be transmitted from one device to another device. Devices communicating via the network may be independent devices or internal blocks constituting one device.
[0024]
In addition, reception or transmission is not only reception or transmission by wireless and reception or transmission by wire, but also reception or transmission in which wireless and wire are mixed, that is, reception or transmission by wireless is performed in a certain section, and wired or wireless in another section. May be received or transmitted. Furthermore, reception or transmission from a certain device to another device may be performed by wire, and reception or transmission from another device to a certain device may be performed by wireless communication.
[0025]
The information processing device may be an independent device or a block that performs information processing of an electronic device.
[0026]
BEST MODE FOR CARRYING OUT THE INVENTION
FIG. 1 is a diagram showing an embodiment of a communication system according to the present invention.
[0027]
The recording / reproducing device 1 is, for example, a VCR (Videocassette Recorder) or the like, and is connected to a personal computer 3 via a
[0028]
The recording / reproducing apparatus 1 is connected to the
[0029]
The personal computer 3 is connected to the
[0030]
The recording / reproducing apparatus 1 records image and audio data or reads recorded image and audio data by an asynchronous operation as described later.
[0031]
The recording / reproducing apparatus 1 transmits image and audio data read from the mounted video cassette to the personal computer 3 via the
[0032]
The personal computer 3 transmits a predetermined command to the recording / reproducing device 1 via the
[0033]
When displaying an image, the personal computer 3 requests one frame of image data from the recording / reproducing apparatus 1 via the
[0034]
When one frame of image data is requested from the personal computer 3, the recording / reproducing apparatus 1 transmits one frame of image data to the personal computer 3 via the
[0035]
The personal computer 3 displays an image based on the image data of one frame transmitted from the recording / reproducing device 1.
[0036]
It should be noted that metadata such as time code data can be superimposed on the data transmitted from the recording / reproducing apparatus 1.
[0037]
In addition, as a method of the
[0038]
FIG. 2 is a block diagram illustrating a configuration of the recording / reproducing apparatus 1.
[0039]
The system control CPU (Central Processing Unit) 11 is, for example, an embedded computer having a built-in RAM (Random-Access Memory) or a ROM (Read-Only Memory), executes a predetermined control program, and executes the entire recording / reproducing apparatus 1. Control. The
[0040]
The
[0041]
The
[0042]
It should be noted that a desired method can be adopted as a method of image and audio data, and the present invention is not limited to this method.
[0043]
The
[0044]
The buffer memory 16 is a semiconductor memory having a predetermined capacity, such as a DRAM (Dynamic RAM), and stores image and audio data under the control of the
[0045]
The memory monitor 17 acquires data indicating the amount of image and audio data stored in the buffer memory 16 from the
[0046]
The TCP /
[0047]
The
[0048]
Under the control of the
[0049]
The data supplied to the
[0050]
Therefore, the output of the
[0051]
The
[0052]
When data indicating a result of interpretation of a command is supplied from the
[0053]
The drive 22 reads a program or data from the mounted
[0054]
Next, the operation of the recording / reproducing apparatus 1 when reproducing images and sounds recorded on the video cassette mounted on the
[0055]
The memory monitor 17 constantly monitors the amount of image and audio data stored in the buffer memory 16. The memory monitor 17 notifies the
[0056]
The threshold value used for notification of the
[0057]
The memory monitor 17 simply notifies the amount of image and audio data stored in the buffer memory 16 to the
[0058]
The
[0059]
The memory monitor 17 notifies the
[0060]
The threshold value used for notification of the
[0061]
The memory monitor 17 simply notifies the
[0062]
When the memory monitor 17 supplies a notification that the image and audio data stored in the buffer memory 16 has become equal to or less than a predetermined value, the
[0063]
As described above, the operation of stopping the reading of the image and audio data from the video cassette by the
[0064]
The
[0065]
The
[0066]
The low-
[0067]
The low-
[0068]
The
[0069]
The
[0070]
The TCP /
[0071]
As described above, in the recording / reproducing apparatus 1, the running of the tape of the video cassette by the
[0072]
Next, an operation of the recording / reproducing apparatus 1 when recording image and audio data received via the
[0073]
The
[0074]
The TCP /
[0075]
The
[0076]
The memory monitor 17 constantly monitors the amount of image and sound data stored in the buffer memory 16, and when image and sound data equal to or larger than a previously stored threshold value is stored in the buffer memory 16, This is notified to the
[0077]
The process of determining whether or not image and audio data having a threshold value or more has been stored in the buffer memory 16 and whether or not the amount of image and audio data stored in the buffer memory 16 has become equal to or less than the threshold value May be executed by the
[0078]
The
[0079]
The
[0080]
When a notice that more than a certain amount of image and sound data has been stored in the buffer memory 16 is supplied from the
[0081]
When the memory monitor 17 supplies a notification that the image and audio data stored in the buffer memory 16 has become equal to or less than a predetermined value, the
[0082]
The operation of stopping the recording of the image and audio data on the video cassette by the
[0083]
As described above, in the recording / reproducing apparatus 1, independently of the reception of the image and audio data from the
[0084]
FIG. 3 is a diagram illustrating the configuration of the personal computer 3. The
[0085]
The
[0086]
The keyboard 108 is operated by a user when inputting various commands to the
[0087]
The
[0088]
The
[0089]
The
[0090]
FIG. 4 is a flowchart illustrating a process of buffer memory control by the
[0091]
In step S11, the
[0092]
In step S12, for example, based on the first threshold value stored in advance and the data supplied from the
[0093]
In step S14, based on the second threshold value stored in advance and the data supplied from the
[0094]
If it is determined in step S14 that the amount of data stored in the buffer memory 16 is not equal to or smaller than the predetermined value, the process returns to step S14 and the determination process is repeated.
[0095]
In the process of step S13, the reproduction of the
[0096]
If it is determined in step S14 that the amount of data stored in the buffer memory 16 is equal to or smaller than a certain value, the process returns to step S11, where the
[0097]
If it is determined in step S12 that the amount of data stored in the buffer memory 16 is not equal to or more than the predetermined value, the process proceeds to step S15, and the
[0098]
If it is determined in step S15 that the reproduction is not to be ended, the process returns to step S12, and the process of determining whether the amount of data stored in the buffer memory 16 is equal to or more than a certain value is repeated.
[0099]
If it is determined in step S15 that the reproduction is to be ended, the processing ends.
[0100]
As described above, in the data transmission, the
[0101]
FIG. 5 is a flowchart illustrating a process of buffer memory control by the
[0102]
In step S31, based on the first threshold value stored in advance and the data supplied from the
[0103]
If it is determined in step S31 that the amount of data stored in the buffer memory 16 is not equal to or greater than a certain value, the process returns to step S31, and the determination process is repeated until the amount of data becomes equal to or more than a certain value.
[0104]
When it is determined in step S31 that the data stored in the buffer memory 16 is equal to or more than a certain value, the process proceeds to step S32, and the
[0105]
In step S33, based on the second threshold value stored in advance and the data supplied from the
[0106]
If it is determined in step S33 that the amount of data stored in the buffer memory 16 is equal to or smaller than a certain value, the process proceeds to step S34, where the
[0107]
If it is determined in step S33 that the data stored in the buffer memory 16 is not equal to or less than the predetermined value, the process proceeds to step S35, where the
[0108]
If it is determined in step S35 that the recording is not to be ended, the process returns to step S33, and the process of determining whether the amount of data stored in the buffer memory 16 is equal to or less than a certain value is repeated.
[0109]
If it is determined in step S35 that the recording is to be ended, the processing ends.
[0110]
As described above, in the data reception, the
[0111]
Next, processing for transmitting low-rate image and audio data from the recording / reproducing apparatus 1 to the personal computer 3 will be described.
[0112]
The image and audio data set to a low rate by the low-
[0113]
However, when the bandwidth of the
[0114]
Therefore, in response to a request for a frame from the personal computer 3, the recording / reproducing apparatus 1 transmits an image frame.
[0115]
In this case, the processing of communication of image and audio data by the recording / reproducing apparatus 1 executing the control program by the
[0116]
In step S101, the control program causes the low-
[0117]
In step S201, the reproduction program causes the
[0118]
In step S102, the control program causes the TCP /
[0119]
In step S103, the control program sends the latest one frame of data to the personal computer 3. That is, the control program causes the
[0120]
In step S202, the playback program receives one frame of data transmitted from the recording and playback device 1.
[0121]
More specifically,
[0122]
In step S203, the reproduction program reproduces an image or sound based on the data received in the processing of step S202, for example, displays the image on the display 110, outputs sound from a speaker (not shown), and Returning to S201, the reproduction process is repeated.
[0123]
In step S104, the control program causes the
[0124]
The erasing of the frame in the process of step S104 is not limited to the process of rewriting the entity of the data of the frame to another data, and the frame cannot be read by changing the management data of the buffer memory 16 or the like. And the like. For example, when the buffer memory 16 is a ring buffer, moving a pointer to a state where frames cannot be read also means erasing a frame.
[0125]
By doing so, even when the bandwidth of the
[0126]
More specifically, when a VCR tape travel control command such as playback or high-speed playback is transmitted from the personal computer 3 to the recording / reproduction device 1, recording / reproduction is performed quickly and in real time in response to the transmission of the VCR tape travel control command. The device 1 can respond.
[0127]
In this way, when a moving image is transmitted via a network, the receiving side can receive the moving image.
[0128]
Further, based on the first moving image to be provided, a second moving image having a lower resolution than the first moving image is generated, and storage of the generated second moving image is controlled. When a frame transmission request is received from the receiving side, transmission of the last stored one frame of the stored second moving image to the receiving side via the network is controlled and transmitted. If a frame stored before the stored frame is deleted, the real-time moving image can be maintained on the receiving side regardless of the bandwidth of the network or the calculation speed of the receiving side.
[0129]
When the moving image transmitted from the information providing apparatus is received via the network, the moving image can be reproduced.
[0130]
Also, transmission of a request for transmission of one frame of the moving image to the information providing apparatus that provides the moving image via the network is controlled, and one of the moving images transmitted from the information providing apparatus via the network is controlled. In the case of controlling the reception of two frames and reproducing the moving image based on the received frame of the moving image, the real-time property of the moving image can be maintained regardless of the network bandwidth or the calculation speed Become like
[0131]
Although it has been described that the image and audio data are recorded on a video cassette, the recording is not limited to a tape such as a video cassette, but may be recorded on another type of recording medium such as a magnetic disk, an optical disk, a magneto-optical disk, or a semiconductor memory. You may make it. Similarly, the recording / reproducing apparatus 1 as an example of the information providing apparatus is not limited to a VCR, but may be another type of apparatus such as a personal computer, a DVD recorder, an MD (Mini-Disc) (trademark) recorder, or a server. it can.
[0132]
Although it has been described that image and audio data is recorded and transmitted, the present invention is not limited to image and audio data, but may be data transmitted as a stream such as audio-only data, image-only data, or numerical data. For example, the present invention can be applied.
[0133]
Note that the personal computer 3 as an example of the information processing device may be another type of device such as a PDA (Personal Digital Assistant) or a mobile phone.
[0134]
The series of processes described above can be executed by hardware, but can also be executed by software. When a series of processing is executed by software, a program constituting the software may execute various functions by installing a computer built into dedicated hardware or installing various programs. It is installed from a recording medium into a possible general-purpose personal computer or the like.
[0135]
As shown in FIG. 2 or FIG. 3, this recording medium is distributed separately from a computer in order to provide a program to a user, and is recorded on a
[0136]
The program for executing the above-described series of processes is installed on a computer via a wired or wireless communication medium such as a local area network, the Internet, or digital satellite broadcasting via an interface such as a router or a modem as necessary. May be performed.
[0137]
In this specification, the step of describing a program stored in a recording medium may be performed in chronological order according to the described order, or may be performed in parallel or not necessarily in chronological order. This also includes processes executed individually.
[0138]
In the present specification, the system represents the entire device including a plurality of devices.
[0139]
【The invention's effect】
As described above, according to the first aspect of the present invention, a moving image can be received on the receiving side.
[0140]
Further, according to the first aspect of the present invention, it is possible to maintain the real-time property of a moving image on the receiving side regardless of the bandwidth of the network or the calculation speed of the receiving side.
[0141]
According to the second aspect of the present invention, a moving image can be reproduced.
[0142]
Further, according to the second aspect of the present invention, it is possible to maintain the real-time property of the moving image regardless of the bandwidth of the network or the calculation speed.
[Brief description of the drawings]
FIG. 1 is a diagram showing an embodiment of a communication system according to the present invention.
FIG. 2 is a block diagram showing a configuration of the recording / reproducing apparatus 1.
FIG. 3 is a diagram illustrating a configuration of a personal computer 3.
FIG. 4 is a flowchart illustrating processing of buffer memory control when transmitting image and audio data recorded on a video cassette via a
FIG. 5 is a flowchart illustrating a process of controlling a buffer memory when recording image and audio data received via a
FIG. 6 is a flowchart illustrating a process of communicating image and audio data.
[Explanation of symbols]
Reference Signs List 1 recording / reproducing device, 2 network, 3 personal computer, 11 system control CPU, 12 VCR system unit, 15 memory controller, 16 buffer memory, 17 memory monitor, 18 TCP / IP processing unit, 19 network interface, 20 low resolution encoder , 22 drive, 41 magnetic disk, 42 optical disk, 43 magneto-optical disk, 44 semiconductor memory, 101 CPU, 102 ROM, 103 RAM, 110 display, 111 HDD, 113 communication unit, 131 magnetic disk, 132 optical disk, 133 magneto-optical disk , 134 Semiconductor Memory
Claims (8)
生成された前記第2の動画像の記憶を制御する記憶制御手段と、
受信側からフレームの送信要求が受信された場合、ネットワークを介した、記憶されている前記第2の動画像のうちの、最後に記憶された1つのフレームの受信側への送信を制御する送信制御手段と、
送信された前記フレームより以前に記憶されたフレームを消去する消去手段と
を含むことを特徴とする情報提供装置。Generating means for generating a second moving image having a lower resolution than the first moving image based on the first moving image to be provided;
Storage control means for controlling storage of the generated second moving image;
When a frame transmission request is received from the receiving side, transmission for controlling transmission of the last stored one frame of the stored second moving image to the receiving side via the network. Control means;
Erasing means for erasing a frame stored before the transmitted frame.
生成された前記第2の動画像の記憶を制御する記憶制御ステップと、
受信側からフレームの送信要求が受信された場合、ネットワークを介した、記憶されている前記第2の動画像のうちの、最後に記憶された1つのフレームの受信側への送信を制御する送信制御ステップと、
送信された前記フレームより以前に記憶されたフレームを消去する消去ステップと
を含むことを特徴とする情報提供方法。A generating step of generating a second moving image having a lower resolution than the first moving image based on the first moving image to be provided;
A storage control step of controlling storage of the generated second moving image;
When a frame transmission request is received from the receiving side, transmission for controlling transmission of the last stored one frame of the stored second moving image to the receiving side via the network. A control step;
An erasing step of erasing a frame stored before the transmitted frame.
生成された前記第2の動画像の記憶を制御する記憶制御ステップと、
受信側からフレームの送信要求が受信された場合、ネットワークを介した、記憶されている前記第2の動画像のうちの、最後に記憶された1つのフレームの受信側への送信を制御する送信制御ステップと、
送信された前記フレームより以前に記憶されたフレームを消去する消去ステップと
を含むことを特徴とする情報提供処理をコンピュータに実行させるプログラムが記録されている記録媒体。A generating step of generating a second moving image having a lower resolution than the first moving image based on the first moving image to be provided;
A storage control step of controlling storage of the generated second moving image;
When a frame transmission request is received from the receiving side, transmission for controlling transmission of the last stored one frame of the stored second moving image to the receiving side via the network. A control step;
An erasing step of erasing a frame stored before the transmitted frame, wherein a program for causing a computer to execute an information providing process is recorded.
生成された前記第2の動画像の記憶を制御する記憶制御ステップと、
受信側からフレームの送信要求が受信された場合、ネットワークを介した、記憶されている前記第2の動画像のうちの、最後に記憶された1つのフレームの受信側への送信を制御する送信制御ステップと、
送信された前記フレームより以前に記憶されたフレームを消去する消去ステップと
をコンピュータに実行させることを特徴とするプログラム。A generating step of generating a second moving image having a lower resolution than the first moving image based on the first moving image to be provided;
A storage control step of controlling storage of the generated second moving image;
When a frame transmission request is received from the receiving side, transmission for controlling transmission of the last stored one frame of the stored second moving image to the receiving side via the network. A control step;
An erasing step of erasing a frame stored before the transmitted frame.
前記ネットワークを介して、前記情報提供装置から送信された、前記動画像の1つの前記フレームの受信を制御する受信制御手段と、
受信された前記動画像の前記フレームを基に、前記動画像を再生する再生手段と
を含むことを特徴とする情報処理装置。Transmission control means for controlling transmission of a transmission request for one frame of the moving image to an information providing apparatus for providing the moving image via a network;
Via the network, transmitted from the information providing apparatus, reception control means for controlling the reception of one of the frames of the moving image,
An information processing apparatus comprising: a reproducing unit configured to reproduce the moving image based on the received frame of the moving image.
前記ネットワークを介して、前記情報提供装置から送信された、前記動画像の1つの前記フレームの受信を制御する受信制御ステップと、
受信された前記動画像の前記フレームを基に、前記動画像を再生する再生ステップと
を含むことを特徴とする情報処理方法。A transmission control step of controlling transmission of a transmission request for one frame of the moving image to an information providing apparatus for providing a moving image via a network;
Via the network, transmitted from the information providing device, a reception control step of controlling the reception of one of the frames of the moving image,
A reproducing step of reproducing the moving image based on the received frame of the moving image.
前記ネットワークを介して、前記情報提供装置から送信された、前記動画像の1つの前記フレームの受信を制御する受信制御ステップと、
受信された前記動画像の前記フレームを基に、前記動画像を再生する再生ステップと
を含むことを特徴とする情報処理をコンピュータに実行させるプログラムが記録されている記録媒体。A transmission control step of controlling transmission of a transmission request for one frame of the moving image to an information providing apparatus for providing a moving image via a network;
Via the network, transmitted from the information providing device, a reception control step of controlling the reception of one of the frames of the moving image,
A reproducing step of reproducing the moving image based on the received frame of the moving image. A recording medium storing a program for causing a computer to execute information processing.
前記ネットワークを介して、前記情報提供装置から送信された、前記動画像の1つの前記フレームの受信を制御する受信制御ステップと、
受信された前記動画像の前記フレームを基に、前記動画像を再生する再生ステップと
をコンピュータに実行させることを特徴とするプログラム。A transmission control step of controlling transmission of a transmission request for one frame of the moving image to an information providing apparatus for providing a moving image via a network;
Via the network, transmitted from the information providing device, a reception control step of controlling the reception of one of the frames of the moving image,
And a reproducing step of reproducing the moving image based on the received frame of the moving image.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2002219086A JP2004064366A (en) | 2002-07-29 | 2002-07-29 | Information providing apparatus and method, information processing apparatus and method, recording medium, and program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2002219086A JP2004064366A (en) | 2002-07-29 | 2002-07-29 | Information providing apparatus and method, information processing apparatus and method, recording medium, and program |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2004064366A true JP2004064366A (en) | 2004-02-26 |
Family
ID=31940074
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2002219086A Withdrawn JP2004064366A (en) | 2002-07-29 | 2002-07-29 | Information providing apparatus and method, information processing apparatus and method, recording medium, and program |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2004064366A (en) |
-
2002
- 2002-07-29 JP JP2002219086A patent/JP2004064366A/en not_active Withdrawn
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8134605B2 (en) | Apparatus for transmitting an HTML file with a captured or stored image to an electronic device over a network | |
US7890985B2 (en) | Server-side media stream manipulation for emulation of media playback functions | |
JP4772297B2 (en) | Media Foundation Media Processor | |
WO2013008867A1 (en) | Transmission device, method for controlling transmission device, control program, and recording medium | |
JP5211569B2 (en) | Content reproduction apparatus, content reproduction method, and program | |
JP2008262686A (en) | Method and device for recording broadcast data | |
US20100166387A1 (en) | Method and apparatus for playing video data of high bit rate format by a player capable of playing video data of low bit rate format | |
JP2002314975A (en) | Method and computer network for obtaining audio and/or video program of higher quality version progressively | |
WO2006007352A1 (en) | Method and system for interactive control of media over a network | |
JP2009044416A (en) | Content playback device, content playback method, program, and content playback system | |
US20110310965A1 (en) | Communication device, communication method, and communication program product | |
US20080175559A1 (en) | Image process apparatus and method thereof | |
JP5282383B2 (en) | Content reproduction apparatus, content reproduction method, program, and content reproduction system | |
JP2003209807A (en) | Moving picture reproducing method and apparatus | |
JP2006332759A (en) | Electronic apparatus, image control method, and program for image control | |
JP6294527B2 (en) | Transmission device, transmission method, reproduction device, and reproduction method | |
JP2004356829A (en) | Data receiving reproducing method and data receiving reproducing apparatus | |
JP2004064366A (en) | Information providing apparatus and method, information processing apparatus and method, recording medium, and program | |
JP2006339980A (en) | Image reproducer | |
JP3977090B2 (en) | Data processing device | |
JP2005110024A (en) | Data transmitter, data transmission/reception system, and data transmission/reception method | |
JP4207483B2 (en) | Transmitter | |
KR101378092B1 (en) | Method for searching streaming data skip and device thereof | |
KR101226184B1 (en) | Digital video recorder system and driving method thereof | |
JP2005278201A (en) | Data transfer apparatus, and data transfer method |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A300 | Application deemed to be withdrawn because no request for examination was validly filed |
Free format text: JAPANESE INTERMEDIATE CODE: A300 Effective date: 20051004 |