JP2004064366A - Information providing apparatus and method, information processing apparatus and method, recording medium, and program - Google Patents

Information providing apparatus and method, information processing apparatus and method, recording medium, and program Download PDF

Info

Publication number
JP2004064366A
JP2004064366A JP2002219086A JP2002219086A JP2004064366A JP 2004064366 A JP2004064366 A JP 2004064366A JP 2002219086 A JP2002219086 A JP 2002219086A JP 2002219086 A JP2002219086 A JP 2002219086A JP 2004064366 A JP2004064366 A JP 2004064366A
Authority
JP
Japan
Prior art keywords
moving image
frame
image
network
transmission
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
JP2002219086A
Other languages
Japanese (ja)
Inventor
Toshiaki Kojima
児島 俊明
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Priority to JP2002219086A priority Critical patent/JP2004064366A/en
Publication of JP2004064366A publication Critical patent/JP2004064366A/en
Withdrawn legal-status Critical Current

Links

Images

Abstract

<P>PROBLEM TO BE SOLVED: To maintain the real-time property of a motion image, regardless of the band of a network or an operation speed at a receiver side. <P>SOLUTION: A low-resolution encoder 20 generates a motion image having a resolution lower than that of an original motion image on the basis of the motion image provided from a decoder 13. A memory controller 15 controls the storage of the low-resolution motion image into a buffer memory 16. When a transmission request of a frame is received from the receiver side, a system control CPU 11 controls the transmission of a single frame which is lastly stored among the low-resolution motion images stored in the buffer memory 16 to the receiver side via a network 2. The CPU 11 makes the memory controller 15 delete frames stored before the transmitted frame. This apparatus is applicable to a recording/reproducing apparatus 1 constituting a communication system. <P>COPYRIGHT: (C)2004,JPO

Description

【0001】
【発明の属する技術分野】
本発明は、情報提供装置および方法、情報処理装置および方法、記録媒体、並びにプログラムに関し、特に、動画像を提供するか、または提供された動画像を再生する情報提供装置および方法、情報処理装置および方法、記録媒体、並びにプログラムに関する。
【0002】
【従来の技術】
低解像度の画像または音声を、ネットワークを介して、送受信することは、一般的に行われている。
【0003】
第1に、観賞用に、画像または音声を送受信することが行われている。
【0004】
観賞用に、画像または音声を送受信する場合、原則にPLAYモード(いわゆる、ストリーム)で、画像または音声が送受信される。PLAYモードで、画像または音声を送受信する場合、一般的に受信側にバッファを設け、このバッファの作用により、ネットワークの帯域やパーソナルコンピュータの演算速度による揺らぎが吸収される。PLAY以外のモードでも、画像または音声の送受信は可能であるが、バッファが設けられているので、リアルタイム性に欠ける。
【0005】
第2に、オンライン編集のために、ファイルとして完全なデータが送受信される場合がある。この場合、リアルタイム性は要求されない。
【0006】
第3に、ファイル作成のため、ファイルの先頭やファイルの終了点を探すために画像または音声が送受信される。この場合、反転や速度変化に対応するリアルタイム性が強く求められる。
【0007】
特に、第3の用途では、リアルタイム性が強く求められるが、画像および音声のデータを全て送信する場合、要求される送信速度に対して、ネットワークの帯域が狭い場合、または受信側のパーソナルコンピュータの演算速度が遅い場合、処理が間に合わなくなり、その結果、リアルタイム性は悪化してしまう。
【0008】
【発明が解決しようとする課題】
このように動画像を通信するとき、ネットワークの帯域が狭いとき、または受信側のパーソナルコンピュータの演算速度が遅いとき、リアルタイム性を維持できない場合があるという問題がある。
【0009】
本発明はこのような状況に鑑みてなされたものであり、ネットワークの帯域、または受信側の演算速度に関わらず、動画像のリアルタイム性を維持できるようにすることを目的とする。
【0010】
【課題を解決するための手段】
本発明の情報提供装置は、提供しようとする第1の動画像を基に、第1の動画像に比較して解像度の低い第2の動画像を生成する生成手段と、生成された第2の動画像の記憶を制御する記憶制御手段と、受信側からフレームの送信要求が受信された場合、ネットワークを介した、記憶されている第2の動画像のうちの、最後に記憶された1つのフレームの受信側への送信を制御する送信制御手段と、送信されたフレームより以前に記憶されたフレームを消去する消去手段とを含むことを特徴とする。
【0011】
本発明の情報提供方法は、提供しようとする第1の動画像を基に、第1の動画像に比較して解像度の低い第2の動画像を生成する生成ステップと、生成された第2の動画像の記憶を制御する記憶制御ステップと、受信側からフレームの送信要求が受信された場合、ネットワークを介した、記憶されている第2の動画像のうちの、最後に記憶された1つのフレームの受信側への送信を制御する送信制御ステップと、送信されたフレームより以前に記憶されたフレームを消去する消去ステップとを含むことを特徴とする。
【0012】
本発明の第1の記録媒体のプログラムは、提供しようとする第1の動画像を基に、第1の動画像に比較して解像度の低い第2の動画像を生成する生成ステップと、生成された第2の動画像の記憶を制御する記憶制御ステップと、受信側からフレームの送信要求が受信された場合、ネットワークを介した、記憶されている第2の動画像のうちの、最後に記憶された1つのフレームの受信側への送信を制御する送信制御ステップと、送信されたフレームより以前に記憶されたフレームを消去する消去ステップとを含むことを特徴とする。
【0013】
本発明の第1のプログラムは、提供しようとする第1の動画像を基に、第1の動画像に比較して解像度の低い第2の動画像を生成する生成ステップと、生成された第2の動画像の記憶を制御する記憶制御ステップと、受信側からフレームの送信要求が受信された場合、ネットワークを介した、記憶されている第2の動画像のうちの、最後に記憶された1つのフレームの受信側への送信を制御する送信制御ステップと、送信されたフレームより以前に記憶されたフレームを消去する消去ステップとをコンピュータに実行させることを特徴とする。
【0014】
本発明の情報処理装置は、動画像を提供する情報提供装置への、ネットワークを介した、動画像の1つのフレームの送信要求の送信を制御する送信制御手段と、ネットワークを介して、情報提供装置から送信された、動画像の1つのフレームの受信を制御する受信制御手段と、受信された動画像のフレームを基に、動画像を再生する再生手段とを含むことを特徴とする。
【0015】
本発明の情報処理方法は、動画像を提供する情報提供装置への、ネットワークを介した、動画像の1つのフレームの送信要求の送信を制御する送信制御ステップと、ネットワークを介して、情報提供装置から送信された、動画像の1つのフレームの受信を制御する受信制御ステップと、受信された動画像のフレームを基に、動画像を再生する再生ステップとを含むことを特徴とする。
【0016】
本発明の第2の記録媒体のプログラムは、動画像を提供する情報提供装置への、ネットワークを介した、動画像の1つのフレームの送信要求の送信を制御する送信制御ステップと、ネットワークを介して、情報提供装置から送信された、動画像の1つのフレームの受信を制御する受信制御ステップと、受信された動画像のフレームを基に、動画像を再生する再生ステップとを含むことを特徴とする。
【0017】
本発明の第2のプログラムは、動画像を提供する情報提供装置への、ネットワークを介した、動画像の1つのフレームの送信要求の送信を制御する送信制御ステップと、ネットワークを介して、情報提供装置から送信された、動画像の1つのフレームの受信を制御する受信制御ステップと、受信された動画像のフレームを基に、動画像を再生する再生ステップとをコンピュータに実行させることを特徴とする。
【0018】
本発明の情報提供装置および方法、第1の記録媒体、並びに第1のプログラムにおいては、提供しようとする第1の動画像を基に、第1の動画像に比較して解像度の低い第2の動画像が生成され、生成された第2の動画像が記憶される。受信側からフレームの送信要求が受信された場合、ネットワークを介して、記憶されている第2の動画像のうちの、最後に記憶された1つのフレームが受信側に送信される。そして、送信されたフレームより以前に記憶されたフレームが消去される。
【0019】
ネットワークとは、少なくとも2つの装置が接続され、ある装置から、他の装置に対して、情報の伝達をできるようにした仕組みをいう。ネットワークを介して通信する装置は、独立した装置どうしであっても良いし、1つの装置を構成している内部ブロックどうしであってもよい。
【0020】
また、受信または送信は、無線による受信または送信および有線による受信または送信は勿論、無線と有線が混在した受信または送信、即ち、ある区間では無線による受信または送信が行われ、他の区間では有線による受信または送信が行われるものであっても良い。さらに、ある装置から他の装置への受信または送信が有線でおこなわれ、他の装置からある装置への受信または送信が無線通信で行われるようなものであってもよい。
【0021】
情報提供装置は、独立した装置であっても良いし、情報処理装置の情報提供処理を行うブロックであっても良い。
【0022】
本発明の情報処理装置および方法、第2の記録媒体、並びに第2のプログラムにおいては、動画像を提供する情報提供装置に、ネットワークを介して、動画像の1つのフレームの送信要求が送信され、ネットワークを介して、情報提供装置から送信された、動画像の1つのフレームが受信される。受信された動画像のフレームを基に、動画像が再生される。
【0023】
ネットワークとは、少なくとも2つの装置が接続され、ある装置から、他の装置に対して、情報の伝達をできるようにした仕組みをいう。ネットワークを介して通信する装置は、独立した装置どうしであっても良いし、1つの装置を構成している内部ブロックどうしであってもよい。
【0024】
また、受信または送信は、無線による受信または送信および有線による受信または送信は勿論、無線と有線が混在した受信または送信、即ち、ある区間では無線による受信または送信が行われ、他の区間では有線による受信または送信が行われるものであっても良い。さらに、ある装置から他の装置への受信または送信が有線でおこなわれ、他の装置からある装置への受信または送信が無線通信で行われるようなものであってもよい。
【0025】
情報処理装置は、独立した装置であっても良いし、電子機器の情報処理を行うブロックであっても良い。
【0026】
【発明の実施の形態】
図1は、本発明に係る通信システムの一実施の形態を示す図である。
【0027】
記録再生装置1は、例えば、VCR(Videocassette Recorder)などであり、ローカルエリアネットワークまたはインターネットなどのネットワーク2を介して、パーソナルコンピュータ3と接続されている。
【0028】
記録再生装置1は、例えば、100Base−Tなどの規格に準拠するネットワークケーブル4−1を介して、ネットワーク2に接続されている。
【0029】
パーソナルコンピュータ3は、例えば、100Base−Tなどのネットワークケーブル4−2を介して、ネットワーク2に接続されている。
【0030】
記録再生装置1は、後述するような、アシンクロナスな動作により、画像および音声のデータを記録するか、または記録されている画像および音声のデータを読み出す。
【0031】
記録再生装置1は、装着されているビデオカセットから読み出した画像および音声のデータをネットワーク2を介してパーソナルコンピュータ3に送信する。記録再生装置1は、ネットワーク2を介して、例えばパーソナルコンピュータ3から供給された画像および音声のデータを装着されているビデオカセットに記録する。
【0032】
パーソナルコンピュータ3は、ネットワーク2を介して、所定のコマンドを記録再生装置1に送信し、記録再生装置1を制御する。
【0033】
画像を表示するとき、パーソナルコンピュータ3は、ネットワーク2を介して、記録再生装置1に1フレームの画像のデータを要求する。
【0034】
パーソナルコンピュータ3から1フレームの画像のデータが要求されたとき、記録再生装置1は、ネットワーク2を介して、1フレームの画像のデータをパーソナルコンピュータ3に送信する。
【0035】
パーソナルコンピュータ3は、記録再生装置1から送信された、1フレームの画像のデータを基に、画像を表示する。
【0036】
なお、記録再生装置1から送信されるデータには、タイムコードデータ等のメタデータを重畳することができる。
【0037】
また、ネットワーク2の方式は、有線または無線などの任意の方式を採用することができ、本発明を限定するものではない。
【0038】
図2は、記録再生装置1の構成を示すブロック図である。
【0039】
システム制御CPU(Central Processing Unit)11は、例えば、RAM(Random−Access Memory)またはROM(Read−only Memory)などを内蔵するエンベデットコンピュータからなり、所定の制御プログラムを実行し、記録再生装置1全体を制御する。VCRシステム部12は、システム制御CPU11の制御の基に、記録再生装置1に装着されているビデオカセットのテープを走行させ、画像および音声のデータの記録または再生を実行する。VCRシステム部12は、装着されているビデオカセットに記録されている画像および音声のデータを再生するとき、装着されているビデオカセットに記録されている画像および音声のデータを読み出して、読み出した画像および音声のデータをデコーダ13に供給する。VCRシステム部12は、画像および音声のデータを装着されているビデオカセットに記録するとき、エンコーダ14から供給された画像および音声のデータをビデオカセットに記録する。
【0040】
デコーダ13は、システム制御CPU11の制御の基に、VCRシステム部12から供給された画像および音声のデータを、復号し、復号された画像および音声のデータをメモリコントローラ15および低解像度エンコーダ20に供給する。例えば、デコーダ13は、システム制御CPU11の制御の基に、モーションJPEG(Joint Photographic Experts Group)方式、またはMPEG(Motion Picture Experts Group)2方式で符号化されている画像および音声のデータを復号する。
【0041】
エンコーダ14は、システム制御CPU11の制御の基に、メモリコントローラ15から供給された画像および音声のデータを、所定の方式で符号化し、符号化された画像および音声のデータをVCRシステム部12に供給する。例えば、エンコーダ14は、システム制御CPU11の制御の基に、メモリコントローラ15から供給された画像および音声のデータを、モーションJPEG方式、またはMPEG2方式で符号化する。
【0042】
なお、画像および音声のデータの方式は、所望の方式を採用することができ、本発明を限定するものではない。
【0043】
メモリコントローラ15は、デコーダ13またはTCP/IP処理部18から供給された画像および音声のデータをバッファメモリ16に順に記憶させ、バッファメモリ16に記憶されている画像および音声のデータを、エンコーダ14またはTCP/IP処理部18に順に供給する。
【0044】
バッファメモリ16は、DRAM(Dynamic RAM)などからなる、所定の容量の半導体メモリであり、メモリコントローラ15の制御の基に、画像および音声のデータを記憶し、記憶されている画像および音声のデータを読み出す。バッファメモリ16は、例えば、リングバッファとして、メモリコントローラ15に制御される。
【0045】
メモリ監視器17は、メモリコントローラ15からバッファメモリ16に格納されている画像および音声のデータの量を示すデータを取得し、取得したデータをシステム制御CPU11に供給する。
【0046】
TCP/IP処理部18は、システム制御CPU11の制御の基に、TCP(TransmissionControl Protocol)の処理およびIP(Internet Protocol)の処理を実行し、メモリコントローラ15から供給された画像および音声のデータを所定のパケットに格納して、ネットワークインタフェース19に供給する。TCP/IP処理部18は、ネットワークインタフェース19からパケットを受信したとき、TCPの処理およびIPの処理を実行し、パケットに格納されているデータ抽出して、抽出したデータをメモリコントローラ15に供給するか、またはパケットに格納されているコマンドを抽出して、抽出したコマンドをコマンドインタプリタ21に供給する。
【0047】
ネットワークインタフェース19は、例えば、NIC(Network Interface Card)などからなり、TCP/IP処理部18から供給されたパケットをネットワーク2に送信し、ネットワーク2から受信したパケットをTCP/IP処理部18に供給する。
【0048】
低解像度エンコーダ20は、システム制御CPU11の制御の基に、デコーダ13から供給された画像および音声のデータを、より低解像度の画像および音声のデータ、すなわち単位時間当たりの情報量の少ないデータ(低レートのデータ)に変換し、変換した画像および音声のデータをメモリコントローラ15に供給する。
【0049】
デコーダ13に供給されるデータは、高レートのデータ(単位時間当たりの情報量の多いデータ)であり、そのままネットワーク2に送出すると、ネットワーク2の帯域(単位時間当たりに通信可能なデータ量)の制限により、後述するように、VCRシステム部12のビデオカセットからの画像および音声のデータの読み出しが停止される可能性が高い。
【0050】
そこで、デコーダ13の出力を低解像度エンコーダ20に通して、低レートな画像および音声のデータに変換し、低レートとされた画像および音声のデータをメモリコントローラ15を介して、バッファメモリ16に記憶させる経路を追加する。
【0051】
コマンドインタプリタ21は、TCP/IP処理部18から供給された、パケットから抽出されたコマンドを解釈して、解釈された結果を示すデータをシステム制御CPU11に供給する。例えば、コマンドインタプリタ21は、パケットから抽出されたVCRテープ走行制御コマンドを解釈して、解釈された結果を示すデータをシステム制御CPU11に供給する。
【0052】
システム制御CPU11は、コマンドインタプリタ21から、コマンドが解釈された結果を示すデータが供給されたとき、コマンドに対応する制御を実行する。例えば、システム制御CPU11は、VCRテープ走行制御コマンドに対応するデータを基に、VCRシステム部12の速度制御を実行する。VCRシステム部12は、システム制御CPU11による速度制御の基に、装着されているビデオカセットから画像および音声のデータを読み出し、読み出した画像および音声のデータをデコーダ13に供給する。
【0053】
ドライブ22は、装着されている磁気ディスク41、光ディスク42、光磁気ディスク43、または半導体メモリ44からプログラムまたはデータを読み出し、読み出したプログラムまたはデータをシステム制御CPU11に供給する。
【0054】
次に、VCRシステム部12に装着されたビデオカセットに記録されている画像および音声を再生するときの、記録再生装置1の動作を説明する。
【0055】
メモリ監視器17は、バッファメモリ16に格納される画像および音声のデータの量を常に監視する。メモリ監視器17は、予め記憶している閾値以上の画像および音声のデータがバッファメモリ16に格納されたとき、その旨をシステム制御CPU11に通知する。例えば、メモリ監視器17は、バッファメモリ16の容量の85%以上の量の画像および音声のデータがバッファメモリ16に格納されたとき、その旨をシステム制御CPU11に通知する。
【0056】
システム制御CPU11の通知に使用する閾値の値は、任意に設定することができる。
【0057】
なお、メモリ監視器17は、単に、バッファメモリ16に格納される画像および音声のデータの量をシステム制御CPU11に通知し、システム制御CPU11が、閾値以上の画像および音声のデータがバッファメモリ16に格納されたか否かを判定するようにしてもよい。
【0058】
システム制御CPU11は、一定以上の画像および音声のデータがバッファメモリ16に格納された旨の通知がメモリ監視器17から供給されたとき、VCRシステム部12に、ビデオカセットのテープの走行を停止させ、次の再生に備え待機させる。
【0059】
メモリ監視器17は、バッファメモリ16に格納されている画像および音声のデータの量が、予め記憶している閾値以下になったとき、その旨をシステム制御CPU11に通知する。例えば、メモリ監視器17は、バッファメモリ16に格納されている画像および音声のデータの量が、バッファメモリ16の容量の15%以下になったとき、その旨をシステム制御CPU11に通知する。
【0060】
システム制御CPU11の通知に使用する閾値の値は、任意に設定することができる。
【0061】
なお、メモリ監視器17は、単に、バッファメモリ16に格納される画像および音声のデータの量をシステム制御CPU11に通知し、システム制御CPU11が、バッファメモリ16に格納されている画像および音声のデータの量が、予め記憶している閾値以下になったか否かを判定するようにしてもよい。
【0062】
システム制御CPU11は、バッファメモリ16に格納されている、画像および音声のデータが一定以下になった旨の通知がメモリ監視器17から供給されたとき、VCRシステム部12に、ビデオカセットのテープの走行を開始させる。VCRシステム部12は、ビデオカセットから読み出した画像および音声のデータをデコーダ13に供給する。
【0063】
このように、バッファメモリ16に格納されている画像および音声のデータの量に対応して、VCRシステム部12によるビデオカセットからの画像および音声のデータの読み出しを停止する動作、および開始する動作が繰り返される。
【0064】
デコーダ13は、VCRシステム部12から供給された画像および音声のデータを復号し、復号された画像および音声のデータを、メモリコントローラ15または低解像度エンコーダ20に供給する。デコーダ13が復号した画像および音声のデータをそのままパーソナルコンピュータ3に送信するとき、デコーダ13は、復号された画像および音声のデータをメモリコントローラ15に供給する。
【0065】
デコーダ13が復号した画像および音声のデータに比較し、より低解像度の画像および音声のデータをパーソナルコンピュータ3に送信するとき、デコーダ13は、復号された画像および音声のデータを低解像度エンコーダ20に供給する。
【0066】
低解像度エンコーダ20は、デコーダ13から供給された画像および音声のデータを基に、より低解像度の画像および音声のデータを生成する。ここで、低解像度とは、空間方向に低解像度である場合、すなわち、1フレーム当たりの画素の数を減らした場合と、時間方向に低解像度である場合、すなわち、単位時間当たりのフレームの数を減らした場合の双方を含む。
【0067】
低解像度エンコーダ20は、生成した低解像度の画像および音声のデータをメモリコントローラ15に供給する。
【0068】
メモリコントローラ15は、デコーダ13または低解像度エンコーダ20から供給された画像および音声のデータをバッファメモリ16に記憶させる。
【0069】
システム制御CPU11は、メモリ監視器17から供給された信号(メモリ格納情報)を基に、バッファメモリ16に格納されている画像および音声のデータの量を認識する。システム制御CPU11は、所定の量の画像および音声のデータがバッファメモリ16に格納されているとき、ネットワーク2の帯域に合わせて、メモリコントローラ15に、バッファメモリ16に記憶されている、次に送信すべき画像および音声のデータを読み出させる。メモリコントローラ15は、読み出した画像および音声のデータを、TCP/IP処理部18に供給する。
【0070】
TCP/IP処理部18は、メモリコントローラ15から供給された、画像および音声のデータを所定のパケットに格納して、ネットワークインターフェース19に供給する。ネットワークインターフェース19は、TCP/IP処理部18から供給された、画像および音声のデータが格納されているパケットを、ネットワーク2を介して、パーソナルコンピュータ3に送信する。
【0071】
このように、記録再生装置1において、バッファメモリ16に格納されている画像および音声のデータの量を基に、VCRシステム部12によるビデオカセットのテープの走行が制御され、ネットワーク2への画像および音声のデータの送出も、バッファメモリ16に格納されている画像および音声のデータの量を基に、制御される。すなわち、記録再生装置1において、バッファメモリ16を境に、ビデオカセットからの画像および音声のデータの読み出しの動作と、ネットワーク2への画像および音声のデータの送出の動作とは、完全に独立している(アシンクロナス)と言える。
【0072】
次に、ネットワーク2を介して受信した画像および音声のデータを、VCRシステム部12に装着されたビデオカセットに記録するときの、記録再生装置1の動作を説明する。
【0073】
ネットワークインターフェース19は、VCRシステム部12に装着されているビデオカセットに記録可能なレート以下の任意のレートで、ネットワーク2を介して送信されて来た、画像および音声のデータが格納されているパケットを受信し、受信したパケットをTCP/IP処理部18に供給する。
【0074】
TCP/IP処理部18は、ネットワークインターフェース19から供給されたパケットから画像および音声のデータを抽出して、抽出した画像および音声のデータをメモリコントローラ15に供給する。
【0075】
メモリコントローラ15は、TCP/IP処理部18から供給された画像および音声のデータをバッファメモリ16に格納する。
【0076】
メモリ監視器17は、バッファメモリ16に格納されている画像および音声のデータの量を常に監視し、予め記憶している閾値以上の画像および音声のデータがバッファメモリ16に格納されたとき、その旨をシステム制御CPU11に通知する。また、メモリ監視器17は、バッファメモリ16に格納されている画像および音声のデータの量が、予め記憶している閾値以下になったとき、その旨をシステム制御CPU11に通知する。
【0077】
なお、閾値以上の画像および音声のデータがバッファメモリ16に格納されたか否かの判定の処理、およびバッファメモリ16に格納されている画像および音声のデータの量が、閾値以下になったか否かの判定の処理は、システム制御CPU11により実行されるようにしてもよい。
【0078】
システム制御CPU11は、一定以上の画像および音声のデータがバッファメモリ16に格納された旨の通知がメモリ監視器17から供給されたとき、メモリコントローラ15に、画像および音声のデータをバッファメモリ16から読み出させる。メモリコントローラ15は、読み出した画像および音声のデータをエンコーダ14に供給する。
【0079】
エンコーダ14は、メモリコントローラ15から供給された画像および音声のデータを、所定の符号化方式で符号化し、符号化された画像および音声のデータをVCRシステム部12に供給する。
【0080】
システム制御CPU11は、一定以上の画像および音声のデータがバッファメモリ16に格納された旨の通知がメモリ監視器17から供給されたとき、VCRシステム部12に、装着されているビデオカセットのテープの走行を開始させ、エンコーダ14から供給された、符号化された画像および音声のデータを、ビデオカセットに記録させる。
【0081】
システム制御CPU11は、バッファメモリ16に格納されている、画像および音声のデータが一定以下になった旨の通知がメモリ監視器17から供給されたとき、VCRシステム部12に、ビデオカセットのテープの走行を停止させ、次の記録に備え待機させる。このとき、システム制御CPU11は、メモリコントローラ15による、画像および音声のデータのバッファメモリ16からの読み出しを、停止させる。
【0082】
バッファメモリ16に格納されている画像および音声のデータの量に対応して、VCRシステム部12によるビデオカセットへの画像および音声のデータの記録を停止する動作、および記録を開始する動作が繰り返される。ビデオカセットへの画像および音声のデータの記録が停止した後、記録が開始されたとき、前回の記録において最後に記録された画像および音声のデータに続いて、画像および音声のデータが記録される。
【0083】
このように、記録再生装置1において、ネットワーク2からの画像および音声のデータの受信とは独立に、バッファメモリ16に格納されている画像および音声のデータの量を基に、VCRシステム部12によるビデオカセットのテープの走行が制御される。すなわち、記録再生装置1において、バッファメモリ16を境に、ビデオカセットへの画像および音声のデータの記録の動作と、ネットワーク2からの画像および音声のデータの受信の動作とは、完全に独立している(アシンクロナス)と言える。言い換えれば、ネットワーク2から送信される、画像および音声のデータのレートと無関係に、記録再生装置1において、バッファメモリ16に格納されている画像および音声のデータの量のみを基に、VCRシステム部12によるビデオカセットへの記録が独立して制御される。
【0084】
図3は、パーソナルコンピュータ3の構成を説明する図である。CPU101は、各種アプリケーションプログラムや、OS(Operating System)を実際に実行する。ROM102は、一般的には、CPU101が使用するプログラムや演算用のパラメータのうちの基本的に固定のデータを格納する。RAM103は、CPU101の実行において使用するプログラムや、その実行において適宜変化するパラメータを格納する。これらはCPUバスなどから構成されるホストバス104により相互に接続されている。
【0085】
ホストバス104は、ブリッジ105を介して、PCI(Peripheral Component Interconnect/Interface)バスなどの外部バス106に接続されている。
【0086】
キーボード108は、CPU101に各種の指令を入力するとき、使用者により操作される。ポインティングデバイスの一例としてのマウス109は、ディスプレイ110の画面上のポイントの指示や選択を行うとき、使用者により操作される。ディスプレイ110は、液晶表示装置またはCRT(Cathode Ray Tube)などから成り、各種情報をテキストやイメージで表示する。HDD(Hard Disk Drive)111は、ハードディスクを駆動し、それらにCPU101によって実行するプログラムや情報を記録または再生させる。
【0087】
ドライブ112は、装着されている磁気ディスク131、光ディスク132、光磁気ディスク133、または半導体メモリ134に記録されているデータまたはプログラムを読み出して、そのデータまたはプログラムを、インターフェース107、外部バス106、ブリッジ105、およびホストバス104を介して接続されているRAM103に供給する。これらのキーボード108乃至ドライブ112は、インターフェース107に接続されており、インターフェース107は、外部バス106、ブリッジ105、およびホストバス104を介してCPU101に接続されている。
【0088】
通信ボード113は、ネットワーク2が接続され、CPU101、またはHDD111から供給されたデータを、所定の方式のパケットに格納して、ネットワーク2を介して、送信するとともに、ネットワーク2を介して、受信したパケットに格納されているデータをCPU101、RAM103、またはHDD111に出力する。
【0089】
通信ボード113は、外部バス106、ブリッジ105、およびホストバス104を介してCPU101に接続されている。
【0090】
図4は、ビデオカセットに記録されている画像および音声のデータをネットワーク2を介して送信するときの、制御プログラムを実行するシステム制御CPU11による、バッファメモリ制御の処理を説明するフローチャートである。
【0091】
ステップS11において、システム制御CPU11は、VCRシステム部12に、再生を開始させる。すなわち、システム制御CPU11は、VCRシステム部12に、装着されているビデオカセットから画像および音声のデータを読み出させる動作を開始させ、読み出したデータをデコーダ13に供給させる。
【0092】
ステップS12において、システム制御CPU11は、例えば、予め記憶されている第1の閾値、およびメモリ監視器17から供給されたデータを基に、バッファメモリ16に格納されているデータの量が一定以上であるか否かを判定する。ステップS12において、バッファメモリ16に格納されているデータの量が一定以上であると判定された場合、ステップS13に進み、システム制御CPU11は、VCRシステム部12に、再生を停止させ、待機させる。
【0093】
ステップS14において、システム制御CPU11は、予め記憶されている第2の閾値、およびメモリ監視器17から供給されたデータを基に、バッファメモリ16に格納されているデータの量が一定以下であるか否かを判定する。ステップS12およびステップS14の処理において、判定の基準となるデータの量は、同じ値であっても良く、異なる値であっても良い。
【0094】
ステップS14において、バッファメモリ16に格納されているデータの量が一定以下でないと判定された場合、ステップS14に戻り、判定の処理を繰り返す。
【0095】
ステップS13の処理で、VCRシステム部12の再生が停止されて、ステップS14の処理で判定が繰り返されている間、バッファメモリ16に格納されているデータがネットワーク2を介して送信されるので、バッファメモリ16に格納されているデータの量は、減少する。
【0096】
ステップS14において、バッファメモリ16に格納されているデータの量が一定以下であると判定された場合、ステップS11に戻り、システム制御CPU11は、VCRシステム部12に、再生を開始させ、処理を繰り返す。
【0097】
ステップS12において、バッファメモリ16に格納されているデータの量が一定以上でないと判定された場合、ステップS15に進み、システム制御CPU11は、図示せぬ入力部からの信号などを基に、再生を終了するか否かを判定する。
【0098】
ステップS15において、再生を終了しないと判定された場合、ステップS12に戻り、バッファメモリ16に格納されているデータの量が一定以上であるか否かの判定の処理を繰り返す。
【0099】
ステップS15において、再生を終了すると判定された場合、処理は終了する。
【0100】
このように、データの送信において、バッファメモリ16に格納されている画像および音声のデータの量によって、VCRシステム部12により、ビデオカセットから画像および音声のデータが読み出されるか、または読み出しが停止される。このようにすることで、ネットワーク2を介したデータの送信の速度が、変化しても、バッファメモリ16がオーバーフローせず、送信される画像および音声の連続性が保証される。
【0101】
図5は、ネットワーク2を介して受信された画像および音声のデータをビデオカセットに記録するときの、制御プログラムを実行するシステム制御CPU11による、バッファメモリ制御の処理を説明するフローチャートである。
【0102】
ステップS31において、システム制御CPU11は、予め記憶されている第1の閾値、およびメモリ監視器17から供給されたデータを基に、バッファメモリ16に格納されているデータの量が一定以上であるか否かを判定する。
【0103】
ステップS31において、バッファメモリ16に格納されているデータの量が一定以上でないと判定された場合、ステップS31に戻り、データの量が一定以上になるまで、判定の処理を繰り返す。
【0104】
ステップS31において、バッファメモリ16に格納されているデータが一定以上であると判定された場合、ステップS32に進み、システム制御CPU11は、VCRシステム部12に、記録を開始させる。すなわち、システム制御CPU11は、VCRシステム部12に、エンコーダ14から供給された画像および音声のデータを取得させ、装着されているビデオカセットに画像および音声のデータに記録させる。
【0105】
ステップS33において、システム制御CPU11は、予め記憶されている第2の閾値、およびメモリ監視器17から供給されたデータを基に、バッファメモリ16に格納されているデータの量が一定以下であるか否かを判定する。ステップS12およびステップS14の処理において、判定の基準となるデータの量は、同じ値であっても良く、異なる値であっても良い。
【0106】
ステップS33において、バッファメモリ16に格納されているデータの量が一定以下であると判定された場合、ステップS34に進み、システム制御CPU11は、VCRシステム部12に、記録を停止させ、待機させ、ステップS31に戻り、バッファメモリ16に格納されているデータの量の判定の処理から、処理を繰り返す。
【0107】
ステップS33において、バッファメモリ16に格納されているデータが一定以下でないと判定された場合、ステップS35に進み、システム制御CPU11は、図示せぬ入力部からの信号などを基に、記録を終了するか否かを判定する。
【0108】
ステップS35において、記録を終了しないと判定された場合、ステップS33に戻り、バッファメモリ16に格納されているデータの量が一定以下であるか否かの判定の処理を繰り返す。
【0109】
ステップS35において、記録を終了すると判定された場合、処理は終了する。
【0110】
このように、データの受信において、バッファメモリ16に格納されている画像および音声のデータの量によって、VCRシステム部12により、ビデオカセットに画像および音声のデータが記録されるか、または記録が停止される。このようにすることで、データの受信の速度が、変化しても、バッファメモリ16がオーバーフローせず、受信された画像および音声のデータが確実にビデオカセットに記録される。
【0111】
次に、記録再生装置1からパーソナルコンピュータ3に低レートの画像および音声のデータを送信する処理について説明する。
【0112】
低解像度エンコーダ20により低レートとされた画像および音声のデータは、ほとんどのネットワーク2において、遅れなく目的デバイスであるパーソナルコンピュータ3に到達し、パーソナルコンピュータ3から送信された、VCR走行制御情報であるコマンドに対して、レスポンス良く、パーソナルコンピュータ3が画像および音声のデータを取得できると考えられる。
【0113】
しかしながら、ネットワーク2の帯域がより狭い場合、またはパーソナルコンピュータ3の演算能力が低い場合には、記録再生装置1からパーソナルコンピュータ3への画像および音声のデータの送信速度が、バッファメモリ16への低レートの画像および音声のデータの格納の速度に比較して、遅くなり、レスポンスが低下する可能性がある。すなわち、記録再生装置1から読み出される画像および音声のデータと、パーソナルコンピュータ3で表示される画像または出力される音声のタイムラグが大きくなり、リアルタイム性が低下する可能性がある。
【0114】
そこで、パーソナルコンピュータ3によるフレームの要求に応じて、記録再生装置1が画像のフレームを送信するようにする。
【0115】
このように場合における、システム制御CPU11により制御プログラムを実行する記録再生装置1、およびCPU101により再生プログラムを実行するパーソナルコンピュータ3による、画像および音声のデータの通信の処理を図6のフローチャートを参照して説明する。
【0116】
ステップS101において、制御プログラムは、低解像度エンコーダ20に、デコーダ13から出力された画像および音声のデータを、低レートの画像および音声のデータに変換させる。低レートの画像および音声のデータは、メモリコントローラ15に供給され、メモリコントローラ15の制御の基に、バッファメモリ16に記憶される。
【0117】
ステップS201において、再生プログラムは、通信部113に、ネットワーク2を介して、記録再生装置1宛てにフレーム送信要求を送信させる。
【0118】
ステップS102において、制御プログラムは、TCP/IP処理部18およびネットワークインタフェース19に、パーソナルコンピュータ3から送信されたフレーム送信要求を受信させる。受信されたフレーム送信要求は、TCP/IP処理部18から、コマンドインタプリタ21に供給される。コマンドインタプリタ21は、フレーム送信要求に対応する、1フレームの送信を要求するデータをシステム制御CPU11に供給する。
【0119】
ステップS103において、制御プログラムは、最新の1フレームのデータをパーソナルコンピュータ3に送信する。すなわち、制御プログラムは、メモリコントローラ15に、バッファメモリ16から最新の(最後にバッファメモリ16に格納された)1フレームのデータを読み出させ、読み出した1フレームのデータをTCP/IP処理部18に供給させる。TCP/IP処理部18は、システム制御CPU11の制御の基に、最新の1フレームのデータを格納したパケットを生成し、ネットワーク2を介してパーソナルコンピュータ3宛てに、生成したパケットをネットワークインタフェース19に送信させる。
【0120】
ステップS202において、再生プログラムは、記録再生装置1から送信された1フレームのデータを受信する。
【0121】
より詳細には、再生プログラムを実行するCPU101は、通信部113に、ネットワーク2を介して送信されたパケットを受信させる。通信部113は、パケットに格納されている1フレームのデータを抽出し、抽出したデータをRAM103に記憶させる。
【0122】
ステップS203において、再生プログラムは、ステップS202の処理で受信したデータを基に、画像または音声を再生して、例えば、画像をディスプレイ110に表示し、図示せぬスピーカから音声を出力して、ステップS201に戻り、再生の処理を繰り返す。
【0123】
ステップS104において、制御プログラムは、メモリコントローラ15に、バッファメモリ16に記憶されている画像および音声のデータのうち、ステップS104の処理で送信したフレームの前のデータを破棄させ、ステップS101に戻り、送信の処理を繰り返す。ステップS104の処理で、送信したフレームの前のデータが破棄され、すなわち、送信したフレームに比較して、古いフレーム(送信したフレームより以前にバッファ16に格納されたフレーム)がバッファメモリ16上から消去されるので、バッファメモリ16には、送信したフレーム以後のフレームのみが格納されることになる。
【0124】
なお、ステップS104の処理における、フレームの消去は、フレームのデータの実体を他のデータに書き換える処理に限らず、バッファメモリ16の管理用のデータなどを変更することにより、フレームを読み出すことができないようにするなどの処理を含む。例えば、バッファメモリ16をリングバッファとした場合において、ポインタを移動させることにより、フレームを読み出すことができない状態にすることも、フレームの消去である。
【0125】
このようにすることで、ネットワーク2の帯域が狭い場合、またはCPU101の演算能力が低い場合であっても、単位時間に送信されるフレームの数が少なくなるものの、バッファメモリ16に最も新しく格納されたフレームのデータがパーソナルコンピュータ3に送信されることになり、きわめて良好なレスポンスを得ることができる。すなわち、VCRシステム部12がビデオカセットから画像および音声のデータを読み出すタイミングと、パーソナルコンピュータ3において、ビデオカセットから読み出された画像および音声のデータを基に、画像を表示し、音声を出力するタイミングとのずれを、最小とすることができる。
【0126】
さらに言えば、パーソナルコンピュータ3から記録再生装置1に、再生、または高速再生などのVCRテープ走行制御コマンドが送信された場合、VCRテープ走行制御コマンドの送信に対して、迅速かつリアルタイムに、記録再生装置1が応答することができるようになる。
【0127】
このように、ネットワークを介して、動画像を送信するようにした場合には、受信側で動画像を受信することができるようになる。
【0128】
また、提供しようとする第1の動画像を基に、第1の動画像に比較して解像度の低い第2の動画像を生成し、生成された第2の動画像の記憶を制御し、受信側からフレームの送信要求が受信された場合、ネットワークを介した、記憶されている第2の動画像のうちの、最後に記憶された1つのフレームの受信側への送信を制御し、送信されたフレームより以前に記憶されたフレームを消去するようにした場合には、ネットワークの帯域、または受信側の演算速度に関わらず、受信側において動画像のリアルタイム性を維持できるようになる。
【0129】
ネットワークを介して、情報提供装置から送信された、動画像を受信するようにした場合には、動画像を再生することができるようになる。
【0130】
また、動画像を提供する情報提供装置への、ネットワークを介した、動画像の1つのフレームの送信要求の送信を制御し、ネットワークを介して、情報提供装置から送信された、動画像の1つのフレームの受信を制御し、受信された動画像のフレームを基に、動画像を再生するようにした場合には、ネットワークの帯域、または演算速度に関わらず、動画像のリアルタイム性を維持できるようになる。
【0131】
なお、画像および音声のデータは、ビデオカセットに記録されると説明したが、ビデオカセットなどのテープに限らず、磁気ディスク、光ディスク、光磁気ディスク、または半導体メモリなど他の種類の記録媒体に記録するようにしてもよい。同様に、情報提供装置の一例である記録再生装置1は、VCRに限らず、パーソナルコンピュータ、DVDレコーダー、MD(Mini−Disc)(商標)レコーダ、またはサーバなど他の種類の装置とすることもできる。
【0132】
また、画像および音声のデータが記録され、送信されると説明したが、画像および音声のデータに限らず、音声のみのデータ、画像のみのデータ、または数値データなどストリームとして送信されるデータであれば本発明を適用することができる。
【0133】
なお、情報処理装置の一例であるパーソナルコンピュータ3は、PDA(Personal Digital Assistant)、または携帯電話機など他の種類の装置とすることもできる。
【0134】
上述した一連の処理は、ハードウェアにより実行させることもできるが、ソフトウェアにより実行させることもできる。一連の処理をソフトウェアにより実行させる場合には、そのソフトウェアを構成するプログラムが、専用のハードウェアに組み込まれているコンピュータ、または、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば汎用のパーソナルコンピュータなどに、記録媒体からインストールされる。
【0135】
この記録媒体は、図2または図3に示すように、コンピュータとは別に、ユーザにプログラムを提供するために配布される、プログラムが記録されている磁気ディスク41若しくは磁気ディスク131(フレキシブルディスクを含む)、光ディスク42若しくは光ディスク132(CD−ROM(Compact Disc−Read Only Memory)、DVD(Digital Versatile Disc)を含む)、光磁気ディスク43若しくは光磁気ディスク133(MD(Mini−Disc)(商標)を含む)、若しくは半導体メモリ44若しくは半導体メモリ134などよりなるパッケージメディアにより構成されるだけでなく、コンピュータに予め組み込まれた状態でユーザに提供される、プログラムが記録されているシステム制御CPU11の内部に設けられている図示せぬROM若しくはROM102や、HDD111などで構成される。
【0136】
なお、上述した一連の処理を実行させるプログラムは、必要に応じてルータ、モデムなどのインタフェースを介して、ローカルエリアネットワーク、インターネット、デジタル衛星放送といった、有線または無線の通信媒体を介してコンピュータにインストールされるようにしてもよい。
【0137】
また、本明細書において、記録媒体に格納されるプログラムを記述するステップは、記載された順序に沿って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的あるいは個別に実行される処理をも含むものである。
【0138】
なお、本明細書において、システムとは、複数の装置により構成される装置全体を表すものである。
【0139】
【発明の効果】
以上のように、第1の本発明によれば、受信側で動画像を受信することができる。
【0140】
また、第1の本発明によれば、ネットワークの帯域、または受信側の演算速度に関わらず、受信側において動画像のリアルタイム性を維持できるようになる。
【0141】
第2の本発明によれば、動画像を再生することができる。
【0142】
また、第2の本発明によれば、ネットワークの帯域、または演算速度に関わらず、動画像のリアルタイム性を維持できるようになる。
【図面の簡単な説明】
【図1】本発明に係る通信システムの一実施の形態を示す図である。
【図2】記録再生装置1の構成を示すブロック図である。
【図3】パーソナルコンピュータ3の構成を説明する図である。
【図4】ビデオカセットに記録されている画像および音声のデータをネットワーク2を介して送信するときの、バッファメモリ制御の処理を説明するフローチャートである。
【図5】ネットワーク2を介して受信された画像および音声のデータをビデオカセットに記録するときの、バッファメモリ制御の処理を説明するフローチャートである。
【図6】画像および音声のデータの通信の処理を説明するフローチャートである。
【符号の説明】
1 記録再生装置, 2 ネットワーク, 3 パーソナルコンピュータ, 11 システム制御CPU, 12 VCRシステム部, 15 メモリコントローラ, 16 バッファメモリ, 17 メモリ監視器, 18 TCP/IP処理部, 19 ネットワークインターフェース, 20 低解像度エンコーダ, 22 ドライブ, 41 磁気ディスク, 42 光ディスク, 43 光磁気ディスク, 44 半導体メモリ, 101 CPU, 102 ROM, 103 RAM,110 ディスプレイ, 111 HDD, 113 通信部, 131 磁気ディスク, 132 光ディスク, 133 光磁気ディスク, 134 半導体メモリ
[0001]
TECHNICAL FIELD OF THE INVENTION
The present invention relates to an information providing apparatus and method, an information processing apparatus and method, a recording medium, and a program, and particularly to an information providing apparatus and method for providing a moving image or reproducing the provided moving image, and an information processing apparatus. And a method, a recording medium, and a program.
[0002]
[Prior art]
It is common practice to transmit and receive low-resolution images or sounds via a network.
[0003]
First, images or sounds are transmitted and received for viewing.
[0004]
When an image or a sound is transmitted and received for viewing, the image or the sound is transmitted and received in a PLAY mode (so-called stream) in principle. When transmitting or receiving an image or sound in the PLAY mode, a buffer is generally provided on the receiving side, and the effect of the buffer absorbs fluctuations due to the network bandwidth and the calculation speed of the personal computer. Even in modes other than PLAY, transmission or reception of images or sounds is possible, but lacks real-time performance because a buffer is provided.
[0005]
Second, complete data may be transmitted and received as a file for online editing. In this case, no real-time property is required.
[0006]
Third, in order to create a file, an image or sound is transmitted and received in order to find the beginning of the file and the end point of the file. In this case, real-time property corresponding to reversal and speed change is strongly required.
[0007]
In particular, in the third application, real-time performance is strongly required, but when transmitting all image and audio data, when the network bandwidth is narrow relative to the required transmission speed, or when the personal computer on the receiving side is used. When the calculation speed is slow, the processing cannot be performed in time, and as a result, the real-time property deteriorates.
[0008]
[Problems to be solved by the invention]
As described above, when moving images are communicated, when the bandwidth of the network is narrow, or when the calculation speed of the personal computer on the receiving side is low, there is a problem that the real-time property may not be maintained.
[0009]
The present invention has been made in view of such a situation, and it is an object of the present invention to maintain the real-time property of a moving image irrespective of a network band or a calculation speed of a receiving side.
[0010]
[Means for Solving the Problems]
An information providing apparatus according to the present invention includes: a generation unit configured to generate a second moving image having a lower resolution than a first moving image based on a first moving image to be provided; Storage control means for controlling the storage of a moving image of a second moving image via a network, when a frame transmission request is received from a receiving side; Transmission control means for controlling transmission of one frame to the receiving side, and erasing means for erasing a frame stored before the transmitted frame.
[0011]
The information providing method according to the present invention includes a generating step of generating a second moving image having a lower resolution than a first moving image based on a first moving image to be provided; A storage control step of controlling the storage of a moving image of the second moving image, when a frame transmission request is received from the receiving side, the last stored one of the stored second moving images via the network. A transmission control step of controlling transmission of one frame to a receiving side; and an erasing step of erasing a frame stored before the transmitted frame.
[0012]
The program of the first recording medium according to the present invention includes: a generating step of generating a second moving image having a lower resolution than the first moving image based on the first moving image to be provided; A storage control step of controlling the storage of the stored second moving image, and, if a frame transmission request is received from the receiving side, the last of the stored second moving images via the network. A transmission control step of controlling transmission of one stored frame to a receiving side and an erasing step of erasing a frame stored before the transmitted frame are included.
[0013]
A first program according to the present invention includes a generating step of generating a second moving image having a lower resolution than a first moving image based on a first moving image to be provided; And a storage control step of controlling storage of the second moving image, and when a frame transmission request is received from the receiving side, the last stored second moving image of the stored second moving images via the network. The computer is characterized by causing a computer to execute a transmission control step of controlling transmission of one frame to a receiving side and an erasing step of erasing a frame stored before the transmitted frame.
[0014]
An information processing apparatus according to the present invention includes: a transmission control unit configured to control transmission of a transmission request of one frame of a moving image to an information providing apparatus that provides a moving image via a network; It is characterized by including reception control means for controlling reception of one frame of a moving image transmitted from the apparatus, and reproducing means for reproducing a moving image based on the received frame of the moving image.
[0015]
An information processing method according to the present invention includes a transmission control step of controlling transmission of a transmission request for one frame of a moving image to an information providing apparatus that provides a moving image via a network, and providing information via the network. The method includes a reception control step of controlling reception of one frame of a moving image transmitted from the apparatus, and a reproduction step of reproducing a moving image based on the received frame of the moving image.
[0016]
A program on a second recording medium according to the present invention includes a transmission control step of controlling transmission of a transmission request for one frame of a moving image to an information providing apparatus for providing a moving image via a network, A reception control step of controlling reception of one frame of the moving image transmitted from the information providing apparatus, and a reproduction step of reproducing the moving image based on the received frame of the moving image. And
[0017]
A second program according to the present invention includes: a transmission control step of controlling transmission of a transmission request for one frame of a moving image to an information providing apparatus for providing a moving image via a network; A computer controls a reception control step of controlling reception of one frame of a moving image transmitted from the providing apparatus, and a reproduction step of reproducing a moving image based on the received frame of the moving image. And
[0018]
In the information providing apparatus and method, the first recording medium, and the first program according to the present invention, based on the first video to be provided, the second video having a lower resolution than the first video. Is generated, and the generated second moving image is stored. When a frame transmission request is received from the receiving side, one last stored frame of the stored second moving images is transmitted to the receiving side via the network. Then, the frames stored before the transmitted frame are deleted.
[0019]
A network refers to a mechanism in which at least two devices are connected and information can be transmitted from one device to another device. Devices communicating via the network may be independent devices or internal blocks constituting one device.
[0020]
In addition, reception or transmission is not only reception or transmission by wireless and reception or transmission by wire, but also reception or transmission in which wireless and wire are mixed, that is, reception or transmission by wireless is performed in a certain section, and wired or wireless in another section. May be received or transmitted. Furthermore, reception or transmission from a certain device to another device may be performed by wire, and reception or transmission from another device to a certain device may be performed by wireless communication.
[0021]
The information providing device may be an independent device or a block that performs an information providing process of the information processing device.
[0022]
In the information processing apparatus and method, the second recording medium, and the second program according to the present invention, a transmission request for one frame of a moving image is transmitted to the information providing apparatus that provides the moving image via a network. One frame of a moving image transmitted from the information providing apparatus via the network is received. The moving image is reproduced based on the received frame of the moving image.
[0023]
A network refers to a mechanism in which at least two devices are connected and information can be transmitted from one device to another device. Devices communicating via the network may be independent devices or internal blocks constituting one device.
[0024]
In addition, reception or transmission is not only reception or transmission by wireless and reception or transmission by wire, but also reception or transmission in which wireless and wire are mixed, that is, reception or transmission by wireless is performed in a certain section, and wired or wireless in another section. May be received or transmitted. Furthermore, reception or transmission from a certain device to another device may be performed by wire, and reception or transmission from another device to a certain device may be performed by wireless communication.
[0025]
The information processing device may be an independent device or a block that performs information processing of an electronic device.
[0026]
BEST MODE FOR CARRYING OUT THE INVENTION
FIG. 1 is a diagram showing an embodiment of a communication system according to the present invention.
[0027]
The recording / reproducing device 1 is, for example, a VCR (Videocassette Recorder) or the like, and is connected to a personal computer 3 via a network 2 such as a local area network or the Internet.
[0028]
The recording / reproducing apparatus 1 is connected to the network 2 via a network cable 4-1 conforming to a standard such as 100Base-T, for example.
[0029]
The personal computer 3 is connected to the network 2 via a network cable 4-2 such as 100Base-T, for example.
[0030]
The recording / reproducing apparatus 1 records image and audio data or reads recorded image and audio data by an asynchronous operation as described later.
[0031]
The recording / reproducing apparatus 1 transmits image and audio data read from the mounted video cassette to the personal computer 3 via the network 2. The recording / reproducing apparatus 1 records image and audio data supplied from, for example, a personal computer 3 via a network 2 to a mounted video cassette.
[0032]
The personal computer 3 transmits a predetermined command to the recording / reproducing device 1 via the network 2 and controls the recording / reproducing device 1.
[0033]
When displaying an image, the personal computer 3 requests one frame of image data from the recording / reproducing apparatus 1 via the network 2.
[0034]
When one frame of image data is requested from the personal computer 3, the recording / reproducing apparatus 1 transmits one frame of image data to the personal computer 3 via the network 2.
[0035]
The personal computer 3 displays an image based on the image data of one frame transmitted from the recording / reproducing device 1.
[0036]
It should be noted that metadata such as time code data can be superimposed on the data transmitted from the recording / reproducing apparatus 1.
[0037]
In addition, as a method of the network 2, an arbitrary method such as a wired or wireless method can be adopted, and the present invention is not limited thereto.
[0038]
FIG. 2 is a block diagram illustrating a configuration of the recording / reproducing apparatus 1.
[0039]
The system control CPU (Central Processing Unit) 11 is, for example, an embedded computer having a built-in RAM (Random-Access Memory) or a ROM (Read-Only Memory), executes a predetermined control program, and executes the entire recording / reproducing apparatus 1. Control. The VCR system unit 12 runs a tape of a video cassette mounted on the recording / reproducing apparatus 1 under the control of the system control CPU 11 to record or reproduce image and audio data. The VCR system unit 12 reads out the image and audio data recorded on the mounted video cassette and reproduces the read image and audio data when reproducing the image and audio data recorded on the mounted video cassette. And audio data is supplied to the decoder 13. When recording the image and audio data on the mounted video cassette, the VCR system unit 12 records the image and audio data supplied from the encoder 14 on the video cassette.
[0040]
The decoder 13 decodes the image and audio data supplied from the VCR system unit 12 under the control of the system control CPU 11, and supplies the decoded image and audio data to the memory controller 15 and the low-resolution encoder 20. I do. For example, under the control of the system control CPU 11, the decoder 13 decodes image and audio data encoded by the motion JPEG (Joint Photographic Experts Group) system or the MPEG (Motion Picture Experts Group) 2 system.
[0041]
The encoder 14 encodes the image and audio data supplied from the memory controller 15 by a predetermined method under the control of the system control CPU 11, and supplies the encoded image and audio data to the VCR system unit 12. I do. For example, the encoder 14 encodes the image and audio data supplied from the memory controller 15 under the control of the system control CPU 11 using the motion JPEG method or the MPEG2 method.
[0042]
It should be noted that a desired method can be adopted as a method of image and audio data, and the present invention is not limited to this method.
[0043]
The memory controller 15 stores the image and audio data supplied from the decoder 13 or the TCP / IP processing unit 18 in the buffer memory 16 in order, and transfers the image and audio data stored in the buffer memory 16 to the encoder 14 or It is supplied to the TCP / IP processing unit 18 in order.
[0044]
The buffer memory 16 is a semiconductor memory having a predetermined capacity, such as a DRAM (Dynamic RAM), and stores image and audio data under the control of the memory controller 15, and stores the stored image and audio data. Is read. The buffer memory 16 is controlled by the memory controller 15 as, for example, a ring buffer.
[0045]
The memory monitor 17 acquires data indicating the amount of image and audio data stored in the buffer memory 16 from the memory controller 15 and supplies the acquired data to the system control CPU 11.
[0046]
The TCP / IP processing unit 18 executes TCP (Transmission Control Protocol) processing and IP (Internet Protocol) processing under the control of the system control CPU 11, and performs predetermined processing on image and audio data supplied from the memory controller 15. And supplies it to the network interface 19. When receiving a packet from the network interface 19, the TCP / IP processing unit 18 executes TCP processing and IP processing, extracts data stored in the packet, and supplies the extracted data to the memory controller 15. Alternatively, a command stored in the packet is extracted, and the extracted command is supplied to the command interpreter 21.
[0047]
The network interface 19 is composed of, for example, an NIC (Network Interface Card), and transmits a packet supplied from the TCP / IP processing unit 18 to the network 2 and supplies a packet received from the network 2 to the TCP / IP processing unit 18. I do.
[0048]
Under the control of the system control CPU 11, the low-resolution encoder 20 converts the image and audio data supplied from the decoder 13 into lower-resolution image and audio data, that is, data with a small amount of information per unit time (low data). Rate data), and supplies the converted image and audio data to the memory controller 15.
[0049]
The data supplied to the decoder 13 is high-rate data (data with a large amount of information per unit time), and if it is sent to the network 2 as it is, the bandwidth of the network 2 (the amount of data that can be communicated per unit time) is reduced. Due to the limitation, as described later, there is a high possibility that the reading of image and audio data from the video cassette of the VCR system unit 12 is stopped.
[0050]
Therefore, the output of the decoder 13 is passed through the low-resolution encoder 20 to be converted into low-rate image and audio data, and the low-rate image and audio data is stored in the buffer memory 16 via the memory controller 15. Add a route to be used.
[0051]
The command interpreter 21 interprets the command extracted from the packet supplied from the TCP / IP processing unit 18 and supplies data indicating the interpreted result to the system control CPU 11. For example, the command interpreter 21 interprets the VCR tape running control command extracted from the packet and supplies data indicating the interpreted result to the system control CPU 11.
[0052]
When data indicating a result of interpretation of a command is supplied from the command interpreter 21, the system control CPU 11 executes control corresponding to the command. For example, the system control CPU 11 executes speed control of the VCR system unit 12 based on data corresponding to a VCR tape running control command. The VCR system unit 12 reads image and audio data from the mounted video cassette based on speed control by the system control CPU 11 and supplies the read image and audio data to the decoder 13.
[0053]
The drive 22 reads a program or data from the mounted magnetic disk 41, optical disk 42, magneto-optical disk 43, or semiconductor memory 44 and supplies the read program or data to the system control CPU 11.
[0054]
Next, the operation of the recording / reproducing apparatus 1 when reproducing images and sounds recorded on the video cassette mounted on the VCR system unit 12 will be described.
[0055]
The memory monitor 17 constantly monitors the amount of image and audio data stored in the buffer memory 16. The memory monitor 17 notifies the system control CPU 11 when image and audio data having a threshold value or more stored in advance is stored in the buffer memory 16. For example, the memory monitor 17 notifies the system control CPU 11 when image and sound data of 85% or more of the capacity of the buffer memory 16 is stored in the buffer memory 16.
[0056]
The threshold value used for notification of the system control CPU 11 can be set arbitrarily.
[0057]
The memory monitor 17 simply notifies the amount of image and audio data stored in the buffer memory 16 to the system control CPU 11, and the system control CPU 11 sends the image and audio data having a threshold value or more to the buffer memory 16. It may be determined whether or not the data is stored.
[0058]
The system control CPU 11 causes the VCR system unit 12 to stop the running of the tape of the video cassette when the notification that the predetermined amount of image and sound data is stored in the buffer memory 16 is supplied from the memory monitor 17. And wait for the next reproduction.
[0059]
The memory monitor 17 notifies the system control CPU 11 when the amount of image and audio data stored in the buffer memory 16 becomes equal to or less than the threshold value stored in advance. For example, the memory monitor 17 notifies the system control CPU 11 when the amount of image and audio data stored in the buffer memory 16 becomes 15% or less of the capacity of the buffer memory 16.
[0060]
The threshold value used for notification of the system control CPU 11 can be set arbitrarily.
[0061]
The memory monitor 17 simply notifies the system control CPU 11 of the amount of image and audio data stored in the buffer memory 16, and the system control CPU 11 transmits the image and audio data stored in the buffer memory 16. May be determined as to whether or not the amount becomes equal to or less than a threshold value stored in advance.
[0062]
When the memory monitor 17 supplies a notification that the image and audio data stored in the buffer memory 16 has become equal to or less than a predetermined value, the system control CPU 11 sends the video cassette tape to the VCR system unit 12. Start running. The VCR system section 12 supplies image and audio data read from the video cassette to the decoder 13.
[0063]
As described above, the operation of stopping the reading of the image and audio data from the video cassette by the VCR system unit 12 and the operation of starting the operation are performed in accordance with the amount of the image and audio data stored in the buffer memory 16. Repeated.
[0064]
The decoder 13 decodes the image and audio data supplied from the VCR system unit 12 and supplies the decoded image and audio data to the memory controller 15 or the low-resolution encoder 20. When the image and sound data decoded by the decoder 13 are transmitted to the personal computer 3 as they are, the decoder 13 supplies the decoded image and sound data to the memory controller 15.
[0065]
The decoder 13 compares the decoded image and sound data to the low-resolution encoder 20 when transmitting the lower-resolution image and sound data to the personal computer 3 in comparison with the image and sound data decoded by the decoder 13. Supply.
[0066]
The low-resolution encoder 20 generates lower-resolution image and audio data based on the image and audio data supplied from the decoder 13. Here, the low resolution means the case where the resolution is low in the spatial direction, that is, the case where the number of pixels per frame is reduced, and the case where the resolution is low in the time direction, that is, the number of frames per unit time. Includes both cases in which is reduced.
[0067]
The low-resolution encoder 20 supplies the generated low-resolution image and audio data to the memory controller 15.
[0068]
The memory controller 15 stores the image and audio data supplied from the decoder 13 or the low-resolution encoder 20 in the buffer memory 16.
[0069]
The system control CPU 11 recognizes the amount of image and audio data stored in the buffer memory 16 based on the signal (memory storage information) supplied from the memory monitor 17. When a predetermined amount of image and audio data is stored in the buffer memory 16, the system control CPU 11 stores the image and audio data in the buffer memory 16 in the memory controller 15 in accordance with the band of the network 2. The image and audio data to be read are read. The memory controller 15 supplies the read image and audio data to the TCP / IP processing unit 18.
[0070]
The TCP / IP processing unit 18 stores the image and audio data supplied from the memory controller 15 in a predetermined packet, and supplies the packet to the network interface 19. The network interface 19 transmits the packet storing the image and audio data supplied from the TCP / IP processing unit 18 to the personal computer 3 via the network 2.
[0071]
As described above, in the recording / reproducing apparatus 1, the running of the tape of the video cassette by the VCR system unit 12 is controlled based on the amount of image and audio data stored in the buffer memory 16, and the Transmission of audio data is also controlled based on the amount of image and audio data stored in the buffer memory 16. That is, in the recording / reproducing apparatus 1, the operation of reading image and audio data from the video cassette and the operation of transmitting image and audio data to the network 2 are completely independent of each other with the buffer memory 16 as a boundary. (Asynchronous).
[0072]
Next, an operation of the recording / reproducing apparatus 1 when recording image and audio data received via the network 2 on a video cassette mounted on the VCR system unit 12 will be described.
[0073]
The network interface 19 is a packet storing image and audio data transmitted via the network 2 at an arbitrary rate equal to or lower than a rate that can be recorded on a video cassette mounted on the VCR system unit 12. And supplies the received packet to the TCP / IP processing unit 18.
[0074]
The TCP / IP processing unit 18 extracts image and audio data from the packet supplied from the network interface 19, and supplies the extracted image and audio data to the memory controller 15.
[0075]
The memory controller 15 stores the image and audio data supplied from the TCP / IP processing unit 18 in the buffer memory 16.
[0076]
The memory monitor 17 constantly monitors the amount of image and sound data stored in the buffer memory 16, and when image and sound data equal to or larger than a previously stored threshold value is stored in the buffer memory 16, This is notified to the system control CPU 11. The memory monitor 17 notifies the system control CPU 11 when the amount of image and audio data stored in the buffer memory 16 becomes equal to or less than a threshold value stored in advance.
[0077]
The process of determining whether or not image and audio data having a threshold value or more has been stored in the buffer memory 16 and whether or not the amount of image and audio data stored in the buffer memory 16 has become equal to or less than the threshold value May be executed by the system control CPU 11.
[0078]
The system control CPU 11 sends the image and sound data from the buffer memory 16 to the memory controller 15 when the memory monitor 17 receives a notification that the image data and the sound data of a certain amount or more are stored in the buffer memory 16. Read. The memory controller 15 supplies the read image and audio data to the encoder 14.
[0079]
The encoder 14 encodes the image and audio data supplied from the memory controller 15 by a predetermined encoding method, and supplies the encoded image and audio data to the VCR system unit 12.
[0080]
When a notice that more than a certain amount of image and sound data has been stored in the buffer memory 16 is supplied from the memory monitor 17, the system control CPU 11 The traveling is started, and the encoded image and sound data supplied from the encoder 14 is recorded on the video cassette.
[0081]
When the memory monitor 17 supplies a notification that the image and audio data stored in the buffer memory 16 has become equal to or less than a predetermined value, the system control CPU 11 sends the video cassette tape to the VCR system unit 12. Stop running and wait for the next record. At this time, the system control CPU 11 causes the memory controller 15 to stop reading image and audio data from the buffer memory 16.
[0082]
The operation of stopping the recording of the image and audio data on the video cassette by the VCR system unit 12 and the operation of starting the recording are repeated according to the amount of the image and audio data stored in the buffer memory 16. . When the recording is started after the recording of the image and audio data on the video cassette is stopped, the image and audio data are recorded following the last recorded image and audio data in the previous recording. .
[0083]
As described above, in the recording / reproducing apparatus 1, independently of the reception of the image and audio data from the network 2, the VCR system unit 12 performs the processing based on the amount of the image and audio data stored in the buffer memory 16. The running of the tape of the video cassette is controlled. That is, in the recording / reproducing apparatus 1, the operation of recording image and audio data on the video cassette and the operation of receiving image and audio data from the network 2 are completely independent of each other with the buffer memory 16 as a boundary. (Asynchronous). In other words, regardless of the rate of the image and audio data transmitted from the network 2, the VCR system unit in the recording / reproducing apparatus 1 is based on only the amount of the image and audio data stored in the buffer memory 16. 12 is independently controlled.
[0084]
FIG. 3 is a diagram illustrating the configuration of the personal computer 3. The CPU 101 actually executes various application programs and an OS (Operating System). The ROM 102 generally stores basically fixed data of programs used by the CPU 101 and calculation parameters. The RAM 103 stores programs used in the execution of the CPU 101 and parameters that change as appropriate in the execution. These are interconnected by a host bus 104 composed of a CPU bus and the like.
[0085]
The host bus 104 is connected to an external bus 106 such as a PCI (Peripheral Component Interconnect / Interface) bus via a bridge 105.
[0086]
The keyboard 108 is operated by a user when inputting various commands to the CPU 101. The mouse 109 as an example of a pointing device is operated by a user when pointing and selecting a point on the screen of the display 110. The display 110 includes a liquid crystal display device or a CRT (Cathode Ray Tube), and displays various information in text or images. An HDD (Hard Disk Drive) 111 drives a hard disk and records or reproduces a program or information executed by the CPU 101 on the hard disk.
[0087]
The drive 112 reads data or a program recorded on the mounted magnetic disk 131, optical disk 132, magneto-optical disk 133, or semiconductor memory 134 and transfers the data or program to the interface 107, external bus 106, bridge, 105 and the RAM 103 connected via the host bus 104. The keyboard 108 to the drive 112 are connected to an interface 107. The interface 107 is connected to the CPU 101 via an external bus 106, a bridge 105, and a host bus 104.
[0088]
The communication board 113 is connected to the network 2, stores the data supplied from the CPU 101 or the HDD 111 in a packet of a predetermined format, transmits the data via the network 2, and receives the data via the network 2. The data stored in the packet is output to the CPU 101, the RAM 103, or the HDD 111.
[0089]
The communication board 113 is connected to the CPU 101 via the external bus 106, the bridge 105, and the host bus 104.
[0090]
FIG. 4 is a flowchart illustrating a process of buffer memory control by the system control CPU 11 executing a control program when transmitting image and audio data recorded on the video cassette via the network 2.
[0091]
In step S11, the system control CPU 11 causes the VCR system unit 12 to start reproduction. That is, the system control CPU 11 causes the VCR system unit 12 to start an operation of reading image and audio data from the mounted video cassette, and supplies the read data to the decoder 13.
[0092]
In step S12, for example, based on the first threshold value stored in advance and the data supplied from the memory monitor 17, the system control CPU 11 determines that the amount of data stored in the buffer memory 16 is It is determined whether or not there is. If it is determined in step S12 that the amount of data stored in the buffer memory 16 is equal to or larger than a certain value, the process proceeds to step S13, where the system control CPU 11 causes the VCR system unit 12 to stop reproduction and wait.
[0093]
In step S14, based on the second threshold value stored in advance and the data supplied from the memory monitor 17, the system control CPU 11 determines whether the amount of data stored in the buffer memory 16 is equal to or less than a certain value. Determine whether or not. In the processing of step S12 and step S14, the amount of data serving as a criterion for determination may be the same value or a different value.
[0094]
If it is determined in step S14 that the amount of data stored in the buffer memory 16 is not equal to or smaller than the predetermined value, the process returns to step S14 and the determination process is repeated.
[0095]
In the process of step S13, the reproduction of the VCR system unit 12 is stopped, and the data stored in the buffer memory 16 is transmitted via the network 2 while the determination is repeated in the process of step S14. The amount of data stored in the buffer memory 16 decreases.
[0096]
If it is determined in step S14 that the amount of data stored in the buffer memory 16 is equal to or smaller than a certain value, the process returns to step S11, where the system control CPU 11 causes the VCR system unit 12 to start reproduction and repeats the processing. .
[0097]
If it is determined in step S12 that the amount of data stored in the buffer memory 16 is not equal to or more than the predetermined value, the process proceeds to step S15, and the system control CPU 11 performs reproduction based on a signal from an input unit (not shown). It is determined whether or not to end.
[0098]
If it is determined in step S15 that the reproduction is not to be ended, the process returns to step S12, and the process of determining whether the amount of data stored in the buffer memory 16 is equal to or more than a certain value is repeated.
[0099]
If it is determined in step S15 that the reproduction is to be ended, the processing ends.
[0100]
As described above, in the data transmission, the VCR system unit 12 reads or stops reading the image and audio data from the video cassette depending on the amount of the image and audio data stored in the buffer memory 16. You. In this way, even if the speed of data transmission via the network 2 changes, the buffer memory 16 does not overflow, and continuity of transmitted images and sounds is guaranteed.
[0101]
FIG. 5 is a flowchart illustrating a process of buffer memory control by the system control CPU 11 executing a control program when recording image and audio data received via the network 2 on a video cassette.
[0102]
In step S31, based on the first threshold value stored in advance and the data supplied from the memory monitor 17, the system control CPU 11 determines whether the amount of data stored in the buffer memory 16 is equal to or more than a certain value. Determine whether or not.
[0103]
If it is determined in step S31 that the amount of data stored in the buffer memory 16 is not equal to or greater than a certain value, the process returns to step S31, and the determination process is repeated until the amount of data becomes equal to or more than a certain value.
[0104]
When it is determined in step S31 that the data stored in the buffer memory 16 is equal to or more than a certain value, the process proceeds to step S32, and the system control CPU 11 causes the VCR system unit 12 to start recording. That is, the system control CPU 11 causes the VCR system unit 12 to acquire the image and sound data supplied from the encoder 14 and record the image and sound data on the attached video cassette.
[0105]
In step S33, based on the second threshold value stored in advance and the data supplied from the memory monitor 17, the system control CPU 11 determines whether the amount of data stored in the buffer memory 16 is equal to or less than a certain value. Determine whether or not. In the processing of step S12 and step S14, the amount of data serving as a criterion for determination may be the same value or a different value.
[0106]
If it is determined in step S33 that the amount of data stored in the buffer memory 16 is equal to or smaller than a certain value, the process proceeds to step S34, where the system control CPU 11 causes the VCR system unit 12 to stop recording and wait, Returning to step S31, the process is repeated from the process of determining the amount of data stored in the buffer memory 16.
[0107]
If it is determined in step S33 that the data stored in the buffer memory 16 is not equal to or less than the predetermined value, the process proceeds to step S35, where the system control CPU 11 ends recording based on a signal from an input unit (not shown). It is determined whether or not.
[0108]
If it is determined in step S35 that the recording is not to be ended, the process returns to step S33, and the process of determining whether the amount of data stored in the buffer memory 16 is equal to or less than a certain value is repeated.
[0109]
If it is determined in step S35 that the recording is to be ended, the processing ends.
[0110]
As described above, in the data reception, the VCR system unit 12 records the image and sound data on the video cassette or stops the recording depending on the amount of the image and sound data stored in the buffer memory 16. Is done. By doing so, even if the data reception speed changes, the buffer memory 16 does not overflow, and the received image and audio data are reliably recorded on the video cassette.
[0111]
Next, processing for transmitting low-rate image and audio data from the recording / reproducing apparatus 1 to the personal computer 3 will be described.
[0112]
The image and audio data set to a low rate by the low-resolution encoder 20 reach the personal computer 3 which is the target device without delay in most of the networks 2, and is VCR running control information transmitted from the personal computer 3. It is considered that the personal computer 3 can acquire image and audio data with good response to the command.
[0113]
However, when the bandwidth of the network 2 is narrower or when the computing capacity of the personal computer 3 is low, the transmission speed of the image and audio data from the recording / reproducing apparatus 1 to the personal computer 3 is low. Compared with the rate of storing image and audio data at the rate, the rate may be lower and the response may be lower. That is, the time lag between the image and audio data read from the recording / reproducing device 1 and the image or the audio output from the personal computer 3 increases, and the real-time performance may be reduced.
[0114]
Therefore, in response to a request for a frame from the personal computer 3, the recording / reproducing apparatus 1 transmits an image frame.
[0115]
In this case, the processing of communication of image and audio data by the recording / reproducing apparatus 1 executing the control program by the system control CPU 11 and the personal computer 3 executing the reproduction program by the CPU 101 will be described with reference to the flowchart of FIG. Will be explained.
[0116]
In step S101, the control program causes the low-resolution encoder 20 to convert image and sound data output from the decoder 13 into low-rate image and sound data. The low-rate image and audio data are supplied to the memory controller 15 and stored in the buffer memory 16 under the control of the memory controller 15.
[0117]
In step S201, the reproduction program causes the communication unit 113 to transmit a frame transmission request to the recording / reproduction device 1 via the network 2.
[0118]
In step S102, the control program causes the TCP / IP processing unit 18 and the network interface 19 to receive the frame transmission request transmitted from the personal computer 3. The received frame transmission request is supplied from the TCP / IP processing unit 18 to the command interpreter 21. The command interpreter 21 supplies data requesting transmission of one frame corresponding to the frame transmission request to the system control CPU 11.
[0119]
In step S103, the control program sends the latest one frame of data to the personal computer 3. That is, the control program causes the memory controller 15 to read the latest one-frame data (last stored in the buffer memory 16) from the buffer memory 16 and transfer the read one-frame data to the TCP / IP processing unit 18. To be supplied. The TCP / IP processing unit 18 generates a packet storing the latest one-frame data under the control of the system control CPU 11, and sends the generated packet to the personal computer 3 via the network 2 to the network interface 19. Send.
[0120]
In step S202, the playback program receives one frame of data transmitted from the recording and playback device 1.
[0121]
More specifically, CPU 101 executing the reproduction program causes communication unit 113 to receive the packet transmitted via network 2. The communication unit 113 extracts one frame of data stored in the packet, and causes the RAM 103 to store the extracted data.
[0122]
In step S203, the reproduction program reproduces an image or sound based on the data received in the processing of step S202, for example, displays the image on the display 110, outputs sound from a speaker (not shown), and Returning to S201, the reproduction process is repeated.
[0123]
In step S104, the control program causes the memory controller 15 to discard the data before the frame transmitted in the processing of step S104 from the image and audio data stored in the buffer memory 16, and returns to step S101. Repeat the transmission process. In the process of step S104, the data before the transmitted frame is discarded, that is, the old frame (the frame stored in the buffer 16 before the transmitted frame) is deleted from the buffer memory 16 as compared with the transmitted frame. Since the frame is erased, only the frames after the transmitted frame are stored in the buffer memory 16.
[0124]
The erasing of the frame in the process of step S104 is not limited to the process of rewriting the entity of the data of the frame to another data, and the frame cannot be read by changing the management data of the buffer memory 16 or the like. And the like. For example, when the buffer memory 16 is a ring buffer, moving a pointer to a state where frames cannot be read also means erasing a frame.
[0125]
By doing so, even when the bandwidth of the network 2 is narrow or the arithmetic capacity of the CPU 101 is low, the number of frames transmitted per unit time is reduced, The frame data is transmitted to the personal computer 3, and an extremely good response can be obtained. That is, based on the timing at which the VCR system unit 12 reads out image and audio data from the video cassette and the personal computer 3, based on the image and audio data read from the video cassette, an image is displayed and audio is output. The deviation from the timing can be minimized.
[0126]
More specifically, when a VCR tape travel control command such as playback or high-speed playback is transmitted from the personal computer 3 to the recording / reproduction device 1, recording / reproduction is performed quickly and in real time in response to the transmission of the VCR tape travel control command. The device 1 can respond.
[0127]
In this way, when a moving image is transmitted via a network, the receiving side can receive the moving image.
[0128]
Further, based on the first moving image to be provided, a second moving image having a lower resolution than the first moving image is generated, and storage of the generated second moving image is controlled. When a frame transmission request is received from the receiving side, transmission of the last stored one frame of the stored second moving image to the receiving side via the network is controlled and transmitted. If a frame stored before the stored frame is deleted, the real-time moving image can be maintained on the receiving side regardless of the bandwidth of the network or the calculation speed of the receiving side.
[0129]
When the moving image transmitted from the information providing apparatus is received via the network, the moving image can be reproduced.
[0130]
Also, transmission of a request for transmission of one frame of the moving image to the information providing apparatus that provides the moving image via the network is controlled, and one of the moving images transmitted from the information providing apparatus via the network is controlled. In the case of controlling the reception of two frames and reproducing the moving image based on the received frame of the moving image, the real-time property of the moving image can be maintained regardless of the network bandwidth or the calculation speed Become like
[0131]
Although it has been described that the image and audio data are recorded on a video cassette, the recording is not limited to a tape such as a video cassette, but may be recorded on another type of recording medium such as a magnetic disk, an optical disk, a magneto-optical disk, or a semiconductor memory. You may make it. Similarly, the recording / reproducing apparatus 1 as an example of the information providing apparatus is not limited to a VCR, but may be another type of apparatus such as a personal computer, a DVD recorder, an MD (Mini-Disc) (trademark) recorder, or a server. it can.
[0132]
Although it has been described that image and audio data is recorded and transmitted, the present invention is not limited to image and audio data, but may be data transmitted as a stream such as audio-only data, image-only data, or numerical data. For example, the present invention can be applied.
[0133]
Note that the personal computer 3 as an example of the information processing device may be another type of device such as a PDA (Personal Digital Assistant) or a mobile phone.
[0134]
The series of processes described above can be executed by hardware, but can also be executed by software. When a series of processing is executed by software, a program constituting the software may execute various functions by installing a computer built into dedicated hardware or installing various programs. It is installed from a recording medium into a possible general-purpose personal computer or the like.
[0135]
As shown in FIG. 2 or FIG. 3, this recording medium is distributed separately from a computer in order to provide a program to a user, and is recorded on a magnetic disk 41 or a magnetic disk 131 (including a flexible disk) on which the program is recorded. ), Optical disk 42 or optical disk 132 (including CD-ROM (Compact Disc-Only Memory), DVD (Digital Versatile Disc)), magneto-optical disk 43 or magneto-optical disk 133 (MD (Mini-Disc) (trademark)). Program) which is provided not only to a package medium including the semiconductor memory 44 or the semiconductor memory 134 but also provided to a user in a state where the program is incorporated in a computer in advance. ROM or ROM102 and not shown is provided inside the system control CPU 11, configured like HDD 111.
[0136]
The program for executing the above-described series of processes is installed on a computer via a wired or wireless communication medium such as a local area network, the Internet, or digital satellite broadcasting via an interface such as a router or a modem as necessary. May be performed.
[0137]
In this specification, the step of describing a program stored in a recording medium may be performed in chronological order according to the described order, or may be performed in parallel or not necessarily in chronological order. This also includes processes executed individually.
[0138]
In the present specification, the system represents the entire device including a plurality of devices.
[0139]
【The invention's effect】
As described above, according to the first aspect of the present invention, a moving image can be received on the receiving side.
[0140]
Further, according to the first aspect of the present invention, it is possible to maintain the real-time property of a moving image on the receiving side regardless of the bandwidth of the network or the calculation speed of the receiving side.
[0141]
According to the second aspect of the present invention, a moving image can be reproduced.
[0142]
Further, according to the second aspect of the present invention, it is possible to maintain the real-time property of the moving image regardless of the bandwidth of the network or the calculation speed.
[Brief description of the drawings]
FIG. 1 is a diagram showing an embodiment of a communication system according to the present invention.
FIG. 2 is a block diagram showing a configuration of the recording / reproducing apparatus 1.
FIG. 3 is a diagram illustrating a configuration of a personal computer 3.
FIG. 4 is a flowchart illustrating processing of buffer memory control when transmitting image and audio data recorded on a video cassette via a network 2.
FIG. 5 is a flowchart illustrating a process of controlling a buffer memory when recording image and audio data received via a network 2 on a video cassette.
FIG. 6 is a flowchart illustrating a process of communicating image and audio data.
[Explanation of symbols]
Reference Signs List 1 recording / reproducing device, 2 network, 3 personal computer, 11 system control CPU, 12 VCR system unit, 15 memory controller, 16 buffer memory, 17 memory monitor, 18 TCP / IP processing unit, 19 network interface, 20 low resolution encoder , 22 drive, 41 magnetic disk, 42 optical disk, 43 magneto-optical disk, 44 semiconductor memory, 101 CPU, 102 ROM, 103 RAM, 110 display, 111 HDD, 113 communication unit, 131 magnetic disk, 132 optical disk, 133 magneto-optical disk , 134 Semiconductor Memory

Claims (8)

提供しようとする第1の動画像を基に、前記第1の動画像に比較して解像度の低い第2の動画像を生成する生成手段と、
生成された前記第2の動画像の記憶を制御する記憶制御手段と、
受信側からフレームの送信要求が受信された場合、ネットワークを介した、記憶されている前記第2の動画像のうちの、最後に記憶された1つのフレームの受信側への送信を制御する送信制御手段と、
送信された前記フレームより以前に記憶されたフレームを消去する消去手段と
を含むことを特徴とする情報提供装置。
Generating means for generating a second moving image having a lower resolution than the first moving image based on the first moving image to be provided;
Storage control means for controlling storage of the generated second moving image;
When a frame transmission request is received from the receiving side, transmission for controlling transmission of the last stored one frame of the stored second moving image to the receiving side via the network. Control means;
Erasing means for erasing a frame stored before the transmitted frame.
提供しようとする第1の動画像を基に、前記第1の動画像に比較して解像度の低い第2の動画像を生成する生成ステップと、
生成された前記第2の動画像の記憶を制御する記憶制御ステップと、
受信側からフレームの送信要求が受信された場合、ネットワークを介した、記憶されている前記第2の動画像のうちの、最後に記憶された1つのフレームの受信側への送信を制御する送信制御ステップと、
送信された前記フレームより以前に記憶されたフレームを消去する消去ステップと
を含むことを特徴とする情報提供方法。
A generating step of generating a second moving image having a lower resolution than the first moving image based on the first moving image to be provided;
A storage control step of controlling storage of the generated second moving image;
When a frame transmission request is received from the receiving side, transmission for controlling transmission of the last stored one frame of the stored second moving image to the receiving side via the network. A control step;
An erasing step of erasing a frame stored before the transmitted frame.
提供しようとする第1の動画像を基に、前記第1の動画像に比較して解像度の低い第2の動画像を生成する生成ステップと、
生成された前記第2の動画像の記憶を制御する記憶制御ステップと、
受信側からフレームの送信要求が受信された場合、ネットワークを介した、記憶されている前記第2の動画像のうちの、最後に記憶された1つのフレームの受信側への送信を制御する送信制御ステップと、
送信された前記フレームより以前に記憶されたフレームを消去する消去ステップと
を含むことを特徴とする情報提供処理をコンピュータに実行させるプログラムが記録されている記録媒体。
A generating step of generating a second moving image having a lower resolution than the first moving image based on the first moving image to be provided;
A storage control step of controlling storage of the generated second moving image;
When a frame transmission request is received from the receiving side, transmission for controlling transmission of the last stored one frame of the stored second moving image to the receiving side via the network. A control step;
An erasing step of erasing a frame stored before the transmitted frame, wherein a program for causing a computer to execute an information providing process is recorded.
提供しようとする第1の動画像を基に、前記第1の動画像に比較して解像度の低い第2の動画像を生成する生成ステップと、
生成された前記第2の動画像の記憶を制御する記憶制御ステップと、
受信側からフレームの送信要求が受信された場合、ネットワークを介した、記憶されている前記第2の動画像のうちの、最後に記憶された1つのフレームの受信側への送信を制御する送信制御ステップと、
送信された前記フレームより以前に記憶されたフレームを消去する消去ステップと
をコンピュータに実行させることを特徴とするプログラム。
A generating step of generating a second moving image having a lower resolution than the first moving image based on the first moving image to be provided;
A storage control step of controlling storage of the generated second moving image;
When a frame transmission request is received from the receiving side, transmission for controlling transmission of the last stored one frame of the stored second moving image to the receiving side via the network. A control step;
An erasing step of erasing a frame stored before the transmitted frame.
動画像を提供する情報提供装置への、ネットワークを介した、前記動画像の1つのフレームの送信要求の送信を制御する送信制御手段と、
前記ネットワークを介して、前記情報提供装置から送信された、前記動画像の1つの前記フレームの受信を制御する受信制御手段と、
受信された前記動画像の前記フレームを基に、前記動画像を再生する再生手段と
を含むことを特徴とする情報処理装置。
Transmission control means for controlling transmission of a transmission request for one frame of the moving image to an information providing apparatus for providing the moving image via a network;
Via the network, transmitted from the information providing apparatus, reception control means for controlling the reception of one of the frames of the moving image,
An information processing apparatus comprising: a reproducing unit configured to reproduce the moving image based on the received frame of the moving image.
動画像を提供する情報提供装置への、ネットワークを介した、前記動画像の1つのフレームの送信要求の送信を制御する送信制御ステップと、
前記ネットワークを介して、前記情報提供装置から送信された、前記動画像の1つの前記フレームの受信を制御する受信制御ステップと、
受信された前記動画像の前記フレームを基に、前記動画像を再生する再生ステップと
を含むことを特徴とする情報処理方法。
A transmission control step of controlling transmission of a transmission request for one frame of the moving image to an information providing apparatus for providing a moving image via a network;
Via the network, transmitted from the information providing device, a reception control step of controlling the reception of one of the frames of the moving image,
A reproducing step of reproducing the moving image based on the received frame of the moving image.
動画像を提供する情報提供装置への、ネットワークを介した、前記動画像の1つのフレームの送信要求の送信を制御する送信制御ステップと、
前記ネットワークを介して、前記情報提供装置から送信された、前記動画像の1つの前記フレームの受信を制御する受信制御ステップと、
受信された前記動画像の前記フレームを基に、前記動画像を再生する再生ステップと
を含むことを特徴とする情報処理をコンピュータに実行させるプログラムが記録されている記録媒体。
A transmission control step of controlling transmission of a transmission request for one frame of the moving image to an information providing apparatus for providing a moving image via a network;
Via the network, transmitted from the information providing device, a reception control step of controlling the reception of one of the frames of the moving image,
A reproducing step of reproducing the moving image based on the received frame of the moving image. A recording medium storing a program for causing a computer to execute information processing.
動画像を提供する情報提供装置への、ネットワークを介した、前記動画像の1つのフレームの送信要求の送信を制御する送信制御ステップと、
前記ネットワークを介して、前記情報提供装置から送信された、前記動画像の1つの前記フレームの受信を制御する受信制御ステップと、
受信された前記動画像の前記フレームを基に、前記動画像を再生する再生ステップと
をコンピュータに実行させることを特徴とするプログラム。
A transmission control step of controlling transmission of a transmission request for one frame of the moving image to an information providing apparatus for providing a moving image via a network;
Via the network, transmitted from the information providing device, a reception control step of controlling the reception of one of the frames of the moving image,
And a reproducing step of reproducing the moving image based on the received frame of the moving image.
JP2002219086A 2002-07-29 2002-07-29 Information providing apparatus and method, information processing apparatus and method, recording medium, and program Withdrawn JP2004064366A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2002219086A JP2004064366A (en) 2002-07-29 2002-07-29 Information providing apparatus and method, information processing apparatus and method, recording medium, and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2002219086A JP2004064366A (en) 2002-07-29 2002-07-29 Information providing apparatus and method, information processing apparatus and method, recording medium, and program

Publications (1)

Publication Number Publication Date
JP2004064366A true JP2004064366A (en) 2004-02-26

Family

ID=31940074

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2002219086A Withdrawn JP2004064366A (en) 2002-07-29 2002-07-29 Information providing apparatus and method, information processing apparatus and method, recording medium, and program

Country Status (1)

Country Link
JP (1) JP2004064366A (en)

Similar Documents

Publication Publication Date Title
US8134605B2 (en) Apparatus for transmitting an HTML file with a captured or stored image to an electronic device over a network
US7890985B2 (en) Server-side media stream manipulation for emulation of media playback functions
JP4772297B2 (en) Media Foundation Media Processor
WO2013008867A1 (en) Transmission device, method for controlling transmission device, control program, and recording medium
JP5211569B2 (en) Content reproduction apparatus, content reproduction method, and program
JP2008262686A (en) Method and device for recording broadcast data
US20100166387A1 (en) Method and apparatus for playing video data of high bit rate format by a player capable of playing video data of low bit rate format
JP2002314975A (en) Method and computer network for obtaining audio and/or video program of higher quality version progressively
WO2006007352A1 (en) Method and system for interactive control of media over a network
JP2009044416A (en) Content playback device, content playback method, program, and content playback system
US20110310965A1 (en) Communication device, communication method, and communication program product
US20080175559A1 (en) Image process apparatus and method thereof
JP5282383B2 (en) Content reproduction apparatus, content reproduction method, program, and content reproduction system
JP2003209807A (en) Moving picture reproducing method and apparatus
JP2006332759A (en) Electronic apparatus, image control method, and program for image control
JP6294527B2 (en) Transmission device, transmission method, reproduction device, and reproduction method
JP2004356829A (en) Data receiving reproducing method and data receiving reproducing apparatus
JP2004064366A (en) Information providing apparatus and method, information processing apparatus and method, recording medium, and program
JP2006339980A (en) Image reproducer
JP3977090B2 (en) Data processing device
JP2005110024A (en) Data transmitter, data transmission/reception system, and data transmission/reception method
JP4207483B2 (en) Transmitter
KR101378092B1 (en) Method for searching streaming data skip and device thereof
KR101226184B1 (en) Digital video recorder system and driving method thereof
JP2005278201A (en) Data transfer apparatus, and data transfer method

Legal Events

Date Code Title Description
A300 Application deemed to be withdrawn because no request for examination was validly filed

Free format text: JAPANESE INTERMEDIATE CODE: A300

Effective date: 20051004