JP3452914B2 - データ蓄積通信方法及びデータ生成方法 - Google Patents
データ蓄積通信方法及びデータ生成方法Info
- Publication number
- JP3452914B2 JP3452914B2 JP2002145286A JP2002145286A JP3452914B2 JP 3452914 B2 JP3452914 B2 JP 3452914B2 JP 2002145286 A JP2002145286 A JP 2002145286A JP 2002145286 A JP2002145286 A JP 2002145286A JP 3452914 B2 JP3452914 B2 JP 3452914B2
- Authority
- JP
- Japan
- Prior art keywords
- data
- packet
- time stamp
- unit
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Description
【０００１】
【発明の属する技術分野】本発明は、ＴＶ電話等に代表
される映像情報の通信を行う端末から送出される、特
に、ＩＴＵ（国際電気通信連合）−Ｔ勧告に準拠した画
像や音声データを蓄積し、任意の端末から蓄積データの
再生を行うことが可能なデータ蓄積通信方法及びデータ
生成方法に関するものである。
される映像情報の通信を行う端末から送出される、特
に、ＩＴＵ（国際電気通信連合）−Ｔ勧告に準拠した画
像や音声データを蓄積し、任意の端末から蓄積データの
再生を行うことが可能なデータ蓄積通信方法及びデータ
生成方法に関するものである。
【０００２】
【従来の技術】近年、従来からある電話やＦＡＸ（ファ
クシミリ）等の対話型の通信サービスに加えて、音声情
報を網のセンターに記憶して、それを随時再生すること
ができる蓄積型のサービスが提供されている。また、Ｉ
ＳＤＮ（Integrated Services Digital Network:サービ
ス総合ディジタル網）に代表されるディジタル通信網の
整備により、例えば、テレビ電話に代表される画像通信
サービスを利用することが可能となってきている。この
ような背景の中で、画像を利用した蓄積型のサービスに
対する要求が高まり、一部実用化されつつある。
クシミリ）等の対話型の通信サービスに加えて、音声情
報を網のセンターに記憶して、それを随時再生すること
ができる蓄積型のサービスが提供されている。また、Ｉ
ＳＤＮ（Integrated Services Digital Network:サービ
ス総合ディジタル網）に代表されるディジタル通信網の
整備により、例えば、テレビ電話に代表される画像通信
サービスを利用することが可能となってきている。この
ような背景の中で、画像を利用した蓄積型のサービスに
対する要求が高まり、一部実用化されつつある。
【０００３】図５は、従来のデータ蓄積通信装置の構成
図である。図中、４９は多重化データ送受信部の受信
部、５０は多重化データ送受信部の送信部、５１は回線
データ分離部、５２はＦＥＣ（Forward Error Correcti
on）の誤り訂正部、５３はビデオフレーム抽出部、５４
はパケット生成部、５５はパケット分解部、５６はデー
タ処理部、５７は回線データ多重化部である。回線デー
タ分離部５１は、システム制御部からの指示に従って、
受信した回線多重化データから画像や音声等のデータの
分離を行う。誤り訂正部５２は、回線データ分離部５１
から出力される画像データにＦＥＣの誤り訂正を行う。
図である。図中、４９は多重化データ送受信部の受信
部、５０は多重化データ送受信部の送信部、５１は回線
データ分離部、５２はＦＥＣ（Forward Error Correcti
on）の誤り訂正部、５３はビデオフレーム抽出部、５４
はパケット生成部、５５はパケット分解部、５６はデー
タ処理部、５７は回線データ多重化部である。回線デー
タ分離部５１は、システム制御部からの指示に従って、
受信した回線多重化データから画像や音声等のデータの
分離を行う。誤り訂正部５２は、回線データ分離部５１
から出力される画像データにＦＥＣの誤り訂正を行う。
【０００４】ビデオフレーム抽出部５３は、誤り訂正が
行われたデータからビデオフレームの抽出を行う。パケ
ット生成部５４は、ビデオフレーム抽出部５３で抽出さ
れたビデオフレームと回線データ分離部５１で分解され
た音声データからパケットの生成を行う。パケット分解
部５５は、記憶装置から出力されるパケットを画像や音
声データに分解する。データ処理部５６は、パケット分
解部５５から出力されるデータに何らかの処理を行う。
回線データ多重化部５７は、データ処理部５６から出力
されるデータから回線多重化データを生成する。
行われたデータからビデオフレームの抽出を行う。パケ
ット生成部５４は、ビデオフレーム抽出部５３で抽出さ
れたビデオフレームと回線データ分離部５１で分解され
た音声データからパケットの生成を行う。パケット分解
部５５は、記憶装置から出力されるパケットを画像や音
声データに分解する。データ処理部５６は、パケット分
解部５５から出力されるデータに何らかの処理を行う。
回線データ多重化部５７は、データ処理部５６から出力
されるデータから回線多重化データを生成する。
【０００５】図６は、従来のパケット構成図である。図
中、６１は蓄積時の端末の伝送レートや多重化レート及
び各データの符号化方式等の情報が含まれるヘッダ情
報、６２は画像のデータ長、６３は音声のデータ長、６
４は画像のビデオフレーム数、６５はビデオフレームの
データ長とビデオフレームデータ、６６は音声データで
ある。図７（ａ），（ｂ）は、従来のデータ多重フォー
マットを示す図で、現在テレビ電話等で用いられている
データの多重化形式を示す図である。このデータ多重フ
ォーマットは、国際標準として採用されており、この多
重化方式を用いることにより、テレビ電話等の相互接続
性が確保される。
中、６１は蓄積時の端末の伝送レートや多重化レート及
び各データの符号化方式等の情報が含まれるヘッダ情
報、６２は画像のデータ長、６３は音声のデータ長、６
４は画像のビデオフレーム数、６５はビデオフレームの
データ長とビデオフレームデータ、６６は音声データで
ある。図７（ａ），（ｂ）は、従来のデータ多重フォー
マットを示す図で、現在テレビ電話等で用いられている
データの多重化形式を示す図である。このデータ多重フ
ォーマットは、国際標準として採用されており、この多
重化方式を用いることにより、テレビ電話等の相互接続
性が確保される。
【０００６】図中、７１，７２はそれぞれ音声データ、
画像データに割り当てられる領域、７３はフレーム同期
用ビット、７４は端末間の能力・コマンド通信用ビッ
ト、７５は通信回線へのデータ送出順序である。各デー
タの多重化条件は能力・コマンド通信用ビット７４を使
用して端末−ホスト間でいつでも変更することが可能で
ある。データ蓄積時には、網から受信される回線多重化
データは、図５の回線データ分離部５１で画像や音声デ
ータに分離され、画像データはＦＥＣの誤り訂正部５
２、音声データはパケット生成部５４に出力される。Ｆ
ＥＣの誤り訂正部５２では、受信データの誤り訂正やフ
ィルピット等の余計なデータを取り除いてビデオフレー
ム抽出部５３に出力する。
画像データに割り当てられる領域、７３はフレーム同期
用ビット、７４は端末間の能力・コマンド通信用ビッ
ト、７５は通信回線へのデータ送出順序である。各デー
タの多重化条件は能力・コマンド通信用ビット７４を使
用して端末−ホスト間でいつでも変更することが可能で
ある。データ蓄積時には、網から受信される回線多重化
データは、図５の回線データ分離部５１で画像や音声デ
ータに分離され、画像データはＦＥＣの誤り訂正部５
２、音声データはパケット生成部５４に出力される。Ｆ
ＥＣの誤り訂正部５２では、受信データの誤り訂正やフ
ィルピット等の余計なデータを取り除いてビデオフレー
ム抽出部５３に出力する。
【０００７】該ビデオフレーム抽出部５３では、ＰＳＣ
（フレーム開始符号）の探索を行ってビデオフレーム抽
出を行い、パケット生成部５４に出力する。該パケット
生成部５４では、図６のパケットフォーマットに従って
パケットの生成を行い、記憶装置に出力する。データ再
生時には、記憶装置から出力されるパケットデータは、
パケット分解部５５で受信される。該パケット分解部５
５は、パケットのヘッダ情報をシステム制御部に通知す
る。システム制御部は、回線データ多重化部５７に対し
て、図７のＢＡＳ７４を使用して蓄積時の通信端末の動
作モードと再生時の通信端末の動作モードの整合を図る
ように指示する。
（フレーム開始符号）の探索を行ってビデオフレーム抽
出を行い、パケット生成部５４に出力する。該パケット
生成部５４では、図６のパケットフォーマットに従って
パケットの生成を行い、記憶装置に出力する。データ再
生時には、記憶装置から出力されるパケットデータは、
パケット分解部５５で受信される。該パケット分解部５
５は、パケットのヘッダ情報をシステム制御部に通知す
る。システム制御部は、回線データ多重化部５７に対し
て、図７のＢＡＳ７４を使用して蓄積時の通信端末の動
作モードと再生時の通信端末の動作モードの整合を図る
ように指示する。
【０００８】回線データ多重化部５７で動作モードの整
合が完了したら、パケット分解部５５では、パケットの
分解を行い、画像や音声データをそれぞれデータ処理部
５６に出力する。該データ処理部５６では、何らかの適
当な処理を行って、回線データ多重化部５７にそれぞれ
のデータを出力する。該回線データ多重化部５７では、
図７の多重化フォーマットに従って多重化データを生成
し、通信網に送出する。
合が完了したら、パケット分解部５５では、パケットの
分解を行い、画像や音声データをそれぞれデータ処理部
５６に出力する。該データ処理部５６では、何らかの適
当な処理を行って、回線データ多重化部５７にそれぞれ
のデータを出力する。該回線データ多重化部５７では、
図７の多重化フォーマットに従って多重化データを生成
し、通信網に送出する。
【０００９】
【発明が解決しようとする課題】前述のように、従来の
データ蓄積通信装置では、多重化されたデータを画像や
音声等に分離し、何らかの処理を行って蓄積又は送出を
行っているため、送出時に画像と音声との間に遅延差が
生じるという問題点がある。本発明は、このような実情
に鑑みてなされたもので、画像データ及び音声データの
蓄積時にタイムスタンプを付加してパケット化して蓄積
し、画像データ及び音声データの送出時に付加されたタ
イムスタンプから、該画像データ及び音声データの遅延
差の吸収を行うようにしたデータ蓄積通信方法を提供す
ることを目的とする。
データ蓄積通信装置では、多重化されたデータを画像や
音声等に分離し、何らかの処理を行って蓄積又は送出を
行っているため、送出時に画像と音声との間に遅延差が
生じるという問題点がある。本発明は、このような実情
に鑑みてなされたもので、画像データ及び音声データの
蓄積時にタイムスタンプを付加してパケット化して蓄積
し、画像データ及び音声データの送出時に付加されたタ
イムスタンプから、該画像データ及び音声データの遅延
差の吸収を行うようにしたデータ蓄積通信方法を提供す
ることを目的とする。
【００１０】
【課題を解決するための手段】本願の第１の発明は、画
像データ及び音声データを多重化し、通信網を介して、
通信端末へ伝送するために、画像データ及び音声データ
を蓄積しておくデータ蓄積通信方法であって、画像デー
タ及び音声データをパケット化するパケット生成ステッ
プと、前記パケット生成ステップにより生成されたパケ
ットを蓄積する記憶ステップと、前記画像データを前記
通信網に送出するタイミングを示す第１のタイムスタン
プ及び音声データを前記通信網に送出するタイミングを
示す第２のタイムスタンプを生成するタイムスタンプ生
成ステップとを備え、前記パケット生成ステップは、前
記タイムスタンプ生成ステップで生成した第１のタイム
スタンプ及び第２のタイムスタンプを、前記画像データ
及び音声データに付加して蓄積するものである。本願の
第２の発明は、画像データを通信網に送出するタイミン
グを示す第１のタイムスタンプ及び音声データを通信網
に送出するタイミングを示す第２のタイムスタンプが付
加された画像データ及び音声データからなるパケットを
蓄積する記憶ステップと、前記記憶ステップによって蓄
積された画像データ及び音声データを多重化し、通信網
を介して、通信端末に伝送する多重化データ送信ステッ
プとを備えたデータ蓄積通信方法であって、前記多重化
データ送信ステップは、前記記憶ステップによって蓄積
されたパケットに含まれるタイムスタンプに基づいて、
該パケットに含まれる画像データ及び音声データを、所
定のタイミングで前記通信網に送出するものである。
像データ及び音声データを多重化し、通信網を介して、
通信端末へ伝送するために、画像データ及び音声データ
を蓄積しておくデータ蓄積通信方法であって、画像デー
タ及び音声データをパケット化するパケット生成ステッ
プと、前記パケット生成ステップにより生成されたパケ
ットを蓄積する記憶ステップと、前記画像データを前記
通信網に送出するタイミングを示す第１のタイムスタン
プ及び音声データを前記通信網に送出するタイミングを
示す第２のタイムスタンプを生成するタイムスタンプ生
成ステップとを備え、前記パケット生成ステップは、前
記タイムスタンプ生成ステップで生成した第１のタイム
スタンプ及び第２のタイムスタンプを、前記画像データ
及び音声データに付加して蓄積するものである。本願の
第２の発明は、画像データを通信網に送出するタイミン
グを示す第１のタイムスタンプ及び音声データを通信網
に送出するタイミングを示す第２のタイムスタンプが付
加された画像データ及び音声データからなるパケットを
蓄積する記憶ステップと、前記記憶ステップによって蓄
積された画像データ及び音声データを多重化し、通信網
を介して、通信端末に伝送する多重化データ送信ステッ
プとを備えたデータ蓄積通信方法であって、前記多重化
データ送信ステップは、前記記憶ステップによって蓄積
されたパケットに含まれるタイムスタンプに基づいて、
該パケットに含まれる画像データ及び音声データを、所
定のタイミングで前記通信網に送出するものである。
【００１１】本願の第３の発明は、画像データ及び音声
データからなるパケットを作成するデータ生成方法であ
って、前記画像データを作成する画像符号化ステップ
と、前記音声データを作成する音声符号化ステップと、
前記画像データ及び前記音声データを多重するデータ多
重ステップとを備え、前記パケットは、画像データを通
信網に送出するタイミングを示す第１のタイムスタンプ
及び音声データを通信網に送出するタイミングを示す第
２のタイムスタンプが付加されたものである。
データからなるパケットを作成するデータ生成方法であ
って、前記画像データを作成する画像符号化ステップ
と、前記音声データを作成する音声符号化ステップと、
前記画像データ及び前記音声データを多重するデータ多
重ステップとを備え、前記パケットは、画像データを通
信網に送出するタイミングを示す第１のタイムスタンプ
及び音声データを通信網に送出するタイミングを示す第
２のタイムスタンプが付加されたものである。
【００１２】
【発明の実施の形態】本発明の一実施形態について、図
面を参照して以下に説明する。図１は、本発明実施形態
のデータ蓄積通信方法を説明するための構成図である。
図１中、１は通信端末、２は通信ホスト、３はＩＳＤＮ
等の通信網である。４は画像入力用のカメラ、５は画像
出力用のモニタ、６は音声入出力用のハンドセット、７
は端末のシステム制御部、８は画像の符号化／復号化
部、９は音声の符号化／復号化部、１０は多重化データ
送受信部であり、多重化データ送受信部１０は、符号化
画像データと符号化音声データと制御情報を多重化して
回線に送出する。
面を参照して以下に説明する。図１は、本発明実施形態
のデータ蓄積通信方法を説明するための構成図である。
図１中、１は通信端末、２は通信ホスト、３はＩＳＤＮ
等の通信網である。４は画像入力用のカメラ、５は画像
出力用のモニタ、６は音声入出力用のハンドセット、７
は端末のシステム制御部、８は画像の符号化／復号化
部、９は音声の符号化／復号化部、１０は多重化データ
送受信部であり、多重化データ送受信部１０は、符号化
画像データと符号化音声データと制御情報を多重化して
回線に送出する。
【００１３】１１はホストのシステム制御部、１２はホ
ストの多重化データ送受信部であり、多重化データ送受
信部１２は、多重化データから制御情報を分離多重化す
る。１３はデータを記憶蓄積する記録装置である。通信
端末１側のカメラ４から入力された動画像は、画像符号
化部８でフレーム間予測符号化される。符号化された符
号化画像データは、ハンドセット６から入力され、音声
符号化部９で符号化された符号化音声データと制御情報
等と共に多重化データ送信部１０で多重化され、通信網
３を通じてホスト２へ伝送される。通信ホスト２側で
は、通信端末１から送られてきた多重化データを多重化
データ受信部１２で受信する。該多重化データ受信部１
２では、受信した画像・音声等が多重化されたデータか
ら蓄積パケットデータを生成し、記憶装置１３に転出す
る。該記憶装置１３では、適当な形のファイルとして蓄
積する。
ストの多重化データ送受信部であり、多重化データ送受
信部１２は、多重化データから制御情報を分離多重化す
る。１３はデータを記憶蓄積する記録装置である。通信
端末１側のカメラ４から入力された動画像は、画像符号
化部８でフレーム間予測符号化される。符号化された符
号化画像データは、ハンドセット６から入力され、音声
符号化部９で符号化された符号化音声データと制御情報
等と共に多重化データ送信部１０で多重化され、通信網
３を通じてホスト２へ伝送される。通信ホスト２側で
は、通信端末１から送られてきた多重化データを多重化
データ受信部１２で受信する。該多重化データ受信部１
２では、受信した画像・音声等が多重化されたデータか
ら蓄積パケットデータを生成し、記憶装置１３に転出す
る。該記憶装置１３では、適当な形のファイルとして蓄
積する。
【００１４】記憶されたデータは、ユーザまたはホスト
からの指示により、記憶装置１３から読み出され、ホス
トの多重化データ送信部１２に送られる。該多重化デー
タ送信部１２では、システム制御部１１の指示により、
蓄積時にそのまま記憶された制御情報を新たな制御情報
に書き換え、通信網３を通じて通信端末１に伝送する。
該通信端末１では、ホストから送られてきた制御情報を
書き換えた多重化データを多重化データ受信部１０で受
信する。該多重化データ受信部１０では、制御情報と画
像データと音声データ等を分離し、制御情報はシステム
制御部７に送られる。
からの指示により、記憶装置１３から読み出され、ホス
トの多重化データ送信部１２に送られる。該多重化デー
タ送信部１２では、システム制御部１１の指示により、
蓄積時にそのまま記憶された制御情報を新たな制御情報
に書き換え、通信網３を通じて通信端末１に伝送する。
該通信端末１では、ホストから送られてきた制御情報を
書き換えた多重化データを多重化データ受信部１０で受
信する。該多重化データ受信部１０では、制御情報と画
像データと音声データ等を分離し、制御情報はシステム
制御部７に送られる。
【００１５】また、多重化データ受信部１０で受信され
た符号化画像データは画像復号化部８に送られ、システ
ム制御部７からの指示に従って、動画像の復号・再生が
行われ、再生画像がモニタ５に表示される。分離された
音声データは、音声復号化部９で復号・再生され、ハン
ドセット６から出力される。なお、記憶再生動作時で
も、回線による通信は常に双方向で行われており、制御
情報は回線接続状態では画像データ等の有無に関わらず
通信が可能である。図２は、図１のホスト多重化データ
送受信部の一例を説明するための構成図である。図２
中、１４は受信部、１５は送信部、２１は回線データ分
離部、２２はＦＥＣ（Forward Error Correction）の誤
り訂正部、２３はビデオフレーム抽出部、２４はパケッ
ト生成部、２５はタイムスタンプ生成部、２６はパケッ
ト分解部、２７はデータ処理部、２８は遅延差吸収部、
２９は回線データ多重化部である。
た符号化画像データは画像復号化部８に送られ、システ
ム制御部７からの指示に従って、動画像の復号・再生が
行われ、再生画像がモニタ５に表示される。分離された
音声データは、音声復号化部９で復号・再生され、ハン
ドセット６から出力される。なお、記憶再生動作時で
も、回線による通信は常に双方向で行われており、制御
情報は回線接続状態では画像データ等の有無に関わらず
通信が可能である。図２は、図１のホスト多重化データ
送受信部の一例を説明するための構成図である。図２
中、１４は受信部、１５は送信部、２１は回線データ分
離部、２２はＦＥＣ（Forward Error Correction）の誤
り訂正部、２３はビデオフレーム抽出部、２４はパケッ
ト生成部、２５はタイムスタンプ生成部、２６はパケッ
ト分解部、２７はデータ処理部、２８は遅延差吸収部、
２９は回線データ多重化部である。
【００１６】回線データ分離部２１は、通信網３から受
信される多重化データの分離を行う。誤り訂正部２２
は、回線データ分離部２１で分離された画像データのＦ
ＥＣの誤り訂正を行う。ビデオフレーム抽出部２３は、
誤り訂正が行われた画像データからビデオフレームの抽
出を行う。パケット生成部２４は、画像や音声等のデー
タからパケットを生成する。タイムスタンプ生成部２５
は、回線データ分離部２１から出力されるオクテットタ
イミングからタイムスタンプを生成する。
信される多重化データの分離を行う。誤り訂正部２２
は、回線データ分離部２１で分離された画像データのＦ
ＥＣの誤り訂正を行う。ビデオフレーム抽出部２３は、
誤り訂正が行われた画像データからビデオフレームの抽
出を行う。パケット生成部２４は、画像や音声等のデー
タからパケットを生成する。タイムスタンプ生成部２５
は、回線データ分離部２１から出力されるオクテットタ
イミングからタイムスタンプを生成する。
【００１７】パケット分解部２６は、受信したパケット
を画像や音声等のデータに分解する。データ処理部２７
は、画像や音声等に何らかの適当な処理を行う。遅延差
吸収部２８は、画像や音声間に生じる遅延差を付随する
タイムスタンプをもとに吸収する。回線データ多重化部
２９は、遅延差吸収部２８から出力される画像や音声デ
ータ等から回線多重化データを生成する。図３（ａ）〜
（ｃ）は、図２の受信部１４のモジュール間の画像デー
タを表した図である。図３（ａ）は、図２中の信号ａに
相当し、ＦＥＣの同期を確立するための同期信号とＦＥ
Ｃの誤り訂正を行うためのパリティビット、符号化デー
タ量の調整を行うためのフィルビットおよび情報ビット
で構成されている。
を画像や音声等のデータに分解する。データ処理部２７
は、画像や音声等に何らかの適当な処理を行う。遅延差
吸収部２８は、画像や音声間に生じる遅延差を付随する
タイムスタンプをもとに吸収する。回線データ多重化部
２９は、遅延差吸収部２８から出力される画像や音声デ
ータ等から回線多重化データを生成する。図３（ａ）〜
（ｃ）は、図２の受信部１４のモジュール間の画像デー
タを表した図である。図３（ａ）は、図２中の信号ａに
相当し、ＦＥＣの同期を確立するための同期信号とＦＥ
Ｃの誤り訂正を行うためのパリティビット、符号化デー
タ量の調整を行うためのフィルビットおよび情報ビット
で構成されている。
【００１８】図３（ｂ）は、図２中の信号ｂに相当し、
ＦＥＣの誤り訂正が行われ、フィルビット等の余計なデ
ータが取り除かれたものである。図３（ｃ）は、図２中
の信号ｃに相当し、ＰＳＣ（フレーム開始符号）ごとに
抽出されたビデオフレームである。図４は、蓄積を行う
ときのパケット構成図である。４１は蓄積時の多重化レ
ート、符号化方式及び符号化能力等の情報が明記された
ヘッダ情報、４２は画像のデータ長、４３は音声のデー
タ長、４４は画像のビデオフレーム数、４５は画像のタ
イムスタンプとビデオフレームのデータ長及びビデオフ
レームデータ、４６は音声のタイムスタンプ、４７は音
声データである。
ＦＥＣの誤り訂正が行われ、フィルビット等の余計なデ
ータが取り除かれたものである。図３（ｃ）は、図２中
の信号ｃに相当し、ＰＳＣ（フレーム開始符号）ごとに
抽出されたビデオフレームである。図４は、蓄積を行う
ときのパケット構成図である。４１は蓄積時の多重化レ
ート、符号化方式及び符号化能力等の情報が明記された
ヘッダ情報、４２は画像のデータ長、４３は音声のデー
タ長、４４は画像のビデオフレーム数、４５は画像のタ
イムスタンプとビデオフレームのデータ長及びビデオフ
レームデータ、４６は音声のタイムスタンプ、４７は音
声データである。
【００１９】次に、本実施形態のデータ蓄積通信方法の
動作について説明する。データ蓄積時には、回線データ
分離部２１で、通信網３から受信された多重化データを
画像や音声等に分離し、画像データはＦＥＣの誤り訂正
部２２，音声データはパケット生成部２４，及びオクテ
ットタイミングはタイムスタンプ生成部２５に各々出力
する。タイムスタンプ生成部２５では、オクテット毎に
タイムスタンプを生成しビデーフレーム抽出部２３とパ
ケット生成部２４とに出力する。ＦＥＣの誤り訂正部２
２では、図３（ａ）に示す信号の状態の画像データを受
信し、ＦＥＣの誤り訂正等を行って、図３（ｂ）に示す
信号の状態の画像データをビデオフレーム抽出部２３に
出力する。
動作について説明する。データ蓄積時には、回線データ
分離部２１で、通信網３から受信された多重化データを
画像や音声等に分離し、画像データはＦＥＣの誤り訂正
部２２，音声データはパケット生成部２４，及びオクテ
ットタイミングはタイムスタンプ生成部２５に各々出力
する。タイムスタンプ生成部２５では、オクテット毎に
タイムスタンプを生成しビデーフレーム抽出部２３とパ
ケット生成部２４とに出力する。ＦＥＣの誤り訂正部２
２では、図３（ａ）に示す信号の状態の画像データを受
信し、ＦＥＣの誤り訂正等を行って、図３（ｂ）に示す
信号の状態の画像データをビデオフレーム抽出部２３に
出力する。
【００２０】該ビデオフレーム抽出部２３では、受信し
たデータからＰＳＣを探索し、図３（ｃ）に示す信号の
状態のデータとＰＳＣが発見された時点のタイムスタン
プをパケット生成部２４に出力する。該パケット生成部
２４では受信した画像や音声データ及び付随したタイム
スタンプから、図４のパケットフォーマットに従ってパ
ケットを生成し、ヘッダ情報には、多重化レート、符号
化方式及び符号化能力等の再生時に必要となる情報を明
記し、記憶装置１３に対して出力する。
たデータからＰＳＣを探索し、図３（ｃ）に示す信号の
状態のデータとＰＳＣが発見された時点のタイムスタン
プをパケット生成部２４に出力する。該パケット生成部
２４では受信した画像や音声データ及び付随したタイム
スタンプから、図４のパケットフォーマットに従ってパ
ケットを生成し、ヘッダ情報には、多重化レート、符号
化方式及び符号化能力等の再生時に必要となる情報を明
記し、記憶装置１３に対して出力する。
【００２１】データ再生時には、パケット分解部２６
で、記憶装置１３から出力されたパケットを受信する。
パケットを受信したパケット分解部２６は、ヘッダ情報
を抽出し、システム制御部１１に通知する。該システム
制御部１１は、回線データ多重化部２９に対して、図７
に示すＢＳＡ７４を使用して蓄積時の通信端末の動作モ
ードと再生時の通信端末の動作モードとの整合をとるよ
うに指示する。回線データ多重化部２９で動作モードの
整合が完了したら、パケット分解部２６では、パケット
の分解を行い、画像や音声データ及び付随したタイムス
タンプをデータ処理部２７に出力する。該データ処理部
２７では、画像や音声データに何らかの適当な処理を行
い、遅延差吸収部２８にデータ及びタイムスタンプを出
力する。該遅延差吸収部２８では、付随するタイムスタ
ンプから遅延差の吸収を行い、回線データ多重化部２９
に出力する。該回線データ多重化部２９では、画像や音
声等のデータを、図７に示す多重化フォーマットに従っ
て多重化して回線多重化データを生成し通信網３に送出
する。
で、記憶装置１３から出力されたパケットを受信する。
パケットを受信したパケット分解部２６は、ヘッダ情報
を抽出し、システム制御部１１に通知する。該システム
制御部１１は、回線データ多重化部２９に対して、図７
に示すＢＳＡ７４を使用して蓄積時の通信端末の動作モ
ードと再生時の通信端末の動作モードとの整合をとるよ
うに指示する。回線データ多重化部２９で動作モードの
整合が完了したら、パケット分解部２６では、パケット
の分解を行い、画像や音声データ及び付随したタイムス
タンプをデータ処理部２７に出力する。該データ処理部
２７では、画像や音声データに何らかの適当な処理を行
い、遅延差吸収部２８にデータ及びタイムスタンプを出
力する。該遅延差吸収部２８では、付随するタイムスタ
ンプから遅延差の吸収を行い、回線データ多重化部２９
に出力する。該回線データ多重化部２９では、画像や音
声等のデータを、図７に示す多重化フォーマットに従っ
て多重化して回線多重化データを生成し通信網３に送出
する。
【００２２】
【発明の効果】以上の説明から明らかなように、本発明
によると、画像データ及び音声データを通信網に送出す
るタイミングを示すタイムスタンプを、前記画像データ
及び音声データに付加してパケット化し、記憶手段に蓄
積して、再生されたパケットに含まれるタイムスタンプ
に基づいて、該パケットに含まれる画像データ及び音声
データの遅延差を吸収して、通信網に送出することが可
能となる。
によると、画像データ及び音声データを通信網に送出す
るタイミングを示すタイムスタンプを、前記画像データ
及び音声データに付加してパケット化し、記憶手段に蓄
積して、再生されたパケットに含まれるタイムスタンプ
に基づいて、該パケットに含まれる画像データ及び音声
データの遅延差を吸収して、通信網に送出することが可
能となる。
【図１】本発明のデータ蓄積通信方法の一実施形態を説
明するための構成図である。
明するための構成図である。
【図２】図１における多重化データ送受信部の構成図で
ある。
ある。
【図３】図２の受信部におけるモジュール間の画像デー
タの構成図である。
タの構成図である。
【図４】本発明のデータ蓄積通信方法の一実施形態によ
る蓄積時のパケットフォーマットを示した図である。
る蓄積時のパケットフォーマットを示した図である。
【図５】従来の蓄積型画像通信システムにおける多重化
データ送受信部の構成図である。
データ送受信部の構成図である。
【図６】従来の蓄積時のパケットフォーマットを示した
図である。
図である。
【図７】従来のデータ多重化フォーマットを示した図で
ある。
ある。
【符号の説明】
１…通信端末、２…通信ホスト、３…ＩＳＤＮ等の通信
網、４…画像入力用のカメラ、５…画像出力用のモニ
タ、６…音声入出力用のハンドセット、７…端末のシス
テム制御部、８…画像の符号化／復号化部、９…音声の
符号化／復号化部、１０…端末の多重化データ送受信
部、１１…ホストのシステム制御部、１２…ホストの多
重化データ送受信部、１３…記憶装置、１４…受信部、
１５…送信部、２１…回線データ分離部、２２…ＦＥＣ
の誤り訂正部、２３…ビデオフレーム抽出部、２４…パ
ケット生成部、２５…タイムスタンプ生成部、２６…パ
ケット分解部、２７…データ処理部、２８…遅延差吸収
部、２９…回線データ多重化部。
網、４…画像入力用のカメラ、５…画像出力用のモニ
タ、６…音声入出力用のハンドセット、７…端末のシス
テム制御部、８…画像の符号化／復号化部、９…音声の
符号化／復号化部、１０…端末の多重化データ送受信
部、１１…ホストのシステム制御部、１２…ホストの多
重化データ送受信部、１３…記憶装置、１４…受信部、
１５…送信部、２１…回線データ分離部、２２…ＦＥＣ
の誤り訂正部、２３…ビデオフレーム抽出部、２４…パ
ケット生成部、２５…タイムスタンプ生成部、２６…パ
ケット分解部、２７…データ処理部、２８…遅延差吸収
部、２９…回線データ多重化部。
フロントページの続き
(72)発明者 岩野 恒明
大阪府大阪市阿倍野区長池町22番22号
シャープ株式会社内
(72)発明者 中野 博隆
東京都千代田区大手町２−３−１ 日本
電信電話株式会社内
(72)発明者 中村 修
東京都千代田区大手町２−３−１ 日本
電信電話株式会社内
(56)参考文献 特開 平５−236009（ＪＰ，Ａ)
特開 平５−37893（ＪＰ，Ａ)
特開 平７−30886（ＪＰ，Ａ)
特開 平２−5660（ＪＰ，Ａ)
(58)調査した分野(Int.Cl.7，ＤＢ名)
H04L 12/56
H04N 7/08
Claims (3)
- 【請求項１】 画像データ及び音声データを多重化し、
通信網を介して、通信端末へ伝送するために、画像デー
タ及び音声データを蓄積しておくデータ蓄積通信方法で
あって、 画像データ及び音声データをパケット化するパケット生
成ステップと、 前記パケット生成ステップにより生成されたパケットを
蓄積する記憶ステップと、 前記画像データを前記通信網に送出するタイミングを示
す第１のタイムスタンプ及び音声データを前記通信網に
送出するタイミングを示す第２のタイムスタンプを生成
するタイムスタンプ生成ステップとを備え、 前記パケット生成ステップは、前記タイムスタンプ生成
ステップで生成した第１のタイムスタンプ及び第２のタ
イムスタンプを、前記画像データ及び音声データに付加
して蓄積することを特徴とするデータ蓄積通信方法。 - 【請求項２】 画像データを通信網に送出するタイミン
グを示す第１のタイムスタンプ及び音声データを通信網
に送出するタイミングを示す第２のタイムスタンプが付
加された画像データ及び音声データからなるパケットを
蓄積する記憶ステップと、 前記記憶ステップによって蓄積された画像データ及び音
声データを多重化し、通信網を介して、通信端末に伝送
する多重化データ送信ステップとを備えたデータ蓄積通
信方法であって、 前記多重化データ送信ステップは、前記記憶ステップに
よって蓄積されたパケットに含まれるタイムスタンプに
基づいて、該パケットに含まれる画像データ及び音声デ
ータを、所定のタイミングで前記通信網に送出すること
を特徴とするデータ蓄積通信方法。 - 【請求項３】 画像データ及び音声データからなるパケ
ットを作成するデータ生成方法であって、 前記画像データを作成する画像符号化ステップと、 前記音声データを作成する音声符号化ステップと、 前記画像データ及び前記音声データを多重するデータ多
重ステップとを備え、 前記パケットは、画像データを通信網に送出するタイミ
ングを示す第１のタイムスタンプ及び音声データを通信
網に送出するタイミングを示す第２のタイムスタンプが
付加されたものであることを特徴とするデータ生成方
法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2002145286A JP3452914B2 (ja) | 2002-05-20 | 2002-05-20 | データ蓄積通信方法及びデータ生成方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2002145286A JP3452914B2 (ja) | 2002-05-20 | 2002-05-20 | データ蓄積通信方法及びデータ生成方法 |
Related Parent Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP37232599A Division JP3361786B2 (ja) | 1993-12-24 | 1999-12-28 | データ蓄積通信装置 |
Related Child Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2003065896A Division JP2003299017A (ja) | 2003-03-12 | 2003-03-12 | データ蓄積装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2003078894A JP2003078894A (ja) | 2003-03-14 |
| JP3452914B2 true JP3452914B2 (ja) | 2003-10-06 |
Family
ID=19194654
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2002145286A Expired - Fee Related JP3452914B2 (ja) | 2002-05-20 | 2002-05-20 | データ蓄積通信方法及びデータ生成方法 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP3452914B2 (ja) |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP4660184B2 (ja) * | 2004-12-27 | 2011-03-30 | 株式会社東芝 | 信号中継装置及び信号中継方法 |
-
2002
- 2002-05-20 JP JP2002145286A patent/JP3452914B2/ja not_active Expired - Fee Related
Also Published As
| Publication number | Publication date |
|---|---|
| JP2003078894A (ja) | 2003-03-14 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| EP1024657B1 (en) | Stored image regenerating device | |
| JP3002348B2 (ja) | 画像通信システム | |
| JP4612171B2 (ja) | 動画像復号再生モジュールと再生時刻管理プログラムとマルチメディア情報受信装置 | |
| US6233251B1 (en) | Multiplex transmission method and system, and audio jitter absorbing method used therein | |
| CN101827271A (zh) | 音频视频同步方法、装置以及数据接收终端 | |
| US20060215711A1 (en) | Apparatus for receiving packet stream | |
| JP3361786B2 (ja) | データ蓄積通信装置 | |
| JP3452914B2 (ja) | データ蓄積通信方法及びデータ生成方法 | |
| JP3252935B2 (ja) | 多重化データ蓄積再生装置 | |
| JP4192766B2 (ja) | 受信装置および方法、記録媒体、並びにプログラム | |
| JP3266226B2 (ja) | 画像蓄積装置及び蓄積画像再生装置 | |
| JP3592289B2 (ja) | 画像蓄積方法及び蓄積画像再生方法 | |
| JP2003299017A (ja) | データ蓄積装置 | |
| JP3169767B2 (ja) | 蓄積画像データ再生制御方法およびこれを用いたマルチメディア情報蓄積交換システム | |
| US6198499B1 (en) | Radio-communication video terminal device | |
| JP2002152181A (ja) | マルチメディアデータ通信方法およびマルチメディアデータ通信装置 | |
| JP3172425B2 (ja) | マルチメディア情報送信システム、マルチメディア情報受信システム、マルチメディア情報送信方法、並びにマルチメディア情報受信方法 | |
| JP2001309375A (ja) | メディア分離方法と画像復号方法及び装置 | |
| JP2010028642A (ja) | 画像伝送システム | |
| JP2012239123A (ja) | 映像データ送信装置及び受信装置 | |
| KR100701032B1 (ko) | 네트워크 상의 동영상 데이터 전송 조절 시스템과 그 방법 | |
| JPH0832621A (ja) | 画像音声符号化データ伝送装置 | |
| JP2003259292A (ja) | マルチメディア通信装置とその信号処理モジュール | |
| JP2005223471A (ja) | Ｉｐネットワークを使用した通信システム | |
| JPH06284417A (ja) | マルチメディア多重化信号蓄積再生方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20070718 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20080718 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20080718 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090718 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090718 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100718 Year of fee payment: 7 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110718 Year of fee payment: 8 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110718 Year of fee payment: 8 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120718 Year of fee payment: 9 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120718 Year of fee payment: 9 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130718 Year of fee payment: 10 |
|
| LAPS | Cancellation because of no payment of annual fees |