JPH0750818A - 音声と映像のパケット同期転送制御方法 - Google Patents

音声と映像のパケット同期転送制御方法

Info

Publication number
JPH0750818A
JPH0750818A JP19573893A JP19573893A JPH0750818A JP H0750818 A JPH0750818 A JP H0750818A JP 19573893 A JP19573893 A JP 19573893A JP 19573893 A JP19573893 A JP 19573893A JP H0750818 A JPH0750818 A JP H0750818A
Authority
JP
Japan
Prior art keywords
packet
video
audio
mark
voice
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP19573893A
Other languages
English (en)
Inventor
Rieko Nakajima
理江子 中島
Tetsuya Wada
哲也 和田
Yuichi Kawaguchi
雄一 川口
Yoshinori Gunji
嘉規 郡司
Yutaka Doi
裕 土居
Taku Matsuda
卓 松田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Holdings Corp
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Priority to JP19573893A priority Critical patent/JPH0750818A/ja
Publication of JPH0750818A publication Critical patent/JPH0750818A/ja
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4305—Synchronising client clock from received content stream, e.g. locking decoder clock with encoder clock, extraction of the PCR packets

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)
  • Use Of Switch Circuits For Exchanges And Methods Of Control Of Multiplex Exchanges (AREA)

Abstract

(57)【要約】 【目的】 遠隔マシン間で音声と映像といったリアルタ
イムデータをパケット通信する方法に関し、それぞれ別
々にパケット化された音声と映像を、転送した先で音声
を基準にして同期をとることにより、できるだけ音声を
高品質に保ちながら映像とのずれを補正するような音声
と映像のパケット同期転送制御方法を提供する。 【構成】 ＡＶ機能を持った端末において、送信する側
は、取り込んだ音声と映像を別々にパケット化して、一
定の間隔でユニークに識別可能なマークをそれぞれのパ
ケットに同じように付与して送信する。

Description

【発明の詳細な説明】
【０００１】
【産業上の利用分野】本発明は、ＬＡＮ上でのビデオ会
議のようにネットワークを介して接続された複数の端末
間での音声と映像データをパケット通信する場合におい
て、音声と映像の同期をとる転送制御方法に関するもの
である。
【０００２】
【従来の技術】音声や映像といったデータは、従来パケ
ット通信ではなく回線交換方式で通信されることが普通
であった。それはこれらのデータの持つ性質、つまり長
時間にわたって一定の間隔で大容量のデータが発生する
ためである。そのため、通信する場合においても、一定
のビットレートを確保し、遅延やゆらぎが少ないように
転送する必要がある。また、音声は多少の劣化があって
も聞き取ることができ、会話をするぶんにはそれほど大
きな影響を及ぼさないといった特徴もあり、映像に関し
ては音声以上にごまかされやすく、劣化の影響が少なく
なるため、高信頼性というよりはリアルタイム性が要求
される。こういった性質は、テキスト等の高信頼性を要
求される蓄積交換型のデータとはまったく異なっている
ため、それらを別々の通信回線、通信方式で送るという
ことが一般的であった。
【０００３】しかし、近年、コンピュータでマルチメデ
ィアを扱うといったことが広く行われてきており、既存
のコンピュータネットワークを利用してテキストデータ
等と同じように音声や映像データも通信したいといった
要望がたかまってきた。ボイスメールのように蓄積交換
型のものは単なるテキストデータとして転送して、作成
・再生のところで互いに同期をとるといった方式がとら
れているが、在席会議システムのように、蓄積すること
なしにリアルタイムに転送する必要がある場合には、そ
ういうわけにはいかない。そのために、蓄積交換用のネ
ットワークとは別に音声と映像データには回線交換式の
専用線をひいて、違う経路で転送するといった手段がと
られることもある。だが、これでは２重にネットワーク
が必要となり、その手間とコストはかなりのものであ
る。そこで、最近では、ネットワークの信頼性とスルー
プットの向上により、従来、蓄積交換型データを転送す
るのに使用されていたネットワークに、リアルタイム性
を要求されるデータも一緒に流してしまおうという考え
方がでてきた。それには、音声と映像データもパケット
にして転送しなければならず、そのために受信側で再生
するおりに両方の間の同期をとることが必要になる。既
存の技術としては、音声パケットと画像パケットの同時
性を識別して、音声・画像情報のバッファによる待ち合
わせ、および優先出力を制御することにより、音声と画
像の時間のずれを補正する映像パケット音声パケット同
期転送制御方式（特開平２−００５６６０号公報参照）
がある。その構成図を図９に示す。図９を用いて構成を
以下に説明する。識別子制御部９０７は、画像パケット
または音声パケットが組み立てられる周期に応じて、あ
る一定期間内に一意に識別可能な識別子符号、つまり重
複がない識別子符号を、画像情報パケット組立部９０５
と音声情報パケット組立部９０６に供給する。通信網９
０９から送られてきた自局宛のパケットは、受信部９１
０において受信され、画像パケット分解部９１１は、画
像パケットを分解して、制御情報と画像情報とに分離す
る。音声パケットから音声情報と制御情報とに分解す
る。音声画像順序制御部９１３は、送られてくる音声情
報、画像情報およびそれらの情報の制御情報、識別子符
号より、パケットの遅延、順序、および音声と画像情報
の同時性を制御する。
【０００４】音声パケットと画像パケットの同時性を識
別して、待ち合わせや優先出力をするだけでは、なんら
かの障害で画像パケットがなかなか届かないときに、音
声パケットも同じようにバッファにとどめられることに
なり、音声が途切れてしまうことになる。一般に、映像
データは音声データよりも一定時間に発生するデータ量
がかなり大きいために、転送がより難しく遅れる可能性
も高いことが予想される。また、映像が止まるよりも音
声が途切れる方が話の内容が理解しにくくなることは、
常に経験することである。
【０００５】本発明はこのような課題を鑑み、パケット
化して音声と映像データを転送する際に、より高い質を
要求される音声データに基準をおいて、音声を途切れさ
せることなく音声と映像の同期をとる音声と映像のパケ
ット同期転送制御方法の提供を目的とする。
【０００６】
【課題を解決するための手段】上記の目的を達成するた
めに、第１の発明においては、送信するときに全ての同
時期に発生した音声と映像には同じ一意に識別可能なシ
ーケンシャルなマークを付与してパケット化し、受信し
たときには音声パケットより遅れて到着した映像パケッ
トは廃棄する、また早く到着したパケットは格納してお
いて音声パケットの到着を待つことによって、音声と映
像の同期をとる。
【０００７】また第２の発明においては、送信するとき
に全ての同時期に発生した音声と映像には同じ一意に識
別可能なシーケンシャルなマークを付与してパケット化
し、受信したときには音声パケットより遅れて到着した
映像パケットは、音声パケットの到着から予め設定した
最大待ち時間内であれば再生し、それを越えていれば廃
棄する、また早く到着したパケットは格納しておいて音
声パケットの到着を待つことによって、音声と映像の同
期をとる。
【０００８】また第３の発明においては、送信するとき
に全ての同時期に発生した音声と映像には同じ一意に識
別可能なシーケンシャルなマークを付与してパケット化
し、受信したときには音声パケットより遅れて到着した
映像パケットは、最後に到着した音声パケットのマーク
から一定範囲内のマークであれば再生し、それを越えて
いれば廃棄する、また早く到着したパケットは格納して
おいて音声パケットの到着を待つことによって、音声と
映像の同期をとる。
【０００９】また第４の発明においては、送信するとき
に全ての同時期に発生した音声と映像には同じ一意に識
別可能なシーケンシャルなマークとして日付と時刻を含
んだマークを付与してパケット化し、受信したときには
音声パケットより遅れて到着した映像パケットは、受信
側で利用可能な記憶手段の容量とパケットのサイズから
格納可能なパケット数を計算し、それが一定の値範囲よ
りも小さくなると最大待ち時間を小さく設定しなおし、
大きい場合には最大待ち時間を大きく設定しなおして、
音声パケットの到着から最大待ち時間内であれば再生
し、それを越えていれば廃棄する、また早く到着したパ
ケットは格納しておいて音声パケットの到着を待つこと
によって、音声と映像の同期をとる。
【００１０】また第５の発明においては、送信するとき
に全ての同時期に発生した音声と映像には同じ一意に識
別可能なシーケンシャルなマークとして日付と時刻を含
んだマークを付与してパケット化し、受信したときには
音声パケットより遅れて到着した映像パケットは、ネッ
トワークの現在の平均遅延が一定の値範囲よりも小さく
なると最大待ち時間を小さく設定しなおし、大きい場合
には最大待ち時間を大きく設定しなおして、音声パケッ
トの到着から最大待ち時間内であれば再生し、それを越
えていれば廃棄する、また早く到着したパケットは格納
しておいて音声パケットの到着を待つことによって、音
声と映像の同期をとる。
【００１１】第６の発明においては、送信するときに一
定の間隔毎に同時期に発生した音声と映像には同じ一意
に識別可能なシーケンシャルなマークを付与してパケッ
ト化し、受信したときにはマークの付いた映像パケット
が同じマークの映像パケットより遅れて到着したならば
次のマークまで映像パケットを廃棄することによって、
音声と映像の同期をとる。
【００１２】
【作用】第１の発明によれば、音声と映像のパケットに
マークを付与して送信し、受信側で音声パケットより遅
れて到着した映像パケットを廃棄するので、データ量が
多く転送が手間取ると考えられる映像を待って音声を途
切れさせることなく、音声と映像の同期をとることが容
易になる。
【００１３】第２の発明によれば、音声と映像のパケッ
トにマークを付与して送信し、受信側で音声パケットよ
り遅れて到着した映像パケットが音声パケットの到着か
ら一定の時間内であれば再生し、それを越えていれば廃
棄するので、データ量が多く転送が手間取ると考えられ
る映像を長時間待って音声を途切れさせることなく、映
像の品質も多少考慮しながら音声と映像の同期をとるこ
とが容易になる。
【００１４】第３の発明によれば、音声と映像のパケッ
トにマークを付与して送信し、受信側で音声パケットよ
り遅れて到着した映像パケットが最後に到着した音声パ
ケットのマークから一定の範囲内であれば再生し、それ
を越えていれば廃棄するので、データ量が多く転送が手
間取ると考えられる映像を長時間待って音声を途切れさ
せることなく、映像の品質も多少考慮ながら音声と映像
の同期をとることが容易になる。
【００１５】第４の発明によれば、音声と映像のパケッ
トにマークを付与して送信し、受信側で音声パケットよ
り遅れて到着した映像パケットは、受信側の利用可能な
記憶手段の容量によって設定しなおされるので、容量が
少なくなっている場合にパケットが溜りすぎて溢れるこ
とを防ぐことができる。
【００１６】第５の発明によれば、音声と映像のパケッ
トにマークを付与して送信し、受信側で音声パケットよ
り遅れて到着した映像パケットは、ネットワークの現在
の平均遅延によって設定しなおされるので、遅延が少な
い場合にかなり前の映像を再生するといったことを防ぐ
ことができる。
【００１７】第６の発明によれば、音声と映像のパケッ
トにマークを付与して送信する場合に、全てのパケット
ではなく、一定間隔でマークを付与するので、送信側、
及び受信側での負担を軽くしながら音声と映像の同期を
とることができる。
【００１８】
【実施例】図７は本発明の第１、第２、第３、第６の実
施例における音声と映像のパケット同期転送制御方法の
装置構成の例図を示すものである。図７において音声と
映像のパケット同期転送制御方法の装置構成例は、デー
タ送信媒体７０１、データ送信媒体７０１を構成する音
声入力部７０３、音声パケットコーダ部７０４、映像パ
ケットコーダ部７０５、映像入力部７０６、マーク付与
部７０７、送信部７０８、データ受信媒体７０２、デー
タ受信媒体７０２を構成する音声出力部７０９、音声パ
ケットデコーダ部７１０、映像パケットデコーダ部７１
１、映像出力部７１２、マーク照合部７１３、受信部７
１４、一時待避バッファ７１５とで構成されている。こ
の構成例で本発明の音声と映像のパケット同期転送制御
方法を用いて音声データと映像データを転送する場合、
データ送信媒体７０１は、音声出力部７０９で音声を映
像入力部７０６で映像をそれぞれとりこみ、音声パケッ
トコーダ部７０４と映像パケットコーダ部７０５で取り
込んだデータをパケット化する。そのパケット化したデ
ータに、マーク付与部７０７でユニークに識別可能なシ
ーケンシャルなマークを同時に入力された音声と映像の
パケットに同じものを付与する。マークを付与されたパ
ケットは、送信部７０８でデータ受信媒体７０２に向け
て音声パケットと映像パケットに識別ＩＤを付ける等し
て区別を付けて送信する。データ送信媒体７０１から送
信されたパケットを受信部７１４で受信したデータ受信
媒体７０２は、パケットを受信するとマーク照合部７１
３にそれらを音声とパケットと映像パケットに分けて引
き渡す。マーク照合部７１３は、引き渡された音声と映
像のパケットにマーク付与部７０７で付与されてきたマ
ークに対する照合処理をおこない、出力、一時待避バッ
ファ７１５への格納、廃棄の処置を決める。マーク照合
処理がおこなわれた後、音声パケットは音声パケットデ
コーダ部７１０でデコードしてから音声出力部７０９に
おいて、また映像パケットは映像パケットデコーダ部７
１１でデコードしてから映像出力部７１２において出力
される。
【００１９】図８は本発明の第４、第５の実施例におけ
る音声と映像のパケット同期転送制御方法の装置構成の
例図を示すものである。図７において音声と映像のパケ
ット同期転送制御方法の装置構成例は、データ送信媒体
７０１、データ送信媒体７０１を構成する音声入力部７
０３、音声パケットコーダ部７０４、映像パケットコー
ダ部７０５、映像入力部７０６、マーク付与部７０７、
送信部７０８、データ受信媒体７０２、データ受信媒体
７０２を構成する音声出力部７０９、音声パケットデコ
ーダ部７１０、映像パケットデコーダ部７１１、映像出
力部７１２、マーク照合部７１３、受信部７１４、一時
待避バッファ７１５、最大待ち時間設定部８０１とで構
成されている。この構成例で本発明の音声と映像のパケ
ット同期転送制御方法を用いて音声データと映像データ
を転送する場合、マーク付与部７０７においてマークを
付与する際に、一意に識別可能なシーケンシャルなマー
クの中に現時点、つまり送信する時刻をいれておき、受
信部７１４がパケットを受信すると受信時刻を記憶して
おき、最大待ち時間設定部８０１が現時点での記憶手段
及びネットワークの状態よりマーク照合部７１３で使用
する最大待ち時間を設定しなおすほかは、図７において
の説明と同じである。
【００２０】図１は本発明の第１の実施例におけるマー
ク照合部７１３におけるパケットに付与されたマークの
照合処理のアルゴリズムを示すものである。マーク照合
部７１３は、受信部７１４から受信した音声パケットと
映像パケットを受け取る（ステップ101）と、音声パケ
ットと映像パケットのマークを取り出し（ステップ10
2）、音声パケットを音声パケットデコーダ部７１０に
渡し（ステップ103）、それらのマークが一致している
かどうかを調べる（ステップ104）。もし一致している
ならば、一時待避バッファ７１５に映像パケットがある
かどうかを調べ（ステップ108）、あるならばその一時
待避バッファ７１５にあった映像パケットを映像パケッ
トデコーダ部７１１に引き渡し（ステップ109）、マー
クが一致していた映像パケットを映像パケットデコーダ
部７１１に渡す（ステップ110）。受信部７１４に次の
パケットがあるかどうかを調べ（ステップ107）、ある
ならばステップ101から処理を繰り返し、無いならば処
理を終了する。ステップ104でマークが一致していなか
った場合には、映像パケットより音声パケットのマーク
の方が新しいかどうかを調べ（ステップ105）、音声パ
ケットのマークの方が新しいならば、その映像パケット
を廃棄し（ステップ111）、一時待避バッファ７１５に
映像パケットがあるかを調べ（ステップ112）、あるな
らば一時待避バッファ７１５内の映像パケットを廃棄し
て（ステップ113）ステップ107に進む。ステップ105で
音声パケットの方が新しくなかった場合、映像パケット
の方が先に到着していることになるので、その映像パケ
ットを一時待避バッファ７１５に格納して（ステップ10
6）ステップ107に進む。
【００２１】図２は本発明の第２の実施例におけるマー
ク照合部７１３におけるパケットに付与されたマークの
照合処理のアルゴリズムを示すものである。マーク照合
部７１３は、受信部７１４から受信した音声パケットと
映像パケットを受け取る（ステップ201）と、音声パケ
ットと映像パケットのマークを取り出し（ステップ20
2）、音声パケットを音声パケットデコーダ部７１０に
渡し（ステップ203）、それらのマークが一致している
かどうかを調べる（ステップ204）。もし一致している
ならば、一時待避バッファ７１５に映像パケットがある
かどうかを調べ（ステップ208）、あるならばその一時
待避バッファ７１５にあった映像パケットを映像パケッ
トデコーダ部７１１に引き渡し（ステップ209）、マー
クが一致していた映像パケットを映像パケットデコーダ
部７１１に渡す（ステップ210）。受信部７１４に次の
パケットがあるかどうかを調べ（ステップ207）あるな
らばステップ201から処理を繰り返し、無いならば処理
を終了する。ステップ204でマークが一致していなかっ
た場合には、映像パケットより音声パケットのマークの
方が新しいかどうかを調べ（ステップ205）、音声パケ
ットのマークの方が新しいならば、その音声パケットに
付与されているマークと現時点での時刻をセットにして
メモリにおいて保存し（ステップ211）、照合している
映像パケットと同じマークの音声パケットのメモリに保
存された時刻を取り出し（ステップ212）、現時点の時
刻との差が最大待ち時間内であるかどうかを調べ（ステ
ップ213）、最大待ち時間内であるならばステップ208に
進む。そうでないならば、その映像パケットを廃棄し
（ステップ214）、一時待避バッファ７１５に映像パケ
ットがあるかを調べ（ステップ215）、あるならば一時
待避バッファ７１５内の映像パケットを廃棄して（ステ
ップ216）ステップ207に進む。ステップ205で音声パケ
ットの方が新しくなかった場合、映像パケットの方が先
に到着していることになるので、その映像パケットを一
時待避バッファ７１５に格納して（ステップ206）ステ
ップ207に進む。
【００２２】図３は本発明の第３の実施例におけるマー
ク照合部７１３におけるパケットに付与されたマークの
照合処理のアルゴリズムを示すものである。マーク照合
部７１３は、受信部７１４から受信した音声パケットと
映像パケットを受け取る（ステップ301）と、音声パケ
ットと映像パケットのマークを取り出し（ステップ30
2）、音声パケットを音声パケットデコーダ部７１０に
渡し（ステップ303）、それらのマークが一致している
かどうかを調べる（ステップ304）。もし一致している
ならば、一時待避バッファ７１５に映像パケットがある
かどうかを調べ（ステップ308）、あるならばその一時
待避バッファ７１５にあった映像パケットを映像パケッ
トデコーダ部７１１に引き渡し（ステップ309）、マー
クが一致していた映像パケットを映像パケットデコーダ
部７１１に渡す（ステップ310）。受信部７１４に次の
パケットがあるかどうかを調べ（ステップ307）、ある
ならばステップ301から処理を繰り返し、無いならば処
理を終了する。ステップ304でマークが一致していなか
った場合には、映像パケットより音声パケットのマーク
の方が新しいかどうかを調べ（ステップ305）、音声パ
ケットの方が新しいならば、音声パケットと映像パケッ
トのマークの差を取り（ステップ311）、その差があら
かじめ設定された一定の範囲内であるかどうかを調べ
（ステップ312）、最大待ち時間内であるならばステッ
プ308に進む。そうでないならば、その映像パケットを
廃棄し（ステップ313）、一時待避バッファ７１５に映
像パケットがあるかを調べ（ステップ314）、あるなら
ば一時待避バッファ７１５内の映像パケットを廃棄して
（ステップ315）ステップ307に進む。ステップ305で音
声パケットの方が新しくなかった場合、映像パケットの
方が先に到着していることになるので、その映像パケッ
トを一時待避バッファ７１５に格納して（ステップ30
6）ステップ307に進む。
【００２３】図４は本発明の第４の実施例における最大
待ち時間設定部８０１におけるパケットを待つ場合の最
大待ち時間設定処理のアルゴリズムを示すものである。
最大待ち時間設定部８０１は、データ受信媒体７０２内
で現時点で利用可能なメモリーの容量を得て（ステップ
401）、その利用可能なメモリーを受信している映像パ
ケットのサイズで割ることによって格納可能なパケット
数を得る（ステップ402）。得られたパケット数があら
かじめ設定しておいた一定の範囲より大きいかどうかを
判断し（ステップ403）、ステップ数が一定の範囲より
も大きいならば最大待ち時間値をあらかじめステップ数
の範囲によって決められている大きな値に設定し（ステ
ップ407）、あらかじめ決められた一定時間休止し（ス
テップ406）、ステップ401に戻って処理を繰り返す。ス
テップ403において、ステップ数が一定範囲よりも大き
くないならば、パケット数が一定範囲よりも小さいかど
うかを判断し（ステップ404）、小さいならば最大待ち
時間値をあらかじめステップ数の範囲によって決められ
ている小さな値に設定し（ステップ408）、ステップ406
に進む。ステップ404でステップ数が一定範囲よりも小
さくないならば最大待ち時間値をあらかじめステップ数
の範囲によって決められている標準値に設定し（ステッ
プ405）、ステップ406に進む。
【００２４】図５は本発明の第５の実施例における最大
待ち時間設定部８０１におけるパケットを待つ場合の最
大待ち時間設定処理のアルゴリズムを示すものである。
最大待ち時間設定部８０１は、現時点から一定の範囲内
で過去に受信した最新のパケットがあるかどうかを受信
部７１４に問い合わせ（ステップ501）、受信したパケ
ットがないならば、あらかじめ設定された一定時間休止
し（ステップ508）、ステップ501に戻って処理を繰り返
す。ステップ501で受信したパケットがあるならば、受
信したパケットのマークと受信した時刻を受信部７１４
から受取り（ステップ502）、そのパケットのマークか
ら送信した時刻を取り出し（ステップ503）、取り出し
た送信時刻と受信時刻から遅延を計算する（ステップ50
4）。遅延があらかじめ設定した一定の範囲より大きい
かどうかを調べ（ステップ505）、大きいならば最大待
ち時間の値をあらかじめ遅延に対処するために定めてお
いた大きな値に設定し（ステップ509）、ステップ508に
進む。ステップ505で一定範囲より大きくないならば、
一定範囲より小さいかどうかを調べ（ステップ506）、
小さいならば最大待ち時間の値をあらかじめ遅延に対処
するために定めておいた小さな値に設定し（ステップ51
0）、ステップ508に進む。ステップ506で一定範囲より
も小さくないならば、最大待ち時間の値をあらかじめ遅
延に対処するために定めておいた標準値に設定し（ステ
ップ507）、ステップ508に進む。
【００２５】図６は本発明の第６の実施例におけるマー
ク照合部７１３におけるパケットに付与されたマークの
照合処理のアルゴリズムを示すものである。マーク照合
部７１３は、受信部７１４から受信した音声パケットと
映像パケットを受け取る（ステップ601）と、音声パケ
ットにマークが付与されているかどうかを確認し（ステ
ップ602）、付与されているならば映像パケットにマー
クが付与されているかを確認し（ステップ603）、付与
されていないならばステップ613に進み、付与されてい
るならば音声パケットと映像パケットのマークを取り出
し（ステップ604）、音声パケットを音声パケットデコ
ーダ部７１０に渡し（ステップ605）、それらのマーク
が一致しているかどうかを調べる（ステップ606）。も
し一致しているならば、一時待避バッファ７１５に映像
パケットがあるかどうかを調べ（ステップ619）、ある
ならばその一時待避バッファ７１５にあった映像パケッ
トを映像パケットデコーダ部７１１に引き渡し（ステッ
プ620）、マークが一致していた映像パケットを映像パ
ケットデコーダ部７１１に渡し（ステップ621）、映像
パケットを格納するか廃棄するかを判断するための格納
フラグ、廃棄フラグを両方とも消す（ステップ622）。
受信部７１４に次のパケットがあるかどうかを調べ（ス
テップ610）、あるならばステップ601から処理を繰り返
し、無いならば処理を終了する。ステップ606でマーク
が一致していなかった場合には、映像パケットより音声
パケットのマークの方が新しいかどうかを調べ（ステッ
プ607）、音声パケットのマークの方が新しいならば、
一時待避バッファ７１５に映像パケットがあるかどうか
を調べ（ステップ6239）、あるならばその一時待避バッ
ファ７１５にあった映像パケットを廃棄し（ステップ62
4）、マーク照合中の映像パケットを廃棄し（ステップ6
25）、あるならば格納フラグを消して廃棄フラグをたて
（ステップ626）、ステップ610に進む。ステップ607で
音声パケットの方が新しくなかった場合、映像パケット
の方が先に到着していることになるので、その映像パケ
ットを一時待避バッファ７１５に格納し（ステップ60
8）、あるならば廃棄フラグを消して格納フラグをたて
（ステップ609）、ステップ610に進む。ステップ602で
音声パケットにマークが付与されていなかった場合、映
像パケットにマークが付与されているかを調べ（ステッ
プ611）、付与されているならば音声パケットを音声パ
ケットデコーダ部７１０に渡し（ステップ605）、廃棄
フラグがたっているかを調べ（ステップ614）、たって
いるならば映像パケットを廃棄する（ステップ615）。
次に格納フラグがたっているかを調べ（ステップ61
6）、たっているならば映像パケットを一時待避バッフ
ァ７１５に格納し（ステップ617）、映像パケットを映
像パケットデコーダ部７１１に渡し（ステップ618）、
ステップ601に戻り処理を繰り返す。ステップ611で映像
パケットにマークが付与されていないならば、音声パケ
ットを音声パケットデコーダ部７１０に渡し（ステップ
612）、ステップ608に進む。
【００２６】
【発明の効果】以上説明したように、本発明によれば、
遠隔のマシン間で音声と映像データのパケット通信にお
ける同期を、音声の品質を保ちながらとることが容易に
なる。
【図面の簡単な説明】
【図１】本発明の第１の実施例におけるデータ送信媒体
内のマーク照合処理のアルゴリズムを示す図
【図２】本発明の第２の実施例におけるデータ送信媒体
内のマーク照合処理のアルゴリズムを示す図
【図３】本発明の第３の実施例におけるデータ送信媒体
内のマーク照合処理のアルゴリズムを示す図
【図４】本発明の第４の実施例におけるデータ送信媒体
内の最大待ち時間設定処理のアルゴリズムを示す図
【図５】本発明の第５の実施例におけるデータ送信媒体
内の最大待ち時間設定処理のアルゴリズムを示す図
【図６】本発明の第６の実施例におけるデータ送信媒体
内のマーク照合処理のアルゴリズムを示す図
【図７】本発明の第１、第２、第３、第６の実施例にお
ける音声と映像のパケット同期転送制御方法に使用され
る装置の構成を示すブロック図
【図８】本発明の第４、第５の実施例における音声と映
像のパケット同期転送制御方法に使用される装置の構成
を示すブロック図
【図９】従来例における映像パケット音声パケット同期
転送制御方法の説明図
【符号の説明】
７０１ データ送信媒体 ７０２ データ受信媒体 ７０３ 音声入力部 ７０４ 音声パケットコーダ部 ７０５ 映像パケットコーダ部 ７０６ 映像入力部 ７０７ マーク付与部 ７０８ 送信部 ７０９ 音声出力部 ７１０ 音声パケットデコーダ部 ７１１ 映像パケットデコーダ部 ７１２ 映像出力部 ７１３ マーク照合部 ７１４ 受信部 ７１５ 一時待避バッファ ８０１ 最大待ち時間設定部 ９０１ 画像入力部 ９０２ 音声入力部 ９０３ 画像情報符号化部 ９０４ 音声情報符号化部 ９０５ 画像情報パケット組立部 ９０６ 音声情報パケット組立部 ９０７ 識別子制御部 ９０８ 送信部 ９０９ 通信網 ９１０ 受信部 ９１１ 画像パケット分解部 ９１２ 音声パケット分解部 ９１３ 音声画像順序制御部 ９１４ バッファメモリ ９１５ 画像情報復号化部 ９１６ 音声情報復号化部 ９１７ 画像出力部 ９１８ 音声出力部
───────────────────────────────────────────────────── フロントページの続き (51)Int.Cl.6 識別記号 庁内整理番号 ＦＩ 技術表示箇所 9076−5Ｋ Ｈ０４Ｑ 11/04 Ｓ (72)発明者 郡司 嘉規 大阪府門真市大字門真1006番地 松下電器 産業株式会社内 (72)発明者 土居 裕 大阪府門真市大字門真1006番地 松下電器 産業株式会社内 (72)発明者 松田 卓 大阪府門真市大字門真1006番地 松下電器 産業株式会社内

Claims (6)

    【特許請求の範囲】
  1. 【請求項１】遠隔マシン間での音声と映像データのパケ
    ット通信において、全ての同時期に発生した映像と音声
    に同じ一意に識別可能なマークを付与してパケット化し
    て送信し、受信側において音声パケットよりも遅れて到
    着した映像パケットを廃棄することによって、音声の品
    質を保ちながら音声と映像の同期を可能にする音声と映
    像のパケット同期転送制御方法。
  2. 【請求項２】遠隔マシン間での音声と映像データのパケ
    ット通信において、全ての同時期に発生した映像と音声
    に同じ一意に識別可能なマークを付与してパケット化し
    て送信し、受信側において音声パケットよりも遅く、あ
    るいは早く到着した映像パケットを最大待ち時間を決め
    てタイマーで再生又は廃棄の制御をすることによって、
    音声の品質を保ちながら音声と映像の同期を可能にする
    音声と映像のパケット同期転送制御方法。
  3. 【請求項３】最大待ち時間を決めてタイマーで再生又は
    廃棄の制御をするかわりに、送信側で付与したマークに
    よって再生又は廃棄の制御をする請求項２記載の音声と
    映像のパケット同期転送制御方法。
  4. 【請求項４】最大待ち時間を決めてタイマーで再生又は
    廃棄の制御をする場合に、受信側で利用可能な記憶手段
    の容量によって格納するパケット数を計算し、それによ
    って最大待ち時間を決定する請求項２記載の音声と映像
    のパケット同期転送制御方法。
  5. 【請求項５】最大待ち時間を決めてタイマーで再生又は
    廃棄の制御する場合に、ネットワークの平均遅延によっ
    て最大待ち時間を設定する請求項２記載の音声と映像の
    パケット同期転送制御方法。
  6. 【請求項６】全ての同時期に発生した映像と音声に同じ
    一意に識別可能なマークを付与してパケット化して送信
    するかわりに、一定の間隔ごとに一意に識別可能なマー
    クをパケットに付与する請求項１〜５のいずれかに記載
    の音声と映像のパケット同期転送制御方法。
JP19573893A 1993-08-06 1993-08-06 音声と映像のパケット同期転送制御方法 Pending JPH0750818A (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP19573893A JPH0750818A (ja) 1993-08-06 1993-08-06 音声と映像のパケット同期転送制御方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP19573893A JPH0750818A (ja) 1993-08-06 1993-08-06 音声と映像のパケット同期転送制御方法

Publications (1)

Publication Number Publication Date
JPH0750818A true JPH0750818A (ja) 1995-02-21

Family

ID=16346149

Family Applications (1)

Application Number Title Priority Date Filing Date
JP19573893A Pending JPH0750818A (ja) 1993-08-06 1993-08-06 音声と映像のパケット同期転送制御方法

Country Status (1)

Country Link
JP (1) JPH0750818A (ja)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09219851A (ja) * 1996-02-09 1997-08-19 Nec Corp 多地点ビデオ会議制御方法及び装置
JPH10271482A (ja) * 1997-03-27 1998-10-09 Nippon Telegr & Teleph Corp <Ntt> 符号化映像の同期再生制御方法およびシステム
JPH1188364A (ja) * 1997-09-16 1999-03-30 Matsushita Electric Ind Co Ltd 通信装置
JPH11341066A (ja) * 1998-03-30 1999-12-10 Internatl Business Mach Corp <Ibm> デ―タ・ストリ―ムの正しい同期点を見つける方法、デ―タ処理システム及びマルチメディア・アダプタ
JP2003179639A (ja) * 2002-11-11 2003-06-27 Matsushita Electric Ind Co Ltd 通信装置
WO2007099906A1 (ja) 2006-02-27 2007-09-07 Matsushita Electric Industrial Co., Ltd. 再生装置、携帯電話機、及び再生方法
WO2007116873A1 (ja) 2006-04-03 2007-10-18 Panasonic Corporation インバータ装置および空気調和機
JP2008092161A (ja) * 2006-09-29 2008-04-17 Saxa Inc 通信端末、マルチメディア再生制御方法、およびプログラム
JP2009010863A (ja) * 2007-06-29 2009-01-15 Oki Electric Ind Co Ltd 音声・映像同期方法、音声・映像同期システム及び音声・映像受信端末

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09219851A (ja) * 1996-02-09 1997-08-19 Nec Corp 多地点ビデオ会議制御方法及び装置
US5914940A (en) * 1996-02-09 1999-06-22 Nec Corporation Multipoint video conference controlling method and system capable of synchronizing video and audio packets
JPH10271482A (ja) * 1997-03-27 1998-10-09 Nippon Telegr & Teleph Corp <Ntt> 符号化映像の同期再生制御方法およびシステム
JPH1188364A (ja) * 1997-09-16 1999-03-30 Matsushita Electric Ind Co Ltd 通信装置
JPH11341066A (ja) * 1998-03-30 1999-12-10 Internatl Business Mach Corp <Ibm> デ―タ・ストリ―ムの正しい同期点を見つける方法、デ―タ処理システム及びマルチメディア・アダプタ
JP2003179639A (ja) * 2002-11-11 2003-06-27 Matsushita Electric Ind Co Ltd 通信装置
WO2007099906A1 (ja) 2006-02-27 2007-09-07 Matsushita Electric Industrial Co., Ltd. 再生装置、携帯電話機、及び再生方法
JP4852094B2 (ja) * 2006-02-27 2012-01-11 パナソニック株式会社 再生装置、携帯電話機、及び再生方法
WO2007116873A1 (ja) 2006-04-03 2007-10-18 Panasonic Corporation インバータ装置および空気調和機
JP2008092161A (ja) * 2006-09-29 2008-04-17 Saxa Inc 通信端末、マルチメディア再生制御方法、およびプログラム
JP2009010863A (ja) * 2007-06-29 2009-01-15 Oki Electric Ind Co Ltd 音声・映像同期方法、音声・映像同期システム及び音声・映像受信端末

Similar Documents

Publication Publication Date Title
US7243150B2 (en) Reducing the access delay for transmitting processed data over transmission data
JPH06237451A (ja) 動画通信方式および端末装置
US6856628B1 (en) Method and apparatus for tunneling packets in a packet data system
CN101026555B (zh) 丢弃的分组指示符
EP0671096B1 (en) Constant bit rate traffic in fast packet networks
JP2595965B2 (ja) 同報通信システム
AU647621B2 (en) Variable data rate channels for digital networks
US7433409B2 (en) Apparatus and method of multiple decoding
JPH0750818A (ja) 音声と映像のパケット同期転送制御方法
JP2004519124A (ja) 受動的同軸分配などの共用伝送媒体における電話方式、レイテンシ敏感データ、ベスト・エフォート型データ及びビデオ・ストリームのための優先パケット伝送システム
WO2007007526A1 (ja) 映像ストリーム処理装置、集積回路装置、及び方法
CN114979793A (zh) 一种直播数据传输方法、装置、系统、设备和介质
JPH05167616A (ja) 通信処理装置
JPS5821459B2 (ja) 音声パケット伝送方式
JP2001218175A (ja) 信号処理装置
KR100961905B1 (ko) 데이터 송수신 방법
JP3356370B2 (ja) データ伝送装置
JP2002217971A (ja) パケット伝送装置及びパケット伝送方法
US7548543B2 (en) Generation of valid program clock reference time stamps for duplicate transport stream packets
JP2569493B2 (ja) パケツト通信における転送ゆらぎ吸収処理方式
JPH06112941A (ja) 複数の第１の固定ビット速度チャンネルを有する通信システムによって伝送されるデジタル信号をビット速度の可変にする方法および装置
JPH11298458A (ja) 同期確立装置
JPH0834480B2 (ja) パケット転送方式
JP2005519541A (ja) 第１データストリームを第２データストリームに変換する方法及び装置
JPH0955767A (ja) データ伝送装置