JP2020155988A - バッファリング処理装置、通信システム、バッファリング処理方法、及びプログラム - Google Patents
バッファリング処理装置、通信システム、バッファリング処理方法、及びプログラム Download PDFInfo
- Publication number
- JP2020155988A JP2020155988A JP2019053811A JP2019053811A JP2020155988A JP 2020155988 A JP2020155988 A JP 2020155988A JP 2019053811 A JP2019053811 A JP 2019053811A JP 2019053811 A JP2019053811 A JP 2019053811A JP 2020155988 A JP2020155988 A JP 2020155988A
- Authority
- JP
- Japan
- Prior art keywords
- time
- packet
- buffering processing
- video
- networks
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000012545 processing Methods 0.000 title claims abstract description 47
- 230000003139 buffering effect Effects 0.000 title claims abstract description 46
- 238000004891 communication Methods 0.000 title claims description 11
- 238000003672 processing method Methods 0.000 title claims description 6
- 238000006243 chemical reaction Methods 0.000 claims description 27
- 230000005540 biological transmission Effects 0.000 description 21
- 238000000034 method Methods 0.000 description 16
- 230000005236 sound signal Effects 0.000 description 7
- 238000005516 engineering process Methods 0.000 description 4
- 238000005259 measurement Methods 0.000 description 4
- 230000001360 synchronised effect Effects 0.000 description 4
- 239000002131 composite material Substances 0.000 description 3
- 238000010586 diagram Methods 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 238000004458 analytical method Methods 0.000 description 2
- 238000005538 encapsulation Methods 0.000 description 2
- 238000007781 pre-processing Methods 0.000 description 2
- 230000005856 abnormality Effects 0.000 description 1
- 238000009825 accumulation Methods 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 230000001934 delay Effects 0.000 description 1
- 238000012217 deletion Methods 0.000 description 1
- 230000037430 deletion Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000002360 preparation method Methods 0.000 description 1
- 230000008054 signal transmission Effects 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
- 230000002194 synthesizing effect Effects 0.000 description 1
Images
Landscapes
- Data Exchanges In Wide-Area Networks (AREA)
Abstract
Description
前記複数系統のネットワークのそれぞれから、時刻が付されたパケットを受信する入力部と、
受信したパケットを系統毎に格納するバッファ部と、
系統毎に、パケットに付された時刻から前記最大遅延時間が経過した時刻に当該パケットを出力する出力部と
を備えるバッファリング処理装置が提供される。
図1に、本実施の形態における通信システムの構成例を示す。図1に示すように、本実施の形態における通信システムでは、映像撮影及び音声収集可能なカメラ(マイクを含む)が複数の拠点(図1の例では拠点Aと拠点Bが示されている)に備えられている。各拠点は、1つの場所にあり、拠点毎の物理的な位置は異なっている。
図2は、図1における構成において、拠点A,Bに加え、拠点Cが加えられた例を示す図である。図2は、拠点Cがあることを除き、実質的に図1と同じであるが、各系統の構成をより分かり易く示している。また、図2では、メディア信号IP変換送出装置12、22、32は、その処理内容(メディア信号をパケット化)に着目してEnCapsulationと記載している。また、IP信号受信メディア変換装置15、25、35は、その処理内容(パケットをメディア信号化)に着目してDeCapsulationと記載している。
バッファリング処理装置100は、例えば、コンピュータに、本実施の形態で説明する処理内容を記述したプログラムを実行させることにより実現可能である。
次に、図2、図3に示す構成を有するバッファリング処理装置100の動作例を図5のフローチャートの手順に沿って説明する。この動作の前提として、通信システム全体の各装置間では、SMPTE ST2059(PTP)により時刻が同期して揃っているものとする。
本実施の形態では、事前に系統毎のネットワーク経路における、IPパケットを流したときの遅延時間を測定しておく。遅延時間の測定方法は特定の方法に限られないが、例えば、系統毎に、カメラ等でメディア信号を取得し、メディア信号IP変換送出装置によりメディア信号をIPパケットに変換し、送出し、受信側の拠点におけるNWスイッチあるいはバッファリング処理装置においてIPパケットの受信時刻からIPパケットのヘッダに付された時刻を引くことで遅延時間を測定する。
系統毎に、メディア信号をIP化したIPパケットがバッファリング処理装置100に到着すると、入力部110によりIPパケットが入力され、入力されたIPパケットは系統毎にバッファに格納される。
制御部140は、系統毎に、バッファに格納されているIPパケットのヘッダに記載されている時刻x(メディア信号がIP変換された時刻であり、映像等が撮影された時刻と見なしてよい)を確認し、時刻xからmax_T時間が経過したIPパケットを検出すると、当該IPパケットをバッファから読み出し、出力するよう、出力部130に指示する。指示を受けた出力部130は、当該時刻xのIPパケットを、その系統に対応するDeCapsulationに送信する。なお、時刻xからmax_T時間が経過したかどうか、つまり、IPパケットを出力するかどうかの判断を出力部130が行うこととしてもよい。
制御部140は、IPパケットが送出されたバッファから当該IPパケットを削除する。
本実施の形態に係る技術は様々な場面(シナリオ)において適用することが可能であり、特定のシナリオに限定して適用されるわけではない。本実施の形態に係る技術が適用されるシナリオの例として下記のシナリオ(1)〜(3)がある。
本実施の形態に係る技術により、複数拠点のカメラ、マイク、センサ等で取得したメディア信号(映像、音声、データ等)を、それぞれの拠点でIP変換してネットワーク送信する場合において、系統間でのIPネットワーク遅延が異なる場合であっても、受信側において複数系統のIPパケットをタイミングを合わせて出力できる。これにより、例えば、放送や映像解析等において映像・音声信号を合成や切替等に利用する際に、合わせる作業を行わなくても、合成映像・音声内でずれが生じることがなくなり、また、切替前後で映像・音声の流れが少し前へ遡ったり、少し先へ飛んだりすることもなくなる。
以上、説明したとおり、本明細書には、少なくとも、下記の各項に記載したバッファリング処理装置、通信システム、バッファリング処理方法、及びプログラムが開示されている。
(第1項)
複数系統のネットワーク間での最大遅延時間を保持する記憶部と、
前記複数系統のネットワークのそれぞれから、時刻が付されたパケットを受信する入力部と、
受信したパケットを系統毎に格納するバッファ部と、
系統毎に、パケットに付された時刻から前記最大遅延時間が経過した時刻に当該パケットを出力する出力部と
を備えるバッファリング処理装置。
なお、上記の最大遅延時間は、例えば、実施の形態でのmax_Tに相当する。
(第2項)
前記パケットは、映像、音声、データ、又は、これらの任意の組み合わせであるメディア信号から変換されたパケットである
第1項に記載のバッファリング処理装置。
(第3項)
前記最大遅延時間は、前記複数系統のネットワークのそれぞれにおいて測定された過去の遅延時間における最大遅延時間のうち、前記複数系統のネットワーク間で最大の遅延時間である
第1項又は第2項に記載のバッファリング処理装置。
(第4項)
前記複数系統のネットワークの受信側に、第1項ないし第3項のうちいずれか1項に記載の前記バッファリング処理装置を備え、
前記複数系統のネットワークのそれぞれの送信側に、映像、音声、データ、又は、これらの任意の組み合わせであるメディア信号を、時刻を付したパケットに変換する変換装置を備える
通信システム。
(第5項)
複数系統のネットワーク間での最大遅延時間を保持するバッファリング処理装置が実行するバッファリング処理方法であって、
前記複数系統のネットワークのそれぞれから、時刻が付されたパケットを受信する入力ステップと、
受信したパケットを系統毎に格納するバッファリングステップと、
系統毎に、パケットに付された時刻から前記最大遅延時間が経過した時刻に当該パケットを出力する出力ステップと
を備えるバッファリング処理方法。
(第6項)
コンピュータを、第1項ないし第3項のうちいずれか1項に記載のバッファリング処理装置における各部として機能させるためのプログラム。
12、22、32 メディア信号IP変換送出装置
13、14、23、24、33、34 NWスイッチ
15、25、35 IP信号受信メディア変換装置
16、26、36 再生装置
100 バッファリング処理装置
110 入力部
120 バッファ部
130 出力部
140 制御部
1000 ドライブ装置
1002 補助記憶装置
1003 メモリ装置
1004 CPU
1005 インタフェース装置
1006 表示装置
1007 入力装置
Claims (6)
- 複数系統のネットワーク間での最大遅延時間を保持する記憶部と、
前記複数系統のネットワークのそれぞれから、時刻が付されたパケットを受信する入力部と、
受信したパケットを系統毎に格納するバッファ部と、
系統毎に、パケットに付された時刻から前記最大遅延時間が経過した時刻に当該パケットを出力する出力部と
を備えるバッファリング処理装置。 - 前記パケットは、映像、音声、データ、又は、これらの任意の組み合わせであるメディア信号から変換されたパケットである
請求項1に記載のバッファリング処理装置。 - 前記最大遅延時間は、前記複数系統のネットワークのそれぞれにおいて測定された過去の遅延時間における最大遅延時間のうち、前記複数系統のネットワーク間で最大の遅延時間である
請求項1又は2に記載のバッファリング処理装置。 - 前記複数系統のネットワークの受信側に、請求項1ないし3のうちいずれか1項に記載の前記バッファリング処理装置を備え、
前記複数系統のネットワークのそれぞれの送信側に、映像、音声、データ、又は、これらの任意の組み合わせであるメディア信号を、時刻を付したパケットに変換する変換装置を備える
通信システム。 - 複数系統のネットワーク間での最大遅延時間を保持するバッファリング処理装置が実行するバッファリング処理方法であって、
前記複数系統のネットワークのそれぞれから、時刻が付されたパケットを受信する入力ステップと、
受信したパケットを系統毎に格納するバッファリングステップと、
系統毎に、パケットに付された時刻から前記最大遅延時間が経過した時刻に当該パケットを出力する出力ステップと
を備えるバッファリング処理方法。 - コンピュータを、請求項1ないし3のうちいずれか1項に記載のバッファリング処理装置における各部として機能させるためのプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019053811A JP2020155988A (ja) | 2019-03-20 | 2019-03-20 | バッファリング処理装置、通信システム、バッファリング処理方法、及びプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019053811A JP2020155988A (ja) | 2019-03-20 | 2019-03-20 | バッファリング処理装置、通信システム、バッファリング処理方法、及びプログラム |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2020155988A true JP2020155988A (ja) | 2020-09-24 |
Family
ID=72559948
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019053811A Pending JP2020155988A (ja) | 2019-03-20 | 2019-03-20 | バッファリング処理装置、通信システム、バッファリング処理方法、及びプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2020155988A (ja) |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004254149A (ja) * | 2003-02-21 | 2004-09-09 | Nippon Telegr & Teleph Corp <Ntt> | データ伝送制御方法およびシステム |
JP2010016449A (ja) * | 2008-07-01 | 2010-01-21 | Kddi Corp | グループ通信装置及びグループ通信プログラム |
JP2014127863A (ja) * | 2012-12-26 | 2014-07-07 | Nippon Telegr & Teleph Corp <Ntt> | チャネル同期方法とその装置とプログラムとその記録媒体 |
US20170195243A1 (en) * | 2016-01-06 | 2017-07-06 | Nxp B.V. | Received path delay mechanism |
JP2018037885A (ja) * | 2016-08-31 | 2018-03-08 | 株式会社メディアリンクス | 時刻同期システム |
JP2018042020A (ja) * | 2016-09-05 | 2018-03-15 | 株式会社メディアリンクス | 映像伝送システム |
-
2019
- 2019-03-20 JP JP2019053811A patent/JP2020155988A/ja active Pending
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004254149A (ja) * | 2003-02-21 | 2004-09-09 | Nippon Telegr & Teleph Corp <Ntt> | データ伝送制御方法およびシステム |
JP2010016449A (ja) * | 2008-07-01 | 2010-01-21 | Kddi Corp | グループ通信装置及びグループ通信プログラム |
JP2014127863A (ja) * | 2012-12-26 | 2014-07-07 | Nippon Telegr & Teleph Corp <Ntt> | チャネル同期方法とその装置とプログラムとその記録媒体 |
US20170195243A1 (en) * | 2016-01-06 | 2017-07-06 | Nxp B.V. | Received path delay mechanism |
CN107066402A (zh) * | 2016-01-06 | 2017-08-18 | 恩智浦有限公司 | 接收路径延迟机制 |
JP2018037885A (ja) * | 2016-08-31 | 2018-03-08 | 株式会社メディアリンクス | 時刻同期システム |
JP2018042020A (ja) * | 2016-09-05 | 2018-03-15 | 株式会社メディアリンクス | 映像伝送システム |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8264421B2 (en) | Multi-screen video playback system | |
US9462195B2 (en) | System and method for distributed video and or audio production | |
JP5086285B2 (ja) | 映像配信システム,映像配信装置,及び同期補正処理装置 | |
JP4322851B2 (ja) | 動画配信システムおよび動画配信サーバー | |
US10341672B2 (en) | Method and system for media synchronization | |
EP2866451A1 (en) | Method and apparatus for IP video signal synchronization | |
JP2005244931A (ja) | マルチ画面映像再生システム | |
KR20180090719A (ko) | 미디어 동기화 방법 및 시스템 | |
JP6486628B2 (ja) | メディア・ストリームの同期再生を行う相互接続マルチメディア・システム | |
CN113542897A (zh) | 一种适用于多视角直播的音视频直播方法 | |
JPWO2017179593A1 (ja) | Avサーバおよびavサーバシステム | |
JP4329819B2 (ja) | タイミングサーバ、描画ユニット及び表示装置 | |
JP4534201B2 (ja) | 情報コミュニケーション端末装置 | |
JP7053525B2 (ja) | バッファリング処理装置、通信システム、バッファリング処理方法、及びプログラム | |
JP2020155988A (ja) | バッファリング処理装置、通信システム、バッファリング処理方法、及びプログラム | |
JPH10224772A (ja) | 遠隔制御装置 | |
JP2018182617A (ja) | 情報処理装置、情報処理方法、プログラム、および記録媒体製造方法 | |
JP2009081654A (ja) | ストリーム同期再生システム及び方法 | |
JP2020005063A (ja) | 処理装置及びその制御方法、出力装置、同期制御システム、並びにプログラム | |
JP7315758B1 (ja) | メディア伝送システム、送信装置、送信システム、受信装置及び受信システム | |
JP5068224B2 (ja) | 映像送受信システム及びその制御方法 | |
KR0154005B1 (ko) | 시스템 부호화기를 위한 재생시간정보 발생장치 | |
CN115297335B (zh) | 基于接收缓冲区的视频直播时的音频传输方法及系统 | |
JP7480908B2 (ja) | 映像合成装置及び映像合成方法 | |
KR101810883B1 (ko) | 라이브 스트리밍 시스템 및 그의 스트리밍 클라이언트 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210623 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20220311 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220329 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220530 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20220802 |