JP5068224B2 - Video transmission / reception system and control method thereof - Google Patents
Video transmission / reception system and control method thereof Download PDFInfo
- Publication number
- JP5068224B2 JP5068224B2 JP2008169231A JP2008169231A JP5068224B2 JP 5068224 B2 JP5068224 B2 JP 5068224B2 JP 2008169231 A JP2008169231 A JP 2008169231A JP 2008169231 A JP2008169231 A JP 2008169231A JP 5068224 B2 JP5068224 B2 JP 5068224B2
- Authority
- JP
- Japan
- Prior art keywords
- video
- time code
- video transmission
- transmission
- transmitting
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Description
本発明は、映像送受信システム及び映像切替方法映像送受信システム及び映像切替方法及び映像送信装置及び映像受信装置及び制御装置に係り、特に、映像の中継・伝送において、複数の映像送信装置から一つを選んで、受信・再生を行う映像送受信システムに関し、受信映像を他の映像送信装置からの映像に切り替える際の映像信号の混信や一時的な欠落を防ぐ映像送受信システム及び映像切替方法映像送受信システム及び映像切替方法及び映像送信装置及び映像受信装置及び制御装置に関する。 The present invention relates to a video transmission / reception system and a video switching method, a video transmission / reception system, a video switching method, a video transmission device, a video reception device, and a control device, and in particular, one of a plurality of video transmission devices in video relay / transmission. Video transmission / reception system and video switching method for preventing video signal interference and temporary omission when switching received video to video from another video transmission device The present invention relates to a video switching method, a video transmission device, a video reception device, and a control device.
カメラやVTRなどの映像ソースと接続された映像送信装置が複数存在し、その中から一つを選んで再生する従来の映像再生システムでは、各々の映像送信装置からは常に映像信号が出力されており、映像切替装置により電気的なスイッチングを行うなどの手法がとられる。例えば、映像信号のアナログ・ディジタル変換を行い、メモリを利用して映像データのバッファリングを行い、映像切替の際の同期を維持する方法がある(例えば、特許文献1参照)。 In a conventional video playback system in which there are a plurality of video transmission devices connected to video sources such as cameras and VTRs, and one of them is played back, a video signal is always output from each video transmission device. Thus, a technique such as electrical switching by a video switching device is taken. For example, there is a method of performing analog / digital conversion of a video signal, buffering video data using a memory, and maintaining synchronization during video switching (see, for example, Patent Document 1).
また、映像切替装置を多段に接続し、多数の映像送信装置から1つの映像を選択して再生する手法がある(例えば、特許文献2参照)。 In addition, there is a technique in which video switching devices are connected in multiple stages and one video is selected from a number of video transmission devices and played back (see, for example, Patent Document 2).
また、映像送信装置と映像再生装置がネットワークで接続され、それぞれの映像が複数の符号化ストリームとして伝送されるシステムがある(例えば、特許文献3参照)。 Further, there is a system in which a video transmission device and a video reproduction device are connected via a network, and each video is transmitted as a plurality of encoded streams (see, for example, Patent Document 3).
さらに、ネットワーク上に存在する複数のサーバ上の映像を、VOD(ビデオ・オン・デマンド)方式で順に伝送し、映像再生装置において映像の切れ目が発生しないように再生を行う手法がある(例えば、特許文献4参照)。
しかしながら、上記の特許文献1,2に示されるような従来のシステムでは、映像送信装置と映像切替装置がそれぞれ直接電気的に接続されている必要がある。映像送信装置が多数存在し、また離れた位置に分散して存在するような場合は、それぞれの映像送信装置と映像切替装置を電気的に直接接続させることは困難である。これに対し、特許文献2のような映像切替装置の多段接続を利用した場合、映像再生装置と映像切替装置の間に伝送遅延が存在すると、ユーザの希望する時刻で映像を切り替えることは困難である。
However, in the conventional systems as shown in
また、特許文献3に示されるように、映像の伝送経路をパケット交換式のネットワークにし、映像送信装置を利用することで、伝送距離が長距離であっても映像送信装置と映像再生装置の接続は容易になる。但し、この場合、符号化ストリームの合計のビットレートが伝送経路の帯域幅を超えると輻輳が発生し、正しく映像伝送ができなくなるため、接続可能な映像送信の数、もしくは映像品質に制限が生じる。 In addition, as shown in Patent Document 3, the video transmission path is a packet-switched network and the video transmission device is used, so that the video transmission device and the video reproduction device can be connected even when the transmission distance is long. Becomes easier. However, in this case, if the total bit rate of the encoded stream exceeds the bandwidth of the transmission path, congestion occurs and video transmission cannot be performed correctly, so the number of connectable video transmissions or video quality is limited. .
特許文献4では、映像送信装置となる複数のサーバのうち、選択した一つのサーバからの符号化ストリームのみが伝送されるが、映像切替の瞬間に2つの符号化ストリームが同時に伝送経路上に存在する可能性があるため、輻輳による映像品質の低下を避けるためには、2つの符号化ストリームの合計のビットレートが伝送経路の帯域幅よりも小さくなければならない。また、パケット交換式のネットワークにおいては、パケット到着の輻輳が起こらないように切替を制御するのは、それぞれの映像送信装置と輻輳発生地点の間の伝送遅延時間やパケット到達時間の揺らぎ(ジッタ)を考慮して、それぞれの映像送信装置の映像送信の開始/停止を制御しなければならない。
In
本発明は、上記の点に鑑みなされたもので、複数の映像送信装置が存在する状況において、映像送信装置の数、配置場所、映像受信再生装置からの伝送距離に関わらず、映像信号の混信や輻輳による画質劣化を起こすことなく、ユーザの要求する時刻で正確に、受信映像の切り替えを行うことが可能な映像送受信システム及び映像切替方法映像送受信システム及び映像切替方法及び映像送信装置及び映像受信装置及び制御装置を提供することを目的とする。 The present invention has been made in view of the above points, and in a situation where there are a plurality of video transmission devices, the interference of video signals regardless of the number of video transmission devices, the location of the video transmission devices, and the transmission distance from the video reception / playback device. Video transmission / reception system, video switching method, video transmission / reception system, video switching method, video transmission device, and video reception capable of switching received video accurately at the time requested by the user without causing image quality degradation due to congestion or congestion An object is to provide a device and a control device.
上記の課題を解決するために、本発明では、1つの映像受信装置に対して複数の映像送信装置のうち1つのみが映像送信を行い、映像切替元の映像送信を停止させ、映像切替先の映像送信を開始させて映像受信装置における映像切替を行う。また、各映像送信装置は生成したタイムコードを、映像送信の有無に関わらず映像受信装置に送信し、映像受信装置は計測した各映像送信装置からタイムコードの差分を用いて、映像送信装置に対し、映像送信開始の時刻を指定することを特徴とする。ここでのタイムコードとは、映像信号における時刻を表す値のことであり、映像信号1フレームを最小単位とするSMPTEタイムコードが代表的であるが、入力映像信号と同期した時刻情報であればどのようなものでもよい。 In order to solve the above problems, in the present invention, only one of a plurality of video transmission devices performs video transmission to one video reception device, stops video transmission of the video switching source, and switches the video switching destination. Video transmission is started and video switching is performed in the video receiver. In addition, each video transmission device transmits the generated time code to the video reception device regardless of whether or not video transmission is performed, and the video reception device uses the time code difference from each measured video transmission device to the video transmission device. On the other hand, the video transmission start time is designated. The time code here is a value representing the time in the video signal, and is typically a SMPTE time code with one frame of the video signal as a minimum unit, but if it is time information synchronized with the input video signal. It can be anything.
本発明の請求項1によると、映像受信装置が複数の映像送信装置のうち1つの映像送信装置から他の映像送信装置へ受信映像の切替を行う映像送受信システムであって、
前記映像送信装置は、
映像入力手段と、
映像信号を前記映像受信装置に送信する映像送信手段と、
タイムコードTを生成するタイムコード生成手段と、
前記タイムコードTを前記映像受信装置に送信するタイムコード送信手段と、
映像送信停止タイムコードETを受信し、T=ETとなったときに映像送信を停止する映像送信停止手段、または、映像送信開始タイムコードSTを受信し、T=STとなったときに映像送信を開始する映像送信開始手段と、
を備え、
前記映像受信装置は、
前記映像送信装置より伝送経路を介して前記映像信号を受信する映像受信手段と、
映像出力手段と、
前記映像信号の受信に応じて前記映像受信装置の内部で映像ライン単位の内部タイムコードをカウントし始め、前記タイムコードTを受信し、前記タイムコードTと前記タイムコードTを受信した時の前記内部タイムコードとに基づき計測タイムコードを求めるタイムコード計測手段と、
現在の映像受信先の映像送信装置に対し、前記映像送信停止タイムコードETを生成して送信する映像送信停止タイムコード生成手段、または、映像切替先の映像送信装置に対し、前記映像送信開始タイムコードSTを生成して送信する映像送信開始タイムコード生成手段と、
を備え、前記複数の映像送信装置からの受信映像の切替を行う。
According to
The video transmission device includes:
Video input means;
Video transmission means for transmitting a video signal to the video receiver;
Time code generation means for generating a time code T;
Time code transmitting means for transmitting the time code T to the video receiver;
Video transmission stop means for receiving video transmission stop time code ET and stopping video transmission when T = ET or video transmission start time code ST is received, and video transmission is performed when T = ST Video transmission start means for starting
With
The video receiver is
Video receiving means for receiving the video signal from the video transmitting device via a transmission path;
Video output means;
In response to the reception of the video signal, the video reception device starts counting the internal time code in units of video lines, receives the time code T, and receives the time code T and the time code T when the time code T is received. A time code measuring means for obtaining a measurement time code based on the internal time code;
The video transmission stop time code generation means for generating and transmitting the video transmission stop time code ET to the video transmission device of the current video reception destination, or the video transmission start time to the video transmission device of the video switching destination Video transmission start time code generating means for generating and transmitting the code ST;
And switching received video from the plurality of video transmission devices.
本発明の請求項2によると、映像受信装置が複数の映像送信装置のうち1つの映像送信装置から他の映像送信装置へ受信映像の切替を行う映像送受信システムであって、
前記映像受信装置は、
前記映像信号の受信に応じて前記映像受信装置の内部で映像ライン単位の内部タイムコードをカウントし始め、前記タイムコードTを受信し、前記タイムコードTと前記タイムコードTを受信した時の前記内部タイムコードとに基づき計測タイムコードを求めるタイムコード計測手段、を備え、
前記制御装置は、
現在の映像受信先の映像送信装置に対し、映像送信停止タイムコードETを生成して送信する映像送信停止タイムコード生成手段、または、映像切替先の映像送信装置に対し、映像送信開始タイムコードSTを生成して送信する映像送信開始タイムコード生成手段と、を備える。
According to a second aspect of the present invention, there is provided a video transmission / reception system in which a video reception device switches received video from one video transmission device to another video transmission device among a plurality of video transmission devices,
The video receiver is
In response to the reception of the video signal, the video reception device starts counting the internal time code in units of video lines, receives the time code T, and receives the time code T and the time code T when the time code T is received. A time code measuring means for obtaining a measurement time code based on the internal time code,
The controller is
Video transmission stop time code generating means for generating and transmitting a video transmission stop time code ET to the current video receiving destination video transmitting apparatus, or a video transmission starting time code ST for the video switching destination video transmitting apparatus Video transmission start time code generating means for generating and transmitting
本発明の請求項3によると、前記制御装置の前記映像送信開始タイムコード生成手段は、
前記映像送信停止タイムコードETに、前記映像受信装置から送信された映像切替先の計測タイムコードと、該映像受信装置から送信された現在の映像受信先の計測タイムコードの差分を加算することで、前記映像送信開始タイムコードSTを生成する手段を含む。
According to claim 3 of the present invention, the video transmission start time code generating means of the control device comprises:
By adding the difference between the measurement time code of the video switching destination transmitted from the video reception device and the measurement time code of the current video reception destination transmitted from the video reception device to the video transmission stop time code ET And means for generating the video transmission start time code ST.
本発明の請求項4によると、前記複数の映像送信装置のうち、映像の切替元と切替先の2つの映像送信装置のみが、前記タイムコードTを前記映像受信装置に送信する、
請求項1または2記載の映像送受信システム。
According to
The video transmission / reception system according to
本発明の請求項5によると、前記映像受信装置は、
映像の切替元と切替先の映像送信装置との遅延時間を計測する手段を備え、
前記映像送信停止タイムコード生成手段は、
ユーザからの映像切替要求を受けた時点で計測された、切替元の映像送信装置からのタイムコードTと、前記遅延時間のうち長い方の値を加算した値を、前記映像送信停止タイムコードETとする手段を含む、
請求項1または2記載の映像送受信システム。
According to
Means for measuring the delay time between the video switching source and the switching destination video transmission device,
The video transmission stop time code generating means includes
A value obtained by adding the time code T from the switching source video transmission apparatus and the longer one of the delay times, measured at the time of receiving the video switching request from the user, is the video transmission stop time code ET. Including means to
The video transmission / reception system according to
本発明の請求項6によると、前記映像受信装置は、
映像の切替先と切替元の映像送信装置の計測タイムコードの差分の計測を複数回行う手段を含み、
前記映像送信開始タイムコード生成手段は、
前記映像送信開始タイムコードETにその平均値を加算して映像送信開始タイムコードSTを生成する手段を含む。
According to claim 6 of the present invention, the video receiving device comprises:
Including means for measuring a difference between measurement time codes of a video switching destination and a switching source video transmission device a plurality of times,
The video transmission start time code generating means is
Means for generating a video transmission start time code ST by adding the average value to the video transmission start time code ET;
本発明の請求項7によると、前記映像送信手段、前記タイムコード送信手段、前記映像受信手段、前記タイムコード計測手段、前記映像送信停止タイムコード生成手段、前記映像送信開始タイムコード生成手段は、
パケット伝送ネットワークを介してパケット送受信を行う。
According to claim 7 of the present invention, the video transmission means, the time code transmission means, the video reception means, the time code measurement means, the video transmission stop time code generation means, the video transmission start time code generation means,
Packet transmission / reception is performed via the packet transmission network.
本発明の請求項8によると、前記計測タイムコード送信手段、前記映像送信停止タイムコード生成手段、前記映像送信開始タイムコード生成手段は、
パケット伝送ネットワークを介してパケット送受信を行う。
According to claim 8 of the present invention, the measurement time code transmission means, the video transmission stop time code generation means, the video transmission start time code generation means,
Packet transmission / reception is performed via the packet transmission network.
本発明の請求項9によると、映像受信装置が複数の映像送信装置のうち1つの映像送信装置から他の映像送信装置へ受信映像の切替を行う映像切替方法であって、
各映像送信装置において、
タイムコードを生成するステップと、
映像送信の有無にかかわらず映像伝送経路を介して映像受信装置にタイムコードを送信するステップと、を備え、
前記映像受信装置において、
前記映像送信装置より伝送経路を介して前記映像信号を受信するステップと、
前記映像信号の受信に応じて前記映像受信装置の内部で映像ライン単位の内部タイムコードをカウントし始め、前記タイムコードTを受信し、前記タイムコードTと前記タイムコードTを受信した時の前記内部タイムコードとに基づき計測タイムコードを求めるステップと、
現在の映像受信先の映像送信装置に対し、前記映像送信停止タイムコードETを生成して送信するステップ、または、映像切替先の映像送信装置に対し、前記映像送信開始タイムコードSTを生成して送信するステップと、を備える。
According to claim 9 of the present invention, there is provided a video switching method in which a video receiving device switches received video from one video transmitting device to another video transmitting device among a plurality of video transmitting devices,
In each video transmission device,
Generating a time code;
A step of transmitting a time code to a video receiver via a video transmission path regardless of whether or not video is transmitted;
In the video receiver,
Receiving the video signal from the video transmission device via a transmission path;
In response to the reception of the video signal, the video reception device starts counting the internal time code in units of video lines, receives the time code T, and receives the time code T and the time code T when the time code T is received. Obtaining a measurement time code based on the internal time code;
A step of generating and transmitting the video transmission stop time code ET to the current video receiving destination video transmitting device, or a step of generating the video transmission start time code ST to the video switching destination video transmitting device. Transmitting.
本発明の請求項10によると、映像受信装置が複数の映像送信装置のうち1つの映像送信装置から他の映像送信装置へ受信映像の切替を行う映像切替方法であって、
前記映像受信装置において、
前記映像信号の受信に応じて前記映像受信装置の内部で映像ライン単位の内部タイムコードをカウントし始め、前記タイムコードTを受信し、前記タイムコードTと前記タイムコードTを受信した時の前記内部タイムコードとに基づき計測タイムコードを求めるステップ、を備え、
前記制御装置において、
現在の映像受信先の映像送信装置に対し、映像送信停止タイムコードETを生成して送信する映像送信停止タイムコード生成手段、または、映像切替先の映像送信装置に対し、映像送信開始タイムコードSTを生成して送信するステップと、を備える。
According to claim 10 of the present invention, there is provided a video switching method in which a video receiving device switches received video from one video transmitting device to another video transmitting device among a plurality of video transmitting devices,
In the video receiver,
In response to the reception of the video signal, the video reception device starts counting the internal time code in units of video lines, receives the time code T, and receives the time code T and the time code T when the time code T is received. Obtaining a measurement time code based on the internal time code,
In the control device,
Video transmission stop time code generating means for generating and transmitting a video transmission stop time code ET to the current video receiving destination video transmitting apparatus, or a video transmission starting time code ST for the video switching destination video transmitting apparatus Generating and transmitting.
上記のように本発明によれば、複数の映像送信装置が存在する状況においても、映像送信装置の数、配置場所、映像受信再生装置からの伝送距離にかかわらず、映像信号の混信や輻輳による画像劣化を起こすことなく、ユーザの要求する時刻で正確に受信映像の切替を行うことが可能となる。 As described above, according to the present invention, even in a situation where there are a plurality of video transmission devices, regardless of the number of video transmission devices, the location of the video transmission devices, and the transmission distance from the video reception / playback device, The received video can be switched accurately at the time requested by the user without causing image degradation.
最初に本発明の動作原理を説明する。 First, the operation principle of the present invention will be described.
図1は本発明の原理構成図である。 FIG. 1 is a principle configuration diagram of the present invention.
図1のシステムは、映像受信装置と、複数の映像送信装置で構成され、複数の映像送信装置から1つを選択して映像を受信し、この間、他の映像送信装置は映像送信を停止する映像送受信システムであって、
映像送信装置は、
映像入力手段と、
映像信号を映像受信装置に送信する映像送信手段と、
タイムコードTを生成するタイムコード生成手段と、
タイムコードTを映像受信装置に送信するタイムコード送信手段と、
映像送信停止タイムコードETを受信し、T=ETとなったときに映像送信を停止する映像送信停止手段、または、映像送信開始タイムコードSTを受信し、T=STとなったときに映像送信を開始する映像送信開始手段と、
を備え、
映像受信装置は、
映像送信装置より伝送経路を介して映像信号を受信する映像受信手段と、
映像出力手段と、
映像送信装置で生成されたタイムコードを求めるタイムコード計測手段と、
現在の映像受信先の映像送信装置に対し、映像送信停止タイムコードETを生成して送信する映像送信停止タイムコード生成手段、または、映像切替先の映像送信装置に対し、映像送信開始タイムコードSTを生成して送信する映像送信開始タイムコード生成手段と、を備え、複数の映像送信装置からの受信映像の切替を行う。
The system of FIG. 1 includes a video receiving device and a plurality of video transmitting devices, and selects one of the plurality of video transmitting devices to receive a video. During this time, other video transmitting devices stop video transmission. A video transmission / reception system,
The video transmission device
Video input means;
Video transmission means for transmitting a video signal to a video receiver;
Time code generation means for generating a time code T;
Time code transmitting means for transmitting the time code T to the video receiver;
Video transmission stop means for receiving video transmission stop time code ET and stopping video transmission when T = ET or video transmission start time code ST is received, and video transmission is performed when T = ST Video transmission start means for starting
With
The video receiver
Video receiving means for receiving a video signal from a video transmission device via a transmission path;
Video output means;
Time code measuring means for obtaining a time code generated by the video transmission device;
Video transmission stop time code generating means for generating and transmitting a video transmission stop time code ET to the current video receiving destination video transmitting apparatus, or a video transmission starting time code ST for the video switching destination video transmitting apparatus Video transmission start time code generating means for generating and transmitting the video, and switching received video from a plurality of video transmission devices.
映像送信装置及び映像受信装置は、パーソナルコンピュータ、ワークステーション、専用コンピュータ、又は上述の機能を実行可能な如何なるコンピュータにより実施されてもよい。 The video transmission device and the video reception device may be implemented by a personal computer, a workstation, a dedicated computer, or any computer capable of executing the above-described functions.
図2は本発明の原理を説明するための図である。 FIG. 2 is a diagram for explaining the principle of the present invention.
図2の方法は、映像受信装置が複数の映像送信装置のうち1つの映像を受信している状態から、該映像送信装置へ映像送信停止の要求を送信し、他の映像送信装置へ映像送信開始の要求を送信して受信映像の切替を行う映像切替方法であって、
各映像送信装置において、
タイムコードを生成するステップ(ステップS1)と、
映像送信の有無にかかわらず映像伝送経路を介して映像受信装置にタイムコードを送信するステップ(ステップS2)と、を行い、
映像受信装置において、
映像送信停止タイムコードETAを生成するステップ(ステップS3)と、
映像の切替元となる映像送信装置Aに対し、ETAを送信するステップ(ステップS4)と、
映像受信装置で計測された映像送信装置BからのタイムコードOTBと映像送信装置AからのタイムコードOTAの差分DTBにETAを加算して映像送信開始タイムコードSTBを生成するステップ(ステップS5)と、
映像の切替先となる映像送信装置Bに対し、STBを送信するステップ(ステップS6)と、
映像送信装置Aにおいて、ETAを受信するステップ(ステップS7)と、
自身が生成するタイムコードTAがETAになると同時に映像送信を停止するステップ(ステップS8)と、を行い、
映像送信装置Bにおいて、
STBを受信するステップ(ステップS9)と、
自身が生成するタイムコードTBがSTBになると同時に映像送信を開始するステップ(ステップS10)と、
を行い、映像送信装置Aの映像から、映像送信装置Bの映像へと受信映像の切替を行う。
The method of FIG. 2 transmits a video transmission stop request to the video transmission device from the state in which the video reception device is receiving one of the video transmission devices, and transmits the video to another video transmission device. A video switching method for transmitting a start request and switching a received video,
In each video transmission device,
Generating a time code (step S1);
Performing a step (step S2) of transmitting a time code to the video receiver via the video transmission path regardless of whether or not the video is transmitted;
In the video receiver,
And step (step S3) for generating a video transmission stop time code ET A,
A step (step S4) of transmitting ETA to the video transmission device A which is a video switching source;
Generating a time code OT B and timecode OT A difference DT B to ET A addition to video transmission start time code ST B from the video transmission apparatus A from the video transmitting apparatus B that is measured by the video receiver (Step S5),
A step (step S6) of transmitting ST B to the video transmission device B as a video switching destination;
In the video transmitting apparatus A, the step (step S7) receiving the ET A,
Performs the step of the time code T A which itself produced to stop at the same time video transmission becomes to ET A (step S8), and the,
In video transmission device B,
Receiving ST B (step S9);
A step (step S10) that the time code T B which itself produces starts simultaneously video transmission becomes in ST B,
The received video is switched from the video of the video transmission device A to the video of the video transmission device B.
図3は、本発明の映像送信開始タイムコード生成処理の動作原理を説明する図である。 FIG. 3 is a diagram for explaining the operation principle of the video transmission start time code generation processing of the present invention.
2つの映像送信装置A,Bと2つの映像受信装置の伝送経路は途中の伝送経路結合装置10で1つに纏められる。伝送経路結合装置10は、パケット伝送ネットワークにおけるパケット交換装置や、2つの経路の信号を電気的に加算する装置等を示し、それぞれの映像送信装置A,Bから同時に映像送信が行われた場合は、ここで輻輳または映像信号の混信が発生する箇所となる。映像送信装置A、Bで生成されたタイムコードをそれぞれTA,TB、映像受信装置20で計測された映像送信装置A,BからのタイムコードをそれぞれOTA,OTBとし、映像送信装置A,Bから伝送経路結合装置10までの伝送遅延時間をDA,DB、伝送経路結合装置10から映像受信装置20までの伝送遅延時間をDCとすると、
TA=OTA+DC+DA (1)
TB=OTB+DC+DB (2)
という関係が成り立つ。映像送信装置Aにおいて、TA=ETAとなったときに映像送信を停止し、映像送信装置Bにおいて、TB=STBとなったときに映像送信を開始するように制御を行うとき、伝送経路結合装置10において輻輳または混信が発生しないための条件は、
ETA+DA−TA'=STB+DB−TB' (3)
となる。ここで、TA'及びTB'は、ある時刻におけるTAとTBの値を示す。この時刻において映像受信装置20で計測されたタイムコードをOTA'及びOTB'とすると、式(1)、式(2)、及び式(3)により、
STB=ETA+OTB'−OTA' (4)
が成り立つ。
The transmission paths of the two video transmission devices A and B and the two video reception devices are combined into one by the transmission
T A = OT A + D C + D A (1)
T B = OT B + D C + D B (2)
This relationship holds. When the video transmission apparatus A performs control so that video transmission is stopped when T A = ET A, and video transmission apparatus B is controlled to start video transmission when T B = ST B , The conditions for preventing congestion or interference in the transmission path coupler 10 are as follows:
ET A + D A -T A ' = ST B + D B -T B' (3)
It becomes. Here, T A ′ and T B ′ indicate the values of T A and T B at a certain time. Assuming that the time code measured by the
ST B = ET A + OT B '-OT A' (4)
Holds.
伝送経路結合装置10において、
ETA'=ETA+DA−TA'、STB'=STB+DB−TB'
とすると、映像送信装置Aにおける後述する映像送信フェードアウト部により、映像信号Aのビットレートは、図4の時刻ETA'から時刻ETA'+FTまでのように推移し、映像送信装置Bにおける後述する映像送信フェードイン部により、映像信号Bのビットレートは、図4の時刻STBから時刻STB+FTまでのように推移する。なお、このクロスフェード処理は、映像送信フェードアウト時に映像受信装置20のバッファを消費することで可能となるものであり、このときの映像送信装置A,Bと映像受信装置20におけるバッファ量の推移は、図5に示す通りとなる。
In the transmission
ET A '= ET A + D A -T A', ST B '= ST B + D B -T B'
When, by the video transmission fadeout portion which will be described later in the video transmitting apparatus A, the bit rate of the video signal A is remained as 'from time ET A' time ET A in FIG. 4 to + FT, described later in the video transmitting apparatus B the video transmitting fade-section of the bit rate of the video signal B changes as from time ST B in FIG. 4 to time ST B + FT. This cross-fading process can be performed by consuming the buffer of the
これにより、図3に示した伝送遅延DA,DBがネットワークのジッタなどにより変動することで、映像切替の瞬間における映像信号Aと映像信号Bの合計ビットレートが変動する場合において、変動の割合を抑え、図6のような瞬間的な輻輳の発生を防ぐことができる。 As a result, the transmission delays D A and D B shown in FIG. 3 fluctuate due to network jitter and the like, so that when the total bit rate of the video signal A and the video signal B at the instant of video switching varies, The ratio can be suppressed and the occurrence of instantaneous congestion as shown in FIG. 6 can be prevented.
図1乃至図6を参照して説明した本発明の原理によると、切替制御の時間的粒度がタイムコードの粒度及び映像送受信装置における処理単位の粒度に依存する。例えばタイムコードの粒度が映像1フレーム単位であり、映像送受信装置においてタイムコードの送信/計測、映像送信の開始/停止の処理が映像1フレーム単位で行われる場合、映像1フレーム時間未満の精度で切替制御を行うことができない。これはすなわち、ストリームが切り替わる時刻が最大で映像1フレーム時間だけ前後することになり、切替時のオーバーラップが避けられないことを意味する。このオーバーラップによるネットワークの輻輳を防ぐために、上述の原理ではクロスフェード処理を行っている。 According to the principle of the present invention described with reference to FIGS. 1 to 6, the temporal granularity of the switching control depends on the granularity of the time code and the granularity of the processing unit in the video transmission / reception apparatus. For example, when the time code granularity is in units of one frame of video and the transmission / measurement of the time code and the start / stop processing of video transmission are performed in units of one frame of video in the video transmission / reception apparatus, the accuracy is less than the time of one frame of video. Switching control cannot be performed. This means that the time at which the stream is switched is at most around one frame time of video, and it is unavoidable that overlap occurs at the time of switching. In order to prevent network congestion due to this overlap, crossfading processing is performed according to the above-described principle.
本発明は、更に、ストリームのオーバーラップそのものを防ぐために、映像1フレーム以下、すなわち映像ライン単位での切替制御を行う。但し、映像送信装置から送られるタイムコードの粒度をライン単位にしたり、映像送受信装置の処理の粒度をライン単位にしたりすると、ネットワーク負荷及び処理負荷が増加し、システムのコストを増大させてしまう。従って、本発明は、システムのコストの増大を防ぎ、且つライン単位で切替制御を行う。 The present invention further performs switching control for one frame or less of video, that is, for each video line, in order to prevent stream overlap itself. However, if the granularity of the time code sent from the video transmission apparatus is set on a line basis or the processing granularity of the video transmission / reception apparatus is set on a line basis, the network load and the processing load increase and the cost of the system increases. Therefore, the present invention prevents an increase in the cost of the system and performs switching control in line units.
ライン単位の切替制御を実現するため、本発明では、映像の時間軸方向の位置を示すタイムコードは映像1画面を単位とするフレーム番号と、更に細かい単位として走査線1本を単位とするライン番号を含む。タイムコードをT、フレーム番号をF、ライン番号をLとすると、T=F.Lと表される。映像1フレームを構成する映像ライン数をLMAXとすると、0≦L≦LMAX−1であり、L=LMAX−1のときLを1増加すると、Fが1増加しLが0になる。Ta=Fa.La、Tb=Fb.Lbのとき、加算及び減算は次のように行われる:
Ta+Tb
=(Fa+Fb).(La+Lb)
・・・La+Lb<LMAXのとき
=(Fa+Fb+1).(La+Lb−LMAX)
・・・La+Lb≧LMAXのとき (5)
Ta−Tb
=(Fa−Fb).(La−Lb)
・・・La≧Lbのとき
=(Fa−Fb−1).(La−Lb+LMAX)
・・・La<Lbのとき (6)
以下、図面を参照して本発明の実施の形態を詳細に説明する。
In order to realize line-by-line switching control, in the present invention, the time code indicating the position of the video in the time axis direction is a frame number in units of one video screen, and a line in units of one scanning line as a finer unit. Contains a number. If the time code is T, the frame number is F, and the line number is L, T = F. L. If the number of video lines constituting one video frame is L MAX , 0 ≦ L ≦ L MAX −1. When L = L MAX −1, when L is increased by 1, F is increased by 1 and L becomes 0. . Ta = Fa. La, Tb = Fb. For Lb, addition and subtraction are performed as follows:
Ta + Tb
= (Fa + Fb). (La + Lb)
... When La + Lb <L MAX = (Fa + Fb + 1). (La + Lb-L MAX )
... When La + Lb ≧ L MAX (5)
Ta-Tb
= (Fa-Fb). (La-Lb)
... When La ≧ Lb = (Fa−Fb−1). (La-Lb + L MAX )
... When La <Lb (6)
Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings.
[第1の実施の形態]
図7は、本発明の第1の実施の形態における映像送受信システムの構成図を示す。
[First Embodiment]
FIG. 7 is a configuration diagram of the video transmission / reception system according to the first embodiment of the present invention.
同図に示す映像送受信システムは、映像送信装置100A、100B、映像受信装置300から構成される。
The video transmission / reception system shown in the figure includes
映像送信装置100Aは、それぞれ映像入力部110A、映像送信部120A、タイムコード生成部130A、タイムコード送信部140A、映像送信停止部150A、映像送信開始部160Aから構成される。映像送信装置100Bも同様に構成され各要素の添え字をBとして示す。
The
映像受信装置300は、映像受信部310、映像出力部320、タイムコード計測部330、映像送信停止タイムコード生成部340、映像送信開始タイムコード生成部350から構成される。
The
複数の映像送信装置100A、100Bと映像受信装置300との伝送経路は、図3に示すように、途中の経路結合装置10で一つに纏められる。伝送経路は、回線占有型もしくはパケット伝送型の経路となり、伝送経路が回線占有型の経路の場合は、経路結合装置10は回線交換部もしくは信号加算部となる。伝送経路がパケット伝送型の経路の場合は、経路結合部はパケット交換部となる。
Transmission paths between the plurality of
図8は、本発明の第1の実施の形態における動作のシーケンスチャートである。 FIG. 8 is a sequence chart of the operation in the first embodiment of the present invention.
ステップS101で、映像の切替元となる映像送信装置100A及び映像の切替先となる映像送信装置100Bにおいて、映像入力部110A,110Bに映像信号が入力される。同時に、タイムコード生成部130A,130Bにおいて、入力された映像信号と対応付けられたタイムコードTA及びTBがそれぞれ生成される。タイムコードの生成については、入力映像信号のクロックを基準として生成するか、入力映像信号にタイムコードが付与されている場合は、そのタイムコードをそのまま生成タイムコードとして利用してもよい。映像装置100A及び映像送信装置100Bはそれぞれ一定ライン毎にタイムコードを生成し、タイムコード送信部140A,140BよりタイムコードTA及びTBを映像受信装置300に送信する。なお、一般に用いられるSMPTEタイムコード等では、時刻情報の最小単位が映像1フレームとなるが、映像の水平同期信号を利用し、より細かい単位でのタイムコードを生成してもよい。つまり、タイムコードは映像1画面を単位とするフレーム番号と、更に細かい単位として走査線1本を単位とするライン番号を含んでよい。
In step S101, the video signal is input to the
ステップS102で、次に、映像送信装置100Aでは、入力映像信号を映像信号送信部120Aより伝送経路を介して送信する。映像伝送の帯域幅を狭めるために、ここで映像の符号化を行ってもよい。同時に、映像送信装置100A及び映像送信装置100Bにおいて、タイムコード送信部140A,140BよりタイムコードTA及びTBを映像受信装置300に送信する。タイムコードの伝送経路は、映像伝送経路と同じでなくてはならない。また、タイムコードの送信間隔は映像送信装置100Aと映像送信装置100Bで同じでなくてはならない。
Next, in step S102, the
ステップS103で、映像受信装置300において、映像送信装置100Aから送信された映像を映像受信部310で受信し、映像出力部320から映像出力を行う。映像が符号化されている場合は、復号処理も行う。同時に、映像受信装置300のタイムコード計測部330において、映像ストリームの受信状況に応じて内部タイムコードRT(n)のカウントが開始される。具体的には、映像1ライン分のデータ受信を完了したときに内部ライン番号を1増加させ、映像1フレーム分のデータ受信を完了したときに内部フレーム番号を1増加させ、内部ライン番号を0にリセットする。
In step S <b> 103, in the
ステップS104で、映像受信装置300のタイムコード計測部330において、両方の映像送信装置100A,100BからのタイムコードTA、TBを受信し記録する。同時に、タイムコード計測部330において、タイムコードTA、TBを受信した時の内部タイムコードRTA、RTBを記録する。
In step S104, the time
ステップS105で、映像受信装置300のタイムコード計測部330において、計測タイムコードOTA、OTBが計測される。具体的には、映像受信装置において計測タイムコードを算出するときの内部タイムコードをRT(n)とし、一定時間dRT毎に算出するとものとすると、以下の式が成り立つ:
RT(n)=RT(n−1)+dRT (7)
従って、内部タイムコードをRT(n)における計測タイムコードOTA、OTBは次のように求められる:
OTA=TA+(RT(n)−RTA) (8)
OTB=TB+(RT(n)−RTB) (9)
これにより、映像送信装置100A、100Bからのタイムコード送信間隔及びタイムコードの精度によらず、ライン数の精度でタイムコードを測定可能である。
In step S105, the time
RT (n) = RT (n-1) + dRT (7)
Accordingly, the measurement time codes OT A and OT B at the internal time code RT (n) are obtained as follows:
OT A = T A + (RT (n) -RT A) (8)
OT B = T B + (RT (n) −RT B ) (9)
As a result, the time code can be measured with the accuracy of the number of lines regardless of the time code transmission interval from the
なお、RT(n−1)からRT(n)の間に複数回タイムコードパケットを受信した場合は、最後に受信したタイムコードパケットの値TA、TB及び受信時のRTA、RTBを用いて計測タイムコードOTA、OTBを求めてよい。また、タイムコードを受信しなかった場合は、前回の計測タイムコードにdRTを加算した値を計測タイムコードとしてよい。 If a time code packet is received a plurality of times between RT (n−1) and RT (n) , the values T A and T B of the last received time code packet and RT A and RT B at the time of reception are received. May be used to obtain the measurement time codes OT A and OT B. When no time code is received, a value obtained by adding dRT to the previous measurement time code may be used as the measurement time code.
これにより、タイムコードを受信するタイミングが受信装置における映像フレームの境界の前後である場合にも、タイムコードの計測を継続できる。 Thereby, even when the timing for receiving the time code is before and after the boundary of the video frame in the receiving device, the measurement of the time code can be continued.
また、タイムコードパケットをある回数連続して受信しなかった場合に、タイムコード計測を停止してもよい。 Further, the time code measurement may be stopped when the time code packet is not continuously received a certain number of times.
ステップS106で、映像送信停止タイムコード生成部340において、映像送信停止タイムコードETAを生成し、映像送信装置100Aに伝送経路を介して送信する。ETAはユーザにより予め指定された値であってもよいし、ユーザから映像切替の要求を受けた時点でのOTAを基に生成してもよい。但し、この場合は、ETAと映像送信開始タイムコードSTBが映像送信装置100A及び映像送信装置100Bに到達したときに、既にその時刻が過ぎていないようにETAを生成しなくてはならない。このため、予め伝送遅延時間に比べ充分長い時間を設定し、その値をOTAに加算しETAを生成するか、映像受信装置300から両方の映像送信装置100A,100Bへの伝送遅延時間を計測し、長い方の伝送遅延時間をOTAに加算し、ETAを生成するのが望ましい。伝送遅延時間の計測は、ICMP(Internet Control Message Protocol)のEcho Message及びEcho Reply Message等を用いて計測する。
In step S106, the video transmission stop time
ステップS107で、ETAの生成後は、映像送信開始タイムコード生成部350において、
DTB=OTB−OTA
STB=ETA+DTB
によりSTBを生成し、映像送信装置100Bに伝送経路を介して送信する。DTBはある時刻のOTBとOTAの差分であるが、予め異なる時刻で複数回OTBとOTAを計測して求め、その差分の平均値を利用してもよい。
In step S107, after generating the ET A In the picture transmission start
DT B = OT B -OT A
ST B = ET A + DT B
By generating a ST B, transmitted over the transmission path to the
なお、ETAとSTBの伝送経路は、必ずしも映像伝送経路を同一でなくともよい。また、伝送経路がパケット伝送型の場合は、ETAとSTBの送信はUDP/IP(User Datagram Protocol/Internet Protocol)等のパケット形式を用いてパケット伝送を行うが、経路上のパケット交換部(図示せず)にアドレス解決テーブルが存在せず、最初のパケットが映像送信装置まで到達しない恐れがあるため、予めアドレス解決用パケットを両方の映像送信装置100A,100Bに向かって送信し、パケット交換部上にアドレス解決テーブルが存在する状態にしておくことが望ましい。アドレス解決用パケットはICMPのEcho Message等を利用して送信する。
The transmission path of the ET A and ST B is may not necessarily be the same video transmission path. Also, if the transmission path of the packet transmission type, transmission of the ET A and ST B is performing packet transmission using a packet format such as UDP / IP (User Datagram Protocol / Internet Protocol), a packet-switched portion of the path Since there is no address resolution table (not shown) and the first packet may not reach the video transmission device, the address resolution packet is transmitted to both the
ステップS108で、映像送信装置100Aの映像送信停止部150Aにおいて、ETAを受信し、TA=ETAとなると同時に映像送信を停止させる。また、平行して、映像送信装置100Bの映像送信開始部160Bにおいて、STBを受信し、TB=STBとなると同時に映像送信を開始させる。
In step S108, the video
ステップS109で、映像受信装置300では、映像送信装置100Aから映像のタイムコードがETAとなると同時に、映像送信装置100Bからの映像へと受信映像が切り替わる。
In step S109, the
[第2の実施の形態]
図9は、本発明の第2の実施の形態における映像送受信システムの構成を示す。
[Second Embodiment]
FIG. 9 shows a configuration of a video transmission / reception system according to the second embodiment of the present invention.
同図に示す映像送受信システムは、映像送信装置100A、100B、映像受信装置400、制御装置500から構成される。制御装置500は、パーソナルコンピュータ、ワークステーション、専用コンピュータ、又は上述の機能を実行可能な如何なるコンピュータにより実施されてもよい。
本実施の形態では、第1の実施の形態における映像受信装置300のうち、映像送信停止タイムコード生成部340と映像送信開始タイムコード生成部350を制御装置500に移し、新たに、計測タイムコードを制御装置500に送信する計測タイムコード送信部を備える構成をとる。
The video transmission / reception system shown in the figure includes
In the present embodiment, the video transmission stop time
映像受信装置400は、映像受信部410、映像出力部420、タイムコード計測部430、計測タイムコード送信部440から構成される。
The
制御装置500は、映像送信停止タイムコード510、映像送信開始タイムコード生成部520から構成される。これらの構成は、第1の実施の形態の映像受信装置300の映像送信停止タイムコード生成部340と映像送信開始タイムコード生成部350と同様の機能を有する。
The
図10は、本発明の第2の実施の形態における動作のシーケンスチャートである。 FIG. 10 is a sequence chart of the operation in the second embodiment of the present invention.
ステップS201〜ステップS202は、前述の第1の実施の形態のステップS101、102の動作と同様であるのでその説明を省略する。 Steps S201 to S202 are the same as the operations of steps S101 and S102 in the first embodiment described above, and thus description thereof is omitted.
ステップS203〜ステップS205は、前述の第1の実施の形態のステップS103〜105の動作と同様であり、映像受信装置300を映像受信装置400に置き換えればよいのでその説明を省略する。
Steps S203 to S205 are the same as the operations of steps S103 to S105 in the first embodiment described above, and the
ステップS206で、算出された計測タイムコードOTA,OTBを計測タイムコード送信部440より制御装置500に送信する。
In step S206, the calculated measurement time codes OT A and OT B are transmitted from the measurement time
ステップS207で、制御装置500において、映像送信停止タイムコード生成部510において、OTAを受信し、映像送信開始タイムコード生成部520においてOTBを受信する。
In step S207, in
ステップS208で、映像送信停止タイムコード生成部510は、図8のステップS104と同様の方法により、映像送信停止タイムコードETAを生成し、映像送信装置100Aに送信する。
In step S208, the video transmission stop time
ステップS209で、映像送信開始タイムコード生成部520は、図8のステップS105と同様の方法により、映像送信開始タイムコードSTBを生成し、映像送信装置100Bに送信する。
In step S209, the video transmission start time
ステップS210で、映像送信装置100Aの映像送信停止部150Aにおいて、制御装置500からETAを受信し、TA=ETAとなると同時に映像送信を停止させる。
In step S210, the video
ステップS210で、並行して、映像送信装置100Bの映像送信開始部160Bにおいて、制御装置500からSTBを受信し、TB=STBとなると同時に映像送信を開始させる。
In step S210, in parallel, the video
ステップS211で、映像受信装置400では、映像送信装置100Aから映像のタイムコードがETAとなると同時に、映像送信装置100Bからの映像へと受信映像が切り替わる。
In step S211, the
図11乃至図13を参照し、画像1フレームを構成するライン数LMAX=1125であり、ライン番号Lが0≦L≦1124を満たし、映像受信装置における計測タイムコード算出期間dRTが1フレームである場合を説明する。 Referring to FIGS. 11 to 13, the number of lines constituting one frame of the image is L MAX = 1125, the line number L satisfies 0 ≦ L ≦ 1124, and the measurement time code calculation period dRT in the video reception device is one frame. A case will be described.
切替タイミング制御に必要な情報は、送信中の映像送信装置Aと切替先の映像送信装置Bから送られるタイムコードの差分である。従って、この差分の値が映像ライン数の精度で計測されることで、正確な切替タイミングの算出が可能となる。例えば映像送信装置A又はBから送信されるタイムコードの精度が映像1フレーム単位であっても、映像受信装置でタイムコードパケットを受信した時間を正確に記録し、その受信時間の差分を利用することで、映像1フレーム未満の精度で差分を計測することが可能になる。 Information necessary for the switching timing control is a difference between time codes transmitted from the transmitting video transmitting apparatus A and the switching destination video transmitting apparatus B. Therefore, the value of this difference is measured with the accuracy of the number of video lines, so that accurate switching timing can be calculated. For example, even when the accuracy of the time code transmitted from the video transmission device A or B is one frame of video, the time when the video reception device receives the time code packet is accurately recorded, and the difference in the reception time is used. Thus, the difference can be measured with an accuracy of less than one frame of video.
映像受信装置におけるシステムプロセスの特性として、映像ストリームの受信ルーチンではストリームのパケットを1つ受け取るごとに、パケットヘッダの解釈と、受信バッファ中の適切なメモリ位置へのデータコピーを行っている。ここで、受信したパケットがどの映像フレームのどの映像ラインのデータであるかという判定も行っていることに着目し、ストリーム受信ルーチン中にタイムコードパケットを受信し、更にタイムコードパケットを受信した時の映像ストリームの映像ラインカウンタの値を記録する。各映像送信装置から送信されるタイムコードの精度が映像1フレーム単位である場合、映像受信装置において1フレームに1回ずつ各サーバからタイムコードパケットを受信すればよい。このタイムコードパケットの受信処理に、受信時の映像ラインカウンタの値を記録する処理を追加するだけでよいため、処理負荷を抑え、且つ映像ライン数の精度でタイムコードを測定し、それらの差分を算出することが可能である。 As a characteristic of the system process in the video reception apparatus, every time one stream packet is received, the video stream reception routine interprets the packet header and copies the data to an appropriate memory location in the reception buffer. Here, focusing on the fact that the received packet is the data of which video line of which video frame, the time code packet is received during the stream reception routine, and when the time code packet is further received The value of the video line counter of the video stream is recorded. When the accuracy of the time code transmitted from each video transmission device is in units of one frame of video, the video reception device may receive the time code packet from each server once per frame. Since it is only necessary to add processing to record the value of the video line counter at the time of reception to this time code packet reception processing, the processing load is reduced and the time code is measured with the accuracy of the number of video lines, and the difference between them is measured. Can be calculated.
図11は、映像送信装置Aにおける送信ストリームAのタイムコードと値がTAのタイムコードパケットの関係を示す。図11は、送信バッファ量が1フレーム+1025ラインである場合を示す。図11から、タイムコードが101.100のストリームAが送信されるときに、タイムコードTAが103.0のタイムコードパケットが送出されることが分かる。 11, the time code and the value of the transmission stream A in the video transmission apparatus A showing the relation between the time code packets T A. FIG. 11 shows a case where the transmission buffer amount is 1 frame + 1025 lines. From Figure 11, when the stream A timecode 101.100 is transmitted, the time code T A is seen that the time code packets 103.0 is delivered.
図12は、映像受信装置におけるライン数の精度のタイムコードを測定する例を示す。映像受信装置内部タイムコードは、映像受信装置が内部に保持するフレーム番号である映像受信装置内部フレーム番号と、映像受信装置が内部に保持するライン番号である映像受信装置内部ライン番号を含む。映像受信装置内部タイムコードは受信中のストリームAのタイムコードと等価である。タイムコードパケットの値TAは映像送信装置AにおけるHD−SDI入力に準じた値であり、ストリームAのタイムコードの値に映像送信装置A内部の送信バッファ量を加算した値となる。 FIG. 12 shows an example of measuring the time code with the accuracy of the number of lines in the video receiver. The video receiver internal time code includes a video receiver internal frame number that is a frame number held in the video receiver and a video receiver internal line number that is a line number held in the video receiver. The video receiver internal time code is equivalent to the time code of the stream A being received. The value T A timecode packet is a value conforming to HD-SDI input in the video transmitting apparatus A, a value obtained by adding the transmission buffer amount of the internal video transmission device A to the value of the time code of the stream A.
図12では、値TAが103.0であるタイムコードパケットを映像受信装置内部タイムコードが101.100の時に受信し、値TBが86.0であるタイムコードパケットを映像受信装置内部タイムコードが101.950の時に受信している。従って、
TA=103.0、RTA=101.100
TB=86.0、RTB=101.950
である。映像受信装置内部タイムコードが102.0の時、計測タイムコードOTA、OTBは上述の数値を用い次の通り算出される:
OTA=TA+(RT(n)−RTA)
=103.0+(102.0−101.100)
=103.1025
OTB=TB+(RT(n)−RTB)
=86.0+(102.0−101.950)
=86.175
すなわち、計測タイムコードOTA、OTBは、TAに算出タイミングに対する受信タイミングからの差分である1025ラインを加算し、TBに算出タイミングに対する受信タイミングからの差分である175ラインを加算することにより得られる。映像送信装置の数が3以上の場合でも、同様の方法で全ての計測タイムコードを求めることができる。図9、10を参照して記載された[第2の実施の形態]の場合には、求められた計測タイムコードドOTA、OTBを制御装置500に通知する。
In Figure 12, the value T A is received when the time code packet video receiver internal time code of 101.100 is 103.0, the value T B is the time code packet video receiving device internal time is 86.0 It is received when the code is 101.950. Therefore,
T A = 103.0, RT A = 101.100
T B = 86.0, RT B = 101.950
It is. When the video receiver internal time code is 102.0, the measurement time codes OT A and OT B are calculated as follows using the above-mentioned numerical values:
OT A = T A + (RT (n) -RT A)
= 103.0+ (102.0-101.100)
= 103.1025
OT B = T B + (RT (n) −RT B )
= 86.0 + (102.0-101.950)
= 86.175
That is, the measurement time code OT A, OT B shall be added to 1025 lines which is a difference from the receiving timing for calculating timing T A, adds the 175-line, which is the difference from the reception timing for calculating timing T B Is obtained. Even when the number of video transmission devices is three or more, all measurement time codes can be obtained by the same method. In the case of [Second Embodiment] described with reference to FIGS. 9 and 10, the obtained measurement time-coded OT A and OT B are notified to the
図13は、映像受信装置が映像1フレーム期間内にタイムコードパケットを複数回受信した場合又は受信しなかった場合の処理を示す。映像受信装置内部フレーム番号が101の時にタイムコードパケットTAを2回受信している。複数回受信した場合には、最後に受信したタイムコードパケットの値を用いて計測タイムコードOTAを算出する。映像受信装置内部ライン番号が1015の時の2回目に受信したタイムコードパケットTAを用いると、計測タイムコードOTA=104.110を得る。また、映像受信装置内部フレーム番号が102の時にタイムコードパケットTBを受信していない。タイムコードパケットを受信しなかった場合には、1つ前のフレームで求められた計測タイムコードにdRT=1フレームを加算する。つまりOTB=86.175+1.0=87.175を得る。更に、連続してタイムコードパケットを受信しなかった場合には、映像送信装置Bは停止したと見なされ、計測タイムコードOTBの算出を止めても良い。
FIG. 13 shows a process when the video receiving apparatus receives or does not receive a time code packet a plurality of times within one video frame period. Video receiver internal frame number is received twice timecode packet T A at 101. When receiving a plurality of times, the measurement time code OT A is calculated using the value of the last received time code packet. With timecode packet T A received the second time when the video receiver
なお、映像送信装置からのタイムコードパケットの送信間隔が1フレームである場合には、タイムコードパケット中のライン番号情報を省略し、ライン番号は常に一定の値であると見なしてもよい。また、タイムコードパケットの送信間隔及び映像受信装置の計測タイムコードの算出間隔(dRT)を小さくすることにより、更に精度の高いタイムコード計測を実現できる。 When the transmission interval of the time code packet from the video transmission apparatus is one frame, the line number information in the time code packet may be omitted and the line number may be always regarded as a constant value. Further, by reducing the time code packet transmission interval and the measurement time code calculation interval (dRT) of the video receiver, it is possible to realize more accurate time code measurement.
なお、上記の映像送信装置及び映像受信装置の機能をプログラムとして構築し、これらの装置として利用されるコンピュータにインストールして実行させる、または、ネットワークを介して流通させることが可能である。 Note that the functions of the video transmission device and the video reception device described above can be constructed as a program, installed in a computer used as these devices and executed, or distributed via a network.
また、構築されたプログラムをハードディスクや、フレキシブルディスク・CD−ROM等の可搬記憶媒体に格納し、コンピュータにインストールする、または、配布することが可能である。 Further, the constructed program can be stored in a portable storage medium such as a hard disk, a flexible disk, or a CD-ROM, and can be installed or distributed in a computer.
なお、本発明は、上記の実施の形態に限定されることなく、特許請求の範囲内において種々変更・応用が可能である。 The present invention is not limited to the above-described embodiment, and various modifications and applications can be made within the scope of the claims.
上述のように、本発明によると、タイムコード計測手段において、映像受信手段における映像ストリーム受信処理と並行して映像送信装置からのタイムコードを受信し、当該タイムコードと、当該タイムコードを受信した時の映像受信装置内部でカウントされたタイムコードとに基づき、計測タイムコードを算出することができる。これにより、タイムコードの時間的粒度を映像ライン単位まで短縮することが可能となり、結果として映像切替時間を短縮することができる。 As described above, according to the present invention, the time code measuring means receives the time code from the video transmitting apparatus in parallel with the video stream receiving process in the video receiving means, and receives the time code and the time code. The measurement time code can be calculated based on the time code counted inside the video receiver at the time. Thereby, the time granularity of the time code can be shortened to the video line unit, and as a result, the video switching time can be shortened.
本発明は、映像を中継・伝送する映像送受信システムに適用可能である。 The present invention is applicable to a video transmission / reception system that relays and transmits video.
100 映像送信装置
110 映像入力手段、映像入力部
120 映像送信手段、映像送信部
130 タイムコード生成手段、タイムコード生成部
140 タイムコード送信手段、タイムコード送信部
150 映像送信停止手段、映像送信停止部
160 映像送信開始手段、映像送信開始部
300 映像受信装置
310 映像受信手段、映像受信部
320 映像出力手段、映像出力部
330 タイムコード計測手段、タイムコード計測部
340 映像送信停止タイムコード生成手段、映像送信停止タイムコード生成部
350 映像送信開始タイムコード生成手段、映像送信開始タイムコード生成部
400 映像受信装置
410 映像受信部
420 映像出力部
430 タイムコード計測部
440 計測タイムコード送信部
500 制御装置
510 映像送信停止タイムコード生成部
520 映像送信開始タイムコード生成部
DESCRIPTION OF
Claims (10)
前記映像送信装置は、
映像入力手段と、
映像信号を前記映像受信装置に送信する映像送信手段と、
タイムコードTを生成するタイムコード生成手段と、
前記タイムコードTを前記映像受信装置に送信するタイムコード送信手段と、
映像送信停止タイムコードETを受信し、T=ETとなったときに映像送信を停止する映像送信停止手段、または、映像送信開始タイムコードSTを受信し、T=STとなったときに映像送信を開始する映像送信開始手段と、
を備え、
前記映像受信装置は、
前記映像送信装置より伝送経路を介して前記映像信号を受信する映像受信手段と、
映像出力手段と、
前記映像信号の受信に応じて前記映像受信装置の内部で映像ライン単位の内部タイムコードをカウントし始め、前記タイムコードTを受信し、前記タイムコードTと前記タイムコードTを受信した時の前記内部タイムコードとに基づき計測タイムコードを求めるタイムコード計測手段と、
映像切替元の映像送信装置に対し、前記映像送信停止タイムコードETを生成して送信する映像送信停止タイムコード生成手段と、
映像切替先の映像送信装置に対し、前記計測タイムコードと前記映像送信停止タイムコードETを用いて前記映像送信開始タイムコードSTを生成して送信する映像送信開始タイムコード生成手段と、
を備え、前記複数の映像送信装置からの受信映像の切替を行う、映像送受信システム。 A video transmission / reception system in which a video reception device switches received video from one video transmission device to another video transmission device among a plurality of video transmission devices,
The video transmission device includes:
Video input means;
Video transmission means for transmitting a video signal to the video receiver;
Time code generation means for generating a time code T;
Time code transmitting means for transmitting the time code T to the video receiver;
Video transmission stop means for receiving video transmission stop time code ET and stopping video transmission when T = ET or video transmission start time code ST is received, and video transmission is performed when T = ST Video transmission start means for starting
With
The video receiver is
Video receiving means for receiving the video signal from the video transmitting device via a transmission path;
Video output means;
In response to the reception of the video signal, the video reception device starts counting the internal time code in units of video lines, receives the time code T, and receives the time code T and the time code T when the time code T is received. A time code measuring means for obtaining a measurement time code based on the internal time code;
To movies image switching source of the video transmission apparatus, a video transmission stop time code generating means for generating and transmitting said video transmission stop time code ET,
To movies image switching destination of the video transmission apparatus, a video transmission start time code generating means for generating and transmitting said video transmission start time code ST using the the measuring time code the video transmission stop time code ET,
A video transmission / reception system that switches received video from the plurality of video transmission devices.
前記映像受信装置は、
映像信号の受信に応じて前記映像受信装置の内部で映像ライン単位の内部タイムコードをカウントし始め、前記タイムコードTを受信し、前記タイムコードTと前記タイムコードTを受信した時の前記内部タイムコードとに基づき前記計測タイムコードを求めるタイムコード計測手段、を備え、
前記制御装置は、
映像切替元の映像送信装置に対し、映像送信停止タイムコードETを生成して送信する映像送信停止タイムコード生成手段と、
映像切替先の映像送信装置に対し、前記計測タイムコードと前記映像送信停止タイムコードETを用いて映像送信開始タイムコードSTを生成して送信する映像送信開始タイムコード生成手段と、を備える、ことを特徴とする映像送受信システム。 A video transmission / reception system that switches a received video from one video transmission device to another video transmission device among a plurality of video transmission devices by transmitting a measurement time code to the control device from the video reception device,
The video receiver is
Inside the video reception device in response to receiving the movies image signal starts counting the internal time code of the video line unit receives the time code T, the at the time of receiving the time code T to the time code T time code measuring means for determining the measurement time code based on the internal time code, includes a,
The controller is
To movies image switching source of the video transmission apparatus, a video transmission stop time code generating means for generating and transmitting video transmission stop time code ET,
Video transmission start time code generation means for generating and transmitting a video transmission start time code ST using the measurement time code and the video transmission stop time code ET to the video transmission device of the video switching destination, Video transmission / reception system characterized by this.
前記映像送信停止タイムコードETに、前記映像受信装置から送信された映像切替先の計測タイムコードと、該映像受信装置から送信された映像切替元の計測タイムコードの差分を加算することで、前記映像送信開始タイムコードSTを生成する手段を含む、
請求項2記載の映像送受信システム。 The video transmission start time code generation means of the control device,
Wherein the video transmission stop time code ET, the measured time code of the video switching destination transmitted from the video receiving apparatus, by adding the difference between the measured time code Film image switching source transmitted from the video receiving device, Means for generating the video transmission start time code ST;
The video transmission / reception system according to claim 2.
請求項1または2記載の映像送受信システム。 Of the plurality of video transmission devices, only two video transmission devices of a video switching source and a switching destination transmit the time code T to the video reception device.
The video transmission / reception system according to claim 1 or 2.
映像の切替元と切替先の映像送信装置との遅延時間を計測する手段を備え、
前記映像送信停止タイムコード生成手段は、
ユーザからの映像切替要求を受けた時点で計測された、切替元の映像送信装置からのタイムコードTと、前記遅延時間のうち長い方の値を加算した値を、前記映像送信停止タイムコードETとする手段を含む、
請求項1または2記載の映像送受信システム。 The video receiver is
Means for measuring the delay time between the video switching source and the switching destination video transmission device,
The video transmission stop time code generating means includes
A value obtained by adding the time code T from the switching source video transmission apparatus and the longer one of the delay times, measured at the time of receiving the video switching request from the user, is the video transmission stop time code ET. Including means to
The video transmission / reception system according to claim 1 or 2.
映像の切替先と切替元の映像送信装置の計測タイムコードの差分の計測を複数回行う手段を含み、
前記映像送信開始タイムコード生成手段は、
前記映像送信開始タイムコードETにその平均値を加算して映像送信開始タイムコードSTを生成する手段を含む
請求項1、2、3、5のいずれか1項記載の映像送受信システム。 The video receiver is
Including means for measuring a difference between measurement time codes of a video switching destination and a switching source video transmission device a plurality of times,
The video transmission start time code generating means is
6. The video transmission / reception system according to claim 1, further comprising means for adding the average value to the video transmission start time code ET to generate a video transmission start time code ST.
パケット伝送ネットワークを介してパケット送受信を行う、
請求項1記載の映像送受信システム。 The video transmission means, the time code transmission means, the video reception means, the time code measurement means, the video transmission stop time code generation means, the video transmission start time code generation means,
Send and receive packets via a packet transmission network,
The video transmission / reception system according to claim 1.
パケット伝送ネットワークを介してパケット送受信を行う、
請求項2記載の映像送受信システム。 The measurement time code transmission means, the video transmission stop time code generation means, the video transmission start time code generation means,
Send and receive packets via a packet transmission network,
The video transmission / reception system according to claim 2.
各映像送信装置において、
タイムコードを生成するステップと、
映像送信の有無にかかわらず映像伝送経路を介して映像受信装置にタイムコードを送信するステップと、を備え、
前記映像受信装置において、
前記映像送信装置より伝送経路を介して映像信号を受信するステップと、
前記映像信号の受信に応じて前記映像受信装置の内部で映像ライン単位の内部タイムコードをカウントし始め、前記タイムコードTを受信し、前記タイムコードTと前記タイムコードTを受信した時の前記内部タイムコードとに基づき計測タイムコードを求めるステップと、
映像切替元の映像送信装置に対し、前記映像送信停止タイムコードETを生成して送信するステップと、
映像切替先の映像送信装置に対し、前記計測タイムコードと前記映像送信停止タイムコードETを用いて前記映像送信開始タイムコードSTを生成して送信するステップと、を備える
映像切替方法。 A video switching method in which a video receiving device switches received video from one video transmitting device to another video transmitting device among a plurality of video transmitting devices,
In each video transmission device,
Generating a time code;
A step of transmitting a time code to a video receiver via a video transmission path regardless of whether or not video is transmitted;
In the video receiver,
Receiving a movies image signal via a transmission path from the video transmission device,
In response to the reception of the video signal, the video reception device starts counting the internal time code in units of video lines, receives the time code T, and receives the time code T and the time code T when the time code T is received. Obtaining a measurement time code based on the internal time code;
To movies image switching source of the video transmission device, the steps of generating and transmitting said video transmission stop time code ET,
A video switching method comprising: generating and transmitting the video transmission start time code ST using the measurement time code and the video transmission stop time code ET to a video transmission device as a video switching destination.
前記映像受信装置において、
映像信号の受信に応じて前記映像受信装置の内部で映像ライン単位の内部タイムコードをカウントし始め、前記タイムコードTを受信し、前記タイムコードTと前記タイムコードTを受信した時の前記内部タイムコードとに基づき前記計測タイムコードを求めるステップ、を備え、
前記制御装置において、
映像切替元の映像送信装置に対し、映像送信停止タイムコードETを生成して送信する映像送信停止タイムコード生成手段と、
映像切替先の映像送信装置に対し、前記計測タイムコードと前記映像送信停止タイムコードETを用いて映像送信開始タイムコードSTを生成して送信するステップと、を備える、
映像切替方法。 A video switching method for switching received video from one video transmission device to another video transmission device among a plurality of video transmission devices by transmitting a measurement time code to the control device from the video reception device,
In the video receiver,
Inside the video reception device in response to receiving the movies image signal starts counting the internal time code of the video line unit receives the time code T, the at the time of receiving the time code T to the time code T determining the measurement time code based on the internal time code, includes a,
In the control device,
To movies image switching source of the video transmission apparatus, a video transmission stop time code generating means for generating and transmitting video transmission stop time code ET,
To movies image switching destination of the video transmission apparatus, and a step of generating and transmitting a video transmission start time code ST using the measurement time code and the video transmission stop time code ET,
Video switching method.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008169231A JP5068224B2 (en) | 2008-06-27 | 2008-06-27 | Video transmission / reception system and control method thereof |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008169231A JP5068224B2 (en) | 2008-06-27 | 2008-06-27 | Video transmission / reception system and control method thereof |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2010011197A JP2010011197A (en) | 2010-01-14 |
JP5068224B2 true JP5068224B2 (en) | 2012-11-07 |
Family
ID=41591128
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2008169231A Expired - Fee Related JP5068224B2 (en) | 2008-06-27 | 2008-06-27 | Video transmission / reception system and control method thereof |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5068224B2 (en) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5806980B2 (en) * | 2012-06-25 | 2015-11-10 | 日本電信電話株式会社 | Video encoding delay measuring apparatus and video decoding delay measuring apparatus and method |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH11284979A (en) * | 1999-02-15 | 1999-10-15 | Matsushita Electric Ind Co Ltd | Video transmitter |
JP2004254149A (en) * | 2003-02-21 | 2004-09-09 | Nippon Telegr & Teleph Corp <Ntt> | Data transmission control method and system |
JP4028818B2 (en) * | 2003-05-26 | 2007-12-26 | 財団法人エヌエイチケイエンジニアリングサービス | Stream switching device, stream switching method, stream switching program, and display time correction device |
JP2005348084A (en) * | 2004-06-03 | 2005-12-15 | Hitachi Ltd | Stream transmitter, stream receiver, stream transceiver device, and network system control method |
JP2008118237A (en) * | 2006-11-01 | 2008-05-22 | Canon Inc | Video image editing device |
-
2008
- 2008-06-27 JP JP2008169231A patent/JP5068224B2/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2010011197A (en) | 2010-01-14 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4838273B2 (en) | Adaptive media playback method and apparatus for intra-media synchronization | |
EP2299636B1 (en) | Streaming communication device, streaming communication method, and streaming communication system | |
JP4936542B2 (en) | COMMUNICATION CONTROL DEVICE, COMMUNICATION CONTROL METHOD, AND COMPUTER PROGRAM | |
US8434119B2 (en) | Communication apparatus and communication method | |
KR20210094078A (en) | Method and apparatus for synchronously switching between an audio stream and a video stream | |
JP5068224B2 (en) | Video transmission / reception system and control method thereof | |
JP5186094B2 (en) | Communication terminal, multimedia playback control method, and program | |
JP4541381B2 (en) | Video transmission / reception system and video switching method | |
JP4630357B2 (en) | Video transmission / reception system and control method thereof | |
JP5740418B2 (en) | Synchronous video playback system | |
JP2002208953A (en) | Communication system | |
JP4425115B2 (en) | Clock synchronization apparatus and program | |
US10834166B2 (en) | Transmission apparatus that is capable of maintaining transmission quality in switching transmission path, reception apparatus, transmission and reception system, method of controlling transmission apparatus and reception apparatus, and storage medium | |
JP2019211638A (en) | Processing device, output device, synchronization control system, and these control methods, as well as programs | |
JP2011061802A (en) | Packet communication system, packet communication method, transmission apparatus and computer program | |
JP5506362B2 (en) | Transmission device and transmission method | |
WO2014073293A1 (en) | Communication apparatus, communication system, synchronization method, and program | |
JP2003163691A (en) | Data communication system, data transmitter, data receiver, method therefor and computer program | |
JP7053525B2 (en) | Buffering processing device, communication system, buffering processing method, and program | |
JP6484403B2 (en) | Communication device, communication program, and communication method | |
KR20180051801A (en) | Method of transmitting moving-image data | |
JP2012160798A (en) | Image receiver | |
JP5522987B2 (en) | Transmission device, transmission method, and computer program | |
JP2010136159A (en) | Data receiver | |
JP4274988B2 (en) | Data transmission device |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20100817 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20120612 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20120719 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20120807 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20120814 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20150824 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
LAPS | Cancellation because of no payment of annual fees |