JP4024794B2 - Video decoding apparatus and program - Google Patents

Video decoding apparatus and program Download PDF

Info

Publication number
JP4024794B2
JP4024794B2 JP2004378643A JP2004378643A JP4024794B2 JP 4024794 B2 JP4024794 B2 JP 4024794B2 JP 2004378643 A JP2004378643 A JP 2004378643A JP 2004378643 A JP2004378643 A JP 2004378643A JP 4024794 B2 JP4024794 B2 JP 4024794B2
Authority
JP
Japan
Prior art keywords
video
decoding
switching
switching timing
encoding
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2004378643A
Other languages
Japanese (ja)
Other versions
JP2006186708A (en
Inventor
拓郎 神谷
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hitachi Kokusai Electric Inc
Original Assignee
Hitachi Kokusai Electric Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hitachi Kokusai Electric Inc filed Critical Hitachi Kokusai Electric Inc
Priority to JP2004378643A priority Critical patent/JP4024794B2/en
Publication of JP2006186708A publication Critical patent/JP2006186708A/en
Application granted granted Critical
Publication of JP4024794B2 publication Critical patent/JP4024794B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Landscapes

  • Closed-Circuit Television Systems (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Description

本発明は、復号化対象となる映像の復号化を行う映像復号化装置及びプログラムに関し、特に、復号化対象となる映像の切り換えを効果的に行う映像復号化装置及びプログラムに関する。   The present invention relates to a video decoding apparatus and program for decoding video to be decoded, and more particularly to a video decoding apparatus and program for effectively switching video to be decoded.

従来、例えば河川の水位、道路の混雑状況、あるいは防犯・防災等を監視する目的で監視カメラを設置し、この監視カメラで撮影した映像を伝送回線(ネットワーク)により送信装置から受信装置に伝送して遠隔監視するネットワーク型の遠隔監視システムが用いられている(例えば、特許文献1参照。)。このようなシステムを用いれば、現場に監視員を常駐又は派遣しなくても、道路における事故や渋滞の状況、河川の増水や氾濫等の状況を、受信装置側において集中的に迅速かつ的確に把握することが可能となる。   Conventionally, for example, a monitoring camera has been installed for the purpose of monitoring river levels, road congestion, crime prevention, disaster prevention, etc., and images taken with this monitoring camera are transmitted from the transmitter to the receiver via a transmission line (network). A network-type remote monitoring system that performs remote monitoring is used (see, for example, Patent Document 1). If such a system is used, the situation of road accidents, traffic jams, river floods, flooding, etc. can be quickly and accurately concentrated on the receiver side, without having to be stationed or dispatched to the site. It becomes possible to grasp.

また、このようなシステムにおいては、例えば、受信装置に接続される表示装置に対して複数の監視カメラからの映像を順次切り換えて表示させる制御が行われる場合がある。
特開2001−36905号公報
In such a system, for example, there is a case where control is performed such that images from a plurality of monitoring cameras are sequentially switched and displayed on a display device connected to the receiving device.
JP 2001-36905 A

ネットワーク型の遠隔監視システムにおいて、複数の監視カメラからの映像の切り換え表示を行う場合、映像の切り換え時に受信装置は、切り換え先の監視カメラの映像の配信を行うWebエンコーダ等の送信装置に対して映像要求のパケットを出力し、その時点で初めて受信装置に切り換え先の映像パケットが伝送されてくる。   In a network-type remote monitoring system, when switching display of images from a plurality of monitoring cameras, the receiving device at the time of switching the images to a transmission device such as a Web encoder that distributes the images of the switching destination monitoring camera A video request packet is output, and the switching destination video packet is transmitted to the receiving apparatus for the first time at that time.

ここで、映像の符号化方式としてJPEG(Joint Photographic Experts Group)を用いる場合、切り換え時から次のJPEG画像を取得するまでの時間は切り換えのタイミングに依存しない。   Here, when JPEG (Joint Photographic Experts Group) is used as a video encoding method, the time from switching to acquisition of the next JPEG image does not depend on the switching timing.

しかし、映像の符号化方式として、例えば、MPEG−4(Moving Picture Experts Group phase 4)を用いる場合、図5Aに示すようにフレームはI−VOPやP−VOPから構成されているため、図5Bに示すように切り換え時に受信装置が一番初めに受け取るフレームがP−VOPの場合、次のI−VOPを受信するまで映像の復号化が行えず、映像を正しく表示できないという問題があった。   However, for example, when MPEG-4 (Moving Picture Experts Group phase 4) is used as a video encoding method, the frame is composed of I-VOP and P-VOP as shown in FIG. When the frame received first by the receiving apparatus at the time of switching is a P-VOP as shown in FIG. 4, there is a problem that the video cannot be decoded until the next I-VOP is received, and the video cannot be displayed correctly.

つまり、映像の切り換えのタイミングによって、直前のI−VOPを逃してしまった場合、最大でI−VOPの周期分だけ、映像が正しく表示されない状態が続いてしまう。なお、ここで、I−VOPとは、イントラ符号化(フレーム間符号化とも言う。)されたピクチャであり、イントラ符号化では、一般に、他のピクチャの情報を使用せずに、それ自身のピクチャのみの情報で符号化が行われる。また、P−VOPは、一般に、過去のピクチャを参照して予測符号化(フレーム間符号化とも言う。)されたものである。なお、過去と将来のピクチャを参照して双方向予測符号化されたB−VOPも考えられるが、ここでは、説明の簡単化のため、B−VOPについては省略する。   That is, if the previous I-VOP is missed due to the video switching timing, a state in which the video is not correctly displayed continues for the maximum I-VOP period. Here, the I-VOP is a picture that has been intra-encoded (also referred to as inter-frame encoding), and in intra-encoding, in general, without using information of other pictures, Encoding is performed using only picture information. P-VOP is generally predictive coded (also referred to as interframe coding) with reference to past pictures. A B-VOP that has been bi-predictively encoded with reference to past and future pictures is also conceivable, but here the B-VOP is omitted for the sake of simplicity.

また、受信装置の制御により映像を順次切り換えて表示装置に表示させる場合に、受信装置が表示対象となっている映像以外の他の映像(その時点においては表示対象となっていない映像)についても常にネットワークを介して送信装置から取得しておく構成とした場合には、ネットワークの伝送帯域の負荷が大きくなったり、映像の復号化処理等、受信装置の処理負荷が大きくなってしまうという問題があった。   In addition, when the video is sequentially switched by the control of the receiving device and displayed on the display device, the video other than the video that is the display target of the receiving device (the video that is not the display target at that time) When the configuration is such that the transmission device is always acquired via the network, there is a problem that the load on the transmission band of the network increases or the processing load on the receiving device such as video decoding processing increases. there were.

本発明は、このような従来の事情に鑑み為されたもので、復号化対象となる映像の切り換えを効果的に行う映像復号化装置及びプログラムを提供することを目的とする。   The present invention has been made in view of such conventional circumstances, and an object of the present invention is to provide a video decoding apparatus and program for effectively switching video to be decoded.

上記目的を達成するため、本発明に係る映像復号化装置は、ネットワークを介して送信装置からフレーム内符号化とフレーム間符号化を用いた映像符号化方式により符号化された映像を受信し、該受信した映像の復号を行うと共に、表示装置に対して出力する映像を所定の時間間隔に基づいて定められる映像切り換えタイミングで異なる映像に切り換える映像復号化装置であって、切り換え先の映像を取得するための指令を前記映像切り換えタイミングよりフレーム内符号化が行われる周期に基づいて定められる所定時間前に前記送信装置に対して送信する映像取得指令送信手段と、前記指令に基づいて前記送信装置から受信した映像の復号を行う映像復号化手段と、前記映像切り換えタイミングになった場合に、前記映像復号化手段により復号された切り換え先の映像データを前記表示装置に対して出力する映像出力手段とを備える。   In order to achieve the above object, a video decoding device according to the present invention receives a video encoded by a video encoding method using intraframe coding and interframe coding from a transmission device via a network, A video decoding device that decodes the received video and switches the video output to the display device to a different video at a video switching timing determined based on a predetermined time interval, and acquires the switching destination video A video acquisition command transmission means for transmitting to the transmission device a predetermined time determined based on a cycle in which intra-frame encoding is performed from the video switching timing, and the transmission device based on the command The video decoding means for decoding the video received from the video, and when the video switching timing comes, the video decoding means The video data issue has been switched destination and an image output means for outputting to the display device.

ここで、フレーム内符号化やフレーム間符号化の手法としては、種々な手法が用いられてもよい。また、所定の時間間隔としては、種々な値が用いられてもよい。また、フレーム内符号化が行われる周期としては、種々な値が用いられてもよい。   Here, various methods may be used as a method of intraframe coding or interframe coding. Various values may be used as the predetermined time interval. Various values may be used as a cycle in which intraframe encoding is performed.

また、上記目的を達成するため、本発明に係るプログラムは、ネットワークを介して送信装置からフレーム内符号化とフレーム間符号化とを用いた映像符号化方式により符号化された映像を受信し、該受信した映像の復号を行うと共に、表示装置に対して出力する映像を所定の時間間隔に基づいて定められる映像切り換えタイミングで異なる映像に切り換える映像復号化装置を構成するコンピュータに実行させるプログラムであって、切り換え先の映像を取得するための指令を前記映像切り換えタイミングよりフレーム内符号化が行われる周期に基づいて定められる所定時間前に前記送信装置に対して送信する機能と、前記指令に基づいて前記送信装置から受信した映像の復号を行う機能と、前記映像切り換えタイミングになった場合に、前記映像復号化手段により復号された切り換え先の映像データを前記表示装置に対して出力する機能を、当該コンピュータにより実現する。   In order to achieve the above object, a program according to the present invention receives a video encoded by a video encoding method using intraframe encoding and interframe encoding from a transmission device via a network, A program for causing a computer constituting the video decoding apparatus to execute decoding of the received video and switch the video output to the display device to a different video at a video switching timing determined based on a predetermined time interval. A function for transmitting a command for acquiring a switching destination video to the transmitting device before a predetermined time determined based on a cycle in which intra-frame encoding is performed from the video switching timing, and based on the command And a function for decoding the video received from the transmitter, and when the video switching timing comes, A function of outputting a video data of the decoded switching destination by the video decoding means to said display device, realized by the computer.

以上説明したように、本発明に係る映像復号化装置及びプログラムによると、切り換え先の映像を取得するための指令を映像切り換えタイミングよりフレーム内符号化が行われる周期に基づいて定められる所定時間前に送信装置に対して送信するようにしたため、復号化対象となる映像の効果的な切り換えを実現することができる。   As described above, according to the video decoding device and the program according to the present invention, a command for acquiring the video to be switched to is transmitted a predetermined time before the video switching timing based on the cycle in which intraframe coding is performed. Therefore, it is possible to realize effective switching of the video to be decoded.

以下、本発明の実施の形態について、図面を参照しながら説明する。
図1には、本発明の一実施例に係る映像配信システムの構成例を示してある。
本実施例の映像配信システムは、カメラ1A、1B(カメラを総称する場合は1で代表するものとする)と、映像符号化装置2A、2B(映像符号化装置を総称する場合は2で代表するものとする)と、ネットワーク3と、映像復号化装置4と、表示装置5からなり、映像符号化装置2A、2Bと、映像復号化装置4とがネットワーク3を介して接続して構成されている。なお、ここでは簡単化のために、1つの映像符号化装置2に対応して1台のカメラ1を接続するものと仮定するが、映像符号化装置2とカメラ台数との組み合わせは任意に選択できる。また、カメラ1と映像符号化装置2の機能が一体化された装置を用いる等、映像配信システムは以上の実施例に限られるものではない。
Hereinafter, embodiments of the present invention will be described with reference to the drawings.
FIG. 1 shows a configuration example of a video distribution system according to an embodiment of the present invention.
The video distribution system of this embodiment is represented by cameras 1A and 1B (represented by 1 when generically referring to cameras) and video encoding devices 2A and 2B (represented by 2 when generically termed video encoding devices). And a network 3, a video decoding device 4, and a display device 5, and the video encoding devices 2 A and 2 B and the video decoding device 4 are connected via the network 3. ing. Here, for the sake of simplicity, it is assumed that one camera 1 is connected corresponding to one video encoding device 2, but the combination of the video encoding device 2 and the number of cameras is arbitrarily selected. it can. In addition, the video distribution system is not limited to the above embodiment, such as using a device in which the functions of the camera 1 and the video encoding device 2 are integrated.

図1に示される映像配信システムにおいて、カメラ1は、撮影した映像のアナログ映像信号を映像符号化装置2に対して出力する。映像符号化装置2は、カメラ1から入力されるアナログ映像信号をデジタル映像の信号へ変換した後、MPEG−4符号化方式を使用してデジタル映像信号の映像の符号化を行い、符号化されたデジタル映像信号をIPパケットとしてネットワーク3へ出力する。   In the video distribution system shown in FIG. 1, the camera 1 outputs an analog video signal of a captured video to the video encoding device 2. The video encoding device 2 converts the analog video signal input from the camera 1 into a digital video signal, and then encodes the video of the digital video signal using the MPEG-4 encoding method. The digital video signal is output to the network 3 as an IP packet.

映像復号化装置4は、ネットワーク3を介して受け取ったデジタル映像信号の復号化を行い、復号化されたデジタル映像信号を表示装置5に対して出力する。表示装置5は、映像復号化装置4から入力された映像を表示画面に表示する。   The video decoding device 4 decodes the digital video signal received via the network 3 and outputs the decoded digital video signal to the display device 5. The display device 5 displays the video input from the video decoding device 4 on the display screen.

ここで、本実施例に係る映像復号化装置4は、映像符号化装置2Aから配信されるカメラ1Aの映像と、映像符号化装置2Bから配信されるカメラ1Bの映像とを予め設定された所定の時間間隔毎に順次切り換えて表示装置5に表示するよう制御する機能を備えている。   Here, the video decoding apparatus 4 according to the present embodiment has a predetermined video and a video of the camera 1A distributed from the video encoding apparatus 2A and a video of the camera 1B distributed from the video encoding apparatus 2B. And a function of controlling the display device 5 to display the images on the display device 5 by switching them at every time interval.

図2には、本発明の一実施例に係る映像復号化装置4の構成例を示してある。
映像復号化装置4は、その内部機能ブロックとして、ネットワークインタフェイス部41と、映像バッファ部42A、42B(映像バッファ部を総称する場合は42で代表するものとする)と、デコード部43A、43B(デコード部を総称する場合は43で代表するものとする)と、タイマー部44と、映像切換部45と、出力部46を備えている。
FIG. 2 shows a configuration example of the video decoding apparatus 4 according to an embodiment of the present invention.
The video decoding device 4 includes, as its internal functional blocks, a network interface unit 41, video buffer units 42A and 42B (when the video buffer unit is generically represented by 42), and decoding units 43A and 43B. (When the decoding unit is generically represented by 43), a timer unit 44, a video switching unit 45, and an output unit 46 are provided.

映像復号化装置4により行われる概略的な動作の一例を示す。
ネットワークインタフェイス部41は、ネットワーク3を経由して受け取ったIPパケットについて、当該IPパケットのヘッダ部と、ペイロード部を分離し、分離したペイロード部を連結して符号化されたデジタル映像信号に戻して、デジタル映像信号を映像バッファ部42に一時的に格納する。なお、ここでは、映像符号化装置2Aから受信したカメラ1Aの映像を映像バッファ部42Aに格納し、映像符号化装置2Bから受信したカメラ1Bの映像を映像バッファ部42Bに格納するものとする。
An example of a schematic operation performed by the video decoding device 4 is shown.
The network interface unit 41 separates the header part and the payload part of the IP packet received via the network 3 and returns the encoded digital video signal by connecting the separated payload part. Thus, the digital video signal is temporarily stored in the video buffer unit 42. Here, the video of the camera 1A received from the video encoding device 2A is stored in the video buffer unit 42A, and the video of the camera 1B received from the video encoding device 2B is stored in the video buffer unit 42B.

また、ネットワークインタフェイス部41は、ネットワーク3を介して映像符号化装置2A、2Bに対して、カメラ1A、1Bの映像要求をIPパケットとして出力する。映像符号化装置2A、2Bは、映像要求に応じてそれぞれカメラ1A、1Bの映像の配信を行う。   Further, the network interface unit 41 outputs the video requests of the cameras 1A and 1B as IP packets to the video encoding devices 2A and 2B via the network 3. The video encoding devices 2A and 2B distribute the videos of the cameras 1A and 1B, respectively, in response to the video request.

デコード部43A、43Bは、それぞれ映像バッファ部42A、42Bに格納されているデジタル映像信号の復号化を行う。
タイマー部44は、時間経過を把握するタイマー機能を備えており、予め設定された所定の時間間隔に基づいて定められる映像切り換えタイミングになった場合には、映像切り換え部45へ制御信号を出力する。例えば、予め切り換えの時間間隔として30秒が設定されていた場合には、タイマー部44は30秒おきに映像切り換え部に制御信号を出力する。また、タイマー部44は、後述するように映像切り換えタイミングの所定時間前(L秒前)になった場合には、ネットワークインタフェイス部41に対して切り換え先の映像を取得するためのリクエスト信号を出力する。また、タイマー部44は、映像切り換えタイミングになった場合には、ネットワークインタフェイス部41に対して切り換えにより不要となる切り換え元の映像の取得を取り止めるためのキャンセル信号を出力する。
The decoding units 43A and 43B decode the digital video signals stored in the video buffer units 42A and 42B, respectively.
The timer unit 44 has a timer function for grasping the passage of time, and outputs a control signal to the video switching unit 45 when a video switching timing determined based on a predetermined time interval set in advance is reached. . For example, when 30 seconds is set as the switching time interval in advance, the timer unit 44 outputs a control signal to the video switching unit every 30 seconds. In addition, the timer unit 44 sends a request signal for acquiring the switching destination video to the network interface unit 41 when a predetermined time (L seconds before) the video switching timing, as will be described later. Output. In addition, when the video switching timing comes, the timer unit 44 outputs a cancel signal for canceling the acquisition of the switching source video that becomes unnecessary by switching to the network interface unit 41.

映像切換部45は、タイマー部44から入力される制御信号に基づいて、出力部46へ入力される映像の入力元を切り換える。本実施例では、映像切換部45は所定の時間間隔毎にデコード部43Aの出力端と、デコード部43Bの出力端とが交互に出力部46の入力端と接続されるように信号経路を切り換える。   The video switching unit 45 switches the input source of the video input to the output unit 46 based on the control signal input from the timer unit 44. In the present embodiment, the video switching unit 45 switches the signal path so that the output end of the decoding unit 43A and the output end of the decoding unit 43B are alternately connected to the input end of the output unit 46 at predetermined time intervals. .

出力部46は、デコード部43から入力されるデジタル映像信号を表示装置5に合わせたフォーマットに変換して表示装置5に対して出力する。
次に、タイマー部44がネットワークインタフェイス部41に対してリクエスト信号を出力するタイミングを規定する所定時間Lについて説明する。この所定時間Lは、映像符号化装置2A、2BでのMPEG−4方式による映像符号化におけるI−VOPの挿入周期、即ち、フレーム内符号化が行われる周期と同じ値に設定する。ここでは、説明の簡単化のために通信による遅延時間を0と仮定し、また、現在、映像復号化装置4は映像符号化装置2Aからの映像のみを受信しており、映像符号化装置2Aから受信したカメラ1Aの映像を表示装置5に対して出力しているものとする。
The output unit 46 converts the digital video signal input from the decoding unit 43 into a format suitable for the display device 5 and outputs the converted signal to the display device 5.
Next, the predetermined time L that defines the timing at which the timer unit 44 outputs a request signal to the network interface unit 41 will be described. The predetermined time L is set to the same value as the I-VOP insertion period in the MPEG-4 video encoding in the video encoding devices 2A and 2B, that is, the period in which intra-frame encoding is performed. Here, for simplification of explanation, it is assumed that the delay time due to communication is 0, and the video decoding device 4 currently receives only the video from the video encoding device 2A, and the video encoding device 2A It is assumed that the video of the camera 1A received from is output to the display device 5.

この場合において、映像復号化装置4は、表示装置5に対して出力する映像をカメラ1Aの映像からカメラ1Bの映像に切り換えるタイミング(映像切り換えタイミング)よりL秒前からは、切り換え先の映像の配信元である映像符号化装置2Bからも映像を受信し、受信した映像の復号を行うようにするため、映像切り換えタイミングまでには必ず映像符号化装置2Bから送信される映像のI−VOPを取得しておくことが可能となる。従って、映像切り換えタイミングのL秒前から映像符号化装置2A、2Bの両方から映像を受信して復号化を行うことにより、映像切り換えタイミングの直後に切り換え先の映像が正しく表示されないという事態を回避することができる。   In this case, the video decoding device 4 starts the switching destination video from L seconds before the timing (video switching timing) at which the video output to the display device 5 is switched from the video of the camera 1A to the video of the camera 1B. In order to receive the video also from the video encoding device 2B that is the distribution source and to decode the received video, the video I-VOP transmitted from the video encoding device 2B is always transmitted by the video switching timing. It becomes possible to obtain it. Therefore, by receiving video from both video encoding devices 2A and 2B and decoding from L seconds before the video switching timing, the situation where the switching destination video is not correctly displayed immediately after the video switching timing is avoided. can do.

なお、一般的にI−VOPが挿入される周期は、例えば、5秒に1回といった形式で予め映像符号化装置2側に設定されており、その値と同じ値を所定時間Lとして映像復号化装置4に設定しておけばよいが、映像符号化装置2におけるI−VOPの挿入周期が変更された場合には、その都度、変更後の設定値を映像復号化装置4に通知する等して、映像復号化装置4における所定時間Lの値を変更するようにすればよい。   In general, the period in which the I-VOP is inserted is set in advance on the video encoding device 2 side in a format such as once every 5 seconds, for example. However, when the I-VOP insertion period in the video encoding device 2 is changed, the changed set value is notified to the video decoding device 4 each time. Thus, the value of the predetermined time L in the video decoding device 4 may be changed.

図3には、本発明の一実施例に係る映像復号化装置4の動作の一例をタイムチャートで示してある。なお、図3においては、横軸が時間経過を表している。
まず、時刻t0では、映像復号化装置4のネットワークインタフェイス部41は、映像符号化装置2Aに対して映像要求Aを行い、カメラ1Aの映像Aを取得している。デコード部43Aでは、取得した映像Aの復号化を行い、映像切換部45の制御により復号化した映像Aが出力部46に入力される。映像復号化装置4では、時刻t1になるまでこの状態が継続される。
FIG. 3 is a time chart showing an example of the operation of the video decoding apparatus 4 according to an embodiment of the present invention. In FIG. 3, the horizontal axis represents the passage of time.
First, at time t0, the network interface unit 41 of the video decoding device 4 makes a video request A to the video encoding device 2A and acquires the video A of the camera 1A. In the decoding unit 43 </ b> A, the acquired video A is decoded, and the video A decoded under the control of the video switching unit 45 is input to the output unit 46. In the video decoding device 4, this state is continued until time t1.

次に、映像切り換えタイミングである時刻t2のL秒前である時刻t1になった場合には、タイマー部44からのリクエスト信号に基づいてネットワークインタフェイス部41は、映像符号化装置2Bに対して映像要求Bを行い、カメラ1Bの映像Bを取得する。この際、映像符号化装置2Aに対する映像要求Aは引き続き行われ、カメラ1Aの映像Aも取得する。そのため、時刻t1からは、デコード部43Aにおいて映像Aの復号化が行われ、デコード部43Bにおいて映像Bの復号化が行われる。なお、時刻t1から映像復号化装置4は映像Aと映像Bの2つの映像の復号化を行うが、映像切り換えタイミングである時刻t2になるまでは出力部46に入力される映像はデコード部43Aからの映像Aのままである。   Next, when the time t1, which is L seconds before the time t2, which is the video switching timing, is reached, the network interface unit 41 sends the request to the video encoding device 2B based on the request signal from the timer unit 44. A video request B is made and the video B of the camera 1B is acquired. At this time, the video request A to the video encoding device 2A is continued and the video A of the camera 1A is also acquired. Therefore, from time t1, the video A is decoded by the decoding unit 43A, and the video B is decoded by the decoding unit 43B. Note that the video decoding device 4 decodes two videos, video A and video B, from time t1, but the video input to the output unit 46 is decoded 43A until time t2, which is the video switching timing. Video A from

次に、映像切り換えタイミングである時刻t2になった場合には、ネットワークインタフェイス部41は、タイマー部44からのキャンセル信号に基づいて映像符号化装置2Aに対する映像要求Aを終了し、映像符号化装置2Bに対する映像要求Bのみが継続する。この際、映像復号化装置4における復号化処理は、デコード部43Bで行われる映像Bに対するもののみとなる。そして、時刻t2では、タイマー部44からの制御信号に基づいて映像切換部45は、出力部46への入力映像をそれまでの映像Aからデコード部43Bからの最新の映像Bに切り換える。以後、映像復号化装置4では、次の映像切り換えタイミングである時刻t4のL秒前である時刻t3になるまでこの状態が継続される。   Next, when the time t2, which is the video switching timing, is reached, the network interface unit 41 ends the video request A to the video encoding device 2A based on the cancel signal from the timer unit 44, and video encoding is performed. Only video request B for device 2B continues. At this time, the decoding process in the video decoding device 4 is only for the video B performed by the decoding unit 43B. At time t2, the video switching unit 45 switches the video input to the output unit 46 from the video A so far to the latest video B from the decoding unit 43B based on the control signal from the timer unit 44. Thereafter, the video decoding device 4 continues this state until time t3, which is L seconds before time t4, which is the next video switching timing.

以後、同様に、映像切り換えタイミングである時刻t4のL秒前である時刻t3になった場合には、映像復号化装置4は、再び映像符号化装置2A及び映像符号化装置2Bの両方に対して映像要求を行い両方の映像を取得し、映像切り換えタイミングである時刻t4になった場合には、出力部46に入力する映像をデコード部43Aからの映像Aに切り換え、切り換えにより不要となる映像符号化装置2Bに対する映像要求Bを終了する。   Thereafter, similarly, when the time t3 which is L seconds before the time t4 which is the video switching timing is reached, the video decoding device 4 again applies to both the video coding device 2A and the video coding device 2B. When the video request is made and both videos are acquired and the time t4 which is the video switching timing is reached, the video input to the output unit 46 is switched to the video A from the decoding unit 43A, and the video which becomes unnecessary by switching. The video request B for the encoding device 2B is terminated.

従って、本実施例の映像配信システムでは、ネットワークの伝送帯域の負荷を抑えることや、映像復号化装置の処理負荷を抑えることを実現することができ、効率のよい映像切り換え処理を実現することができる。   Therefore, in the video distribution system according to the present embodiment, it is possible to reduce the load on the transmission band of the network and the processing load on the video decoding apparatus, and to realize an efficient video switching process. it can.

次に、本発明の他の実施例について説明する。上述した実施例では、通信による遅延時間を0と仮定したが、ここでは遅延時間をd(秒)と仮定し、遅延時間dを考慮した映像配信システムを考える。この場合、映像復号化装置4は映像を切り換えるタイミングよりL+d(秒)前に映像符号化装置2に対して切り換え先の映像を要求するようにすれば、通信による遅延時間がある場合においても映像切り換えタイミングまでには必ず切り換え先の映像のI−VOPを取得しておくことが可能となる。なお、ここで、遅延時間とは、例えば、映像復号化装置4が映像符号化装置2に対して映像要求パケットを送り出してから、初めの映像データのIPパケットを受け取るまでの時間のことを言う。   Next, another embodiment of the present invention will be described. In the above-described embodiment, the delay time due to communication is assumed to be 0, but here, the delay time is assumed to be d (seconds), and a video distribution system considering the delay time d is considered. In this case, if the video decoding device 4 requests the video encoding device 2 for the video to be switched before L + d (seconds) before the video switching timing, the video decoding device 4 can perform video even when there is a delay time due to communication. It is possible to acquire the I-VOP of the switching destination video before the switching timing. Here, the delay time means, for example, the time from when the video decoding device 4 sends a video request packet to the video encoding device 2 until it receives the first IP data IP packet. .

この遅延時間dを考慮したシステムとしては、以下の実現方法が考えられる。
(1)ネットワーク3がローカルな環境を用いて構成されており、遅延時間が無視できるほど小さいと考えられる場合;
この場合は、dは考慮しなくてもよい。
As a system that takes this delay time d into consideration, the following realization method can be considered.
(1) When the network 3 is configured using a local environment and the delay time is considered to be negligibly small;
In this case, d need not be considered.

(2)ネットワーク3が公衆回線を用いて構成されており、遅延時間dは無視できるほど小さくはなく、かつ公衆回線の混雑状況はダイナミックに変化するため、遅延時間もダイナミックに変化する場合;
この場合は、映像復号化装置4が映像符号化装置2に対して映像要求パケットを送り出してから、映像を受け取るまでの遅延時間をログとして映像復号化装置4の記憶部(不図示)に記憶しておく。そして、このログを参照し、例えば、最近のx件のログの中から1番長い遅延時間を遅延時間dとして設定する。
(2) When the network 3 is configured using a public line, the delay time d is not so small as to be negligible, and the congestion state of the public line changes dynamically, so that the delay time also changes dynamically;
In this case, a delay time from when the video decoding device 4 sends a video request packet to the video encoding device 2 until it receives the video is stored in a storage unit (not shown) of the video decoding device 4 as a log. Keep it. Then, referring to this log, for example, the longest delay time among the latest x logs is set as the delay time d.

この時、図4Aに示すように、xを大きくすれば、蓄積されるログも多くなり、その中で一番長い遅延時間をdとして設定することになるので、結果的に遅延時間dは大きくなり、図3に示したように、映像符号化装置2Aと映像符号化装置2Bの両方からの映像を同時にデコードしている時間は長くなる。このような設定では、映像切り換えタイミングまでに切り換え先の映像のI−VOPを逃す確率が低くなる反面、映像切り換えタイミングの直前にはネットワーク3が混雑し、映像復号化装置4の処理負荷も大きくなる。従って、この設定方法は、遅延時間がほぼ一定である場合に有効である。   At this time, as shown in FIG. 4A, if x is increased, more logs are accumulated, and the longest delay time is set as d. As a result, the delay time d is increased. Therefore, as shown in FIG. 3, the time for simultaneously decoding the video from both the video encoding device 2A and the video encoding device 2B becomes longer. In such a setting, the probability of missing the I-VOP of the switching destination video by the video switching timing is low, but the network 3 is congested immediately before the video switching timing, and the processing load on the video decoding device 4 is also large. Become. Therefore, this setting method is effective when the delay time is almost constant.

なお、図4Bに示すように、xが小さければ、蓄積されたログは少なくなるので、図4Aに示す場合と比べれば、遅延時間dは小さくなる。そのため、図4Aに示す場合より、ネットワーク3の混雑や映像復号化装置4に対する負荷が減り、また、dが周期的に変化する場合には比較的最近のログだけでdを決定することができるという効果がある。なお、遅延時間dを考慮することや、xとしてどのような値を用いるか等は、ネットワークの環境を考慮し、最適なものを設定することが可能である。   As shown in FIG. 4B, if x is small, the accumulated logs are small, so that the delay time d is small compared to the case shown in FIG. 4A. Therefore, compared to the case shown in FIG. 4A, the congestion on the network 3 and the load on the video decoding device 4 are reduced, and when d changes periodically, d can be determined only by relatively recent logs. There is an effect. Note that it is possible to set an optimum value considering the delay time d and what value is used as x in consideration of the network environment.

ここで、本実施例では、MPEG−4に適用した場合を示したが、これに限らず、MPEG−2等のように、他の映像符号化方式にも適用することが可能であり、また、映像(画像)に限らず、音声等にも適用することも可能である。   Here, in the present embodiment, a case where the present invention is applied to MPEG-4 has been shown. However, the present invention is not limited to this, and can be applied to other video encoding schemes such as MPEG-2. The present invention can be applied not only to video (image) but also to audio.

また、本実施例では、2台のカメラを用いた映像配信システムについて示したが、カメラ等の台数は種々な値が用いられてもよい。また、本実施例では、カメラの映像を1種類ずつ順次切り換えていく場合を示したが、例えば、4台のカメラの映像を同時に表示する4分割表示を順次切り換えていくような構成を用いてもよい。また、映像を切り換える時間間隔についてもすべて同じ値を用いる他、例えば、カメラ1Aの映像からカメラ1Bの映像に切り換える時間間隔は30秒とし、カメラ1Bの映像からカメラ1Aの映像に切り換える時間間隔は1分とする等、異なる値を用いるようにしてもよい。   In the present embodiment, the video distribution system using two cameras has been described, but various values may be used for the number of cameras and the like. Further, in the present embodiment, the case where the camera images are sequentially switched one by one has been shown. However, for example, a configuration in which four-segment display for simultaneously displaying the images of four cameras is sequentially switched is used. Also good. In addition to using the same value for the time interval for switching the video, for example, the time interval for switching from the video of the camera 1A to the video of the camera 1B is 30 seconds, and the time interval for switching from the video of the camera 1B to the video of the camera 1A is Different values such as 1 minute may be used.

なお、本実施例の映像復号化装置4では、ネットワークインタフェイス部41の機能により映像取得指令送信手段が構成されており、デコード部43の機能により映像復号化手段が構成されており、映像切換部45や出力部46の機能により映像出力手段が構成されている。   In the video decoding device 4 of the present embodiment, the video acquisition command transmission means is configured by the function of the network interface unit 41, and the video decoding unit is configured by the function of the decoding unit 43, and video switching is performed. The video output means is configured by the functions of the unit 45 and the output unit 46.

ここで、本発明に係る映像配信システムや映像復号化装置などの構成としては、必ずしも以上に示したものに限られず、種々な構成が用いられてもよい。また、本発明は、例えば、本発明に係る処理を実行する方法或いは方式や、このような方法や方式を実現するためのプログラムや当該プログラムを記録する記録媒体などとして提供することも可能であり、また、種々な装置やシステムとして提供することも可能である。   Here, the configurations of the video distribution system and the video decoding device according to the present invention are not necessarily limited to those described above, and various configurations may be used. The present invention can also be provided as, for example, a method or method for executing the processing according to the present invention, a program for realizing such a method or method, or a recording medium for recording the program. It is also possible to provide various devices and systems.

また、本発明の適用分野としては、必ずしも以上に示したものに限られず、本発明は、種々な分野に適用することが可能なものである。
また、本発明に係る映像配信システムや映像復号化装置などにおいて行われる各種の処理としては、例えばプロセッサやメモリ等を備えたハードウエア資源においてプロセッサがROM(Read Only Memory)に格納された制御プログラムを実行することにより制御される構成が用いられてもよく、また、例えば当該処理を実行するための各機能手段が独立したハードウエア回路として構成されてもよい。
The application field of the present invention is not necessarily limited to the above-described fields, and the present invention can be applied to various fields.
In addition, as various processes performed in the video distribution system and the video decoding apparatus according to the present invention, for example, a control program in which a processor is stored in a ROM (Read Only Memory) in a hardware resource including a processor, a memory, and the like. May be used, and for example, each functional means for executing the processing may be configured as an independent hardware circuit.

また、本発明は上記の制御プログラムを格納したフロッピー(登録商標)ディスクやCD(Compact Disc)−ROM等のコンピュータにより読み取り可能な記録媒体や当該プログラム(自体)として把握することもでき、当該制御プログラムを当該記録媒体からコンピュータに入力してプロセッサに実行させることにより、本発明に係る処理を遂行させることができる。   The present invention can also be understood as a computer-readable recording medium such as a floppy (registered trademark) disk or a CD (Compact Disc) -ROM storing the control program, and the program (itself). The processing according to the present invention can be performed by inputting the program from the recording medium to the computer and causing the processor to execute the program.

本発明の一実施例に係る映像配信システムの構成例を示す図である。It is a figure which shows the structural example of the video delivery system which concerns on one Example of this invention. 本発明の一実施例に係る映像復号化装置の構成例を示す図である。It is a figure which shows the structural example of the video decoding apparatus which concerns on one Example of this invention. 本発明の一実施例に係る映像復号化装置の動作の一例を示す図である。It is a figure which shows an example of operation | movement of the video decoding apparatus which concerns on one Example of this invention. 本発明の一実施例に係る遅延時間を説明するための図である。It is a figure for demonstrating the delay time which concerns on one Example of this invention. 本発明の一実施例に係る遅延時間を説明するための図である。It is a figure for demonstrating the delay time which concerns on one Example of this invention. 符号化された映像の構成を説明するための図である。It is a figure for demonstrating the structure of the encoded image | video. 映像の切り換えによる表示の様子を説明するための図である。It is a figure for demonstrating the mode of the display by switching of an image | video.

符号の説明Explanation of symbols

1:カメラ、2:映像符号化装置、3:ネットワーク、4:映像復号化装置、5:表示装置。
1: camera, 2: video encoding device, 3: network, 4: video decoding device, 5: display device.

Claims (2)

ネットワークを介して送信装置からフレーム内符号化とフレーム間符号化を用いた映像符号化方式により符号化された映像を受信し、該受信した映像の復号を行うと共に、表示装置に対して出力する映像を所定の時間間隔に基づいて定められる映像切り換えタイミングで異なる映像に切り換える映像復号化装置であって、
切り換え先の映像を取得するための指令を前記映像切り換えタイミングよりフレーム内符号化が行われる周期に基づいて定められる所定時間前に前記送信装置に対して送信する映像取得指令送信手段と、
前記指令に基づいて前記送信装置から受信した映像の復号を行う映像復号化手段と、
前記映像切り換えタイミングになった場合に、前記映像復号化手段により復号された切り換え先の映像データを前記表示装置に対して出力する映像出力手段と、
を備えたことを特徴とする映像復号化装置。
Receives video encoded by a video encoding method using intra-frame coding and inter-frame coding from a transmission device via a network, decodes the received video, and outputs it to the display device A video decoding device for switching video to a different video at a video switching timing determined based on a predetermined time interval,
A video acquisition command transmission means for transmitting a command for acquiring a switching destination video to the transmission device before a predetermined time determined based on a cycle in which intra-frame encoding is performed from the video switching timing;
Video decoding means for decoding video received from the transmitting device based on the command;
Video output means for outputting the video data of the switching destination decoded by the video decoding means to the display device when the video switching timing is reached;
A video decoding apparatus comprising:
ネットワークを介して送信装置からフレーム内符号化とフレーム間符号化とを用いた映像符号化方式により符号化された映像を受信し、該受信した映像の復号を行うと共に、表示装置に対して出力する映像を所定の時間間隔に基づいて定められる映像切り換えタイミングで異なる映像に切り換える映像復号化装置を構成するコンピュータに実行させるプログラムであって、
切り換え先の映像を取得するための指令を前記映像切り換えタイミングよりフレーム内符号化が行われる周期に基づいて定められる所定時間前に前記送信装置に対して送信する機能と、
前記指令に基づいて前記送信装置から受信した映像の復号を行う機能と、
前記映像切り換えタイミングになった場合に、前記映像復号化手段により復号された切り換え先の映像データを前記表示装置に対して出力する機能を、
当該コンピュータにより実現することを特徴とするプログラム。


Receives video encoded by a video encoding method using intra-frame coding and inter-frame coding from a transmission device via a network, decodes the received video, and outputs to the display device A program that causes a computer that constitutes a video decoding device to switch to a different video at a video switching timing determined based on a predetermined time interval,
A function of transmitting a command for acquiring a switching destination video to the transmission device a predetermined time before the video switching timing is determined based on a cycle in which intra-frame encoding is performed;
A function of decoding video received from the transmission device based on the command;
A function of outputting to the display device the video data of the switching destination decoded by the video decoding means when the video switching timing comes;
A program realized by the computer.


JP2004378643A 2004-12-28 2004-12-28 Video decoding apparatus and program Expired - Fee Related JP4024794B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2004378643A JP4024794B2 (en) 2004-12-28 2004-12-28 Video decoding apparatus and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2004378643A JP4024794B2 (en) 2004-12-28 2004-12-28 Video decoding apparatus and program

Publications (2)

Publication Number Publication Date
JP2006186708A JP2006186708A (en) 2006-07-13
JP4024794B2 true JP4024794B2 (en) 2007-12-19

Family

ID=36739470

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2004378643A Expired - Fee Related JP4024794B2 (en) 2004-12-28 2004-12-28 Video decoding apparatus and program

Country Status (1)

Country Link
JP (1) JP4024794B2 (en)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101594539A (en) * 2009-06-24 2009-12-02 中兴通讯股份有限公司 Realize method, decoder and the supervisory control system of decoder synchronous polling
JP6415387B2 (en) * 2015-05-28 2018-10-31 キヤノン株式会社 Display control apparatus, display control method, and program

Also Published As

Publication number Publication date
JP2006186708A (en) 2006-07-13

Similar Documents

Publication Publication Date Title
JP4753204B2 (en) Encoding processing apparatus and encoding processing method
JP3630474B2 (en) Moving picture transmission system and moving picture transmission apparatus
JP2004507178A (en) Video signal encoding method
JP2006508574A (en) Inserting I images upon request
EP1679895A1 (en) Medium signal transmission method, reception method, transmission/reception method, and device
JP2008193510A (en) Video transmitter, video receiver, and video transmission system
WO2012114774A1 (en) Video encoding device and video decoding device
JPH0490648A (en) Coded transmission system
JP3516450B2 (en) Bitstream transmission method and transmission system
KR19980081099A (en) Image transfer device and image transfer method
JP4024794B2 (en) Video decoding apparatus and program
JP5401134B2 (en) Decoder device
JP2007288604A (en) System and method for transmitting video
JP4994732B2 (en) Digital TV broadcast wave transmitter
JP4488958B2 (en) Video transmission system and video transmission method
JP2001128164A (en) Method and system for processing video code
JP4258063B2 (en) Data transmission device
JP2008211503A (en) Video transmission system
JPH08223572A (en) Image decoder
JP2002027470A (en) Image data decoding device and method
JP6592864B2 (en) VIDEO TRANSMISSION DEVICE, VIDEO RECEPTION DEVICE, VIDEO DISTRIBUTION SYSTEM, VIDEO TRANSMISSION DEVICE CONTROL METHOD, AND PROGRAM
JP5477019B2 (en) Detection system and detection method
JP4823232B2 (en) Network management channel change in digital networks
JP4049378B2 (en) Server in bidirectional image communication system, processing method thereof, and program
JP2001309337A (en) Image transmitter

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20070904

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20071002

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20071003

R150 Certificate of patent or registration of utility model

Ref document number: 4024794

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20101012

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111012

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111012

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121012

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121012

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20131012

Year of fee payment: 6

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees