JP2019083461A

JP2019083461A - Video encoded data converter, video encoded data conversion method and video encoded data conversion program

Info

Publication number: JP2019083461A
Application number: JP2017210625A
Authority: JP
Inventors: 敦大久保; Atsushi Okubo
Original assignee: NEC Platforms Ltd
Current assignee: NEC Platforms Ltd
Priority date: 2017-10-31
Filing date: 2017-10-31
Publication date: 2019-05-30
Anticipated expiration: 2037-10-31
Also published as: JP6648898B2

Abstract

To perform normal video communication, by sending video encoded data, confined within a CBR control range, to a reception terminal.SOLUTION: A video encoded data converter 10 includes a RTP reception processor 1 for receiving an IP packet, inputted via an IP network 8, and converting it into video encoded data, a determination unit 2 for monitoring the amount of video encoded data, and determining whether or not the amount of data has deviated from a CBR (Constant Bit Rate) control range, a video encoding processor 4 generating the re-encoded data by re-encoding the video encoded data, deviated from the CBR control range, so as to be confined in the CBR control range on the basis of determination results from the determination unit 2, and a RTP transmission processor 5 for converting the re-encoded data into an IP packet, and transmitting it to a reception terminal 9 via the IP network 8.SELECTED DRAWING: Figure 1

Description

本発明は、ビデオ符号化技術を用いた分野に関し、特に、映像通信が可能なビデオ符号化データ変換装置、方法及びプログラムに関する。 The present invention relates to the field of video coding technology, and more particularly to a video coded data conversion apparatus, method and program capable of video communication.

ビデオコーデック装置は、ビデオコーデック処理で得られたビデオ符号化データを、通信回線を経由して受信端末に送信することで、映像信号を受信端末に伝送する映像通信を実現するための通信機器である。この装置は、特に公共インフラ向け映像監視システムで導入されている。 A video codec apparatus is a communication device for realizing video communication for transmitting a video signal to a receiving terminal by transmitting video encoded data obtained by video codec processing to the receiving terminal via a communication line. is there. This device has been introduced especially in video surveillance systems for public infrastructure.

ビデオコーデック処理とは、映像信号をデジタル信号処理によって圧縮・伸長する処理のことである。映像信号の符号化方式としては、国際標準であるＩＴＵ−Ｔ（International Telecommunication Union Telecommunication Standardization Sector）Ｈ．２６４や、ＩＳＯ（International Organization for Standardization）／ＩＥＣ１４４９６−１０といった規格が、広く世界で使用されている。ビデオコーデック装置は、このビデオコーデック処理をコアに構成され、通信回線を使ってビデオ符号化データの転送を実現する。 Video codec processing is processing for compressing and decompressing a video signal by digital signal processing. As a coding method of a video signal, an international standard ITU-T (International Telecommunication Union Telecommunication Standardization Sector) H.3. Standards such as H.264 and ISO (International Organization for Standardization) / IEC 14496-10 are widely used worldwide. The video codec apparatus is configured with this video codec processing as a core, and realizes transfer of video encoded data using a communication line.

特許文献１には、エンコードされた入力データストリームをデコードした後、デコードした画像をより高い圧縮率になるように再エンコードする技術が開示されている。特許文献１では、再エンコードする符号化方式としてＨ．２６４が用いられている。 Patent Document 1 discloses a technique for decoding an encoded input data stream and re-encoding the decoded image to have a higher compression rate. In Patent Document 1, as a coding method for re-encoding, H.264 is used. H.264 is used.

特開２００９−０１０５８６号公報JP, 2009-010586, A

ビデオコーデック装置の通信回線において、ビデオ符号化データをネットワークに送出する際の送信ビットレートを任意の通信帯域で一定に保つＣＢＲ（Constant Bit rate）方式が採用されている場合がある。このような場合において、送信ビットレートが設定された任意の通信帯域を超えると、通信回線の途中にある通信機器においてデータが欠落したり、その瞬間のデータ伝送に時間がかかり、伝送遅延が長くなってしまうことがある。 In a communication line of a video codec apparatus, there is a case where a CBR (Constant Bit Rate) system for keeping transmission bit rate at the time of transmitting video encoded data to a network constant in an arbitrary communication band may be adopted. In such a case, if the transmission bit rate exceeds an arbitrary communication band set, data may be lost in the communication device in the middle of the communication line, or the data transmission at that moment may take a long time, resulting in a long transmission delay. Sometimes it becomes.

一般に流通しているビデオコーデック装置をそのまま使用する場合、送信ビットレートを下げてＣＢＲ制御範囲内に収まるように調整することが多い。しかし、送信ビットレートを下げたとしても、ビデオ符号化データのデータ量が多く、ＣＢＲ制御範囲内にどうしても収まらない場合がある。このような場合でも、ＣＢＲ制御を求める通信回線を利用でき、データの欠落や、伝送遅延のない、正常な通信を行うことが求められている。 In the case of using a video codec apparatus in general circulation as it is, the transmission bit rate is often lowered to be adjusted to fall within the CBR control range. However, even if the transmission bit rate is lowered, the amount of video encoded data is large and may not fall within the CBR control range. Even in such a case, it is required to use a communication line for CBR control, and to perform normal communication without data loss and transmission delay.

本発明の一態様に係るビデオ符号化データ変換装置は、ＩＰネットワークを経由して入力されるＩＰパケットを受信して、ビデオ符号化データに変換する受信処理器と、前記ビデオ符号化データのデータ量を監視し、当該データ量がＣＢＲ（Constant Bit Rate）制御範囲内を逸脱したか否かを判断する判断器と、前記判断器の判断結果に基づいて、ＣＢＲ制御範囲を逸脱した前記ビデオ符号化データをＣＢＲ制御範囲内に収まるように再エンコードした再エンコードデータを生成する映像符号処理器と、前記再エンコードデータをＩＰパケットに変換して、前記ＩＰネットワークを介して受信端末に送信する送信処理器とを備える。 A video encoding data conversion apparatus according to an aspect of the present invention receives a IP packet input via an IP network and converts the IP packet into video encoding data, and data of the video encoding data. The video code that has deviated from the CBR control range based on a determination unit that monitors the amount and determines whether the data amount deviates from the CBR (Constant Bit Rate) control range, and the determination result of the determination unit A video code processor for generating re-encoded data obtained by re-encoding the encoded data within the CBR control range, and transmitting the re-encoded data into an IP packet and transmitting it to the receiving terminal via the IP network And a processor.

本発明によれば、ビデオ符号化データのデータ量を監視し、ＣＢＲ制御範囲内に収まるビデオ符号化データを受信端末に送出することで、正常な映像通信を行うことが可能となる。 According to the present invention, normal video communication can be performed by monitoring the data amount of video encoded data and transmitting video encoded data falling within the CBR control range to the receiving terminal.

実施の形態１に係るビデオ符号化データ変換装置の構成を示すブロック図である。FIG. 1 is a block diagram showing a configuration of a video encoded data conversion apparatus according to Embodiment 1. 実施の形態１に係るビデオ符号化データ変換装置の構成を示すブロック図である。FIG. 1 is a block diagram showing a configuration of a video encoded data conversion apparatus according to Embodiment 1. 実施の形態１に係るビデオ符号化データ変換装置の動作例を説明するフロー図である。FIG. 7 is a flow diagram for explaining an operation example of the video encoded data conversion device according to the first embodiment. 実施の形態２に係るビデオ符号化データ変換装置の構成を示すブロック図である。FIG. 7 is a block diagram showing a configuration of a video encoded data conversion device according to Embodiment 2. 実施の形態３に係るビデオ符号化データ変換装置の構成を示すブロック図である。FIG. 16 is a block diagram showing the configuration of a video encoded data conversion apparatus according to Embodiment 3. 実施の形態のビデオ符号化データ変換装置を用いた監視システムを示す図である。It is a figure which shows the monitoring system using the video coding data conversion apparatus of embodiment. 比較例１のビデオコーデック装置の構成を示すブロック図である。FIG. 6 is a block diagram showing a configuration of a video codec apparatus of Comparative Example 1. 比較例２のビデオコーデック装置の構成を示すブロック図である。FIG. 7 is a block diagram showing a configuration of a video codec apparatus of Comparative Example 2. 比較例１、２のビデオコーデック装置を用いた監視システムを示す図である。It is a figure which shows the monitoring system using the video codec apparatus of the comparative examples 1 and 2. FIG. ビットレートの変化を示すグラフである。It is a graph which shows the change of a bit rate.

以下、図面を参照して本発明の実施の形態について説明する。
本発明は、映像通信が可能なビデオ符号化データ変換装置、方法及びプログラムに関する。本発明に係るビデオ符号化データ変換装置は、一般に流通しているビデオコーデック装置やＩＰカメラ装置の構成を変更せずに、ビデオ符号化データのデータ量を監視することで、ＣＢＲ（Constant Bit Rate：固定伝送速度）制御範囲内に収まるビデオ符号化データを受信端末に送出することが可能である。 Hereinafter, embodiments of the present invention will be described with reference to the drawings.
The present invention relates to a video encoded data conversion apparatus, method and program capable of video communication. The video encoded data conversion apparatus according to the present invention monitors a data amount of video encoded data without changing the configuration of a video codec apparatus and an IP camera apparatus that are generally distributed, and thus, CBR (Constant Bit Rate). Fixed transmission rate) It is possible to send to the receiving terminal video encoded data that falls within the control range.

説明の明確化のため、以下の記載及び図面は、適宜、省略、及び簡略化がなされている。また、様々な処理を行う機能ブロックとして図面に記載される各要素は、ハードウェア的には、ＣＰＵ、メモリ、その他の回路で構成することができ、ソフトウェア的には、メモリにロードされたプログラムなどによって実現される。したがって、これらの機能ブロックがハードウェアのみ、ソフトウェアのみ、またはそれらの組合せによっていろいろな形で実現できることは当業者には理解されるところであり、いずれかに限定されるものではない。なお、各図面において、同一の要素には同一の符号が付されており、必要に応じて重複説明は省略されている。 The following description and drawings are omitted and simplified as appropriate for clarification of the explanation. In addition, each element described in the drawing as a functional block that performs various processing can be configured by a CPU, a memory, and other circuits in terms of hardware, and in terms of software, a program loaded into a memory And so on. Therefore, it is understood by those skilled in the art that these functional blocks can be realized in various forms by hardware only, software only, or a combination thereof, and is not limited to any of them. In the drawings, the same elements are denoted by the same reference numerals, and the redundant description is omitted as necessary.

また、上述したプログラムは、様々なタイプの非一時的なコンピュータ可読媒体を用いて格納され、コンピュータに供給することができる。非一時的なコンピュータ可読媒体は、様々なタイプの実体のある記録媒体を含む。非一時的なコンピュータ可読媒体の例は、磁気記録媒体（例えばフレキシブルディスク、磁気テープ、ハードディスクドライブ）、光磁気記録媒体（例えば光磁気ディスク）、ＣＤ−ＲＯＭ（Read Only Memory）、ＣＤ−Ｒ、ＣＤ−Ｒ／Ｗ、半導体メモリ（例えば、マスクＲＯＭ、ＰＲＯＭ（Programmable ROM）、ＥＰＲＯＭ（Erasable PROM）、フラッシュＲＯＭ、ＲＡＭ（Random Accsess Memory））を含む。また、プログラムは、様々なタイプの一時的なコンピュータ可読媒体によってコンピュータに供給されてもよい。一時的なコンピュータ可読媒体の例は、電気信号、光信号、及び電磁波を含む。一時的なコンピュータ可読媒体は、電線及び光ファイバ等の有線通信路、又は無線通信路を介して、プログラムをコンピュータに供給できる。 Also, the programs described above can be stored and provided to a computer using various types of non-transitory computer readable media. Non-transitory computer readable media include various types of tangible storage media. Examples of non-transitory computer readable media are magnetic recording media (eg flexible disk, magnetic tape, hard disk drive), magneto-optical recording media (eg magneto-optical disk), CD-ROM (Read Only Memory), CD-R, CD-R / W, semiconductor memory (for example, mask ROM, PROM (Programmable ROM), EPROM (Erasable PROM), flash ROM, RAM (Random Accesess Memory)) are included. The programs may also be supplied to the computer by various types of temporary computer readable media. Examples of temporary computer readable media include electrical signals, light signals, and electromagnetic waves. The temporary computer readable medium can provide the program to the computer via a wired communication path such as electric wire and optical fiber, or a wireless communication path.

実施の形態について説明する前に、比較例に係るビデオコーデック装置の問題点について説明する。図７は、比較例１のビデオコーデック装置の構成を示すブロック図である。図７の比較例１では、送信専用のビデオコーデック装置であるエンコーダ装置１２と受信専用のビデオコーデック装置であるデコーダ装置１４とが分かれた構成が示されている。この構成は、映像監視システムにおいて一般的な構成である。 Before describing the embodiments, problems of the video codec apparatus according to the comparative example will be described. FIG. 7 is a block diagram showing the configuration of the video codec apparatus of Comparative Example 1. Comparative Example 1 in FIG. 7 shows a configuration in which an encoder device 12 which is a video codec device dedicated to transmission and a decoder device 14 which is a video codec device dedicated to reception are separated. This configuration is a general configuration in a video surveillance system.

図７に示す例では、ＰＣ等の操作端末１６、１７が、ＲＳ−２３２Ｃコネクタ等のシリアル通信コネクタを介してエンコーダ装置１２、デコーダ装置１４とそれぞれ接続されている。エンコーダ装置１２、デコーダ装置１４は、操作端末１６、１７からそれぞれ制御が可能である。 In the example illustrated in FIG. 7, operation terminals 16 and 17 such as a PC are connected to the encoder device 12 and the decoder device 14 via serial communication connectors such as RS-232C connectors. The encoder device 12 and the decoder device 14 can be controlled from the operation terminals 16 and 17, respectively.

カメラ１１は、撮像素子から取り込んだ映像を映像信号Ｖ１０として出力し、エンコーダ装置１２に入力する。操作端末１６を用いてエンコーダ装置１２に送信動作を指示すると、エンコーダ装置１２では、映像信号が映像デジタル信号へと変換され、映像符号処理を経てビデオ符号化データが生成される。ビデオ符号化データは、ＲＴＰ（Real-time Transport Protocol）送信処理を経て、ＩＰパケットとしてＩＰネットワーク１３に送信される。 The camera 11 outputs an image captured from the imaging device as an image signal V10 and inputs the image signal V10 to the encoder device 12. When the transmission operation is instructed to the encoder device 12 using the operation terminal 16, the video signal is converted into a video digital signal in the encoder device 12, and video encoded data is generated through video encoding processing. Video encoded data is transmitted to the IP network 13 as an IP packet through a Real-time Transport Protocol (RTP) transmission process.

ＩＰネットワーク１３を経由して伝送されたＩＰパケットは、デコーダ装置１４に到達する。操作端末１７を用いてデコーダ装置１４に受信動作を指示すると、デコーダ装置１４では、ＲＴＰ受信処理されたビデオ符号化データが映像復号処理を経て映像信号Ｖ１１に変換され、ディスプレイモニタ１５に出力される。このようにして、カメラ１１からの映像信号Ｖ１０が、エンコーダ装置装置１２、デコーダ装置１４を経由して、ディスプレイモニタ１５に表示される。 The IP packet transmitted via the IP network 13 reaches the decoder device 14. When the decoder device 14 is instructed to perform a reception operation using the operation terminal 17, the decoder device 14 converts video encoded data subjected to RTP reception processing into a video signal V 11 through a video decoding process, and outputs the video signal V 11 to the display monitor 15. . Thus, the video signal V10 from the camera 11 is displayed on the display monitor 15 via the encoder device 12 and the decoder device 14.

近年では、小型化技術の進化に伴い、撮像素子とエンコーダ装置を一体化したＩＰカメラ装置が開発されている。このＩＰカメラ装置は、比較的価格が抑えられているため、広く普及している。ＩＰカメラ装置は、撮像素子と、比較例１に示す送信側のビデオコーデック装置（エンコーダ装置１２）とを一体化した構成を持つ機器である。ＩＰカメラ装置は、撮像素子とビデオコーデック装置とが一体化した小型な機器であるため、例えば、店舗内の監視等で広く使われている。 In recent years, with the development of miniaturization technology, an IP camera device in which an imaging device and an encoder device are integrated has been developed. This IP camera device is widely used because its price is relatively reduced. The IP camera device is a device having a configuration in which an imaging element and a video codec device (encoder device 12) on the transmission side shown in Comparative Example 1 are integrated. Since the IP camera device is a compact device in which an imaging device and a video codec device are integrated, it is widely used, for example, for monitoring in a store.

図８に、比較例２のビデオコーデック装置の構成が示される。比較例２は、ビデオコーデック装置を一体化したＩＰカメラ装置である。図８において、エンコーダ処理回路２２が図７のエンコーダ装置１２に相当する。撮像素子２１は、取り込んだ映像を映像信号Ｖ２０として出力し、エンコーダ処理回路２２に入力する。ＩＰカメラ装置は、ＩＰネットワーク２３経由でＩＰパケットの出力動作の指示を受けるため、プロトコル処理部を実装している。図８に示す例では、プロトコル処理部として一般的な、ＲＴＳＰ（Real Time Streaming Protocol）処理回路２４が実装されている。 The configuration of the video codec apparatus of Comparative Example 2 is shown in FIG. The second comparative example is an IP camera device in which a video codec device is integrated. In FIG. 8, an encoder processing circuit 22 corresponds to the encoder device 12 of FIG. The imaging device 21 outputs the captured video as a video signal V <b> 20 and inputs the video signal V <b> 20 to the encoder processing circuit 22. The IP camera device has a protocol processing unit installed in order to receive an instruction to output an IP packet via the IP network 23. In the example shown in FIG. 8, a Real Time Streaming Protocol (RTSP) processing circuit 24 general as a protocol processing unit is implemented.

ＩＰパケットを受信・表示する受信端末２５がＲＴＳＰ処理回路２４にＩＰパケットの送信動作をリクエストすると、エンコーダ処理回路２２は、映像符号処理を経たビデオ符号化データをＩＰパケットとしてＩＰネットワーク２３に送信する。このようにして、撮像素子２１から取り込んだ映像信号が受信端末２５に送信され、表示される。 When the receiving terminal 25 receiving and displaying the IP packet requests the RTSP processing circuit 24 to transmit the IP packet, the encoder processing circuit 22 transmits the video encoded data subjected to the video encoding process to the IP network 23 as an IP packet. . Thus, the video signal fetched from the imaging device 21 is transmitted to the receiving terminal 25 and displayed.

交差点や踏切、路上、建物内等のある監視エリアを映像で監視しようとする場合、その監視エリアをくまなく撮影できるように複数のカメラが設置される。設置されたカメラからの映像を監視センタでモニタリングするためには、通信回線を経由して映像を送信する構成が採られ、ビデオコーデック装置やＩＰカメラ装置が多数使用される。 When monitoring a certain monitoring area such as an intersection, a level crossing, a street, or a building, with a video, a plurality of cameras are installed so that the monitoring area can be photographed all over. In order to monitor the video from the installed camera at the monitoring center, a configuration for transmitting the video via the communication line is adopted, and a large number of video codec devices and IP camera devices are used.

図９は、このような複数のビデオコーデック装置等を用いた、監視システムの構成例を示している。図９に示す例では、交差点の支柱にＩＰカメラ装置３１、カメラ３２が設置されている。カメラ３２は、ビデオコーデック装置３３に接続されている。ＩＰカメラ装置３１、カメラ３２で撮影された映像信号は、ＩＰネットワーク３４やＷＡＮ（Wide Area Network）３５といった通信回線を経由して、監視センタ３６に送られる。 FIG. 9 shows a configuration example of a surveillance system using such a plurality of video codec devices and the like. In the example shown in FIG. 9, the IP camera device 31 and the camera 32 are installed on a pole at an intersection. The camera 32 is connected to the video codec device 33. Video signals captured by the IP camera device 31 and the camera 32 are sent to the monitoring center 36 via communication lines such as the IP network 34 and a wide area network (WAN) 35.

大容量の通信回線は、通信コストが高く、設置できる場所が限定されている。このため、監視エリア３０と監視センタ３６を結ぶ通信回線としては、複数のカメラからの映像を同時に流せる程の大容量の通信回線ではなく、広く普及している通信回線を用いるのが一般的であり、せいぜい１台のカメラからの映像を流せる程の低容量の通信回線が用いられる。そのため、設置するカメラ毎に監視センタ３６までの通信回線を用意して運用することになる。 Large-capacity communication lines have high communication costs, and the place where they can be installed are limited. For this reason, as a communication line connecting the monitoring area 30 and the monitoring center 36, it is general to use a widely spread communication line instead of a large-capacity communication line which can simultaneously transmit images from a plurality of cameras. There is a low-capacity communication line that can carry the video from at most one camera. Therefore, communication lines up to the monitoring center 36 are prepared and operated for each camera to be installed.

監視センタ３６では、操作卓を制御することでカメラ映像をディスプレイに表示する。例えば、選択した任意のカメラ映像を表示させたり、ある一定の時間周期で自動的に順にカメラ映像を表示させたり、画面合成装置を使用して複数のカメラ映像を合成して表示させたりする。 The monitoring center 36 controls the console to display the camera image on the display. For example, an arbitrary selected camera image is displayed, a camera image is automatically displayed sequentially in a certain time cycle, or a plurality of camera images are combined and displayed using a screen combining device.

ビデオコーデック処理では、ビデオストリームに対して、空間方向の圧縮と時間方向の圧縮を行っている。圧縮されたデータは、Ｉフレーム（イントラフレーム）、Ｐフレーム（予測フレーム）、Ｂフレーム（双方向補間フレーム）を含む。Ｉフレームは、自己完結型であり、１つの完全なビデオのフレームを表示するために必要とされる全ての情報を含む。 Video codec processing performs spatial and temporal compression on a video stream. The compressed data includes an I frame (intra frame), a P frame (predicted frame), and a B frame (bidirectionally interpolated frame). I-frames are self-contained and contain all the information needed to display one complete video frame.

このため、ビデオ符号化データをネットワークに送出する際、Ｉフレームのときに瞬間的に送信ビットレートが高くなりやすい。監視エリア３０と監視センタ３６の通信回線において、送信ビットレートを任意の通信帯域で一定に保たなければならないＣＢＲ（Constant Bit Rate）方式が採用されている場合、送信ビットレートが任意の通信帯域を超えると、通信回線の途中にあるルータ等の通信機器においてデータが欠落したり、その瞬間のデータ伝送に時間がかかり、伝送遅延が長くなってしまうことがある。受信端末によっては、バッファの容量不足により、その瞬間の映像を再生できずにデコードエラーを引き起こすおそれがある。 For this reason, when transmitting video encoded data to the network, the transmission bit rate is likely to increase momentarily at the time of an I frame. In the communication line of the monitoring area 30 and the monitoring center 36, in the case where a constant bit rate (CBR) method is adopted in which the transmission bit rate must be kept constant in an arbitrary communication band, the communication bit rate is an arbitrary communication band. In such a case, data may be dropped in a communication device such as a router in the middle of the communication line, or it may take a long time to transmit data at that moment, resulting in a long transmission delay. Depending on the receiving terminal, there is a possibility that a decoding error may occur due to the inability to reproduce the video at that moment due to the buffer capacity shortage.

図１０は、送信ビットレートの変化の一例を示したものである。図１０の上段に、時系列のビデオストリームの各フレームが示されている。グラフ１、２には、各フレームに対応する時間におけるビデオ符号化データの送信ビットレートが示される。グラフ１に示す例では、設定ビットレート内に送信ビットレートが収まっている。この場合は、ＣＢＲ制御の範囲内に送信ビットレートが収まっているため、映像信号の通信に支障はない。 FIG. 10 shows an example of a change in transmission bit rate. At the top of FIG. 10, each frame of the time-series video stream is shown. Graphs 1 and 2 show transmission bit rates of video encoded data at times corresponding to each frame. In the example shown in graph 1, the transmission bit rate falls within the set bit rate. In this case, since the transmission bit rate falls within the range of CBR control, communication of the video signal is not hindered.

しかし、グラフ２では、ある瞬間の送信ビットレートが設定ビットレートを超えている。この瞬間、ＣＢＲ制御においては、データの欠落や伝送遅延につながる。このように、映像通信にとって通信環境が厳しい条件下では、送信ビットレートを任意の通信帯域内に保つことができず、正常な通信ができなくなるという問題がある。 However, in graph 2, the transmission bit rate at a certain moment exceeds the set bit rate. At this moment, in CBR control, it leads to data loss and transmission delay. As described above, under conditions where the communication environment is severe for video communication, there is a problem that the transmission bit rate can not be maintained within an arbitrary communication band, and normal communication can not be performed.

流通しているビデオコーデック装置やＩＰカメラ装置をそのまま使用する場合、送信ビットレートを下げてＣＢＲ制御範囲内に収まるように調整することが多い。しかし、送信ビットレートを下げたとしても、ビデオ符号化データのデータ量が多く、ＣＢＲ制御範囲内にどうしても収まらない場合がある。このような場合でも、ＣＢＲ制御を求める通信回線を利用できるようにすることが求められている。 In the case of using a video codec apparatus or an IP camera apparatus in the market as it is, the transmission bit rate is often lowered to be adjusted to fall within the CBR control range. However, even if the transmission bit rate is lowered, the amount of video encoded data is large and may not fall within the CBR control range. Even in such a case, it is required to be able to use a communication line that requires CBR control.

また、一般に流通しているビデオコーデック装置やＩＰカメラ装置には、送信ビットレート制御としてＣＢＲ制御を採用しているものがあるが、ＧＯＰ（Group Of Picture）単位でのＣＢＲ制御に留まり、フレーム単位でのＣＢＲ制御が行われていないものが多い。送信側であるビデオコーデック装置やＩＰカメラ装置を厳密なＣＢＲ制御を求める通信回線でも利用できるようにするためには、フレーム単位のビットレート制御を実装する必要がある。 Also, some video codec devices and IP camera devices in general use adopt CBR control as transmission bit rate control, but CBR control in units of GOP (Group Of Picture) units, frame units There are many cases in which CBR control is not performed in In order to be able to use the video codec apparatus or the IP camera apparatus on the transmission side even in a communication line that requires strict CBR control, it is necessary to implement bit rate control in units of frames.

ビデオコーデック処理では、フレーム内予測処理とフレーム間予測処理によってデータ量を大幅に削減している。ビデオコーデック処理を行ったデータのデータ量は、入力される映像の動きや絵柄の細かさに応じて変化する。映像の変化が大きいと、予測できる部分が少なくなるため、予測処理に比べて圧縮率の低い離散コサイン変換（DCT：Discrete Cosine Transform）等の処理を経たデータが作成される。すなわち、映像の変化が大きい場合、画質を一定に保とうとするとデータ量が大きくなる。 In video codec processing, the amount of data is greatly reduced by intra-frame prediction processing and inter-frame prediction processing. The data amount of data subjected to the video codec process changes according to the movement of the input video and the fineness of the pattern. If the change in the image is large, the portion that can be predicted decreases, and therefore, data subjected to processing such as discrete cosine transform (DCT) having a compression ratio lower than that of the prediction processing is created. That is, when the change in video is large, the amount of data becomes large if the image quality is kept constant.

そこで、本発明者は、ビデオコーデック装置やＩＰカメラ装置からのデータ量を監視し、ＣＢＲ制御の範囲を逸脱するような状況になった場合、その瞬間のデータをＣＢＲ制御の範囲内に収まるように再エンコードして、逸脱した時間帯のビデオ符号化データをエンコードし直したデータに差し替えることを考案した。以下、本発明の実施の形態について説明する。 Therefore, the present inventor monitors the amount of data from the video codec device and the IP camera device, and when it is in a situation where it deviates from the range of CBR control, the data of that moment falls within the range of CBR control. It was devised to replace the encoded video data of the deviated time zone with the re-encoded data by re-encoding to. Hereinafter, embodiments of the present invention will be described.

実施の形態１．
実施の形態１に係るビデオ符号化データ変換装置について、図１〜３を参照して説明する。図１は、ビデオ符号化データ変換装置１０の構成を示す図である。図２は、ＩＰカメラ装置からのＩＰパケットを受信する例である、ビデオ符号化データ変換装置１０Ａの構成を示している。図３を参照して実施の形態１に係るビデオ符号化データ変換装置１０Ａの動作例を示している。なお、上述の通り、図中の各ブロックは機能別に分類したものであり、ハード構成を限定するものではない。 Embodiment 1
The video encoded data conversion apparatus according to the first embodiment will be described with reference to FIGS. FIG. 1 is a diagram showing the configuration of a video encoded data conversion apparatus 10. As shown in FIG. FIG. 2 shows a configuration of a video encoded data conversion device 10A, which is an example of receiving an IP packet from an IP camera device. An operation example of the video encoded data conversion device 10A according to the first embodiment is shown with reference to FIG. As described above, each block in the figure is classified according to the function, and does not limit the hardware configuration.

図１に示すように、ビデオ符号化データ変換装置１０は、ＲＴＰ受信処理器１、判断器２、映像符号処理器４、ＲＴＰ送信処理器５を有している。ＲＴＰ受信処理器１は、ＩＰネットワークを経由して入力されるＩＰパケットを受信して、ビデオ符号化データに変換する。判断器２は、ビデオ符号化データのデータ量を監視し、当該データ量がＣＢＲ制御範囲内を逸脱したか否かを判断する。判断器２の判断結果に基づいて、入力されたビデオ符号化データを再エンコードせずに、そのままＲＴＰ送信処理器５で再びＩＰネットワーク８に送出するか（第１経路Ｒ１）、ＣＢＲ制御範囲を逸脱したビデオ符号化データをＣＢＲ制御範囲内に収まるように再エンコードした再エンコードデータを生成するか（第２経路Ｒ２）のいずれかが選択される。 As shown in FIG. 1, the video encoded data conversion apparatus 10 includes an RTP reception processor 1, a judgment unit 2, a video code processor 4, and an RTP transmission processor 5. The RTP reception processor 1 receives an IP packet input via an IP network and converts it into video encoded data. The judgment unit 2 monitors the data amount of the video encoded data, and judges whether the data amount deviates from the CBR control range. Based on the judgment result of the judgment unit 2, whether the RTP transmission processing unit 5 sends it again to the IP network 8 without re-encoding the input video encoded data (first route R1), or the CBR control range Either re-encoding data generated by re-encoding the deviated video encoding data so as to fall within the CBR control range (second path R2) is selected.

映像符号処理器４は、ビデオ符号化データのデータ量がＣＢＲ制御の範囲を逸脱したと判断された場合、ＣＢＲ制御範囲を逸脱したビデオ符号化データの再エンコード処理を行う。再エンコードデータは、ビデオ符号化データのうち、ＣＢＲ制御の範囲を逸脱した時間帯のビデオ符号化データをエンコードし直したデータである。ＲＴＰ送信処理器５は、再エンコードデータをＩＰパケットに変換して、ＩＰネットワーク８を介して受信端末９に送信する。 When it is determined that the data amount of video encoded data has deviated from the range of CBR control, the video encoder 4 re-encodes the video encoded data deviating from the CBR control range. The re-encoding data is data obtained by re-encoding video encoding data of a time zone out of the range of CBR control among video encoding data. The RTP transmission processor 5 converts the re-encoding data into an IP packet, and transmits the IP packet to the receiving terminal 9 via the IP network 8.

以下、ＩＰカメラ装置からのＩＰパケットを受信する例について、図２を参照して具体的に説明する。図２に示すように、ビデオ符号化データ変換装置１０Ａは、ＲＴＰ受信処理器１、判断器２、映像復号処理器３、映像符号処理器４、ＲＴＰ送信処理器５、ＲＴＳＰ処理器６を備えている。ビデオ符号化データ変換装置１０Ａは、通常エンコーダ装置が持つ映像符号処理器４と、デコーダ装置が持つ映像復号処理器３とが合わさった構成を有してる。 Hereinafter, an example of receiving an IP packet from an IP camera device will be specifically described with reference to FIG. As shown in FIG. 2, the video encoded data conversion apparatus 10A includes an RTP reception processor 1, a determination unit 2, a video decoding processor 3, a video code processor 4, an RTP transmission processor 5, and an RTSP processor 6. ing. The video encoding data conversion device 10A has a configuration in which a video encoding processor 4 which a normal encoder device has and a video decoding processor 3 which a decoder device has are combined.

ＩＰカメラ装置７は一般に流通している通常の構成を有するものである。ＩＰカメラ装置７はＩＰネットワーク８を介して、ビデオ符号化データ変換装置１０Ａに接続されている。ＩＰカメラ装置７は、ビデオ符号化データをＲＴＰ（Real-time Transport Protocol）パケットとしてビデオ符号化データ変換装置１０Ａに送出する。 The IP camera device 7 has a general configuration that is generally distributed. The IP camera device 7 is connected to the video encoding data conversion device 10 A via the IP network 8. The IP camera device 7 sends out the video encoded data as a Real-time Transport Protocol (RTP) packet to the video encoded data conversion device 10A.

ビデオ符号化データ変換装置１０Ａは、ＩＰネットワーク８経由でＲＴＰパケットに対する指示を受けるため、ＲＴＳＰ（Real Time Streaming Protocol）処理器６を有している。受信端末９が、ＲＴＳＰ処理器６にＲＴＰパケットの受信動作をリクエストすると、ＲＴＰ受信処理器１はＩＰネットワーク８を介して入力されるＩＰパケットを受信し、ビデオ符号化データに変換して判断器２に送出する。判断器２は、ビデオ符号化データのデータ量を計測し、計測したデータ量がＣＢＲ制御範囲内を逸脱したか否かを判断する。 In order to receive an instruction for an RTP packet via the IP network 8, the video encoded data conversion device 10 </ b> A includes a Real Time Streaming Protocol (RTSP) processor 6. When the receiving terminal 9 requests the RTSP processor 6 to receive an RTP packet, the RTP receiver 1 receives an IP packet input via the IP network 8 and converts it into video encoded data to make a decision. Send to 2 The determiner 2 measures the data amount of the video encoded data, and determines whether the measured data amount deviates from the CBR control range.

計測したデータ量がＣＢＲ制御の範囲内であると判断された場合、第１経路Ｒ１が選択される。入力されたビデオ符号化データは再エンコードされずに、そのままＲＴＰ送信処理器５で再びＩＰネットワーク８に送出される。送出されたＩＰパケットは受信端末９で受信され、映像が表示される。 If it is determined that the measured data amount is within the range of CBR control, the first route R1 is selected. The input video encoded data is sent to the IP network 8 again by the RTP transmission processor 5 without being re-encoded. The transmitted IP packet is received by the receiving terminal 9 and a video is displayed.

一方、計測したデータ量がＣＢＲ制御の範囲を逸脱したと判断された場合、第２経路Ｒ２に切り替わる。第２経路Ｒ２が選択されると、入力されたビデオ符号化データは映像復号処理器３で一旦復号される。そして、映像復号処理器３で復号化された映像デジタルデータは、判断器２の判断結果に基づいて、映像符号処理器４においてＣＢＲ制御範囲を逸脱したビデオ符号化データがＣＢＲ制御範囲内に収まるように再エンコードされる。再エンコードデータは、ビデオ符号化データのうち、ＣＢＲ制御の範囲を逸脱した時間帯のビデオ符号化データをエンコードし直したデータである。 On the other hand, when it is determined that the measured data amount has deviated from the range of the CBR control, switching is made to the second route R2. When the second path R2 is selected, the input video encoded data is once decoded by the video decoding processor 3. Then, the video digital data decoded by the video decoding processor 3 is such that video coded data deviating from the CBR control range in the video code processor 4 falls within the CBR control range based on the judgment result of the judgment unit 2 To be re-encoded. The re-encoding data is data obtained by re-encoding video encoding data of a time zone out of the range of CBR control among video encoding data.

判断器２は、判断結果に基づき、ビデオ符号化データを再エンコードするための制御パラメータＰ１を映像符号処理器４に出力する。そして、映像復号処理器３で復号化された映像デジタルデータは、判断器２から入力された制御パラメータＰ１を利用して、映像符号処理器４において再エンコードされる。再エンコードデータは、ＲＴＰ送信処理器５でＩＰパケットに変換され、再びＩＰネットワーク８に送出される。 The determiner 2 outputs a control parameter P1 for re-encoding video encoded data to the video code processor 4 based on the determination result. Then, the video digital data decoded by the video decoding processor 3 is re-encoded by the video code processor 4 using the control parameter P1 inputted from the judging device 2. The re-encoded data is converted into an IP packet by the RTP transmission processor 5 and sent again to the IP network 8.

ここで、図３を参照して実施の形態１に係るビデオ符号化データ変換装置１０Ａの動作例について説明する。図３は、判断器２の処理を説明するフロー図である。図３に示すように、ステップＳ１０において、ＩＰネットワークで行われるＣＢＲ制御の上限ビットフレームＡと、ＩＰカメラ装置７が出力するビデオ符号化データのフレームレートＢから、１フレーム当たりのデータ割り当て量に係数Ｅをかけ合わせたＣが算出される。（Ｃ＝Ｅ*Ａ／Ｂ） Here, an operation example of the video encoded data conversion device 10A according to the first embodiment will be described with reference to FIG. FIG. 3 is a flowchart illustrating the process of the determiner 2. As shown in FIG. 3, in step S10, based on the upper limit bit frame A of CBR control performed in the IP network and the frame rate B of the video encoded data output from the IP camera device 7, the data allocation amount per frame C multiplied by a coefficient E is calculated. (C = E * A / B)

その後、ステップＳ１１において、受信したＩＰパケットから展開されたビデオ符号化データから、１フレームあたりのデータ量Ｄが算出される。そして、１フレームあたりのデータ量Ｄに応じて、第１経路Ｒ１と、第２経路Ｒ２の切り替えが行われる。具体的には、ステップＳ１２において、受信したデータ量Ｄがデータ割り当て量Ｃよりも大きいか否かが判断される。データ量Ｄがデータ割り当て量Ｃ以下であり、ＣＢＲ制御の範囲内に収まっている場合（ステップＳ１２、ＮＯ）、第１経路Ｒ１が選択される。この場合、受信したＩＰパケットから展開されたビデオ符号化データは、そのままＲＴＰ送信処理器５で再びＩＰネットワーク８に送出される。 Thereafter, in step S11, the data amount D per frame is calculated from the video encoded data expanded from the received IP packet. Then, switching between the first route R1 and the second route R2 is performed according to the data amount D per frame. Specifically, in step S12, it is determined whether the received data amount D is larger than the data allocation amount C or not. If the data amount D is equal to or less than the data allocation amount C and falls within the range of CBR control (NO in step S12), the first route R1 is selected. In this case, the video encoded data expanded from the received IP packet is sent again to the IP network 8 by the RTP transmission processor 5 as it is.

一方、データ量Ｄがデータ割り当て量Ｃよりも大きく、データ量ＤがＣＢＲ制御の範囲を逸脱した場合（ステップＳ１２、ＹＥＳ）、第２経路Ｒ２が選択される。この場合、ステップＳ１３において、映像符号処理器４に対して制御パラメータＰ１が出力される。映像復号処理器３で一旦復号化されたデータは、映像符号処理器４において制御パラメータＰ１によりＣＢＲ制御の範囲内に収まるように再エンコードされる。 On the other hand, if the data amount D is larger than the data allocation amount C and the data amount D deviates from the range of CBR control (YES in step S12), the second route R2 is selected. In this case, the control parameter P1 is output to the video code processor 4 in step S13. The data once decoded by the video decoding processor 3 is re-encoded by the video coding processor 4 according to the control parameter P1 so as to fall within the range of CBR control.

このように、判断器２によってＣＢＲ制御の範囲を逸脱したか否かを判定し、逸脱した時間帯のビデオ符号化データをエンコードし直したデータに差し替えた再エンコードデータを受信端末９に送信することができる。これにより、送信ビットレートを任意の通信帯域内に保つことができ、データの欠落や、伝送遅延のない、正常な通信を行うことが可能となる。このため、一般に流通しているＩＰカメラ装置の構成を変更せずに、そのままＣＢＲ制御を求める通信回線でも利用できるようにすることが可能となる。 As described above, it is determined by the determination unit 2 whether or not it has deviated from the range of CBR control, and re-encoded data replaced with data obtained by re-encoding video encoded data of the deviated time zone is transmitted to the receiving terminal 9 be able to. As a result, the transmission bit rate can be maintained within an arbitrary communication band, and it is possible to perform normal communication without data loss or transmission delay. Therefore, without changing the configuration of the generally distributed IP camera device, it is possible to use the communication line for which CBR control is required as it is.

実施の形態２．
実施の形態２に係るビデオ符号化データ変換装置について、図４を参照して説明する。図４は、実施の形態２に係るビデオ符号化データ変換装置の一例であるビデオコーデック装置１００の構成を示すブロック図である。図４において、図１、２と同じ機能を有するブロックには同一の符号を付している。 Second Embodiment
A video encoded data conversion apparatus according to Embodiment 2 will be described with reference to FIG. FIG. 4 is a block diagram showing a configuration of a video codec apparatus 100 which is an example of a video coding data conversion apparatus according to a second embodiment. In FIG. 4, the blocks having the same functions as those in FIGS.

実施の形態２のビデオコーデック装置１００は、エンコーダ装置とデコーダ装置とを合わせた構成を有している。図４に示すように、ビデオコーデック装置１００は、ＲＴＰ受信処理器１、判断器２、映像復号処理器３、映像符号処理器４、ＲＴＰ送信処理器５、ＲＴＳＰ処理器６、Ａ／Ｄ器１０１、Ｄ／Ａ器１０２、映像信号切替器１０３を有している。ビデオコーデック装置１００は、従来のエンコード装置、デコード装置として動作することができるとともに、ＩＰカメラ装置から入力されるデータ量を監視して、ＣＢＲ制御の範囲を逸脱した時間帯のビデオ符号化データを、ＣＢＲ制御の範囲内に収まるようにエンコードしなおす機能を有する。 The video codec apparatus 100 of Embodiment 2 has a configuration in which an encoder apparatus and a decoder apparatus are combined. As shown in FIG. 4, the video codec apparatus 100 includes an RTP reception processor 1, a determination unit 2, a video decoding processor 3, a video code processor 4, an RTP transmission processor 5, an RTSP processor 6, and an A / D unit. 101, a D / A unit 102, and a video signal switching unit 103. The video codec apparatus 100 can operate as a conventional encoding apparatus and decoding apparatus, monitors the amount of data input from the IP camera apparatus, and can encode video encoded data of a time zone out of the range of CBR control. , And has the function of re-encoding to be within the range of CBR control.

映像信号切替器１０３には、Ａ／Ｄ器１０１、Ｄ／Ａ器１０２、映像復号処理器３、映像符号処理器４が接続される。判断器２には、ＲＴＰ受信処理器１、映像復号処理器３、映像符号処理器４、ＲＴＰ送信処理器５が接続される。ＲＴＰ受信処理器１は入力ＩＰパケットを受信し、ビデオ符号化データに変換して判断器２に送出する。映像復号処理器３は、デコード装置として動作する場合は、判断器２を経由して入力されたビデオ符号化データを復号して、出力映像デジタル信号に変換する。また、映像復号処理器３は、再エンコードを行う場合は、判断器２を経由して入力されたビデオ符号化データを復号し、映像符号処理器４において再エンコードされる映像デジタル信号へと変換する。 The A / D unit 101, the D / A unit 102, the video decoding processor 3, and the video code processor 4 are connected to the video signal switching unit 103. The RTP reception processor 1, the video decoding processor 3, the video code processor 4, and the RTP transmission processor 5 are connected to the determination unit 2. The RTP reception processor 1 receives an input IP packet, converts it into video coded data, and sends it to the judgment unit 2. When the video decoding processor 3 operates as a decoding device, the video decoding processor 3 decodes the video encoded data input via the judging device 2 and converts it into an output video digital signal. When re-encoding is performed, the video decoding processor 3 decodes the video encoded data input via the judging unit 2 and converts it into a video digital signal to be re-encoded in the video encoding processor 4 Do.

Ｄ／Ａ器１０２は、映像復号処理器３からの出力映像デジタル信号を出力映像信号に変換する。Ａ／Ｄ器１０１は、入力映像信号を入力映像デジタル信号に変換する。映像信号切替器１０３は、各機能ブロックからの映像デジタル信号をいずれの機能ブロックに入力するかを切り替える制御を行う。具体的には、映像信号切替器１０３は、エンコード装置として動作する場合、Ａ／Ｄ器１０１から出力される入力映像デジタル信号を映像符号処理器４に入力する。また、映像信号切替器１０３は、デコード装置として動作する場合、映像復号処理器３からの出力映像デジタル信号をＤ／Ａ器１０２に入力する。映像信号切替器１０３は、再エンコードを行う場合は、映像復号処理器３からの映像デジタル信号を映像符号処理器４に入力する。 The D / A unit 102 converts the output video digital signal from the video decoding processor 3 into an output video signal. The A / D unit 101 converts an input video signal into an input video digital signal. The video signal switching unit 103 performs control to switch to which functional block the video digital signal from each functional block is input. Specifically, when operating as an encoding device, the video signal switch 103 inputs an input video digital signal output from the A / D unit 101 to the video code processor 4. Further, when operating as a decoding device, the video signal switching device 103 inputs an output video digital signal from the video decoding processor 3 to the D / A unit 102. The video signal switching device 103 inputs the video digital signal from the video decoding processor 3 to the video code processor 4 when performing re-encoding.

ビデオコーデック装置１００がエンコーダ装置として動作する場合の処理について説明する。アナログ信号である入力映像信号は、Ａ／Ｄ器１０１によって入力映像デジタル信号に変換される。入力映像デジタル信号は、映像信号切替器１０３を経由して映像符号処理器４に入力される。映像符号処理器４では、映像符号処理が行われビデオ符号化データが生成される。ビデオ符号化データは、判断器２を経由してＲＴＰ送信処理器５に入力され、出力ＩＰパケットが出力される。このようにして、ビデオコーデック装置１００は、エンコーダ装置として、入力映像信号をＩＰパケットとして出力することができる。 A process when the video codec apparatus 100 operates as an encoder apparatus will be described. An input video signal which is an analog signal is converted by the A / D unit 101 into an input video digital signal. The input video digital signal is input to the video code processor 4 via the video signal switch 103. The video code processor 4 performs video code processing to generate video coded data. Video encoded data is input to the RTP transmission processor 5 via the determiner 2 and an output IP packet is output. Thus, the video codec apparatus 100 can output an input video signal as an IP packet as an encoder apparatus.

ビデオコーデック装置１００がデコーダ装置として動作する場合の処理について説明する。ＩＰネットワークから受信した入力ＩＰパケットは、ＲＴＰ受信処理器１と判断器２を経由して映像復号処理器３に入力される。映像復号処理器３では、映像復号処理が行われ、出力映像デジタル信号が生成される。出力映像デジタル信号は、映像信号切替器１０３を経由してＤ／Ａ器１０２に入力される。Ｄ／Ａ器１０２では、出力映像デジタル信号がアナログ信号である出力映像信号に変換され出力される。このようにして、ビデオコーデック装置１００は、デコーダ装置として、受信したＩＰパケットを出力映像信号として出力することができる。 A process when the video codec apparatus 100 operates as a decoder apparatus will be described. An input IP packet received from the IP network is input to the video decoding processor 3 via the RTP reception processor 1 and the determination unit 2. The video decoding processor 3 performs video decoding processing to generate an output video digital signal. The output video digital signal is input to the D / A unit 102 via the video signal switch 103. The D / A unit 102 converts the output video digital signal into an output video signal which is an analog signal and outputs it. Thus, the video codec apparatus 100 can output the received IP packet as an output video signal as a decoder apparatus.

次に、ビデオコーデック装置１００が、実施の形態１のように、入力機器であるＩＰカメラ装置からのビデオ符号化データを再エンコードする場合の処理について説明する。ＩＰカメラ装置からの入力ＩＰパケットは、ＲＴＰ受信処理器１を経由して判断器２に入力される。判断器２では、ビデオ符号化データのデータ量が計測される。計測されたデータ量がＣＢＲ制御の範囲内であると判断された場合、ビデオ符号化データは、そのままＲＴＰ送信処理器５に入力され、出力ＩＰパケットとして出力される。 Next, a process in the case where the video codec apparatus 100 re-encodes video encoded data from the IP camera apparatus which is an input device as in the first embodiment will be described. An input IP packet from the IP camera device is input to the determination unit 2 via the RTP reception processor 1. The judging unit 2 measures the amount of video encoded data. If it is determined that the measured amount of data is within the range of CBR control, the video encoded data is directly input to the RTP transmission processor 5 and output as an output IP packet.

一方、計測されたデータ量がＣＢＲ制御の範囲を逸脱したと判断された場合、ビデオ符号化データは映像復号処理器３に入力され復号される。また、このとき、判断器２は、制御パラメータＰ１を映像符号処理器４に出力する。復号化されたデータは、映像信号切替器１０３を経由して映像符号処理器４に入力される。映像符号処理器４では、判断器２からの解像度パラメータＰ２を利用して、エンコード処理が行われる。再エンコードされた再エンコードデータは、判断器２、ＲＴＰ送信処理器５を経由して出力ＩＰパケットとして出力される。なお、判断器２の動作については、図３に示した例と同様である。図４に示す例では、ＩＰパケットの授受に際し、ＲＴＳＰパケットを利用して処理を進めるため、ＲＴＳＰ処理器６が動作する。 On the other hand, when it is determined that the measured data amount has deviated from the CBR control range, the video encoded data is input to the video decoding processor 3 and decoded. At this time, the determiner 2 outputs the control parameter P 1 to the video code processor 4. The decoded data is input to the video code processor 4 via the video signal switch 103. In the video code processor 4, encoding processing is performed using the resolution parameter P2 from the determiner 2. The re-encoded re-encoding data is output as an output IP packet via the determination unit 2 and the RTP transmission processor 5. The operation of the determiner 2 is the same as the example shown in FIG. In the example shown in FIG. 4, the RTSP processor 6 operates in order to advance the process using the RTSP packet when transmitting and receiving the IP packet.

このように、実施の形態２にかかるビデオコーデック装置１００は、従来のエンコード装置、デコード装置として動作することができるとともに、ＩＰカメラ装置から入力されるデータ量を監視して、ＣＢＲ制御の範囲を逸脱した時間帯のビデオ符号化データを、ＣＢＲ制御の範囲内に収まるようにエンコードしなおすことが可能となる。 As described above, the video codec apparatus 100 according to the second embodiment can operate as a conventional encoding apparatus and decoding apparatus, and monitors the amount of data input from the IP camera apparatus, thereby achieving the range of CBR control. It is possible to re-encode the video encoding data of the deviated time zone so as to be within the range of CBR control.

実施の形態３．
実施の形態３に係るビデオ符号化データ変換装置について、図５を参照して説明する。図５は、実施の形態３に係るビデオ符号化データ変換装置の一例であるビデオコーデック装置１００Ａの構成を示すブロック図である。図５において、上述の図と同じ機能を有するブロックには同一の符号を付している。 Third Embodiment
A video encoded data conversion apparatus according to Embodiment 3 will be described with reference to FIG. FIG. 5 is a block diagram showing a configuration of a video codec apparatus 100A which is an example of the video coding data conversion apparatus according to the third embodiment. In FIG. 5, blocks having the same functions as those in the above-described figure are denoted by the same reference numerals.

ビデオコーデック装置は、利用場面によっては、映像の解像度をより小さくすることでデータ量を抑え込む必要が想定される。そういった場面においても柔軟に対応できるようにするには、ビデオコーデック装置に解像度変換を行うスケーラ処理器を内蔵するのが最良である。実施の形態３に係るビデオコーデック装置１００Ａは、実施の形態２のビデオコーデック装置１００の構成に加えて、スケーラ処理器１０４をさらに備えている。 It is assumed that the video codec apparatus needs to reduce the amount of data by reducing the resolution of the video depending on the use situation. In order to flexibly cope with such situations, it is best to incorporate a scaler processor that performs resolution conversion in the video codec device. The video codec apparatus 100A according to the third embodiment further includes a scaler processor 104 in addition to the configuration of the video codec apparatus 100 according to the second embodiment.

スケーラ処理器１０４は、映像信号切替器１０３と映像符号処理器４との間に設けられている。スケーラ処理器１０４は判断器２の判断結果に基づいて、ビデオ符号化データの解像度の変換を行うことができる。判断器２は、判断結果に基づき、ビデオ符号化データの解像度を変換するための解像度パラメータＰ２をスケーラ処理器１０４に送信する。スケーラ処理器１０４は、判断器２から解像度パラメータＰ２を受け取り、これを用いて解像度を変換する処理を行う。解像度変換処理を行ったデータは映像符号処理器４に入力され、ビデオ符号化データが作成される。 The scaler processor 104 is provided between the video signal switch 103 and the video code processor 4. The scaler processor 104 can convert the resolution of the video encoded data based on the determination result of the determination unit 2. The determiner 2 transmits the resolution parameter P2 for converting the resolution of the video encoded data to the scaler processor 104 based on the determination result. The scaler processor 104 receives the resolution parameter P2 from the determiner 2 and uses it to convert the resolution. The data subjected to resolution conversion processing is input to the video code processor 4 to create video coded data.

このように、実施の形態３に係るビデオコーデック装置１００Ａでは、状況に応じて、ＩＰカメラ装置から入力されるデータ量を監視して、制御パラメータＰ１を用いてＣＢＲ制御の範囲内に収まるようにエンコードしなおすことができるとともに、解像度パラメータＰ２を用いて映像の解像度を変換することによりデータ量を抑制することが可能となる。 As described above, the video codec apparatus 100A according to the third embodiment monitors the amount of data input from the IP camera apparatus according to the situation, and falls within the range of CBR control using the control parameter P1. It is possible to re-encode, and it is possible to suppress the data amount by converting the resolution of the image using the resolution parameter P2.

実施の形態４．
図６は、実施の形態のビデオ符号化データ変換装置を用いた監視システムを示す図である。図６において、上述の図面と同じ機能を有するブロックには同一の符号を付している。図６に示す例では、交差点の支柱に設置されたＩＰカメラ装置２００、カメラ２０１の監視映像が監視センタ２０７に伝送される。なお、ＩＰカメラ装置２００及びカメラ２０１と監視センタ２０７との間を結んでいるＩＰネットワーク２０６は、カメラ１台分の通信帯域しか確保できない状況であるものとする。 Fourth Embodiment
FIG. 6 is a diagram showing a monitoring system using the video coding data conversion apparatus according to the embodiment. In FIG. 6, the blocks having the same functions as those in the above-mentioned drawings are denoted by the same reference numerals. In the example shown in FIG. 6, the monitoring image of the IP camera device 200 and the camera 201 installed on the pillar of the intersection is transmitted to the monitoring center 207. It is assumed that the IP camera apparatus 200 and the IP network 206 connecting the camera 201 and the monitoring center 207 are in a state where only a communication band for one camera can be secured.

通常は、ＩＰカメラ装置２００からの映像信号が監視センタ２０７の受信端末２０８でデコードされ、映像が確認されるものとする。ＩＰカメラ装置２００には、実施の形態１のビデオコーデック装置１００を内蔵した変換装置２０３が、ＩＰネットワーク２０６を介して接続されている。変換装置２０３には、監視センタ２０７からの制御情報をやり取りする制御器２０４が設けられており、監視センタ２０７から直接制御できるようになっている。変換装置２０３及びモニタ２０２は、交差点近傍にある制御ボックス２０５内に収められている。 Normally, the video signal from the IP camera device 200 is decoded by the receiving terminal 208 of the monitoring center 207 and the video is confirmed. The conversion device 203 incorporating the video codec device 100 of the first embodiment is connected to the IP camera device 200 via the IP network 206. The conversion device 203 is provided with a controller 204 that exchanges control information from the monitoring center 207, and can be directly controlled from the monitoring center 207. The converter 203 and the monitor 202 are housed in a control box 205 near the intersection.

ＩＰネットワーク２０６には、ビデオコーデック装置１００を内蔵した変換装置２０３が接続されている。ＩＰカメラ装置２００から送出されたＩＰパケットは、変換装置２０３を経由してビデオ符号化データのデータ量に応じて、ＣＢＲ制御範囲内になるように再エンコードされる。受信端末２０８は、再エンコードされたＩＰパケットを受信する。このため、ＩＰネットワーク２０６が厳密にＣＢＲ制御を求める場合であっても、送信ビットレートを任意の通信帯域内に保つことができ、データの欠落や、伝送遅延のない、正常な通信を行うことが可能となる。 Connected to the IP network 206 is a conversion device 203 incorporating the video codec device 100. The IP packet transmitted from the IP camera device 200 is re-encoded to be within the CBR control range according to the data amount of the video encoded data via the conversion device 203. The receiving terminal 208 receives the re-encoded IP packet. Therefore, even if the IP network 206 strictly requires CBR control, the transmission bit rate can be kept within an arbitrary communication band, and normal communication without data loss or transmission delay can be performed. Is possible.

カメラ２０１は、通常は使用しない、別アングルでの映像を確認するために設置されているものとする。カメラ２０１での映像を監視センタ２０７に伝送する場合、変換装置２０３は、一旦ＩＰカメラ装置２００からのＩＰパケットの変換処理を停止する。そして、カメラ２０１の映像信号が変換装置２０３に入力される。ビデオコーデック装置１００は、従来のエンコード装置のように動作し、符号化処理されたＩＰパケットがＩＰネットワーク２０６を経由して監視センタ２０７の受信端末２０８に送出される。 It is assumed that the camera 201 is installed to check an image at another angle not normally used. When transmitting the video of the camera 201 to the monitoring center 207, the conversion device 203 temporarily stops the conversion process of the IP packet from the IP camera device 200. Then, the video signal of the camera 201 is input to the conversion device 203. The video codec apparatus 100 operates like a conventional encoding apparatus, and the encoded IP packet is sent to the receiving terminal 208 of the monitoring center 207 via the IP network 206.

モニタ２０２は、交差点においてＩＰカメラ装置２００からの映像を確認するために設けられている。変換装置２０３は、ＩＰカメラ装置２００からの映像信号を復号するデコーダ装置として動作する。一旦、ＩＰカメラ装置２００からの再エンコード処理や、カメラ２０１の映像符号処理を停止した上で、ＩＰカメラ装置２００からの映像信号を変換装置２０３で復号し、モニタ２０２に表示させることができる。なお、ＩＰカメラ装置２００の映像信号を受信する受信端末を制御ボックス２０５に収めることも可能である。 The monitor 202 is provided to confirm an image from the IP camera device 200 at an intersection. The conversion device 203 operates as a decoder device that decodes the video signal from the IP camera device 200. Once the re-encoding process from the IP camera device 200 and the video encoding process of the camera 201 are stopped, the video signal from the IP camera device 200 can be decoded by the conversion device 203 and can be displayed on the monitor 202. It is also possible to store a receiving terminal for receiving the video signal of the IP camera device 200 in the control box 205.

なお、本発明は上記実施の形態に限られたものではなく、趣旨を逸脱しない範囲で適宜変更することが可能である。 The present invention is not limited to the above embodiment, and can be appropriately modified without departing from the scope of the present invention.

１ＲＴＰ受信処理器
２判断器
３映像復号処理器
４映像符号処理器
５ＲＴＰ送信処理器
６ＲＴＳＰ処理器
７ＩＰカメラ装置
８ＩＰネットワーク
９受信端末
１０ビデオ符号化データ変換装置
１０Ａビデオ符号化データ変換装置
Ｒ１第１経路
Ｒ２第２経路
Ｐ１制御パラメータ
Ｐ２解像度パラメータ
１００ビデオコーデック装置
１０１Ａ／Ｄ器
１０２Ｄ／Ａ器
１０３映像信号切替器
１０４スケーラ処理器
２００ＩＰカメラ装置
２０１カメラ
２０２モニタ
２０３変換装置
２０４制御器
２０５制御ボックス
２０６ＩＰネットワーク
２０７監視センタ
２０８受信端末
１１カメラ
１２エンコーダ装置
１３ＩＰネットワーク
１４デコーダ装置
１５ディスプレイモニタ
１６操作端末
１７操作端末
２１撮像素子
２２エンコーダ処理回路
２３ＩＰネットワーク
２４ＲＴＳＰ処理回路
２５受信端末
３０監視エリア
３１ＩＰカメラ装置
３２カメラ
３３ビデオコーデック装置
３４ＩＰネットワーク
３５ＷＡＮ
３６監視センタ
Ｖ１０映像信号
Ｖ１１映像信号
Ｖ２０映像信号 1 RTP Reception Processor 2 Decision Unit 3 Video Decoding Processor 4 Video Code Processor 5 RTP Transmission Processor 6 RTSP Processor 7 IP Camera Device 8 IP Network 9 Receiving Terminal 10 Video Coded Data Converter 10A Video Coded Data Converter Device R1 1st route R2 2nd route P1 control parameter P2 resolution parameter 100 video codec unit 101 A / D unit 102 D / A unit 103 video signal switching unit 104 scaler processor 200 IP camera unit 201 camera 202 monitor 203 converter 204 Controller 205 Control box 206 IP network 207 Monitoring center 208 Receiving terminal 11 Camera 12 Encoder device 13 IP network 14 Decoder device 15 Display monitor 16 Operation terminal 17 Operation terminal 21 Image sensor 2 encoder processing circuit 23 IP network 24 RTSP processing circuit 25 receiving terminal 30 monitors area 31 IP camera 32 camera 33 video codec unit 34 IP network 35 WAN
36 Surveillance Center V10 Video Signal V11 Video Signal V20 Video Signal

Claims

A reception processor that receives an IP packet input via an IP network and converts it into video encoded data;
A determination unit that monitors the data amount of the video encoded data and determines whether the data amount deviates from a CBR (Constant Bit Rate) control range;
A video code processor for generating re-encoded data obtained by re-encoding the video encoded data deviating from the CBR control range to fall within the CBR control range based on the determination result of the determination unit;
A transmission processor that converts the re-encoded data into an IP packet and transmits the IP packet to the receiving terminal via the IP network;
Equipped with
Video encoded data converter.

The determiner transmits control parameters for re-encoding the video encoded data to the video code processor based on the determination result.
The video coder re-encodes the video coded data using the control parameter.
The video encoded data conversion apparatus according to claim 1.

The video code processor generates the re-encoded data by replacing the video encoded data of the video encoded data with data obtained by re-encoding the video encoded data in a time zone outside the CBR control range.
A video coding data conversion apparatus according to claim 1 or 2.

An A / D unit for converting an input video signal into an input video digital signal;
A D / A unit for converting an output video digital signal into an output video signal;
A video decoding processor for converting the video encoded data into a video digital signal to be re-encoded in the video coding processor or the output video digital signal through decoding processing;
Either the input video digital signal output from the A / D unit is input to the video code processor, or the output video digital signal from the video decoder is input to the D / A unit, or the video decoder A switch for switching whether a video digital signal from a processor is input to the video code processor;
Further comprising
The video coding data conversion apparatus according to any one of claims 1 to 3.

And a scaler processor for converting the resolution of the video encoded data based on the determination result of the determination unit.
The video coding data conversion apparatus according to any one of claims 1 to 4.

The determiner transmits, to the scaler processor, a resolution parameter for converting the resolution of the video encoded data based on the determination result.
The scaler processor converts the resolution of the video encoded data using the resolution parameter.
A video encoded data conversion apparatus according to claim 5.

Receives IP packets input via IP network and converts them into video encoded data,
The data amount of the video encoded data is monitored, and it is determined whether the data amount deviates from a CBR (Constant Bit Rate) control range, and a determination result is output.
Based on the determination result, re-encoded data is generated by re-encoding the video encoded data deviating from the CBR control range so as to fall within the CBR control range.
Converting the re-encoded data into an IP packet and transmitting it to the receiving terminal via the IP network;
Video encoded data conversion method.

A process of receiving an IP packet input via an IP network and converting it into video encoded data;
A process of monitoring the data amount of the video encoded data, determining whether the data amount deviates from a CBR (Constant Bit Rate) control range, and outputting a determination result;
A process of generating re-encoded data obtained by re-encoding the video encoded data deviating from the CBR control range based on the determination result so that the video encoded data falls within the CBR control range;
Converting the re-encoded data into an IP packet and transmitting the packet to the receiving terminal via the IP network;
Video encoded data conversion program that causes a computer to execute.