WO2017163618A1 - 映像切替装置を備えた符号化装置および映像切替検知方法を含む符号化方法 - Google Patents

映像切替装置を備えた符号化装置および映像切替検知方法を含む符号化方法 Download PDF

Info

Publication number
WO2017163618A1
WO2017163618A1 PCT/JP2017/003753 JP2017003753W WO2017163618A1 WO 2017163618 A1 WO2017163618 A1 WO 2017163618A1 JP 2017003753 W JP2017003753 W JP 2017003753W WO 2017163618 A1 WO2017163618 A1 WO 2017163618A1
Authority
WO
WIPO (PCT)
Prior art keywords
unit
video
switching
encoding
signal
Prior art date
Application number
PCT/JP2017/003753
Other languages
English (en)
French (fr)
Inventor
宮下　敦
武居　裕之
Original Assignee
株式会社日立国際電気
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 株式会社日立国際電気 filed Critical 株式会社日立国際電気
Priority to KR1020187024937A priority Critical patent/KR101944231B1/ko
Priority to US16/084,309 priority patent/US20190082119A1/en
Publication of WO2017163618A1 publication Critical patent/WO2017163618A1/ja

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/268—Signal distribution or switching
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/115—Selection of the code volume for a coding unit prior to coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124—Quantisation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/142—Detection of scene cut or scene change
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/162—User input
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/179—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a scene or a shot
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/91—Television signal processing therefor
    • H04N5/917—Television signal processing therefor for bandwidth reduction

Definitions

  • the present invention relates to a coding device including a video switching device and a coding method including a video switching detection method.
  • FIG. 3 is a block diagram for explaining a conventional video switching device.
  • the video switching device 500 includes a video switching unit 510 and an encoding device 520.
  • the video switching unit 510 includes a switch unit 511 and a camera video switching unit 112, and includes two input terminals for inputting video signals VID1 (Video1) and VID2 (Video2), and a video signal SI-VID (Selected-Video). An output terminal for outputting is provided.
  • the switch unit 511 When pressed, the switch unit 511 outputs a high-level or low-level camera switching instruction signal SW-cnt to the camera video switching unit 112.
  • the camera video switching unit 112 outputs a video signal of VID1 or VID2 based on the camera switching instruction signal SW-cnt. For example, the camera video switching unit 112 outputs VID1 when the camera switching instruction signal SW-cnt is at a low level, and outputs VID2 when the camera switching instruction signal SW-cnt is at a high level. Note that the video signals VID1, VID2 are output from the cameras 101, 102, for example.
  • the encoding device 520 includes a control unit 521, an encoding unit 130, and an SG (Sync Generator) unit 140.
  • the control unit 521 receives the bit rate control signal and the SUM, and outputs a comp control signal and an I / P0 control signal.
  • the I / P0 output from the control unit 521 is a signal that changes while shifting the target range downward for each frame from the upper part of the screen.
  • the encoding unit 130 that performs image compression includes an I (Intra-coded Picture) processing unit 131, a P (Predictive-coded Picture) processing unit 132, a selection unit 133, a buffer memory unit 134, and a decoding unit 135.
  • the encoding unit 130 generates the compressed data I-CD from the input video signal SI-VID by the I processing unit 131, the compressed data P-CD by the P processing unit 132, and the compressed data I by the selection unit 133.
  • -CD or P-CD is selected, the selected data S-CD is output to the buffer memory unit 134, and the compressed data is output from the buffer memory unit 134.
  • the decoding unit 135 decodes the S-CD and outputs the decoded video signal V-DEM to the P processing unit 132.
  • FIG. 6 is a block diagram for explaining the operation of the I processing unit.
  • the I processing unit 131 includes a transformation unit 801, a quantization unit 802, and a Huffman coding unit 803.
  • the transformation unit 801 performs, for example, DCT (Discrete Cosine Transform) transformation on the input video signal SI-VID, and a quantization unit 802.
  • the Huffman encoder 803 creates compressed data I-CD and outputs it.
  • FIG. 7 is a block diagram for explaining the operation of the P processing unit.
  • the P processing unit 132 includes a difference unit 904, a conversion unit 801, a quantization unit 802, and a Huffman coding unit 803, and the video signal SI-VID of the current frame and the video signal V- of the previous frame input by the difference unit 904.
  • the difference from the DEM is taken, the difference video signal is subjected to, for example, DCT (Discrete Cosine Transform) conversion by the conversion unit 801, and compressed data P-CD is generated and output by the quantization unit 802 and the Huffman encoding unit 803.
  • DCT Discrete Cosine Transform
  • a normal video image has the same pattern as the previous frame partially moved, and the like, and the main image is a pattern having a high correlation with the previous frame. Therefore, the difference between the previous frame video and the current frame video, called P processing, is taken, and the difference is encoded and quantized to create compressed data. Such I processing is performed on a part of the video, and P processing is performed on the other part. It should be noted that the normal video is devised so that the difference between frames is generally small and the data amount is smaller. In particular, in the case of a still image, since the pattern is almost the same as that of the previous frame, the difference is 0, and the generation of data to be newly transmitted by P processing is almost 0.
  • FIG. 4 is a timing chart for explaining the operation of FIG.
  • the range of I processing is limited to a part of the entire video, but that part is moved for each frame, the data amount increases, but accumulation of video error on the decoding side is prevented. ing.
  • the difference between the frames of a normal video is generally small, and the amount of data generated by performing P processing on most of the image is small.
  • the difference since there is no correlation with the previous frame video, the difference is large even in the difference, and therefore the amount of data to be transmitted greatly increases even in the P processing.
  • FIG. 5 is a diagram for explaining the amount of generated data and the image quality of similar and different images between frames in the I process and P process of an image.
  • FIG. 5A shows the amount of generated data when the quantization is constant. In the I process, the amount of generated data is large for both the similar image and the different image. Further, in the P process, a similar image has a small amount of generated data, and a different image has a large amount of generated data.
  • FIG. 5B shows the image quality when the data amount is constant. In I processing, the image quality of both similar and different images is poor. In P processing, similar images have good image quality and different images have poor image quality in P processing.
  • FIG. 8 is a diagram for explaining an image by conventional video switching.
  • decoding is performed after truncating a minute component of the output of the conversion unit 801
  • an error from the original video difference increases, resulting in a decrease in video reproducibility and image quality degradation.
  • This characteristic is shown in FIG. 5 and FIG.
  • each P process becomes a different image and the change increases and the amount of generated data also tends to increase. Therefore, the amount of data is reduced as rough quantization. Further, in the transition period in which the amount of generated data is increasing in each P process, the amount of data that can be allocated to the I process is also reduced. Therefore, the video to be decoded results in content with degraded image quality, with the details of the entire screen omitted.
  • Patent Document 1 in a video transmission device having an active system and at least one standby system, a digital video signal is distributed to the active system and the standby system, and the video change detector is used to decode the active system.
  • the image data amount of each video frame at the output is calculated, and when it is detected that there is no change in the image data amount of each video frame, it is switched to the standby system and output.
  • An object of the present invention is to prevent image quality deterioration at the time of switching accompanied with video signal encoding.
  • the video switching device of the present invention is a video switching device including a video switching unit having at least two video signal input units and an encoding device, and the video switching unit switches the pre-control signal and the camera according to changes in different states.
  • a switch unit that outputs two signals of the signal and a camera video switching unit that switches between the two video signals, and the encoding device generates an encoding code generated by the encoding unit by the encoding unit that encodes the video signal and the pre-control signal It has the control part which reduces quantity, It is characterized by the above-mentioned.
  • control unit performs control to restore the generated code amount of the encoding unit when a camera switching signal is output from the switch unit.
  • the video switching method of the present invention includes a step of inputting at least two video signals, a step of reducing a generated code amount by a pre-control signal, and a step of switching a video signal to be output by a camera switching signal.
  • the above-described video switching method includes a step of restoring the generated code amount when a camera switching signal is output.
  • the present invention it is possible to prevent image quality deterioration at the time of switching accompanied with video signal encoding. More specifically, the amount of generated code of the encoding unit is reduced in advance, and the amount of generated code is increased due to the new video to be switched, so that the image quality is deteriorated at the time of switching accompanying the encoding of the video signal. Can be prevented.
  • FIG. 3 is a timing chart for explaining the operation of FIG. 1. It is a block diagram for demonstrating the conventional video switching apparatus. 4 is a timing chart for explaining the operation of FIG. 3. It is a figure for demonstrating the generation data amount and image quality of the similar image and different image in the I process and P process of an image. It is a block diagram for demonstrating operation
  • FIG. 1 is a block diagram for explaining a video switching apparatus according to an embodiment of the present invention.
  • the video switching device 100 includes a video switching unit 110 and an encoding device 120.
  • the video switching unit 110 includes a switch unit 111 and a camera video switching unit 112, and includes two input terminals for inputting video signals VID1 (Video1) and VID2 (Video2), and a video signal SI-VID (Selected-Video).
  • An output terminal for outputting and an output terminal for outputting the pre-control signal PRE-SW are provided.
  • the video signals VID1, VID2 are output from the cameras 101, 102, for example.
  • the switch unit 111 outputs two types of signals depending on the pressed depth.
  • the switch unit 111 outputs a pre-control signal PRE-SW when the pressed depth is shallow, and outputs a camera switching instruction signal SW-cnt when the pressed depth becomes deep.
  • the switch unit 111 may output two types of signals according to a difference in pressing pressure such as 3D (Three Dimensions) touch. Further, not the depth at which the switch unit 111 is pressed down, but the above-described case where the switch unit 111 is pressed and released after the switch unit 111 is pressed, assuming that the above depth is shallow.
  • the same control as the detection of the shallow state and the deep state of the switch portion 111 can be realized in the same manner as described above depending on the time during which the switch portion 111 is pressed.
  • the same realization can be realized by a normal touch panel or the like. Furthermore, the same realization is possible by the number of taps on the touch panel and the sliding operation of the touch position.
  • the camera video switching unit 112 outputs a VID1 or VID2 video signal based on the video switching signal SW-cnt. For example, the camera video switching unit 112 outputs VID1 when the camera switching instruction signal SW-cnt is at a low level, and outputs VID2 when the camera switching instruction signal SW-cnt is at a high level.
  • the encoding device 120 includes a control unit 121, an encoding unit 130, and an SG (Sync Generator) unit 140.
  • the control unit 121 receives the pre-control signal PRE-SW, the bit rate control signal, and the SUM, and outputs a comp control signal and an I / P1 control signal. Note that the controller 121 may receive the camera switching instruction signal SW-cnt.
  • the encoding unit 130 that performs image compression includes an I (Intra-coded Picture) processing unit 131, a P (Predictive-coded Picture) processing unit 132, a selection unit 133, a buffer memory unit 134, and a decoding unit 135.
  • the SG unit 140 supplies a synchronization signal to the entire encoding device 120 and the video switching unit 110.
  • the description of the operations of the I processing unit 131 and the P processing unit 132 has been described with reference to FIGS.
  • the encoding unit 130 generates the compressed data I-CD from the input video signal SI-VID by the I processing unit 131, the compressed data P-CD by the P processing unit 132, and the compressed data I by the selection unit 133.
  • -CD or P-CD is selected, the selected data S-CD is output to the buffer memory unit 134, and the compressed data is output from the buffer memory unit 134.
  • the decoding unit 135 decodes the S-CD and outputs the decoded video signal V-DEM to the P processing unit 132.
  • the comp control signal (encoding target) output from the control unit 121 is a control signal for increasing / decreasing the generated code amount of I processing and P processing, and the I processing unit and P processing unit change the roughness of quantization, The generated code amount is increased or decreased.
  • the I / P1 control signal output from the control unit 121 selects a control signal to the selection unit 133, which is a code by I processing or a code of P processing. If the number of scanning lines is 1280 as selected in order from the top of the screen, the period of 1 to 64 is selected for the first frame, and the period of 65 to 128 is selected for the second frame.
  • the SUM input to the control unit 121 is a signal related to the amount of compressed data stored in the buffer memory unit 134.
  • the control unit 120 controls the quantization roughness, that is, the amount of newly generated data, with the comp control signal (encoding target) while watching the amount of SUM.
  • FIG. 2 is a timing chart for explaining the operation of FIG.
  • the operator of the camera video switching unit 112 determines whether to switch to the video signal VID2 in about 200 ms, for example, when a change in the situation is detected at the time of the video monitoring of the video signal VID1, and the switch is performed at the time The part 111 is pressed.
  • the switch unit 111 When pressed, the switch unit 111 outputs, for example, a pre-control signal PRE-SW that has been transitioned from a low level to a high level to the control unit 121 of the encoding device 120 at time c after about 30 ms.
  • a pre-control signal PRE-SW that has been transitioned from a low level to a high level to the control unit 121 of the encoding device 120 at time c after about 30 ms.
  • the control unit 121 of the encoding device 120 sets the encoding target comp to 45 Mbps, makes the quantization moderate so as to be 45 Mbps, and reduces the generation of the generated code amount S-CD. This slightly reduces the image quality of the video signal VID1.
  • the buffer accumulation code amount SUM begins to gradually decrease. Note that the amount of decrease is up to an allowable lower limit (for example, 60%).
  • the camera switching instruction signal SW-cnt that has been changed from the low level to the high level is output to the camera video switching unit 112 at a time of about 100 ms later.
  • the camera video switching unit 112 switches the video signal SI-VID to be output from the video signal VID1 to the video signal VID2.
  • the control unit 121 returns the encoding target comp from 45 Mbps to 60 Mbps at time d.
  • the selection unit 133 greatly increases the selection ratio of the I process because the video is significantly different from the previous frame at time d. Along with this, the generated code amount S-CD output from the selection unit 133 also increases. However, since the buffer storage code amount SUM has already decreased, the generated code amount S-CD amount is increased. There is no need to suppress the extreme. Even if it temporarily exceeds 60 Mbps, the buffer accumulated code amount SUM can be moderately quantized. As a result, the image quality of the video signal VID2 can be maintained.
  • the buffer accumulated code amount SUM of the buffer memory unit 134 reaches a predetermined amount, and the control unit 121 is notified of this state from the buffer accumulated code amount SUM and suppresses the generated code amount S-CD. Return to normal operation.
  • the video switching device can prevent image quality deterioration at the time of switching accompanied with video signal encoding.
  • image quality deterioration is prevented at the time of switching accompanying video signal encoding. Can do.
  • the switch switching in that case may have the number of paths.
  • the I processing unit 131 includes the quantization unit 802 and the Huffman coding unit 803, a configuration in which quantization processing and Huffman processing are provided after the selection unit 133 may be employed.
  • the P processing unit may have the same configuration as described above.
  • the buffer memory section can be afforded by reducing the encoding target before switching the video signal, it can be applied to applications where it is desired to prevent image quality deterioration at the time of switching accompanied by video signal encoding.

Abstract

課題：　本発明の目的は、映像信号の符号化を伴う切替時に画質劣化を防止することである。　解決手段：　本発明の映像切替装置は、少なくとも２つの映像信号入力部を有する映像切替部と符号化装置とを備えた映像切替装置であって、映像切替部は異なる状態の変化によりプレ制御信号とカメラ切替信号の２つ信号を出力するスイッチ部と、２つの映像信号を切替えるカメラ映像切替部を有し、符号化装置は映像信号を符号化する符号化部とプレ制御信号により符号化部の発生符号量を低減させる制御部を有することを特徴とする。

Description

映像切替装置を備えた符号化装置および映像切替検知方法を含む符号化方法
　本発明は、映像切替装置を備えた符号化装置および映像切替検知方法を含む符号化方法に関するものである。
　従来の映像切替装置について、図３～図８を用いて説明する。
　図３は従来の映像切替装置を説明するためのブロック図である。
　映像切替装置５００は、映像切替部５１０と符号化装置５２０で構成されている。
　映像切替部５１０は、スイッチ部５１１とカメラ映像切替部１１２で構成され、映像信号ＶＩＤ１(Video1)，ＶＩＤ２(Video2)を入力する２つの入力端子と、映像信号ＳＩ－ＶＩＤ（Selected-Video）を出力する出力端子を有している。
　スイッチ部５１１は、押下されると、高レベルまたは低レベルのカメラ切替指示信号ＳＷ－ｃｎｔをカメラ映像切替部１１２に出力する。
　カメラ映像切替部１１２は、カメラ切替指示信号ＳＷ－ｃｎｔに基づいてＶＩＤ１またはＶＩＤ２の映像信号を出力する。カメラ映像切替部１１２は、例えば、カメラ切替指示信号ＳＷ－ｃｎｔが低レベルの場合にはＶＩＤ１を出力し、カメラ切替指示信号ＳＷ－ｃｎｔが高レベルの場合にはＶＩＤ２を出力する。
　なお、映像信号ＶＩＤ１，ＶＩＤ２は、例えば、カメラ１０１，１０２等から出力される。
　符号化装置５２０は、制御部５２１と符号化部１３０とＳＧ（Sync　Generator）部１４０で構成されている。
　制御部５２１は、ビットレート制御信号とＳＵＭを入力し、ｃｏｍｐ制御信号とＩ／Ｐ０制御信号を出力する。
　また、制御部５２１から出力するＩ／Ｐ０は、画面上部からフレーム毎に対象範囲を下段にズラしながら変化する信号である。
　画像圧縮を行う符号化部１３０は、Ｉ（Intra-coded　Picture）処理部１３１、Ｐ（Predictive-coded　Picture）処理部１３２、選択部１３３、バッファメモリ部１３４、復号部１３５で構成されている。
　符号化部１３０は、入力された映像信号ＳＩ－ＶＩＤをＩ処理部１３１で圧縮データＩ－ＣＤを生成し、Ｐ処理部１３２で圧縮データＰ－ＣＤを生成し、選択部１３３で圧縮データＩ－ＣＤまたはＰ－ＣＤを選択し、選択したデータＳ－ＣＤをバッファメモリ部１３４に出力し、バッファメモリ部１３４から圧縮データを出力する。なお、復号部１３５はＳ－ＣＤを復号し、復号した映像信号Ｖ－ＤＥＭをＰ処理部１３２に出力する。
　図６はI処理部の動作を説明するためのブロック図である。
　I処理部１３１は、変換部８０１、量子化部８０２、ハフマン符号部８０３で構成され、入力された映像信号ＳＩ－ＶＩＤを変換部８０１で例えばＤＣＴ（Discrete　Cosine　Transform）変換し、量子化部８０２とハフマン符号部８０３で圧縮データＩ－ＣＤを作成して出力する。
　図７はＰ処理部の動作を説明するためのブロック図である。
　Ｐ処理部１３２は、差分部９０４、変換部８０１、量子化部８０２、ハフマン符号部８０３で構成され、差分部９０４で入力された現フレームの映像信号ＳＩ－ＶＩＤと前フレームの映像信号Ｖ－ＤＥＭとの差分をとり、差分の映像信号を変換部８０１で例えばＤＣＴ（Discrete　Cosine　Transform）変換し、量子化部８０２とハフマン符号部８０３で圧縮データＰ－ＣＤを作成して出力する。
　符号化部１３０において、通常の映像は、前フレームと同一の絵柄が、一部位置移動した等となり、前フレームと相関の高い絵柄が主体となる。そこで、Ｐ処理と呼ばれる、前フレーム映像と現フレーム映像の差分を取り、その差分を符号化＆量子化を行ない、圧縮データを作成する。
　このような、Ｉ処理を映像の一部分に行い、他の部分は、Ｐ処理を行う。
　なお、通常の映像は、フレーム間での差分は概ね少なく、より少ないデータ量となるよう工夫している。特に静止画であれば、前フレームとほぼ同一な絵柄となるため、差分は０になり、Ｐ処理で新たに送るデータ発生は、ほぼ０となる。
　図４は図３の動作を説明するためのタイミングチャートである。
　図４に示すように、Ｉ処理の範囲を全体映像の一部分に制限しているが、その部分をフレーム毎に移動させ、データ量は増加するが、復号側での映像誤差の蓄積を防止している。
　ところで、通常の映像は、フレーム間での差分は概ね少なく、画像の大部分をＰ処理することでの発生データ量は少ない。
　しかし、映像制作の都合により、別なカメラ映像に切替えを行う運用がある。この場合、前フレーム映像との相関性は無くなるため、差分であっても変化が大きく、そのためＰ処理であっても、送るべきデータ量が大きく増加する。また符号発生量に制約をつける必要があり、粗い量子化を行い、微小成分の切り捨てを行い、発生データ量を低減する。
　図５は画像のＩ処理およびＰ処理におけるフレーム間での類似画像と異種画像の発生データ量と画質を説明するための図である。
　図５（Ａ）は量子化を一定にした場合の発生データ量を示している。Ｉ処理において、類似画像と異種画像共に発生データ量は大である。また、Ｐ処理において、類似画像は発生データ量が小であり、異種画像は発生データ量が大である。
　図５（Ｂ）はデータ量を一定にした場合の画質を示している。Ｉ処理において、類似画像と異種画像共に画質は悪い。また、Ｐ処理において、Ｐ処理において、類似画像は画質が良あり、異種画像は画質が悪い。
　図８は従来の映像切替による画像を説明するための図である。
　変換部８０１出力の微小成分を切り捨てた後に復号した場合に、元の映像差分との誤差が増加し、結果として映像の再現性が低下、画質劣化となる。この特性を図５、および図８に示す。
　図８において、３フレーム目（ｃ）は、絵柄全体が変更されたため、各Ｐ処理は異種画像となり変化が増大、発生データ量も増加傾向となるため、粗い量子化として、データ量を減らす。
　また、各Ｐ処理にて発生データ量が増加傾向にある過渡期において、Ｉ処理への割当て可能データ量も減らす状態となる。そのため、復号される映像は、結果的に画面全体の細部が省略された画質劣化した内容となる。
　先行技術文献として、例えば、特許文献１では、現用系と少なくとも１つの予備系を有する映像送出装置において、デジタル映像信号を現用系と予備系に分配し、映像変化検知器で、現用系の復号出力における各映像フレームの画像データ量を算出し、各映像フレームの画像データ量に変化がないことを検知したとき、予備系に切替えて出力するようにしている。
特開２００７－４３５２０号公報
　本発明の目的は、映像信号の符号化を伴う切替時に画質劣化を防止することである。
　本発明の映像切替装置は、少なくとも２つの映像信号入力部を有する映像切替部と符号化装置とを備えた映像切替装置であって、映像切替部は異なる状態の変化によりプレ制御信号とカメラ切替信号の２つ信号を出力するスイッチ部と、２つの映像信号を切替えるカメラ映像切替部を有し、符号化装置は映像信号を符号化する符号化部とプレ制御信号により符号化部の発生符号量を低減させる制御部を有することを特徴とする。
　また、制御部は、スイッチ部からカメラ切替信号が出力されると、符号化部の発生符号量を元に戻す制御を行うことが好ましい。
　また、本発明の映像切替方法は、少なくとも２つの映像信号を入力するステップと、プレ制御信号により発生符号量を低減させるステップと、カメラ切替信号により出力する映像信号を切替えるステップとを有することを特徴とする。
　さらに、上述の映像切替方法は、カメラ切替信号が出力されると発生符号量を元に戻すステップを有することが好ましい。
　本発明によれば、映像信号の符号化を伴う切替時に画質劣化を防止することができる。より具体的には、符号化部の発生符号量を予め低減しておき、切替えられる新たな映像に起因して増加する発生符号量に備えることで、映像信号の符号化を伴う切替時に画質劣化を防止することができる。
本発明の一実施例に係る映像切替装置を説明するためのブロック図である。 図１の動作を説明するためのタイミングチャートである。 従来の映像切替装置を説明するためのブロック図である。 図３の動作を説明するためのタイミングチャートである。 画像のＩ処理およびＰ処理における類似画像と異種画像の発生データ量と画質を説明するための図である。 Ｉ処理部の動作を説明するためのブロック図である。 Ｐ処理部の動作を説明するためのブロック図である。 従来の映像切替による画像を説明するための図である。
　以下、本発明の実施形態について図面を参照して詳細に説明する。
　図１は本発明の一実施例に係る映像切替装置を説明するためのブロック図である。
　図１において、映像切替装置１００は、映像切替部１１０と符号化装置１２０で構成されている。
　映像切替部１１０は、スイッチ部１１１とカメラ映像切替部１１２で構成され、映像信号ＶＩＤ１(Video1)，ＶＩＤ２(Video2)を入力する２つの入力端子と、映像信号ＳＩ－ＶＩＤ（Selected-Video）を出力する出力端子と、プレ制御信号ＰＲＥ－ＳＷを出力する出力端子を有している。
　なお、映像信号ＶＩＤ１，ＶＩＤ２は、例えば、カメラ１０１，１０２等から出力される。
　スイッチ部１１１は、押下される深さにより２種類の信号を出力する。
　スイッチ部１１１は、押下される深さが浅い場合にはプレ制御信号ＰＲＥ－ＳＷを出力し、押下される深さが深くなった場合にはカメラ切替指示信号ＳＷ－ｃｎｔを出力する。
　なお、スイッチ部１１１は、３Ｄ（Three　Dimensions）タッチのような押し圧の違いにより、２種類の信号を出力するものであってもよい。
　また、スイッチ部１１１が押下される深さではなく、スイッチ部１１１が押下されたことをきっかけに上記の深さが浅い場合として、スイッチ部１１１が押下された後にリリースされたことをきっかけに上記の深さが深くなった場合とすれば、スイッチ部１１１を押下している時間により、上記同様にスイッチ部１１１の深さが浅い状態と深い状態の検出と同様の制御が実現可能となる。このようなスイッチ部１１１の異なる状態の変化を基に制御にすることで、通常のタッチパネル等によっても同様の実現が可能となる。更には、タッチパネルでのタップ数や、タッチ位置のスライド操作によっても同様の実現が可能となる。
　カメラ映像切替部１１２は、映像切替信号ＳＷ－ｃｎｔに基づいてＶＩＤ１またはＶＩＤ２の映像信号を出力する。カメラ映像切替部１１２は、例えば、カメラ切替指示信号ＳＷ－ｃｎｔが低レベルの場合にはＶＩＤ１を出力し、カメラ切替指示信号ＳＷ－ｃｎｔが高レベルの場合にはＶＩＤ２を出力する。
　符号化装置１２０は、制御部１２１と符号化部１３０とＳＧ（Sync　Generator）部１４０で構成されている。
　制御部１２１は、プレ制御信号ＰＲＥ－ＳＷとビットレート制御信号とＳＵＭを入力し、ｃｏｍｐ制御信号とＩ／Ｐ１制御信号を出力する。
　なお、制御部１２１は、カメラ切替指示信号ＳＷ－ｃｎｔを入力するようにしてもよい。
　画像圧縮を行う符号化部１３０は、Ｉ（Intra-coded　Picture）処理部１３１、Ｐ（Predictive-coded　Picture）処理部１３２、選択部１３３、バッファメモリ部１３４、復号部１３５で構成されている。
　ＳＧ部１４０は、符号化装置１２０および映像切替部１１０の全体に同期信号を供給するものである。
　なお、Ｉ処理部１３１とＰ処理部１３２の動作説明は、上述の図６と図７で説明しているため省略する。
　符号化部１３０は、入力された映像信号ＳＩ－ＶＩＤをＩ処理部１３１で圧縮データＩ－ＣＤを生成し、Ｐ処理部１３２で圧縮データＰ－ＣＤを生成し、選択部１３３で圧縮データＩ－ＣＤまたはＰ－ＣＤを選択し、選択したデータＳ－ＣＤをバッファメモリ部１３４に出力し、バッファメモリ部１３４から圧縮データを出力する。なお、復号部１３５はＳ－ＣＤを復号し、復号した映像信号Ｖ－ＤＥＭをＰ処理部１３２に出力する。
　制御部１２１から出力するｃｏｍｐ制御信号（符号化目標）は、Ｉ処理とＰ処理の発生符号量を増減させる制御信号、Ｉ処理部とＰ処理部は量子化の粗さを変化させることで、発生符号量を増減させるものである。
　また、制御部１２１から出力するＩ／Ｐ１制御信号は、選択部１３３への制御信号、Ｉ処理による符号か、Ｐ処理の符号かを選択する。画面の上部から順番に選択されるように、走査線１２８０本であれば、１フレーム目は１～６４本の期間、２フレーム目は６５本～１２８本の期間・・・を選択する。
　また、制御部１２１に入力するＳＵＭは、バッファメモリ部１３４に貯まった圧縮データ量に関する信号である。
　制御部１２０は、ＳＵＭの量の多少を見ながら、ｃｏｍｐ制御信号（符号化目標）にて量子化粗さ、すなわち新たな発生データ量の多少をコントロールする。
　図２は、図１の動作を説明するためのタイミングチャートである。
　図２において、カメラ映像切替部１１２の操作者は、例えば、映像信号ＶＩＤ１の画像監視で状況変化を時刻アで検出した場合に映像信号ＶＩＤ２への切替判断を約２００ｍｓで行い、時刻イでスイッチ部１１１を押下する。
　スイッチ部１１１は、押下されると、例えば、約３０ｍｓ後の時刻ウで、低レベルから高レベルに遷移させたプレ制御信号ＰＲＥ－ＳＷを符号化装置１２０の制御部１２１に出力する。
　符号化装置１２０の制御部１２１は、例えば、符号化目標ｃｏｍｐを４５Ｍｂｐｓとし、４５Ｍｂｐｓとなるように　量子化を中程度とし、発生符号量Ｓ－ＣＤの発生を減らす。このことにより、映像信号ＶＩＤ１の画質が僅かに低下する。
　バッファ蓄積符号量ＳＵＭは徐々に低下し始める。なお、低下量は許容下限（例えば、６０％）までとする。
　スイッチ部１１１は、さらに押下されると、例えば、約１００ｍｓ後の時刻エで、低レベルから高レベルに遷移させたカメラ切替指示信号ＳＷ－ｃｎｔをカメラ映像切替部１１２に出力する。
　カメラ映像切替部１１２は、出力する映像信号ＳＩ－ＶＩＤを映像信号ＶＩＤ１から映像信号ＶＩＤ２に切替える。
　制御部１２１は、時刻エにおいて、符号化目標ｃｏｍｐを４５Ｍｂｐｓから６０Ｍｂｐｓに戻す。
　選択部１３３は、時刻エにおいて、映像が前フレームと大きく異なることから、Ｉ処理の選択比率が大幅に高まる。
　それに伴い、選択部１３３から出力する発生符号量Ｓ－ＣＤも増加するが、それを貯め込むバッファメモリ部１３４は、バッファ蓄積符号量ＳＵＭが既に少なくなっているため、発生符号量Ｓ－ＣＤ量を極端に抑える必要は無い。
　一時的に６０Ｍｂｐｓを越えた発生であっても、バッファ蓄積符号量ＳＵＭは中程度の量子化で済む。
　結果として、映像信号ＶＩＤ２の画質の維持が可能となる。
　時刻オにおいて、バッファメモリ部１３４のバッファ蓄積符号量ＳＵＭが所定量に到達し、この状態を制御部１２１はバッファ蓄積符号量ＳＵＭから通知を受け、発生符号量Ｓ－ＣＤを抑制するため、量子化を通常動作に戻す。
　本発明の実施形態である映像切替装置は、映像信号の符号化を伴う切替時に画質劣化を防止することができる。特に、符号化部の発生符号量を予め低減しておき、切替えられる新たな映像に起因して増加する発生符号量に備えることで、映像信号の符号化を伴う切替時に画質劣化を防止することができる。
　以上、本発明の一実施形態について詳細に説明したが、本発明は上述した実施形態に限定されるものではなく、本発明の趣旨を逸脱しない範囲で種々変更して実施することができる。
　更に、本発明の一実施形態についてカメラ２台を切り替える場合について詳細に説明したが、３台以上のカメラを切り替える場合の切替装置であっても同様効果を得られる。また、その場合のスイッチの切り替えは、経路数分を有する場合もある。
　更に、Ｉ処理部１３１に量子化部８０２やハフマン符号化部８０３を含む構成を前提としたが、選択部１３３の後段に量子化処理やハフマン処理を設ける構成としてもよい。なお、Ｐ処理部に関しても、上記と同様な構成としてもよい。
　この出願は、２０１６年３月２４日に出願された日本出願特願２０１６－０６０４１３を基礎として優先権の利益を主張するものであり、その開示の全てを引用によってここに取り込む。
　映像信号を切替える前に符号化目標を低減させることによって、バッファメモリ部に余裕ができるので、映像信号の符号化を伴う切替時の画質劣化を防止したい用途に適用できる。
　１００，５００：映像切替装置、１０１，１０２：カメラ、１１０，５１０：映像切替部、１１１，５１１：スイッチ部、１１２：カメラ映像切替部、１２０，３２０，５２０：符号化装置、１２１，３２１，５２１：制御部、１３０：符号化部、１３１：Ｉ処理部、１３２：Ｐ処理部、１３３：選択部、１３４：バッファメモリ部、１３５：復号部、１４０：ＳＧ部、８０１：変換部、８０２：量子化部、８０３：ハフマン符号部、９０４：差分部。

Claims (4)

  1. 　少なくとも２つの映像信号入力部を有する映像切替部と符号化装置とを備えた映像切替装置であって、
    　前記映像切替部は、異なる状態の変化によりプレ制御信号とカメラ切替信号の２つ信号を出力するスイッチ部と、２つの映像信号を切替えるカメラ映像切替部を有し、
    　前記符号化装置は、映像信号を符号化する符号化部と、前記プレ制御信号により前記符号化部の発生符号量を低減させる制御部を有することを特徴とする映像切替装置。
  2. 　請求項１に記載の映像切替装置であって、
    　前記制御部は、前記スイッチ部からカメラ切替信号が出力されると、前記符号化部の発生符号量を元に戻す制御を行うことを特徴とする映像切替装置。
  3. 　少なくとも２つの映像信号を入力するステップと、プレ制御信号により発生符号量を低減させるステップと、カメラ切替信号により出力する映像信号を切替えるステップとを有することを特徴とする映像切替方法。
  4. 　請求項３に記載の映像切替方法であって、
    　カメラ切替信号が出力されると発生符号量を元に戻すステップとを有することを特徴とする映像切替方法。
PCT/JP2017/003753 2016-03-24 2017-02-02 映像切替装置を備えた符号化装置および映像切替検知方法を含む符号化方法 WO2017163618A1 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020187024937A KR101944231B1 (ko) 2016-03-24 2017-02-02 영상 전환 장치를 구비한 부호화 장치 및 영상 전환 검지 방법을 포함하는 부호화 방법
US16/084,309 US20190082119A1 (en) 2016-03-24 2017-02-02 Encoding device comprising video switching device, encoding method including video switching detection method

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2016-060413 2016-03-24
JP2016060413A JP6168671B1 (ja) 2016-03-24 2016-03-24 映像切替装置を備えた符号化装置および映像切替検知方法を含む符号化方法

Publications (1)

Publication Number Publication Date
WO2017163618A1 true WO2017163618A1 (ja) 2017-09-28

Family

ID=59384377

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2017/003753 WO2017163618A1 (ja) 2016-03-24 2017-02-02 映像切替装置を備えた符号化装置および映像切替検知方法を含む符号化方法

Country Status (4)

Country Link
US (1) US20190082119A1 (ja)
JP (1) JP6168671B1 (ja)
KR (1) KR101944231B1 (ja)
WO (1) WO2017163618A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7304453B1 (ja) 2022-03-03 2023-07-06 Ｎｔｔエレクトロニクス株式会社 符号化装置、符号化方法および符号化プログラム

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000278695A (ja) * 1999-03-23 2000-10-06 Nec Corp 動画像符号化装置及び遠隔画像監視システム
JP2001128165A (ja) * 1999-10-27 2001-05-11 Nec Corp 映像信号切替え装置及びその映像信号切替え方式
JP2007124580A (ja) * 2005-10-31 2007-05-17 Fujitsu Ltd 動画像符号化プログラム、プログラム記憶媒体、および符号化装置。

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10276365A (ja) * 1997-03-31 1998-10-13 Hitachi Ltd 映像データ圧縮装置、映像記録再生装置および映像データの圧縮符号化方法
WO2001003431A1 (fr) * 1999-07-05 2001-01-11 Hitachi, Ltd. Procede et dispositif d'enregistrement video, procede et dispositif de reproduction video, et support d'enregistrement
JP2001204018A (ja) * 2000-01-18 2001-07-27 Matsushita Electric Ind Co Ltd 可変ビットレート符号化装置及び符号化方法
JP2004032459A (ja) * 2002-06-27 2004-01-29 Hitachi Ltd 監視システム、およびこれに用いるコントローラと監視端末
US7738011B2 (en) * 2004-09-21 2010-06-15 Hitachi Kokusai Electric Inc. Camera control system
JP4860958B2 (ja) 2005-08-04 2012-01-25 株式会社日立国際電気 現用系と予備系を有する映像送出装置
US9113147B2 (en) * 2005-09-27 2015-08-18 Qualcomm Incorporated Scalability techniques based on content information
EP1995920A4 (en) * 2006-03-14 2011-11-09 Nec Corp BUFFER MEMORY CONTROL METHOD, RELAY DEVICE, AND COMMUNICATION SYSTEM
JP5894697B1 (ja) * 2015-06-03 2016-03-30 株式会社日本ビデオシステム 映像切替装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000278695A (ja) * 1999-03-23 2000-10-06 Nec Corp 動画像符号化装置及び遠隔画像監視システム
JP2001128165A (ja) * 1999-10-27 2001-05-11 Nec Corp 映像信号切替え装置及びその映像信号切替え方式
JP2007124580A (ja) * 2005-10-31 2007-05-17 Fujitsu Ltd 動画像符号化プログラム、プログラム記憶媒体、および符号化装置。

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
YASUHIRO ISHIKAWA ET AL.: "Study the encoding process by the video switching method", ITE TECHNICAL REPORT, vol. 40, no. 14, 4 March 2016 (2016-03-04), pages 37 - 40 *

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7304453B1 (ja) 2022-03-03 2023-07-06 Ｎｔｔエレクトロニクス株式会社 符号化装置、符号化方法および符号化プログラム

Also Published As

Publication number Publication date
KR20180101608A (ko) 2018-09-12
JP6168671B1 (ja) 2017-07-26
KR101944231B1 (ko) 2019-01-30
US20190082119A1 (en) 2019-03-14
JP2017175428A (ja) 2017-09-28

Similar Documents

Publication Publication Date Title
EP1170957B1 (en) Video encoding and decoding apparatus
WO2017163619A1 (ja) 映像切替装置を備えた符号化装置および映像切替検知方法を含む符号化方法
JP3651706B2 (ja) 動画像符号化装置
WO2017163618A1 (ja) 映像切替装置を備えた符号化装置および映像切替検知方法を含む符号化方法
US10735773B2 (en) Video coding techniques for high quality coding of low motion content
JP4357560B2 (ja) 動画像符号化装置、動画像符号化方法及び動画像符号化プログラム
US7408985B2 (en) Moving picture coding apparatus and method
KR100414339B1 (ko) 부호화 장치, 복호화 장치, 기지국 장치 및 통신 단말 장치와 동화상 신호의 부호화 방법 및 복호화 방법
KR101774237B1 (ko) 적응적 부호화 구조를 이용한 영상의 부호화 방법 및 이를 이용한 인코딩 시스템
JP2010213187A (ja) 映像符号化伝送装置
JP2004208146A (ja) 動画像符号化装置および動画像符号化方法
JP6027158B2 (ja) 符号化装置を備えた映像切替装置および符号化方法を含む映像切替方法
JP3891198B2 (ja) 復号装置及び方法、並びに伝送装置及び方法
US8345992B2 (en) Method and device of image encoding and image processing apparatus
KR100397133B1 (ko) 영상 데이터 압축 전송 시스템 및 그 방법
KR20150102874A (ko) 적응적 부호화 방법을 이용한 영상의 부호화 방법 및 이를 이용한 인코딩 장치
JP4734301B2 (ja) 量子化誤差低減装置
KR100669621B1 (ko) 동영상 디코더의 참조 영상 변경 제어방법
JP2006345166A (ja) 画像圧縮処理装置
JP2005072846A (ja) 動画像符号化装置及び動画像処理方法
JP2005094801A (ja) 動画像復号化装置及び動画像符号化装置
JP2016213698A (ja) 映像符号化装置及びプログラム
JP2002016927A (ja) 動画像符号化方法および動画像伝送方法
JP2005277982A (ja) 画像圧縮処理装置

Legal Events

Date Code Title Description
ENP Entry into the national phase

Ref document number: 20187024937

Country of ref document: KR

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 17769665

Country of ref document: EP

Kind code of ref document: A1

122 Ep: pct application non-entry in european phase

Ref document number: 17769665

Country of ref document: EP

Kind code of ref document: A1