JP2008205684A

JP2008205684A - Color adjustment unit

Info

Publication number: JP2008205684A
Application number: JP2007037669A
Authority: JP
Inventors: Toshiyuki Yoshitake; 敏幸吉武
Original assignee: Fujitsu Ltd
Current assignee: Fujitsu Ltd
Priority date: 2007-02-19
Filing date: 2007-02-19
Publication date: 2008-09-04

Abstract

<P>PROBLEM TO BE SOLVED: To provide a color adjustment unit enabling acquisition of higher presence than ever before, when being applied to a system simultaneously outputting video and voice, such as a television set and a DVD recorder. <P>SOLUTION: A voice analysis block 11 performs analysis by inputting a voice signal being output from a voice input block 10, and calculates a voice intensity index Q. Also, a video analysis block 15 performs analysis by inputting a video signal being output from a video input block 14. Using the voice analysis result (voice intensity index Q) obtained by the voice analysis block 11 and the video analysis result obtained by the video analysis block 15, in regard to the video signal being output from the video analysis block 15, a color adjustment block 16 adjusts a dynamic range so that the screen becomes darker when the voice is quiet, and that the screen becomes brighter when the voice is intense. <P>COPYRIGHT: (C)2008,JPO&INPIT

Description

本発明は、テレビやＤＶＤレコーダ等のように、映像と音声を同時に出力するシステムに使用して好適な色調整装置に関する。 The present invention relates to a color adjustment apparatus suitable for use in a system that outputs video and audio simultaneously, such as a television or a DVD recorder.

近年、デジタル放送によるハイビジョン放送の普及に伴い、テレビやＤＶＤレコーダ等の高画質化が進んでいる。テレビやＤＶＤレコーダ等が備える高画質化機能として、インタレース・プログレッシブ変換、ノイズ除去、輪郭強調、色調整などの機能があり、これらの機能により表示品質の向上や見易さの向上が図られている。 In recent years, with the spread of high-definition broadcasting by digital broadcasting, the image quality of televisions and DVD recorders has been improved. The high image quality functions of TVs and DVD recorders include interlace / progressive conversion, noise removal, edge enhancement, and color adjustment. These functions improve display quality and ease of viewing. ing.

このような高画質化機能の中で、色調整機能は、重要な処理の一つであり、入力された映像の各画素のＲＧＢ値やＹＵＶ値を変更して、色表示を調整する機能である。代表的な色調整には、ダイナミックレンジ調整と、色合い調整がある。 Among these image quality enhancement functions, the color adjustment function is one of important processes, and is a function that adjusts the color display by changing the RGB value or YUV value of each pixel of the input video. is there. Typical color adjustment includes dynamic range adjustment and hue adjustment.

色調整におけるダイナミックレンジ調整は、画面の輝度分布の偏りを調整する処理である。図６は色調整におけるダイナミックレンジの調整例を示しており、（Ａ）は入力画像のヒストグラム、（Ｂ）はダイナミックレンジ調整後の出力画像のヒストグラムであり、縦軸に輝度レベル、横軸に画素数を取っている。 The dynamic range adjustment in the color adjustment is a process for adjusting the bias of the luminance distribution on the screen. FIG. 6 shows an example of dynamic range adjustment in color adjustment, where (A) is a histogram of an input image, (B) is a histogram of an output image after dynamic range adjustment, the vertical axis represents the luminance level, and the horizontal axis represents The number of pixels is taken.

カメラで撮影した映像や放送された映像は、全体的に暗かったり、明るかったりして、輝度レベルに偏りがあることがある。例えば、本来の輝度レベルの範囲が０〜２５５とされ、０が黒レベル、２５５が白レベルとされる場合において、本来２５５の値で表示されるべき白レベルの画素の輝度レベルが２００程度の値になっていることがある。 The video shot by the camera and the broadcasted video may be dark or bright as a whole, and the luminance level may be biased. For example, when the range of the original luminance level is 0 to 255, 0 is the black level, and 255 is the white level, the luminance level of the white level pixel that should be displayed with a value of 255 is about 200. May be a value.

この場合には、画面の輝度レベルの範囲が０〜２５５となるように白レベルを２５５に引き上げて、全体の輝度分布の調整を行う必要がある。これがダイナミックレンジの調整であり、これによって映像の陰影がはっきりし、見易さが向上する。 In this case, it is necessary to adjust the overall luminance distribution by raising the white level to 255 so that the range of the luminance level of the screen is 0 to 255. This is dynamic range adjustment, which makes the shadow of the image clear and easy to see.

また、色合い調整は、色の偏りを調整する処理である。カメラで撮影した映像や放送された映像は、全体的に緑みが強かったり、赤みが強かったりする。これらを調整して自然な色合いに調整する処理が色合い調整である。 The color tone adjustment is a process for adjusting the color deviation. The video shot by the camera and the broadcasted video are generally greenish or reddish overall. The process of adjusting these to a natural color tone is color tone adjustment.

従来、色調整は、映像を解析して得られる映像解析結果のみを使用して行われていた。図７は従来の色調整装置の一例を備える映像音声処理装置の要部を示すブロック回路図である。図７中、１は音声入力ブロック、２は音声処理ブロック、３は音声出力ブロック、４は映像入力ブロック、５は映像解析ブロック、６は色調整ブロック、７は映像出力ブロックであり、映像解析ブロック５と色調整ブロック６とで従来の色調整装置８が構成されている。 Conventionally, color adjustment has been performed using only video analysis results obtained by analyzing video. FIG. 7 is a block circuit diagram showing a main part of a video / audio processing apparatus having an example of a conventional color adjusting apparatus. In FIG. 7, 1 is an audio input block, 2 is an audio processing block, 3 is an audio output block, 4 is a video input block, 5 is a video analysis block, 6 is a color adjustment block, and 7 is a video output block. The block 5 and the color adjustment block 6 constitute a conventional color adjustment device 8.

音声入力ブロック１は音声信号を入力するためのブロックである。音声処理ブロック２は、音声入力ブロック１が出力する音声信号を入力し、ノイズの除去や、映像信号との間の遅延調整を行うブロックである。音声出力ブロック３は音声処理ブロック２が出力する音声信号を外部に出力するためのブロックであり、音声出力ブロック３が出力する音声信号はスピーカに与えられる。 The voice input block 1 is a block for inputting a voice signal. The audio processing block 2 is a block that receives the audio signal output from the audio input block 1 and performs noise removal and delay adjustment with the video signal. The audio output block 3 is a block for outputting the audio signal output from the audio processing block 2 to the outside, and the audio signal output from the audio output block 3 is given to a speaker.

映像入力ブロック４は映像信号を入力するためのブロックである。映像解析ブロック５は、映像入力ブロック４が出力する映像信号を入力して映像解析を行い、映像解析結果として、輝度レベルのヒストグラムや、ＲＧＢのそれぞれの値の分布、隣接画素間の輝度値の差分によるエッジ情報などを得るためのブロックである。 The video input block 4 is a block for inputting a video signal. The video analysis block 5 inputs the video signal output from the video input block 4 and performs video analysis. As a video analysis result, a luminance level histogram, a distribution of RGB values, and a luminance value between adjacent pixels are calculated. This is a block for obtaining edge information by difference.

色調整ブロック６は、映像解析ブロック５が出力する映像信号及び映像解析結果を入力し、映像解析結果に基づいて映像信号について色調整を行うブロックであり、色調整は、ルックアップテーブルによる輝度値の変換や、変換式による輝度値の補正などにより行われる。映像出力ブロック７は色調整ブロック６が出力する色調整された映像信号を外部に出力するためのブロックであり、映像出力ブロック７が出力する映像信号はディスプレイに与えられる。
特公平８−２１０９号公報 The color adjustment block 6 is a block that inputs the video signal output from the video analysis block 5 and the video analysis result, and performs color adjustment on the video signal based on the video analysis result. Conversion or correction of the luminance value by a conversion formula. The video output block 7 is a block for outputting the color-adjusted video signal output from the color adjustment block 6 to the outside, and the video signal output from the video output block 7 is given to the display.
Japanese Patent Publication No.8-2109

図７に示す従来の色調整装置８においては、色調整は、映像解析ブロック５で得られた映像解析結果のみを使用して行われているが、例えば、音声の激しさに対応した色調整を行うことができれば、これまでにない高い臨場感を得ることが可能である。 In the conventional color adjustment apparatus 8 shown in FIG. 7, the color adjustment is performed using only the video analysis result obtained by the video analysis block 5, but for example, the color adjustment corresponding to the intensity of the sound If it can be performed, it is possible to obtain an unprecedented high presence.

本発明は、かかる点に鑑み、テレビやＤＶＤレコーダ等のように、映像と音声を同時に出力するシステムに適用する場合には、これまでにない高い臨場感を得ることができるようにした色調整装置を提供することを目的とする。 In view of the above, the present invention is a color adjustment that can provide an unprecedented level of realism when applied to a system that simultaneously outputs video and audio, such as a television or a DVD recorder. An object is to provide an apparatus.

本発明の色調整装置は、音声信号を解析する音声解析手段と、前記音声解析手段による前記音声信号の解析結果に基づいて、前記音声信号に対応する映像信号について色調整を行う色調整手段を備えるものである。 The color adjustment apparatus according to the present invention includes: an audio analysis unit that analyzes an audio signal; and a color adjustment unit that performs color adjustment on a video signal corresponding to the audio signal based on an analysis result of the audio signal by the audio analysis unit. It is to be prepared.

本発明によれば、音声信号の解析結果に基づいて映像信号について色調整を行うことができるので、本発明をテレビやＤＶＤレコーダ等のように映像と音声を同時に出力するシステムに適用する場合には、これまでにない高い臨場感を得ることができる。 According to the present invention, color adjustment can be performed on the video signal based on the analysis result of the audio signal. Therefore, when the present invention is applied to a system that outputs video and audio simultaneously, such as a television or a DVD recorder. Can get a higher level of realism than ever before.

（第１実施形態）
図１は本発明の第１実施形態を備える映像音声処理装置の要部を示すブロック回路図である。図１中、１０は音声入力ブロック、１１は音声解析ブロック、１２は音声処理ブロック、１３は音声出力ブロック、１４は映像入力ブロック、１５は映像解析ブロック、１６は色調整ブロック、１７は映像出力ブロックであり、音声解析ブロック１１と映像解析ブロック１５と色調整ブロック１６とで本発明の第１実施形態１８が構成されている。 (First embodiment)
FIG. 1 is a block circuit diagram showing a main part of a video / audio processing apparatus including the first embodiment of the present invention. In FIG. 1, 10 is an audio input block, 11 is an audio analysis block, 12 is an audio processing block, 13 is an audio output block, 14 is an image input block, 15 is an image analysis block, 16 is a color adjustment block, and 17 is an image output. The audio analysis block 11, the video analysis block 15, and the color adjustment block 16 constitute a first embodiment 18 of the present invention.

音声入力ブロック１０は音声信号を入力するためのブロックである。音声解析ブロック１１は、音声入力ブロック１０が出力する音声信号を入力して音声解析を行い、音声解析結果として、音声の激しさの度合いを示す音声の激しさ指数を音声の状態指数として得るためのブロックであり、音声の激しさ指数は、色調整ブロック１６に与えられる。 The audio input block 10 is a block for inputting an audio signal. The voice analysis block 11 inputs the voice signal output from the voice input block 10 and performs voice analysis, and obtains a voice intensity index indicating a degree of voice intensity as a voice state index as a voice analysis result. The sound intensity index is given to the color adjustment block 16.

図２は音声解析ブロック１１による音声解析処理を説明するための図であり、縦軸は音声信号の大きさ、横軸は時間を示しており、２０は音声入力ブロック１０が出力する音声信号を示している。 FIG. 2 is a diagram for explaining speech analysis processing by the speech analysis block 11, where the vertical axis indicates the size of the speech signal, the horizontal axis indicates time, and 20 indicates the speech signal output by the speech input block 10. Show.

ここで、単位時間当たりの音声信号２０の大きさの平均値をｍ、最大振幅をＰ、音声の激しさ指数をＱとすると、音声解析ブロック１１は、音声入力ブロック１０が出力する音声信号２０を解析し、単位時間当たりの音声信号２０の平均値ｍと最大振幅Ｐを検出し、音声解析結果として、音声の激しさ指数ＱをＱ＝αｍ＋βＰで算出する。但し、α及びβは任意に決定される係数である。 Here, if the average value of the size of the audio signal 20 per unit time is m, the maximum amplitude is P, and the intensity of the audio is Q, the audio analysis block 11 outputs the audio signal 20 output from the audio input block 10. , The average value m and the maximum amplitude P of the voice signal 20 per unit time are detected, and the voice intensity index Q is calculated as Q = αm + βP as the voice analysis result. However, α and β are coefficients determined arbitrarily.

音声処理ブロック１２は、音声解析ブロック１１が出力する音声信号を入力し、ノイズの除去や、映像信号との間の遅延調整を行うブロックである。音声出力ブロック１３は、音声処理ブロック１２が出力する音声信号を外部に出力するためのブロックであり、音声出力ブロック１３が出力する音声信号はスピーカに与えられる。 The audio processing block 12 is a block that receives the audio signal output from the audio analysis block 11 and performs noise removal and delay adjustment with the video signal. The audio output block 13 is a block for outputting the audio signal output from the audio processing block 12 to the outside, and the audio signal output from the audio output block 13 is given to a speaker.

映像入力ブロック１４は映像信号を入力するためのブロックである。映像解析ブロック１５は、映像入力ブロック１４が出力する映像信号を入力して映像解析を行い、映像解析結果として、輝度レベルのヒストグラムや、ＲＧＢのそれぞれの値の分布、隣接画素間の輝度値の差分によるエッジ情報などを得るためのブロックであり、映像解析結果は、映像信号とともに色調整ブロック１６に与えられる。 The video input block 14 is a block for inputting a video signal. The video analysis block 15 receives the video signal output from the video input block 14 and performs video analysis. As a result of the video analysis, a luminance level histogram, a distribution of RGB values, and a luminance value between adjacent pixels are calculated. This is a block for obtaining edge information based on the difference, and the video analysis result is given to the color adjustment block 16 together with the video signal.

色調整ブロック１６は、音声解析ブロック１１から与えられる音声解析結果（音声の激しさ指数Ｑ）と映像解析ブロック１５から与えられる映像解析結果とを使用し、映像解析ブロック１５から与えられる映像信号について、色調整として、画面の全領域を対象としたダイナミックレンジの調整を行うブロックである。 The color adjustment block 16 uses the audio analysis result (sound intensity index Q) given from the audio analysis block 11 and the video analysis result given from the video analysis block 15, and the video signal given from the video analysis block 15. As a color adjustment, this is a block for adjusting the dynamic range for the entire area of the screen.

図３は色調整ブロック１６によるダイナミックレンジ調整例を示す図である。（Ａ）はダイナミックレンジの調整を行わない場合の映像のヒストグラム、（Ｂ）は音声解析結果によるダイナミックレンジ調整後の映像のヒストグラムを示しており、音声の激しさ指数Ｑが小さい場合、（Ｃ）は音声解析結果によるダイナミックレンジ調整後の映像のヒストグラムを示しており、音声の激しさ指数Ｑが大きい場合である。 FIG. 3 is a diagram showing an example of dynamic range adjustment by the color adjustment block 16. (A) shows a video histogram when dynamic range adjustment is not performed, and (B) shows a video histogram after dynamic range adjustment based on the result of audio analysis. ) Shows a histogram of the video after dynamic range adjustment based on the audio analysis result, and is a case where the audio intensity index Q is large.

すなわち、色調整ブロック１６は、音声の激しさ指数Ｑが小さいほど、すなわち、音声が静かなほど、画面の最大輝度レベルが低くなるようにダイナミックレンジを縮小して映像が暗めの落ち着いた状態となるような調整を行い、また、音声の激しさ指数Ｑが大きいほど、すなわち、音声が激しいほど、画面の最大輝度レベルが高くなるようにダイナミックレンジを拡大して映像が明るくなるような調整を行う。 That is, the color adjustment block 16 reduces the dynamic range so that the maximum luminance level of the screen is lower as the sound intensity index Q is smaller, that is, as the sound is quieter, and the image is darker and calmer. In addition, the larger the sound intensity index Q, that is, the more intense the sound, the larger the dynamic range so that the maximum brightness level of the screen becomes higher and the image becomes brighter. Do.

映像出力ブロック１７は色調整ブロック１６が出力する色調整（ダイナミックレンジ調整）された映像信号を外部に出力するためのブロックであり、映像出力ブロック１７が出力する映像信号はディスプレイに与えられる。 The video output block 17 is a block for outputting the color adjusted (dynamic range adjusted) video signal output from the color adjusting block 16 to the outside, and the video signal output from the video output block 17 is given to the display.

以上のように、図１に示す映像音声処理装置においては、音声入力ブロック１０は音声信号を入力し、音声解析ブロック１１は、音声入力ブロック１０が出力する音声信号を入力して解析を行い、音声の激しさ指数Ｑを算出し、音声処理ブロック１２は、音声解析ブロック１１が出力する音声信号を入力してノイズの除去や、映像信号との間の遅延調整を行い、音声出力ブロック１３は音声処理ブロック１２が出力する音声信号をスピーカに与える。 As described above, in the audio / video processing apparatus shown in FIG. 1, the audio input block 10 inputs an audio signal, the audio analysis block 11 inputs and analyzes the audio signal output from the audio input block 10, The sound intensity index Q is calculated, and the sound processing block 12 inputs the sound signal output from the sound analysis block 11 to remove noise and adjust the delay between the sound signal and the sound output block 13. An audio signal output from the audio processing block 12 is given to the speaker.

他方、映像入力ブロック１４は映像信号を入力し、映像解析ブロック１５は、映像入力ブロック１４が出力する映像信号を入力して解析を行い、色調整ブロック１６は、音声解析ブロック１１で得られる音声の激しさ指数Ｑと映像解析ブロック１５で得られる映像解析結果とを使用し、映像解析ブロック１５から与えられる映像信号についてダイナミックレンジの調整を行い、映像出力ブロック１７は、色調整ブロック１６が出力する色調整された映像信号をディスプレイに与える。 On the other hand, the video input block 14 inputs a video signal, the video analysis block 15 inputs and analyzes the video signal output from the video input block 14, and the color adjustment block 16 receives the audio obtained by the audio analysis block 11. The dynamic range of the video signal given from the video analysis block 15 is adjusted using the intensity index Q of the video and the video analysis result obtained by the video analysis block 15, and the video output block 17 is output by the color adjustment block 16. The color-adjusted video signal is given to the display.

ここで、色調整ブロック１６は、色調整としてダイナミックレンジの調整を行うが、音声の激しさ指数Ｑが小さいほど、すなわち、音声が静かなほど、画面の最大輝度レベルが低くなるようにダイナミックレンジを縮小して映像が暗めの落ち着いた状態となるような調整を行い、また、音声の激しさ指数Ｑが大きいほど、すなわち、音声が激しいほど、画面の最大輝度レベルが高くなるようにダイナミックレンジを拡大して映像が明るくなるような調整を行う。 Here, the color adjustment block 16 adjusts the dynamic range as the color adjustment. The dynamic range is adjusted such that the smaller the sound intensity index Q, that is, the quieter the sound, the lower the maximum luminance level of the screen. The dynamic range is adjusted so that the maximum brightness level of the screen increases as the sound intensity index Q increases, that is, the sound becomes stronger. Adjust so that the image becomes brighter by enlarging.

すなわち、本発明の第１実施形態１８によれば、音声信号の解析結果に基づいて映像信号の色情報中のダイナミックレンジを調整することができるので、本発明の第１実施形態１８をテレビやＤＶＤレコーダ等のように映像と音声を同時に出力するシステムに適用する場合には、これまでにない高い臨場感を得ることができる。 That is, according to the first embodiment 18 of the present invention, the dynamic range in the color information of the video signal can be adjusted based on the analysis result of the audio signal. When applied to a system that simultaneously outputs video and audio, such as a DVD recorder, it is possible to obtain an unprecedented high presence.

（第２実施形態）
図４は本発明の第２実施形態を備える映像音声処理装置の要部を示すブロック回路図であり、図４に示す映像音声処理装置は、図１に示す映像音声処理装置が備える本発明の第１実施形態１８の代わりに、本発明の第２実施形態３０を備え、その他については、図１に示す映像音声処理装置と同様に構成したものである。 (Second Embodiment)
FIG. 4 is a block circuit diagram showing a main part of the video / audio processing apparatus including the second embodiment of the present invention. The video / audio processing apparatus shown in FIG. 4 is the same as that of the video / audio processing apparatus shown in FIG. A second embodiment 30 of the present invention is provided instead of the first embodiment 18, and the others are configured in the same manner as the video / audio processing apparatus shown in FIG.

本発明の第２実施形態３０は、色調整ブロックとして、本発明の第１実施形態１８が備える色調整ブロック１６とは機能の異なる色調整ブロック３１を備え、その他については、本発明の第１実施形態１８と同様に構成したものである。 The second embodiment 30 of the present invention includes a color adjustment block 31 having a function different from that of the color adjustment block 16 included in the first embodiment 18 of the present invention as a color adjustment block. The configuration is the same as in the eighteenth embodiment.

色調整ブロック３１は、音声解析ブロック１１から与えられる音声解析結果（音声の激しさ指数Ｑ）と映像解析ブロック１５から与えられる映像解析結果とを使用し、映像解析ブロック１５から与えられる映像信号について、色調整として、画面の全領域を対象とした色合いの調整を行うものである。 The color adjustment block 31 uses the audio analysis result (audio intensity index Q) given from the audio analysis block 11 and the video analysis result given from the video analysis block 15, and the video signal given from the video analysis block 15. As the color adjustment, hue adjustment is performed for the entire area of the screen.

図５は色調整ブロック３１による色合い調整を説明するための図である。縦軸は色合いのレベルを示し、上に行くほど赤みが強くなり、下に行くほど青みが強くなることを示している。横軸は音声の激しさ指数Ｑを示している。実線３２は音声の激しさ指数Ｑに対する映像中の赤色の色合いの調整量、点線３３は音声の激しさ指数Ｑに対する青色の色合いの調整量を示している。 FIG. 5 is a diagram for explaining the hue adjustment by the color adjustment block 31. The vertical axis shows the level of hue, and the red color becomes stronger as it goes up, and the blue color becomes stronger as it goes down. The horizontal axis represents the voice intensity index Q. A solid line 32 indicates the amount of adjustment of the red hue in the video with respect to the sound intensity index Q, and a dotted line 33 indicates the amount of adjustment of the blue hue with respect to the sound intensity index Q.

すなわち、色調整ブロック３１は、音声の激しさ指数Ｑが大きいほど、すなわち、音声が激しいほど、画面が赤みの強い派手な色合いになるように調整し、また、音声の激しさ指数Ｑが小さいほど、すなわち、音声が静かなほど、画面が青みの強い落ち着いた色合いになるように調整する。なお、この場合、元の映像を破壊しないようにするために、音声の激しさ指数Ｑが予め定めた最小基準値より小さい場合や、最大基準値より大きい場合には一定の調整量を超えないようにする。 That is, the color adjustment block 31 adjusts the screen so that the louder the sound intensity index Q is, that is, the stronger the sound is, the brighter the screen is, and the smaller the sound intensity index Q is. In other words, the quieter the sound is, the more the screen is adjusted so as to have a calm blue hue. In this case, in order not to destroy the original video, when the audio intensity index Q is smaller than a predetermined minimum reference value or larger than the maximum reference value, a certain adjustment amount is not exceeded. Like that.

図４に示す映像音声処理装置においては、音声入力ブロック１０は音声信号を入力し、音声解析ブロック１１は、音声入力ブロック１０が出力する音声信号を入力して解析を行い、音声の激しさ指数Ｑを算出し、音声処理ブロック１２は、音声解析ブロック１１が出力する音声信号を入力してノイズの除去や、映像信号との間の遅延調整を行い、音声出力ブロック１３は音声処理ブロック１２が出力する音声信号をスピーカに与える。 In the video / audio processing apparatus shown in FIG. 4, the audio input block 10 inputs an audio signal, and the audio analysis block 11 inputs and analyzes the audio signal output from the audio input block 10. Q is calculated, and the audio processing block 12 inputs the audio signal output from the audio analysis block 11 to perform noise removal and delay adjustment with the video signal. An audio signal to be output is given to the speaker.

他方、映像入力ブロック１４は映像信号を入力し、映像解析ブロック１５は、映像入力ブロック１４が出力する映像信号を入力して解析を行い、色調整ブロック３１は、映像解析ブロック１５で得られる映像解析結果と、音声解析ブロック１１で得られる音声の激しさ指数Ｑを使用し、映像解析ブロック１５から与えられる映像信号について色合いの調整を行い、映像出力ブロック１７は色調整ブロック１６が出力する色調整された映像信号をディスプレイに与える。 On the other hand, the video input block 14 inputs a video signal, the video analysis block 15 inputs and analyzes the video signal output from the video input block 14, and the color adjustment block 31 is a video obtained by the video analysis block 15. Using the analysis result and the audio intensity index Q obtained in the audio analysis block 11, the color adjustment of the video signal given from the video analysis block 15 is performed, and the video output block 17 outputs the color output by the color adjustment block 16. Apply the adjusted video signal to the display.

ここで、色調整ブロック３１は、音声の激しさ指数Ｑが大きいほど、すなわち、音声が激しいほど、画面が赤みの強い派手な色合いになるように調整し、また、音声の激しさ指数Ｑが小さいほど、すなわち、音声が静かなほど、画面が青みの強い落ち着いた色合いになるように調整する。 Here, the color adjustment block 31 adjusts so that the sound intensity index Q is larger, that is, the sound is more intense, that is, the screen has a bright red color, and the sound intensity index Q is The smaller the screen is, that is, the quieter the sound is, the more the screen is adjusted to have a calm blue hue.

すなわち、本発明の第２実施形態３０によれば、音声信号の解析結果に基づいて映像信号の色情報中の色合いを調整することができるので、本発明の第２実施形態３０をテレビやＤＶＤレコーダ等のように映像と音声を同時に出力するシステムに適用する場合には、これまでにない高い臨場感を得ることができる。 That is, according to the second embodiment 30 of the present invention, since the hue in the color information of the video signal can be adjusted based on the analysis result of the audio signal, the second embodiment 30 of the present invention is changed to a television or DVD. When applied to a system that outputs video and audio at the same time, such as a recorder, an unprecedented high presence can be obtained.

なお、本発明の第１実施形態１８においては、映像信号のダイナミックレンジの調整を行い、本発明の第２実施形態３０においては、色合いの調整を行うようにしたが、色調整ブロック１６、３１は、ダイナミックレンジの調整及び色合いの調整の両方を行うようにしても良い。 In the first embodiment 18 of the present invention, the dynamic range of the video signal is adjusted, and in the second embodiment 30 of the present invention, the hue is adjusted. However, the color adjustment blocks 16 and 31 are adjusted. In this case, both dynamic range adjustment and hue adjustment may be performed.

また、本発明の第１実施形態１８及び第２実施形態３０においては、音声解析結果として音声の激しさ指数Ｑを得るようにしたが、この代わりに、音の高さや、リズムの調子や、短調／長調などを音声の状態指数として使用し、ダイナミックレンジの調整や色合いの調整を行うようにしても良い。 Further, in the first embodiment 18 and the second embodiment 30 of the present invention, the sound intensity index Q is obtained as the sound analysis result, but instead of this, the pitch of the sound, the tone of the rhythm, It is also possible to use the minor / major key or the like as the sound state index to adjust the dynamic range or the hue.

また、本発明の第１実施形態１８及び第２実施形態３０においては、画面全体を単位としてダイナミックレンジの調整や色合いの調整を行うようにしているが、画面中の特定の領域に関してのみ、ダイナミックレンジの調整や色合いの調整を行うようにしても良い。また、本発明の第２実施形態３０においては、特定の色、例えば、肌色のみを色合い調整の対象とするようにしても良い。 In the first embodiment 18 and the second embodiment 30 of the present invention, the dynamic range is adjusted and the hue is adjusted in units of the entire screen. However, the dynamic range is adjusted only for a specific area in the screen. Range adjustment and hue adjustment may be performed. In the second embodiment 30 of the present invention, only a specific color, for example, a skin color, may be a target for color tone adjustment.

本発明の第１実施形態を備える映像音声処理装置の要部を示すブロック回路図である。It is a block circuit diagram which shows the principal part of the video / audio processing apparatus provided with 1st Embodiment of this invention. 本発明の第１実施形態が備える音声解析ブロックによる音声解析処理を説明するための図である。It is a figure for demonstrating the audio | voice analysis process by the audio | voice analysis block with which 1st Embodiment of this invention is provided. 本発明の第１実施形態が備える色調整ブロックによるダイナミックレンジ調整例を示す図である。It is a figure which shows the example of dynamic range adjustment by the color adjustment block with which 1st Embodiment of this invention is provided. 本発明の第２実施形態を備える映像音声処理装置の要部を示すブロック回路図である。It is a block circuit diagram which shows the principal part of the audiovisual processing apparatus provided with 2nd Embodiment of this invention. 本発明の第２実施形態が備える色調整ブロックによる色合い調整を説明するための図である。It is a figure for demonstrating the hue adjustment by the color adjustment block with which 2nd Embodiment of this invention is provided. 色調整におけるダイナミックレンジの調整例を示す図である。It is a figure which shows the example of adjustment of the dynamic range in color adjustment. 従来の色調整装置の一例を備える映像音声処理装置の要部を示すブロック回路図である。It is a block circuit diagram which shows the principal part of the audiovisual processing apparatus provided with an example of the conventional color adjustment apparatus.

Explanation of symbols

１…音声入力ブロック
２…音声処理ブロック
３…音声出力ブロック
４…映像入力ブロック
５…映像解析ブロック
６…色調整ブロック
７…映像出力ブロック
８…従来の色調整装置の一例
１０…音声入力ブロック
１１…音声解析ブロック
１２…音声処理ブロック
１３…音声出力ブロック
１４…映像入力ブロック
１５…映像解析ブロック
１６…色調整ブロック
１７…映像出力ブロック
１８…本発明の第１実施形態
２０…音声信号
３０…本発明の第２実施形態
３１…色調整ブロック DESCRIPTION OF SYMBOLS 1 ... Audio input block 2 ... Audio processing block 3 ... Audio output block 4 ... Video input block 5 ... Video analysis block 6 ... Color adjustment block 7 ... Video output block 8 ... Example of conventional color adjustment apparatus 10 ... Audio input block 11 ... Audio analysis block 12 ... Audio processing block 13 ... Audio output block 14 ... Video input block 15 ... Video analysis block 16 ... Color adjustment block 17 ... Video output block 18 ... First embodiment of the present invention 20 ... Audio signal 30 ... Book Second Embodiment 31 of the Invention Color adjustment block

Claims

A voice analysis means for analyzing a voice signal;
A color adjustment apparatus comprising color adjustment means for performing color adjustment on a video signal corresponding to the audio signal based on an analysis result of the audio signal by the audio analysis means.

The color adjustment according to claim 1, wherein the voice analysis unit detects an average value and a maximum amplitude of the magnitude of the voice signal, and calculates a voice state index as an analysis result of the voice signal. apparatus.

The color adjustment apparatus according to claim 1, wherein the color adjustment unit adjusts a dynamic range of an entire area of the screen or a specific area as the color adjustment.

The color adjustment apparatus according to claim 1, wherein the color adjustment unit adjusts a color tone of an entire area of the screen or a specific area as color adjustment.

The color adjusting apparatus according to claim 4, wherein the color adjusting unit adjusts a hue for a specific color.