JP2005203933A - Video-reproducing apparatus and video-reproducing method - Google Patents
Video-reproducing apparatus and video-reproducing method Download PDFInfo
- Publication number
- JP2005203933A JP2005203933A JP2004006561A JP2004006561A JP2005203933A JP 2005203933 A JP2005203933 A JP 2005203933A JP 2004006561 A JP2004006561 A JP 2004006561A JP 2004006561 A JP2004006561 A JP 2004006561A JP 2005203933 A JP2005203933 A JP 2005203933A
- Authority
- JP
- Japan
- Prior art keywords
- luminance value
- video
- black
- luminance
- boundary
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Abstract
Description
本発明は、記録媒体、あるいは伝送通信において、字幕等の副映像データが組み込まれた映像データを再生する映像再生装置に関するものである。 The present invention relates to a video playback apparatus that plays back video data in which sub-video data such as subtitles is incorporated in a recording medium or transmission communication.
映像を表示させるディスプレイにおいて、受信された映像信号の出力表示領域と、ディスプレイの表示領域は、必ずとも一致はしない。一致しない場合、映像情報の内容が部分的に切り取られることを犠牲にしてディスプレイ全体をしめる映像を表示させるのか、または、ディスプレイ全体を利用しない小さい映像を出力さぜるをえないことを犠牲にして完全な映像情報を表示させるという映像出力に関して2つの選択肢がある。この選択は、視聴者の嗜好に依存するか、あるいはあらかじめプログラムすることが可能である。ディスプレイ全体をしめる映像を表示するという選択をした場合、表示させる映像信号の有効な表示部分を求め、必要に応じて垂直及び水平方向へズーム(拡大)する処理が必要になる。現在、この入力映像信号から有効な映像信号の領域を求め、出力させるディスクプレイに適応して垂直及び水平方向へズームする機能は、テレビジョン受像器に持ち合わせているのが一般的である(特許文献1参照)。 In a display that displays video, the output display area of the received video signal and the display area of the display do not always match. If they do not match, it is possible to display a video that shows the entire display at the expense of being partially clipped, or at the expense of having to output a small video that does not use the entire display. There are two options for video output to display complete video information. This selection depends on the viewer's preference or can be preprogrammed. If the user chooses to display an image showing the entire display, an effective display portion of the image signal to be displayed is obtained, and a process of zooming (enlarging) in the vertical and horizontal directions as necessary is required. Currently, television receivers generally have a function of obtaining an effective video signal area from the input video signal and zooming in the vertical and horizontal directions in accordance with the output display (patent). Reference 1).
図8は、このズーム機能付きテレビジョン受像器のブロック構成図を示したものである。図8において、800はズーム機能付きTV本体、801はアンテナ入力、802は外部入力入力、803はチューナー、804は映像スイッチ、805は映像拡大縮小プロセッサ、806は表示画面を表す。放送信号をアンテナ入力801からチューナ803により受信し、映像信号へ変換し、映像スイッチ804に入力される。DVD、ビデオ等の映像再生装置からの映像信号は、外部入力802を経由して映像スイッチ804に入力される。画面表示させようとする映像信号は、視聴者により映像スイッチ804にて選択され、選択された映像信号は、映像拡大縮小プロセッサ805により表示画面に適用するように拡大縮小処理が施され、表示画面806にて映像表示される。
FIG. 8 is a block diagram of the television receiver with a zoom function. In FIG. 8, 800 is a TV main body with a zoom function, 801 is an antenna input, 802 is an external input input, 803 is a tuner, 804 is a video switch, 805 is a video enlargement / reduction processor, and 806 is a display screen. A broadcast signal is received from the
このような構成では、映画等のワイドスクリーン素材のレターボックスエリアに字幕表示がされるDVD等の映像再生装置からの映像再生信号を外部入力より入力し映像表示させた場合、字幕表示は不定期でかつ頻繁に出力されるタイミングも存在するため、字幕表示の有無に伴って表示映像の拡大率が頻繁に変化し非常に見づらいという課題あったり、また、字幕表示の誤検出や検出処理の遅れから字幕表示が表示領域から切り取られてしまうという課題がある。
解決しようとする問題点は、主映像の表示サイズに関わりなく字幕表示の有無により、拡大縮小比率が頻繁に変化するという点と、字幕表示の誤検出や、検出処理の遅れに伴う拡大縮小比率の誤設定による字幕表示部分が欠落するという点である。 The problem to be solved is that the enlargement / reduction ratio changes frequently depending on the presence or absence of subtitle display regardless of the display size of the main video, and the enlargement / reduction ratio due to false detection of subtitle display or detection processing delay This means that the subtitle display part due to incorrect setting is lost.
本発明は、字幕表示の有無ともなう表示映像の拡大率変化をなくし、字幕が表示領域から切り取られないようにするために、DVDのような字幕等の副映像データが組み込まれた映像データを再生する映像再生装置において、主映像のみを拡大縮小させることを最も主要な特徴とする。 The present invention reproduces video data in which sub-video data such as subtitles such as a DVD is incorporated in order to eliminate the change in the enlargement ratio of the display video with or without subtitle display and prevent the subtitles from being cut off from the display area. In the video reproducing apparatus, the main feature is to enlarge / reduce only the main video.
本発明の映像再生装置は、主映像と副映像が加算される前段階で、主映像の輝度により再生素材の黒帯部分を検出し、その黒帯部分と表示させるディスプレイの表示領域により拡大縮小率を算出し、主映像のみに対し拡大縮小処理を施し、その後段で、主映像に副映像を加算し出力することにより、字幕表示の有無による拡大縮小比率の変化が発生せず見やすい画像表示をすることができ、また拡大縮小にともなう字幕の欠落を防ぐという利点がある。また、主映像の各フレーム毎に、輝度による黒帯検出を連続的に処理することにより、ユーザーが設定を施すことなく、映像再生素材の時間軸変化にともなって、拡大縮小率を自動で変化させることができるという効果もある。 The video playback apparatus of the present invention detects the black band portion of the playback material based on the luminance of the main video before the addition of the main video and the sub video, and enlarges / reduces by the display area of the display to display the black band portion. The ratio is calculated, the enlargement / reduction process is performed only on the main video, and the sub-video is added to the main video and output at the subsequent stage. There is an advantage that subtitles are not lost due to enlargement / reduction. In addition, by continuously processing black band detection by luminance for each frame of the main video, the enlargement / reduction ratio is automatically changed according to changes in the time axis of the video playback material without user setting. There is also an effect that can be made.
請求項1に記載の発明は、主映像復号手段と副映像復号手段を持ち合わせ、主映像復号手段から出力される主映像信号と副映像復号手段から出力される副映像信号を加算し出力する映像再生装置において、主映像信号の輝度より主映像の黒帯部分を検出する黒帯部分検出手段と、再生素材の画格と表示するディスプレイの画格と黒帯部分検出手段から出力された黒帯部分の情報をもとに主映像の拡大縮小の比率を算出する拡大値縮小値演算手段と、主映像の水平拡大縮小手段と、主映像の垂直拡大縮小手段とを備え、前記拡大値縮小値演算手段より求められた水平方向拡大縮小値と垂直方向拡大縮小値に基づいて、前記水平拡大縮小手段と垂直拡大縮小手段によってディスプレイに黒帯部分が表示されないように主映像の拡大縮小を調整するように構成した。
The invention described in
請求項2に記載の発明は、再生する主映像を垂直方向に2つの境界線により3つのエリアに分割し、前記3つのエリアの最大輝度値、平均輝度値、最小輝度値のそれぞれを算出し、最大輝度値と平均輝度値と最小輝度値が同値で、かつ、算出された前記最大輝度値、平均輝度値、最小輝度値が黒帯部分と判定される輝度値より小さくなるエリアの境界位置を前記2つの境界線を上下させながら検出し、検出された境界位置にある2つの境界線に挟まれたエリア以外の部分を黒帯部分と判定する。 According to the second aspect of the present invention, the main video to be reproduced is divided into three areas by two boundary lines in the vertical direction, and the maximum luminance value, the average luminance value, and the minimum luminance value of each of the three areas are calculated. The boundary position of the area in which the maximum luminance value, the average luminance value, and the minimum luminance value are the same value, and the calculated maximum luminance value, average luminance value, and minimum luminance value are smaller than the luminance value determined to be a black belt portion Is detected while moving the two boundary lines up and down, and a portion other than the area sandwiched between the two boundary lines at the detected boundary position is determined as a black belt portion.
請求項3に記載の発明は、請求項2記載の方法により黒帯部分検出を行う黒帯検出手段を持ち合わせた。
The invention described in
請求項4に記載の発明は、再生素材の画格情報に基づき、黒帯部分検出の検出のために上下させる2つの境界線の初期位置を決める。 According to the fourth aspect of the present invention, the initial positions of the two boundary lines that are moved up and down for the detection of the black belt portion detection are determined based on the picture information of the reproduction material.
請求項5に記載の発明は、再生する主映像を垂直方向に2つの境界線により3つのエリアに分割し、前記3つのエリアの最大輝度値、平均輝度値、最小輝度値のそれぞれを算出し、最大輝度値と平均輝度値と最小輝度値が同値で、かつ、算出された前記最大輝度値、平均輝度値、最小輝度値が黒帯部分と判定される輝度値より小さくなるエリアの境界位置を前記2つの境界線を上下させながら検出し、検出された境界位置にある2つの境界線のうち、上に位置する境界線よりmライン上から上方と、下に位置する境界線よりnライン下(m、nは整数)から下方の部分を黒帯部分と判定する。 According to the fifth aspect of the present invention, the main video to be reproduced is divided into three areas in the vertical direction by two boundary lines, and the maximum luminance value, the average luminance value, and the minimum luminance value of each of the three areas are calculated. The boundary position of the area in which the maximum luminance value, the average luminance value, and the minimum luminance value are the same value, and the calculated maximum luminance value, average luminance value, and minimum luminance value are smaller than the luminance value determined to be a black belt portion The two boundary lines are detected while moving up and down, and of the two boundary lines at the detected boundary position, m lines above the boundary line located above and n lines above the boundary line located below The lower part from the bottom (m and n are integers) is determined as the black belt part.
請求項6に記載の発明は、請求項5記載の方法により黒帯部分検出を行う黒帯検出手段を持ち合わせた。 The invention described in claim 6 has black band detecting means for detecting a black band part by the method described in claim 5.
請求項7に記載の発明は、一旦黒帯部分が検出された後に、エリアを区切る2つの境界線の上に位置する境界線の上方kライン目の輝度Kと、下方lライン目の輝度Lと、下に位置する境界線の上方mライン目の輝度Mと、下方nライン目の輝度Nを算出し、前記輝度Kまたは前記輝度Nの値が黒帯部分と判定される輝度値よりも大きくなった場合と、前記輝度Lまたは前記輝度Mの値が黒帯部分と判定される輝度値より小さくなった場合に黒帯部分検出を再スタートさせる。 According to the seventh aspect of the present invention, after the black belt portion is once detected, the luminance K of the upper k line and the luminance L of the lower l line of the boundary line positioned on the two boundary lines dividing the area. And the luminance M of the upper m-th line and the luminance N of the lower n-line of the lower boundary line are calculated, and the value of the luminance K or the luminance N is greater than the luminance value determined as the black belt portion. When it becomes larger and when the value of the luminance L or the luminance M becomes smaller than the luminance value determined as the black belt portion, the black belt portion detection is restarted.
請求項8に記載の発明は、一旦黒帯部分が検出された後に、エリアを区切る2つの境界線の上に位置する境界線から上端までのエリアの最大輝度Kmax、平均輝度Kave、最小輝度Kminと、上に位置する境界線より下方lラインまでのエリアの最大輝度Lmax、平均輝度Lave、最小輝度Lminと、2つの境界線の下に位置する境界線より上方mラインまでのエリアの最大輝度Mmax、平均輝度Mave、最小輝度Mminと、下に位置する境界線から下端までの最大輝度Nmax、平均輝度Nave、最小輝度Nminを算出し、KmaxとKaveとKminが等しくない、または黒帯部分と判定される輝度値より大きくなった場合と、NmaxとNaveとNminが等しくない、または黒帯部分と判定される輝度値より大きくなった場合と、KmaxとKaveとKminが等しく黒帯部分と判定される輝度値より小さい、かつLmaxとLaveとLminが等しく黒帯部分と判定される輝度値より小さい場合と、MmaxとMaveとMninが等しく黒帯部分と判定される輝度値より小さい、かつNmaxとNaveとNminが等しく黒帯部分と判定される輝度値より小さい場合に、黒帯部分検出を再スタートさせる。 According to the eighth aspect of the present invention, the maximum luminance Kmax, the average luminance Kave, and the minimum luminance Kmin of the area from the boundary line located above the two boundary lines that divide the area to the upper end after the black belt portion is once detected. And the maximum brightness Lmax, average brightness Level, and minimum brightness Lmin of the area from the upper boundary line to the lower l line, and the maximum brightness of the area up to the m line above the boundary line positioned below the two boundary lines Mmax, average luminance Mave, minimum luminance Mmin, maximum luminance Nmax from the lower boundary line to the lower end, average luminance Nave, and minimum luminance Nmin are calculated, and Kmax, Kave, and Kmin are not equal, or the black belt portion The luminance value determined when Nmax, Nave, and Nmin are not equal or the black band portion is determined to be greater than the determined luminance value. Mmax and Kmax, Kave, and Kmin are equal to each other and smaller than the luminance value determined to be the black band portion, and Lmax, Lave, and Lmin are equal to and smaller than the luminance value determined to be the black band portion. When Mave and Mmin are equal and smaller than the luminance value determined as the black band portion, and Nmax, Nave and Nmin are equal and smaller than the luminance value determined as the black band portion, the black band portion detection is restarted.
請求項9に記載の発明は、請求項7記載の方法により黒帯部分検出を行う黒帯検出手段を持ち合わせた。 The invention described in claim 9 has black band detecting means for detecting a black band part by the method described in claim 7.
請求項10に記載の発明は、請求項8記載の方法により黒帯部分検出を行う黒帯検出手段を持ち合わせた。 The invention described in claim 10 has black band detecting means for detecting a black band portion by the method described in claim 8.
以下本発明の実施の形態について、図面を参照しながら説明する。 Embodiments of the present invention will be described below with reference to the drawings.
(実施の形態)
図1は、本発明の実施の形態における主映像信号の輝度より主映像の黒帯部分を検出し、再生素材の画格と、表示するディスプレイの画格と検出された黒帯部分の情報より、ディスプレイに黒帯部分が表示されないように水平方向、垂直方向に拡大及び縮小するようにして映像信号を出力するように構成した映像再生装置のブロック構成図を示したものである。
(Embodiment)
FIG. 1 shows the black band portion of the main video detected from the luminance of the main video signal in the embodiment of the present invention, and based on the picture quality of the playback material, the picture quality of the display to be displayed, and the detected black band part information. FIG. 2 is a block diagram of a video reproducing apparatus configured to output a video signal so as to be enlarged and reduced in a horizontal direction and a vertical direction so that a black belt portion is not displayed on the display.
図1で100は主映像復号手段、101は水平拡大縮小手段、102は垂直拡大縮小手段、103は映像信号加算手段、104は拡大値縮小値演算手段、105は黒帯部分検出手段、106は副映像復号手段である。 In FIG. 1, 100 is a main video decoding means, 101 is a horizontal enlargement / reduction means, 102 is a vertical enlargement / reduction means, 103 is a video signal addition means, 104 is an enlarged value reduction value calculation means, 105 is a black belt portion detection means, 106 is Sub-picture decoding means.
図2は、図1の映像再生装置における黒帯部分検出手段の内部ブロック図である。 FIG. 2 is an internal block diagram of the black belt portion detecting means in the video reproduction apparatus of FIG.
図2で200は映像領域3分割手段、201は領域1最大輝度算出手段、202は領域1平均輝度算出手段、203は領域1最小輝度検出手段、204は領域2最大輝度算出手段、205は領域2平均輝度算出手段、206は領域2最小輝度算出手段、207は領域3最大輝度算出手段、208は領域3平均輝度算出手段、209は領域3最小輝度算出手段、210は黒帯境界判定手段である。
In FIG. 2,
図3は、復号された主映像と黒帯部分検出のための境界線、領域の関係を図示したものである。図3で、300は境界線a、301は境界線b、302は上端から境界線a300に挟まれた領域A、303は境界線a300から境界線b301で挟まれた領域B、304は境界線b301から下端にて挟まれた領域C、305は領域B内輝度算出境界線a、306は領域B内輝度算出境界線bである。 FIG. 3 shows the relationship between the decoded main image and the boundary lines and areas for detecting the black belt portion. In FIG. 3, 300 is a boundary line a, 301 is a boundary line b, 302 is a region A sandwiched by the boundary line a300 from the upper end, 303 is a region B sandwiched by the boundary line a301 from the boundary line a300, and 304 is a boundary line Regions C and 305 sandwiched at the lower end from b301 are the luminance calculation boundary line a within region B, and 306 is the luminance calculation boundary line b within region B.
図4(a)、図4(b)、図4(c)は、黒帯部分検出の手順とそれに伴う境界線a300の動きをフローチャートにて図示したものである。図4(a)、図4(b)、図4(c)で、401から415は、黒帯検出の処理とそれに伴なう境界線a300を動かす処理ステップ及び判断ステップである。
4 (a), 4 (b), and 4 (c) are flowcharts showing the black belt portion detection procedure and the movement of the boundary line a300. In FIG. 4A, FIG. 4B, and FIG. 4C,
図5(a)、図5(b)、図5(c)は、黒帯部分検出の手順とそれに伴う境界線b301の動きをフローチャートにて図示したものである。図5(a)、図5(b)、図5(c)で、501から515は、黒帯検出の処理とそれに伴なう境界線a300を動かす処理ステップ及び判断ステップである。
FIG. 5A, FIG. 5B, and FIG. 5C are flowcharts showing the black belt portion detection procedure and the movement of the boundary line b301. In FIG. 5A, FIG. 5B, and FIG. 5C,
図6(a)、図6(b)は、表示する領域Aの黒帯部分が変更の判定と、黒帯部分検出処理を再スタートさせるまでのをフローチャートにて図示したものである。図6(a)、図6(b)で601から611は、表示する黒帯部分の変更判定と、黒帯部分検出処理を再スタートするまでの処理ステップである。
FIGS. 6A and 6B are flowcharts showing the determination until the black belt portion of the area A to be displayed is changed and the black belt portion detection processing is restarted. In FIG. 6A and FIG. 6B,
図7(a)、図7(b)は、表示する領域Cの黒帯部分が変更の判定と、黒帯部分検出処理を再スタートさせるまでのをフローチャートにて図示したものである。図7(a)、図7(b)で701から711は、表示する黒帯部分の変更判定と、黒帯部分検出処理を再スタートするまでの処理ステップである。
FIGS. 7A and 7B are flowcharts showing the determination until the black belt portion of the area C to be displayed is changed and the black belt portion detection process is restarted. In FIG. 7A and FIG. 7B,
はじめに本映像再生装置での映像データ復号処理ステップの概要について説明する。分離された主映像データと副映像データは、それぞれ主映像復号手段100、副映像復号手段106にて映像データ復号を行い、それぞれ主映像信号と副映像信号を生成する。その後最終段の映像信号加算手段103にて、主映像信号と副映像信号の時間同期をとりながら加算し、ディスプレイ等に表示させるための映像信号として出力する。主映像データは動画データが割り当てられており、再生素材画像データの画格は、映画素材などで「ビスタサイズ」、「シネマスコープサイズ」などいくつかの幅の広いパターンが存在する。一方、副映像データは、主に字幕データにが割り当てられている。
First, an outline of video data decoding processing steps in the video playback apparatus will be described. The separated main video data and sub-video data are respectively decoded by the main
ここで、主映像復号手段100と映像信号加算手段103の間に、水平拡大縮小手段101、垂直拡大縮小手段102を追加することにより、副映像信号とは独立に主映像信号の拡大縮小処理が可能になる。また、主映像信号の黒帯部分を検出するために黒帯部分検出手段105を組み込み、黒帯部分検出手段には、映像領域3分割手段200、領域A最大輝度算出手段201、領域A平均輝度算出手段202、領域A最小輝度算出手段203、領域B最大輝度算出手段204、領域B平均輝度算出手段205、領域B最小輝度算出手段206、領域C最大輝度算出手段207、領域C平均輝度算出手段208、領域C最小輝度算出手段209、黒帯境界判定手段210を持ち合わせる。
Here, by adding a horizontal enlargement / reduction means 101 and a vertical enlargement / reduction means 102 between the main video decoding means 100 and the video signal adding means 103, the enlargement / reduction processing of the main video signal can be performed independently of the sub-video signal. It becomes possible. Further, a black band
主映像復号手段100より出力された主映像信号に関して、時間経過と共に黒帯検出手段105により主映像黒帯部分を検出する。出力される映像(フィールドもしくはフレーム)の画面全体を映像領域3分割手段200に取り込む。取り込まれた映像データは、垂直方向に領域A302、領域B303、領域C304と3つの領域に分割され、領域A302では、領域A最大輝度算出手段201にて領域A302の最大輝度を、領域A平均輝度算出手段202にて領域A302の平均輝度を、領域A最小輝度算出手段203にて領域A302の最小輝度を算出し、領域B303では、領域B最大輝度算出手段204にて領域B303の最大輝度を、領域B平均輝度算出手段205にて領域B303の平均輝度を、領域B最小輝度算出手段206にて領域B303の最小輝度を算出し、同様に領域C304では、領域C最大輝度算出手段207にて領域C304の最大輝度を、領域C平均輝度算出手段208にて領域C304の平均輝度を、領域C最小輝度算出手段209にて領域C304の最小輝度を算出する。前記のそれぞれの輝度検出手段は、各領域全体の各輝度値を算出することも可能であり、かつ、その各領域内の指定された範囲の各輝度を検出する事もできる。
With respect to the main video signal output from the main
次に図4、図5を用いて黒帯境界の判定処理について説明する。 Next, the black belt boundary determination process will be described with reference to FIGS.
求められた各領域の最大輝度値、平均輝度値、最小輝度値より黒帯境界判定手段210にて主映像の黒帯の境界線を判定する。まず、黒の部分とする輝度のしきい値Tを定める(ステップ401)。境界線a300の初期位置を復号された主映像の上端とする(ステップ402)。境界線a300を下方へずらしながら、領域A302の最大輝度値、平均輝度値、最小輝度値が等しく、かつ、先に定めたしきい値Tより小さい部分の境界位置を検出する(ステップ403、ステップ404、ステップ405)。検出後は、その境界位置に境界線a300を設置し、映像t1フレームの期間連続で(t1は任意の整数)この境界位置が変動しないことを確認する(ステップ406、ステップ407、ステップ408、ステップ409、ステップ410、ステップ411、ステップ412)。この確認の処理を、映像の上端から設置された境界線a300に囲まれた領域A302の最大輝度値、平均輝度値、最小輝度値が等しくかつしきい値Tよりも小さいという条件と、領域B303内に存在する境界線a300から下方lラインに存在する領域B内輝度算出境界線a305に挟まれた領域(lは任意の整数)の最大輝度値、平均輝度値、最小輝度値が等しくないまたはしきい値T以上という条件の、2つの条件にて行う(ステップ410)。前記2つの条件が満たされていると確認された場合は、上端から境界線a300にて挟まれた領域A302を黒帯部分と判定する。前記2つの条件が満たされない場合、再度境界線a300を上下させ黒帯部分検出の処理を継続する。領域A302の最大輝度値、平均輝度値、最小輝度値が等しくないまたはしきい値T以上であれば、境界線a300を上方へ移動させ(ステップ413、ステップ415)、領域A302と、境界線a300から下方lラインに存在する領域B内輝度算出境界線a305に挟まれた領域(lは任意の整数)の双方が、最大輝度値、平均輝度値、最小輝度値が等しくかつしきい値Tよりも小さい場合は、境界線a300を下方へ移動させながら(ステップ413、ステップ414)、黒帯部分の境界位置処理を継続させる。
Based on the maximum luminance value, average luminance value, and minimum luminance value of each area obtained, the black band
同様に、境界線b301の初期位置を復号された主映像の下端とする(ステップ502)。境界線b301を上方へずらしながら、領域C304の最大輝度値、平均輝度値、最小輝度値が等しく、かつ、先に定めたしきい値Tより小さい部分の境界位置を検出する(ステップ503、ステップ504、ステップ505)。検出後は、その境界位置に境界線b301を設置し、映像t1フレームの期間連続で(t1は任意の整数)この境界位置が変動しないことを確認する(ステップ506、ステップ507、ステップ508、ステップ509、ステップ510、ステップ511)。この確認の処理は、映像の下端から設置された境界線b301に囲まれた領域C304の最大輝度値、平均輝度値、最小輝度値が等しくかつしきい値Tよりも小さいという条件と、境界線b301から上方mラインに存在する領域B内輝度算出境界線b306にに挟まれた領域(mは任意の整数)の最大輝度値、平均輝度値、最小輝度値が等しくないまたはしきい値T以上という条件の、2つの条件にて行う(ステップ510)。前記2つの条件が満たされていると確認された場合は、下端から境界線b301にて挟まれた領域C304を黒帯部分と判定する。前記2つの条件が満たされない場合、再度境界線b301を上下させ黒帯部分検出の処理を継続する。領域C304の最大輝度値、平均輝度値、最小輝度値が等しくないまたはしきい値T以上であれば、境界線b301を下方へ移動させ(ステップ513、ステップ514)、領域C304と、境界線b301から下方mラインに存在する領域B内輝度算出境界線b306に挟まれた領域(mは任意の整数)の双方が、最大輝度値、平均輝度値、最小輝度値が等しくかつしきい値Tよりも小さい場合は、境界線b301を上方へ移動させながら(ステップ513,ステップ514)、黒帯部分の境界位置処理を継続させる。
Similarly, the initial position of the boundary line b301 is set as the lower end of the decoded main video (step 502). While the boundary line b301 is shifted upward, the boundary position of the portion where the maximum luminance value, the average luminance value, and the minimum luminance value of the region C304 are equal and smaller than the predetermined threshold value T is detected (
次に図6(a)、図6(b)、図7(a)、図7(b)を用いて一旦黒帯境界が判定された後の、黒帯境界が変化したと判定する処理について説明する。一旦黒帯境界が判定された後は、領域a302と、領域B303内に存在する境界線a 300から下方lラインに存在する領域B内輝度算出境界線a305に挟まれた領域(lは任意の整数)と、境界線b301から上方mライン存在する領域B内輝度算出境界線b306にに挟まれた領域(mは任意の整数)と、領域C304のそれぞれの最大輝度値、平均輝度値、最小輝度値の算出を継続する(ステップ601、ステップ602、ステップ603、ステップ604、ステップ605、ステップ701、ステップ702、ステップ703、ステップ704、ステップ705)。黒帯境界が判定された後に、t2フレームの期間(t2は任意の整数)連続で領域A302、もしくは領域C304の最大輝度値、平均輝度値、最小輝度値が等しくないまたはしきい値T以上の条件であれば、黒帯境界判定の処理を再開させる(ステップ602、ステップ603、ステップ604、ステップ606、ステップ607、ステップ608、ステップ609、ステップ610、ステップ611)。この場合、領域A302が最大輝度値、平均輝度値、最小輝度値が等しくないまたはしきい値T以上であれば、境界線a300を上方へ移動させながら(ステップ611)、領域C304が最大輝度値、平均輝度値、最小輝度値が等しくないまたはしきい値T以上であれば、境界線b301を下方へ移動させながら(ステップ610)、黒帯境界検出処理を再開させる。なお、黒帯検出処理フローの一部を示す図4(a)において黒帯境界検出処理再開時は、ステップ402の処理はスキップされる。
Next, a process for determining that the black belt boundary has changed after the black belt boundary has been once determined using FIGS. 6 (a), 6 (b), 7 (a), and 7 (b). explain. Once the black belt boundary is determined, the region a302 and the region between the boundary line a300 existing in the region B303 and the region B luminance calculation boundary line a305 existing in the lower l line (l is an arbitrary Integer), a region (m is an arbitrary integer) sandwiched between the region B luminance calculation boundary line b306 existing m lines above the boundary line b301, and the maximum luminance value, average luminance value, and minimum of each region C304 The calculation of the luminance value is continued (
また、黒帯境界が判定された後に、t3フレームの期間(t3は任意の整数)連続で、領域A302と、境界線a300から下方lラインに存在する領域B内輝度算出境界線a305に挟まれた領域(lは任意の整数)の双方が、最大輝度値、平均輝度値、最小輝度値が等しくかつしきい値Tよりも小さい、もしくは、領域C304と、境界線b301から上方mラインに存在する領域B内輝度算出境界線b306に挟まれた領域(mは任意の整数)の双方が、最大輝度値、平均輝度値、最小輝度値が等しくかつしきい値Tよりも小さいという条件が発生した場合も、黒帯境界検出処理を再開させる(ステップ702、ステップ703、ステップ704、ステップ706、ステップ707、ステップ708、ステップ709、ステップ710、ステップ711)。この場合、領域A302と、境界線a300から下方lラインに存在する領域B内輝度算出境界線a305に挟まれた領域(lは任意の整数)の双方が、最大輝度値、平均輝度値、最小輝度値が等しくかつしきい値Tよりも小さいとき、境界線a300を下方へ移動させながら(ステップ711)、領域C304と、境界線b301から上方mラインに存在する領域B内輝度算出境界線b306に挟まれた領域(mは任意の整数)の双方が、最大輝度値、平均輝度値、最小輝度値が等しくかつしきい値Tよりも小さいとき、境界線b301を上方へ移動させながら(ステップ710)、再度黒帯境界検出処理を行う。なお、黒帯検出処理フローの一部を示す図5(a)において黒帯境界検出処理再開時は、ステップ502の処理はスキップされる。
Further, after the black belt boundary is determined, it is sandwiched between the area A302 and the area B luminance calculation boundary line a305 existing in the lower l line from the boundary line a300 continuously for the period of t3 frame (t3 is an arbitrary integer). The areas (l is an arbitrary integer) both have the same maximum luminance value, average luminance value, and minimum luminance value and are smaller than the threshold value T, or exist in the upper m lines from the area C304 and the boundary line b301. The condition that the maximum brightness value, the average brightness value, and the minimum brightness value are both equal and smaller than the threshold value T is generated in the area (m is an arbitrary integer) sandwiched between the brightness calculation
黒帯部分判定処理の後、拡大比縮小値算出手段104により、黒帯部分検出手段105により検出された主映像の黒帯部分の情報と、主映像の素材の画格情報、表示させるディスプレイの表示領域の情報をもとに、上下の黒帯部分をなくすのに最適な、拡大縮小の比率を算出する。
After the black band portion determination processing, the enlargement ratio reduction
算出された拡大縮小の比率は、水平拡大縮小手段101、垂直拡大縮小手段102へ設定され、設定された値をもとに、主映像の水平方向の拡大縮小、垂直方向の拡大縮小の処理を施し、その後映像信号加算手段103にて副映像を加算し映像出力信号として出力する。
The calculated enlargement / reduction ratio is set in the horizontal enlargement /
従来、表示画面のズームにおいて出力状況が頻繁に変化する字幕表示に影響されていたが、このように、副映像とは独立に主映像の拡大縮小を施し、その後に主映像と副映像を加算することにより、主映像の表示サイズにのみ拡大縮小が施されることになり、表示画面のズームが字幕表示に影響されることなく見やすいズーム機能を実現できる。また、ズーム処理の遅延等に伴う表示画面上での字幕部分の欠落についても回避する事ができる。 Conventionally, the display screen zoom has been affected by the subtitle display whose output status frequently changes, but in this way, the main video is scaled independently of the sub video, and then the main video and sub video are added. By doing so, enlargement / reduction is performed only on the display size of the main video, and it is possible to realize an easy-to-view zoom function without affecting the display screen zoom by the caption display. In addition, it is possible to avoid missing subtitles on the display screen due to a delay in zoom processing or the like.
また、拡大縮小の比率算出の前提となる黒帯部分の検出に関して、検出する領域の最大輝度値、平均輝度値、最小輝度値の3つの値を用いることにより、検出精度を上げるという効果を得る。主映像の殻フレーム毎tに、輝度により黒帯検出を連続的に処理することにより、映像再生素材の時間軸変化にともなって、拡大縮小(ズーム)を自動で変化させることができる。 In addition, regarding the detection of the black belt portion, which is a precondition for calculating the enlargement / reduction ratio, the effect of increasing the detection accuracy is obtained by using three values of the maximum luminance value, the average luminance value, and the minimum luminance value of the detection area. . By continuously processing the black band detection by luminance at every shell frame t of the main video, the enlargement / reduction (zoom) can be automatically changed according to the change of the time axis of the video reproduction material.
本発明にかかる映像再生装置は、主映像のみを拡大縮小することによって、主映像と副映像を個別に再生し最終出力段にて加算する映像データ構造をとった放送、通信伝送上のデータ再生を行う映像再生装置にも適用できる。 The video playback apparatus according to the present invention reproduces data on broadcast and communication transmissions having a video data structure in which main video and sub-video are played back separately and added at the final output stage by scaling only the main video. It can also be applied to a video playback device that performs the above.
100 主映像復号手段
101 水平拡大縮小手段
102 垂直拡大縮小手段
103 映像信号加算手段
104 拡大値縮小値演算手段
105 黒帯部分検出手段
106 副映像復号手段
200 映像領域3分割手段
201 領域A最大輝度算出手段
202 領域A平均輝度算出手段
203 領域A最小輝度算出手段
204 領域B最大輝度算出手段
205 領域B平均輝度算出手段
206 領域B最小輝度算出手段
207 領域C最大輝度算出手段
208 領域C平均輝度算出手段
209 領域C最小輝度算出手段
210 黒帯境界判定手段
100 Main video decoding means 101 Horizontal enlargement / reduction means 102 Vertical enlargement / reduction means 103 Video signal addition means 104 Enlarged value reduction value calculation means 105 Black belt part detection means 106 Sub-picture decoding means 200 Video area tri-section means 201 Area A maximum
Claims (10)
前記拡大値縮小値演算手段より求められた水平方向拡大縮小値と垂直方向拡大縮小値に基づいて、前記水平拡大縮小手段と垂直拡大縮小手段によってディスプレイに黒帯部分が表示されないように主映像の拡大縮小を調整するように構成したことを特徴とする映像再生装置。 In a video playback apparatus that has a main video decoding means and a sub video decoding means and adds and outputs the main video signal output from the main video decoding means and the sub video signal output from the sub video decoding means, the luminance of the main video signal Based on the information on the black belt portion output from the black belt portion detection means for detecting the black belt portion of the main video, the picture quality of the playback material, the display quality of the display and the black belt portion detection means. An enlargement / reduction value calculation means for calculating the enlargement / reduction ratio of the main image, a main image horizontal enlargement / reduction means, and a main image vertical enlargement / reduction means,
Based on the horizontal enlargement / reduction value and the vertical enlargement / reduction value obtained by the enlargement / reduction value calculation means, the horizontal enlargement / reduction means and the vertical enlargement / reduction means prevent the black band portion from being displayed on the display. A video reproducing apparatus configured to adjust enlargement / reduction.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004006561A JP2005203933A (en) | 2004-01-14 | 2004-01-14 | Video-reproducing apparatus and video-reproducing method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004006561A JP2005203933A (en) | 2004-01-14 | 2004-01-14 | Video-reproducing apparatus and video-reproducing method |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2005203933A true JP2005203933A (en) | 2005-07-28 |
Family
ID=34820485
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2004006561A Pending JP2005203933A (en) | 2004-01-14 | 2004-01-14 | Video-reproducing apparatus and video-reproducing method |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2005203933A (en) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009038619A (en) * | 2007-08-02 | 2009-02-19 | Sony Corp | Image processing device and method, and program |
CN101087380B (en) * | 2006-06-08 | 2011-08-03 | 索尼株式会社 | Image signal processing apparatus, image display and image display method |
US8111328B2 (en) | 2006-06-08 | 2012-02-07 | Sony Corporation | Image signal processing apparatus, image display, and image display method |
US8411974B2 (en) | 2008-12-16 | 2013-04-02 | Sony Corporation | Image processing apparatus, method, and program for detecting still-zone area |
CN103369205A (en) * | 2012-03-26 | 2013-10-23 | 宇龙计算机通信科技(深圳)有限公司 | Mobile terminal and video image processing method |
-
2004
- 2004-01-14 JP JP2004006561A patent/JP2005203933A/en active Pending
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101087380B (en) * | 2006-06-08 | 2011-08-03 | 索尼株式会社 | Image signal processing apparatus, image display and image display method |
US8098328B2 (en) | 2006-06-08 | 2012-01-17 | Sony Corporation | Image signal processing apparatus, image display and image display method |
US8111328B2 (en) | 2006-06-08 | 2012-02-07 | Sony Corporation | Image signal processing apparatus, image display, and image display method |
JP2009038619A (en) * | 2007-08-02 | 2009-02-19 | Sony Corp | Image processing device and method, and program |
US8411974B2 (en) | 2008-12-16 | 2013-04-02 | Sony Corporation | Image processing apparatus, method, and program for detecting still-zone area |
CN103369205A (en) * | 2012-03-26 | 2013-10-23 | 宇龙计算机通信科技(深圳)有限公司 | Mobile terminal and video image processing method |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8319898B2 (en) | Edge enhancement method and apparatus | |
JP4859219B2 (en) | Video output apparatus and control method thereof | |
US7813584B2 (en) | Image reproduction device and image reproduction method employing a brightness adjustment | |
EP1897368B1 (en) | A method and apparatus for displaying data content | |
JP2010041336A (en) | Image processing unit and image processing method | |
US8115867B2 (en) | Image processing device | |
JP2007221269A (en) | Unit and method for controlling display signal, program, and storage medium | |
KR100828354B1 (en) | Apparatus and method for controlling position of caption | |
US8363160B2 (en) | Caption detection device, caption detection method, and pull-down signal detection apparatus | |
KR100487396B1 (en) | Digital TV system for supporting of film mode and method for the same | |
US8432495B2 (en) | Video processor and video processing method | |
JP2009100270A (en) | Video-editing method and television broadcast receiver | |
JP3819870B2 (en) | Image display device | |
KR20080011026A (en) | Image processing apparatus, display apparatus and image processing method | |
JP2005203933A (en) | Video-reproducing apparatus and video-reproducing method | |
JP2009175182A (en) | Image processing device | |
JP2004194311A (en) | Video playback device and video playback method | |
EP1848203B2 (en) | Method and system for video image aspect ratio conversion | |
JP2009027430A (en) | Moving picture reproducing apparatus | |
US20070046818A1 (en) | Picture display device and picture display method | |
JP2009159321A (en) | Interpolation processing apparatus, interpolation processing method, and picture display apparatus | |
JP2008005444A (en) | Television receiver | |
JP4575503B2 (en) | Broadcast receiving apparatus and broadcast receiving method | |
JP2009147669A (en) | Video display device and video processor | |
KR100781264B1 (en) | Display device and method for displaying video thereof |