JP2009111885A - Image data processing apparatus, and image data processing method - Google Patents
Image data processing apparatus, and image data processing method Download PDFInfo
- Publication number
- JP2009111885A JP2009111885A JP2007284107A JP2007284107A JP2009111885A JP 2009111885 A JP2009111885 A JP 2009111885A JP 2007284107 A JP2007284107 A JP 2007284107A JP 2007284107 A JP2007284107 A JP 2007284107A JP 2009111885 A JP2009111885 A JP 2009111885A
- Authority
- JP
- Japan
- Prior art keywords
- image data
- image
- frame rate
- data
- gradation
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 7
- 239000000203 mixture Substances 0.000 claims description 51
- 230000015572 biosynthetic process Effects 0.000 claims description 5
- 238000003786 synthesis reaction Methods 0.000 claims description 5
- 230000002194 synthesizing effect Effects 0.000 claims 1
- 238000006243 chemical reaction Methods 0.000 abstract description 11
- 238000010586 diagram Methods 0.000 description 8
- 238000001514 detection method Methods 0.000 description 6
- 230000006870 function Effects 0.000 description 4
- 238000000926 separation method Methods 0.000 description 4
- 230000005540 biological transmission Effects 0.000 description 2
- 206010047571 Visual impairment Diseases 0.000 description 1
- 239000002131 composite material Substances 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000000034 method Methods 0.000 description 1
Images
Abstract
Description
本発明は、画像データを処理する画像データ処理装置および画像データ処理方法に関する。 The present invention relates to an image data processing apparatus and an image data processing method for processing image data.
表示品位を向上するため、画像のフレームレート(フィールド周波数)および階調数が増大してきている。現在では、高低のフレームレート(例えば、120Hzおよび60Hz)および高低の階調数(例えば、12ビットおよび8ビット)の画像が混在して用いられている。また、伝送容量等の関係で、フレームレートが制限される場合もある。このため、低フレームレートの画像を高フレームレートの画像に変換する技術が公開されている(例えば、特許文献1参照)。即ち、隣接するフィールドから補間フィールドを生成し、フィールド周波数を増大させる。
ここで、画像の処理(例えば、フレームレート変換)のための素子には、低階調用および高階調用の双方が有る。従い、低階調用の素子を用いて、高階調のフレームレートへの変換が実現できれば便宜である。
上記に鑑み、本発明は、低階調用の素子を用いた高階調のフレームレート変換を可能とする画像データ処理装置および画像データ処理方法を提供することを目的とする。
Here, elements for image processing (for example, frame rate conversion) include both for low gradation and for high gradation. Therefore, it is convenient if conversion to a high gradation frame rate can be realized by using an element for low gradation.
In view of the above, an object of the present invention is to provide an image data processing apparatus and an image data processing method that enable high gradation frame rate conversion using a low gradation element.
本発明の一態様に係る画像データ処理装置は、第1のビット数の階調データを有し、第1のフレームレートの第1の画像データを分割して、第2のビット数の階調データを有する第2の画像データと、第3のビット数の階調データを有する第3の画像データとを生成するデータ分割部と、前記第2の画像データの隣接するフレームを補間して、前記第2のビット数の階調データを有し、かつ前記第1のフレームレートより大きい第2のフレームレートの第4の画像データを生成するフレーム補間部と、前記第3の画像データを保持して複数回出力することで、前記第3のビット数の階調データを有し、かつ前記第2のフレームレートの第5の画像データを生成するフレームバッファと、前記第2の画像データが静止画と対応しない場合に、前記第4の画像データに前記第5の画像データを付加して、前記第1のビット数の階調データを有し、かつ前記第2のフレームレートの第6の画像データを生成するデータ付加部と、を具備することを特徴とする。 An image data processing device according to an aspect of the present invention has gradation data having a first number of bits, and divides the first image data having a first frame rate to obtain a gradation having a second number of bits. Interpolating adjacent frames of the second image data, a data dividing unit that generates second image data having data and third image data having gradation data of a third number of bits, A frame interpolator having gradation data of the second number of bits and generating fourth image data having a second frame rate larger than the first frame rate, and holding the third image data And outputting a plurality of times, a frame buffer having gradation data of the third number of bits and generating fifth image data of the second frame rate, and the second image data If it does not correspond to a still image, A data adding unit that adds the fifth image data to the fourth image data, has gradation data of the first number of bits, and generates sixth image data of the second frame rate It is characterized by comprising.
本発明の一態様に係る画像データ処理方法は、第1のビット数の階調データを有し、第1のフレームレートの第1の画像データを分割して、第2のビット数の階調データを有する第2の画像データと、第3のビット数の階調データを有する第3の画像データとを生成するステップと、前記第2の画像データの連続するフレームを補間して、前記第2のビット数の階調データを有し、かつ前記第1のフレームレートより大きい第2のフレームレートの第4の画像データを生成するステップと、前記第3の画像データを保持して複数回出力することで、前記第3のビット数の階調データを有し、かつ前記第2のフレームレートの第5の画像データを生成するステップと、前記第2の画像データが静止画と対応しない場合に、前記第4の画像データに前記第5の画像データを付加して、前記第1のビット数の階調データを有し、かつ前記第2のフレームレートの第6の画像データを生成するステップと、を具備することを特徴とする。 An image data processing method according to an aspect of the present invention includes gradation data having a first number of bits, dividing first image data having a first frame rate, and obtaining gradations having a second number of bits. Generating second image data having data and third image data having gradation data of a third number of bits; interpolating successive frames of the second image data; and Generating fourth image data having gradation data of 2 bits and having a second frame rate greater than the first frame rate; and holding the third image data a plurality of times Generating the fifth image data having the third number of bits and having the second frame rate by outputting, and the second image data does not correspond to a still image In the case, the fourth image data Adding the fifth image data to generate sixth image data having gradation data of the first bit number and having the second frame rate. And
本発明によれば、低階調用の素子を用いた高階調のフレームレート変換を可能とする画像データ処理装置および画像データ処理方法を提供できる。 According to the present invention, it is possible to provide an image data processing apparatus and an image data processing method that enable high-gradation frame rate conversion using an element for low gradation.
以下、図面を参照して、本発明の実施の形態を詳細に説明する。
(第1の実施の形態)
図1は本発明の第1実施形態に係る画像データ処理装置100を表すブロック図である。図2は、画像データ処理装置100で処理される画像データを表す模式図である。画像データ処理装置100は、第1のフレームレート(低フレームレート)の画像データを第2のフレームレート(高フレームレート)の画像データに変換して表示する。ここでは、フレームレートを、例えば、60Hzから120Hzへと倍速に変換している。
Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings.
(First embodiment)
FIG. 1 is a block diagram showing an image
画像データ処理装置100は、入力部110、画像データ分割部120、フレーム間画像処理部130、フレームバッファ140、通過制御部150、画像データ付加部160、表示部170を有する。この内、入力部110、表示部170は高ビット数(例えば、YCbCrそれぞれが12ビット(12ビット×3))の画像データに対応する。フレーム間画像処理部130、フレームバッファ140、通過制御部150は、低ビット数(例えば、YCbCrそれぞれが8および4ビット(8および4ビット×3))の画像データに対応する。画像データ分割部120は、入力側が高ビット数(例えば、12ビット×3)で、出力側が低ビット数(例えば、8および4ビット×3)である。画像データ付加部160は、入力側が低ビット数(例えば、8および4ビット×3)で、出力側が高ビット数(例えば、12ビット×3)である。なお、「YCbCr」において、「Y」は輝度信号(明るさ)を示し、「Cb」は青の色差信号、「Cr」は赤の色差信号を示す。
The image
入力部110は、例えば、チューナ、ビデオ装置等に接続され、画像データD1(映像信号)を入力する。画像データD1は、高階調(例えば、YCbCrそれぞれが12ビット階調(12ビット×3))で、低フレームレート(例えば、60Hz)である。図2では、フレームレート60Hzで基準となるフレームF0の画像データD1をYCbCrに区分して、「Y60[11:0]、Cb60[11:0]、Cr60[11:0]」と表している。ここで,Y,Cb,Crの添え字はフレームレート[Hz]を表す。画像データD1は、動画および静止画の何れであっても良い。動画の場合には画像データD1はフレームFによって異なり、静止画の場合には画像データD1はフレームFによる変化は無い。
The
画像データ分割部120は、画像データD1を2組の画像データD2a、D2bに分割するものであり、第1の画像データを分割して、第2、第3の画像データを生成するデータ分割部として機能する。
The image
画像データD2a、D2bはそれぞれ、画像データD1の階調データが上位ビット、下位ビット(例えば、上位8ビット、下位4ビット)に分割されたものである。図2では、フレームF0の画像データD2a、D2bをYCbCrに区分してそれぞれ、「Y60[11:4]、Cb60[11:4]、Cr60[11:4]」、および「Y60[3:0]、Cb60[3:0]、Cr60[3:0]」と表している。 Each of the image data D2a and D2b is obtained by dividing the gradation data of the image data D1 into upper bits and lower bits (for example, upper 8 bits and lower 4 bits). In FIG. 2, the image data D2a and D2b of the frame F 0 are divided into YCbCr, and “Y 60 [11: 4], Cb 60 [11: 4], Cr 60 [11: 4]”, and “Y 60 [3: 0], Cb 60 [3: 0], Cr 60 [3: 0] ”.
フレーム間画像処理部130は、画像データD2aの隣接するフレームF0、F―1を補間して、フレーム数が増大された画像データD3aを生成する(低フレームレートから高フレームレートへの変換)。フレーム間画像処理部130は、第2の画像データの隣接するフレームを補間して、第4の画像データを生成するフレーム補間部として機能する。
The inter-frame
隣接するフレームF0、F―1を用いて、これらの中間のフレームF―1/2を生成し、フレームF0、F―1に付加することで、画像データD3aが生成される。即ち、画像データD3aは、高フレームレート(例えば、120Hz)である。図2では、フレームレート120HzでフレームF−1/2の画像データD3aをYCbCrに区分して、「Y120[11:4]、Cb[11:4]、Cr[11:4]」として表している。なお、動画の場合には画像データD2a(画像データD1)はフレームF0、F―1/2で異なり、静止画の場合には画像データD2a(画像データD1)はフレームF0、F―1/2による変化は無い。 Using the adjacent frames F 0 and F −1 , these intermediate frames F −1/2 are generated and added to the frames F 0 and F −1 to generate image data D3a. That is, the image data D3a has a high frame rate (for example, 120 Hz). In FIG. 2, the image data D3a of the frame F− 1 / 2 at the frame rate of 120 Hz is divided into YCbCr and expressed as “Y 120 [11: 4], Cb [11: 4], Cr [11: 4]”. ing. In the case of a moving image, the image data D2a (image data D1) is different in the frames F 0 and F −1/2 , and in the case of a still image, the image data D2a (image data D1) is the frames F 0 and F −1. No change due to / 2 .
フレーム間画像処理部130は、画像データD2aで表される画像の動きの有無(動画、静止画の区分)を表す動き信号Sを出力する。例えば、動きベクトルVの絶対値が所定の値より大きいか否かによって、動画と静止画を区分し、この区分に応じた動き信号Sを生成、出力する。
The inter-frame
動きベクトルVは、画像データD2aの隣接するフレームF0、F―1から生成できる。動きベクトルVは、基準となるフレームからの動きを表すベクトルである。隣接するフレームF0、F―1を比較することで、動きベクトルVが生成される。具体的には、フレームF0をブロックに区分し、前のフレームF―1との差分が最も小さくなるブロック間の相対的位置が動きベクトルVとなる。なお、フレームの補間の際に、動きベクトルVが生成されるのが通例である。 The motion vector V can be generated from adjacent frames F 0 and F −1 of the image data D2a. The motion vector V is a vector representing the motion from the reference frame. A motion vector V is generated by comparing adjacent frames F 0 and F −1 . Specifically, the frame F 0 is divided into blocks, and the relative position between the blocks having the smallest difference from the previous frame F −1 is the motion vector V. In general, a motion vector V is generated during frame interpolation.
フレームバッファ140は12ビット×1フレーム分以上のメモリ容量を備え、画像データD2bを一時的に保持し、複数回(例えば、2回)出力することで、フレーム数が増大された画像データD3bを生成する(低フレームレートから高フレームレートへの変換)。即ち、画像データD3bは、高フレームレート(例えば、120Hz)である。図2では、隣接するフレームF0、F―1の中間のフレームF―1/2の画像データD3b(フレームレート120Hz)をYCbCrに区分して、「Y120[3:0]、Cb120[3:0]、Cr120[3:0]」として表している。
The
通過制御部150は、画像データD2a(動き信号S)が静止画を表す場合に、画像データD3bを通過させる。通過制御部150は、画像データD2aが動画を表す(静止画を表さない)場合に、画像データD3bを通過させず、画像信号D0を出力する。画像信号D0は、全ての画像データがゼロの画像信号であり、図2には「4b0000」(4ビットの「0000」)として表される。
The
画像データ付加部160は、画像データD3aに通過制御部150から出力される画像データD3bまたはD0を付加して、画像データD4またはD5を生成、出力する。画像データD3b、D0に対応して、画像データD4、D5が生成される。図2では、フレームF―1/2の画像データD4はY=「Y120[11:4]、Y120[3:0]」、Cb=「Cb120[11:4]、Cb120[3:0]」、Cr=「Cr120[11:4]、Cr120[3:0]」として表している。また、フレームF―1/2の画像データD5をY=「Y120[11:4]、4b0000」、Cb=「Cb120[11:4]、4b0000」、Cr=「Cr120[11:4], 4b0000」として表している。これらは,例えば,Y120[11:4]に下位ビットとしてY120[3:0]を付加して12ビットに戻すことを表す。即ち,Y120[11:4]を4ビットシフトし、Y120[3:0]を加える。
The image
通過制御部150および画像データ付加部160によって、画像データD2aが静止画の場合に、画像データD3aに画像データD3bが付加され、画像データD4が生成、出力される。また、画像データD2aが静止画でない場合、画像データD3aに画像データD3bが付加されず、画像データD5が生成、出力される。通過制御部150および画像データ付加部160は,第2の画像データが静止画と対応する場合に、第4の画像データに前記第5の画像データを付加して、第6の画像データを生成するデータ付加部として機能する。
When the image data D2a is a still image, the
次の理由により、動画と静止画で付加の有無が相違する。フレーム間画像処理部130で動きベクトル処理により,画像データD2aから画像データD3aが生成される。このとき,静止画であれば動きベクトルがないので,前フレームF―1と同じ画像データが中間フレームF―1/2として繰り返され,画像データD3aが生成される。また,動画であれば動きベクトルに応じ,補間された画像データD3aが生成される。一方、フレームバッファ140で前フレームF―1と同じ画素データが中間フレームF―1/2として繰り返され,画像データD2bから画像データD3bが生成される。
For the following reason, the presence or absence of addition is different between the moving image and the still image. Image data D3a is generated from the image data D2a by the motion vector processing in the inter-frame
この結果,静止画のときは画像データ付加部160で画像データD3aに画像データD3bを付加することで、フレーム間画像処理部130を高ビット数化(12ビット×3)したと同じ効果が得られる。また動画のときは画像データD3aの中間フレームF―1/2は前フレームF―1と一致しないので、画像データD3bは付加せず,低ビット(8ビット×3)精度のままとする。
As a result, in the case of a still image, the image
このように処理することで,視聴者の目に付きやすい静止画部分で空や人肌などの微妙なグラデーション部分では多ビット化された高階調で表示される。一方,動画部分ではビット階調よりも残像などの動きのほうが視聴者の目に付きやすいため階調精度は低ビットのままで足りる。 By processing in this way, a still image portion that is easily noticeable to the viewer is displayed at a high gradation with multiple bits in a delicate gradation portion such as sky or human skin. On the other hand, since the motion of the afterimage or the like is more noticeable to the viewer than the bit gradation in the moving image portion, the gradation accuracy may be kept low.
表示部170は、画像データ付加部160から出力される画像データD4または画像データD3bに基づく画像を表示する表示装置、例えば、液晶表示装置である。
The
(画像データ処理装置100の動作)
以下、画像データ処理装置100の動作を説明する。
(Operation of Image Data Processing Device 100)
Hereinafter, the operation of the image
(1)画像データD1の入力
入力部110から画像データD1が入力される。
(1) Input of image data D1 Image data D1 is input from the
(2)画像データD1の分割
画像データ分割部120が画像データD1を分割して、画像データD2a、D2bが生成される。
(2) Division of Image Data D1 The image
(3)画像データD2a、D2bそれぞれのフレームレート変換
次のように、画像データD2a、D2bそれぞれのフレームレートが変換される。
a. フレーム間画像処理部130が画像データD2aの隣接するフレームを補間して、高フレームレートの画像データD3aを生成する。
b. フレームバッファ140が画像データD2bを保持し、複数回出力することで、高フレームレートの画像データD3bを生成する。
(3) Frame rate conversion of each of image data D2a and D2b The frame rate of each of image data D2a and D2b is converted as follows.
a. The inter-frame
b. The
(4)画像データD3aへの画像データD3bの付加
画像データD2aが静止画の場合、通過制御部150および画像データ付加部160が、画像データD3aに画像データD3bを付加して、画像データD4が生成、出力される。画像データD2aが動画の場合、画像データD3aに画像データD3bが付加されない。既述のように、静止画、動画に応じて、データの付加の有無を変更することで、静止画部分で微妙なグラデーション部分では多ビット化による高階調で表示される。
(4) Addition of image data D3b to image data D3a When image data D2a is a still image,
(第2の実施の形態)
本発明の第2の実施形態を説明する。
図3は、本発明の第2の実施形態に係る画像データ処理装置200を表すブロック図である。図4は、画像データ処理装置200で処理される画像データを表す模式図である。画像データ処理装置200は、例えば、チューナ、ビデオ装置等から映像信号(画像データD1)を入力し,動きベクトル処理等により,高精度で第1のフレームレート(低フレームレート)の画像データを第2のフレームレート(高フレームレート)の画像データに変換して表示する。画像データ処理装置200は、さらに、メニュー画面やチャンネルバナーなどのOSD(On Screen Display)画像信号(画像データDα6)を生成し繰り返し出力することで第1のフレームレート(低フレームレート)から第2のフレームレート(高フレームレート)に変換し、映像信号とOSD画像信号を合成して表示する。ここでは、フレームレートを、例えば、60Hzから120Hzへと倍速に変換している。
(Second Embodiment)
A second embodiment of the present invention will be described.
FIG. 3 is a block diagram showing an image
画像データ処理装置200は、入力部110、画像データ分割部120、フレーム間画像処理部130、フレームバッファ240、通過制御部250、画像データ付加部160、表示部170、画像生成部281、ブレンド比分離部282a、ブレンド比付加部282b、ブレンド比検出部283、切替部284、画像合成部290を有する。画像合成部290は高ビット数(例えば、YCbCrそれぞれが12ビット(12ビット×3))の画像データに対応する。フレームバッファ240、通過制御部250、画像生成部281、ブレンド比分離部282a、ブレンド比付加部282b、ブレンド比検出部283、切替部284は、低ビット数(例えば、YCbCrそれぞれが8ビット(8ビット×3))の画像データに対応する。
The image
画像生成部281は、画像データDα6を生成する。画像データDα6は、ブレンド比αの情報および画像データD6を含む。ブレンド比(合成比)αは例えば8ビットのデジタルデータとすると0〜255の値を取り、画像合成部290で他の画像データと画像データD6を合成(重畳)するときの合成の比率(画像データD6が表す画像の透過の程度)を表わす。ブレンド比αが、255のとき完全な不透過であり(画像データD6が表す画像の下に他の画像が見られない)、0のとき完全な透明となり(画像データD6が表す画像が見られない)、合成後の画像データに画像データD6が含まれない。画像データD6は、例えば、ユーザの操作に用いられるメニューを表示するためのグラフィック画像(OSD画像信号)を表す。
The
図4では、フレームレート60Hzで基準となるフレームF0の画像データDα6をαYCbCrに区分して、「α60[7:0]、GY60[7:0]、GCb60[7:0]、GCr60[7:0]」と表している。また、フレームF0の画像データD6を「GY60[7:0]、GCb60[7:0]、GCr60[7:0]」と表している。 In FIG. 4, the image data Dα6 of the reference frame F 0 at a frame rate of 60 Hz is divided into αYCbCr, and “α 60 [7: 0], GY 60 [7: 0], GCb 60 [7: 0], GCr 60 [7: 0] ”. Further, the image data D6 of the frame F 0 is expressed as “GY 60 [7: 0], GCb 60 [7: 0], GCr 60 [7: 0]”.
ブレンド比分離部282aは、画像データDα6を画像データD6とブレンド比αの情報に分離する。
ブレンド比付加部282bは、切替部284から出力される画像データD2bまたはD6にブレンド比αの情報を付加して、画像データDα2bまたはDα6を生成する。図4では、基準となるフレームF0の画像データDα2bをYCbCrに区分して、「α60[7:0]、Y60[3:0]、Cb60[3:0]、Cr60[3:0]」と表している。なお、画像データD2b、D6のビット数が相違することから、画像データDα2bの一部が空(ゼロ、図4上では「−」)となっている。
The blend
The blend ratio adding unit 282b adds the information of the blend ratio α to the image data D2b or D6 output from the
ブレンド比検出部283は、ブレンド比αが0(合成されない)か否かを検出する。
切替部284は、ブレンド比検出部283の検出結果に基づいて、画像データD2b、D6を切り替えて出力する。切替部284は、ブレンド比αが0のとき画像データD2bを出力し、それ以外のとき画像データD6を出力することで、フレームバッファ240に書き込む対象を切り替えている。ブレンド比αが0のときには、後述する画像合成部290で画像データD6が合成に用いられないので、フレームバッファ240に画像データD6を蓄える必要がない。
The blend
The
フレームバッファ240は、ブレンド比αの情報をも含めて処理する点と,YCbCr画像のビット数が異なる点で、フレームバッファ140とメモリ容量が異なり、32ビット×1フレーム分以上のメモリ容量が必要である。フレームバッファ240は、画像データDα2bまたはDα6を一時的に保持し、複数回(例えば、2回)出力することで、フレーム数が増大された画像データDα3bまたはDα7を生成する(低フレームレートから高フレームレートへの変換)。即ち、画像データDα3b、Dα7は、高フレームレート(例えば、120Hz)である。図4では、フレームレート120HzでフレームF―1/2の画像データDα3bをYCbCrに区分して、「α120[7:0]、Y120[3:0]、Cb120[3:0]、Cr120[3:0]」として表している。フレームF―1/2の画像データDα7を「α120[7:0]、GY120[7:0]、GCb120[7:0]、GCr120[7:0]」として表している。
The
通過制御部250は、ブレンド比αの情報をも含めて処理する点で通過制御部150と異なる。通過制御部250は、画像データD2a(動き信号S)が静止画を表し、かつブレンド比αが0の場合に、画像データDα3b中の画像データD3bを通過する。通過制御部250は、画像データD2aが動画を表す(静止画を表さない)か、またはブレンド比αが0以外の場合に、画像データD3aを通過せず、画像信号D0を出力する。画像信号D0は、全ての画像データがゼロの画像信号であり、図4には「4b0000」(4ビットの「0000」)として表される。
The
これらの動作によって、ブレンド比αが0のときにのみ、フレームバッファ240を60Hzの画像データD2bを120Hzの画像データD3bに高フレームレート変換処理に使用し、通過制御部250は第1の実施例と同じく動き信号Sに応じて画像データD3bまたはDOを出力する。
By these operations, only when the blend ratio α is 0, the
通過制御部250および画像データ付加部160によって、画像データD2aが静止画で,ブレンド比αが0の場合に、画像データD3aに画像データD3bが付加され、画像データD4が生成、出力される。また、画像データD2aが静止画でないか,ブレンド比αが0でない場合、画像データD3aに画像データD3bが付加されず、画像データD5が生成、出力される。通過制御部250および画像データ付加部160は,第2の画像データが静止画と対応せず、かつ合成比が合成しないことを表す場合に、第4の画像データに第5の画像データを付加して、第6の画像データを生成するデータ付加部として機能する。
When the image data D2a is a still image and the blend ratio α is 0, the
画像合成部290は、画像データ付加部160からの高ビット化(12ビット×3)した画像データD4またはD5とフレームバッファ240からの画像データD3bまたはD7をブレンド比αに応じて合成(重畳)する。
The
ここでブレンド比α=0で静止画の場合は、画像データ付加部160から画像データD4が、フレームバッファ240から画像データDα3bが画像合成部290に入力される。ブレンド比α=0なので画像データ付加部160からの画像データD4がそのまま出力される。またブレンド比α=0で動画の場合は、画像データ付加部160から画像データD5が、フレームバッファ240から画像データDα3bが画像合成部290に入力される。ブレンド比α=0なので画像データ付加部160からの画像データD5がそのまま出力される。またブレンド比α≠0の場合は、動画/静止画に関わらず画像データ付加部160から画像データD5が、フレームバッファ240から画像データDα7が画像合成部290に入力される。このときブレンド比αに応じて画像データD5とDα7が合成された画像データD8が出力される。
Here, in the case of a still image with a blend ratio α = 0, image data D4 is input from the image
画像データ処理装置200の入力部110、画像データ分割部120、フレーム間画像処理部130、画像データ付加部160、表示部170は、画像データ処理装置100と実質的に同様なので説明を省略する。
Since the
(画像データ処理装置200の動作)
以下、画像データ処理装置200の動作を説明する。
(Operation of Image Data Processing Device 200)
Hereinafter, the operation of the image
(1)画像データD1の入力および画像データDα6の生成
・入力部110から画像データD1が入力される。
・この入力と並行して、画像生成部281が合成(重畳)用の画像データDα6を生成する。
(1) Input of image data D1 and generation of image data Dα6 Image data D1 is input from the
In parallel with this input, the
(2)画像データD1の分割
画像データ分割部120が画像データD1を分割して、画像データD2a、D2bが生成される。
(2) Division of Image Data D1 The image
(3)画像データD2b、D6の切り替え
ブレンド比αが0であるか否かに応じて、画像データD2bまたはD6(Dα2bまたはDα6)の何れかが選択され、フレームバッファ240に入力される。
(3) Switching of image data D2b and D6 Depending on whether or not the blend ratio α is 0, either image data D2b or D6 (Dα2b or Dα6) is selected and input to the
(4)画像データD2a、D2b、D6のフレームレート変換
次のように、画像データD2a、D2b、D6のフレームレートが変換される。
a. フレーム間画像処理部130が画像データD2aの隣接するフレームを補間して、高フレームレートの画像データD3aを生成する。
b. フレームバッファ240が画像データDα2bまたはDα6を保持し、複数回出力することで、高フレームレートの画像データDα3bまたはDα7を生成する。
(4) Frame rate conversion of image data D2a, D2b, D6 The frame rate of the image data D2a, D2b, D6 is converted as follows.
a. The inter-frame
b. The
(5)画像データD3aへの画像データD3bの付加
画像データD2aが静止画で、ブレンド比αが0の場合、通過制御部250および画像データ付加部160が、画像データD3aに画像データD3bを付加して、画像データD4が生成、出力される。画像データD2aが動画またはブレンド比αが0以外の場合、画像データD3aに画像データD3bが付加されない。第1の実施例で既述のように、静止画、動画に応じて、データの付加の有無を変更することで、静止画部分で微妙なグラデーション部分では多ビット化による高階調で表示される。
(5) Addition of image data D3b to image data D3a When image data D2a is a still image and blend ratio α is 0,
またブレンド比αが0以外のときは、画像生成部281で生成された画像データDα6に対応する画像データDα7がフレームバッファ240から出力され、ブレンド比αに応じて画像データD5と画像データDα7を合成した画像データD8が表示される。映像にメニュー等のOSD画像を表示する状態のときは、視聴者はメニュー等の画像が見れればいいので階調精度は従来の低ビットのままで十分である。
When the blend ratio α is other than 0, the image data Dα7 corresponding to the image data Dα6 generated by the
(その他の実施形態)
本発明の実施形態は上記の実施形態に限られず拡張、変更可能であり、拡張、変更した実施形態も本発明の技術的範囲に含まれる。
(Other embodiments)
Embodiments of the present invention are not limited to the above-described embodiments, and can be expanded and modified. The expanded and modified embodiments are also included in the technical scope of the present invention.
100…画像データ処理装置、110…入力部、120…画像データ分割部、130…フレーム間画像処理部、140…フレームバッファ、150…通過制御部、160…画像データ付加部、170…表示部、200…画像データ処理装置、240…フレームバッファ、250…通過制御部、281…画像生成部、281…画像生成部、282a…ブレンド比分離部、282b…ブレンド比付加部、283…ブレンド比検出部、284…切替部、290…画像合成部
DESCRIPTION OF
Claims (6)
前記第2の画像データの隣接するフレームを補間して、前記第2のビット数の階調データを有し、かつ前記第1のフレームレートより大きい第2のフレームレートの第4の画像データを生成するフレーム補間部と、
前記第3の画像データを保持して複数回出力することで、前記第3のビット数の階調データを有し、かつ前記第2のフレームレートの第5の画像データを生成するフレームバッファと、
前記第2の画像データが静止画と対応する場合に、前記第4の画像データに前記第5の画像データを付加して、前記第1のビット数の階調データを有し、かつ前記第2のフレームレートの第6の画像データを生成するデータ付加部と、
を具備することを特徴とする画像データ処理装置。 Second image data having gradation data of a first bit number, dividing first image data of a first frame rate, and having gradation data of a second bit number; A data dividing unit for generating third image data having gradation data of the number of bits;
By interpolating adjacent frames of the second image data, fourth image data having the second number of bits of gradation data and having a second frame rate greater than the first frame rate is obtained. A frame interpolation unit to generate;
A frame buffer that holds the third image data and outputs the plurality of times to generate the fifth image data of the second frame rate and having the gradation data of the third number of bits; ,
When the second image data corresponds to a still image, the fifth image data is added to the fourth image data to have the first bit number of gradation data, and A data adding unit that generates sixth image data having a frame rate of 2;
An image data processing apparatus comprising:
前記合成比で表される合成の有無に基づいて、前記第3、第7の画像データの何れかを切り替え出力する切替部と、をさらに具備し、
前記フレームバッファが、前記切替部から出力される前記第3の画像データおよび前記第7の画像データを保持して複数回出力することで、前記第2のフレームレートの前記第5の画像データおよび第8の画像データのいずれかを生成し、
前記第2の画像データが静止画と対応し、かつ前記合成比が合成しないことを表す場合に、前記データ付加部が、前記第4の画像データに前記第5の画像データを付加して、前記第6の画像データを生成する、
ことを特徴とする請求項1記載の画像データ処理装置。 An image generation unit for generating seventh image data of the first frame rate, which is displayed by being combined with other image data corresponding to the combination ratio;
A switching unit that switches and outputs one of the third and seventh image data based on the presence or absence of the synthesis represented by the synthesis ratio;
The frame buffer holds the third image data and the seventh image data output from the switching unit and outputs the plurality of times, so that the fifth image data of the second frame rate and Generate any of the eighth image data,
In the case where the second image data corresponds to a still image and the composition ratio represents that the composition ratio is not composed, the data adding unit adds the fifth image data to the fourth image data, Generating the sixth image data;
The image data processing apparatus according to claim 1.
をさらに具備することを特徴とする請求項2記載の画像データ処理装置。 A synthesis unit for synthesizing the sixth and eighth image data based on the synthesis ratio;
The image data processing apparatus according to claim 2, further comprising:
ことを特徴とする請求項1記載の画像データ処理装置。 When the second image data does not correspond to a still image, the data adding unit does not add the fifth image data to the fourth image data, and converts the gradation data of the first number of bits. And generating ninth image data of the second frame rate,
The image data processing apparatus according to claim 1.
をさらに具備することを特徴とする請求項1記載の画像データ処理装置。 A display unit for displaying an image based on the sixth image data;
The image data processing apparatus according to claim 1, further comprising:
前記第2の画像データの連続するフレームを補間して、前記第2のビット数の階調データを有し、かつ前記第1のフレームレートより大きい第2のフレームレートの第4の画像データを生成するステップと、
前記第3の画像データを一時的に保持して出力することで、前記第3のビット数の階調データを有し、かつ前記第2のフレームレートの第5の画像データを生成するステップと、
前記第2の画像データが静止画と対応する場合に、前記第4の画像データに前記第5の画像データを付加して、前記第1のビット数の階調データを有し、かつ前記第2のフレームレートの第6の画像データを生成するステップと、
を具備することを特徴とする画像データ処理方法。 Second image data having gradation data of a first bit number, dividing first image data of a first frame rate, and having gradation data of a second bit number; Generating third image data having gradation data of the number of bits;
By interpolating successive frames of the second image data, fourth image data having the second number of bits of gradation data and having a second frame rate greater than the first frame rate is obtained. Generating step;
Temporarily storing and outputting the third image data to generate fifth image data having the third number of bits and having the second frame rate; ,
When the second image data corresponds to a still image, the fifth image data is added to the fourth image data to have the first bit number of gradation data, and Generating sixth image data at a frame rate of 2;
An image data processing method comprising:
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007284107A JP2009111885A (en) | 2007-10-31 | 2007-10-31 | Image data processing apparatus, and image data processing method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007284107A JP2009111885A (en) | 2007-10-31 | 2007-10-31 | Image data processing apparatus, and image data processing method |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2009111885A true JP2009111885A (en) | 2009-05-21 |
Family
ID=40779853
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2007284107A Withdrawn JP2009111885A (en) | 2007-10-31 | 2007-10-31 | Image data processing apparatus, and image data processing method |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2009111885A (en) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2014141326A1 (en) * | 2013-03-15 | 2014-09-18 | 株式会社 東芝 | Image pickup device, vehicle number image pickup device, and image pickup method |
-
2007
- 2007-10-31 JP JP2007284107A patent/JP2009111885A/en not_active Withdrawn
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2014141326A1 (en) * | 2013-03-15 | 2014-09-18 | 株式会社 東芝 | Image pickup device, vehicle number image pickup device, and image pickup method |
JP2014178955A (en) * | 2013-03-15 | 2014-09-25 | Toshiba Corp | Vehicle number imaging apparatus |
EP2975591A4 (en) * | 2013-03-15 | 2016-11-02 | Toshiba Kk | Image pickup device, vehicle number image pickup device, and image pickup method |
US9953235B2 (en) | 2013-03-15 | 2018-04-24 | Kabushiki Kaisha Toshiba | Image pickup device, vehicle number image pickup device, and image pickup method |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US7659934B2 (en) | Recording/reproduction apparatus, and recording/reproduction method as well as stereoscopic images visual effects confirmation apparatus and stereoscopic image visual effects confirmation method | |
JP5296889B2 (en) | Image processing apparatus and image processing method | |
US7903173B2 (en) | Moving image display device and method for moving image display | |
JP5614098B2 (en) | Video display device, frame rate conversion device, and display method | |
JP2008244981A (en) | Video synthesis device and video output device | |
JP5255089B2 (en) | Image processing device | |
JP2006119509A (en) | Display device and its display method | |
JP4215423B2 (en) | Image data output device | |
JP2009276557A (en) | Video processing device, video processing lsi, display, car navigation system, mixing ratio information generating method, program, and recording medium | |
JP2009111885A (en) | Image data processing apparatus, and image data processing method | |
JP4890205B2 (en) | Compressed waveform image display apparatus and method | |
US20070109314A1 (en) | Adaptive pixel-based blending method and system | |
JPH11146275A (en) | Image processing display device | |
CN107211108B (en) | Reproduction device, information processing method, and program | |
JP5219646B2 (en) | Video processing apparatus and video processing apparatus control method | |
US7525557B2 (en) | Moving image composition device, moving image composition method, and information terminal with moving image composition function | |
TWI288393B (en) | Signal processing apparatus and image output apparatus | |
JP2004246118A (en) | Liquid crystal display | |
JPH11298924A (en) | Head mounted type display device | |
JP2008294569A (en) | Video image processing apparatus, and video image display apparatus | |
JPWO2011013748A1 (en) | Image processing apparatus, control method for image processing apparatus, control program for image processing apparatus, and recording medium recording control program | |
JP4923635B2 (en) | Moving image display device and moving image display method | |
JP2006276870A (en) | Image processing device | |
JP4640587B2 (en) | Video display device, video processing device, and video processing method | |
JP2007139838A (en) | Apparatus and method for processing image |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A300 | Application deemed to be withdrawn because no request for examination was validly filed |
Free format text: JAPANESE INTERMEDIATE CODE: A300 Effective date: 20110104 |