CN101527773A - 图像处理方法、图像处理系统、以及计算机程序 - Google Patents
图像处理方法、图像处理系统、以及计算机程序 Download PDFInfo
- Publication number
- CN101527773A CN101527773A CN200910126193A CN200910126193A CN101527773A CN 101527773 A CN101527773 A CN 101527773A CN 200910126193 A CN200910126193 A CN 200910126193A CN 200910126193 A CN200910126193 A CN 200910126193A CN 101527773 A CN101527773 A CN 101527773A
- Authority
- CN
- China
- Prior art keywords
- image processing
- image
- moving body
- processing
- field picture
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 25
- 238000004590 computer program Methods 0.000 title claims abstract description 22
- 238000012935 Averaging Methods 0.000 claims abstract description 11
- 238000000034 method Methods 0.000 claims description 54
- 238000004519 manufacturing process Methods 0.000 claims description 23
- 239000000284 extract Substances 0.000 claims description 21
- 238000006243 chemical reaction Methods 0.000 claims description 19
- 230000002708 enhancing effect Effects 0.000 claims description 9
- 238000000605 extraction Methods 0.000 claims description 9
- 230000015572 biosynthetic process Effects 0.000 claims description 5
- 239000000758 substrate Substances 0.000 description 24
- 239000004973 liquid crystal related substance Substances 0.000 description 23
- 230000000694 effects Effects 0.000 description 21
- 230000006870 function Effects 0.000 description 14
- 238000010586 diagram Methods 0.000 description 9
- 229910052581 Si3N4 Inorganic materials 0.000 description 8
- VYPSYNLAJGMNEJ-UHFFFAOYSA-N Silicium dioxide Chemical compound O=[Si]=O VYPSYNLAJGMNEJ-UHFFFAOYSA-N 0.000 description 8
- 230000001915 proofreading effect Effects 0.000 description 8
- 239000004065 semiconductor Substances 0.000 description 8
- 239000012467 final product Substances 0.000 description 7
- 238000003860 storage Methods 0.000 description 7
- IJGRMHOSHXDMSA-UHFFFAOYSA-N Atomic nitrogen Chemical compound N#N IJGRMHOSHXDMSA-UHFFFAOYSA-N 0.000 description 6
- XUIMIQQOPSSXEZ-UHFFFAOYSA-N Silicon Chemical compound [Si] XUIMIQQOPSSXEZ-UHFFFAOYSA-N 0.000 description 6
- 238000010276 construction Methods 0.000 description 6
- 239000010410 layer Substances 0.000 description 6
- 229910052710 silicon Inorganic materials 0.000 description 6
- 239000010703 silicon Substances 0.000 description 6
- 239000012528 membrane Substances 0.000 description 5
- 239000002356 single layer Substances 0.000 description 5
- 229910052776 Thorium Inorganic materials 0.000 description 4
- XLOMVQKBTHCTTD-UHFFFAOYSA-N Zinc monoxide Chemical compound [Zn]=O XLOMVQKBTHCTTD-UHFFFAOYSA-N 0.000 description 4
- OBNDGIHQAIXEAO-UHFFFAOYSA-N [O].[Si] Chemical compound [O].[Si] OBNDGIHQAIXEAO-UHFFFAOYSA-N 0.000 description 4
- 238000004364 calculation method Methods 0.000 description 4
- 230000000052 comparative effect Effects 0.000 description 4
- 230000035807 sensation Effects 0.000 description 4
- HQVNEWCFYHHQES-UHFFFAOYSA-N silicon nitride Chemical compound N12[Si]34N5[Si]62N3[Si]51N64 HQVNEWCFYHHQES-UHFFFAOYSA-N 0.000 description 4
- 229910052814 silicon oxide Inorganic materials 0.000 description 4
- PNEYBMLMFCGWSK-UHFFFAOYSA-N Alumina Chemical compound [O-2].[O-2].[O-2].[Al+3].[Al+3] PNEYBMLMFCGWSK-UHFFFAOYSA-N 0.000 description 3
- 229910052782 aluminium Inorganic materials 0.000 description 3
- QVGXLLKOCUKJST-UHFFFAOYSA-N atomic oxygen Chemical compound [O] QVGXLLKOCUKJST-UHFFFAOYSA-N 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 239000005262 ferroelectric liquid crystals (FLCs) Substances 0.000 description 3
- 238000005755 formation reaction Methods 0.000 description 3
- 229910052757 nitrogen Inorganic materials 0.000 description 3
- 229910052760 oxygen Inorganic materials 0.000 description 3
- 239000001301 oxygen Substances 0.000 description 3
- 238000005728 strengthening Methods 0.000 description 3
- 239000004642 Polyimide Substances 0.000 description 2
- XAGFODPZIPBFFR-UHFFFAOYSA-N aluminium Chemical compound [Al] XAGFODPZIPBFFR-UHFFFAOYSA-N 0.000 description 2
- 229910052799 carbon Inorganic materials 0.000 description 2
- 238000005520 cutting process Methods 0.000 description 2
- 238000013500 data storage Methods 0.000 description 2
- 230000005684 electric field Effects 0.000 description 2
- 239000011521 glass Substances 0.000 description 2
- 229910003437 indium oxide Inorganic materials 0.000 description 2
- PJXISJQVUVHSOJ-UHFFFAOYSA-N indium(iii) oxide Chemical compound [O-2].[O-2].[O-2].[In+3].[In+3] PJXISJQVUVHSOJ-UHFFFAOYSA-N 0.000 description 2
- AMGQUBHHOARCQH-UHFFFAOYSA-N indium;oxotin Chemical compound [In].[Sn]=O AMGQUBHHOARCQH-UHFFFAOYSA-N 0.000 description 2
- 239000000463 material Substances 0.000 description 2
- 239000011368 organic material Substances 0.000 description 2
- 229920001721 polyimide Polymers 0.000 description 2
- 239000000565 sealant Substances 0.000 description 2
- 230000008054 signal transmission Effects 0.000 description 2
- 239000000377 silicon dioxide Substances 0.000 description 2
- XOLBLPGZBRYERU-UHFFFAOYSA-N tin dioxide Chemical compound O=[Sn]=O XOLBLPGZBRYERU-UHFFFAOYSA-N 0.000 description 2
- 229910001887 tin oxide Inorganic materials 0.000 description 2
- 239000011787 zinc oxide Substances 0.000 description 2
- SMZOUWXMTYCWNB-UHFFFAOYSA-N 2-(2-methoxy-5-methylphenyl)ethanamine Chemical compound COC1=CC=C(C)C=C1CCN SMZOUWXMTYCWNB-UHFFFAOYSA-N 0.000 description 1
- NIXOWILDQLNWCW-UHFFFAOYSA-N 2-Propenoic acid Natural products OC(=O)C=C NIXOWILDQLNWCW-UHFFFAOYSA-N 0.000 description 1
- 229910017083 AlN Inorganic materials 0.000 description 1
- PIGFYZPCRLYGLF-UHFFFAOYSA-N Aluminum nitride Chemical compound [Al]#N PIGFYZPCRLYGLF-UHFFFAOYSA-N 0.000 description 1
- OKTJSMMVPCPJKN-UHFFFAOYSA-N Carbon Chemical compound [C] OKTJSMMVPCPJKN-UHFFFAOYSA-N 0.000 description 1
- 241001269238 Data Species 0.000 description 1
- 241000222712 Kinetoplastida Species 0.000 description 1
- 241000406668 Loxodonta cyclotis Species 0.000 description 1
- 239000004952 Polyamide Substances 0.000 description 1
- 241000872198 Serjania polyphylla Species 0.000 description 1
- FKNQFGJONOIPTF-UHFFFAOYSA-N Sodium cation Chemical compound [Na+] FKNQFGJONOIPTF-UHFFFAOYSA-N 0.000 description 1
- 244000061458 Solanum melongena Species 0.000 description 1
- ZCLBLRDCYNGAGV-UHFFFAOYSA-N [Si]=O.[Sn].[In] Chemical compound [Si]=O.[Sn].[In] ZCLBLRDCYNGAGV-UHFFFAOYSA-N 0.000 description 1
- 239000000654 additive Substances 0.000 description 1
- 230000000996 additive effect Effects 0.000 description 1
- 239000000956 alloy Substances 0.000 description 1
- 229910045601 alloy Inorganic materials 0.000 description 1
- 239000004411 aluminium Substances 0.000 description 1
- 150000001408 amides Chemical class 0.000 description 1
- 230000005620 antiferroelectricity Effects 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- UMIVXZPTRXBADB-UHFFFAOYSA-N benzocyclobutene Chemical compound C1=CC=C2CCC2=C1 UMIVXZPTRXBADB-UHFFFAOYSA-N 0.000 description 1
- 230000000903 blocking effect Effects 0.000 description 1
- 229910052804 chromium Inorganic materials 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 238000003708 edge detection Methods 0.000 description 1
- 239000003822 epoxy resin Substances 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 238000003707 image sharpening Methods 0.000 description 1
- 230000005764 inhibitory process Effects 0.000 description 1
- 229910010272 inorganic material Inorganic materials 0.000 description 1
- 239000011147 inorganic material Substances 0.000 description 1
- 239000011229 interlayer Substances 0.000 description 1
- 230000000873 masking effect Effects 0.000 description 1
- 229910052751 metal Inorganic materials 0.000 description 1
- 239000002184 metal Substances 0.000 description 1
- 229910052750 molybdenum Inorganic materials 0.000 description 1
- QJGQUHMNIGDVPM-UHFFFAOYSA-N nitrogen group Chemical group [N] QJGQUHMNIGDVPM-UHFFFAOYSA-N 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000009999 orthokinesis Effects 0.000 description 1
- 229920002647 polyamide Polymers 0.000 description 1
- 229920000647 polyepoxide Polymers 0.000 description 1
- 230000001172 regenerating effect Effects 0.000 description 1
- 229920005989 resin Polymers 0.000 description 1
- 239000011347 resin Substances 0.000 description 1
- 230000002441 reversible effect Effects 0.000 description 1
- 229910001415 sodium ion Inorganic materials 0.000 description 1
- 229910052715 tantalum Inorganic materials 0.000 description 1
- 229910052719 titanium Inorganic materials 0.000 description 1
- 229910052721 tungsten Inorganic materials 0.000 description 1
- YVTHLONGBIQYBO-UHFFFAOYSA-N zinc indium(3+) oxygen(2-) Chemical compound [O--].[Zn++].[In+3] YVTHLONGBIQYBO-UHFFFAOYSA-N 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/70—Denoising; Smoothing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/73—Deblurring; Sharpening
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/194—Segmentation; Edge detection involving foreground-background segmentation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/122—Improving the 3D impression of stereoscopic images by modifying image signal contents, e.g. by filtering or adding monoscopic depth cues
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10016—Video; Image sequence
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20212—Image combination
- G06T2207/20216—Image averaging
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Image Processing (AREA)
- Studio Circuits (AREA)
- Studio Devices (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
- Facsimile Image Signal Circuits (AREA)
Abstract
本发明为图像处理方法、图像处理系统、以及计算机程序。基于时间上连续的三个帧图像的差值图像,从中央的帧图像中抽出显示移动体的移动体区域和背景区域。对移动体区域的图像进行对比度增强等使图像更清晰的处理。另一方面,对背景区域的图像进行平均化处理等的模糊处理。在该模糊处理中,移动体区域在帧图像中所占的比例越大,越大程度地进行使背景区域的图像模糊的处理。
Description
技术领域
本发明涉及对动态图像进行图像处理的方法、进行动态图像的图像处理的图像处理系统、以及用来进行动态图像的图像处理的计算机程序。
背景技术
近年来,可以欣赏高清晰图像的高分辨率且大屏幕的液晶显示装置、等离子体显示装置已经普及。由此,对图像的质量的要求也越来越高,其中一个要求是临场感、远近感(距离感)。而通过提高立体感、纵深感,可以提高临场感。
例如,焦点位于屏幕整体上的照片缺乏距离感、立体感。于是,在现有技术中,为了使使用影像拍摄装置拍摄的照片(静态图像)有距离感、立体感,提出了对照片进行模糊处理(散焦处理)的方法(例如,专利文献1:日本专利申请公开H10-233919号公报、专利文献2:日本专利申请公开2005-229198号公报)。
在专利文献1中描述了使用焦点条件不同的两个图像,从图像中抽出主要部分和背景,对主要部分的图像进行锐化处理,并且对背景进行模糊处理的图像处理装置。
在专利文献2中描述了使用照明光量不同的两个图像,从图像中抽出拍摄对象和背景,对拍摄对象及背景中的至少一方进行模糊处理的图像处理方法。
发明内容
在专利文献1、2中描述的图像处理技术为关于静态图像的技术,而不是关于提高动态图像的临场感、纵深感的技术。于是,本发明的实施方式的目的之一在于提供一种图像处理方法,通过该图像处理方法,可以在二维图像显示用显示装置上制造提高了立体感、纵深感的动态图像。
另外,本发明的实施方式的另一目的在于提供一种可以制造提高了立体感、纵深感的动态图像的图像处理系统。
另外,本发明的实施方式的另一目的在于提供一种用来实现制造提高了立体感、纵深感的动态图像的图像处理方法的计算机程序。
本发明的图像处理方法的结构例子之一为如下:为了对由多个帧图像构成的动态图像进行图像处理,将至少一个帧图像分成由制造移动体的像素组构成的移动体区域和由不制造移动体的像素组构成的背景区域,并且对背景区域进行图像处理,来从帧图像制造校正帧图像。在该结构例子中,对背景区域进行的图像处理为对背景区域进行的模糊效果随着移动体区域在帧图像中所占的比例增大而增强的模糊处理。
另外,在本发明的图像处理方法的另一结构例子中,由于将校正对象的帧图像分成移动体区域和移动体区域以外的背景区域,所以根据成为校正对象的第一帧图像和第一帧图像的k帧前(k为自然数)的第二帧图像的差值、以及第一帧图像和第一帧图像的k帧后的第三帧图像的差值,从第一帧图像中抽出制造移动体的像素,而可以制造由移动体区域和背景区域构成的掩模图像,所述移动体区域由制造移动体的像素组构成,所述背景区域由不制造移动体的像素组构成。在该结构例子中,使用该掩模图像判定第一帧图像的各个像素是包含在背景区域中还是包含在移动体区域中。
另外,在上述图像处理方法的各个结构例子中,也可以对移动体区域进行与对背景区域进行的图像处理不同的图像处理。
本发明的图像处理系统的结构例子之一具有显示由多个帧图像构成的动态图像的图像显示部;从至少一个帧图像中抽出移动体,将帧图像分成由制造移动体的像素组构成的移动体区域和由不制造移动体的像素组构成的背景区域的移动体抽出部;以及对背景区域进行模糊处理,而制造校正帧图像的校正帧图像制造部。在该结构中,校正帧图像制造部为这样一种装置,其进行随着移动体区域在帧图像中所占的比例增高而增强对背景区域进行的模糊效果的模糊处理。
本发明的图像处理系统的其他结构例子之一具有显示由多个帧图像构成的动态图像的图像显示部;根据成为校正对象的第一帧图像和第一帧图像的k帧前(k为自然数)的第二帧图像的差值、以及第一帧图像和第一帧图像的k帧后的第三帧图像的差值,从第一帧图像中抽出制造移动体的像素,并且制造由移动体区域和背景区域构成的掩模图像的掩模图像制造部,所述移动体区域由制造移动体的像素组构成,所述背景区域由不制造移动体的像素组构成;以及使用掩模图像判定制造第一帧图像的各个像素是包含在背景区域中还是包含在移动体区域中,并且对背景区域的像素进行模糊处理,而制造校正帧图像的校正帧图像制造部。
在上述结构例子中,校正帧图像制造部为这样一种装置,其进行随着移动体区域在第一帧图像中所占的比例增大而增强对背景区域进行的模糊效果的模糊处理。
另外,在图像处理系统的各个结构例子中,也可以在校正帧图像制造部对移动体区域进行与对背景区域进行的图像处理不同的图像处理。
本发明的计算机程序的结构例子之一为使图像处理装置进行包括如下两种处理的图像处理的程序,即从制造动态图像的多个帧图像中的至少一个帧图像中抽出移动体,将帧图像分成由制造移动体的像素组构成的移动体区域和由不构成制造移动体的线素组构成的背景区域的处理;以及对背景区域进行模糊处理来制造校正帧图像的处理。并且,作为在制造校正图像的处理中的对背景区域进行的图像处理,由图像处理装置进行随着移动体区域在帧图像中所占的比例增大而增强模糊效果的模糊处理。
本发明的计算机程序的其他结构例子之一为使图像处理装置进行如下两种处理的程序,即根据成为校正对象的第一帧图像和第一帧图像的k帧前(k为自然数)的第二帧图像的差值、以及第一帧图像和第一帧图像的k帧后的第三帧图像的差值,从第一帧图像中抽出制造移动体的像素,而制造由移动体区域和背景区域构成的掩模图像的处理,所述移动体区域由制造移动体的像素组构成,所述背景区域由不制造移动体的像素组构成;以及使用掩模图像判定制造第一帧图像的各个像素是包含在背景区域中还是包含在移动体区域中,并且对背景区域的像素进行模糊处理,来制造校正帧图像的处理。
在上述计算机程序的各个结构例子中,作为在制造校正帧图像的处理中的对背景区域进行的图像处理,可以使图像处理装置进行随着移动体区域在第一帧图像中所占的比例增大而增强模糊效果的模糊处理。
在将本说明书提出的发明应用于计算机程序中的情况下,也可以在制造校正帧图像的处理中,使图像处理装置对移动体区域进行与对背景区域进行的图像处理不同的图像处理。
对背景区域进行的图像处理为模糊处理,作为该模糊处理进行平均化处理、中值滤波器(median filter)处理、减弱对比度的对比度转换处理、以及镶嵌处理中的至少一种图像处理即可。
另外,可以对移动体区域进行与对背景区域进行的图像处理不同的图像处理而制造校正帧图像。在此情况下,作为对移动体区域进行的图像处理,进行锐化处理、增强对比度的对比度转换处理、以及边缘增强处理中的至少一种图像处理即可。
通过对制造动态图像的帧图像的背景进行与图像的动态对应地改变模糊程度的模糊处理,可以与人的眼睛的焦点调整功能对应地模糊背景。换言之,通过对背景进行这种模糊处理,可以制造具有高距离感、纵深感的动态图像。例如,通过对由电视接收机接收的电视广播图像进行这种模糊处理,可以一边接收其图像数据一边将其转换成具有高纵深感的动态图像,而可以提供具有高附加价值的电视机。
附图说明
图1为示出图像处理系统的结构例子的框图;
图2为示出校正动态图像的图像处理的一例的流程图;
图3为示出移动体抽出处理的一例的流程图;
图4为示出移动体抽出处理的一例的流程图;
图5为示出掩模处理的一例的流程图;
图6为示出背景图像处理的一例的流程图;
图7A和7B分别为校正前的帧图像的说明图和校正帧图像的说明图;
图8A和8B为图像输出装置的结构例子的说明图;
图9为图像处理系统的结构例子的说明图;
图10A至10C分别为示出监视器的结构例子的外观图、示出影像拍摄装置的结构例子的外观图、以及示出计算机的结构例子的外观图。
具体实施方式
下面,将参照附图说明本发明的实施方式。注意,本说明书提出的发明可以通过多种不同的方式来实施,所属技术领域的普通技术人员可以很容易地理解一个事实就是本说明书提出的发明的实施方式可以将其方式及详细内容在不脱离宗旨及其范围下变换为各种形式。因此,本说明书提出的发明不应该被解释为仅限定在实施方式所记载的内容中。
实施方式1
本实施方式说明对由多个帧图像构成的动态图像进行图像处理的图像处理方法、以及用来实现该图像处理的图像处理系统及计算机程序。
首先,使用图1说明图像处理系统的结构。在本实施方式中,作为图像处理系统说明具备图像显示部的图像处理系统。换言之,也可以说本实施方式的图像处理系统为具备图像处理装置的图像显示系统。图1为示出本实施方式的图像处理系统的结构例子的框图。图1所示的图像处理系统100为可以显示由多个帧图像构成的动态图像的装置,并且具有图像处理装置101及图像输出装置102。
图像处理装置101为这样一种装置,即从读取的多个帧图像中的至少一个中抽出移动体,并且将该帧图像分成由制造移动体的像素组制造的移动体区域和移动体区域以外的背景区域。另外,图像处理装置101为通过对抽出的移动体及背景的帧图像进行图像处理,来制造校正帧图像的装置。在图像处理装置101中至少对帧图像的背景区域进行模糊处理。而且,在图像处理装置101中也可以对移动体区域进行图像处理。在本实施方式中,为了进一步提高校正后的动态图像的距离感、纵深感,在图像处理装置101中对移动体区域进行与模糊处理不同的图像处理。
图像输出装置102为接收从图像处理装置101输出的图像数据的装置。在本实施方式中,图像输出装置102为显示二维图像的图像显示装置,并且是显示由多个帧图像构成的动态图像的装置。
如图1所示,图像处理装置101由运算处理部111、数据存储部112、控制部113、输入侧接口部114、以及输出侧接口部115等构成。
运算处理部111为进行各种运算处理如图像数据的运算处理等的装置,并且包括CPU(Central Processing Unit:中央处理单元)、图像处理用运算电路等。
数据存储部112具有用来存储用于在图像处理装置101中进行图像处理的数据的各种存储电路。例如,数据存储部112包括存储运算处理部111进行动态图像的图像处理的计算机程序、以及图像处理用过滤器的数据及查找表等的ROM(只读存储器);存储运算处理部111算出来的运算结果的RAM(随机存取存储器);以及存储输入到图像处理装置101中的图像数据的存储电路等。
控制部113包括用来控制图像处理装置101的电路的电路。例如,控制部113包括控制数据存储部112的数据的写入的写入控制电路、以及控制其数据的读取的读取控制电路等。
输入侧接口部114为用来与连接到图像处理装置101的外部器具进行信号的发送/接收,以便将图像数据等的数据从其外部器具提取到图像处理装置101中的装置。例如,为了在图像处理装置101中对图像数据进行处理,图像数据必须为数字数据。由此,在图像数据为模拟数据的情况下,优选在输入侧接口部114中设置A-D转换电路(模拟-数字转换电路)。外部器具为输出图像数据的装置,例如有影像拍摄装置等的拍摄装置、再现存储在硬盘或DVD等的存储介质中的图像数据的图像再现装置。
输出侧接口部115为用来与图像输出装置102进行信号的发送/接收,以便对图像输出装置102输出图像数据的装置。例如,为了对图像输出装置102输出模拟图像信号,在输出侧接口部115中设置D-A转换电路(数字-模拟转换电路)。
具有显示动态图像的功能的图像输出装置102例如可以由液晶显示装置、电致发光显示装置、场发射显示器(Field EmissionDisplay)、等离子体显示器等构成。图1示出图像输出装置102的结构的一例。如图中所示,图像输出装置102由具备多个像素120的显示部121、扫描线驱动电路122、以及信号线驱动电路123等构成。在显示部121中,以M行N列(M、N为自然数)布置有像素120。扫描线125及信号线126电连接到各个像素120上,因而像素120分别电连接到扫描线驱动电路122及信号线驱动电路123上。
显示部121的各个像素120的亮度值(也称为灰度值、浓度值)取决于从图像处理装置101输入的图像数据。扫描线驱动电路122将用来选择进行显示的像素120的信号输入到扫描线125中,并且信号线驱动电路123将图像数据输入到信号线126中。被选择的像素120通过信号线126接收图像数据,并且显示取决于该图像数据的浓淡。
另外,图1的图像处理系统100是当图像输出装置102为动态图像的显示装置时的图像显示系统,然而,本发明的实施方式不局限于图像显示系统。例如,通过使用具备存储硬盘等的动态图像的数据的存储介质的动态图像存储装置构成图像输出装置102,也可以将本实施方式的图像处理系统用作图像数据存储系统。
接下来,参照图2说明在图像处理装置101中进行的图像处理方法。图2为本实施方式的图像处理方法的流程图。
在制造动态图像的多个帧图像中,在连续的两个帧图像中存在图像有变化的部分。在本说明书中,在帧图像中将有某个阈值以上的变化的(或比某个阈值大)的图像称为“移动体”,而将其他部分的图像称为“背景”。换言之,背景是指没有动态变化或动态变化比某个阈值小(或某个阈值以下)的图像。另外,在帧图像中,将制造移动体的多个像素(像素组)称为“移动体区域”,而将制造背景的多个像素(像素组)称为“背景区域”。换言之,背景区域为帧图像中的除移动体区域以外的区域,并且为由不制造移动体的像素组构成的区域。
在本实施方式的图像处理方法中,从帧图像中抽出动态变化在某个阈值以上的图像(移动体),将帧图像分成移动体区域和背景区域。然后,通过对背景区域进行模糊处理(散焦处理),并且对移动体区域进行可获得与模糊处理相反的效果的图像处理,来制造校正帧图像。换言之,对移动体区域进行的图像处理为实现焦点完全位于拍摄目标上的状态的图像处理,其具有使图像清晰、使图像锐化、增强图像等的效果。
在图像处理装置101中,对输入的多个帧图像中的至少一个帧图像的背景区域进行模糊处理,制造校正的帧图像(以下,称为“校正帧图像”)。图2示出在图像处理装置101中制造校正帧图像的流程。另外,图2也是图像处理装置101所进行的计算机程序的流程图。以下,在需要将要制造校正帧图像的帧图像和其他帧图像加以区分的情况下,将要制造校正帧图像的帧图像称为“目标帧图像”。
在图像处理装置101中,首先从目标帧图像中抽出移动体(步骤201)。将该处理称为“移动体抽出处理”。通过从目标帧图像中抽出移动体,背景也被抽出,所以该移动体抽出处理也是背景抽出处理。由此,通过移动体抽出处理,目标帧图像被分成移动体区域和背景区域。
接下来,在图像处理装置101中,判定目标帧图像的各个像素是否是移动体区域的像素(步骤202)。然后,在判定结果是其为移动体区域的像素的情况下,对符合该条件的像素进行移动体图像处理(步骤203),而对不符合该条件的像素,即其为背景区域的像素进行背景图像处理(步骤204)。移动体图像处理为将像素的亮度值校正为使其亮度值成为适合于作为移动体显示的亮度值的处理。背景图像处理为模糊处理。借助于背景图像处理,像素的亮度值被校正为适合于作为背景显示的亮度值。而且,在本实施方式中,移动体在目标帧图像中所占的比例越大,对背景区域的像素进行越增强的模糊处理。
接下来,通过判定是否对目标帧图像的所有的像素进行处理(步骤205),重复进行步骤202到步骤203。通过对目标帧图像的所有像素进行移动体图像处理及背景图像处理中的任一方,制造目标帧图像的校正帧图像,制造帧图像的图像处理就此结束(步骤206)。
在步骤203中进行的移动体图像处理中,进行具有使图像清晰、增强图像等的效果的图像处理中的至少一种。作为这种图像处理,例如有增强对比度的对比度转换处理(对比度增强处理)、锐化处理、反锐化掩模处理、以及边缘增强处理等。
步骤204中进行的背景图像处理为模糊处理。通过模糊背景,获得使观看动态图像的人产生焦点位于移动体上的感觉的效果。作为模糊处理,有平均化处理、减弱对比度的对比度转换处理、去嗓处理、镶嵌处理等。换言之,作为背景图像处理进行的模糊处理为具有抑制从图像获得的信息量的效果如使图像的边缘不清晰、使颜色变淡等的图像处理。在步骤204中至少进行一种具有模糊效果的图像处理。
另外,在步骤204中,移动体区域在目标图像所占的比例越大,进行对于背景区域的模糊效果越增强的处理。换言之,移动体越大,背景的模糊程度越大。以下将人走近的动态图像作为例子进行说明,由于作为移动体的人的图像逐渐变大,所以人越靠近其背景越模糊。由此,由于人越靠近从背景可获得的信息越少,所以使观看该动态图像者自然地产生焦点位于人上的感觉。换言之,观看者感觉到动态图像为具有高距离感、纵深感的图像。另外,因为通过步骤203的移动体图像处理使人的图像变清晰,所以可以使观看动态图像者自然地产生焦点位于动态部分上的感觉。
在图像处理装置101中,对制造动态图像的多个帧图像按顺序进行步骤201到步骤206的各个处理来制造多个校正帧图像。各个校正帧图像从图像处理装置101输出到图像输出装置102。在图像输出装置102中,显示部121显示由多个校正帧图像构成的动态图像。由于在图像处理装置101中预先通过图像处理进行了与人的眼睛的焦点调整功能相近的处理,所以观看显示部121者可以欣赏到提高了纵深感、距离感的动态图像。
进行图像处理的图像处理装置101相当于根据图2的流程从目标帧图像中抽出移动体的移动体抽出部,并且还相当于对目标帧图像进行图像处理来制造校正帧图像的校正帧图像制造部。另外,在数据存储部112中存储有用来使图像处理装置101进行图2的流程所表示的图像处理的计算机程序。
在本实施方式中,可以将各种移动体抽出方法应用于移动体抽出处理中。由于容易进行运算处理,所以在该处理中优选采用使用连续的三个帧图像,并基于相邻的两个帧图像的差值抽出移动体的方法。另外,求出两个图像的差值的意思是算出位于两个图像中的相同位置的像素的亮度值的差值的绝对值。差值图像是指以该亮度值的差值的绝对值为各个像素的亮度值的图像。
在本实施方式中,为了从目标帧图像fa中抽出移动体,基于在时间上连续的三个帧图像fa-1、fa、fa+1的差值制造遮盖移动体区域的掩模图像ma。该掩模图像ma为由白色图像和黑色图像构成的二值图像,白色图像和黑色图像表示目标帧图像fa中的移动体区域和背景区域的差别。以下,参照图3及图4说明移动体抽出处理。图3及图4为示出移动体抽出处理的一例的流程图。参照图3说明步骤221至235,参照图4说明步骤236至240。
首先,图像处理装置101读取三个帧图像fa-1、fa、fa+1(步骤221)。读取的帧图像fa-1、fa、fa+1的数据写入到数据存储部112中。帧图像fa为目标帧图像。注意,作为处理对象的三个帧图像不局限于与目标帧图像fa相接的帧图像。就是说,可以使用目标帧图像fa、目标帧图像fa的k帧前(k为自然数)的帧图像和目标帧图像fa的k帧后的帧图像。例如,也可以为帧图像fa和其前两个的帧图像fa-2及其后两个的帧图像fa+2。另外,在如使用固定影像拍摄装置拍摄的动态图像那样背景几乎不变的动态图像的情况下,k也可以为3以上。实施者可以考虑动态图像的拍摄条件等而适当地设定k的值。然而,从图像处理速度的观点来看,不管动态图像的拍摄条件如何,优选将目标帧图像的1或2帧前的帧图像或目标帧图像的1或2帧后的帧图像用于移动体抽出处理。
图像处理装置101中的运算处理部111算出目标帧图像fa的像素(x,y)和帧图像fa-1的像素(x,y)的差值(步骤222)。在此,以像素(x,y)为像素的最小单位。另外,像素(x,y)的数据(像素值)由红色、绿色、蓝色的三种颜色(RGB)的亮度值(灰度值)构成。由此,当进行步骤222时,与RGB的亮度值对应地算出三个差值ΔR1(x,y)、ΔG1(x,y)、ΔB1(x,y)。差值ΔR1(x,y)、ΔG1(x,y)、ΔB1(x,y)存储在图像处理装置101的数据存储部112中。另外,像素(x,y)的颜色要素也可以为RGB以外的颜色,例如可以为黄色、蓝绿色、紫红色。
接下来,运算处理部111分别对于差值ΔR1(x,y)、ΔG1(x,y)、ΔB1(x,y)判定其值是否在阈值(Rth、Gth、Bth)以上(步骤223)。若差值为阈值以上,则将亮度判定值设定为1(步骤224)。另一方面,若差值低于阈值,则将亮度判定值设定为0(步骤225)。换言之,当ΔR1(x,y)≥Rth时,红色的亮度判定值αR1(x,y)=1,而当ΔR1(x,y)<Rth时,红色的亮度判定值αR1(x,y)=0。绿色、蓝色也是同样的,根据差值ΔG1(x,y)、ΔB1(x,y)为阈值Gth、Bth以上还是低于Gth、Bth,决定其亮度判定值αG1(x,y)、αB1(x,y)为“1”还是“0”。在此,当辨别图像是否移动体时,使用两个帧图像之间的亮度值的变化量。阈值(Rth、Gth、Bth)为用来辨别图像是包含在移动体中还是包含在背景中的亮度值的变化量的阈值,并且其对应于动态的变化量的阈值。决定的亮度判定值αR1(x,y)、αG1(x,y)、αB1(x,y)存储在图像处理装置101的数据存储部112中。
接下来,运算处理部111判定RGB的亮度判定值的总合是否在2以上(步骤226)。若αR1(x,y)+αG1(x,y)+αB1(x,y)≥2,则将像素(x,y)的差值判定值D1(x,y)设定为1(步骤227)。若αR1(x,y)+αG1(x,y)+αB1(x,y)<2,则将差值判定值D1(x,y)设定为0(步骤228)。差值判定值D1(x,y)存储在图像处理装置101的数据存储部112中。
差值判定值D1(x,y)对应于将两个帧图像fa、fa-1的差值图像二值化了的图像的像素(x,y)的亮度值。换言之,D1(x,y)=1表示该二值的差值图像的像素(x,y)显示白色,D1(x,y)=0表示该二值的差值图像的像素(x,y)显示黑色。在此,在帧图像fa-1和目标帧图像fa之间的亮度值没有变化或变化量少的像素(x,y)中,D1(x,y)=1,而在其变化量有某个阈值以上的像素(x,y)中,D1(x,y)=0。
步骤222至步骤228也可以说是对像素(x,y)的RGB的亮度值的差值进行择多处理,而将像素(x,y)的亮度值设定为白色或黑色的处理。通过对所有的像素进行步骤222至步骤228,可以得到帧图像fa和帧图像fa-1的差值图像的二值图像。在此,该二值的差值图像的白色图像(亮度值=1的像素组)相当于组合帧图像fa的移动体区域和帧图像fa-1的移动体区域的区域。
另外,步骤222至步骤228为运算处理部111求出目标帧图像fa的像素(x,y)和帧图像fa-1的像素(x,y)的差值数据,并且根据该差值数据求出差值判定值D1(x,y)的处理。在运算处理部111中对目标帧图像fa的像素(x,y)和帧图像fa+1的像素(x,y)进行与上述步骤222至步骤228的处理同样的处理(步骤229至步骤235)。另外,如图3所示,在步骤229至步骤235中算出的数据的符号上附加“2”,以便与在步骤222至步骤228中算出的数据区别。
由此,通过对所有的像素进行步骤229至步骤235,可以得到帧图像fa和帧图像fa+1的差值图像的二值图像。在此,该二值的差值图像的白色图像(亮度值=1的像素组)相当于组合帧图像fa的移动体区域和帧图像fa+1的移动体区域的区域。
接下来,运算处理部111判定两个差值判定值D1(x,y)和D2(x,y)是否都是“1”(步骤236)。在两个亮度判定值D1(x,y)和D2(x,y)都是“1”的情况下,将移动体判定值M(x,y)设定为“1”(步骤237),而在两个亮度判定值D1(x,y)和D2(x,y)中的至少一方不是“1”的情况下,将移动体判定值M(x,y)设定为“0”(步骤238)。换言之,在步骤236中求出D1(x,y)=1、D2(x,y)=1的逻辑乘积(AND)。若该AND运算的结果为“真”,则M(x,y)=1(步骤237),若该AND运算的结果为“伪”,则M(x,y)=0(步骤238。)
移动体判定值M(x,y)表示掩模图像ma的像素(x,y)的亮度值。换言之,当M(x,y)=1时,掩模图像ma的像素(x,y)显示白色,而当M(x,y)=0时,掩模图像ma的像素(x,y)显示黑色。
接下来,判定是否已对所有的像素进行了移动体判定值M(x,y)的算出(步骤239)。当所有的像素的移动体判定值M(x,y)没有决定时,返回步骤222及步骤229。通过算出所有的像素的移动体判定值M(x,y),制造以移动体判定值M(x,y)为亮度值的掩模图像ma,而移动体区域的抽出就此结束(步骤240)。
在掩模图像ma中,移动体判定值M(x,y)=1的区域(显示白色的像素组)为目标帧图像fa的移动体区域,移动体判定值M(x,y)=0的区域(显示黑色的像素组)为目标帧图像fa的背景区域。换言之,掩模图像ma为由移动体区域和背景区域构成的二值的图像,并且通过制造掩模图像ma,目标帧图像fa被分成移动体区域和不包含在移动体区域中的区域(背景区域)。
另外,通过图3及图4的移动体抽出处理制造的掩模图像ma可以说是通过算出以下两个二值化的图像的逻辑乘积(AND)而形成的二值图像,该两个二值化的图像即将帧图像fa和帧图像fa-1的差值图像二值化而得到的图像以及将帧图像fa和帧图像fa+1的差值图像二值化而得到的图像。
在此,图像处理装置101为通过进行图3及图4的移动体抽出处理,从目标帧图像中抽出移动体的移动体抽出部,并且为制造由移动体区域和背景区域构成的掩模图像的掩模图像制造部。
也可以在图像处理装置101中先对用于移动体抽出处理的三个帧图像进行图像处理,然后制造掩模图像ma,以便更正确地从目标帧图像中抽出移动体。作为这种图像处理,有平均化处理、使用水平方向的线形一次滤波器(linear primary differential filter)的滤波器处理、边缘检测处理、使用中值滤波器的去嗓处理等。
在图3中的移动体抽出处理的流程中,将在步骤226及步骤233中决定差值判定值D1(x,y)、D2(x,y)的值的条件设定为RGB的亮度判定值的总合为2以上,但是也可以是其总合为1以上或等于3的条件。
接下来,将说明使用掩模图像ma判定目标帧图像fa的像素是移动体区域的像素还是背景区域的像素,并基于其判定校正目标帧图像fa来制造校正帧图像的方法。在此,将该处理称为“掩模处理”。在图2的流程中,步骤201至步骤206的处理相当于掩模处理。以下,使用图5说明掩模处理。图5为本实施方式的掩模处理的流程图。
在掩模处理中,首先算出移动体区域在目标帧图像fa中所占的比例Pm(以下,称为“移动体区域的比例Pm”)(步骤251)。该移动体区域的比例Pm相等于掩模图像ma的白色显示的区域(移动体判定值M(x,y)=1的像素组,并且亮度值=1的区域)在其掩模图像ma中所占的比例。于是,在此,根据掩模图像ma的所有像素数量中的亮度值=1(移动体判定值M(x,y)=1)的像素数量的比例算出移动体区域所占的比例Pm。算出了的移动体区域的比例Pm存储在图像处理装置101的数据存储部112中。
在此,将移动体区域的比例Pm的算出处理作为掩模处理中的一个处理,但是也可以在移动体抽出处理中求出移动体区域的比例Pm。在此情况下,通过每当进行步骤237时都计算设定为M(x,y)=1的像素数量而完成步骤239,可以根据该像素数量算出比例Pm。
接下来,将目标帧图像fa的像素(x,y)的亮度值读取到运算处理部111中(步骤252)。将掩模图像ma的像素(x,y)的亮度值读取到运算处理部111中(步骤253),并且判定其亮度值是否是1(步骤254)。掩模图像ma的像素(x,y)的亮度值相当于移动体判定值M(x,y),其值为“1”或“0”。当掩模图像ma的像素(x,y)的亮度值=1时,对目标帧图像fa的像素(x,y)进行移动体图像处理,来校正其亮度值(步骤255)。当掩模图像ma的像素(x,y)的亮度值≠1(亮度值=0)时,对目标帧图像fa的像素(x,y)进行背景图像处理,来校正其亮度值(步骤256)。通过步骤255及步骤256决定的亮度值为校正帧图像Fa的像素(x,y)的亮度值。该亮度值被存储到数据存储部112的校正帧图像用存储电路中。
接下来,判定是否已对目标帧图像fa的所有像素进行了步骤255或步骤256的处理(步骤257)。在所有的像素的处理没有结束的情况下,反复进行步骤252至步骤257。通过算出所有的像素的亮度值,制造校正帧图像Fa(步骤258),而掩模处理就此结束。
换言之,图像处理装置101为制造校正帧图像Fa的装置,其包括制造掩模图像ma的掩模图像制造部、以及制造校正帧图像Fa的校正帧图像制造部。
在步骤256的背景图像处理中,通过步骤251算出的移动体区域的比例Pm越大,进行获得越大模糊效果的模糊处理。在本实施方式中,将模糊处理设定为水平0至水平5的六个阶段。水平5的模糊效果最大,而水平0的模糊效果最小。在本实施方式中,水平0的模糊处理就是不进行模糊处理,不校正像素的亮度值的处理。
在本实施方式中,将移动体区域的比例Pm分成100%以下且50%以上、低于50%且40%以上、低于40%且30%以上、低于30%且20%以上、低于20%且10%以上、以及低于10%且0%以上的六个范围,并且根据移动体区域的比例Pm进行水平5至水平0的模糊处理。以下,使用图6说明背景图像处理。图6为本实施方式的背景图像处理的流程图。
判定通过步骤251求出的移动体区域的比例Pm是否在50%以上(步骤261)。若是Pm≥50%,就进行水平5的模糊处理(步骤262)。若是Pm<50%,就判定比例Pm是否在40%以上(步骤263)。若是步骤263的判定结果为Pm≥40%,就进行水平4的模糊处理(步骤264),而若该判定结果为Pm<40%,就判定比例Pm是否在30%以上(步骤265)。若是步骤265的判定结果为Pm≥30%,就进行水平3的模糊处理(步骤266),而若该判定结果为Pm<30%,就判定比例Pm是否在20%以上(步骤267)。若是步骤267的判定结果为Pm≥20%,就进行水平2的模糊处理(步骤268),而若该判定结果为Pm<20%,就判定比例Pm是否在10%以上(步骤269)。若是步骤269的判定结果为Pm≥10%,就进行水平1的模糊处理(步骤270),而若该判定结果为Pm<10%,就进行水平0的模糊处理(步骤271)。在此,由于水平0的模糊处理为不校正像素(x,y)的亮度值的处理,所以校正前的像素(x,y)的亮度值成为校正后的亮度值。
如图6的流程图所示,与移动体区域的比例Pm对应地对包含在背景区域中的像素(x,y)进行水平5-水平0中任一水平的模糊处理,而背景图像处理就此结束。
在图6的流程图中,将模糊处理的水平设定为六个阶段,然而本发明的实施方式不局限于此,只要模糊处理为两个阶段以上即可。另外,设定模糊处理的水平的条件不局限于图6的流程图,而实施者可以适当地设定。换言之,动体区域的比例Pm越大,获得越大模糊效果地设定模糊处理的水平即可。
接下来,将作为模糊处理进行平均化处理的情况作为例子,说明进行不同水平的模糊处理的方法。
在平均化处理中,可以利用通过增加求出亮度的平均值的像素数量增强模糊处理的效果,而设定模糊处理的水平。在此情况下,例如,当水平0时不进行像素的平均化处理。在水平1的平均化处理中,将以对象的像素为中心配置为3行3列的9个像素的亮度值的平均值作为校正后的像素的亮度值。在水平2的平均化处理中,求出亮度值的平均值的像素组是以对象的像素为中心配置为5行5列的25个像素组。在水平3的平均化处理中,其为配置为7行7列的49个像素组,在水平4的平均化处理中,其为配置为9行9列的81个像素组,并且在水平5的平均化处理中,其为配置为11行11列的121个像素组。
或者,可以利用通过增加平均化处理的次数增强模糊处理的效果,而设定模糊处理的水平。例如,当水平0时,不对像素进行平均化处理。在水平1的平均化处理中,将以对象的像素为中心配置为3行3列的9个像素的亮度值的平均值作为校正后的像素值。当水平2时,进行两次水平1的平均化处理。换言之,在第一次平均化处理中,求出以对象的像素为中心配置为3行3列的9个像素的亮度值的平均值。在第二次平均化处理中,也求出相同的9个像素的亮度值的平均值。但是,作为对象的像素的亮度值,使用通过第一次平均化处理算出的平均值。通过第二次平均化处理算出的平均值为通过水平2的模糊处理算出的像素的亮度值。水平3至5的平均化处理也与水平2的平均化处理同样,在水平3、水平4、以及水平5的平均化处理中,进行平均化处理的次数分别为三次、四次、五次。
即使模糊处理为中值滤波器处理、减弱对比度的对比度转换处理、以及镶嵌处理,也可以与平均化处理同样地进行不同水平的模糊处理。
接下来,使用图像具体说明图2的图像处理。图7A及7B为示出本实施方式的图像处理方法的内容的说明图。图7A示出校正前的六个帧图像300至305,图7B示出对各个帧图像300至305进行图像处理的校正帧图像310至315。如图7A所示,在此,作为要进行图像处理的动态图像,设想人从远处的两棵树之间靠近来的动态图像。注意,图7A所示的帧图像300至305不是在时间上相邻的帧图像。
通过进行本实施方式的图像处理,对移动体的人进行移动体图像处理。由此,人的图像变清晰或被增强(参照图7B)。另一方面,基于图6的流程图,根据人的图像在帧图像中所占的比例,对除人以外的背景图像进行模糊程度不同的模糊处理。在图7A的动态图像的情况下,由于人越靠近,人在帧图像中所占的面积越大,所以时间越经过,帧图像的背景越模糊。在图7B所示的各个校正帧图像310至315中,分别对背景区域进行水平0至5的模糊处理。
如图7B所示,通过进行本实施方式的图像处理,人越靠近,背景越模糊。结果,由于从背景得到的信息量逐渐减少,所以可以使观看该动态图像者自然地产生人从远处越靠近,焦点越集中到人上的感觉。
如上所述,通过移动体区域在帧图像中所占的比例越大,进行对于背景区域的模糊效果越增强的图像处理,而可以制造高临场感(距离感、纵深感)的动态图像。换言之,在本实施方式中,由于通过根据图像的动态改变对于各个帧图像的背景的模糊效果,以图像处理预先进行与人的眼睛在看物体时进行的焦点调整功能极为相近的处理,因此,即使显示在二维画面上时,也可以制造观看者可以感觉到距离感、纵深感的动态图像。
实施方式2
通过如监控摄像机那样固定摄像机以相同的焦点条件拍摄动态图像,可以拍摄背景没有变化的动态图像。这种动态图像例如为由图7A所示的多个帧图像构成的动态图像。在本实施方式中,说明从这种动态图像中抽出移动体的方法。
在本实施方式中,准备没有移动体的仅由背景构成的帧图像(以下,称为“背景用帧图像”),而代替三个帧图像。制造该背景用帧图像和目标帧图像的差值图像,将该差值图像二值化的图像成为掩模图像ma。
当制造掩模图像ma时,求出像素(x,y)的亮度的差值值(ΔR1(x,y)、ΔG1(x,y)、ΔB1(x,y))。根据差值为阈值以上还是低于阈值,将亮度判定值(αR1(x,y)、αG1(x,y)、αB1(x,y))设定为“0”或“1”。到此的流程与图3的步骤222至步骤225相同。
若是αR1(x,y)+αG1(x,y)+αB1(x,y)≥2,则该像素的移动体判定值M(x,y)=1。若是αR1(x,y)+αG1(x,y)+αB1(x,y)<2,则该像素的移动体判定值M(x,y)=0。通过决定所有像素的移动体判定值M(x,y),与实施方式1同样地制造掩模图像ma。
实施方式3
在对背景区域及移动体区域双方进行图像处理的情况下,也可以根据移动体区域在帧图像中所占的比例改变对于移动体区域的图像处理的效果。换言之,在移动体图像处理中,也与图6的背景图像处理同样,根据移动体区域的比例Pm,对移动体区域进行不同水平的图像处理。在此情况下,移动体区域的比例Pm越大,将在移动体图像处理中进行的图像处理(锐化处理、对比度增强处理等)的水平设定得使图像的锐化或增强效果越大即可。
实施方式4
在本实施方式中,说明图1的图像输出装置102。图8A及8B为用于图像输出装置102的液晶显示装置的结构例子的说明图。图8A为本实施方式的液晶显示装置的俯视图。图8B为沿图8A的线C-D切割的截面图。本实施方式的液晶显示装置具有形成有由晶体管构成的电路的衬底、与该衬底相对的衬底、以及夹在这两个衬底之间的液晶层。在本实施方式的液晶显示装置中,电路由使用晶体半导体膜的顶栅型晶体管形成。另外,其显示方式为MVA(Multi-domain VerticalAlignment:多域垂直取向)方式。
如图8A所示,在衬底5100上形成有像素部5101、第一扫描线驱动电路5102、第二扫描线驱动电路5103、以及信号线驱动电路5104。像素部5101具有多个像素。在各个像素中设置有像素电极、以及电连接到像素电极的晶体管。另外,第一扫描线驱动电路5102、第二扫描线驱动电路5103、以及信号线驱动电路5104由多个晶体管等的多个半导体元件构成。
像素部5101、第一扫描线驱动电路5102、第二扫描线驱动电路5103、以及信号线驱动电路5104被密封剂5516密封在元件衬底5100和衬底5510之间。另外,通过TAB方式将FPC5200及IC芯片5530设定在衬底5100上。从图像处理装置101输出到图像输出装置102的信号被输入到FPC5200中。
参照图8B说明沿图8A的线C-D切割的截面结构。为了容易说明,在图8B中,作为像素部5101的截面结构示出一个晶体管5110及像素电极5111的一部分,并且作为第二扫描线驱动电路5103的截面结构示出两个晶体管5112及5113。
在衬底5100上作为基底膜形成有由单层结构或叠层结构构成的绝缘膜5501。作为绝缘膜5501,形成氧化硅膜、氮化硅膜、氮氧化硅膜、或氧氮化硅膜等。在此,氮氧化硅就是其氮含量比氧含量多的材料,而氧氮化硅就是其氧含量比氮含量多的材料。另外,与晶体管5110、5112、5113的半导体膜接触的绝缘膜5501的层优选由氧化硅膜或氧氮化硅膜形成。这是因为可以减少绝缘膜5501和沟道形成区域之间的界面态密度的缘故。另外,作为绝缘膜5501,优选至少形成一层如氮化硅膜或氮氧化硅膜之类的对钠离子具有阻挡效果的膜。
在绝缘膜5501上形成有岛状半导体膜5502,在半导体膜5502上作为栅极绝缘膜形成有绝缘膜5503。半导体膜5502构成晶体管5110、5112、5113的沟道形成区域、以及源区及漏区。绝缘膜5503由热氧化膜、氧化硅膜、氮化硅膜、或氧氮化硅膜等的单层膜或这些膜的叠层膜形成。绝缘膜5503的与半导体膜5502接触的层优选为氧化硅膜或氧氮化硅膜。这是因为可以减少绝缘膜5503和半导体膜5502之间的界面态密度的缘故。
在绝缘膜5503上形成加工成预定形状的导电膜5504。导电膜5504为单层结构、多层结构的膜,并且构成晶体管5110、5112、5113的栅电极、以及像素部5101的扫描线。在此,为了抑制泄漏电流,采用双栅结构形成像素部5101的晶体管5110。
覆盖导电膜5504地形成由单层结构或叠层结构构成的绝缘膜5505。绝缘膜5505用作层间膜。作为由用于绝缘膜5505的有机材料构成的膜、有由聚酰亚胺、丙烯酸、聚酰胺、聚酰亚胺酰胺、抗蚀剂、苯并环丁烯、环氧树脂构成的膜等。另外,作为由无机材料构成的膜,有由氧化硅、氮化硅、氧氮化硅、氮氧化硅、氮化铝、氧化铝、氧氮化铝、氮含量比氧含量多的氮氧化铝、类金刚石碳(DLC)、含氮碳(例如CN)、磷硅玻璃(PSG)、硼磷硅玻璃(BPSG)构成的膜等。
在绝缘膜5503及绝缘膜5505中形成有接触孔。接触孔到达各个晶体管5110、5112、5113的源区或漏区。在绝缘膜5505上形成有加工成预定形状的导电膜5506。导电膜5506构成晶体管5110、5112、5113的源电极、漏电极、以及像素部5101的信号线。导电膜5506为单层结构或多层结构的膜。
在绝缘膜5505上形成有绝缘膜5507。绝缘膜5507可以与绝缘膜5505同样地形成。在将绝缘膜5507加工成平坦化膜的情况下,例如形成至少一层由有机材料构成的膜作为绝缘膜5507即可。通过将绝缘膜5507加工成平坦化膜,可以抑制液晶分子的取向无序。
在绝缘膜5507上形成有像素电极5111。像素电极5111在形成于绝缘膜5507中的接触孔中与导电膜5506接触。因此,像素电极5111和晶体管5110电连接。另外,在像素电极5111中形成有开口部。借助于该开口部,通过在液晶分子中不存在电场的状态下将液晶分子倾斜地取向,可以以MVA方式进行显示。另外,为了将液晶分子这样取向,也可以在像素电极5111上面设置突起部,而代替形成开口部。
在将像素电极5111作为透光电极的情况下,使用透过光的透光导电膜形成像素电极5111。作为透光导电膜,例如有在氧化铟中包含氧化锡的铟锡氧化物膜、在铟锡氧化物中包含氧化硅的铟锡硅氧化物膜、在氧化铟中包含氧化锌的铟锌氧化物膜、氧化锌膜、或氧化锡膜等。另一方面,在将像素电极5111作为反射电极的情况下,使用反射光的导电膜形成像素电极5111。例如,使用由Ti、Mo、Ta、Cr、W、Al等的金属或它们的合金等构成的单层结构的膜或叠层结构的膜形成像素电极5111即可。
在绝缘膜5507上的不与像素电极5111重叠的区域形成有间隔物5508。间隔物5508由树脂形成。借助于间隔物5508,维持衬底5100和衬底5510之间的间隙(空隙)。在该空隙中形成包含液晶分子的液晶层5517。覆盖像素电极5111及间隔物5508地形成有取向膜5509。根据需要形成取向膜5509。
衬底5510用作相对衬底。在衬底5510上形成有相对电极5511、颜色滤光片层5512、以及突起部5513。相对电极5511可以由用来形成像素电极5111的透光导电膜形成。借助于突起部5513,通过在不存在电场的状态下将液晶分子倾斜地取向,可以以MVA方式进行显示。在衬底5510上覆盖相对电极5511及突起部5513地还形成有取向膜5514。根据需要形成取向膜5514。
在衬底5100和衬底5510之间围绕像素部5101、第一扫描线驱动电路5102、第二扫描线驱动电路5103、以及信号线驱动电路5104地形成有密封剂5516。在由密封剂5516密封的衬底5100和衬底5510的空隙中存在包含液晶分子的液晶层5517。
在被密封剂5516围绕的区域的外侧并且在绝缘膜5507上形成有多个端子5518。端子5518由与像素电极5111相同的导电膜构成,并且电连接到像素部5101、第一扫描线驱动电路5102、第二扫描线驱动电路5103、以及信号线驱动电路5104中的任一个。在端子5518上中间夹着各向异性导电膜5519连接有FPC5200。另外,在FPC5200上中间夹着各向异性导电体膜5520固定有IC芯片5530。换言之,端子5518、FPC5200、以及IC芯片5530彼此电连接。
虽然不一定需要设置IC芯片5530,但是通过在IC芯片5530中包括功能电路(存储器或缓冲器),可以有效地利用衬底面积。
另外,在本实施方式中,虽然说明了显示方式为MVA方式的液晶显示装置,但是液晶显示装置的显示方式也可以为PVA(PatternedVertical Alignment:垂直取向构型)方式。在采用PVA方式的情况下,在图8B的结构中,在相对电极5511中设置槽缝即可。另外,液晶的驱动方式不局限于MVA方式、PVA方式,也可以采用TN(Twisted Nematic:扭曲向列)方式、IPS(In-Plane-Switching:平面内转换)方式、FFS(Fringe Field Switching:边缘场切换)方式、ASM(Axially Symmetric aligned Micro-cell:轴线对称排列微单元)方式、OCB(Opticail Compensated Bend:光学补偿弯曲)方式、FLC(Ferroelectric Liquid Crystal:铁电性液晶)方式、AFLC(AntiFerroelectric Liquid Crystal:反铁电性液晶)方式等。
另外,作为像素输出装置102,除了液晶显示装置以外,还可以使用电致发光显示装置、场致发射显示器(Field Emission Display)、等离子体显示器等的各种显示装置。另外,图像输出装置102还可以为硬盘录像机、DVD刻录机等的各种录像装置。
实施方式5
在本实施方式中,说明具备显示部的图像处理系统的结构例子。
图9示出组合了显示装置1101和电路衬底1111的图像处理系统的一例。在电路衬底1111上设置有图像处理装置101。显示装置1101为图像输出装置102,例如可以使用实施方式3的液晶显示装置。显示装置1101具有像素部1102、扫描线驱动电路1103、以及信号线驱动电路1104。在电路衬底1111上例如形成有控制电路1112及运算电路1113等。显示装置1101和电路衬底1111通过连接布线1114彼此连接。作为连接布线1114可以使用FPC等。
例如,通过使用图9所示的图像处理系统完成电视接收装置。通过将本说明书提出的图像处理系统(图像显示系统)作为电视接收装置,观众可以欣赏到高临场感的图像的电视广播。
本说明书提出的图像处理系统可以应用于各种电子器具。作为这种电子器具,例如可以举出影像拍摄装置如摄像机及数码相机等、护目镜型显示器、导航系统、计算机、游戏机、便携式信息终端(移动计算机、手机、便携式游戏机或电子书籍等)、以及图像再现设备等。另外,典型的图像再现设备为具有再生记录在DVD(Digital VersatileDisk;数字通用光盘)或硬盘等的记录介质中的图像数据并显示其图像数据的功能的装置。以下,使用图10A至10C说明电子器具的一例。图10A至10C为本实施方式的电子器具的外观图。
图10A为监视器的外观图。监视器包括框体1211、支撑台1212、显示部1213。图10A所示的监视器具有在显示部显示各种信息(静态图像、动态图像、文字图像等)的功能。另外,图10A所示的监视器的功能不局限于此,可以具有各种功能。
图10B为影像拍摄装置的外观图。影像拍摄装置包括主体1231、显示部1232、图像接收部1233、操作键1234、外部连接端口1235、快门按钮1236。图10B所示的影像拍摄装置具有拍摄静态图像及动态图像的功能。影像拍摄装置设置有校正拍摄的动态图像及静态图像的图像处理装置,可以在影像拍摄装置中校正动态图像并将校正的动态图像写入各种记录介质中。另外,图10B所示的影像拍摄装置的功能不局限于此,可以具有各种功能。
图10C为计算机的外观图。计算机包括主体1251、框体1252、显示部1253、键盘1254、外部连接端口1255、定位装置1256。另外,还包括图像处理装置。图10C所示的计算机具有在显示部显示各种信息(静态图像、动态图像、文字图像等)的功能。例如,基于键盘1254、定位装置1256的输入对动态图像进行图像处理。另外,图10C所示的计算机的功能不局限于这些,可以具有各种功能。
本实施方式可以与其他实施方式适当地组合。
本说明书根据2008年3月5日在日本专利局受理的日本专利申请编号2008-054626而制作,所述申请内容包括在本说明书中。
Claims (29)
1.一种用来处理包括多个帧图像的动态图像的图像处理方法,包括如下步骤:
将所述多个帧图像中的一个帧图像分成包括制造移动体的像素组的移动体区域和包括不制造所述移动体的像素组的背景区域;以及
对所述多个帧图像中的所述一个帧图像的所述背景区域进行第一图像处理,
其中,所述第一图像处理为模糊处理,并且对于所述背景区域的所述模糊处理随着所述移动体区域在所述多个帧图像中的所述一个帧图像中所占的比例增大而增强。
2.根据权利要求1所述的图像处理方法,还包括如下步骤:
对所述多个帧图像中的所述一个帧图像的移动体区域进行第二图像处理,
其中,所述第一图像处理和所述第二图像处理为不同的图像处理。
3.根据权利要求1所述的图像处理方法,其中在所述移动体区域在所述多个帧图像中的所述一个帧图像中所占的比例比预定值小时,不对所述背景区域进行所述模糊处理。
4.根据权利要求2所述的图像处理方法,其中所述第二图像处理包括锐化处理、增强对比度的对比度转换处理、以及边缘增强处理中的至少一种图像处理。
5.根据权利要求1所述的图像处理方法,其中作为所述模糊处理,进行平均化处理、中值滤波器(median filter)处理、减弱对比度的对比度转换处理、以及镶嵌处理中的至少一种图像处理。
6.一种用来处理包括多个帧图像的动态图像的图像处理方法,包括如下步骤:
根据第一帧图像和该第一帧图像的k帧前的第二帧图像的差值、以及所述第一帧图像和该第一帧图像的k帧后的第三帧图像的差值,从所述第一帧图像中抽出制造移动体的像素,并且制造使用移动体区域和背景区域形成的掩模图像,所述移动体区域包括制造所述移动体的所述像素,所述背景区域包括不制造所述移动体的像素,其中k为自然数;
使用所述掩模图像判定制造所述第一帧图像的各个像素是包含在所述背景区域中还是包含在所述移动体区域中;以及
对包含在所述背景区域中的像素进行第一图像处理,
其中,所述第一图像处理为模糊处理,并且对于所述背景区域的所述模糊处理随着所述移动体区域在所述第一帧图像中所占的比例增大而增强。
7.根据权利要求6所述的图像处理方法,还包括如下步骤:
对包含在所述移动体区域中的像素进行第二图像处理,
其中,所述第一图像处理和所述第二图像处理为不同的图像处理。
8.根据权利要求6所述的图像处理方法,其中在所述移动体区域在所述第一帧图像中所占的比例比预定值小时,在所述第一图像处理中不对所述背景区域中的所述像素进行所述模糊处理。
9.根据权利要求7所述的图像处理方法,其中作为所述第二图像处理,进行锐化处理、增强对比度的对比度转换处理、以及边缘增强处理中的至少一种图像处理。
10.根据权利要求6所述的图像处理方法,其中作为所述模糊处理,进行平均化处理、中值滤波器处理、减弱对比度的对比度转换处理、以及镶嵌处理中的至少一种图像处理。
11.一种图像处理系统,包括:
显示包括多个帧图像的动态图像的图像显示部;
从所述多个帧图像中的至少一个帧图像中抽出移动体,并且将所述多个帧图像中的至少一个帧图像分成包括制造所述移动体的像素组的移动体区域和包括不制造所述移动体的像素组的背景区域的移动体抽出部;以及
对所述背景区域进行第一图像处理来制造校正帧图像的校正帧图像制造部,
其中,所述图像显示部显示所述校正帧图像,
并且,所述第一图像处理为模糊处理,并且对于所述背景区域的所述模糊处理随着所述移动体区域在所述多个帧图像中的所述一个帧图像中所占的比例增大而增强。
12.根据权利要求11所述的图像处理系统,
其中,在所述校正帧图像制造部对所述移动体区域进行第二图像处理,
并且,所述第一图像处理和所述第二图像处理为不同的处理。
13.根据权利要求11所述的图像处理系统,其中在所述移动体区域在所述多个帧图像中的所述一个帧图像中所占的比例比预定值小时,所述校正帧图像制造部不对所述背景区域进行所述模糊处理。
14.根据权利要求12所述的图像处理系统,其中所述校正帧图像制造部进行锐化处理、增强对比度的对比度转换处理、以及边缘增强处理中的至少一种图像处理。
15.根据权利要求11所述的图像处理系统,其中所述校正帧图像制造部进行平均化处理、中值滤波器处理、减弱对比度的对比度转换处理、以及镶嵌处理中的至少一种图像处理作为所述模糊处理。
16.一种图像处理系统,包括:
显示包括多个帧图像的动态图像的图像显示部;
根据第一帧图像和该第一帧图像的k帧前的第二帧图像的差值、以及所述第一帧图像和该第一帧图像的k帧后的第三帧图像的差值,从所述第一帧图像中抽出制造移动体的像素,并且制造使用移动体区域和背景区域形成的掩模图像的掩模图像制造部,所述移动体区域包括制造所述移动体的像素组,所述背景区域包括不制造所述移动体的像素组,其中k为自然数;以及
使用所述掩模图像判定制造所述第一帧图像的各个像素是包含在所述背景区域中还是包含在所述移动体区域中,并且对所述背景区域的像素进行第一图像处理来制造校正帧图像的校正帧图像制造部,
其中,所述图像显示部显示所述校正帧图像,
并且,所述第一图像处理为模糊处理,并且对于所述背景区域的所述模糊处理随着所述移动体区域在所述第一帧图像中所占的比例增大而增强。
17.根据权利要求16所述的图像处理系统,
其中,进一步进行对于所述移动体区域的像素的第二图像处理,以便制造所述校正帧图像,
并且,所述第一图像处理和所述第二图像处理为不同的图像处理。
18.根据权利要求16所述的图像处理系统,其中在所述移动体区域在所述第一帧图像中所占的比例比预定值小时,所述校正帧图像制造部在所述第一图像处理中不对所述背景区域的所述像素进行所述模糊处理。
19.根据权利要求17所述的图像处理系统,其中所述校正帧图像制造部进行锐化处理、增强对比度的对比度转换处理、以及边缘增强处理中的至少一种图像处理作为所述第二图像处理。
20.根据权利要求16所述的图像处理系统,其中所述校正帧图像制造部进行平均化处理、中值滤波器处理、减弱对比度的对比度转换处理、以及镶嵌处理中的至少一种图像处理作为所述模糊处理。
21.一种由图像处理装置进行的用来进行包括多个帧图像的动态图像的图像处理的计算机程序,包括:
使所述图像处理装置进行包括以下两种处理的图像处理:
从所述多个帧图像中的至少一个帧图像中抽出移动体,并且将所述多个帧图像中的至少一个帧图像分成包括制造所述移动体的像素组的移动体区域和包括不制造所述移动体的像素组的背景区域的第一处理;以及
对所述背景区域进行第一图像处理来制造校正帧图像的第二处理,
其中,在第二处理中对所述背景区域进行的所述第一图像处理为模糊处理,并且对于所述背景区域的所述模糊处理随着所述移动体区域在所述多个帧图像中的所述一个帧图像中所占的比例增大而增强。
22.根据权利要求21所述的计算机程序,
其中,在第二处理中进一步进行对于所述移动体区域的第二图像处理,
并且,所述第一图像处理和所述第二图像处理为不同的图像处理。
23根据权利要求21所述的计算机程序,其中在所述移动体区域在所述多个帧图像中的所述一个帧图像中所占的比例比预定值小时,不对所述背景区域进行所述模糊处理。
24.根据权利要求22所述的计算机程序,其中所述第二图像处理包括锐化处理、增强对比度的对比度转换处理、以及边缘增强处理中的至少一种图像处理。
25.根据权利要求21所述的计算机程序,其中作为所述模糊处理,进行平均化处理、中值滤波器处理、减弱对比度的对比度转换处理、以及镶嵌处理中的至少一种图像处理。
26.一种由图像处理装置进行的用来进行包括多个帧图像的动态图像的图像处理的计算机程序,包括:
使所述图像处理装置进行包括以下两种处理的图像处理:
根据成为校正对象的第一帧图像和该第一帧图像的k帧前的第二帧图像的差值、以及所述第一帧图像和该第一帧图像的k帧后的第三帧图像的差值,从所述第一帧图像中抽出制造移动体的像素,并且制造使用移动体区域和背景区域形成的掩模图像的第一处理,所述移动体区域包括制造所述移动体的像素组,所述背景区域包括不制造所述移动体的像素组,其中k为自然数;以及
使用所述掩模图像判定制造所述第一帧图像的各个像素是包含在所述背景区域中还是包含在所述移动体区域中,并对所述背景区域的像素进行第一图像处理,来制造校正帧图像的第二处理,
其中,在第二处理中对所述背景区域进行的所述第一图像处理为模糊处理,并且对于所述背景区域的所述模糊处理随着所述移动体区域在所述第一帧图像中所占的比率增大而增强。
27.根据权利要求26所述的计算机程序,
其中,在所述第二处理中进行对于所述移动体区域的像素的第二图像处理,
并且,所述第一图像处理和所述第二图像处理为不同的图像处理。
28.根据权利要求26所述的计算机程序,其中在所述移动体区域在所述第一帧图像中所占的比例比预定值小时,在所述第一图像处理中不对所述像素进行模糊处理。
29.根据权利要求27所述的计算机程序,其中所述第二图像处理包括锐化处理、增强对比度的对比度转换处理、以及边缘增强处理中的至少一种图像处理。
30.根据权利要求26所述的计算机程序,其中作为所述模糊处理,进行平均化处理、中值滤波器处理、减弱对比度的对比度转换处理、以及镶嵌处理中的至少一种图像处理。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008054626 | 2008-03-05 | ||
JP2008-054626 | 2008-03-05 | ||
JP2008054626 | 2008-03-05 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN101527773A true CN101527773A (zh) | 2009-09-09 |
CN101527773B CN101527773B (zh) | 2013-04-03 |
Family
ID=41053188
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN2009101261934A Expired - Fee Related CN101527773B (zh) | 2008-03-05 | 2009-03-05 | 图像处理方法、图像处理系统 |
Country Status (4)
Country | Link |
---|---|
US (1) | US8687918B2 (zh) |
JP (2) | JP5225155B2 (zh) |
CN (1) | CN101527773B (zh) |
TW (1) | TWI524755B (zh) |
Cited By (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101883209A (zh) * | 2010-05-31 | 2010-11-10 | 中山大学 | 一种背景模型与三帧差分相结合进行视频背景检测的方法 |
CN102395040A (zh) * | 2011-10-14 | 2012-03-28 | 友达光电股份有限公司 | 可改善鬼影现象的立体影像处理方法及其立体显示装置 |
CN103227930A (zh) * | 2012-01-27 | 2013-07-31 | 三星电子株式会社 | 图像处理设备和方法 |
CN103858421A (zh) * | 2011-10-26 | 2014-06-11 | I<sup>3</sup>研究所股份有限公司 | 影像处理装置、影像处理方法以及记录媒体 |
CN103871051A (zh) * | 2014-02-19 | 2014-06-18 | 小米科技有限责任公司 | 图像处理方法、装置和电子设备 |
CN103905725A (zh) * | 2012-12-27 | 2014-07-02 | 佳能株式会社 | 图像处理设备和图像处理方法 |
CN105164745A (zh) * | 2013-07-09 | 2015-12-16 | 三菱电机株式会社 | 信息提示装置 |
CN107958646A (zh) * | 2016-10-14 | 2018-04-24 | 矢崎总业株式会社 | 显示装置 |
CN108005407A (zh) * | 2017-12-04 | 2018-05-08 | 余姚市荣事特电子有限公司 | 一种仓库滑轨式支撑梁 |
CN108036255A (zh) * | 2017-12-04 | 2018-05-15 | 余姚市荣事特电子有限公司 | 一种应急照明灯 |
CN108050462A (zh) * | 2017-12-04 | 2018-05-18 | 余姚市荣事特电子有限公司 | 一种组合式庭院灯 |
CN108062939A (zh) * | 2016-11-09 | 2018-05-22 | 株式会社半导体能源研究所 | 电子设备的工作方法 |
CN109724528A (zh) * | 2017-10-30 | 2019-05-07 | 中冶长天国际工程有限责任公司 | 一种烧结机台车的篦条堵塞程度的确定方法及装置 |
WO2019105298A1 (zh) * | 2017-11-30 | 2019-06-06 | Oppo广东移动通信有限公司 | 图像虚化处理方法、装置、移动设备及存储介质 |
WO2019105254A1 (zh) * | 2017-11-30 | 2019-06-06 | Oppo广东移动通信有限公司 | 背景虚化处理方法、装置及设备 |
WO2019228337A1 (zh) * | 2018-05-30 | 2019-12-05 | 深圳市大疆创新科技有限公司 | 移动体、图像生成方法、程序以及记录介质 |
CN113012640A (zh) * | 2021-03-08 | 2021-06-22 | 京东方科技集团股份有限公司 | 显示面板及显示装置 |
WO2022178781A1 (en) * | 2021-02-25 | 2022-09-01 | Guangdong Oppo Mobile Telecommunications Corp., Ltd. | Electric device, method of controlling electric device, and computer readable storage medium |
Families Citing this family (27)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4245045B2 (ja) * | 2006-12-26 | 2009-03-25 | ソニー株式会社 | 撮像装置、撮像信号処理方法及びプログラム |
JP5300433B2 (ja) * | 2007-11-22 | 2013-09-25 | 株式会社半導体エネルギー研究所 | 画像処理方法及び表示装置 |
US10645346B2 (en) | 2013-01-18 | 2020-05-05 | Careview Communications, Inc. | Patient video monitoring systems and methods having detection algorithm recovery from changes in illumination |
US9269154B2 (en) * | 2009-01-13 | 2016-02-23 | Futurewei Technologies, Inc. | Method and system for image processing to classify an object in an image |
KR101310213B1 (ko) * | 2009-01-28 | 2013-09-24 | 한국전자통신연구원 | 깊이 영상의 품질 개선 방법 및 장치 |
US8867820B2 (en) * | 2009-10-07 | 2014-10-21 | Microsoft Corporation | Systems and methods for removing a background of an image |
JP5583177B2 (ja) * | 2009-12-28 | 2014-09-03 | キヤノン株式会社 | 画像処理装置及び画像処理方法 |
WO2011089847A1 (en) | 2010-01-20 | 2011-07-28 | Semiconductor Energy Laboratory Co., Ltd. | Signal processing circuit and method for driving the same |
US8849060B2 (en) * | 2011-07-01 | 2014-09-30 | Semiconductor Energy Laboratory Co., Ltd. | Image processing method, image processing system and display device for modifying background colors based on object colors |
JP5771096B2 (ja) | 2011-08-31 | 2015-08-26 | 株式会社半導体エネルギー研究所 | 画像処理方法 |
US8876178B1 (en) * | 2011-10-14 | 2014-11-04 | Interlock, USA, Inc. | Sliding door handle with pivot pins |
KR101896026B1 (ko) * | 2011-11-08 | 2018-09-07 | 삼성전자주식회사 | 휴대 단말기에서 움직임 블러를 생성하는 장치 및 방법 |
US8867830B2 (en) * | 2011-12-06 | 2014-10-21 | Michael Donvig Joensson | Image processing method for recovering details in overexposed digital video footage or digital still images |
US9366913B2 (en) | 2013-02-21 | 2016-06-14 | Semiconductor Energy Laboratory Co., Ltd. | Liquid crystal display device and electronic device |
JP6186184B2 (ja) * | 2013-06-21 | 2017-08-23 | 株式会社ソニー・インタラクティブエンタテインメント | 画像処理装置、画像処理システム、および画像処理方法 |
CN103706115A (zh) * | 2013-12-31 | 2014-04-09 | 成都有尔科技有限公司 | 基于智能穿戴设备的互动游戏系统 |
US9727949B1 (en) * | 2014-11-19 | 2017-08-08 | Google Inc. | Providing secure digital images |
JP6624827B2 (ja) | 2015-07-13 | 2019-12-25 | キヤノン株式会社 | 情報処理装置、情報処理方法、コンピュータプログラム |
JP6584179B2 (ja) * | 2015-07-13 | 2019-10-02 | キヤノン株式会社 | 情報処理装置、情報処理方法、コンピュータプログラム |
JP6593629B2 (ja) | 2015-09-09 | 2019-10-23 | ソニー株式会社 | 画像処理装置、固体撮像素子、および電子機器 |
US10460453B2 (en) * | 2015-12-30 | 2019-10-29 | Texas Instruments Incorporated | Feature point identification in sparse optical flow based tracking in a computer vision system |
WO2017122396A1 (ja) * | 2016-01-15 | 2017-07-20 | ソニー株式会社 | 制御装置、制御方法及びプログラム |
KR102546990B1 (ko) * | 2018-03-16 | 2023-06-23 | 엘지전자 주식회사 | 신호 처리 장치 및 이를 구비하는 영상표시장치 |
JP7122157B2 (ja) * | 2018-05-22 | 2022-08-19 | 大成建設株式会社 | 落石検出装置および落石検出システム |
CN110633773B (zh) * | 2018-06-22 | 2022-04-12 | 北京京东尚科信息技术有限公司 | 用于终端设备的二维码生成方法和装置 |
KR102575126B1 (ko) * | 2018-12-26 | 2023-09-05 | 주식회사 엘엑스세미콘 | 영상 처리 장치 및 그 방법 |
CN111340722B (zh) * | 2020-02-20 | 2023-05-26 | Oppo广东移动通信有限公司 | 图像处理方法、处理装置、终端设备及可读存储介质 |
Family Cites Families (41)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS63157579A (ja) | 1986-12-22 | 1988-06-30 | Nippon Telegr & Teleph Corp <Ntt> | 疑似3次元撮像装置 |
JP2941829B2 (ja) * | 1988-12-23 | 1999-08-30 | キヤノン株式会社 | 画像処理方法 |
JP3295437B2 (ja) | 1991-03-29 | 2002-06-24 | 日本放送協会 | 表示装置 |
JPH0636025A (ja) * | 1992-07-21 | 1994-02-10 | Dainippon Printing Co Ltd | デフォーカス処理装置 |
JP2919759B2 (ja) | 1994-05-18 | 1999-07-19 | 三洋電機株式会社 | 光学フィルタ及びこれを用いる立体表示装置 |
JPH08185521A (ja) | 1994-12-28 | 1996-07-16 | Clarion Co Ltd | 移動体カウント装置 |
JP3516774B2 (ja) | 1995-06-14 | 2004-04-05 | 三菱電機株式会社 | 立体映像表示装置 |
JPH09204159A (ja) | 1996-01-29 | 1997-08-05 | Canon Inc | 表示装置の駆動回路と駆動方法 |
JP3733165B2 (ja) | 1996-02-27 | 2006-01-11 | 富士写真フイルム株式会社 | デジタルプリンタの画像データ変換方法 |
JP3083995B2 (ja) * | 1996-08-30 | 2000-09-04 | 株式会社ハドソン | 画像処理方法および装置 |
JPH10111491A (ja) | 1996-10-08 | 1998-04-28 | Fujitsu Ltd | 液晶表示装置 |
JPH10233919A (ja) | 1997-02-21 | 1998-09-02 | Fuji Photo Film Co Ltd | 画像処理装置 |
US6157733A (en) | 1997-04-18 | 2000-12-05 | At&T Corp. | Integration of monocular cues to improve depth perception |
JPH11224324A (ja) | 1998-02-06 | 1999-08-17 | Fuji Photo Film Co Ltd | 画像信号処理方法及び装置 |
JP3668019B2 (ja) * | 1998-10-27 | 2005-07-06 | 株式会社ソニー・コンピュータエンタテインメント | 記録媒体、画像処理装置および画像処理方法 |
US6392620B1 (en) * | 1998-11-06 | 2002-05-21 | Canon Kabushiki Kaisha | Display apparatus having a full-color display |
US6646687B1 (en) * | 1999-04-16 | 2003-11-11 | Ultimatte Corporation | Automatic background scene defocusing for image compositing |
JP2001296841A (ja) | 1999-04-28 | 2001-10-26 | Matsushita Electric Ind Co Ltd | 表示装置 |
JP2001222264A (ja) | 2000-02-08 | 2001-08-17 | Nippon Soken Inc | カラー液晶表示装置用ガンマ補正装置、ガンマ補正方法及びガンマ補正データ作成方法 |
JP3485107B2 (ja) * | 2000-06-13 | 2004-01-13 | セイコーエプソン株式会社 | 電気光学装置、電気光学装置の製造方法、及び、電子機器 |
JP4040826B2 (ja) * | 2000-06-23 | 2008-01-30 | 株式会社東芝 | 画像処理方法および画像表示システム |
TW536827B (en) * | 2000-07-14 | 2003-06-11 | Semiconductor Energy Lab | Semiconductor display apparatus and driving method of semiconductor display apparatus |
JP4596224B2 (ja) | 2001-06-27 | 2010-12-08 | ソニー株式会社 | 画像処理装置および方法、記録媒体、並びにプログラム |
JP4413516B2 (ja) * | 2003-03-31 | 2010-02-10 | シャープ株式会社 | 信号タイミング調整システムおよび信号タイミング調整量設定プログラム |
JP3871333B2 (ja) | 2003-11-12 | 2007-01-24 | アンリツ産機システム株式会社 | 異物検出方法、異物検出プログラム及び異物検出装置 |
JP4321287B2 (ja) * | 2004-02-10 | 2009-08-26 | ソニー株式会社 | 撮影装置および撮影方法、並びに、プログラム |
JP2005277916A (ja) | 2004-03-25 | 2005-10-06 | Seiko Epson Corp | 動画像処理装置、画像処理システム、動画像処理方法およびそのプログラム、記録媒体 |
JP2006050070A (ja) | 2004-08-02 | 2006-02-16 | Fuji Photo Film Co Ltd | 画像処理方法および装置並びにプログラム |
TW200627362A (en) * | 2004-11-01 | 2006-08-01 | Seiko Epson Corp | Signal processing for reducing blur of moving image |
CN100511391C (zh) * | 2004-11-01 | 2009-07-08 | 精工爱普生株式会社 | 用于动图像模糊改善的信号处理 |
JP4649956B2 (ja) | 2004-11-04 | 2011-03-16 | セイコーエプソン株式会社 | 動き補償 |
JP4635663B2 (ja) | 2005-03-15 | 2011-02-23 | オムロン株式会社 | 画像処理システム、画像処理装置および方法、記録媒体、並びにプログラム |
US7702131B2 (en) | 2005-10-13 | 2010-04-20 | Fujifilm Corporation | Segmenting images and simulating motion blur using an image sequence |
JP4306671B2 (ja) * | 2005-11-04 | 2009-08-05 | セイコーエプソン株式会社 | 動画像表示装置および動画像表示方法 |
JP2007158706A (ja) | 2005-12-05 | 2007-06-21 | Fujifilm Corp | 動画生成装置、動画生成方法、及びプログラム |
US20100002009A1 (en) | 2005-12-22 | 2010-01-07 | Yoshiki Takata | Display device, a receiving device and a method for driving the display device |
JP2007264722A (ja) | 2006-03-27 | 2007-10-11 | Victor Co Of Japan Ltd | 画像処理装置 |
KR100657522B1 (ko) * | 2006-03-31 | 2006-12-15 | 삼성전자주식회사 | 휴대용 단말기를 이용한 아웃 포커싱 촬영 장치 및 방법 |
US20080079852A1 (en) * | 2006-10-02 | 2008-04-03 | Seiko Epson Corporation | Video display method, video signal processing apparatus, and video display apparatus |
EP2223294B1 (en) * | 2007-11-20 | 2013-04-10 | Semiconductor Energy Laboratory Co, Ltd. | Liquid crystal display device and image display method of the same |
JP5300433B2 (ja) * | 2007-11-22 | 2013-09-25 | 株式会社半導体エネルギー研究所 | 画像処理方法及び表示装置 |
-
2009
- 2009-02-26 US US12/393,282 patent/US8687918B2/en active Active
- 2009-02-26 TW TW098106193A patent/TWI524755B/zh not_active IP Right Cessation
- 2009-02-27 JP JP2009045844A patent/JP5225155B2/ja active Active
- 2009-03-05 CN CN2009101261934A patent/CN101527773B/zh not_active Expired - Fee Related
-
2013
- 2013-03-12 JP JP2013049122A patent/JP2013152734A/ja not_active Withdrawn
Cited By (28)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101883209B (zh) * | 2010-05-31 | 2012-09-12 | 中山大学 | 一种背景模型与三帧差分相结合进行视频背景检测的方法 |
CN101883209A (zh) * | 2010-05-31 | 2010-11-10 | 中山大学 | 一种背景模型与三帧差分相结合进行视频背景检测的方法 |
CN102395040B (zh) * | 2011-10-14 | 2014-08-20 | 友达光电股份有限公司 | 可改善鬼影现象的立体影像处理方法及其立体显示装置 |
CN102395040A (zh) * | 2011-10-14 | 2012-03-28 | 友达光电股份有限公司 | 可改善鬼影现象的立体影像处理方法及其立体显示装置 |
US9497436B2 (en) | 2011-10-14 | 2016-11-15 | Au Optronics Corp. | Virtual sport system using start sensor for accurate simulation of movement of a ball |
US9836812B2 (en) | 2011-10-26 | 2017-12-05 | I-Cubed Research Center Inc. | Image processing apparatus, method, and medium to apply a restrictive condition |
CN103858421A (zh) * | 2011-10-26 | 2014-06-11 | I<sup>3</sup>研究所股份有限公司 | 影像处理装置、影像处理方法以及记录媒体 |
CN103858421B (zh) * | 2011-10-26 | 2018-07-20 | I<sup>3</sup>研究所股份有限公司 | 影像处理装置以及影像处理方法 |
CN103227930A (zh) * | 2012-01-27 | 2013-07-31 | 三星电子株式会社 | 图像处理设备和方法 |
CN103227930B (zh) * | 2012-01-27 | 2018-06-01 | 三星电子株式会社 | 图像处理设备和方法 |
US9485436B2 (en) | 2012-12-27 | 2016-11-01 | Canon Kabushiki Kaisha | Image processing apparatus and image processing method |
CN103905725A (zh) * | 2012-12-27 | 2014-07-02 | 佳能株式会社 | 图像处理设备和图像处理方法 |
CN105164745A (zh) * | 2013-07-09 | 2015-12-16 | 三菱电机株式会社 | 信息提示装置 |
CN103871051B (zh) * | 2014-02-19 | 2017-01-18 | 小米科技有限责任公司 | 图像处理方法、装置和电子设备 |
CN103871051A (zh) * | 2014-02-19 | 2014-06-18 | 小米科技有限责任公司 | 图像处理方法、装置和电子设备 |
CN107958646A (zh) * | 2016-10-14 | 2018-04-24 | 矢崎总业株式会社 | 显示装置 |
CN107958646B (zh) * | 2016-10-14 | 2021-03-12 | 矢崎总业株式会社 | 显示装置 |
CN108062939A (zh) * | 2016-11-09 | 2018-05-22 | 株式会社半导体能源研究所 | 电子设备的工作方法 |
CN109724528A (zh) * | 2017-10-30 | 2019-05-07 | 中冶长天国际工程有限责任公司 | 一种烧结机台车的篦条堵塞程度的确定方法及装置 |
WO2019105298A1 (zh) * | 2017-11-30 | 2019-06-06 | Oppo广东移动通信有限公司 | 图像虚化处理方法、装置、移动设备及存储介质 |
WO2019105254A1 (zh) * | 2017-11-30 | 2019-06-06 | Oppo广东移动通信有限公司 | 背景虚化处理方法、装置及设备 |
CN108050462A (zh) * | 2017-12-04 | 2018-05-18 | 余姚市荣事特电子有限公司 | 一种组合式庭院灯 |
CN108036255A (zh) * | 2017-12-04 | 2018-05-15 | 余姚市荣事特电子有限公司 | 一种应急照明灯 |
CN108005407A (zh) * | 2017-12-04 | 2018-05-08 | 余姚市荣事特电子有限公司 | 一种仓库滑轨式支撑梁 |
WO2019228337A1 (zh) * | 2018-05-30 | 2019-12-05 | 深圳市大疆创新科技有限公司 | 移动体、图像生成方法、程序以及记录介质 |
WO2022178781A1 (en) * | 2021-02-25 | 2022-09-01 | Guangdong Oppo Mobile Telecommunications Corp., Ltd. | Electric device, method of controlling electric device, and computer readable storage medium |
CN113012640A (zh) * | 2021-03-08 | 2021-06-22 | 京东方科技集团股份有限公司 | 显示面板及显示装置 |
CN113012640B (zh) * | 2021-03-08 | 2022-07-12 | 京东方科技集团股份有限公司 | 显示面板及显示装置 |
Also Published As
Publication number | Publication date |
---|---|
JP2009239903A (ja) | 2009-10-15 |
JP5225155B2 (ja) | 2013-07-03 |
US20090225183A1 (en) | 2009-09-10 |
CN101527773B (zh) | 2013-04-03 |
TW200952470A (en) | 2009-12-16 |
US8687918B2 (en) | 2014-04-01 |
JP2013152734A (ja) | 2013-08-08 |
TWI524755B (zh) | 2016-03-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN101527773B (zh) | 图像处理方法、图像处理系统 | |
KR101552475B1 (ko) | 화상 처리 방법, 화상 표시 시스템, 및 컴퓨터 프로그램 | |
US8547311B2 (en) | Dual-image flat display device | |
US8531373B2 (en) | Liquid crystal display device and image display method of the same | |
US9052558B2 (en) | Display device, method of driving display device, liquid crystal display, and television receiver | |
CN102598104B (zh) | 有源矩阵基板、液晶面板、液晶显示装置、液晶显示单元、电视接收机 | |
TW200529157A (en) | Display device and imaging method | |
JP2010035148A (ja) | 画像処理システム、及び画像処理方法 | |
US20120105735A1 (en) | Active matrix substrate, liquid crystal panel, liquid crystal display device, liquid crystal display unit, and television receiver | |
US20180226031A1 (en) | Driving methods and driving devices of display panels | |
CN105551455B (zh) | 图形设备和方法 | |
US8035588B2 (en) | Liquid crystal display panel with auxiliary line disposed between boundary data line and pixel electrode and driving method thereof | |
CN106128375A (zh) | 透明液晶显示器的数据处理方法 | |
CN110211537A (zh) | 显示基板的驱动方法、驱动电路及显示装置 | |
CN102906806B (zh) | 显示装置、液晶显示装置、电视接收机 | |
US9874789B2 (en) | Thin film transistor display panel and liquid crystal display | |
CN106128376A (zh) | 透明液晶显示器的数据处理方法 | |
TWI287213B (en) | Correction method of image signal, correction circuit, photoelectric device and electronic device | |
WO2015037524A1 (ja) | 表示装置 | |
WO2012147602A1 (ja) | 液晶表示装置 | |
Han et al. | Implementation of LCD driver using asymmetric truncation error compensation for mobile DMB phone display | |
JP2012208255A (ja) | 画像データ生成装置、液晶表示装置、及び表示駆動方法 | |
JP2002341310A (ja) | 液晶表示装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20130403 |
|
CF01 | Termination of patent right due to non-payment of annual fee |