CN102169586B - 图像处理装置和存储了图像处理程序的存储介质 - Google Patents
图像处理装置和存储了图像处理程序的存储介质 Download PDFInfo
- Publication number
- CN102169586B CN102169586B CN2011100369385A CN201110036938A CN102169586B CN 102169586 B CN102169586 B CN 102169586B CN 2011100369385 A CN2011100369385 A CN 2011100369385A CN 201110036938 A CN201110036938 A CN 201110036938A CN 102169586 B CN102169586 B CN 102169586B
- Authority
- CN
- China
- Prior art keywords
- processing
- image
- data
- view data
- pixel
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000006243 chemical reaction Methods 0.000 claims description 26
- 230000015572 biosynthetic process Effects 0.000 claims description 13
- 238000003786 synthesis reaction Methods 0.000 claims description 6
- 238000003672 processing method Methods 0.000 claims 1
- 230000012447 hatching Effects 0.000 abstract description 4
- 239000003086 colorant Substances 0.000 abstract description 3
- 238000010422 painting Methods 0.000 description 40
- 238000000034 method Methods 0.000 description 19
- 230000009466 transformation Effects 0.000 description 16
- 230000006870 function Effects 0.000 description 15
- 210000003128 head Anatomy 0.000 description 13
- 238000004519 manufacturing process Methods 0.000 description 10
- 238000005755 formation reaction Methods 0.000 description 7
- 238000004891 communication Methods 0.000 description 5
- 230000000694 effects Effects 0.000 description 5
- 238000010586 diagram Methods 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 4
- 238000013507 mapping Methods 0.000 description 4
- 230000003287 optical effect Effects 0.000 description 4
- 238000000605 extraction Methods 0.000 description 3
- 241001269238 Data Species 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 238000013500 data storage Methods 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 238000004088 simulation Methods 0.000 description 2
- 230000003321 amplification Effects 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 230000005039 memory span Effects 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 230000006740 morphological transformation Effects 0.000 description 1
- 238000003199 nucleic acid amplification method Methods 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/73—Deblurring; Sharpening
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/40—Picture signal circuits
- H04N1/409—Edge or detail enhancement; Noise or error suppression
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20172—Image enhancement details
- G06T2207/20192—Edge enhancement; Edge preservation
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Image Processing (AREA)
- Processing Or Creating Images (AREA)
- Facsimile Image Signal Circuits (AREA)
Abstract
本发明提供一种图像处理装置和存储了图像处理程序的存储介质，纹理处理部(54)对由处理对象选择部(53)选择的多个像素的数据以同一运笔图式实施利用了该像素的颜色的纹理处理。阴影处理部(55)对由YUV分量构成的图像数据中的亮度低的(暗的)像素区域的数据，利用该像素的颜色实施阴影处理，附加与运笔图式的方向大致垂直方向的斜线表现。合成部(56)执行合成从阴影处理部(55)输出的图像数据和从纹理处理部(54)输出的图像数据的合成处理。由此，考虑原图像整体来生成进一步提高了艺术性的演出效果的图像数据。
Description
技术领域
本发明涉及图像处理装置和存储了图像处理程序的存储介质，特别是作为用于从原图像获得艺术性高的图像的图像处理，涉及能够实现考虑原图像整体从而生成使艺术性演出效果进一步提高的图像数据的图像处理的技术。
背景技术
近年来，出于提高欣赏通过摄像等所取得的图像时的演出效果的目的，执行对原图像数据实施提高艺术性的加工的图像处理。
例如，在日本特开平8-44867号公报中，公开了如下的技术：为了实现上述目的，以像素单位取得对于原图像的亮度、彩度、色相的信息，利用这些信息，模拟描绘变换为提高艺术性的图像(例如水彩画、油彩画)的数据时的运笔、色彩。
但是，在日本特开平8-44867号公报所记载的技术中，为了以像素单位进行模拟，在考虑图像整体来提高艺术性这一点上存在不足。
发明内容
本发明鉴于这样的状况而作，目的在于作为用于从原图像获得艺术性高的图像的图像处理，能够实现生成考虑原图像整体来进一步提高艺术性的演出效果的图像数据的图像处理。
为了实现上述目的，第一方式的发明具备：输入单元，其输入图像数据；变换单元，其将通过所述输入单元输入的所述图像数据变换为包含亮度分量的颜色空间的形态的数据；选择单元，其针对由所述变换单元变换后的所述图像数据，按所述颜色空间的每个分量选择多个像素的数据；纹理处理单元，其对由所述选择单元选择了的所述多个像素的数据，以同一运笔图式实施利用了该像素的颜色的纹理处理；阴影处理单元，其对由所述变换单元变换后的所述图像数据中的亮度低的像素区域的数据，利用该像素的颜色实施阴影处理，附加与所述运笔图式的方向大致垂直方向的斜线表现；合成单元，其合成由所述纹理处理单元实施了所述纹理处理的所述图像数据、和由所述阴影处理单元实施了所述阴影处理的所述图像数据；轮廓强调处理单元，其根据由所述变换单元变换后的所述图像数据的亮度分量，实施轮廓强调处理，强调由所述合成单元合成后的数据的所述图像的轮廓部分；和存储控制单元，其控制由所述轮廓强调处理单元实施了所述轮廓强调处理的所述图像数据的存储。
此外，第二方式的发明在上述第一方式的发明中，所述选择单元包括像素选择单元，该像素选择单元针对由所述变换单元变换后的所述图像数据，选择该图像中的任意一行的像素列，产生随机数，从由所述像素选择单元所选择的所述像素列中选择所述多个像素。
此外，第三方式的发明在上述第一或第二方的发明中，所述运笔图式是线状图式。
此外，第四方式的发明在上述第一至第三方式的发明中，所述输入单元包括摄像单元。
此外，为了实现上述目的，第五方式的发明使对所输入的图像数据实施图像处理的计算机实现如下功能：变换功能，将所输入的所述图像数据变换为包含亮度分量的颜色空间的形态的数据；选择功能，针对通过实现所述变换功能而变换后的所述图像数据，按所述颜色空间的每个分量选择多个像素的数据；纹理处理功能，对通过实现所述选择功能而选择的所述多个像素的数据，以同一运笔图式实施利用了该像素的颜色的纹理处理；阴影处理功能，对通过实现所述变换功能而变换后的所述图像数据中的亮度低的像素区域的数据，利用该像素的颜色实施阴影处理，附加与所述运笔图式的方向大致垂直方向的斜线表现；合成功能，合成通过实现所述纹理处理功能而实施了所述纹理处理的所述图像数据、和通过实现所述阴影处理功能而实施了所述阴影处理的所述图像数据；轮廓强调处理功能，根据通过实现所述变换功能而变换后的所述图像数据的亮度分量，实施轮廓强调处理，强调通过实现所述合成功能而合成了的数据的所述图像的轮廓部分；和存储控制功能，控制通过实现所述轮廓强调处理功能而实施了所述轮廓强调处理的所述图像数据的存储。
附图说明
图1是表示本发明的一个实施方式的摄像装置的硬件结构的模块图。
图2是表示图1的摄像装置的功能性结构的功能模块图。
图3是表示图2的摄像装置执行的彩色蜡笔画风(pastel-like)图像生成处理的流程的一例的流程图。
图4是表示图3的彩色蜡笔画风图像生成处理的步骤S4的处理结果的一例的图。
图5是表示图3的彩色蜡笔画风图像生成处理的步骤S5的处理结果的一例的图。
图6是表示在图3的彩色蜡笔画风图像生成处理的步骤S6的处理中使用的运笔图式的一例的图。
图7是表示图3的彩色蜡笔画风图像生成处理的步骤S6的处理结果的一例的图。
图8是表示在图3的彩色蜡笔画风图像生成处理的步骤S11的处理、为了生成边缘提取图像而采用的索贝尔(sobel)滤波器的一例的图。
图9是表示作为图3的彩色蜡笔画风图像生成处理的结果而得到的彩色蜡笔画风图像的一例的图。
图10是图9的彩色蜡笔画风图像的部分区域放大图。
图11是图9的彩色蜡笔画风图像的一部分，是放大了与图10不同的区域的图。
具体实施方式
以下，基于附图说明本发明的一个实施方式。
图1是表示作为本发明的图像处理装置的一个实施方式的摄像装置1的硬件结构的模块图。摄像装置1能够通过例如数码照相机构成。
摄像装置1具备CPU(Central Processing Unit)11、ROM(Read OnlyMemory)12、RAM(Random Access Memory)13、总线(bus)14、输入输出接口15、摄像部16、操作部17、显示部18、存储部19、通信部20、驱动器21。
CPU11按照ROM12中记录的程序执行各种处理。或者，CPU11按照从存储部19加载到RAM13中的程序执行各种处理。
在RAM13中还适当存储CPU11执行各种处理所需的数据等。
例如在本实施方式中，在ROM12、存储部19中存储有实现后述的图2的图像变换部52至存储控制部59的各功能的程序。因此，CPU11通过执行基于这些程序的处理，能够实现后述的图2的图像变换部52至存储控制部59的各功能。
CPU11、ROM12以及RAM13通过总线14相互连接。在该总线14上还连接了输入输出接口15。在输入输出接口15上连接了摄像部16、操作部17、显示部18、存储部19以及通信部20。
虽然未进行图示，但摄像部16具备光学透镜部和图像传感器。
为了对被摄体进行摄影，光学透镜部由聚光的透镜、例如聚焦透镜、变焦透镜等构成。
聚焦透镜是使被摄体像成像在图像传感器的受光面上的透镜。变焦透镜是使焦点距离在一定范围自由变化的透镜。
在光学透镜部中还根据需要设置了用于调整焦点、曝光、白平衡等设定参数的外围电路。
图像传感器由光电变换元件、AFE(Analog Front End，模拟前端)等构成。
光电变换元件由例如CMOS(Complementary Metal OxideSemiconductor)型的光电变换元件等构成。在光电变换元件中，从光学透镜部入射被摄体像。因此，光电变换元件每隔一定时间对被摄体像进行光电变换(摄像)从而积蓄图像信号，并将积蓄的图像信号作为模拟信号依次提供给AFE。
AFE对该模拟的图像信号，执行A/D(Analog/Digital)变换处理等各种信号处理。通过各种信号处理，生成数字信号，作为摄像部16的输出信号输出。
另外，以下将摄像部16的输出信号称为“摄像图像数据”。因此，从摄像部16输出摄像图像数据，适当提供给CPU11等。
操作部17由各种按钮等构成，接受用户的指示操作。
显示部18显示各种图像。
存储部19由DRAM(Dynamic Random Access Memory)等构成，临时存储从摄像部16输出的摄像图像的数据。此外，存储部19还存储各种图像处理所需要的各种数据，例如，图像数据、各种标记(flag)的值、阈值等。
通信部20控制经由包括因特网的网络与其他装置(未图示)之间进行的通信。
输入输出接口15上还根据需要而连接驱动器21，适当安装磁盘、光盘、光磁盘或者半导体存储器等构成的可移动介质31。而且，根据需要向存储部19安装从这些介质读出的程序。此外，可移动介质31还可以与存储部19同样地存储存储部19中存储的图像数据等各种数据。
图2是表示用于执行彩色蜡笔画风图像生成处理的摄像装置1的功能性结构的功能模块图。
这里，所谓彩色蜡笔画风图像生成处理，是指从作为图像处理对象而输入的原图像(以下称为“原图像”)的数据，直到生成作为艺术性高的图像的一种的如用蜡笔、钢笔等描画的那样的图像(以下称为“彩色蜡笔画风图像”)的数据为止的一系列处理。
如图2所示，为了实现彩色蜡笔画风图像生成处理，摄像装置1具备图像输入部51、图像变换部52、处理对象选择部53、纹理(texture)处理部54、阴影(hatching)处理部55、合成部56、轮廓强调处理部57、边缘提取图像生成部58、存储控制部59和图像存储部60。
在本实施方式中，由图1所示的结构中的摄像部16、通信部20、驱动器21等构成图像输入部51，输入原图像数据。
即，在本实施方式中，不仅从摄像部16输出的摄像图像的数据，从其他装置发送来从而由通信部20接收的图像数据、通过驱动器21从可移动介质31读出的图像的数据等也作为原图像数据输入图像输入部51。
在本实施方式中，图像变换部52至存储控制部59的每一个还作为图1所示的结构中的称为CPU11的硬件和存储在ROM12等中的程序(软件)的组合而构成。
此外，图像存储部60作为图1所示的结构中的摄像装置1的RAM13或者存储部19或者可移动介质31内的一个区域而构成。
图像变换部52执行将输入图像输入部51的原图像数据从输入时的形态变换为包含亮度分量的颜色空间的形态的处理。以下，将这种处理称为“图像变换处理”。
作为本实施方式的图像变换处理后的颜色空间，如图2所示，采用所谓YUV空间。即，在本实施方式中，通过图像变换部52的图像变换处理，能够得到由亮度分量(以下称为“Y分量”)、亮度分量与蓝色分量之色差分量(以下称为“U分量”)、以及亮度分量与红色分量之色差分量(以下称为“V分量”)构成的数据。
另外，以下，将汇集Y分量、U分量以及V分量的数据称为“YUV分量”。
处理对象选择部53针对图像变换部52的图像变换处理后的原图像数据，按颜色空间的每个分量，在本实施方式中按每个YUV分量，选择成为后述的纹理处理对象的多个像素数据。
纹理处理部54对由处理对象选择部53选择的多个像素数据，实施利用同一运笔图式采用了该像素的颜色的纹理处理。
这里，所谓“纹理处理”，是指对图像粘贴模仿蜡笔、钢笔等的笔迹的纹理的图像处理。在本说明书中，将该“模仿蜡笔、钢笔等的笔迹的纹理”的图式称为“运笔图式”。
作为运笔图式而采用的纹理的形状、大小等不做特别限定。但是，在本实施方式中，作为运笔图式，采用如后述的图6所示那样的线状图式，如上所述，该运笔图式(同一运笔图式)用于对各像素的各个数据的纹理处理。
这样的纹理处理对按每YUV分量选择的多个像素的各像素的数据的每一个反复执行，由此得到彩色蜡笔画风图像数据。
这里，所谓上述“采用了像素的颜色的纹理处理”，不仅包括粘贴像素的颜色本身的纹理的处理，还包括粘贴利用像素的颜色信息而运算出的颜色的纹理的处理。
即，在本实施方式中，根据纹理的亮度、和粘贴纹理的像素位置的像素的颜色信息(YUV分量中的处理对象分量的值)，运算并决定纹理的颜色。具体而言，在本实施方式中，使纹理的密度小一些，留下空白，从而得到如在白纸上用蜡笔、钢笔等描绘的那样的彩色蜡笔画风图像数据。为此，为了减少空白与纹理的颜色的间隙，纹理的颜色采用使原图像的亮度稍微高些的颜色。
另外，对于运笔图式、纹理处理的更详细情况，作为图3的步骤S3至S8的处理，采用图4至图7等在后面进行叙述。
如此，从纹理处理部54输出的彩色蜡笔画风图像数据有可能还是没有使明暗部的差变得清晰的图像数据。
因此，对于由YUV分量构成的图像数据中的亮度低的(暗的)像素区域的数据，阴影处理部55采用该像素的颜色，实施附加与运笔图式的方向大致垂直方向的运笔的斜线表现的处理(以下称为“阴影处理”)。
另外，阴影处理部55的处理对象在图2中表现为纹理处理部54的输出数据，但是不特别限定于图2所示的例，此外也可以是例如图像变换部52的输出数据。
合成部56执行将阴影处理部55输出的图像数据和纹理处理部54输出的图像数据合成的处理(以下称为“合成处理”)。
通过合成部56的输出数据而表现的图像(以下称为“合成图像”)，在亮度低的像素区域中，在纹理上增加了大致相反方向(与运笔图式的方向大致垂直的方向)的斜线，所以成为清楚地表现了明暗部的差异的图像。
另外，对于阴影处理以及合成处理的更详细情况，后面作为图3的步骤S9以及S 10的处理进行叙述。
轮廓强调处理部57根据从图像变换部52输出的Y分量，对从合成部56输出的合成图像数据，实施强调轮廓(边缘edge)的图像处理(以下称为“轮廓强调处理”)。
具体而言，边缘提取图像生成部58根据从图像变换部52输出的Y分量，生成将边缘强度作为像素值的图像数据。以下，将如此生成的图像数据称为“边缘提取图像数据”。
轮廓强调处理部57将如此由边缘提取图像生成部58生成的边缘提取图像数据中的、具有边缘强度高的像素值的区域作为边缘(轮廓)区域，对从合成部56输出的合成图像的Y分量中的边缘区域，实施轮廓强调处理。
另外，对于还包括边缘提取图像数据的生成方法的轮廓强调处理的更详细情况，后面作为图3的步骤S11的处理，利用图11等进行叙述。
存储控制部59执行将由轮廓强调处理部57实施了轮廓强调处理的图像数据存储在图像存储部60中的控制处理(以下称为“图像存储处理”)。
下面，说明具有这样的功能性结构的摄像装置1执行的彩色蜡笔画风图像生成处理。
图3是表示彩色蜡笔画风图像生成处理的流程的一例的流程图。
在步骤S1中，图像输入部51判断是否输入了原图像数据。
在没有输入原图像数据时，在步骤S1中判断为“否”，再次执行步骤S1的判断处理。即，直到输入原图像数据为止，反复步骤S1的判断处理，彩色蜡笔画风图像生成处理进入待机状态。
之后，向图像输入部51输入原图像数据后，在步骤S1中判断为“是”，处理进入步骤S2。
在步骤S2中，图像变换部52对输入图像输入部51的原图像数据执行图像变换处理。
据此，在本实施方式中，如上所述，得到原图像的YUV分量，提供给处理对象选择部53。
在步骤S3中，处理对象选择部53选择原图像的YUV种类的分量中的规定的一种分量，作为处理对象分量。
在步骤S4中，处理对象选择部53从处理对象分量的构成图像的多行(line)中，选择任意的行作为处理对象行。
在步骤S5中，处理对象选择部53从处理对象行中选择多个处理对象像素。
具体而言，虽然没有进行图示，但处理对象选择部53包括像素选择部，该像素选择部对处理对象分量，选择该分量的图像中的任意一行像素列。通过该像素选择部执行步骤S4的处理。
接着，作为步骤S5的处理，处理对象选择部53例如产生随机数，利用该随机数，从由像素选择部选择的像素列中选择多个像素作为处理对象像素。
将处理对象选择部53的选择结果通知纹理处理部54后，处理进入步骤S6。
在步骤S6中，纹理处理部54根据作为处理对象而选择的多个像素，执行上述纹理处理。
进而以下，参照图4至图7，具体地说明步骤S4至S6的处理。
图4是表示步骤S4的处理结果的一例的图。
图5是表示步骤S5的处理结果的一例的图。
图6是表示步骤S6的处理中使用的运笔图式的一例的图。
图7是表示步骤S6的处理结果的一例的图。
在图4、图5以及图7中，示出由步骤S3的处理选择的分量的图像中的一个区域(同一区域)。
在图4至图7中，一个正方形表示一个像素。
在本例中，如图4的中空箭头所示，在步骤S4的处理，选择图4的描绘范围内的从上数第4行的行，作为处理对象行。
如图5所示，在步骤S5的处理，从构成该处理对象行的像素列中，选择4个像素P1至P4作为处理对象像素。
如图7所示，在步骤S6的处理，在4个像素P1至P4的各像素位置，作为图6所示的运笔图式，分别粘贴纹理T1至T4，纹理T1至T4分别具有基于4个像素P1至P4的各像素值(在步骤S3的处理所选择的处理对象分量的各值)而运算出的4个颜色的每一个。
返回图3，对从处理对象分量任意选择的行，执行步骤S4至S6的处理后，处理进入步骤S7。
在步骤S7中，纹理处理部54判断处理对象分量的纹理处理是否结束。
步骤S7的判断处理不做特别限定，例如，作为步骤S7的判断处理，纹理处理部54可以进行如下判断：对处理对象分量整体的所有行执行步骤S4至S6的处理。
但是，在本实施方式中，如上所述，使纹理的密度小一些，留下空白，从而生成如在白纸上用蜡笔、钢笔等描绘的那样的彩色蜡笔画风图像数据。为了生成这样的数据，对处理对象分量整体的所有行执行步骤S4至S6的处理时，有可能会成为纹理的密度变得过浓的结果。因此，为了使纹理的密度适当，只要对某程度的数量的行执行步骤S4至S6的处理即可。
因此，作为本实施方式的步骤S7的判断条件，预先将该“某程度的数量”定义为阈值，采用步骤S4至S6的处理的反复次数超过了阈值这一判断条件。
因此，对于处理对象分量，步骤S4至S6的处理的反复次数没有超过阈值时，在步骤S7中判断为“否”，处理返回步骤S4，反复以后的处理。
即，对于处理对象分量，直到步骤S4至S6的处理的反复次数超过阈值为止的期间，反复步骤S4至S7：“否”的循环处理，每次将任意的行选择为处理对象行，选择处理对象的多个像素，分别执行基于该多个像素的每一个的纹理处理。
之后，对于处理对象分量，步骤S4至S6的处理的反复次数超过阈值时，在步骤S7中判断为“是”，处理进入步骤S8。
在步骤S8中，纹理处理部54判断是否结束了全部YUV分量的纹理处理。
在YUV分量中存在还没有被选择为处理对象的种类的分量时，在步骤S8中判断为“否”，处理返回步骤S3，反复之后的处理。
即，在步骤S3的处理，YUV种类的分量中没有成为处理对象的一种分量被选择为下一处理对象分量。然后，对下一处理对象种类的分量，反复步骤S4至S7：“否”的循环处理，每次将任意的行选择为处理对象行，选择处理对象的多个像素，分别执行基于该多个像素的每一个的纹理处理。
对YUV分量的全部分量执行以上的处理后，在步骤S8中判断为“是”，处理进入步骤S9。
如此，在本实施方式中，按每个YUV分量，设定处理对象行，利用各自的随机数选择处理对象的多个像素，分别执行基于该多个像素的每一个的纹理处理。
因此，在步骤S8中判断为“是”的时点得到的彩色蜡笔画风图像数据中，例如，有可能存在仅实施了基于U分量的着色的纹理的区域，相反也有可能存在没有实施基于U分量的着色的区域。同样地，有可能存在仅实施了基于V分量的着色的纹理的区域，相反也有可能存在没有实施基于V分量的着色的区域。
这样的彩色蜡笔画风图像表现为随机改变纹理的颜色并进行粘贴的样子映入用户的眼睛。
但是，在步骤S8中判断为“是”的时点得到的彩色蜡笔画风图像数据中，如上所述，有可能成为没有使明暗部的差异明确的图像数据。
因此，在步骤S8中判断为“是”时，在步骤S9中，阴影处理部55对由YUV分量构成的图像数据中的亮度低的像素区域的数据，采用该像素的颜色，实施由与运笔图式的方向大致垂直方向的斜线表现构成的阴影处理。
然后，在步骤S10中，合成部56对在步骤S8中判断为“是”的时点得到的彩色蜡笔画风图像的图像数据，执行合成由步骤S9的处理实施了阴影处理的图像(亮度低的像素区域中与纹理大致垂直方向的斜线的图像)的数据的合成处理。
如此，在步骤S9以及S10的处理中，为了清楚地表现彩色蜡笔画风图像的明暗部的差异，对于能够判断为暗的部分的部分(亮度低的部分)，能够掌握为是在与纹理大致垂直方向上添加斜线的处理。
通过执行这样的步骤S9以及S10的处理，能够获得作为与绘画技法的一种的“阴影”接近的效果。
具体而言，作为步骤S9以及S10的处理，对于亮度值成为阈值以下的区域的数据，实施斜线的层和α混合(A1pha B1ending)的图像处理。
这里，斜线部不是黑色，构成斜线部的各像素的颜色直接采用原图像中的同一像素位置的像素的颜色。据此，亮度值为阈值以下的区域与粘贴了其他纹理的区域相比变得相对较暗，并且表现为自然地映入用户的眼睛。
如此，执行步骤S9以及S10的处理，得到上述那样的合成图像数据后，处理进入步骤S11。
在步骤S11中，轮廓强调处理部57根据步骤S2的图像变换处理后的原图像的Y分量，对合成图像数据实施轮廓强调处理。
这里，对轮廓强调处理进行更详细的说明。
如上所述，在本实施方式中，为了执行轮廓强调处理，通过边缘提取图像生成部58生成边缘提取图像数据。
边缘提取图像数据的生成方法不做特别限定，但是在本实施方式中，采用了如图8所示的利用索贝尔滤波器生成边缘提取图像数据的方法。
以下，对本实施方式的边缘提取图像的生成方法进行更详细的说明。
图8是表示水平方向像素数×垂直方向像素数＝3×3的索贝尔滤波器的一例。具体而言，图8(A)是表示垂直分量提取用索贝尔滤波器的一例的图。图8(B)是表示水平分量提取用索贝尔滤波器的一例的图。
边缘提取图像生成部58从与图像变换部52输出的与Y分量对应的构成原图像的各像素中，设定要关注的关注像素，作为处理的对象。
边缘提取图像生成部58对关注像素的数据(Y分量值)，分别施加图8(A)所示的垂直分量提取用索贝尔滤波器以及图8(B)所示的水平分量提取用索贝尔滤波器。
另外，以下，将对关注像素的数据(Y分量值)施加了图8(A)所示的垂直分量提取用索贝尔滤波器的结果所得到的值称为“垂直索贝尔值”。该垂直索贝尔值越大，表示关注像素的垂直方向的边缘强度越高。
此外，以下，将对关注像素的数据(Y分量值)施加了图8(B)所示的水平分量提取用索贝尔滤波器的结果所得到的值称为“水平索贝尔值”。该水平索贝尔值越大，表示关注像素的水平方向的边缘强度越高。
如此，求出关注像素的垂直索贝尔值以及水平索贝尔值后，如下那样计算边缘提取图像中的关注像素的像素值(表示关注像素的边缘强度的值)。
即，边缘提取图像生成部58通过运算下式(1)来计算边缘提取图像中的关注像素的像素值。
边缘提取图像的关注像素的像素值
＝(垂直索贝尔值的绝对值+水平索贝尔值的绝对值)/2…(1)
式(1)所示的像素值越大，表示关注像素的边缘强度越高，即，关注像素是边缘的部分的可能性越高。
边缘提取图像生成部58依次将构成原图像的Y分量的各像素的数据设定为关注像素的数据，反复上述处理，由此生成边缘提取图像数据。
轮廓强调处理部57将如此由边缘提取图像生成部58生成的边缘提取图像数据中的、具有大的像素值的区域(边缘强度高的区域)作为边缘(轮廓)区域，对从合成部56输出的合成图像的Y分量中的边缘区域实施轮廓强调处理。
据此，图3的步骤S11的处理结束，之后处理进入步骤S12。
在步骤S12中，存储控制部59执行将由步骤S11的处理实施了轮廓强调处理的彩色蜡笔画风图像数据存储在图像存储部60中的图像存储处理。
据此，彩色蜡笔画风图像生成处理结束。
图9是表示作为彩色蜡笔画风图像生成处理的结果而得到的彩色蜡笔画风图像的一例的图。
图10是图9的彩色蜡笔画风图像的部分区域放大图。
图11是图9的彩色蜡笔画风图像的一部分，是放大了与图10不同的区域的图。
对包含汽车作为被摄体的原图像(未图示)的数据，实施图3的彩色蜡笔画风图像生成处理后，生成图9所示的彩色蜡笔画风图像81的数据，存储在图像存储部60(图2)中。
可知，彩色蜡笔画风图像81中的亮度高的区域、例如汽车的车罩(bonnet)中被阳光直射的明亮的区域91，如图10的放大图中椭圆范围内突出显示的那样，利用朝向左下的斜线状的纹理进行表现，不存在与该纹理大致垂直方向的斜线。
另一方面，可知，彩色蜡笔画风图像81中的亮度暗的区域、例如汽车的车门下侧由于影子而变暗的区域92，如图11的放大图中椭圆范围内突出显示的那样，与朝向左下的斜线状的纹理一起表现了朝向与该纹理大致垂直方向的右下的暗的斜线。
如此，通过执行本实施方式的彩色蜡笔画风图像生成处理，能够生成考虑原图像整体的明暗而进一步提高了艺术性的演出效果的彩色蜡笔画风图像81等的数据。
另外，本发明不限定于所述实施方式，在能够实现本发明的目的的范围内的变形、改良等也包括在本发明中。
例如，作为图2的处理对象选择部53、纹理处理部54、阴影处理部55以及合成部56的处理对象，在所述实施方式中采用了与原图像相同尺寸的数据，但不限定于此。
具体而言，例如，摄像装置1的RAM13等存储器容量不做限定，虽然处理尺寸大的纹理是困难的，但是为了表现如蜡笔、钢笔描画的样子，有时需要处理一定尺寸以上的纹理。
在这样的情况下，可以对从图像变换部52输出的YUV分量实施缩小处理，将该结果所得到的缩小图像数据提供给处理对象选择部53。但是，在该情况下，需要通过对合成部56的输出数据实施放大处理，从而将图像尺寸返回到原图像的尺寸。
此外例如，边缘提取图像生成部58的边缘提取图像数据的生成方法，在所述实施方式中为了提高精度，而采用了对从图像变换部52输出的Y分量施加索贝尔滤波器的方法，但是不限定于此。
具体而言例如，可以采用对从图像变换部52输出的Y分量，施加LPF(Low Pass Filter：低通滤波器)，对施加了该LPF的数据，施加索贝尔滤波器，由此生成边缘提取图像数据的方法。
此外例如，在需要高速化时，可以采用如下方法：对从图像变换部52输出的Y分量、或者对其施加了LPF的数据，施加拉普拉斯(Laplacian)滤波器等、索贝尔滤波器以外的任意滤波器，由此生成边缘提取图像数据。
此外例如，在上述实施方式中，以适用本发明的图像处理装置为数码照相机等摄像装置为例进行了说明。但是，本发明不限定于摄像装置，不管有无摄像功能，能够应用于能够执行上述图像处理的一般电子设备中。具体而言例如，本发明能够应用于个人计算机、摄像机、便携式导航装置、便携式游戏机等。
上述的一系列处理能够由硬件执行，也能够由软件执行。
在通过软件执行一系列处理时，构成该软件的程序从网络、记录介质安装到计算机等中。计算机可以是组装在专用硬件中的计算机。此外，计算机还可以是通过安装各种程序从而能够执行各种功能的计算机，例如通用个人计算机。
包含这样的程序的记录介质，不仅可以通过为了向用户提供程序而与装置本体单独分配的图1的可移动介质31构成，还可以通过以预先组装到装置本体内的状态向用户提供的记录介质等构成。例如，通过磁盘(包括软盘)、光盘或者光磁盘等构成可移动介质。例如，通过CD-ROM(CompactDisk-Read Only Memory)、DVD(Digital Versatile Disk)等构成光盘。通过MD(Mini-Disk)等构成光磁盘。此外，以预先组装到装置本体内的状态向用户提供的记录介质，例如，通过记录有程序的图1的ROM12、图1的存储部19中所包含的硬盘等构成。
另外，在本说明书中，记述记录介质中所记录的程序的步骤，当然包括按照其顺序在时间序列上进行的处理，但不是一定要在时间序列上处理，也包括并行或者个别执行的处理。
Claims (5)
1.一种图像处理装置，具备：
输入单元，其输入图像数据；
变换单元，其将通过所述输入单元输入的所述图像数据变换为包含亮度分量的颜色空间的形态的数据；
选择单元，其针对由所述变换单元变换后的所述图像数据，按所述颜色空间的每个分量选择多个像素的数据；
纹理处理单元，其对由所述选择单元选择的所述多个像素的数据，以同一运笔图式实施利用了该像素的颜色的纹理处理；
阴影处理单元，其对由所述变换单元变换后的所述图像数据中的亮度低的像素区域的数据，利用该像素的颜色实施阴影处理，附加与所述运笔图式的方向大致垂直方向的斜线表现；
合成单元，其合成由所述纹理处理单元实施了所述纹理处理的所述图像数据、和由所述阴影处理单元实施了所述阴影处理的所述图像数据；
轮廓强调处理单元，其根据由所述变换单元变换后的所述图像数据的亮度分量，实施轮廓强调处理，强调由所述合成单元合成后的数据的所述图像的轮廓部分；和
存储控制单元，其控制由所述轮廓强调处理单元实施了所述轮廓强调处理的所述图像数据的存储。
2.根据权利要求1所述的图像处理装置，其特征在于，
所述选择单元包括像素选择单元，该像素选择单元针对由所述变换单元变换后的所述图像数据，选择该图像中的任意一行的像素列，
产生随机数，根据所产生的随机数，从由所述像素选择单元所选择的所述像素列中选择所述多个像素。
3.根据权利要求1所述的图像处理装置，其特征在于，
所述运笔图式是线状图式。
4.根据权利要求1所述的图像处理装置，其特征在于，
所述输入单元包括摄像单元。
5.一种图像处理方法，包括：
输入步骤，输入图像数据；
变换步骤，将所输入的所述图像数据变换为包含亮度分量的颜色空间的形态的数据；
选择步骤，针对通过实现所述变换步骤而变换后的所述图像数据，按所述颜色空间的每个分量选择多个像素的数据；
纹理处理步骤，对通过实现所述选择步骤而选择的所述多个像素的数据，以同一运笔图式实施利用了该像素的颜色的纹理处理；
阴影处理步骤，对通过实现所述变换步骤而变换后的所述图像数据中的亮度低的像素区域的数据，利用该像素的颜色实施阴影处理，附加与所述运笔图式的方向大致垂直方向的斜线表现；
合成步骤，合成通过实现所述纹理处理步骤而实施了所述纹理处理的所述图像数据、和通过实现所述阴影处理步骤而实施了所述阴影处理的所述图像数据；
轮廓强调处理步骤，根据通过实现所述变换步骤而变换后的所述图像数据的亮度分量，实施轮廓强调处理，强调通过实现所述合成步骤而合成的数据的所述图像的轮廓部分；和
存储控制步骤，控制通过实现所述轮廓强调处理步骤而实施了所述轮廓强调处理的所述图像数据的存储。
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2010-036639 | 2010-02-22 | ||
| JP2010036639A JP4803304B2 (ja) | 2010-02-22 | 2010-02-22 | 画像処理装置及びプログラム |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN102169586A CN102169586A (zh) | 2011-08-31 |
| CN102169586B true CN102169586B (zh) | 2013-10-09 |
Family
ID=44476125
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN2011100369385A Expired - Fee Related CN102169586B (zh) | 2010-02-22 | 2011-02-10 | 图像处理装置和存储了图像处理程序的存储介质 |
Country Status (5)
| Country | Link |
|---|---|
| US (1) | US8289342B2 (zh) |
| JP (1) | JP4803304B2 (zh) |
| KR (1) | KR101202134B1 (zh) |
| CN (1) | CN102169586B (zh) |
| TW (1) | TWI419076B (zh) |
Families Citing this family (17)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US9424584B2 (en) * | 2011-06-28 | 2016-08-23 | Rovi Guides, Inc. | Systems and methods for generating and displaying user preference tag clouds |
| CN102572219B (zh) * | 2012-01-19 | 2014-12-24 | 西安联客信息技术有限公司 | 移动终端及其图像处理方法 |
| RU2533053C2 (ru) * | 2012-09-07 | 2014-11-20 | Армине Хачиковна Хачатрян | Способ опосредованного неразрушающего исследования художественных полотен, монументального или других произведений искусства для выявления их скрытых индивидуальных особенностей (варианты), способ определения подлинности и/или авторства художественного полотна, монументального или других произведений искусства |
| RU2012157043A (ru) * | 2012-12-26 | 2014-07-10 | Армине Хачиковна Хачатрян | Способ бесконтактного неразрушающего анализа художественных полотен и других произведений искусства по их цифровым копиям для определения индивидуального рисунка рельефа и углублений поверхностных и внутренних слоев |
| CN103971368B (zh) * | 2014-05-12 | 2017-03-15 | 内蒙古科技大学 | 一种基于色差的运动目标前景提取方法 |
| CN104077792A (zh) * | 2014-07-04 | 2014-10-01 | 厦门美图网科技有限公司 | 一种漫画效果的图像处理方法 |
| US11097974B2 (en) | 2014-07-31 | 2021-08-24 | Corning Incorporated | Thermally strengthened consumer electronic glass and related systems and methods |
| US10611664B2 (en) | 2014-07-31 | 2020-04-07 | Corning Incorporated | Thermally strengthened architectural glass and related systems and methods |
| JP6701168B2 (ja) | 2014-07-31 | 2020-05-27 | コーニング インコーポレイテッド | 熱強化ガラス、ならびにガラスの熱強化のための方法および装置 |
| WO2016106715A1 (en) * | 2014-12-31 | 2016-07-07 | SZ DJI Technology Co., Ltd. | Selective processing of sensor data |
| CN105303598A (zh) * | 2015-10-23 | 2016-02-03 | 浙江工业大学 | 基于纹理传输的多风格视频艺术化处理方法 |
| JP6923555B2 (ja) | 2016-01-12 | 2021-08-18 | コーニング インコーポレイテッド | 薄厚熱強化及び化学強化ガラス系物品 |
| US11795102B2 (en) | 2016-01-26 | 2023-10-24 | Corning Incorporated | Non-contact coated glass and related coating system and method |
| CN111065609A (zh) | 2017-08-24 | 2020-04-24 | 康宁股份有限公司 | 具有改进的回火能力的玻璃 |
| TWI785156B (zh) | 2017-11-30 | 2022-12-01 | 美商康寧公司 | 具有高熱膨脹係數及對於熱回火之優先破裂行為的非離子交換玻璃 |
| WO2021025981A1 (en) | 2019-08-06 | 2021-02-11 | Corning Incorporated | Glass laminate with buried stress spikes to arrest cracks and methods of making the same |
| CN115953331B (zh) * | 2023-03-14 | 2023-12-29 | 极限人工智能有限公司 | 一种图像边缘增强方法及系统 |
Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO1997041693A1 (de) * | 1996-04-30 | 1997-11-06 | Cfb Centrum Für Neue Bildgestaltung Gmbh | Vorrichtung und verfahren zur erzeugung eines kompositbildes |
| CN101587593A (zh) * | 2009-06-19 | 2009-11-25 | 西安交通大学 | 一种基于真实图像素描风格化的方法 |
Family Cites Families (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US5307452A (en) * | 1990-09-21 | 1994-04-26 | Pixar | Method and apparatus for creating, manipulating and displaying images |
| US5432896A (en) * | 1991-01-31 | 1995-07-11 | Axa Corporation | Watercolor simulation in computer graphics |
| JPH0744867A (ja) | 1993-05-26 | 1995-02-14 | Olympus Optical Co Ltd | 光ディスク記録装置 |
| US5621868A (en) * | 1994-04-15 | 1997-04-15 | Sony Corporation | Generating imitation custom artwork by simulating brush strokes and enhancing edges |
| JP2862080B1 (ja) * | 1997-11-27 | 1999-02-24 | 日本電気株式会社 | 画像処理装置と画像処理方法 |
| JP2004213598A (ja) | 2003-01-07 | 2004-07-29 | Hidenori Ito | 絵画風画像変換方法、及び、コンピュータ読み取り可能な記憶媒体 |
| CN100470588C (zh) * | 2005-08-22 | 2009-03-18 | 上海广电（集团）有限公司中央研究院 | 增强图像颜色的方法 |
| US7372469B2 (en) * | 2006-04-12 | 2008-05-13 | Arcadyan Technology Corporation | Image transforming method |
| JP2009093609A (ja) | 2007-09-20 | 2009-04-30 | Sega Corp | 画像処理用プログラム、当該プログラムを記録したコンピュータ読み取り可能な記録媒体、画像処理装置、画像処理方法 |
| TWI387354B (zh) * | 2008-06-18 | 2013-02-21 | Novatek Microelectronics Corp | 色彩飽和度調整方法以及使用該方法的影像顯示系統 |
-
2010
- 2010-02-22 JP JP2010036639A patent/JP4803304B2/ja not_active Expired - Fee Related
-
2011
- 2011-02-10 CN CN2011100369385A patent/CN102169586B/zh not_active Expired - Fee Related
- 2011-02-16 US US13/028,386 patent/US8289342B2/en active Active
- 2011-02-21 TW TW100105560A patent/TWI419076B/zh not_active IP Right Cessation
- 2011-02-21 KR KR1020110014907A patent/KR101202134B1/ko active IP Right Grant
Patent Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO1997041693A1 (de) * | 1996-04-30 | 1997-11-06 | Cfb Centrum Für Neue Bildgestaltung Gmbh | Vorrichtung und verfahren zur erzeugung eines kompositbildes |
| CN101587593A (zh) * | 2009-06-19 | 2009-11-25 | 西安交通大学 | 一种基于真实图像素描风格化的方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| JP2011170816A (ja) | 2011-09-01 |
| KR20110096496A (ko) | 2011-08-30 |
| TWI419076B (zh) | 2013-12-11 |
| US8289342B2 (en) | 2012-10-16 |
| KR101202134B1 (ko) | 2012-11-15 |
| CN102169586A (zh) | 2011-08-31 |
| TW201203171A (en) | 2012-01-16 |
| US20110205236A1 (en) | 2011-08-25 |
| JP4803304B2 (ja) | 2011-10-26 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN102169586B (zh) | 图像处理装置和存储了图像处理程序的存储介质 | |
| JP5110098B2 (ja) | 表示処理装置、及び、プログラム | |
| CN102348070B (zh) | 图像处理装置和图像处理方法 | |
| JP5037673B2 (ja) | 情報処理装置、情報処理システム、情報処理方法、情報処理プログラム及びコンピュータ読み取り可能な記録媒体 | |
| JP6111723B2 (ja) | 画像生成装置、画像生成方法及びプログラム | |
| CN105339954A (zh) | 用于数码相机的基于单帧的超分辨率内插的系统和方法 | |
| CN103440674A (zh) | 一种数字图像蜡笔特效的快速生成方法 | |
| CN102750685A (zh) | 一种图像处理的方法及其装置 | |
| CN102194213A (zh) | 图像处理装置 | |
| JP2010092094A (ja) | 画像処理装置、画像処理プログラム及びデジタルカメラ | |
| US20110285739A1 (en) | Image display apparatus, image display method, and program storage medium | |
| Ligon | Digital art revolution | |
| Nickelson | Fine Art Inkjet Printing: The Craft and Art of the Fine Digital Print | |
| CN108132935A (zh) | 图像分类方法及图像展示方法 | |
| CN105979151A (zh) | 一种图像处理方法及终端 | |
| CN102654919A (zh) | 图像加工装置及图像加工方法 | |
| JP5448799B2 (ja) | 表示制御装置及び表示制御方法 | |
| Onstott | Adobe Photoshop CS6 Essentials | |
| Savage | Understanding Digital Black and White Photography: Art and Techniques | |
| JP6028485B2 (ja) | 画像生成装置、画像生成方法及びプログラム | |
| Farace | Getting started with digital imaging: tips, tools, and techniques for photographers | |
| CN109801252A (zh) | 图片处理方法、装置和电子设备 | |
| Ang | Digital Photography An Introduction | |
| Corbell et al. | Nik Software Tools Bundle | |
| Harrington | Understanding Adobe Photoshop: Digital Imaging Concepts and Techniques |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| REG | Reference to a national code |
Ref country code: HK Ref legal event code: DE Ref document number: 1157483 Country of ref document: HK |
|
| C14 | Grant of patent or utility model | ||
| GR01 | Patent grant | ||
| REG | Reference to a national code |
Ref country code: HK Ref legal event code: GR Ref document number: 1157483 Country of ref document: HK |
|
| CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20131009 Termination date: 20210210 |
|
| CF01 | Termination of patent right due to non-payment of annual fee |