CN102096916A - 图像显示装置和方法 - Google Patents

图像显示装置和方法 Download PDF

Info

Publication number
CN102096916A
CN102096916A CN2010105460395A CN201010546039A CN102096916A CN 102096916 A CN102096916 A CN 102096916A CN 2010105460395 A CN2010105460395 A CN 2010105460395A CN 201010546039 A CN201010546039 A CN 201010546039A CN 102096916 A CN102096916 A CN 102096916A
Authority
CN
China
Prior art keywords
mentioned
face
image
light source
display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2010105460395A
Other languages
English (en)
Inventor
广谷孝幸
樱井敬一
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Casio Computer Co Ltd
Original Assignee
Casio Computer Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Casio Computer Co Ltd filed Critical Casio Computer Co Ltd
Publication of CN102096916A publication Critical patent/CN102096916A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/003D [Three Dimensional] image rendering
    • G06T15/50Lighting effects
    • G06T15/506Illumination models
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/40Extraction of image or video features
    • G06V10/60Extraction of image or video features relating to illumination properties, e.g. using a reflectance or lighting model
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • General Health & Medical Sciences (AREA)
  • Computer Graphics (AREA)
  • Health & Medical Sciences (AREA)
  • Software Systems (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Human Computer Interaction (AREA)
  • Image Generation (AREA)
  • Controls And Circuits For Display Device (AREA)
  • User Interface Of Digital Computer (AREA)
  • Image Analysis (AREA)
  • Processing Or Creating Images (AREA)
  • Image Processing (AREA)
  • Studio Devices (AREA)

Abstract

本发明涉及图像显示装置和方法。装置的摄影部(22)对辨认显示部(21)的观赏者(11)可存在的部位的图像进行摄影。装置根据该摄影图像,检测观赏者(11)的脸。装置分别确定已检测到的脸的脸位置、以及光源(12)的光源位置。装置根据脸位置和光源位置,从显示图像(包括钟表物体(31)的图像)中,检测反射区域(61)。接着,装置对显示图像的数据,进行在反射区域(61)上附加反射效果的图像处理。另外,装置在显示部(21)中,显示该图像处理后的数据所表示的显示图像。

Description

图像显示装置和方法
相关申请的交叉参考
本申请基于申请日为2009年9月29日,申请号为JP特开2009-224009号的在先申请,并要求以其为优先权,在此通过引用并入其全部内容。
技术领域
本发明涉及图像处理技术,涉及例如可向观赏者提示具有现实感的自然的图像的图像显示装置和方法。
背景技术
在过去,具有在图像中附加反射光和阴影,呈现3维的效果的图像处理(例如参照JP特开2007-328460号文献)。
但是,在过去的图像处理中,当在图像中附加反射光和阴影时,关于观赏图像的观赏者的存在,没有任何的考虑。由此,在过去的图像处理中,对于呈现3维的效果的图像,具有下述的情况,即,通过按照与实际的环境无关的方式显示的反射光或阴影,对于观赏者,辨认为具有不同感的不自然的图像。
发明内容
因此,本发明是鉴于上述问题而提出的发明,其目的在于对观赏者提示具有现实感的自然的图像。
本发明的第1方面提供一种图像显示装置,其包括摄影部,其对观赏显示于显示部中的显示图像的观赏者进行摄影;脸检测部,其从通过上述摄影部拍摄到的上述图像检测脸;脸定位部,其确定通过上述脸检测部检测出的上述脸的位置;光源定位部,其确定光源的位置;反射区域检测部,其根据通过上述脸定位部所确定的上述脸的位置、以及通过上述光源定位部所确定的上述光源的位置,从上述显示图像中,检测从上述光源射入的光向上述脸的方向反射的反射区域;反射效果处理部,其对上述显示图像的数据,进行对通过上述反射区域检测部检测出的上述反射区域附加反射效果的图像处理;和显示控制部,其根据由上述反射效果处理部进行上述图像处理而得的上述数据,使上述显示部显示上述显示图像。
本发明的第2方面提供一种图像显示方法,该方法包括摄影控制步骤,控制图像的摄影,对观赏显示于显示部的显示图像的观赏者进行摄影;脸检测步骤,根据通过上述摄影控制步骤的控制处理而拍摄到的上述图像,检测脸;脸定位步骤,确定通过上述脸检测步骤的处理检测到的上述脸的位置;确定光源的位置的光源定位步骤;反射区域检测步骤,根据通过上述脸定位步骤的处理所确定的上述脸的位置、以及通过上述光源定位步骤的处理所确定的上述光源的位置,从上述显示图像中,检测从上述光源射入的光向上述脸的方向反射的反射区域;反射效果处理步骤,对上述显示图像的数据,进行对通过上述反射区域检测步骤的处理检测到的上述反射区域,附加反射效果的图像处理;和显示控制步骤,根据通过上述反射效果处理步骤进行上述图像处理而得的上述数据,使上述显示部显示上述显示图像。
通过本发明可对观赏者提示具有现实感的自然的图像。
附图说明
图1为表示构成本发明的一个实施形式的图像显示装置的数码相框的外观结构的主视图;
图2为表示图1的数码相框的功能结构的功能方框图;
图3为表示图1的数码相框的外观结构的主视图,其为说明光源为假想光源的情况的例子的图;
图4为表示图1的数码相框的外观结构的顶视图,其为说明光源脸角度计算部的处理的例子的图;
图5为表示图1的数码相框的外观结构的顶视图,其为说明反射效果处理部的处理的例子的图;
图6为表示图1的数码相框的硬件的结构的方框图;
图7为表示图1的数码相框的图像显示处理的流程的一个例子的流程图;
图8为表示构成本发明的变形形式的图像显示装置的数码相框的外观结构的顶视图;
图9为说明图8的数码相框所呈现的反射效果和影效果的图。
具体实施方式
下面根据附图,对本发明的实施形式进行说明。
本发明的图像显示装置例如可通过数码相框、个人计算机等构成。在下面,对将图像显示装置构成为数码相框1的情况进行说明。图1为表示数码相框1的外观结构的主视图。
在数码相框(digital photo frame)1的正面上,设置比如由液晶显示器等构成的显示部21。在本实施形式中,设为在显示部21中显示的图像(在下面称为“显示图像”)包括钟表物体31。于是,观赏数码相框1的显示图像的观赏者11通过观看在显示部21中显示的钟表物体31,可知晓目前的时刻。
另外,在数码相框1上,设置例如作为数字照相机等而构成的摄影部22。该摄影部22相对从数码相框1的正面(显示部21的显示面),朝向前方的方向,对位于画角的范围内的图像进行摄影。在下面,将通过摄影部22拍摄到的图像称为“摄影图像”。换言之,摄影部22将观赏显示部21的观赏者11可存在的场所的图像作为摄影图像而拍摄,输出摄影图像的图像数据。
此外,在本实施形式中,对于以能从显示部21的中央拍摄观赏显示图像的观赏者的方式、将摄影部22设置于显示部21的后部的情况进行说明,但是其配置位置没有特别的限定,例如,也可设置于显示部21的显示范围之外,虽然关于这一点将在后面参照图4进行描述。
数码相框1根据从摄影部22输出的图像数据,尝试摄影图像中包括的观赏者11的脸的检测。这里,在检测到脸时,数码相框1确定指定脸的位置的信息,例如与到以摄影部22为基准的脸的距离和方向有关的信息。在下面,将指定象这样获得的脸的位置的信息称为“脸位置”。
在这里,优选预先预想到为了观看钟表物体31,观赏者11的脸可存在的位置的范围,摄影部22按照可充分地对预想的范围进行摄影的方式设计。在本实施形式中,物体采用钟表物体31而进行说明,物体并不限于此。
另外,数码相框1确定指定光源12的位置的信息,例如与到以摄影部22为基准的光源12的距离和方向有关的信息。在下面,将指定如上获得的光源12的位置的信息称为“光源位置”。在本实施形式中,光源12可有选择地采用实际光源和假想光源。于是,光源位置的确定方法对于实际光源和假想光源是不同的,但是,关于这些具体的例子,将在后面描述。
接着,数码相框1根据已检测到的脸位置和光源位置,从显示图像中检测假定从光源12射入的光向观赏者11的脸的方向反射的区域(在下面称为“反射区域”)。另外,数码相框1对显示图像的图像数据进行例如如下的图像处理:提高反射区域的亮度等,从而附加呈现出在反射区域光好象反射的效果(在下面称为“反射效果”)。
另外,数码相框1根据已检测到的脸位置和光源位置,从显示图像中的除了反射区域以外的区域,检测假定观赏者11作为阴影而看到的区域(在下面称为“脸区域”)。另外,数码相框1对显示图像的图像数据进行例如如下图像处理:降低影区域的亮度等,从而附加呈现出在影区域光好像不反射存在阴影的效果(在下面称为“影效果”)。
数码相框1根据进行这样的图像处理而产生的图像数据,在显示部21中显示显示图像。如上获得的显示图像为对应于实际的观赏者11的环境,在反射区域,存在反射光(或,扩散光),在影区域,存在阴影的图像。
例如在图1的例子中,将钟表物体31的长针32的一部分区域61检测为反射区域,显示反射光(或,扩散光)。如上所述,数码相框1可在作为显示图像的显示部21中,显示对于观赏者11来说,具有现实感的自然的图像。
图2为表示数码相框1的功能结构例的功能方框图。参照图2,对本实施形式的数码相框1的功能结构进行说明。
数码相框1更具体地说,不但包括上述的显示部21和摄影部22,而且包括数据存储部51、脸检测部52、脸定位部53、亮度测定部54、光源定位部55、光源脸角度计算部56、反射区域检测部57、反射效果处理部58、与显示控制部59。
数据存储部51存储显示图像的图像数据,作为该显示图像的3维信息的3维数据(在下面统称为显示图像的数据)。例如,在本实施形式中构成图1的钟表物体(clock object)31的长针32等各组成部件的数据也存储于数据存储部51中。另外,可指定假想光源的种类、位置等的数据(在下面称为假想光源数据)也存储于数据存储部51中。
脸检测部52根据从摄影部22输出的图像数据,尝试摄影图像中包括的人物的脸的检测。在检测到1个以上的人物的脸时,将脸检测部52的检测结果供给到脸定位部53。
脸定位部53从通过脸检测部52检测到的1个以上的脸中,将预定的1个脸设定为处理对象脸(face-to-be-processed)。脸定位部53确定如上设定的处理对象的脸位置。在图1的例子中,由于仅存在1个观赏者11,故观赏者11的脸构成处理对象脸,这样,脸定位部53确定观赏者11的脸位置。通过脸定位部53确定的脸位置供给到光源定位部55、光源脸角度计算部56,和反射区域检测部57。
亮度测定部54根据从摄影部22输出的图像数据,测定摄影图像的亮度分布。亮度测定部54测定的亮度分布的信息与摄影图像的图像数据一起,供给到光源定位部55。
光源定位部55在采用假想光源时,从数据存储部51,获得假想光源数据。接着,光源定位部55根据假想光源数据,确定假想光源的光源位置。
在本实施形式中,如图1所示,在相对于显示部21的中心朝向纸面在左侧存在观赏者11的脸时,按照相对显示部21的中心,朝向纸面而在右侧,具有作为假想光源的光源12的方式确定光源位置。
相对该情况,如图3所示,在相对于显示部21的中心朝向纸面在右侧存在观赏者11的脸时,按照相对显示部21的中心,朝向纸面而在左侧,具有作为假想光源的光源12的方式确定光源位置。人们认为,为了附加对于观赏者11来说合适的反射效果、影效果,优选根据观赏者11的脸位置,来确定假想光源的光源位置。另外,假想光源的光源位置并不限于基于假想光源数据的方法。按照本发明,可根据安装情况,按照任意的位置和方向,对光源位置进行设定,进行图像处理。
返回到图2,光源定位部55在采用实际光源时,获得亮度测定部54测定的亮度分布的信息。光源定位部55根据该亮度分布的信息,将摄影图像中的具有一定以上的亮度的区域作为实际光源而确定。另外,光源定位部55根据摄影图像的图像数据,确定已确定的实际光源的光源位置。
如上所述,通过光源定位部55确定的光源位置供给到光源脸角度计算部56和反射区域检测部57。
光源脸角度计算部56例如如图4所示,计算通过处理对象脸(在图4中,观赏者11的脸)和摄影部22的直线,与通过光源12和摄影部22的直线之间的角度θα(在下面称为“脸光源角度θα”)。脸光源角度θα根据通过图2的脸定位部53确定的脸位置,通过光源定位部55确定的光源位置,以及摄影部22的画角而计算。脸光源角度θα从光源脸角度计算部56,供给到反射区域检测部57。
反射区域检测部57从数据存储部51,获得显示图像的数据。另外,反射区域检测部57从光源脸角度计算部56获得脸光源角度θα,从脸定位部53获得脸位置,从光源定位部55获得光源位置。接着,反射区域检测部57根据如上获得的各种数据检测显示图像中的反射区域。
在本实施形式中,为了便于说明,对钟表物体31的表面为没有凹凸部的平面,仅对钟表物体31中的针中附加反射效果的情况进行说明。此时,如图5所示,反射区域检测部57针对构成显示图像的每个区域,计算来自假定的光源12的光的入射角θin、以及该光的反射角θout(=入射角θin)。
另外,反射区域检测部57例如在构成显示图像的钟表物体31的针的区域中,将脸光源角度θα为反射角θout的约2倍的角度(与入射角θin+反射角θout大致相同的角度)检测为反射区域。在图5的例子中,钟表物体31的长针32的一部分区域61检测为反射区域。另外,反射区域的检测方法并不特别限于本实施形式的方法,例如也可采用针对显示图像的各区域的摄影部22之间的每个距离对脸光源角度θα进行补偿等,对应于安装而适合的方法。
返回图2,反射区域检测部57还将从显示图像中检测出的反射区域以外的预定的区域检测为影区域。指定通过反射区域检测部57检测到的反射区域和影区域的信息作为反射区域检测部57的检测结果,而供给到反射效果处理部58。
反射效果处理部58从数据存储部51,获得显示图像的数据。反射效果处理部58根据反射区域检测部57的检测结果,对显示图像的数据,进行使反射区域附加反射效果的图像处理,并且进行使影区域附加影效果的图像处理。附加反射效果、影效果的显示图像的数据供给到显示控制部59。
显示控制部59根据从反射效果处理部58供给的数据,在显示部21中显示附加反射效果、影效果的显示图像。在图1的例子中,钟表物体31的长针32的一部分区域61作为反射区域,附加反射效果而进行显示。其结果是,观赏者11可观赏在钟表物体31的长针32的一部分区域61,光反射的样子。
另外,例如钟表物体31的另外的部分构成影区域,附加影效果而显示,虽然关于这一点,在图1中未示出。其结果是,观赏者11可观赏在钟表物体31的影区域,好象存在阴影的样子。
此外,由于钟表物体31的长针32伴随时间的推移,进行旋转运动,虽然关于这一点,在图中未示出,故在构成显示图像的长针32的区域中,具有脸光源角度θα和反射角θout的约2倍的角度一致的区域不存在的时间带。在这样的时间带,不检测反射区域,长针32不附加反射效果而进行显示。于是,观赏者11可观赏对应于时间带,长针32反射,或不反射的样子。
另外,观赏者11可同样针对短针、秒针,观赏这样的样子,虽然关于这一点,在图中未示出。如上所述,对于观赏者11具有现实感的自然的图像作为显示图像而显示于显示部21中。
图6为表示数码相框1的硬件的结构例子的方框图。
数码相框1包括CPU(Central Processing Unit)101、ROM(Read Only Memory)102、RAM(Random Access Memory)103、总线104、输入输出接口105、输入部106、输出部107、存储部108、通信部109、驱动器110、上述的摄影部22。
CPU101按照记录于ROM102中的程序,进行各种的处理。或者,CPU101按照从存储部108,下载于RAM103中的程序,进行各种的处理。在RAM103中,还适当存储对于CPU101进行各种的处理来说,必要的数据等。
例如在本实施形式中,实现图2的脸检测部52~显示控制部59的各功能的程序存储于ROM102、存储部108中。于是,CPU101进行依照该程序的处理,由此,可实现脸检测部52~显示控制部59的各功能。另外,在下面,将依照该程序的处理称为图像显示处理。关于图像显示处理的一个例子,参照图7的流程,在后面进行说明。
CPU101、ROM102、和RAM103经由总线104而相互连接。在该总线104上,还连接输入输出接口105。
在输入输出接口105上,连接输入部106,具有图2的显示部21的输出部107,与通过硬盘等构成的存储部108。在存储部108中,包括图2的数据存储部51。在输入输出接口105中,连接通过调制解调器、终端适配器等构成的通信部109、图2的摄影部22。通信部109对经由包括互联网的网络,在与其它的装置(图中未示出)之间进行的通信进行控制。
在输入输出接口105上,根据需要,连接驱动器110,适当安装由磁盘、光盘、光磁盘、或半导体存储器等构成的可移动存储介质111。另外,从它们上读出的程序根据需要,而安装于存储部108上。另外,可移动存储介质111在图2的例子中,还存储存储于数据存储部51中的图像数据、3维数据等各种数据。
图7为表示图6的数码相框1的图像显示处理的流程的一个例子的流程图。
在步骤S1中,CPU101控制摄影部22对显示部21的前方进行摄影。具体来说,例如在图1的例子中,拍摄包含观赏者11、以及在光源12为实际光源时还包括光源12的摄影图像。
在步骤S2中,CPU101根据从摄影部22输出的图像数据,尝试摄影图像中包括的人物的脸的检测。
在步骤S3中,CPU101判断是否存在1个以上的脸。
在通过步骤S2的处理,没有检测到1个脸时,或在判断通过步骤S2的处理检测到的脸全部按照一定距离以上间隔开时(例如全部的脸的区域在一定面积以下时),判定在步骤S3的处理为“否”。其结果是,不进行后述的步骤S4~S9的处理,即,不进行附加反射效果、影效果的图像处理,在步骤S10进行处理。在步骤S10,CPU101在显示部21中显示没有附加反射效果、影效果的显示图像。由此,图像显示处理结束。
相反,在步骤S2的处理中,在检测到位于一定距离内的1个以上的脸(例如1个以上的脸的区域大于一定面积时),在步骤S3的处理中判定为“是”,在步骤S4进行处理。具体来说,例如在图1的例子中,由于检测到观赏者11的脸,故在步骤S3的处理中,判定为“是”,在步骤S4进行处理。
在步骤S4中,CPU101将1个以上的脸中的1个设定为处理对象脸。即,在检测到多个脸时,附加对于多个脸来说合适的反射效果、影效果这一点是非常困难的。于是,CPU101将多个脸中的预定的1个脸设定为处理对象脸。CPU101按照附加对于多个脸来说,合适的反射效果、影效果的方式,进行步骤S5以后的处理。从多个脸中选择1个处理对象脸的方法没有特别的限定,例如也可为将脸检测部52在图像的中央检测到的脸选择为处理对象脸的方法,或将预先存储有特征的用户的脸选择为处理对象脸的方法等,根据安装而确定。在图1的例子中,继续对将观赏者11的脸设定为处理对象脸的情况进行说明。
在步骤S5中,CPU101确定处理对象脸的脸位置。具体来说,例如在图1的例子中,根据在步骤S1的处理拍摄到的摄影图像数据,确定观赏者11的脸位置。
在步骤S6中,CPU101确定光源位置。另外,如上所述,在本实施形式中,可有选择地采用假想光源和实际光源,但是,根据将哪个选择为光源的情况,确定光源位置的方法是不同的。具体来说,例如在图1的例子中,确定光源12的光源位置。
在步骤S7中,CPU101根据摄影部22的画角和脸位置以及光源位置,计算脸和光源的角度。具体来说,例如如图4所示,计算脸光源角度θα。
在步骤S8中,CPU101根据已计算的角度,检测显示图像的反射区域和影区域。在这里,针对构成显示图像的钟表物体31的针的每个区域,计算来自假定的光源12的光的入射角θin和反射角θout(=入射角θin)。另外,在此时刻,在显示图像中,将脸光源角度θα为反射角θout的约2倍的角度(与入射角θin+反射角θout大致相同的角度)的针的区域检测为反射区域。
在图5的例子中,将钟表物体31的长针32的一部分区域61检测为反射区域。另外,将从显示图像中检测到的反射区域以外的预定的区域检测为影区域。
在步骤S9中,CPU101对显示图像的数据,进行附加反射区域的反射效果和影区域的影效果的图像处理。
在步骤S10中,CPU101根据进行步骤S9的图像处理而得的图像数据,将附加反射区域的反射效果和影区域的影效果的图像作为显示图像,显示于显示部21中。具体来说,例如在图1的例子中,钟表物体31的长针32的一部分区域61作为反射区域,附加反射效果而进行显示。另外,例如钟表物体31的其它的部分作为影区域,附加影效果而进行显示,虽然关于这一点,没有在图中示出。
由此,图像显示处理结束。
如上所述,本实施形式的图像显示装置根据摄影图像,检测观赏者的脸,确定该脸的脸位置。另外,本实施形式的图像显示装置确定假想光源或实际光源的光源位置。如果这样,本实施形式的图像显示装置根据已确定的脸位置和光源位置,检测显示图像中的反射区域和影区域。
本实施形式的图像显示装置对显示图像的图像数据,进行在象这样检测到的反射区域附加反射效果,并且在影区域附加影效果的图像处理。由此,本实施形式的图像显示装置可将在反射区域附加反射效果,并且在影区域附加影效果的图像作为显示图像而显示。
即,本实施形式的图像显示装置可对观赏者,显示具有现实感的图像。
另外,本发明并不限于本实施形式,可实现本发明的目的的范围内的变形、改良等包括在本发明中。
例如在本实施形式中,对数码相框1所显示的钟表物体31的表面为没有凹凸部的平面进行了说明,但是,本发明并不限于此。钟表物体31也可由表示对应于安装,表示各种的立体的形状的3维物体构成。
例如如图8所示,钟表物体31的长针32也可由与观赏者11观看到的平面相垂直地剖开的截面的形状为三角形的3维物体构成。
换言之,从观赏者11侧观看到的长针32的表面也可呈以中央的部分为边界而倾斜的形状。此时,图2的反射区域检测部57针对表示显示图像中的长针32的区域,考虑长针32的表面的倾斜角,计算来自假定的光源12的光的入射角θin和反射角θout(=入射角θin)。
接着,反射区域检测部57在表示长针32的区域中,具有比如脸光源角度θα为反射角θout的约2倍的角度(与入射角θin+反射角θout大致相同的角度)的区域的时候,将该区域检测为反射区域。此时,也可考虑长针32的表面的倾斜角而对脸光源角度θα进行补偿。
在图8的例子中,将钟表物体31的长针32的一个斜面的区域71检测为反射区域。此时,如图9所示,以表示钟表物体31的长针32的区域中的中央的部分为边界,将观赏者11侧的斜面(图9中的左侧的斜面)的区域71检测为反射区域,由此,例如将其反射侧的斜面(图9中的右侧的斜面)的区域72检测为影区域。
其结果是,如图9所示,在长针32的区域71,附加反射效果。于是,观赏者11可从区域71,观赏好象光反射的样子。另一方面,在长针32的区域72,附加影效果。于是,观赏者11可从区域72,观赏好象存在阴影的样子。
如上所述,对于观赏者11更进一步具有现实感的自然的图像作为显示图像而显示于显示部21中。
例如在本实施形式中,对仅在钟表物体31中的针上附加反射效果或影效果的情况进行了说明,但是,本发明并不限于此。例如,还可在钟表物体31的整体上附加反射效果或影效果。
此时,构成钟表物体31的区域中的,脸光源角度θα约为反射角θout的2倍的角度(与入射角θin+反射角θout大致相同的角度)的区域作为还包括字符盘等针以外的区域的反射区域。影区域也可对应于反射区域而确定。另外,在从视觉方面区分针以及针以外的区域例如字符盘时,例如也可进行改变字符盘的各个区域的反射率等处理,图像显示装置进行附加考虑了反射率的反射效果的图像处理,改变亮度。
此外,在本实施形式中,为了便于说明,作为附加呈现效果的显示图像,以包括钟表物体31的图像为例而进行了说明,但是,当然,本发明并不限于此。换言之,在附加呈现效果的显示图像中包括的物体并不特别限于钟表物体31,可采用无论二维、或三维的各种的物体。
还有,在本实施形式中,对数码相框1有选择地采用假想光源和实际光源作为光源12的情况进行了说明,但是,本发明并不限于此。例如,本发明即使在仅将假想光源和实际光源中的任何一者固定而使用的情况下,仍可适用。由此,例如在仅采用假想光源时,可省略图2的亮度测定部54。同样,例如在仅采用实际光源时,没有特别必须要求将图2的假想光源数据存储于数据存储部51中。
在本实施形式中,数码相框1如参照图9等而描述的那样,可进行附加反射效果和影效果的两个效果的图像处理,但是,本发明并不限于此。例如本发明也用于仅附加反射效果和影效果中的任意一者的效果的图像处理。或者,也可将本发明用于在附加反射效果和影效果中至少1个的效果的图像处理的基础上,进一步组合其它任意图像处理的情况。
此外,本实施形式中,对于数码相框1,对通过软件和硬件(CPU101)的组合来构成图2的脸检测部52~显示控制部59的情况进行了说明,但是,该方案当然不过是举例性的。例如也可对应于安装,通过专用的硬件,构成图2的脸检测部52~显示控制部59中的相应部分,还可通过软件构成该相应部分。
但是,如上所述,本发明的一系列的处理也可通过借助硬件实现,还可通过软件实现。
在通过软件来进行一系列处理时,可将构成该软件的程序从记录媒体或经由网络安装于计算机中。计算机既可为组装有专用的硬件的计算机,也可为通过安装各种程序能实现各种功能的例如通用的个人计算机。
包括用于实现本发明的一系列的各种程序的记录媒体既可独立于图像显示装置主体,而为为了向用户提供程序而配置的可移动存储介质,也可为预先组装于图像显示装置主体中的记录媒体。可移动存储介质由例如磁盘(包括软磁盘)、光盘、或光磁盘等构成。光盘由例如CD-ROM(Compact Disk-Read Only Memory)、DVD(Digital Versatile Disk)等构成。光磁盘由MD(Mini-Disk)等构成。另外,作为预先组装于装置主体中的记录媒体,也可为例如记录有程序的图6的ROM102,图中未示出的硬盘等。
另外,在本说明书中,表述记录于记录媒体中的程序的步骤不但包括按其顺序,依照时间序列而进行的处理,而且还包括不必按照时间序列处理,并列或单独地进行的处理。

Claims (7)

1.一种图像显示装置,其包括:
摄影部,其对观赏显示于显示部中的显示图像的观赏者进行摄影;
脸检测部,其从通过上述摄影部拍摄到的上述图像检测脸;
脸定位部,其确定通过上述脸检测部检出的上述脸的位置;
光源定位部,其确定光源的位置;
反射区域检测部,其根据通过上述脸定位部所确定的上述脸的位置、以及通过上述光源定位部所确定的上述光源的位置,从上述显示图像中检测从上述光源射入的光向上述脸的方向反射的反射区域;
反射效果处理部,其对上述显示图像的数据,进行对通过上述反射区域检测部检测出的上述反射区域附加反射效果的图像处理;和
显示控制部,其根据由上述反射效果处理部进行上述图像处理而得的上述数据,使上述显示部显示上述显示图像。
2.根据权利要求1所述的图像显示装置,其中:
上述光源为假想光源,
上述光源定位部根据上述脸的位置,确定上述假想光源的位置。
3.根据权利要求1所述的图像显示装置,其中:
上述光源为实际光源,
上述图像显示装置还包括测定上述摄影图像的亮度分布的亮度测定部,
上述光源定位部根据上述亮度测定部的测定结果,确定上述实际光源的位置。
4.根据权利要求1所述的图像显示装置,其中:
上述反射区域检测部还从上述显示图像中检测存在阴影的影区域,
上述反射效果处理部还对上述显示图像的上述数据,进行对通过上述反射区域检测部检测出的上述影区域附加影效果的图像处理。
5.根据权利要求1所述的图像显示装置,其中:
上述脸定位部在通过上述检测部检测到多个脸时,从上述多个脸中将预定的1个脸设定为处理对象脸,并确定上述处理对象脸的位置。
6.根据权利要求1所述的图像显示装置,其中:
在通过上述检测部没有检测到脸时,上述反射效果处理部禁止进行上述图像处理。
7.一种图像显示方法,该方法包括:
摄影控制步骤,控制图像的摄影,对观赏显示于显示部的显示图像的观赏者进行摄影;
脸检测步骤,根据通过上述摄影控制步骤的控制处理而拍摄到的上述图像,检测脸;
脸定位步骤,确定通过上述脸检测步骤的处理检测到的上述脸的位置;
确定光源的位置的光源定位步骤;
反射区域检测步骤,根据通过上述脸定位步骤的处理所确定的上述脸的位置、以及通过上述光源定位步骤的处理所确定的上述光源的位置,从上述显示图像中,检测从上述光源射入的光向上述脸的方向反射的反射区域;
反射效果处理步骤,对上述显示图像的数据,进行对通过上述反射区域检测步骤的处理检测到的上述反射区域附加反射效果的图像处理;和
显示控制步骤,根据通过上述反射效果处理步骤进行上述图像处理而得的上述数据,使上述显示部显示上述显示图像。
CN2010105460395A 2009-09-29 2010-09-28 图像显示装置和方法 Pending CN102096916A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2009-224009 2009-09-29
JP2009224009A JP4831223B2 (ja) 2009-09-29 2009-09-29 画像表示装置及び方法並びにプログラム

Publications (1)

Publication Number Publication Date
CN102096916A true CN102096916A (zh) 2011-06-15

Family

ID=43779812

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2010105460395A Pending CN102096916A (zh) 2009-09-29 2010-09-28 图像显示装置和方法

Country Status (3)

Country Link
US (1) US20110074782A1 (zh)
JP (1) JP4831223B2 (zh)
CN (1) CN102096916A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104050799A (zh) * 2014-06-06 2014-09-17 北京智谷睿拓技术服务有限公司 反射控制方法及控制装置
CN106664364A (zh) * 2014-09-26 2017-05-10 佳能株式会社 图像处理设备及其控制方法

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW201205551A (en) * 2010-07-29 2012-02-01 Hon Hai Prec Ind Co Ltd Display device assembling a camera
JP5762015B2 (ja) * 2011-01-27 2015-08-12 キヤノン株式会社 画像処理装置、画像処理方法、及びプログラム
US9582083B2 (en) * 2011-12-22 2017-02-28 Apple Inc. Directional light sensors
US20130265306A1 (en) * 2012-04-06 2013-10-10 Penguin Digital, Inc. Real-Time 2D/3D Object Image Composition System and Method
KR101509712B1 (ko) * 2013-09-13 2015-04-07 현대자동차 주식회사 디스플레이 장치에서의 빛 반사 방지 방법 및 시스템
KR101484242B1 (ko) * 2013-12-19 2015-01-16 현대자동차 주식회사 자동차의 디스플레이 제어장치 및 제어방법
KR102507567B1 (ko) * 2015-06-09 2023-03-09 삼성전자주식회사 이미지를 처리하는 전자 장치 및 그 제어 방법
JPWO2017154046A1 (ja) * 2016-03-10 2019-01-10 パナソニックIpマネジメント株式会社 表示装置
KR102333101B1 (ko) * 2017-06-21 2021-12-01 삼성전자주식회사 관심 객체에 대한 외부 광원의 속성 정보를 제공하는 방법을 지원하는 전자 장치

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1071045A1 (en) * 1999-07-22 2001-01-24 Eastman Kodak Company Device and process for displaying an image on a screen according to a perspective that depends on the user's position
CN1397050A (zh) * 2000-09-27 2003-02-12 皇家菲利浦电子有限公司 提供要在屏幕上显示的图像的方法和装置
JP2007094680A (ja) * 2005-09-28 2007-04-12 Dainippon Printing Co Ltd 画像処理装置、画像処理方法等
EP1785941A1 (en) * 2005-11-15 2007-05-16 Sharp Kabushiki Kaisha Virtual view specification and synthesis in free viewpoint television
WO2008142698A2 (en) * 2007-05-24 2008-11-27 Wavebreak Technologies Ltd. Systems and methods for measuring an audience
CN101341760A (zh) * 2005-12-19 2009-01-07 皇家飞利浦电子股份有限公司 3d图像显示方法和装置

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6980697B1 (en) * 2001-02-01 2005-12-27 At&T Corp. Digitally-generated lighting for video conferencing applications
JP4350725B2 (ja) * 2005-08-05 2009-10-21 キヤノン株式会社 画像処理方法、画像処理装置、及び、画像処理方法をコンピュータに実行させるためのプログラム

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1071045A1 (en) * 1999-07-22 2001-01-24 Eastman Kodak Company Device and process for displaying an image on a screen according to a perspective that depends on the user's position
CN1397050A (zh) * 2000-09-27 2003-02-12 皇家菲利浦电子有限公司 提供要在屏幕上显示的图像的方法和装置
JP2007094680A (ja) * 2005-09-28 2007-04-12 Dainippon Printing Co Ltd 画像処理装置、画像処理方法等
EP1785941A1 (en) * 2005-11-15 2007-05-16 Sharp Kabushiki Kaisha Virtual view specification and synthesis in free viewpoint television
CN101341760A (zh) * 2005-12-19 2009-01-07 皇家飞利浦电子股份有限公司 3d图像显示方法和装置
WO2008142698A2 (en) * 2007-05-24 2008-11-27 Wavebreak Technologies Ltd. Systems and methods for measuring an audience

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104050799A (zh) * 2014-06-06 2014-09-17 北京智谷睿拓技术服务有限公司 反射控制方法及控制装置
WO2015184943A1 (en) * 2014-06-06 2015-12-10 Beijing Zhigu Rui Tuo Tech Co., Ltd Reflection interference control
CN104050799B (zh) * 2014-06-06 2017-03-08 北京智谷睿拓技术服务有限公司 反射控制方法及控制装置
US9892633B2 (en) 2014-06-06 2018-02-13 Beijing Zhigu Rui Tuo Tech Co., Ltd Reflection interference control
CN106664364A (zh) * 2014-09-26 2017-05-10 佳能株式会社 图像处理设备及其控制方法
US10475237B2 (en) 2014-09-26 2019-11-12 Canon Kabushiki Kaisha Image processing apparatus and control method thereof
CN106664364B (zh) * 2014-09-26 2020-05-05 佳能株式会社 图像处理设备及其控制方法和摄像设备

Also Published As

Publication number Publication date
US20110074782A1 (en) 2011-03-31
JP4831223B2 (ja) 2011-12-07
JP2011076167A (ja) 2011-04-14

Similar Documents

Publication Publication Date Title
CN102096916A (zh) 图像显示装置和方法
US10404969B2 (en) Method and apparatus for multiple technology depth map acquisition and fusion
US9123272B1 (en) Realistic image lighting and shading
US10762652B2 (en) Hybrid depth detection and movement detection
TWI489857B (zh) 產生穩健立體影像的技術
CN104520785B (zh) 基于检测到的输入来更改在显示区域的一部分中提供的内容的属性
US10565720B2 (en) External IR illuminator enabling improved head tracking and surface reconstruction for virtual reality
US20130135295A1 (en) Method and system for a augmented reality
US20160381348A1 (en) Image processing device and method
CN106163418B (zh) 检测装置和检测方法
US20100302355A1 (en) Stereoscopic image display apparatus and changeover method
US20080013049A1 (en) Three dimensional display system
US11533466B2 (en) Active stereo matching for depth applications
CN106415364A (zh) 立体渲染至眼睛位置
JP6162681B2 (ja) 光媒体を通じた3次元的な光検知
JP2008129950A (ja) レンダリングプログラム、レンダリング装置、及びレンダリング方法
US10728518B2 (en) Movement detection in low light environments
US9449427B1 (en) Intensity modeling for rendering realistic images
CN109214350A (zh) 一种光照参数的确定方法、装置、设备及存储介质
Nightingale et al. Can people detect errors in shadows and reflections?
US20160029938A1 (en) Diagnosis supporting device, diagnosis supporting method, and computer-readable recording medium
US20190281280A1 (en) Parallax Display using Head-Tracking and Light-Field Display
US20170270716A1 (en) 3d shape reconstruction using reflection onto electronic light diffusing layers
McManus et al. Enhancement of visual cues to self-motion during a visual/vestibular conflict
FR2971864A1 (fr) Equipement de realite virtuelle equipe d'un dispositif de contact et utilisation d'un tel dispositif dans un equipement de realite virtuelle

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C12 Rejection of a patent application after its publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20110615