CN102214303A - 信息处理设备、信息处理方法及程序 - Google Patents

信息处理设备、信息处理方法及程序 Download PDF

Info

Publication number
CN102214303A
CN102214303A CN2011100864857A CN201110086485A CN102214303A CN 102214303 A CN102214303 A CN 102214303A CN 2011100864857 A CN2011100864857 A CN 2011100864857A CN 201110086485 A CN201110086485 A CN 201110086485A CN 102214303 A CN102214303 A CN 102214303A
Authority
CN
China
Prior art keywords
scheme
colour
atmosphere
unit
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2011100864857A
Other languages
English (en)
Inventor
佐藤达人
笠原俊一
木村隆臣
后藤智彦
望月大介
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN102214303A publication Critical patent/CN102214303A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • G06T11/001Texturing; Colouring; Generation of texture or colour
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/583Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G06F16/5838Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using colour
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/583Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G06F16/5854Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using shape and object relationship
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/40Extraction of image or video features
    • G06V10/56Extraction of image or video features relating to colour

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Library & Information Science (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • User Interface Of Digital Computer (AREA)
  • Image Analysis (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

公开了一种信息处理设备、信息处理方法及程序。该信息处理设备包括存储单元,在存储单元中存储配色方案数据库,配色方案数据库记录关于颜色组合的配色方案信息与涉及由颜色组合提供的氛围的配色方案气氛之间的对应关系;以及信息处理设备包括配色方案气氛分析单元,其基于配色方案数据库分析输入配色方案信息,以确定对应于由输入配色方案信息表示的颜色组合的配色方案气氛。

Description

信息处理设备、信息处理方法及程序
技术领域
本发明涉及一种信息处理设备、信息处理方法及程序。
背景技术
通常,当根据图像分析某图像的颜色的氛围(气氛)时,从图像中所提取的代表颜色一般被用作用于气氛分析的特征量。例如,日本专利申请公开第2004-185647号公开了根据颜色的关注等级决定代表性的配色方案(color arrangement)以执行图像的气氛分析的技术。
发明内容
根据日本专利申请公开第2004-185647号中公开的技术,选择多个特定的代表颜色以根据这些代表颜色的组合来执行气氛分析。但是,根据日本专利申请公开第2004-185647号中公开的技术,存在的问题是,由于用于气氛分析的代表颜色的数量有限,难以适当地分析图像的颜色的氛围。
考虑到上述情况,所期望的是提供一种新颖的和改进的信息处理设备、信息处理方法及程序,并且其基于由颜色的组合所组成的配色方案信息能够更适当地分析配色方案信息的氛围。
根据本发明的实施例,提供了一种信息处理装置,包括:存储单元,在存储单元中存储配色方案数据库,配色方案数据库记录关于颜色组合的配色方案信息与涉及由颜色组合提供的氛围的配色方案气氛之间的对应关系;并且信息处理设备包括配色方案气氛分析单元,其基于配色方案数据库来分析输入配色方案信息,以确定对应于由输入配色方案信息表示的颜色组合的配色方案气氛。
配色方案气氛分析单元可计算指示输入配色方案信息与配色方案数据中所存储的配色方案信息之间的相似度的指数,以及与同输入配色方案信息最接近且存储在配色方案数据库中的配色方案信息相关联的配色方案气氛被设置为与由输入配色方案信息表示的颜色组合相对应的配色方案气氛。
信息处理设备还可包括直方图生成单元,其基于输入图像生成表示图像中所包括的颜色组合的直方图,以及配色方案气氛分析单元可将直方图生成单元生成的直方图用作输入配色方案信息。
信息处理设备可进一步包括注意值计算单元,其计算指示输入图像中所包括的颜色吸引使用者的注意的程度的注意值;以及减色处理单元,其将输入图像中包括的颜色的数量减少到预定的颜色数量,并且直方图生成单元通过将颜色的数量已被减色处理单元减少的输入图像与注意值计算单元计算出的注意值进行卷积而生成直方图。
预定内容和指示由内容提供给使用者的氛围的氛围信息可被关联,并被存储在存储单元中,以及信息处理设备可进一步包括:配色方案气氛选择单元,其基于指示配色方案气氛分析单元计算出的相似度的指数来选择对应于输入配色方案信息的一个或更多个配色方案气氛;以及内容选择单元,其基于配色方案气氛选择单元选择的一个或更多个配色方案气氛来选择存储单元中存储的内容。
在存储单元中存储气氛转换数据库,该气氛转换数据库记录指示由内容提供给使用者的氛围的氛围信息与配色方案气氛之间的对应关系;以及内容选择单元通过使用气氛转换数据库可选择内容。
根据本发明的另一实施例,提供了一种信息处理方法,包括以下步骤:基于配色方案数据库分析输入配色方案信息,其中,该配色方案数据库记录关于颜色组合的配色方案信息与涉及由颜色组合提供的氛围的配色方案气氛之间的对应关系;以及确定对应于由输入配色方案信息表示的颜色组合的配色方案气氛。
根据本发明的另一实施例,提供了一种程序,该程序使计算机实现配色方案气氛分析功能,该配色方案气氛分析功能基于配色方案数据库分析输入配色方案信息,其中,配色方案数据库记录关于颜色组合的配色方案信息与涉及由颜色组合提供的氛围的配色方案气氛之间的对应关系,以确定对应于由输入配色方案信息表示的颜色组合的配色方案气氛。
根据以上所描述的本发明的实施例,基于由颜色的组合所组成的配色方案信息能够更适当地分析配色方案信息的氛围。
图1是示出根据本发明的第一实施例的信息处理设备的配置的方框图;
图2是示出根据本实施例的配色方案气氛特征量提取单元的配置的方框图;
图3是例示配色方案气氛特征量的提取方法的说明图;
图4是示出根据本实施例的配色方案气氛分析单元的配置的方框图;
图5是例示配色方案气氛数据库的说明图;
图6是例示计算出的代表相似性距离的说明图;
图7是示出根据本实施例的信息处理方法的流程的流程图;
图8是示出根据本实施例的特征量提取方法的流程的流程图;
图9是示出根据本实施例的配色方案气氛的分析方法的流程的流程图;
图10是示出根据本发明的第二实施例的信息处理设备的配置的方框图;
图11是例示根据本实施例的存储单元的配置的说明图;
图12是例示根据本实施例的内容数据库的说明图;
图13是例示根据本实施例的气氛转换数据库的的说明图;
图14是例示根据本实施例的信息处理设备的显示屏的说明图;
图15是例示根据本实施例的信息处理设备的显示屏的说明图;
图16是例示根据本实施例的信息处理设备的显示屏的说明图;
图17是例示根据本实施例的信息处理设备的显示屏的说明图;
图18是例示根据本实施例的信息处理设备的显示屏的说明图;
图19是例示根据本实施例的信息处理设备的显示屏的说明图;
图20是示出将配色方案气氛与本实施例中的内容相关联的流程的流程图;
图21是示出根据本实施例的信息处理方法的流程的流程图;
图22是示出根据本发明的第三实施例的信息处理设备的配置的方框图;
图23是例示根据本实施例的存储单元的配置的说明图;
图24是例示根据本实施例的模板数据库的说明图;
图25是例示根据本实施例的内容数据库的说明图;
图26是例示根据本实施例的信息处理设备的显示屏的说明图;
图27是示出根据本实施例的信息处理方法的流程的流程图;
图28是例示根据本发明的第四实施例的信息处理设备的说明图;
图29是示出根据本实施例的信息处理设备的配置的方框图;
图30A是示出根据本实施例的信息处理设备的说明图;
图30B是示出根据本实施例的信息处理设备的说明图;
图31是例示根据本实施例的信息处理设备的显示屏的说明图;
图32是示出根据本实施例的信息处理设备的说明图;
图33是示出根据本实施例的信息处理设备的说明图;
图34是示出根据本实施例的信息处理设备的说明图;
图35是示出根据本实施例的信息处理设备的硬件配置的方框图。
具体实施方式
在下文中,将参考附图详细描述本发明的优选实施例。应当指出,在本说明书和附图中,用相同的附图标记表示具有实质上相同功能和结构的结构元件,并且省略这些结构元件的重复说明。
应当指出,将以下面的顺序进行说明:
(1)第一实施例
(1-1)信息处理设备的配置
(1-2)信息处理方法
(2)第二实施例
(2-1)信息处理设备的配置
(2-2)显示屏示例
(2-3)信息处理方法
(3)第三实施例
(3-1)信息处理设备的配置
(3-2)显示屏示例
(3-3)信息处理方法
(4)第四实施例
(4-1)信息处理设备的配置
(5)根据本发明的实施例的信息处理设备的硬件配置
(6)总结
(第一实施例)
首先,将参考图1至图9来描述根据本发明的第一实施例的信息处理设备和信息处理方法。
<信息处理设备的配置>
首先,将参考图1至图6来描述根据本实施例的信息处理设备的配置。
图1是示出根据本实施例的信息处理设备的配置的方框图。如图1所示,根据本实施例的信息处理设备10主要包括图像数据获得单元101、配色方案气氛特征量提取单元103、配色方案气氛分析单元105、显示控制单元107、显示单元109和存储单元111。
例如通过CPU(中央处理单元)、ROM(只读存储器)、RAM(随机访问存储器)、输入设备、通信设备等来实现图像数据获得单元101。图像数据获得单元101获得对应于信息处理设备10的使用者指定的图像4的图像数据。
图像数据获得单元101可从稍后描述的存储单元111中,或从插入到或连接到包括在信息处理设备中的各种驱动器上的可移除记录介质中获得使用者指定的图像数据。图像数据获得单元101还可从连接到包括在信息处理设备10中的连接端口上的外部连接设备中获得使用者指定的图像数据。图像数据获得单元101还能够经由诸如扫描仪的输入设备或经由诸如家庭网络和因特网的各种网络来获得图像数据。
图像数据获得单元101将获得的图像数据(在下文中,也被称为输入图像)输出给稍后描述的配色方案气氛特征量提取单元103。图像数据获得单元101也可将所获得的图像数据与指示图像数据的获得日期/时间的信息相关联,然后将图像数据存储在稍后描述的存储单元111中。
例如通过CPU、ROM、RAM等来实现配色方案气氛特征量提取单元103。配色方案气氛特征量提取单元103从输入图像中提取配色方案气氛特征量,该配色方案气氛特征量用于稍后描述的配色方案气氛分析单元105的配色方案气氛分析处理。
如图2所示,配色方案气氛特征量提取单元103还包括例如注意值计算单元121、减色处理单元123和直方图生成单元125。
例如,通过CPU、ROM、RAM等来实现注意值计算单元121。注意值计算单元121计算注意值,该注意值指示使用从图像数据获得单元101输出的输入图像、通过输入图像中所包含的颜色吸引人们的注意的程度。
注意值计算单元121通过使用下面示出的方法能够计算输入图像的注意值:
(a)将输入图像的每个像素的亮度(或饱和度或色调)除以整个输入图像的亮度(或饱和度或色调)的平均值的方法
(b)提取在多个时间连续帧的帧之间移动的对象的区域并通过使移动对象的提取区域和其它区域二值化来使用这些区域的方法
(c)将每个像素的像素值除以整个图像的距离值的均值的方法,其中,在整个图像中,到立体视觉(多视点)获取的对象的距离值被设置为像素
(d)使用注意区域的方法,其中,通过使用例如如日本专利申请公开第2008-53775号所公开的、基于人类识别的机理从图像中选择更有可能视觉地吸引注意的区域的技术来获取该注意区域
(e)根据通过使用诸如人脸识别技术和个人识别技术的对象识别技术获取的特定对象区域使像素值二值化并使用像素值的方法
(f)基于仅提取景深匹配部分的区域使像素值二值化并使用像素值的方法。
注意值计算单元121能够将除上述方法以外的任何其它方法用作计算注意值的方法。
通过经由使用上述方法来计算注意值,注意值计算单元121能够生成示出输入图像的注意值的分布程度的图像(在下文中,也被称为注意值图)。注意值图是通过将被计算为像素值的注意值指定给输入图像的每个像素而获取的图。
注意值计算单元121将关于注意值的注意值信息输出给直方图生成单元125,其中,该注意值包括以上注意值图。注意值计算单元121也可将包括计算出的注意值图的注意值信息存储在稍后描述的存储单元111中。当计算输入图像的注意值时,注意值计算单元121能够使用存储单元111等中存储的各种程序或数据库。
例如,通过CPU、ROM、RAM等来实现减色处理单元123。减色处理单元123执行处理(减色处理)以减少从图像获得单元101输出的输入图像上的颜色的数量。通过减色处理单元123执行的减色处理将输入图像转换成由预定数量的颜色组成的图像。
可以将任何能够计算图像中的颜色占用的区域的比率的方法用作减色处理单元123执行的减色处理方法。减色处理单元123执行的减色处理方法的示例是使用八叉树的颜色量化方法。
在对输入图像执行减色处理之后,减色处理单元123将颜色数量已减少的获取图像输出给稍后描述的直方图生成单元125。减色处理单元123也可将颜色数量已减少的图像存储在稍后描述的存储单元111中。当对输入图像执行减色处理时,减色处理单元123能够使用存储单元111等中所存储的各种程序或数据库。
例如,通过CPU、ROM、RAM等来实现直方图生成单元125。直方图生成单元125生成直方图(颜色直方图),该直方图通过使用注意值信息和输入图像来示出以什么比率包含何种颜色,其中,该注意值信息包括注意值计算单元121计算出的注意值图,而该输入图像由减色处理单元123生成且其颜色数量已减少。即,由直方图生成单元125生成的颜色直方图是示出输入图像中所包含的颜色的组合的信息,并且也是表征由输入图像中包含的颜色提供给人的氛围(配色方案气氛)的特征量(配色方案气氛特征量)。
不具体限制直方图生成单元125使用的生成颜色直方图的方法,并且例如,能使用以下所示方法之一:
(a)将注意值图与颜色数量已减少的输入图像的每个像素进行卷积。
(b)通过对注意值图执行阈处理来使注意值图二值化,并且将二值化的注意值图与颜色数量已减少的输入图像的每个像素进行卷积。
(c)通过对注意值图执行阈处理来使注意值图二值化以生成二值图像。而且,生成这样的新图像:在该新图像中,将二值图像中像素值为1的像素围住的最小矩形区域取1,而其它区域取0。将新生成的图像与颜色数量已减少的输入图像的每个像素进行卷积。
直方图生成单元125将关于生成的颜色直方图的信息输出给配色方案气氛分析单元105。直方图生成单元125也可将关于生成的颜色直方图的信息存储在稍后描述的存储单元111中。当生成颜色直方图时,直方图生成单元125能够使用存储单元111等中所存储的各种程序或数据库。
图3是示意地示出根据本实施例的配色方案气氛特征量提取单元103执行的处理的说明图。如图3所示,当将输入图像传输给配色方案气氛特征量提取单元103时,注意值计算单元121生成包括输入图像的注意值图的注意值信息,并且减少处理单元123对输入图像执行减色处理。然后,直方图生成单元125通过执行颜色数量已减少的输入图像与注意值图的卷积来生成颜色直方图。因为在颜色直方图的生成过程中使用了注意值图,以这种方式生成的颜色直方图考虑了人对图像中的颜色的注意程度。
图2示出了根据本实施例的配色方案气氛特征量提取单元103包括减色处理单元123的情况。但是,如果不需要担心处理时间或操作成本,或者如果应该生成更正确的颜色直方图,配色方案气氛特征量提取单元103不必执行减色处理单元123的减色处理,并且可不包括减色处理单元123。
在上文中,参考图2和图3详细描述了根据本实施例的配色方案气氛特征量提取单元103。再次返回到图1,下面将描述根据本实施例的信息处理设备10的配置。
例如,通过CPU、ROM、RAM等来实现配色方案气氛分析单元105。配色方案气氛分析单元105分析关于从配色方案气氛特征量提取单元103输出的颜色直方图的信息,以确定对应于颜色的组合的配色方案气氛,其中,上述颜色由输入颜色直方图表示。
下面将参考图4详细描述配色方案气氛分析单元105。图4是示出根据本实施例的配色方案气氛分析单元105的配置的方框图。
如图4所示,根据本实施例的配色方案气氛分析单元105还包括相似距离计算单元131和配色方案气氛决定单元133。
例如,通过CPU、ROM、RAM等来实现相似距离计算单元131。相似距离计算单元131通过使用存储单元111中存储的配色方案气氛数据库,来计算从配色方案气氛特征量提取单元103输出的颜色直方图(配色方案信息)与配色方案气氛数据库中(在下文中,被简写为配色方案气氛DB)注册的配色方案信息之间的相似距离。在下面的描述中,为了方便起见,从配色方案气氛特征量提取单元103输出的配色方案信息被称作输入配色方案信息,而配色方案气氛DB中注册的配色方案信息被称作注册配色方案信息。
在描述由相似距离计算单元131执行的相似距离的计算处理之前,将参考图5描述存储单元111中存储的配色方案气氛DB。图5是例示配色方案气氛DB的说明图。
配色方案气氛DB是记录关于颜色组合的配色方案信息与涉及氛围的配色方案气氛之间的对应关系的数据库,其中,该氛围是由颜色组合提供给人的。在图5中,例如,“放松(RELAX)”和“高兴(HAPPY)”被示为配色方案气氛(即,由某颜色组合提供给人的氛围)。配色方案气氛“放松(RELAX)”意味着将放松的氛围提供给人的颜色组合,其中,人观看属于这种配色方案气氛的颜色组合。相似地,配色方案气氛“高兴(HAPPY)”意味着将高兴的氛围提供给人的颜色组合,其中,人观看属于这种配色方案气氛的颜色组合。
在图5示出的示例中,两种配色方案模式(即,颜色组合)与配色方案气氛“放松(RELAX)”相关联。附有配色方案模式ID“COL_RELAX_01”的颜色组合(即,配色方案信息)意味着由RGB值(240,250,215)表示的颜色(附加有颜色指数=1的颜色)和由RGB值(215,240,107)表示的颜色(附加有颜色指数=2的颜色)以50∶50的面积比率的组合。相似地,附有配色方案模式ID“COL_RELAX_02”的颜色组合(即,配色方案信息)意味着附有颜色指数=1至4的四种颜色以20∶20∶40∶20的面积比率的组合。因此,在配色方案气氛DB中,一种配色方案气氛与属于该配色方案气氛的一种或多种颜色组合(配色方案信息)相关联。
每条配色方案信息由图5示出的示例中的多个颜色组成,但是配色方案信息可由一种颜色组成。
配色方案气氛DB中注册的配色方案气氛不限于图5中示出的示例,而且还可注册由颜色组合提供给人的有关任何抽象概念的氛围,例如人类情感(human emotion)、舒适/不舒适(comfort/uncomfort)、寒冷/温暖(cold/warmth)的感觉、以及沉重/轻(heaviness/lightness)的感觉。除图5示出的示例外,配色方案气氛的示例还包括例如寒冷(COLD)、温暖(WARM)、沉重(HEAVY)、轻(LIGHT)、运动的(SPORTY)、可爱(CUTE)、成熟(ADULT)、幼稚(CHILDISH)、城市的(URBAN)和执行的(EXECUTIVE)。
相似距离计算单元131使用这样的配色方案气氛DB来计算相似距离,该相似距离是指示输入配色方案信息与注册配色方案信息之间的相似程度的指数的示例,并且计算出的相似距离随着输入配色方案信息与注册配色方案信息之间的相似的增大而减小。
不具体限制相似距离计算单元131使用的计算相似距离的方法,即使颜色或由颜色占用的区域的数量不同,只要方法能计算配色方案信息之间的相似即可。与这种相似距离一样,例如,相似距离计算单元11能使用例如WO2007/114939中所公开的“挖土机距离”(EMD)。而且WO2007/114939中公开了EMD的细节,EMD是通过关注(focus on)某图像中包含的颜色在预定空间(例如,Lab空间或RGB空间)占用的区域的大小而计算的相似距离,并且EMD是通过使用某颜色p与某颜色q之间的距离dpq和指示能够将颜色p占用的区域向颜色q占用的区域移动多远的数量epq而计算的相似距离。
在获得输入配色方案信息之后,相似距离计算单元131关注配色方案气氛DB中注册的一种配色方案气氛(例如,图5中示出的“放松(RELAX)”),以计算输入配色方案信息与属于所关注的配色方案气氛的所有注册配色方案信息之间的相似距离。即,如果关注图5中示出的“放松(RELAX)”,相似距离计算单元131计算输入配色方案信息与由“COL_RELAX_01”表示的注册配色方案信息之间的相似距离以及输入配色方案信息与“COL_RELAX_02”表示的注册配色方案信息之间的相似距离。在计算了属于所关注的配色方案气氛的所有注册配色方案信息与输入配色方案信息之间的相似距离之后,相似距离计算单元131识别计算出的相似距离中最短的相似距离。相似距离计算单元131将识别的最短相似距离确定为输入配色方案信息与所关注的配色方案气氛之间的代表相似距离。
相似距离计算单元131针对配色方案气氛DB中注册的所有配色方案气氛计算以上代表相似距离。通过执行这样的处理,例如,如图6所示,相似距离计算单元131能够针对所有的配色方案气氛计算代表相似距离。这些代表相似距离是输入配色方案信息(推而广之,输入图像)中所包含的各种氛围(配色方案气氛)的量化(数字化)。
当完成所有配色方案气氛的代表相似距离的计算时,相似距离计算单元131将计算出的代表相似距离输出到稍后描述的配色方案气氛决定单元133。这时,相似距离计算单元131可将全部计算出的代表相似距离单独输出到配色方案气氛决定单元133,或者以如图6中所示的查找表的格式将计算出的代表相似距离输出到配色方案气氛决定单元133。相似距离计算单元131可将计算出的到属于每个配色方案气氛的注册配色方案信息的代表相似距离和相似距离,通过与输入配色方案信息相关联而存储在存储单元111中。通过将输入配色方案信息与计算出的相似距离/代表相似距离之间的对应关系存储在存储单元111等中,当下次针对相同的输入配色方案信息计算代表相似距离时,能够节省时间和精力。当计算输入配色方案信息与注册配色方案信息之间的相似距离时,相似距离计算单元131能够使用存储单元111等中所存储的各种程序和其它数据库。
例如,通过CPU、ROM、RAM等来实现配色方案气氛决定单元133。配色方案气氛决定单元133基于从相似距离计算单元131输出的代表相似距离,来决定由输入配色方案信息表示的颜色组合提供给人的氛围(配色方案气氛)。
如上所述,随着输入配色方案信息与注册配色方案信息之间的相似的增大,相似距离计算单元131计算出的并且包括代表相似距离的相似距离的值减小。因此,随着与每个配色方案气氛相关联的代表相似距离的值的减小,输入配色方案信息的配色方案气氛的可能性增大。
因此,配色方案气氛决定单元133通过参考从相似距离计算单元131输出的代表相似距离,将具有最小代表相似距离的配色方案气氛决定为对应于输入配色方案信息的配色方案气氛。
在图6所示的代表相似距离的情况下,配色方案气氛“成熟(ADULT)”的代表相似距离是最小距离86600,因此,配色方案气氛决定单元133决定,用于计算图6中所示的代表相似距离的输入配色方案信息的配色方案气氛是“成熟”。
排除将一种配色方案气氛决定为对应于输入配色方案信息的配色方案气氛,配色方案气氛决定单元133可将多个配色方案气氛决定为对应于输入配色方案信息的配色方案气氛。例如,配色方案气氛决定单元133可按照代表相似距离值的升序来排列配色方案气氛,以将预定数量的最小配色方案气氛(例如,按照值的升序的3个配色方案气氛)决定为对应于输入配色方案信息的配色方案气氛。
配色方案气氛决定单元133将以这种方式决定的、并且对应于输入配色方案信息(推而广之,输入图像)的配色方案气氛输出到显示控制单元107。配色方案气氛决定单元133也可将关于决定的配色方案气氛的信息,通过与时间信息等相关联而存储在存储单元111等中。
在前述中,参考图4至图6详细描述了根据本实施例的配色方案气氛分析单元105。再次返回到图1,下面将描述根据本实施例的信息处理设备的配置。
例如,通过CPU、ROM、RAM等来实现显示控制单元107。显示控制单元107是处理单元,该处理单元执行(exercise)信息处理设备10中所包括的显示单元109上显示的显示屏内容的显示控制。更具体地,显示控制单元107执行显示控制以在显示单元109上显示关于从配色方案气氛分析单元105输出的配色方案气氛的分析结果。这时,显示控制单元107通过使用各种图形用户界面(GUI)在显示单元109上显示关于从配色方案气氛分析单元105输出的配色方案气氛的分析结果。因此,显示控制单元107还执行显示单元109的显示屏上显示的各种GUI的显示控制。可将这样的GUI存储在例如存储单元111中,或者由信息处理设备10经由诸如因特网的各种网络可获得这样的GUI。
当显示有关从配色方案气氛分析单元105输出的配色方案气氛的分析结果时,显示控制单元107能够使用存储单元111等中所存储的各种程序和其它数据库。
显示单元109是根据本实施例的信息处理设备10中所包括的输出设备的示例,并且可以是例如信息处理设备10中所包括的各种显示器。由显示控制单元107控制显示单元109,并且显示单元109在其显示屏上显示各种信息,例如对应于输入图像的配色方案气氛。信息处理设备10的使用者通过参考显示单元109的显示屏上显示的内容能够了解对应于输入到信息处理设备10的图像(输入图像)的配色方案气氛。
存储单元111是根据本实施例的信息处理设备10中所包括的存储设备的示例。在存储单元111中存储配色方案气氛分析单元105分析输入配色方案信息时所使用的配色方案气氛DB。存储单元111中还可存储用于配色方案气氛分析的各种图像数据。
在存储单元111中可记录各种历史信息,例如关于配色方案气氛特征量的提取的历史信息和关于配色方案气氛的分析结果的历史信息。另外,在适当的时候,在存储单元111中记录当根据本实施例的信息处理设备10执行某种处理时需要存储的各种参数、处理的进度、以及各种数据库。
信息处理设备10中包括的每个处理单元,例如图像数据获得单元101、配色方案气氛特征量提取单元103、配色方案气氛分析单元105、以及显示控制单元107,能够随意地从/向存储单元111读/写信息。
如上所述,根据本实施例的信息处理设备10使用输入图像中所包含的颜色以及图像中这些颜色的比率,来生成用于执行图像的配色方案气氛分析的颜色直方图。因此,根据本实施例的信息处理设备10能比过去更准确地评估整个图像中的颜色的特征。而且在本实施例中,当生成颜色直方图时,使用包括注意值地图的注意值信息,因此生成更接近于人眼印象的气氛分析的特征量。因此,能够生成这样的颜色直方图:在该颜色直方图中,具有增大的注意等级的颜色具有增大的面积,使得能够更准确地分析输入图像。
根据本实施例的信息处理设备10可被实现为诸如个人计算机或各种服务器的计算机,或者可被实现为移动电子设备,例如移动音乐播放器、移动游戏机、移动电话、智能电话和PDA。或者,根据本实施例的信息处理设备10可被实现为数码摄像机、数码静物照相机、或汽车导航系统。
在前述中,示出了根据本实施例的信息处理设备10的功能的示例。可使用公共构件或专用于每个结构元件功能的电路或硬件来配置以上结构元件中的每个。或者,每个结构元件的功能都可由CPU等来执行。因此,在适当的时候,根据实现本发明时的技术水平可改变要使用的元件。
可在个人计算机等上创建或实现用于实现根据本实施例的信息处理设备的每个功能的计算机程序。或者,可提供其中存储有这样的计算机程序的计算机可读记录介质。记录介质例如是磁盘、磁光盘、或闪速存储器。不使用任何记录介质而经由例如网络可递送以上的计算机程序。
<信息处理方法>
接下来,将参考图7至图9来描述根据本实施例的由信息处理设备10执行的信息处理方法的流程。
[整体流程]
首先,将参考图7描述根据本实施例的信息处理方法的整体流程。图7是示出根据本实施例的信息处理方法的流程的流程图。
首先,信息处理设备10的图像数据获得单元101获得对应于其配色方案气氛应该被分析的图像的图像数据(步骤S101)。图像数据获得单元101将获得的图像数据输出到配色方案气氛特征量提取单元103。
配色方案气氛特征量提取单元103通过使用从图像数据获得单元101输出的图像数据来提取配色方案气氛特征量,该配色方案气氛特征量是当执行配色方案气氛分析时所使用的特征量(步骤S103)。作为这里提取的颜色搭配情绪特征量,能够引用(cite)关于图像中所包含的颜色的直方图,其中,该图像对应于图像数据获得单元101获得的图像数据。配色方案气氛特征量提取单元103将所提取的配色方案气氛特征量输出到配色方案气氛分析单元105。
配色方案气氛分析单元105通过使用从配色方案气氛特征量提取单元103输出的配色方案气氛特征量和存储单元111中所存储的配色方案气氛DB,来执行对应于图像的配色方案气氛的分析(步骤S105)。当完成关于对应于图像的配色方案气氛的分析时,配色方案气氛分析单元105将获得的分析结果输出到显示控制单元107(步骤S107)。
在使用各种GUI的同时,显示控制单元107在显示单元109的显示屏上显示从配色方案气氛分析单元105输出的分析结果。因此,使用者能够知道对应于某图像的配色方案气氛的分析结果。
[特征量的提取处理]
接着,将参考图8描述由配色方案气氛特征量提取单元103执行的配色方案气氛特征量的提取处理的流程。图8是示出根据本实施例的特征量提取方法的流程的流程图。
当从图像数据获得单元101输出图像数据时,配色方案气氛特征量提取单元103将获得的图像数据传输到注意值计算单元121和减色处理单元123。
减色处理单元123对传输的图像数据执行减色处理(步骤S111)以减少传输的图像数据中所包含的颜色的数量。然后,减色处理单元123将颜色数量已减少的获得的图像数据输出到直方图生成单元125。
另一方面,注意值计算单元121通过使用上述方法生成传输的图像数据的注意值图(步骤S113),并且将包括获得的注意值图的注意值信息输出到直方图生成单元125。
直方图生成单元125执行将从注意值计算单元121输出的注意值图与从减色处理单元123输出的颜色数量已减少的图像进行卷积的处理(步骤S115)。然后,直方图生成单元125通过使用由卷积处理获得的图像数据,来生成用于示出图像中以什么比率包括何种颜色的颜色直方图(步骤S117)。然后,直方图生成单元125将所生成的颜色直方图输出到配色方案气氛分析单元105
[配色方案气氛的分析处理]
接着,将参考图9描述由配色方案气氛分析单元105执行的配色方案气氛的分析处理的流程。图9是示出根据本实施例的配色方案气氛的分析方法的流程的流程图。
首先,配色方案气氛分析单元105的相似距离计算单元131获得从直方图生成单元125输出的颜色直方图(即,输入配色方案信息)(步骤S121)。然后,相似距离计算单元131参考存储单元111中存储的配色方案气氛DB,以选择数据库中注册的一种配色方案气氛(步骤S123)。
接下来,相似距离计算单元131选择属于步骤S123中选择的配色方案气氛的一种配色方案模式(即,注册配色方案信息)(步骤S125)。然后,相似距离计算单元131计算颜色直方图与所选择的配色方案模式之间的相似距离(输入配色方案信息与注册配色方案信息之间的相似距离)。
接着,相似距离计算单元131确定是否计算了从输入配色方案信息到属于所选择的配色方案气氛的所有配色方案模式的相似距离(步骤S129)。如果还未计算到所有配色方案气氛的相似距离,相似距离计算单元131返回到步骤S125,以计算还未被计算的到配色方案模式的相似距离。如果计算了到所有配色方案模式的相似距离,相似距离计算单元131将计算出的相似距离的最小值设置为所选择的配色方案气氛的代表相似距离(步骤S131)。
然后,相似距离计算单元131确定是否针对配色方案模式DB中注册的所有配色方案气氛计算了代表相似距离(步骤S133)。如果还未针对所有配色方案气氛计算代表相似距离,相似距离计算单元131返回到步骤S123,以针对代表相似距离还未被计算的配色方案气氛来重复处理。如果针对所有配色方案气氛计算了代表相似距离,相似距离计算单元131创建如图6所示的代表相似距离的列表,并且将所生成的列表输出到配色方案气氛决定单元133。
配色方案气氛决定单元133使用从相似距离计算单元131输出的代表相似距离的列表,来决定对应于输入配色方案信息(推而广之,输入图像)的配色方案气氛(步骤S137)。在决定对应于输入配色方案信息的配色方案气氛之后,配色方案气氛决定单元133将获得的结果输出到显示控制单元107。
在前述中,参考图7到图9描述了根据本实施例的信息处理设备10中所执行的信息处理方法的流程的示例。
(第二实施例)
根据以上描述的第一实施例的信息处理设备10是具有这样的功能的设备:分析输入图像,并决定由输入图像中所包含的颜色组合提供给人的氛围(配色方案气氛)。根据以下描述的第二实施例的信息处理设备10是这样的设备:该设备使用第一实施例中描述的确定配色方案气氛的功能,并且该设备还实现了通过使用配色方案气氛的抽象形式(abstract matter)搜索内容的功能。
当搜索各种类型的内容时,一般通过使用标准化的标签(例如,音乐文件的艺术家名称或专辑名称)执行搜索。但是,如果使用者在搜索过程中进行了含糊的请求,例如对符合氛围的内容的搜索,这种基于标签的搜索方法是不合适的。但是,根据如下描述的信息处理设备,能够实现通过使用配色方案气氛的抽象形式来搜索内容的功能。
<信息处理设备的配置>
首先,将参考图10和图11来详细描述根据本实施例的信息处理设备10的配置。图10是示出根据本发明的本实施例的信息处理设备10的配置的方框图,并且图11是示出根据本实施例的存储单元111的配置的说明图。
如图10所示,信息处理设备10主要包括配色方案气氛分析单元105、显示控制单元107、显示单元109、存储单元111、内容气氛分析单元141、配色方案信息获得单元143、直方图生成单元145和内容搜索单元147。
配色方案气氛分析单元105、显示控制单元107和显示单元109具有与第一实施例中相应单元的配置相同的配置,并且实现类似的操作,因此以下将省略其详细描述。
存储单元111是根据本实施例的信息处理设备10中所包括的存储设备的示例。例如,如图11所示,存储单元111具有作为数据库存储于其中的以下DB:第一实施例中所描述的配色方案气氛DB 151、关于存储单元111中所存储的内容的内容DB 153、以及稍后描述的气氛转换DB 155。
在存储单元111中,可记录各种类型的历史信息。另外,在适当的时候,在存储单元111中记录当根据本实施例的信息处理设备10执行某种处理时需要存储的各种参数、处理的进度、以及各种数据库。信息处理设备10中包括的每个处理单元,例如配色方案气氛分析单元105、显示控制单元107、内容气氛分析单元141、配色方案信息获得单元143、直方图生成单元145以及内容搜索单元147,能够随意地从/向存储单元111读/写信息。
例如,通过CPU、ROM、RAM等来实现内容气氛分析单元141。内容气氛分析单元141分析存储单元111中存储的内容向观看了内容的人提供的氛围。
由内容提供的氛围包括,例如,诸如“高兴(happy)”、“愉快(cheerful)”、“悲伤(sad)”、“轻松(1ight)”和“沉重(heavy)”的表示人类情感的这些情感,重/轻的感觉以及舒适/不舒适。要被内容气氛分析单元141分析的内容包括,例如,诸如静态图像和动态图像的图像内容,诸如音乐数据的音乐内容,以及网页。
内容气氛分析单元141不仅能分析内容的实际数据,而且能分析与内容相关联的各种元数据(例如,内容的缩略图,封面(jacket)照片,内容的流派(genre))。
在下面的描述中将音乐内容作为内容的示例。
内容气氛分析单元141获取存储单元111中存储的音乐内容(包括元数据),并且使用日本专利申请公开第2007-121457所公开的方法等提取音乐内容的特征量。然后,内容气氛分析单元141基于所提取的特征量分析由内容提供给人的对内容特定的氛围(在下文中,也被称为内容气氛)。
基于内容气氛分析单元141执行的内容气氛的分析处理,关于内容气氛的元数据(在下文中,也被称为气氛标签)被附加到每条内容。内容气氛分析单元141将作为分析结果而获取的气氛标签作为元数据添加到存储单元111中存储的内容DB 153中。因此,如图12所示,更新内容DB153。尽管图12中示出的内容DB 153中未记录与内容相关联的元数据,但是诸如实际数据的存储位置、缩略图和封面图片实际数据的存储位置、以及内容流派的各种元数据与每条数据相关联。
接着,内容气氛分析单元141通过参考存储单元111中存储的气氛转换DB 155,使内容气氛与配色方案气氛相关联。图13示出了气氛转换DB 155的示例。如从图13中能够看出的,气氛转换DB 155是记录内容气氛与配色方案气氛之间的对应关系的DB。通过参考气氛标签以及通过使用气氛标签和气氛转换DB 155,内容气氛分析单元141能够决定对应于内容的配色方案气氛,其中,该气氛标签是与每条内容相关联的元数据。在决定对应于每条内容的配色方案气氛之后,内容气氛分析单元141将结果反映在内容DB 153中。
以任何时序执行以上描述的内容气氛分析单元141的内容分析处理。
通过例如CPU、ROM、RAM、输入设备等来实现配色方案信息获得单元143。当稍后描述的内容搜索单元147搜索内容时,配色方案信息获得单元143获得有关要成为搜索条件(搜索查询)的颜色组合的信息(配色方案信息)。配色方案信息获得单元143经由显示控制单元107使显示屏显示能被使用者选择的颜色。不具体限制用于显示能被使用者选择的颜色的方法,并且可使显示屏显示作为调色板的可选择颜色的列表,或者可使显示屏显示滚动条,其中,在滚动条上通过滚动处理,可选择的颜色连续改变。在这种情况下,使用者通过在观看显示屏的同时操作鼠标指针或光标键来选择任何颜色的组合。配色方案信息获得单元143还可允许使用者直接输入要被使用者选择的颜色的RGB值等。
配色方案信息获得单元143还可允许使用者指定组合颜色的比率。因此,如第一实施例中所描述的,能确定每个颜色占用的面积比率。或者,配色方案信息获得单元143可针对所选择的颜色组合相等地设置面积比率,而不允许使用者指定组合颜色的比率。
在确定使用者选择的颜色组合之后,配色方案信息获得单元143将获取的颜色组合作为配色方案信息输出到直方图生成单元145。
不具体限制能被使用者选择的颜色的数量,但是优选的是,从颜色空间中选择尽可能多的颜色以增加使用者的选择。此外,考虑到显示屏的外观,优选的是,通过按照色调从通常使用的色轮中选择明亮颜色组合的色调并且通过将灰度级颜色添加到所选择的色调,来构成颜色模式。色调是将亮度和饱和度组合的概念,并且通过使用相同色调或相似色调的颜色能够将统一的感觉提供给显示屏。
通过例如CPU、ROM、RAM等来实现直方图生成单元145。除了直方图生成单元145基于从配色方案信息获得单元143输出的配色方案信息来生成颜色直方图以外,直方图生成单元145具有与根据第一实施例的直方图生成单元125的配置相同的配置,并且实现与根据第一实施例的直方图生成单元125的操作相同的操作。在基于从配色方案信息获得单元143输出的配色方案信息来生成颜色直方图之后,直方图生成单元145将所生成的颜色直方图输出到配色方案气氛分析单元105。因此,配色方案气氛分析单元105能够分析对应于颜色直方图的配色方案气氛。
本实施例描述了由使用者指定用作搜索查询的颜色组合的情况,因此,在配色方案信息获得单元143与直方图生成单元145之间未提供第一实施例中所描述的注意值计算单元和减色处理单元。但是,例如,如果应当实现在使用者输入用于搜索查询的图像并且分析所输入的图像的氛围之后搜索内容的功能,可提供第一实施例中所描述的注意值计算单元和减色处理单元。
通过例如CPU、ROM、RAM等来实现内容搜索单元147。内容搜索单元147基于有关从配色方案气氛分析单元105输出的配色方案气氛的分析结果来搜索存储单元111等中存储的内容。如图10中所示,内容搜索单元147还包括配色方案气氛选择单元148和内容选择单元149。
通过例如CPU、ROM、RAM等来实现配色方案气氛选择单元148。配色方案气氛选择单元148通过参考从配色方案气氛分析单元105输出的分析结果(例如,图6中示出的代表相似距离的列表)按照值的升序选择一个或多个配色方案气氛。不具体限制由配色方案气氛选择单元148选择的配色方案气氛的数量,但是优选的是,基于显示屏的大小等来设置配色方案气氛的数量。通过选择多个配色方案气氛,能够选择对应于配色方案气氛的多种内容,因此能增加使用者的选择,其中,该配色方案气氛能够对应于使用者指定的配色方案信息。
在决定要被选择的配色方案气氛之后,配色方案气氛选择单元148将关于所选择的配色方案气氛的信息输出到内容选择单元149。
通过例如CPU、ROM、RAM等来实现内容选择单元149。内容选择单元149基于由配色方案气氛选择单元148选择的配色方案气氛来选择存储单元111中存储的内容。更具体地,内容选择单元149参考存储单元111中存储的内容DB 153来选择与配色方案气氛相关联的内容,其中该配色方案气氛匹配从配色方案气氛选择单元148通知的配色方案气氛。因此,根据本实施例的信息处理设备10通过将颜色组合的抽象形式用作搜索查询能够搜索具体(concrete)内容。
内容选择单元149将关于所选择的内容的信息输出到显示控制单元107。显示控制单元107通过使显示单元109的显示屏显示关于所选择的内容的信息,能够呈现关于由使用者选择的内容的信息。
根据本实施例的信息处理设备10可被实现为诸如个人计算机和各种服务器的计算机、或者诸如移动音乐播放器、移动游戏机、移动电话、智能电话和PDA的移动电子设备。或者,根据本实施例的信息处理设备可被实现为数码摄像机、数码静物照相机或汽车导航系统。
在上述中,示出了信息处理设备10的功能的示例。通过使用公共构件或专用于每个结构元件的功能的电路或硬件,可配置以上结构元件中的每个。或者,每个结构元件的功能都可由CPU等来执行。因此,在适当的时候,根据实现本发明时的技术水平可改变要使用的元件。
可在个人计算机等上创建或实现用于实现根据本实施例的信息处理设备的每个功能的计算机程序。或者,可提供其中存储有这样的计算机程序的计算机可读记录介质。记录介质例如是磁盘、磁光盘、或闪速存储器。不使用任何记录介质而经由例如网络可递送以上的计算机程序。
<显示屏的示例>
将通过示出具体的示例、参考图14至图19来详细描述根据本实施例的信息处理设备10提供的显示屏(即,图形用户界面)的示例。图14至图19是示出根据本实施例的信息处理设备的显示屏的示例的说明图。
图14是在根据本实施例的显示单元109上显示的显示屏的示例。根据本实施例的信息处理设备10中所包括的显示控制单元107控制显示单元109上所显示的显示屏的内容。
如图14所示,显示屏包括配色方案生成区域,在该配色方案生成区域中显示被使用者用来选择颜色组合的滚动条501a至501d,并且显示屏包括搜索结果显示区域,在该搜索结果显示区域中显示基于在配色方案生成区域中所选择的配色方案而执行的搜索的结果。
信息处理设备10的使用者通过使用鼠标、键盘等操作来显示搭配生成区域中所显示的滚动条501,以设置使用者所期望的颜色的组合。在图14中,提供彼此相邻的四个滚动条501。因此,在图14所示的示例中,在使用者指定四个颜色的组合后,搜索内容。
使用者通过移动滚动条501中的每个来选择颜色的期望组合。优选的是,滚动条501中的每个跟随使用者的操作而移动。而且优选的是,滚动条501中的每个中所显示的颜色的模式是相同的。因此,使用者能够正如使用者认为合适的那样随意地组合颜色。
从例如色调的色轮中能够合适地选择滚动条501中的每个中所显示的颜色,但是,能够使滚动条501中的每个显示例如以下的颜色的组合。
更具体地,可以显示对这样的颜色进行组合的总共42个颜色:通过将色轮“浓(strong)”划分成15个颜色而获得的15个颜色,通过将色轮“淡(light)”划分成15个颜色而获得的15个颜色,通过将色轮“苍白(pale)”划分成6个颜色而获得的6个颜色,以及通过将灰度级划分成色调的色轮的6个颜色而获得的6个颜色。
当使用者指定4个颜色的组合时,信息处理设备10根据以上描述的流程搜索内容。因此,在搜索结果显示区域显示对应于使用者选择的颜色组合的配色方案气氛以及表示与配色方案气氛相关联的内容的对象503。表示内容的对象包括对应于内容主旨的一部分的缩略图以及内容的封面图片。
如图15所示,配色方案信息获得单元143针对滚动条501中的每个,判断在宽度方向上位于大体上中心(例如,在中心的一个像素内)处的部分上所显示的颜色为使用者选择的颜色。因此,每次当滚动条501中的每个中的大体上中心部分处的颜色改变时,就搜索内容。
图16是示出使用者选择颜色的组合后直至在显示屏上显示内容的搜索结果为止的处理序列的流程的说明图。当使用者操作滚动条501以选择颜色的组合时,配色方案信息获得单元143将所选择的颜色的组合作为配色方案信息输出到直方图生成单元145。直方图生成单元145基于所选择的配色方案信息生成颜色直方图,并且将颜色直方图输出到配色方案气氛分析单元105。配色方案气氛分析单元105通过第一实施例中详细描述的方法等计算所通知的配色方案信息与注册配色方案信息之间的相似距离以针对每个配色方案气氛决定代表相似距离。配色方案气氛选择单元148按照值的升序对计算出的代表相似距离进行排列,以将例如前3个配色方案气氛选择为用于搜索的配色方案气氛。内容选择单元149然后搜索所选择的配色方案气氛中的每个,并且将获得的搜索结果输出到显示控制单元107。
当在搜索结果显示区域显示搜索结果时,显示控制单元107基于代表相似距离决定要被显示的对象503的大小、表示配色方案气氛的字符的大小、以及对应于每个配色方案气氛的显示区域的大小。然后,例如,将最接近于配色方案信息的气氛布置在显示屏的中央,将第二最接近的气氛布置在最接近的气氛的左边,以及将第三最接近的气氛布置在最接近的气氛的右边。如果在显示表示内容的对象503时呈现多个对象503,如图16所示,可以以对象503彼此交叠的方式布置对象503。因此,气氛越接近于用作搜索查询的配色方案信息,在显示屏的中央显示越大的对象。因此,使用者在实时地知道使用者选择的配色方案接近于哪个氛围的同时能够操作滚动条501。
在图16所示的示例中,例如,代表相似距离是50000、100000和105000,并且显示区域的大小的比率len01∶len02∶len03变成代表相似距离的倒数的比率。
如图17所示,当在停止所有的滚动条501之后过去预定时间,显示控制单元107可控制自动移动滚动条501的执行,以便在停止时以占用滚动条501中的每个的至少一半的单一颜色来显示滚动条501中的每个。
使用者通过操作鼠标、键盘等,还能够将搜索结果显示区域中显示的对象503拖拽到配色方案生成区域中。在这种情况下,优选的是,除所选择的对象以外的其它对象也同步地移动。显示控制单元107通过尽可能地避免交叠,在配色方案生成区域中布置与可应用(applicable)的配色方案气氛相关联的对象503。对象503中的配色方案常常与构成4个滚动条501的配色方案相似,这使得显示屏更自然。
为了避免对象503的交叠,显示控制单元107通过图18所示的方法决定对象503的布置位置。即,显示控制单元107根据显示屏的大小或配色方案生成区域的大小来决定布置对象503的目标区域。然后,显示控制单元107将目标503布置在目标区域内。
显示控制单元107将目标区域的宽度划分成与要被显示的对象503的数量相同的子区域。在图18所示的示例中,例如,要被显示的对象503的数量是5个,以及显示控制单元107将目标区域的宽度划分成5个子区域。
接下来,显示控制单元107针对每个子区域决定布置对象503的目标点。显示控制单元107将每个子区域的宽度的中央设置为目标点在宽度方向上的位置。然后,显示控制单元107随机地决定目标点在高度方向上的位置。此后,显示控制单元107将对象503中的每个移动到如上决定的目标点。
另外,使用者通过操作鼠标、键盘等,通过双击搜索结果显示区域中所显示的对象503能够选择某对象503。在这种情况下,如图19所示,显示控制单元107使配色方案生成区域将选择的对象503显示为其放大的视图。如果对应于对象503的内容是收录有多首音乐内容的专辑内容或者设置有章节(chapter)的动态图像内容,显示控制单元107使配色方案生成区域还显示选择这种内容的内容选择对象。
在前述中,通过示出具体示例、参考图14至图19详细描述了根据本实施例的信息处理设备10提供的图形用户界面的示例。
<信息处理方法>
接下来,将参考图20和图21来描述由根据本实施例的信息处理设备10执行的信息处理方法的流程。
[配色方案气氛的关联]
首先,将参考图20描述本实施例中将配色方案气氛与内容相关联的流程。图20是示出本实施例中将配色方案气氛与内容相关联的流程的流程图。
首先,信息处理设备10的内容气氛分析单元141通过参考存储单元111中所存储的数据库,来获得内容DB 153中注册的一条内容(步骤S151)。接着,内容气氛分析单元141通过使用以上描述的各种方法中的一种方法来执行获得的内容(包括元数据)的气氛分析处理(步骤S153)。因此,能够确定内容向观看了内容的人提供的氛围(气氛)。
接着,内容气氛分析单元141通过参考存储单元111中所存储的影响转换DB 155,确定对应于内容的气氛的配色方案气氛(步骤S155)。接下来,内容气氛分析单元141将所确定的配色方案气氛与内容相关联,并且向内容DB 153注册关联的配色方案气氛(步骤S157)。因此,将内容提供给人的氛围(内容气氛)与配色方案气氛关联为内容DB 153中的内容的元数据。
接下来,内容气氛分析单元141确定是否针对内容DB 153中注册的所有内容注册了配色方案气氛(步骤S159)。如果还未针对所有内容注册配色方案气氛,内容气氛分析单元141返回到步骤S151,以针对未注册配色方案气氛的内容继续处理。如果针对所有内容注册了配色方案气氛,内容气氛分析单元141终止处理。
通过执行以上流程中的处理,内容气氛分析单元141能够针对内容关联两种元数据:内容的气氛和配色方案气氛。
[内容的搜索方法的流程]
接下来,将参考图21描述在根据本实施例的信息处理设备10中执行的信息处理方法(内容的搜索方法)的流程。图21是示出根据本实施例的信息处理方法的流程的流程图。
在开始以下的描述之前,假设已经通过图20中示出的处理,在存储单元111中所存储的内容DB 153中关联了作为内容元数据的配色方案气氛。
首先,信息处理设备10的配色方案信息获得单元143获得指示使用者选择的颜色组合的配色方案信息(步骤S161),并且将该组合输出到直方图生成单元145。直方图生成单元145基于从配色方案信息获得单元143通知的配色方案信息生成颜色直方图(步骤S163)。当搜索内容时,以这种方式生成的颜色直方图被用作搜索查询(搜索条件)。当完成颜色直方图的生成时,直方图生成单元145将生成的颜色直方图输出到配色方案气氛分析单元105。
配色方案气氛分析单元105基于从直方图生成单元145通知的颜色直方图,针对配色方案气氛DB 151中记录的每个配色方案气氛计算代表相似距离,以创建代表相似距离的列表(步骤S165)。在创建代表相似距离的列表后,配色方案气氛分析单元105将创建的列表输出到内搜索单元147的配色方案气氛选择单元148。
配色方案气氛选择单元148按照代表相似距离的升序从列表中选择配色方案气氛(步骤S167),并且将选择的配色方案气氛输出到内容选择单元149。内容选择单元149基于所通知的配色方案气氛搜索内容DB153,以获得对应于所通知的配色方案气氛的内容(步骤S169)。因此,基于使用者选择的颜色组合的抽象搜索条件来搜索具体内容。内容选择单元149将获取的搜索结果输出到显示控制单元107。
显示控制单元107使用图14到图19中所示出的GUI在显示单元109上显示所通知的搜索结果(步骤S171)。因此,使用者能够知道内容的搜索结果。
在前述中,参考图20和图21描述了在根据本实施例的信息处理设备10中执行的信息处理方法的流程的示例。
因此,在根据本实施例的信息处理设备和信息处理方法中,能够基于配色方案的抽象概念来搜索内容。
此外,图14至图19所示的根据本实施例的显示屏(GUI)能够提供一种新式的内容搜索方法,通过该内容搜索方法,通过快速移动(zap)显示颜色的滚动条来搜索内容。
在信息处理设备10的使用者使显示屏实时地显示与滚动条的滚动相匹配的搜索结果并且信息处理设备10的使用者知道当前显示的配色方案与哪种气氛接近到何种程度的同时,信息处理设备10的使用者能够创建配色方案。因此,使用者相继地使用各种配色方案能容易地执行搜索,或者使用者能搜索期望的配色方案气氛。
由于通过滚动彩色搭配的滚动条来创建配色方案,即使在创建配色方案时,应用的外观也是令人满意的,并且操作方法直观而简单,使得配色方案生成过程对使用者而言是舒服的。此外,即使在窄的显示区域中,通过经由堆积数据来显示内容,可以粗略地知道哪种内容有多少数量。还可以通过将内容拖拽到与内容的气氛相同的气氛的配色方案上来显示内容。因此,达到了使显示内容列表的外观更好的效果。
(第三实施例)
在以上描述的第二实施例中,描述了通过使用配色方案气氛的抽象形式来实现搜索内容的功能的信息处理设备,但是还可以通过使用配色方案气氛的抽象形式来自动提供适合于内容的内容显示的模板。以下描述的根据第三实施例的信息处理设备10是这样的设备:该设备通过分析内容的配色方案气氛,来实现自动提供适合于内容的配色方案气氛的显示模板的功能。
例如,在图像浏览应用中,能够为图像(内容)设置作为背景图像的模板。但是,使用者通常从为应用而提供的模板中选择并使用模板,而对使用者来说,通过从无数模板中一个接一个地检查模板来选择模板需要大量的时间和精力。如果应用提供的模板是固定模板,模板的配色方案可不需要适合图像(内容)。因此,以下描述的信息处理设备分析内容的配色方案气氛,并且自动向使用者提供适合于内容的配色方案气氛的显示模板。
<信息处理设备的配置>
首先,将参考图22和图23描述根据本实施例的信息处理设备10的配置。图22是示出根据本实施例的信息处理设备10的配置的方框图,而图23是示出根据本实施例的存储单元111的配置的说明图。
如图22所示,信息处理设备10主要包括配色方案气氛特征量提取单元103、配色方案气氛分析单元105、显示控制单元107、显示单元109、存储单元111、内容模式分析单元141、模板设置单元161和布局设置单元163。
配色方案气氛特征量提取单元103具有与根据本发明的第一实施例的配色方案气氛特征量提取单元103的配置相同的配置,并且除了从存储单元111中所存储的内容中提取配色方案气氛特征量之外,实现相似的操作。因此,下面省略其详细描述。
如第一实施例中所描述的,当由根据本实施例的配色方案气氛特征量提取单元103生成颜色直方图作为配色方案气氛特征量时,配色方案气氛特征量提取单元103可将生成的颜色直方图存储在存储单元111等中,以便其它处理单元能够使用颜色直方图。
配色方案气氛分析单元105、显示控制单元107和显示单元109具有与第一和第二实施例中的相应单元的配置相同的配置,并且实现类似的操作,因此下面省略其详细描述。
另外,内容气氛分析单元141具有与根据本发明的第二实施例的内容气氛分析单元141的配置相同的配置,并且实现类似的操作,因此下面省略其详细描述。
存储单元111是根据本实施例的信息处理设备10中所包括的存储设备的示例。例如,如图23所示,存储单元111具有作为数据库存储于其中的以下DB:第一实施例中所描述的配色方案气氛DB 151、关于存储单元111中所存储的内容的内容DB 153、以及气氛转换DB 153。另外,根据本实施例的存储单元111具有模板DB 165,该模板DB 165是存储单元111中所存储的关于在显示内容时所使用的模板的数据库。
图24示出模板DB 165的示例。如图24所示的,模板DB 165是这样的数据库:在该数据库中记录与配色方案气氛中的每个相关联的各种模板,并且每个模板向人提供对应于所关联的配色方案气氛的氛围。这些模板是由粘贴内容(例如图像内容、音乐内容、文本内容和网页)的区域以及更作为所粘贴的内容的背景图像的区域所构成的图像数据。可以以不同的颜色划分和涂色(apply)要作为背景图像的区域。
在存储单元111中,可记录各种历史信息。另外,在适当的时候,在存储单元111中记录当根据本实施例的信息处理设备10执行某种处理时需要存储的各种参数、处理的进度、以及各种数据库。信息处理设备10中包括的每个处理单元,例如配色方案气氛特征量提取单元103、配色方案气氛分析单元105、显示控制单元107、内容气氛分析单元141、模板设置单元161、以及布局设置单元163,能够随意地从/向存储单元111读/写信息。
通过例如CPU、ROM、RAM等来实现模板设置单元161。模板设置单元161自动地设置适合于与存储单元111的内容DB 153中注册的每条内容有关的内容的模板。当在显示屏上显示内容时,将模板设置单元161设置的模板用作默认设置(首先显示的模板),并且与内容相关联的模板的类型等可被稍后描述的布局设置单元163自由地改变。
模板设定单元161参考内容DB 153,并且如果存在没有设置模板的内容,模板设定单元161确定内容的配色方案气氛。在确定对应于内容的配色方案气氛后,模板设定单元161通过参考模板DB 165来选择与可应用的配色方案气氛相关联的模板,并且将该模板设定为默认模板。在适当的时候,能够设定从与可应用的配色方案气氛相关联的模板中选择哪个模板,并且例如,可选择附有最小模板ID的模板,或者可从多个模板中随机地选择模板。
在决定默认模板后,模板设定单元161从配色方案气氛DB 151中选择对应于可应用的配色方案气氛的配色方案模式,以选择默认的配色方案。如果针对所关注的内容记录了生成的颜色直方图,可选择最接近于生成的颜色直方图的配色方案模式。
如图24所示,将数字(ID)附加到要作为背景图像的区域中的模板。基于例如如下所示的标准之一在适当的时候附加ID:
(a)按照区域的降序(或升序)
(b)按照应当指定高(或低)饱和度的颜色的顺序
(c)按照应当指定高(或低)亮度的颜色的顺序
模板设定单元161关联ID和要作为背景图像的区域的配色方案。可采用任何方法作为将颜色与每个ID的区域相关联的方法,并且例如能够使用下面的方法之一:
(a)按照区域的降序(或升序)将配色方案中的颜色指定给以ID1开始的ID
(b)按照饱和度的降序(或升序)将配色方案中的颜色指定给以ID1开始的ID
(c)按照亮度的降序(或升序)将配色方案中的颜色指定给以ID1开始的ID
如果通过关注于区域来附加模板ID并且通过关注于区域来布置颜色,能够使配色方案气氛DB 151中的每个颜色的面积比率更接近于模板中的每个区域的面积比率,以便能够更准确地表达由配色方案提供的气氛。
在设置模板以及针对每条内容决定模板中的配色方案之后,模板设置单元161向内容DB 153注册决定的内容。因此,内容DB 153具有如图25所示的作为内容DB 153中附加地注册的元数据的条目。在图25所示的示例中,针对每条内容最近附加地记录与内容相对应的配色方案气氛、模板ID、配色方案模式ID、模板中所使用的颜色的颜色指数(INDEX)。
通过例如CPU、ROM、RAM、输入设备等来实现布局设置单元163。当通过使用者的操作指定了开始使显示屏显示某条内容的处理时,布局设置单元163通过使用存储单元111中存储的内容DB 153中所记录的模板,经由显示控制单元107使显示单元109显示内容。当改变默认模板时或当通过使用者的操作改变配色方案模式时,通过根据使用者的操作进行设置的改变,来更新内容DB 153的内容。根据本实施例的信息处理设备10的使用者通过操作显示屏上显示的用于改变设置的各种对象,能自由地改变由模板设置单元161设置的各种设置。
根据本实施例的信息处理设备10可被实现为诸如个人计算机和各种服务器的计算机,或者可被实现为诸如移动音乐播放器、移动游戏机、移动电话、智能电话和PDA的移动电子设备。或者,根据本实施例的信息处理设备10可被实现为数码摄像机、数码静物照相机或汽车导航系统。
在前述中,示出了根据本实施例的信息处理设备10的功能的示例。可使用公共构件或专用于每个结构元件的功能的电路或硬件来配置以上结构元件中的每个。或者,每个结构元件的功能都可由CPU等来执行。因此,在适当的时候,根据实现本发明时的技术水平可改变要使用的元件。
可在个人计算机等上创建或实现用于实现根据本实施例的信息处理设备的每个功能的计算机程序。或者,可提供其中存储有这样的计算机程序的计算机可读记录介质。记录介质例如是磁盘、磁光盘、或闪速存储器。不使用任何记录介质而经由例如网络可递送以上的计算机程序。
<显示屏的示例>
接着,将参考图26来描述根据本实施例的信息处理设备10的显示单元109上显示的显示屏(GUI)的示例。
图26是根据本实施例的显示单元109上显示的显示屏的示例。根据本实施例的信息处理设备10中所包括的显示控制单元107控制显示单元109上显示的显示屏的内容。
如图26所示,显示屏主要包括用于确认关于模板的编辑内容的编辑预览显示区域、内容选择区域、模板选择区域、配色方案模式选择区域以及配色方案显示区域。
在内容选择区域中,与例如缩略图一起显示能被信息处理设备10使用的内容的列表。在模板选择区域中,与例如缩略图一起显示信息处理设备10中所存储的模板。主要在模板显示区域中,优先地显示与对应于内容的配色方案气氛相关联的模板。在配色方案模式选择区域中,显示与模板相关联的配色方案模式。在配色方案显示区域中,显示在配色方案模式选择区域中选择的配色方案模式。
当通过使用者的操作来操作内容选择区域以选择某条内容时,布局设置单元163确定针对选择的内容而设置的模板(默认模板)。然后,布局设置单元163通知显示控制单元107关于所设置的模板的信息和内容,并且显示控制单元107通过使用所通知的模板,在编辑预览显示区域中显示该内容。即,当在显示屏上首次显示内容时,在模板选择区域中以选择的状态显示默认模板,并且在配色方案模式选择区域中以选择的状态显示默认的配色方案气氛。
使用者通过改变配色方案显示区域中显示的配色方案气氛的顺序,能够改变给模板ID1至ID3指定的配色方案模式。此外,通过操作模板选择区域或者配色方案模式选择区域,在适当的时候能够改变操作模板选择区域或者配色方案模式选择区域的设置值。
如果模板设置合乎使用者的喜欢,使用者通过点击被标注为“保存”的对象,能够用当前显示屏上显示的各种设置来更新内容DB 153的内容。
在前述中,通过参考图26示出具体示例,描述了由根据本实施例的信息处理设备10提供的GUI的示例。
<信息处理方法>
接下来,将参考图27描述由根据本实施例的信息处理设备执行的信息处理方法(模板设置方法)的流程。图27是示出根据本实施例的信息处理方法的流程的流程图。
在开始以下的描述之前,假设已经通过第二实施例中的图20示出的处理,在存储单元111中所存储的内容DB 153中关联了作为内容元数据的配色方案气氛。
首先,信息处理设备10的模板设置单元161从内容DB 153中获得对应于注册内容的一个配色方案气氛(步骤S181)。然后,模板设置单元161从模板DB 165中选择对应于获得的配色方案气氛的一个模板(步骤S183)。所选择的模板成为关注的内容的默认模板。
接下来,模板设置单元161通过参考配色方案气氛DB 151,从配色方案DB 151中选择一个对应的配色方案模式。所选择的配色方案模式成为默认模板的默认配色方案模式。
然后,模板设置单元161例如按照区域的降序将配色方案中的颜色与模板中的每个区域相关联(步骤S187)。从而决定包括当选择所关注的内容时自动显示的模板的配色方案的布局。
接下来,模板设置单元161向内容DB 153注册生成的模板的内容(步骤S189)。
然后,模板设置单元161确定是否针对所有内容设置了模板(步骤S191)。如果还未针对所有内容设置模板,模板设置单元161返回到步骤S181,以针对还未设置模板的内容继续处理。如果针对所有内容设置了模板,模板设置单元161终止处理。
在前述中,参考图27描述了由根据本实施例的信息处理设备10执行的信息处理方法的流程的示例。
因此,在根据本实施例的信息处理设备10和信息处理方法中,能自动地执行过去手动设置的模板设置处理。而且在根据本实施例的信息处理设备10中,能够自动地设置适合于内容的模板和配色方案。另外,使用者通过提供图26所示的GUI能容易地切换/替换适合于内容的模板和配色方案。
(第四实施例)
根据第一至第三实施例的信息处理设备10还能够被实现为包括作为输入设备的触摸面板的移动终端。以下将描述根据第一至第三实施例的信息处理设备10被实现为包括触摸面板的移动终端的情形。
<信息处理设备的配置>
[信息处理设备的外观]
首先,将参考图28描述根据本实施例的信息处理设备的外观。图28是例示根据本实施例的信息处理设备的说明图。
如图28所示,在信息处理设备10中提供包括触摸面板171的显示单元109(在下文中,简写为触摸面板171)。如图28所示,在触摸面板171中显示如第一至第三实施例描述的显示屏。根据操作体12的接触或移动,对触摸面板171上显示的各种信息执行诸如滚动的预定处理。在触摸面板171中可提供特定的处理区域。在特定的处理区域中,例如,显示执行预定处理的诸如图标的对象,并且通过所选择的特定显示区域执行与所显示的对象相关联的预定处理。
信息处理设备10不限于仅执行预定处理,例如响应于操作体12的接触或移动,选择对象或移动显示内容。例如,如果通过以操作体12与触摸面板171相接触的状态描画预定轨迹来移动操作体12,信息处理设备10执行对应于由操作体12描画的轨迹的预定处理。即,信息处理设备10具有手势输入功能。例如如果输入预定手势,激活与手势相关联的应用,或者执行与手势相关联的预定处理。
例如,可将使用者的手指用作操作体12。或者,例如还可将笔或触摸笔用作操作体12。如果触摸面板171是光学类型的,任何对象能够成为操作体12。例如,如果触摸面板171是光学类型的,难以按压触摸面板171的诸如刷子的软工具也能被用作操作体12。另外,如果触摸面板171是一体(in-cell)类型的光学触摸面板,影子被投射到触摸面板171上的任何对象能够被用作操作体12。
将简要地描述一体类型的光学触摸面板。存在几种类型的光学触摸面板。例如,这样模式的光学触摸面板是相对已知的:在该模式中,在构成液晶显示器的液晶面板的外部框架中提供光学传感器,并且通过光学传感器检测开始与液晶面板相接触的操作体12的位置和移动方向。与这个模式相反,一体类型的光学触摸面板具有安装在液晶面板中的光学传感器阵列,并且通过光学传感器阵列检测开始与液晶面板相接触或开始接近于液晶面板的操作体12的位置和移动方向。
更具体地,在光学触摸面板的玻璃衬底上形成光学传感器和引线(lead)电路,并且通过由光学传感器检测的从外部入射的光以及由引线电路读取的光的强度来识别操作体12的影子。因此,能够实现被认为难以通过其它类型的光学触摸面板来实现的接触“表面”的操作。此外,通过应用一体类型的光学触摸面板获得了优点,例如识别精度的改进,显示质量的改进,以及另外,包括一体类型的光学触摸面板的液晶显示屏等的可设计性(designability)。
在安装有触摸面板171的信息处理设备10的配置中,例如,可分离地配置构成信息处理设置10的触摸面板171和处理由触摸面板171检测到的操作体12的位置信息等的算术操作单元。在这样的配置示例中,通过算术操作单元执行根据诸如选择对象和移动显示内容的操作而生成的数据的处理。因此,根据实施例能自由地修改信息处理设备10的配置。
根据本实施例的信息处理设备10可被实现为诸如个人计算机或各种服务器的计算机,或者可被实现为移动电子设备,例如移动音乐播放器、移动游戏机、移动电话、智能电话和PDA。或者,根据本实施例的信息处理设备10可被实现为数码摄像机、数码静物照相机、或汽车导航系统。
[信息处理设备的配置的示例]
接着,将参考图29详细描述根据本实施例的信息处理设备10的配置的示例。图29是示出根据本实施例的信息处理设备的配置的方框图。在图29中,示出当根据第二实施例的信息处理设备10包括触摸面板171时的情形。
如图29所示,根据本实施例的信息处理设备10包括例如配色方案气氛分析单元105、显示控制单元107、显示单元109、存储单元111、内容气氛分析单元141、直方图生成单元145以及内容搜索单元147。根据本实施例的信息处理设备10还包括触摸面板171,并且还包括输入位置检测单元173、方向检测单元175和配色方案信息获得单元177。
配色方案气氛分析单元105、显示控制单元107、显示单元109、存储单元111、内容气氛分析单元141、直方图生成单元145和内容搜索单元147具有与第二实施例中的相应单元的配置相同的配置,并且实现类似的操作,因此以下省略其详细描述。
触摸面板171是在根据本实施例的信息处理设备10中提供的操作/输入单元。触摸面板171可以是以上描述的光学触摸面板或一体类型的光学触摸面板。可与信息处理设备10中所包括的诸如显示设备的显示单元109集成地或分离地形成触摸面板171。触摸面板171还包括输入位置检测单元173。
输入位置检测单元173检测由操作体12触摸的触摸面板171的位置。输入位置检测单元173可被配置成能够检测当被操作体12触摸时施加到触摸面板171的压力。输入位置检测单元173可具有这样的功能:即使触控体12未直接接触,也能够在触摸面板171上方的空间中或接近于触摸面板171的空间中检测操控体12的存在,并且能够识别为接触点。即,此处的接触位置可包括由操作体12执行的操作的位置信息,其中,该操作就像在触摸面板171的屏的上面的空间中描画。
输入位置检测单元173将关于检测到的接触位置(更具体地,接触位置的坐标)的信息作为输入位置信息输出到位置检测单元175和配色方案信息获得单元177。例如,如图30A所示,检测到的接触位置的数量是1,输入位置检测单元173将一对坐标(X1,Y1)输出为输入位置信息。如果检测到的接触位置的数量是2,输入位置检测单元173能够输出多个检测到的坐标。
通过例如CPU、ROM、RAM等来实现方向检测单元175。方向检测单元175通过使用坐标来检测操作体12的移动方向,上述坐标是从输入位置检测单元173输出的输入位置信息。
更具体地,方向检测单元175基于以预定时间间隔(例如,每几毫秒到每几百毫秒)输出的输入位置信息中的改变来检测操作体12的移动方向。例如,如图30A所示,方向检测单元175具有对其设置的用于确定操作体12是否正移动的移动确定区域。取决于能够区分触摸面板171中的两个相邻接触位置的分辨率性能等,能够将移动确定区域设置成任意尺寸,并且能够将移动确定区域设置成例如大约10个像素的半径。如果传输的输入位置信息改变超出移动确定区域的范围,方向检测单元175确定操作体12移动了。如果传输的输入位置信息在移动确定区域的范围以内改变,方向检测单元175能够确定操作体12执行了所谓的轻击操作。针对在相同定时传输的所有输入位置信息确定操作体12是否移动了。即,如果同时传输两对坐标作为输入位置信息,方向检测单元175针对两对坐标中的每个的时间改变来进行以上描述的确定。
如果传输的输入位置信息在移动确定区域的范围以外改变,方向检测单元175将由通过随时间改变的传输输入位置信息所描画的轨迹所形成的向量的方向检测为移动方向。向量的大小成为操作体12的移动的数量。
例如,如图30B所示,考虑这样的情况:在时间t1时从输入位置检测单元173传输坐标A(X1(t1),Y1(t1)),并且在时间t2时对应于输入位置信息的位置是A’(X2(t2),Y2(t2))。在这种情况下,方向检测单元175将由开始坐标A和结束坐标A’所限定的向量V1表示的方向检测为触摸了坐标A的操作体12的移动方向。方向检测单元175还将向量V1的大小设置为操作体12的移动的数量。
方向检测单元175通过使用检测到的操作体12的移动的数量和时间差能够计算操作体12的移动速度。另外,方向检测单元175通过使用计算出的移动速度和时间差还能够计算操作体12的加速度。通过关注移动速度或加速度,能够确定操作体12执行的操作是否为所谓的轻击(flick)操作(轻击触摸面板的操作)。
方向检测单元175将方向信息传输到配色方案信息获得单元177,其中,该方向信息包括如以上描述所检测到的操作体12的移动的移动方向和移动数量。
当内容搜索单元147基于关于从显示控制单元107获得的显示内容的信息以及关于显示单元109中显示的显示内容的信息以及由输入位置检测单元173和方向检测单元175输出的各种信息来搜索内容时,配色方案信息获得单元177获得关于成为搜索条件(搜索查询)的颜色组合的信息(配色方案信息)。
根据本实施例的配色方案信息获得单元177的功能与根据本发明的第二实施例的配色方案信息获得单元177的功能相同,并且实现类似的操作。因此,以下省略其详细描述。
根据本实施例的信息处理设备10可被实现为诸如个人计算机或各种服务器的计算机,或者可被实现为移动电子设备,例如移动音乐播放器、移动游戏机、移动电话、智能电话和PDA。或者,根据本实施例的信息处理设备10可被实现为数码摄像机、数码静物照相机、或汽车导航系统。
虽然以上的说明描述了在根据第二实施例的信息处理设备10中实现触摸面板171的情况,但是在根据第一和第三实施例的信息处理设备10中能够相似地实现触摸面板171。
在前述中,示出了根据本实施例的信息处理设备10的功能的示例。可使用公共构件或专用于每个结构元件的功能的电路或硬件来配置以上结构元件中的每个。或者,每个结构元件的功能都可由CPU等来执行。因此,在适当的时候,根据实现本发明时的技术水平可改变要使用的元件。
可在个人计算机等上创建或实现用于实现根据本实施例的信息处理设备的每个功能的计算机程序。或者,可提供其中存储有这样的计算机程序的计算机可读记录介质。记录介质例如是磁盘、磁光盘、或闪速存储器。不使用任何记录介质而经由例如网络可递送以上的计算机程序。
<显示屏的示例>
接下来,将参考图31至图34描述根据本实施例的信息处理设备10的显示屏的示例。图31至图34是示出根据本实施例的信息处理设备的说明图。
向包括如图28所示的触摸面板171的移动电子设备提供能够估计诸如陀螺传感器和加速传感器的设备的姿势的设备。在这样的情况下,如图31所示,信息处理设备10的显示控制单元107可控制显示屏,使得配色方案生成区域在绝对空间中始终是水平的。
包括如图28所示的触摸面板171的移动电子设备还可被用作诸如电视机的外部显示设备的遥控器。例如,如图32所示,假设信息处理设备10使用本地设备中包括的通信设备能够有线地或无线地与外部显示设备通信,并且信息处理设备10能够提供第二实施例中所示的功能。信息处理设备10的使用者可操作信息处理设备10,以使外部显示设备显示其搜索结果。
如图32的左图所示,信息处理设备10的使用者通过操作用于执行内容搜索的预定操作的信息处理设备10的触摸面板和显示单元,使外部显示设备显示其搜索结果。在外部显示设备上显示搜索结果后,如图32的右图所示,通过将信息处理设备10用作点设备,能够选择外部显示设备上显示的搜索结果。
更具体地,如图33A所示,使用者操作信息处理设备10的触摸面板和显示单元。如图33B所示,当过去了预定时间或选择了开始搜索处理的搜索键时,在外部显示设备中显示搜索结果。如图33C所示,如果使用者操作信息处理设备10的显示屏中显示的特定处理区域以确认搜索结果,信息处理设备10可用作点设备。在这种情况下,在信息处理设备10的显示单元中可将如图33C的下部所示的十字键显示为GUI。另一方面,如果使用者未确认图33B中的搜索结果,将通过返回到图33A来继续搜索处理。
如果信息处理设备10中包括的触摸面板171能够检测操作体的接近或接触,通过区分操作体的接近状态和接触状态,能够实现如图34所示的用户界面。
即,在这种情况下的信息处理设备10的显示控制单元107对显示屏进行布局,以便以叠加状态显示搜索结果显示区域和配色方案生成区域。然后,如图34的上部所示,当操作体12处于接近状态中时,信息处理设备10确定操作体12正在操作滚动条501。在这种情况下,与没有正被操作的其它滚动条501不同地显示正被操作的滚动条501(例如,不透明地显示正被操作的滚动条501,而半透明地显示其它滚动条)。
如图34的下部所示,当操作体12处于接触状态时,信息处理设备10确定操作体12正操作诸如表示内容的图标的对象503。
通过实现这样的界面,根据本实施例的信息处理设备10能够进一步提高使用者便利性。
以所谓的触摸屏平板能够相似地实现根据本实施例的信息处理设备10。
(硬件配置)
接着,将参考图35详细描述根据本发明的实施例的信息处理设备10的硬件配置。图35是用于示出根据本发明的实施例的信息处理设备10的硬件配置的方框图。
信息处理设备10主要包括CPU 901、ROM 903、和RAM 905。另外,信息处理设备10还包括主机总线907、桥909、外部总线911、接口913、输入设备915、输出设备917、存储设备919、驱动器921、连接端口923以及通信设备925。
CPU 901用作算术处理设备和控制设备,并且根据ROM 903、RAM905、存储设备919或可移除记录介质927中存储的各种程序来控制信息处理设备10的整体操作或部分操作。ROM 903存储由CPU 901使用的程序、操作参数等。RAM 905主要存储CPU 901使用的程序以及在程序的处理过程中根据需要改变的参数等。这些经由由诸如CPU总线等内部总线配置的主机总线907彼此连接。
主机总线907经由桥909连接到诸如PCI(外围组件互联/接口)总线的外部总线911。
输入设备915是由使用者操作的操作装置,例如鼠标、键盘、触摸面板、按钮、开关和控制盒。另外,输入设备915可以是使用例如红外线或其它无线电波的遥控装置(所谓的遥控器),或者可以是确认信息处理设备10的操作的外部连接设备929,例如移动电话或PDA。另外,输入设备915基于例如使用者用以上操作装置输入的信息而生成输入信号,并且输入设备915由用于输出该输入信号到CPU 901的输入控制电路配置而成。信息处理设备10的使用者能够输入各种数据到信息处理设备10,并且通过操作该输入设备915能够指示信息处理设备10执行处理。
输出设备917由能够视觉地或听觉地将所获得的信息通知给使用者的设备配置而成。这种设备的示例包括诸如CRT显示设备、液晶显示设备、等离子显示设备、EL显示设备及灯具的显示设备以及诸如扬声器和耳机的音频输出设备、打印机、移动电话、传真机等。例如,输出设备917输出通过信息处理设备10执行的各种处理而获取的结果。更具体地,显示设备以文本或图像的方式显示通过信息处理设备10执行的各种处理而获取的结果。另一方面,音频输出设备将诸如再现的音频数据和声音数据的音频信号转化成模拟信号,并且输出该模拟信号。
存储设备919是被配置为信息处理设备10的存储单元的示例的用于存储数据的设备,并且用于存储数据。存储设备919由例如磁存储设备、半导体存储设备、光存储设备、或磁光存储设备配置而成,其中,磁存储设备例如是HDD(硬盘驱动器)。该存储设备919存储要被CPU 901执行的程序、各种数据以及从外部获取的各种数据。
驱动器921是记录介质的读取器/写入器,并且嵌入在信息处理设备10中或外部附加到信息处理设备10上。驱动器921读取诸如磁盘、光盘、磁光盘或半导体存储器的附加的可移除记录介质927中记录的信息,并且将读取的信息输出到RAM 905。另外,驱动器921能够写入诸如磁盘、光盘、磁光盘或半导体存储器的附加的可移除记录介质927。可移除记录介质927例如是DVD介质、HD-DVD介质、或蓝光介质。可移除记录介质927可以是紧凑闪存(CompactFlash)(CF,注册商标)、闪速存储器、SD存储卡(安全数字存储卡)等。可替选地,可移除记录介质927可以是例如配有非接触IC芯片或电子设备的IC卡(集成电路卡)。
连接端口923是用于允许设备直接连接到信息处理设备10的端口。连接端口923的示例包括USB(通用串行总线)端口、IEEE 1394端口、SCSI(小型计算机接口)端口等。连接端口923的其它示例包括RS-232C端口、光学音频端子、HDMI(高清多媒体接口)端口等。通过连接到该连接端口923的外部连接设备929,信息处理设备10从外部连接设备929直接获取各种数据,并且将各种数据提供到外部连接设备929。
通信设备925是由例如用于连接到通信网络931的通信设备配置而成的通信接口。通信设备925例如是有线或无线LAN(局域网)、蓝牙(注册商标)、WUSB(无线USB)通信卡。可替选地,通信设备925可以是用于光学通信的路由器、用于ADSL(异步数字用户线路)的路由器、用于各种通信的调制解调器等。例如,该通信设备925能够根据诸如因特网上的TCP/IP的预定协议与其它通信设备发送和接收信号等。连接到通信设备925的通信网络931由经由有线或无线地连接的网络等配置而成,其中,上述网络可以是例如因特网、家庭LAN、红外线通信、无线电波通信、卫星通信等。
到此为止,示出了能够实现根据本发明的实施例的信息处理设备10的功能的硬件配置的示例。使用通用目的的材料可配置以上描述的结构元件中的每个,或者以上描述的结构元件中的每个由专用于每个结构元件的功能的硬件配置而成。因此,根据实现本实施例时的技术水平能够按需要改变要使用的硬件配置。
(总结)
如以上所描述的,根据本发明的实施例的信息处理设备通过使用关于颜色组合的配色方案信息来生成用于内容的配色方案气氛分析的颜色直方图,以便能够更准确地分析输入图像。
根据本发明实施例的信息处理设备还能够搜索内容,并且通过进一步使用作为分析结果获取的配色方案气氛的抽象形式来自动地设置模板。
本领域技术人员应该理解,在所附权利要求或其等同物的范围内,取决于设计需求和其它因素可进行各种修改、组合、子组合和替换。
本申请包括与2010年4月5日在日本专利局提交的日本优先权专利申请JP2010-086998所公开的内容有关的主题,其全部内容通过引用合并于此。

Claims (8)

1.一种信息处理设备,包括:
存储单元,在所述存储单元中存储配色方案数据库,所述配色方案数据库记录关于颜色组合的配色方案信息与涉及由所述颜色组合提供的氛围的配色方案气氛之间的对应关系;以及
配色方案气氛分析单元,其基于所述配色方案数据库分析输入配色方案信息,以确定对应于由所述输入配色方案信息表示的颜色组合的配色方案气氛。
2.根据权利要求1所述的信息处理设备,
其中,所述配色方案气氛分析单元计算指示所述输入配色方案信息与所述配色方案数据库中所存储的配色方案信息之间的相似度的指数,以及
与同所述输入配色方案信息最接近且存储在所述配色方案数据库中的配色方案信息相关联的配色方案气氛被设置为与由所述输入配色方案信息表示的颜色组合相对应的配色方案气氛。
3.根据权利要求2所述的信息处理设备,还包括:
直方图生成单元,其基于输入图像生成表示所述图像中所包括的颜色组合的直方图,
其中,所述配色方案气氛分析单元将所述直方图生成单元生成的所述直方图用作所述输入配色方案信息。
4.根据权利要求3所述的信息处理设备,还包括:
注意值计算单元,其计算指示所述输入图像中所包括的颜色吸引使用者的注意的程度的注意值;
减色处理单元,其将所述输入图像中所包括的颜色的数量减少到预定的颜色数量,
其中,所述直方图生成单元通过将颜色的数量已被所述减色处理单元减少的所述输入图像与所述注意值计算单元计算出的所述注意值进行卷积而生成所述直方图。
5.根据权利要求2所述的信息处理设备,
其中,预定内容和指示由所述内容提供给使用者的氛围的氛围信息被关联,并被存储在所述存储单元中,所述信息处理设备还包括:
配色方案气氛选择单元,其基于所述配色方案气氛分析单元计算出的指示相似度的指数来选择对应于所述输入配色方案信息的一个或更多个配色方案气氛;以及
内容选择单元,其基于所述配色方案气氛选择单元选择的所述一个或更多个配色方案气氛来选择所述存储单元中存储的所述内容。
6.根据权利要求5所述的信息处理设备,
其中,在所述存储单元中存储气氛转换数据库,所述气氛转换数据库记录指示所述内容向使用者提供的氛围的所述氛围信息与所述配色方案气氛之间的对应关系;以及
所述内容选择单元通过使用所述气氛转换数据库来选择所述内容。
7.一种信息处理方法,包括以下步骤:
基于配色方案数据库分析输入配色方案信息,其中,所述配色方案数据库记录关于颜色组合的配色方案信息与涉及由所述颜色组合提供的氛围的配色方案气氛之间的对应关系;以及
确定对应于由所述输入配色方案信息表示的颜色组合的配色方案气氛。
8.一种程序,使计算机实现:
配色方案气氛分析功能,其基于配色方案数据库分析输入配色方案信息,其中,所述配色方案数据库记录关于颜色组合的配色方案信息与涉及由所述颜色组合提供的氛围的配色方案气氛之间的对应关系,以确定对应于由所述输入配色方案信息表示的所述颜色组合的所述配色方案气氛。
CN2011100864857A 2010-04-05 2011-03-29 信息处理设备、信息处理方法及程序 Pending CN102214303A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2010-086998 2010-04-05
JP2010086998A JP2011221605A (ja) 2010-04-05 2010-04-05 情報処理装置、情報処理方法及びプログラム

Publications (1)

Publication Number Publication Date
CN102214303A true CN102214303A (zh) 2011-10-12

Family

ID=44745603

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2011100864857A Pending CN102214303A (zh) 2010-04-05 2011-03-29 信息处理设备、信息处理方法及程序

Country Status (3)

Country Link
US (1) US8744178B2 (zh)
JP (1) JP2011221605A (zh)
CN (1) CN102214303A (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107423694A (zh) * 2017-07-05 2017-12-01 清远初曲智能科技有限公司 一种基于机器视觉的人工智能用户形象管理方法及系统
CN108320283A (zh) * 2018-02-01 2018-07-24 研靖信息科技(上海)有限公司 一种确定图像最优配色阈值范围的方法与设备
CN109767453A (zh) * 2017-11-10 2019-05-17 富士通株式会社 信息处理装置、背景图像更新方法和非暂态计算机可读存储介质
CN111291435A (zh) * 2020-02-27 2020-06-16 乐意节能装饰材料(常州)有限公司 一种色彩搭配方法
CN111771228A (zh) * 2018-02-22 2020-10-13 三菱电机株式会社 信息处理装置、信息处理方法以及程序

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10803009B2 (en) * 2011-07-14 2020-10-13 Texas Instruments Incorporated Processor with table lookup processing unit
JP5849815B2 (ja) * 2012-03-28 2016-02-03 大日本印刷株式会社 コンテンツ表示装置
US10885676B2 (en) * 2016-12-27 2021-01-05 Samsung Electronics Co., Ltd. Method and apparatus for modifying display settings in virtual/augmented reality
JP7077624B2 (ja) * 2018-01-15 2022-05-31 凸版印刷株式会社 コンテンツ分類装置、コンテンツ分類方法、及びプログラム

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2006114898A1 (en) * 2005-04-25 2006-11-02 Yappa Corporation 3d image generation and display system
CN101373481A (zh) * 2007-08-24 2009-02-25 株式会社理光 图像搜索设备、图像搜索方法、及存储程序的存储介质
US20100030578A1 (en) * 2008-03-21 2010-02-04 Siddique M A Sami System and method for collaborative shopping, business and entertainment

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3020887B2 (ja) * 1997-04-14 2000-03-15 株式会社エイ・ティ・アール知能映像通信研究所 データベース格納方法、データベース検索方法およびデータベース装置
JP3972914B2 (ja) 2004-03-29 2007-09-05 富士ゼロックス株式会社 画像印象評価装置、画像印象評価方法及び画像印象評価プログラム
JP4935047B2 (ja) 2005-10-25 2012-05-23 ソニー株式会社 情報処理装置、情報処理方法、およびプログラム
US7577684B2 (en) 2006-04-04 2009-08-18 Sony Corporation Fast generalized 2-Dimensional heap for Hausdorff and earth mover's distance
JP4210954B2 (ja) 2006-08-22 2009-01-21 ソニー株式会社 画像処理方法、画像処理方法のプログラム、画像処理方法のプログラムを記録した記録媒体及び画像処理装置
US8938468B2 (en) * 2007-12-31 2015-01-20 Koninklijkle Philips N.V. Methods and apparatus for facilitating design, selection and/or customization of lighting effects or lighting shows
EP2229228B1 (en) * 2008-01-16 2014-07-16 Koninklijke Philips N.V. System and method for automatically creating an atmosphere suited to social setting and mood in an environment
JP5181955B2 (ja) * 2008-09-16 2013-04-10 株式会社ニコン 画像分類装置および画像処理装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2006114898A1 (en) * 2005-04-25 2006-11-02 Yappa Corporation 3d image generation and display system
CN101373481A (zh) * 2007-08-24 2009-02-25 株式会社理光 图像搜索设备、图像搜索方法、及存储程序的存储介质
US20100030578A1 (en) * 2008-03-21 2010-02-04 Siddique M A Sami System and method for collaborative shopping, business and entertainment

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107423694A (zh) * 2017-07-05 2017-12-01 清远初曲智能科技有限公司 一种基于机器视觉的人工智能用户形象管理方法及系统
CN109767453A (zh) * 2017-11-10 2019-05-17 富士通株式会社 信息处理装置、背景图像更新方法和非暂态计算机可读存储介质
CN109767453B (zh) * 2017-11-10 2023-04-07 富士通株式会社 信息处理装置、背景图像更新方法和非暂态计算机可读存储介质
CN109767453B9 (zh) * 2017-11-10 2023-06-30 富士通株式会社 信息处理装置、背景图像更新方法和非暂态计算机可读存储介质
CN108320283A (zh) * 2018-02-01 2018-07-24 研靖信息科技(上海)有限公司 一种确定图像最优配色阈值范围的方法与设备
CN111771228A (zh) * 2018-02-22 2020-10-13 三菱电机株式会社 信息处理装置、信息处理方法以及程序
CN111291435A (zh) * 2020-02-27 2020-06-16 乐意节能装饰材料(常州)有限公司 一种色彩搭配方法

Also Published As

Publication number Publication date
US20110274346A1 (en) 2011-11-10
US8744178B2 (en) 2014-06-03
JP2011221605A (ja) 2011-11-04

Similar Documents

Publication Publication Date Title
CN102214303A (zh) 信息处理设备、信息处理方法及程序
US11927986B2 (en) Integrated computational interface device with holder for wearable extended reality appliance
CN102214063A (zh) 信息处理方法和图形用户界面
CN101783886B (zh) 信息处理设备、信息处理方法和程序
US9465437B2 (en) Method and apparatus for controlling screen by tracking head of user through camera module, and computer-readable recording medium therefor
US9940013B2 (en) Display device for controlling displaying of a window and method of controlling the same
EP3183640B1 (en) Device and method of providing handwritten content in the same
CN107209631A (zh) 用于显示图像的用户终端及其图像显示方法
CN101727938B (zh) 信息处理装置、信息处理方法
CN101833413A (zh) 信息处理装置、动画附加方法和程序
CN103838566A (zh) 信息处理装置和信息处理方法
JP2011081556A (ja) 情報処理装置、情報処理方法、プログラムおよびサーバ
CN101833391A (zh) 信息处理设备、信息处理方法及程序
US20140267384A1 (en) Display apparatus and control method thereof
CN109743566A (zh) 一种用于识别vr视频格式的方法与设备
CN102214062A (zh) 信息处理设备、信息处理方法和程序
JP5446700B2 (ja) 情報処理装置、情報処理方法およびプログラム
KR20160136726A (ko) 전자 장치 및 그 제어 방법
KR102398668B1 (ko) 영상 객체 인식 기반 객체 정보 제공 장치
US20220391055A1 (en) Display apparatus, display system, and display method

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20111012