CN101968790A - 显示处理设备、显示处理方法和显示处理程序 - Google Patents

显示处理设备、显示处理方法和显示处理程序 Download PDF

Info

Publication number
CN101968790A
CN101968790A CN2010102339002A CN201010233900A CN101968790A CN 101968790 A CN101968790 A CN 101968790A CN 2010102339002 A CN2010102339002 A CN 2010102339002A CN 201010233900 A CN201010233900 A CN 201010233900A CN 101968790 A CN101968790 A CN 101968790A
Authority
CN
China
Prior art keywords
subclauses
display
image
clauses
demonstration
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2010102339002A
Other languages
English (en)
Inventor
高冈绫
寺山晶子
王启宏
赤川聪
新井浩司
笠原俊一
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN101968790A publication Critical patent/CN101968790A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/53Querying
    • G06F16/532Query formulation, e.g. graphical querying
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/73Querying
    • G06F16/732Query formulation
    • G06F16/7335Graphical querying, e.g. query-by-region, query-by-sketch, query-by-trajectory, GUIs for designating a person/face/object as a query predicate
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/78Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/78Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/783Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G06F16/7837Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using objects detected or recognised in the video content
    • G06F16/784Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using objects detected or recognised in the video content the detected or recognised objects being people
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/102Programmed access in sequence to addressed parts of tracks of operating record carriers
    • G11B27/105Programmed access in sequence to addressed parts of tracks of operating record carriers of operating discs
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/34Indicating arrangements 
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects
    • H04N23/611Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/62Control of parameters via user interfaces
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048Indexing scheme relating to G06F3/048
    • G06F2203/04807Pen manipulated menu
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048Indexing scheme relating to G06F3/048
    • G06F2203/04808Several contacts: gestures triggering a specific function, e.g. scrolling, zooming, right-click, when the user establishes several contacts with the surface simultaneously; e.g. using several fingers or a combination of fingers and pen
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2101/00Still video cameras

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • General Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • Signal Processing (AREA)
  • Library & Information Science (AREA)
  • Mathematical Physics (AREA)
  • Computational Linguistics (AREA)
  • Controls And Circuits For Display Device (AREA)
  • User Interface Of Digital Computer (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Studio Devices (AREA)

Abstract

本发明涉及一种显示处理方法、显示处理设备和显示处理程序。一种显示处理设备包括:显示元件;分组机构,被配置为根据多个可选择的条目中的每一个条目具有的信息来分组使得每一个条目属于一个或多个组;分配机构,被配置为生成与有关条目对应的显示客体并且将所述显示客体分配到通过分组机构对所述多个可选择的条目的分组而生成的相应的组;以及显示处理机构,被配置为在显示元件的显示屏上显示由分配机构分配到组的显示客体。

Description

显示处理设备、显示处理方法和显示处理程序
技术领域
本发明涉及包含具有相对大的显示屏的显示元件的能够显示各种信息的设备(诸如数字式摄像机、数字式静态照相机、便携式电话终端或便携式信息处理终端)、在该设备中使用的方法和程序。
背景技术
已经广泛地使用数字式照相机,其获取运动图像或静态图像并且将它们作为数字数据记录在记录介质上。通常,用来获取运动图像的设备被称为数字式摄像机而用来获取静态图像的设备被称为数字式静态照相机,从而将它们彼此区分,但是可以获取运动图像和静态图像两者的照相机越来越多。
主要获取运动图像的数字式摄像机通常使用大容量记录介质,诸如DVD(数字多功能盘)或硬盘。另外,主要获取静态图像的数字式静态照相机使用内部的闪速存储器或各种可移动的存储器,因为与运动图像相比,静态图像数据使用较小的数据量。
然而,近年来,随着内部闪速存储器或可移动存储器在尺寸上的减小并且具有大容量,数据压缩技术得到改进,因此已经提供有将大量的运动图像数据存储在这些存储器中的数字式摄像机。
如上所述,对于其中大量图像数据可以被记录在记录介质中的数字式照相机,获取的图像数据的量随着时间的流逝而增大,并且图像数据有时被存储在记录介质中,用户难以管理。
在现有技术的数字式照相机中,大量图像数据被存储在根据预定信息(诸如日期或时间)生成的文件夹中。
例如,在同一拍摄日期获取的大量图像数据(诸如2009年1月1日获取的图像数据的集合)被存储在一个文件夹中。另外,由用户生成名为“运动会”或“生日”等的文件夹,并且将获取且得到的图像数据排列在该文件夹中。
由日期、时间或用户给出的文件夹名标识的文件夹用于将用户在预定情况下得到的图像数据的分类和存储。随着使用数字式照相机的年数增加,这些文件夹增加到它们不能由用户管理的程度。
为此,在例如稍后描述的日本未经审查的专利申请公开No.2007-037182或日本未经审查的专利申请公开No.2006-295236中公开的诸如数字式照相机的显示处理设备中,图像的列表显示或索引屏幕被用于每一个文件夹,并且可以|扫视图像|。
另外,如果进一步存储图像数据,则具有高效率的缩小范围(narrowing-down)搜索也是必需的。例如,如在稍后描述的日本未经审查的专利申请公开No.2008-165424或日本未经审查的专利申请公开No.2005-354134中所公开的现有技术中,建议可以使用元数据或关键字来有效地执行搜索。
发明内容
然而,在如上述日本未经审查的专利申请公开No.2007-037182和日本未经审查的专利申请公开No.2006-295236所公开的搜索图像的现有技术方法中,为了寻找存储有期望的图像数据的文件夹,用户在许多文件夹之间来回行进并且确认在每一个文件夹中的图像数据。由此,认为存在不方便的情况,因为操作是麻烦的并且需要花费时间直到找到期望的文件夹。
此外,在如在日本未经审查的专利申请公开No.2008-165424和日本未经审查的专利申请公开No.2005-354134中所公开的缩小范围搜索中,通过选择经由GUI(图形用户界面)菜单等向图像数据添加的分类标签或搜索关键字来进行搜索。
在该情况下,认为存在选择分类标签或搜索关键字较麻烦的情况。此外,认为存在有时在一次搜索中未找到期望的图像数据的情况。在该情况下,检查搜索结果,经由GUI菜单选择分类标签或搜索关键字,并且重复搜索。
因此,在使用分类标签或搜索关键字的缩小范围搜索中,用户的识字和劳动是指示搜索条件的组合所必需的。因此,还有如下的问题,即不擅长进行搜索的用户不能如用户希望地改善搜索。
由用户携带和使用的所谓的便携式电子设备(诸如摄像机)经常被用作所谓的通信工具。因此,存在用户想要快速且简单地搜索存储在摄像机中的图像数据等并且将其展示给附近的朋友或熟人使得他们可以容易观看它的情况。
与搜索诸如上述图像数据的内容有关的问题不限于上述问题。
例如,已经广泛地使用诸如便携式电话终端那样的具有各种功能的电子设备,这些功能为诸如电话功能、因特网访问功能、照相机功能、接收和再现数字电视广播的功能以及存储和再现音乐数据的功能。
在多功能的电子设备中,以与搜索诸如图像数据的内容相同的方式,在将期望条目设置为期望功能的情况中,用户通常实际上在通过复杂操作到达设置期望条目的屏幕之后执行设置。
如上所述,当在许多存储内容中搜索期望的内容或者在许多可设置的条目中搜索期望的条目时,在现有技术中执行复杂的操作,因此期望这些操作能简单地执行并且容易理解。
期望的是可以在没有复杂的操作的情况下在许多可选择的条目中快速且准确地找到期望的条目并且可以使用该期望的条目。
根据本发明实施例的显示处理设备包括:显示元件;分组装置,用于根据每一个条目具有的信息来分组使得多个可选择的条目中的每一个属于一个或多个组;分配装置,用于生成与有关条目对应的显示客体并且将所述显示客体分配到通过分组装置对该多个可选择的条目的分组而生成的各个组;以及显示处理装置,用于在该显示元件的显示屏上显示由该分配装置分配到组的显示客体。
在该显示处理设备中,该分组装置可以根据每一个条目具有的信息来分组,使得多个可选择的条目中的每一个可以属于一个或多个组。
该分配装置可以生成与有关条目对应的显示客体并且将该显示客体分配到通过分组装置对该多个可选择的条目的分组而生成的相应的组。
显示处理装置可以在该显示元件的显示屏上显示由该分配装置分配到组的显示客体。
由此,用户没有独立地识别多个可选择的条目中的每一个,但是通过在显示元件的显示屏上显示的显示客体可以识别期望的可选择的条目所属的组。
可以从识别的期望的条目所属的组中找到期望的可选择的条目。因此,可以在没有复杂操作的情况下通过自动地缩小搜索范围来从多个可选择的条目中快速找到期望的条目,并且使用它。
根据本发明实施例,可以在没有复杂操作的情况下从多个可选择的条目中快速找到期望的条目,并且使用它。
附图说明
图1是示出应用有根据本发明实施例的设备、方法和程序的成像设备的配置示例的框图。
图2是示出记录在成像设备的记录介质上的图像文件的布置示例的图。
图3是示出通过对成像设备中的图像文件进行分组生成的图像组的信息的示例的图。
图4是示出再现模式中的初始屏幕(应用主屏幕)的示例的图。
图5是示出在显示屏上表示每一个图像组的显示客体的配置的图。
图6是示出用于在图像组中搜索图像文件的屏幕的示例的图。
图7是示出从图6接下去显示的搜索结果的列表显示的示例的图。
图8是示出指定许多组作为目标的针对图像文件的AND搜索的详细示例的图。
图9是示出指定许多组作为目标的针对图像文件的AND搜索的详细示例的图。
图10是示出指定许多组作为目标的针对图像文件的AND搜索的详细示例的图。
图11是示出指定许多组作为目标的针对图像文件的AND搜索的详细示例的图。
图12是示出仅用一个手指进行AND搜索的示例的图。
图13是示出仅用一个手指进行AND搜索的示例的图。
图14是示出仅用一个手指进行AND搜索的示例的图。
图15是示出在成像设备中的再现模式中的处理的流程图。
图16是从图15接下去的流程图。
图17是从图15接下去的流程图。
图18是从图15接下去的流程图。
图19是从图18接下去的流程图。
图20是示出设置模式中的处理的图。
图21是示出设置模式中的处理的图。
图22是示出设置模式中的处理的图。
图23是示出设置模式中的处理的图。
具体实施方式
在下文中,将参考附图描述根据本发明实施例的设备、方法和程序。例如,将描述将本发明应用于可以获取运动图像或静态图像、将它们记录在记录介质上并且使用它们的成像设备(摄像机)的情况。
成像设备的配置示例
图1是示出应用有根据本发明实施例的设备、方法和程序的成像设备100的配置示例的框图。成像设备100可以通过改变拍摄模式来获取静态图像与运动图像两者并且将它们记录在记录介质上。
如图1所示,成像设备100包括镜头单元101、成像元件102、预处理单元103、图像处理单元104、显示处理单元105、显示单元106、触摸面板107、压缩处理单元109、解压缩处理单元110以及显示图像生成单元111。
另外,成像设备100包括控制单元120、操作单元131、外部接口(在下文中,简写成“外部I/F”)132、输入/输出端子133、写入/读取单元134以及记录介质135。此外,成像设备100包括运动传感器137、GPS接收单元138、GPS接收天线139以及时钟电路140。
在本实施例中的成像设备100中,显示单元106由例如所谓的纤细(slim)型显示元件(诸如LCD(液晶显示器)或有机EL(电致发光)面板)构成。但是如稍后还描述的,显示单元106的显示屏设置有触摸面板107,使得整个显示屏成为操作表面。
触摸面板107接收来自于用户的在操作表面上的指示操作(触摸操作),检测在触摸面板107的对应操作表面上的所指示的位置(触摸的位置),并且将表示所指示的位置的坐标数据通知给控制单元120。
如稍后所述的,控制单元120控制成像设备100的各个单元,并且掌握在显示单元106的显示屏上执行哪种显示。控制单元120可以基于来自于触摸面板107的表示在操作表面上的所指示的位置的|坐标数据|来接收来自于用户的指示操作(输入操作),并且在显示单元106的显示屏上显示与有关的所指示的位置对应的信息。
例如,假设用户用手指或触笔等触摸了触摸面板107的操作表面上的某一位置。在该情况下,当在显示屏上与触摸的位置对应(重合)的位置处显示图时,控制单元120可以确定用户选择所显示的图作为输入。
以这种方式,在成像设备100中,显示单元106与触摸面板107形成作为输入设备的触摸屏108。另外,触摸面板107由例如压力传感型或静电型来实现。
触摸面板107可以检测在操作表面上的多个位置处同时执行的多个操作中的每一个,并且输出表示每个触摸位置的坐标数据。另外,触摸面板107可以检测在操作表面上重复执行的指示操作中的每一个,并且输出表示相应触摸位置的坐标数据。
触摸面板107可以在用户用手指或触笔触摸操作表面时以预定的定时连续地检测触摸位置,并且输出表示触摸位置的坐标数据。
因此,触摸面板107可以接收并且检测各种指示操作(操作输入),例如所谓的轻敲(tapping)、双轻敲、拖曳、轻弹(flicking)以及夹捏(pinch)。
这里,轻敲是用户用手指或触笔通过只“轻敲”操作表面一次来执行指示的操作。双轻敲是用户通过两次连续地“轻敲”操作表面来执行指示的操作。
拖曳是用户的手指或触笔在其触摸操作表面期间移动的操作。轻弹是用户的手指或触笔指示操作表面上的一个点、并且其后从该状态开始、在任意方向上快速“轻弹”手指或触笔的操作。
夹捏是用户的两个手指同时触摸操作表面并且随后两个手指打开或靠拢的操作。在该情况下,具体地,两个手指打开的操作被称为伸展(pinch out)操作,并且两个手指靠拢的操作被称为收缩(pinch in)操作。
拖曳和轻弹在操作速度方面不同。然而,它们是在手指等触摸操作表面之后移动操作表面的操作(在操作表面上描绘轨迹的操作),并且是可以根据两种信息(例如移动距离和移动方向)掌握的操作。
为此,在整个说明书中,当通过使用拖曳和轻弹中的任何一个执行相同的处理时,拖曳和轻弹的合称的术语使用词“描绘轨迹操作”。
在本实施例中的成像设备100的显示单元106的显示屏被设置有按压传感器(压力传感器)112。按压传感器112检测显示单元106的显示屏所受到的压力,并且把该检测的输出通知控制单元120。
因此,在本实施例中的成像设备100中,当用户用手指等(在下文中它也仅被称为“手指”)触摸触摸面板107时,将来自于触摸面板107的坐标数据提供给控制单元120。同时,将来自于按压传感器112的检测输出提供给控制单元120。
由此,当在触摸面板107上执行指示操作时,控制单元120不仅可以检测触摸位置而且可以掌握按压该位置的强烈程度。
如上所述,在本实施例中的成像设备100的控制单元120连接到成像设备100的各个单元,以便控制成像设备100的各个单元,并且该控制单元120由所谓的微型计算机构成。
控制单元120由经由CPU总线125彼此连接的CPU(中央处理单元)121、ROM(只读存储器)122、RAM(随机访问存储器)123、EEPROM(电可擦除可编程ROM)124构成。
CPU 121读出并且执行稍后描述的存储在ROM 122中的程序,生成提供给各个单元的控制信号,接收来自于各个单元的数据等,并且处理它们。
如上所述,ROM 122预先存储在CPU 121中执行的各种程序或者用于处理的各种数据等。RAM 123主要用于临时存储在各种处理等中的中间结果的工作区。
EEPROM 124是所谓的非易失性存储器,其即使在成像设备100的电源关断时也能存储信息。例如,EEPROM 124保持由用户设置的各种参数、各种处理的最终结果、或者由于增加功能而新近提供的处理程序或数据。
如上所述,如图1所示,由微型计算机构成的控制单元120连接到操作单元131、外部I/F 132、写入/读取单元134、运动传感器137、GPS接收单元138和时钟电路140。
操作单元131设置有各种操作键,例如调节键、功能键和快门键,并且接收来自于用户的操作输入,并且将操作输入通知给控制单元120。由此,控制单元120响应于经由操作单元131从用户接收的操作输入来控制相应的单元,并且执行与该操作输入对应的处理。
外部I/F 132是基于预定标准(例如,USB(通用串行总线)或IEEE(电气与电子工程师学会)1394)的数字接口。
也就是说,外部I/F 132在将数据转换成可以由它自身处理的格式的数据之后接收来自于连接到输入/输出端子133的外部设备的数据,或者通过将数据转换成预定格式的数据来输出数据。
写入/读取单元134在控制单元120的控制下将数据写入其记录介质135中或者读取存储在记录介质135中的数据。
记录介质135是具有例如几百或更多吉字节的高存储容量的硬盘,并且可以存储大量的运动图像数据和静态图像数据。
另外,记录介质135可以使用存储卡型的可移动存储器,其由半导体存储器、内部的闪速存储器等构成。另外,记录介质135可以使用其它可移动的记录介质,包括例如DVD(数字多功能盘)或CD(压缩盘)的光盘。
运动传感器137检测成像设备100的运动,并且由例如两轴或三轴的加速度传感器构成。运动传感器137检测成像设备100倾斜时的倾斜方向和角度,并且将其通知给控制单元120。
详细来说,运动传感器137可以检测正在哪个方向上使用成像设备100。例如,它可以检测是正通过将成像设备100水平放置而在宽度方向上较长的状态中使用显示屏106G,还是正通过将成像设备100纵向放置而在高度方向上较长的状态中使用显示屏106G。
此外,运动传感器137将在水平方向上抖动成像设备100的情况与在用于检测的垂直方向上抖动成像设备100的情况区分开,并且通知控制单元120。当通过例如碰撞而使运动传感器137受到振动时,运动传感器检测该振动并且通知控制单元120。
GPS接收单元138经由GPS接收天线139从多个卫星接收预定的信号,通过分析该信号检测成像设备100的当前位置,并且通知控制单元120。
通过GPS接收单元138的该功能,成像设备100在拍摄时获得当前位置信息,并且将表示拍摄位置的位置信息(GPS信息)作为元数据添加到图像数据。
可以例如根据经由操作单元131接收的来自于用户的指令来操作或不操作GPS接收单元138。
时钟电路140具有日历功能并且提供当前的年/月/日、当前是|星期几|(day ofthe week)以及当前的时间。此外,它实现必要时计算预定时间间隔的计时器的功能。
通过时钟电路140的功能,可以将拍摄日子的信息(例如,拍摄日期与时间或者拍摄日是星期几)添加到所获取的图像数据。此外,通过时钟电路140的功能,可以实现自动定时器拍摄功能,其可以通过从预定的操作经过预定时间之后自动按压快门来执行拍摄。
通过时钟电路140的功能,可以计数从手指触摸在触摸面板107上以来逝去的时间并且允许控制单元120查阅所计数的时间。
在图1所示出的成像设备100中,虽然在图中未示出,但是镜头单元101包括成像透镜(物镜)、曝光控制机构、焦距控制机构、快门机构等等,并且接收对象的图像以便在放置于下一级的成像元件的传感器平面上形成图像。
成像元件102由成像传感器(成像元件)(例如CCD(电荷耦合器件)或CMOS(互补金属氧化物半导体)图像传感器)构成。成像传感器102接收经由镜头单元101在其传感器平面上形成的图像作为电信号(图像信号)。
在本实施例中的成像设备100中,成像元件102设置有预先确定的单板的滤色器,从而为每一个像素生成R(红色)、G(绿色)和B(蓝色)中的任何一个的信号。
将经由成像元件102接收的图像信号提供给放置在下一级中的预处理单元103。预处理单元103包括CDS(相关双采样)电路、AGC(自动增益控制)电路和A/D(模拟/数字)转换器,并且从成像元件102接收图像信号作为数字数据。
将经由预处理单元103接收的图像信号(图像数据)提供给图像处理单元104。虽然在图中未示出,但是图像处理单元104包括检测器电路、白平衡电路、去马赛克电路、分辨率转换电路或其它图像校正电路。
成像处理单元104首先基于来自预处理电路103的图像数据来生成用于各种控制处理的参数,例如用于光暴露(曝光)(在下文中,仅称为“曝光”)控制、焦距控制或白平衡控制的参数。
在图像处理单元104中生成的参数之中将用于曝光控制的参数和用于焦距控制的参数提供给控制单元120。控制单元120基于来自于图像处理单元104的参数来控制镜头单元102的曝光控制机构或焦距控制机构从而适当地执行曝光或焦距控制。
图像处理单元104对来自于预处理单元103的图像数据进行黑电平调节处理,或者如上所述地基于用于白平衡控制的参数来进行白平衡控制处理。通过控制处理,由来自于预处理单元103的图像数据形成的图像被控制为具有适当的色调。
其后,针对被控制以具有适当色调的图像数据,图像处理单元104进行用于为每一个像素生成RGB数据(三原色数据)的去马赛克处理(同时性处理)、光圈校正处理、伽马(γ)校正处理等。
另外,图像处理单元104进行用于根据所生成的RGB数据来生成亮度信号(Y)和颜色信号(Cb、Cr)的Y/C转换处理、色差处理、分辨率转换处理等,并且生成亮度信号Y以及颜色信号Cb和Cr。
将在图像处理单元104中生成的图像数据(亮度信号Y、颜色信号Cb和Cr)提供给显示处理单元105,在其中所述图像数据被转换为具有用于被提供给显示单元106的格式的图像信号并且随后被提供给显示单元106。
由此,将经由镜头单元101接收的对象的图像显示在显示单元106的显示屏上。用户检查在显示单元106的显示屏上显示的对象的图像并且获取期望的对象的图像。
同时,将在图像处理单元104中生成的亮度信号Y以及颜色信号Cb和Cr提供给压缩处理单元109。在运动图像捕获模式中,当操作了操作单元131的记录键(REC键)时,成像设备100开始将其自身连续接收的图像的图像数据记录在记录介质135上。
换句话说,如上所述,将经由镜头单元101、成像元件102、预处理单元103和图像处理单元104连续接收的图像的图像数据提供给压缩处理单元109。
此外,在静态图像捕获模式中,当操作了操作单元131的快门键时,将在那时已经经由镜头单元101、成像元件102、预处理单元103和图像处理单元104接收的一个屏幕的量的图像数据提供给压缩处理单元109。
压缩处理单元109通过预定的数据压缩方案对已经提供的图像数据进行压缩,并且经由控制单元120将数据压缩的图像数据提供给写入/读取单元134。
压缩处理单元109针对运动画面可以使用MPEG(运动画面专家组)4方案或H.264方案,并且针对静态图像可以使用JPEG方案(联合摄影专家组)等。当然,数据压缩方案不限于此,而是可以使用各种方案。
控制单元120控制写入/读取单元134,并且将来自于压缩处理单元109的数据压缩的图像数据作为文件记录在记录介质135上。以这种方式,成像设备100获取对象的图像并且将用于生成对象的图像的图像数据记录在记录介质135上。
由写入/读取单元134在控制单元120的控制下读取在记录介质135上记录的图像数据。经由控制单元120将从记录介质135读取的图像数据提供给解压缩处理单元110。
解压缩处理单元110通过在数据压缩时使用的数据压缩方案来对提供的图像数据进行解压缩,从而恢复在数据压缩之前的图像数据,并且将解压缩的数据提供给图像生成单元111。
图像生成单元111通过利用来自于解压缩处理单元110的图像数据并且必要时通过利用从控制单元120提供的各种显示数据来生成将在显示单元106的显示屏上显示的图像的图像数据,并且将生成的图像数据提供给显示处理单元105。
显示处理单元105以与它处理来自于图像处理单元104的图像数据时相同的方式将来自于显示图像生成单元111的图像数据转换成具有用于被提供给显示单元106的格式的图像信号,并且随后将其提供给显示单元106。
由此,将与记录在记录介质135上的图像数据对应的图像显示在显示单元106的显示屏上。换句话说,再现了记录在记录介质135上的期望图像的图像数据。
以这种方式,在本实施例中的成像设备100获取对象的图像,并且将其记录在记录介质135上。另外,成像设备100读取要再现的记录在记录介质135上的图像数据,并且在显示单元106的显示屏上显示与有关图像数据对应的图像。
在具有上述配置的成像设备100中,如下所述,可以将作为例如关键字的搜索键(搜索条件)的候选者的信息添加到通过拍摄而记录在记录介质135上的图像文件中。
虽然稍后进行详细描述,但是在本实施例中的成像设备100可以基于诸如添加的关键字的元数据来自动地对通过拍摄记录在记录介质135上的图像数据(图像文件)进行分组。
可以通过分组单元来布置分组的图像数据以便展示给用户。可以在没有复杂操作的情况下由分组单元来确认图像数据,或者可以搜索为多个组所共有的图像数据。
|图像文件|和图像组的配置示例
图2是示出记录在成像设备100的记录介质135上的图像文件的布置示例的图。如图2所示,图像文件具有文件名,该文件名是用于标识每一个文件的标识信息。该文件名例如由控制单元120在拍摄时自动地给出。
将由关键字、GPS信息、图像分析信息、照相机信息、拍摄日期与时间等形成的元数据添加到每一个图像文件。该元数据可以用作与图像数据的搜索键对应的信息。
这里,关键字主要是由用户输入的文本数据。详细来说,关键字包括指示用户曾去拍摄的地点的地名、被获取其图像的人的名字、在用户曾去拍摄的地点处发生的事件名等等,并且可以登记指示有关图像的内容的多个信息。
当与添加有关键字的图像文件的图像数据对应的图像被显示在显示单元106的显示屏上时,经由操作单元131或触摸屏108将关键字输入并且添加到有关的图像文件。
例如,有可能在个人计算机上将诸如关键字的各种元数据添加到图像数据,成像设备100经由输入/输出端子133和外部I/F 132接收它们以将它们记录在记录介质135上。也就是说,成像设备100可以接收使用外部设备添加有诸如关键字的元数据的图像数据,并且可以使用它。
GPS信息是指示在拍摄时的位置的位置信息(经度和纬度的信息),其经由上述GPS接收单元138在拍摄时获得,并且经由控制单元120被添加到图像文件。
图像分析信息适合于特别应用于静态图像。通过使用预定的方案对有关图像文件的图像数据进行图像分析来获得图像分析结果,并且所获得的结果被存储在每一个图像文件中。图像分析通过控制单元120的功能在拍摄之后的适当时刻进行并且随后添加到图像文件。
图像分析信息使用各种方法(例如,边缘检测或颜色分析)通过对每一个图像数据进行数值转换来指示图像的特征,并且使得能够对各个图像之间的成分或各个对象之间的相似性彼此进行比较。
另外,图像分析信息使得能够基于图像分析结果来搜索具有相似人物(面部)的图像、搜索具有相似地点的图像或者搜索在色调或复杂度方面具有类似特征的图像。
另外,图像分析信息是作为图像分析的结果获得的信息,并且还包括各种分析信息,例如人脸在图像中的面积、在图像中人物的数量、在图像中人们微笑的程度以及指示整个图像的特征的信息。
照相机信息包括在拍摄时的光圈和快门速度,并且这种信息由控制单元120保持并且在进行拍摄时由控制单元120添加到图像文件。
拍摄日期与时间由控制单元120经由时钟电路140获得,其是添加到图像文件的日期与时间信息,并且是由年/月/日和时间构成的信息。
图像文件存储用于生成通过拍摄获得的对象的图像的图像数据作为主数据。将以这种方式生成的图像文件记录在成像设备100的记录介质135上。
在本实施例中的成像设备100中,控制单元120可以基于诸如添加的关键字的元数据来根据图2所示出的方式对记录在记录介质135上的图像文件进行分组。
例如,可以生成具有相同的关键字的图像文件的组,或者可以基于GPS信息生成属于同一个地区的图像文件的组。另外,基于图像分析信息,可以生成其中图像彼此相似的图像文件的组,或者可以生成其中图像包含同一个人的图像文件的组。
基于拍摄日期与时间,可以生成与一段时期对应的组,例如,在上周内获取的组、在上个月内获取的组。
图3是示出例如在记录介质135中在成像设备100中自动生成的图像组的布置示例的图。如图3所示,图像组具有用于标识各个组的组名。这些组名由控制单元120在通过执行分组而生成组时自动给出。
另外,每一个图像组具有有关的图像组的标题、创建日期与时间以及其它各种元数据。
标题是指示该图像组基于添加到图像文件的哪种信息而被分组的信息。例如,可以使用在组中使用的关键字、GPS信息、图像分析信息、指示一段时间的信息作为标题。
详细来说,虽然稍后将进行详细描述,例如,对于其中收集具有关键字“Odaiba”(其为一个地名)的图像文件的图像组,“Odaiba”可以被用作标题。此外,对于其中收集了在相对于作为参考日的当前日的过去一周内获取的图像文件的图像组,可以使用“一周”作为标题。
对于其中基于GPS信息收集图像文件的图像组,可以使用由GPS信息指定的地区的地名或者正中心的GPS信息作为标题。此外,对于其中基于图像信息收集图像文件的图像组,可以使用易理解的名字(例如,“相似图像1”或“相似图像2”)作为标题。
创建日期与时间是指示创建有关的图像组时的日期与时间的信息,其由控制单元120从时钟电路140获得。
另外,作为元数据,可以添加可由成像设备100自动给出的信息(例如,图像文件的数量)或者添加由用户输入的注释信息(字符信息)。
在图像组中,存储属于图像组(分组)的各个图像文件的文件名、记录介质上的地址以及拍摄日期与时间。虽然在图3中未示出,但是例如,可以添加指示每一个图像文件是运动图像还是静态图像的分类的信息。
由此,通过对图像文件进行分组而生成的每个图像组存储拍摄日期与时间或者图像文件的种类,并且可以掌握这种图像文件被存储在记录介质上的哪里。
以这种方式,在本实施例中的成像设备100中,在获取图像时,根据图2所示出的方式将通过获取图像而获得的图像数据记录在记录介质135上。
根据图3所示出的方式,将存储在记录介质135中的图像文件分组以便构成用于保持图像组的数据。
其中添加多个关键字的图像文件可以属于多个图像组。同样地,在过去的一周内获取的图像的图像文件不仅属于在过去的一周内获取的图像的组而且属于在过去的一个月内获取的图像的组。因而,在成像设备100中,一个图像文件可以属于多个图像组。
此外,可以预置的时刻(例如,在完成拍摄之后或者紧接在切换到再现模式之后)自动进行分组。当然,可以在用户指定的适当的时刻对所有图像文件进行分组。
在曾经进行过一次分组时,在相对于作为参考的当前时间点的预定的一段时间内(例如,“在过去的一周内”或者“在过去的一个月内”)获取的图像的图像组可以在预定时刻再次被分组。
对于剩余的图像组,当获取新的图像时,可以仅对新的图像进行分组。以这种方式,可以快速完成重复的分组,并且可以减少成像设备100的负担。
此外,如上所述,可以基于作为图像文件的元数据的关键字、GPS信息、图像分析信息、拍摄日期与时间来进行图像文件的分组。由此,可以使用图像文件的各个元数据来进行分组,例如,可以在不将GPS信息(位置信息)转换成关于地名等的信息的情况下使用GPS信息来进行分组。
然而,为了下面描述的方便起见,将描述例如基于关键字和拍摄日期与时间来进行图像文件的分组。也就是说,在成像设备100中,假设将所拍摄的人的名字和所拍摄的地点的名字或地区的名字作为关键字信息添加到通过拍摄获得的图像文件。
控制单元120参考每一个图像文件的关键字信息,将具有相同名字的图像文件分为一组,并且将具有同一地点的名字或同一地区的名字的图像文件分为一组。
此外,控制单元120参考每一个图像文件的拍摄日期与时间,并且基于该拍摄日期与时间对图像文件进行分组,例如,相对于作为参考的现在(当前的时间点),在过去的一周内获取的图像文件的组或在过去的一个月内获取的图像文件的组。
如上所述,在本实施例中,使用作为图像文件的关键字的人名(关于人的信息)、地点的名字或地区的名字(关于地点的信息)、拍摄日期与时间(关于时间的信息)作为分组参考来进行分组。
图像组的显示方式以及使用图像组的方法
将详细描述在本实施例中的成像设备100中进行的浏览在记录介质135上记录的图像数据(图像文件)的方法。在下文中,将描述例如许多运动图像文件已经被记录在成像设备100的记录介质135上并且它们已经被分组以便生成多个图像组。
再现模式中的初始屏幕
在本实施例中的成像设备100具有各种模式,例如运动图像捕获模式、静态图像捕获模式、设置参数的设置模式(维护模式)或存储在记录介质135中的图像文件的再现模式。可以使用操作单元131改变这些各种模式。
在本实施例中的成像设备100中,例如,当在开启时使用操作单元131的模式改变开关变为再现模式时,显示再现模式中的初始屏幕。
当在操作单元131的模式改变开关选择再现模式的状态下开启成像设备100时,成像设备100工作在再现模式并且显示再现模式中的初始屏幕。
图4是示出在可以再现记录的图像文件的再现模式中的初始屏幕(应用主屏幕)的示例的图。
如上所述,如图4所示的再现模式中的初始屏幕是基于如图3所示的在记录介质135中生成的图像组的信息而生成的。
如上所述,在成像设备100中,在预定时刻对通过拍摄记录在记录介质135上的图像文件(图像数据)进行分组。由此,如参考图3所描述的,例如,在记录介质135中生成用于保持各个图像文件所属的图像组的信息。
如上所述,在成像设备100中,将基于作为添加到图像文件的元数据的关键字和拍摄日期与时间来进行分组。添加到记录在记录介质135上的图像文件的关键字通常可以使用所拍摄的人的名字或所拍摄的地点的名字。
在本实施例中的成像设备100中,已经基于作为关键字信息的人物(所拍摄的人的名字)和地点(用户进行拍摄的地点的名字)以及作为时间信息的拍摄日期与时间而进行了分组。
详细来说,在成像设备100中,许多运动图像文件被记录在记录介质135上,如图4所示,其基于“人物”、“地点”和“时间”被分成了九个图像组。
在成像设备100中,基于关键字“人名”,生成了包含名字为“Linda”的人物的图像的组、包含名字为“Tom”的人物的图像的组和包含名字为“Mary”的人物的图像的组。
此外,在成像设备100中,基于关键字“地名”,生成了在“Odaiba”处获取的图像的组、在“品川海滨公园”处获取的图像的组和在“横滨”处获取的图像的组。
此外,在成像设备100中,基于“拍摄日期与时间”,生成了在过去的“一周”内获取的图像的组、在过去的“一个月”内获取的图像的组和在过去的“三个月”内获取的图像的组。
在图4中,显示客体Ob1对应于在“Odaiba”处获取的图像的组。显示客体Ob2对应于包含名字为“Linda”的人物的图像的组。显示客体Ob3对应于包含名字为“Tom”的人物的图像的组。
在图4中,显示客体Ob4对应于在过去的“一周”内获取的图像的组。显示客体Ob5对应于在“品川海滨公园”处获取的图像的组。显示客体Ob6对应于在过去的“三个月”内获取的图像的组。
此外,在图4中,显示客体Ob7对应于在“横滨”处获取的图像的组。显示客体Ob8对应于在过去的“一个月”内获取的图像的组。显示客体Ob9对应于包含名字为“Mary”的人物的图像的组。
如上所述,在图4所示出的再现模式中的初始屏幕中,各个显示客体Ob1-Ob9通过要素“人物”、“地点”和“时间”来分组,并且示出作为具有相同要素(属性)的多个运动图像文件的集合的图像组。
使用图4所示出的再现模式中的初始屏幕,可以将记录在记录介质135上的许多运动图像文件当做可再现的运动图像文件。
图5是示出被分配给每一个图像组并且指的是显示屏上每一个图像组的显示客体Ob的配置的图。如图5所示,显示客体Ob由图像显示区域Ar1和标题显示区域Ar2构成。
显示区域Ar1是用于显示由图像文件的图像数据生成的图像的区域,其中每个图像文件皆属于与有关的显示客体Ob对应的图像组。
如上所述,在本实施例中的成像设备100中,记录在记录介质135上的许多运动图像文件被作为再现的目标。为此,属于与显示客体Ob对应的图像组的运动图像文件的图像数据的运动图像被剪辑以便被再现在图像显示区域Ar1中。
这里,运动图像的被剪辑的再现进行显示,使得可以通过顺序地再现属于有关组的图像文件中的每一个的一部分来识别属于有关图像组的各个运动文件。
详细来说,从预定的位置开始一个接一个地持续一定时间地再现属于有关图像组的各个运动图像文件。在该情况下,作为每一个运动图像文件的再现开始位置的预定位置可以是预置位置,例如运动图像文件的头部(heading)或从头部开始逝去了预定时间之后的位置。
或者,预定的位置可以是通过分析图像数据找到的图像的移动较大的位置或者通过分析与有关运动图像同步再现的音频数据而找到的语音开始升高的位置。
再现范围中的结束位置可以是从再现开始位置逝去了预置时间之后的位置或者通过分析图像数据找到的改变了场景的位置。
此外,基于属于图像组的运动图像文件的数量,可以通过每一个运动图像文件的图像数据设置运动图像的再现时间。另外,根据属于图像组的每一个运动图像文件的数据量,各个图像文件在再现时间方面可以彼此不同。
显示客体Ob的标题区域Ar2显示图3所示出的图像组中的标题。换句话说,它显示为属于由显示客体Ob指示的图像组的图像文件所共有的关键字或者指示时间划分的信息。
如图4所示,各个显示客体Ob1-Ob9在它们的尺寸方面彼此不同。各个显示客体Ob1-Ob9的尺寸对应于属于由各个显示客体指示的图像组的图像文件的数量。
使具有大量图像文件的图像组的显示客体具有更大的直径。因此,基于显示客体Ob的尺寸,掌握在图像组中收集的图像文件的数量,并且例如,可以预测回顾所有图像文件要花费的时间,其在后续处理中还要涉及。
这里,虽然对应的显示客体Ob的尺寸根据属于图像组的图像文件的数量而变化,但是本发明不限于此。例如,显示客体的尺寸可以根据数据的量而变化。
例如,即使当仅有一个图像文件属于图像组时,但是如果该图像文件的获取花费相对较长的时间,则使对应的显示客体的尺寸更大。由此,大致掌握属于图像组的图像文件的图像数据的量,并且例如,可以预测实际的再现时间,其在后续处理还要涉及。
如上所述,在本实施例中的成像设备100中,对于记录在记录介质135上的图像文件,具有相同关键字的图像文件被分组使得属于相同的图像组。
在本实施例中的成像设备100中,使用当前日期作为参考,将图像文件分成在过去的一周内获取的图像的组、在过去的一个月内获取的图像的组和在过去的三个月内获取的图像的组。
详细来说,基于“人物”的图像组可以被说成是包含(获取了其画面的并且)用户自当前的时间点在过去遇见的人的画面场景的集合。
基于“地点”的图像组可以被说成是在(获取了其画面的并且)用户自当前的时间点在过去去过的地点处获取的画面场景或者在现在用户所在的地点处获取的画面场景的集合。
另外,基于“时间”的图像组可以被说成是在回到过去的某一段时间(例如,今天、上周、上个月、最近三个月、最近六个月或去年)中获取的画面场景的集合。
因此,在图4中,显示客体Ob1指的是找到在过去在“Odaiba”获取的所有运动图像文件,并且,在显示客体Ob1的图像显示区域Ar1中,一个接一个地再现在“Odaiba”获取的运动图像文件的每一个运动图像的一部分。
控制单元120通过基于如图3所示生成的图像组的信息控制写入/读取单元134、解压缩处理单元110、显示图像生成单元111和显示处理单元105来显示图4所示出的方式。
控制单元120基于如图3所示生成的每一个图像组的信息而将用于显示与每一个图像组对应的显示客体的信息提供给显示图像生成单元111。显示图像生成单元111基于所提供的信息生成分配给(对应于)每一个图像组的显示客体。在该情况下,可以基于从控制单元120提供的属于每一个图像组的图像文件的数量而确定分配给每一个图像组的显示客体的尺寸。
在这时候,为了在每一个显示客体的图像显示区域Ar1中显示运动图像,控制单元120基于每一个图像组的信息来控制写入/读取单元134,并且从属于每一个图像组的运动图像文件中读取期望量的运动图像数据。
将由写入/读取单元读取的运动图像数据经由控制单元120提供给解压缩处理单元110,在解压缩处理单元110处进行解压缩,并且随后提供给显示图像生成单元111。
显示图像生成单元111在控制单元120的控制下根据对应的显示客体的图像显示区域Ar1来为所提供的运动图像数据调整运动图像的尺寸或形状。显示图像生成单元111使得调整后的运动图像数据刚好符合对应的显示客体的图像显示区域Ar1。
以这种方式,显示图像生成单元111将显示客体分配给要生成的每一个图像组,将其布置在显示屏上的预定位置处,并且生成用于显示的图像数据。
其后,显示图像生成单元111将生成的图像数据提供给显示处理单元105。显示处理单元105使用提供的图像数据来生成提供给显示单元106的图像信号,并且将其提供给显示单元106。
根据图4所示出的方式,在显示单元106的显示屏106G上,显示与各个图像组对应的显示客体。用于显示在每一个显示客体的图像显示区域Ar1中的图像的调整后的运动图像数据被存储在例如显示图像生成单元111中的存储器中,并且被显示图像生成单元111反复地使用。
当在图4所示出的显示状态中,在触摸面板上轻敲指示期望的显示客体的位置从而选择期望的显示客体时,显示屏变成运动图像再现屏幕。
运动图像再现屏幕在整个显示屏上显示用于属于与所选的显示客体对应的图像组的图像文件的运动图像的摘要(digest)再现图像。
控制单元120从属于与所选的显示客体对应的图像组的图像文件中的每一个中顺序地读取期望量的运动图像数据,并且将其提供给解压缩处理单元110。
解压缩处理单元110将所提供的运动图像数据解压缩,并且将解压缩的运动图像数据提供给显示图像生成单元111。显示图像生成单元111使用解压缩的运动图像数据来生成提供给显示处理单元105的图像数据,并且将其提供给显示处理单元105。
如上所述,显示处理单元105使用提供的运动图像数据来生成提供给显示单元106的图像信号,并且将其提供给显示单元106。由此,在显示单元106的显示屏106G上,顺序地持续一定时间地再现属于如上所述选择的图像组的运动图像文件的各个运动图像以便进行摘要再现。
即使在属于所选的图像组的运动图像文件的运动图像的摘要再现的情况下,从预定的位置开始进行运动图像的再现持续一定时间。在该情况下,作为每一个运动图像文件的再现开始位置的预定位置可以是预置位置,例如运动图像文件的头部或从头部开始逝去了预定时间之后的位置。
或者,预定位置可以是通过分析图像数据找到的其中图像的移动较严重的位置或者通过分析与有关的运动图像同步再现的音频数据而找到的语音开始升高的位置。
再现范围中的结束位置可以是从再现开始位置开始逝去了预置时间之后的位置或者通过分析图像数据找到的改变了场景的位置。
此外,基于属于图像组的运动图像文件的数量,可以通过每一个运动图像文件的图像数据设置运动图像的再现时间。另外,根据属于图像组的每一个运动图像文件的数据量,各个图像文件在再现时间方面可以彼此不同。
由此,可以准确地知道哪种运动图像文件属于所选的图像组,以便找到期望的图像文件并且再现它。
可以通过预定的操作(例如通过在期望的图像文件的摘要再现时在触摸面板107上轻敲)来进行仅针对期望的图像文件的再现。
在一个图像组中搜索图像文件
如上所述,在图4所示出的再现模式中的初始屏幕中,当在期望的显示客体上进行轻敲时,进行属于与显示客体对应的图像组的图像文件的摘要再现。
另一方面,可能存在其中在与期望的显示客体对应的图像组中搜索期望的运动图像文件并且再现期望的运动图像数据的情况。为此,在图4所示出的再现模式中的初始屏幕中,如果在手指触摸在触摸面板上的期望显示客体的显示位置处的状态中已经逝去了一定时间,则将显示屏变为针对所选的图像组中的图像文件的搜索屏幕。
图6是示出针对在图像组中的图像文件的搜索屏幕的示例的图。在图4所示出的再现模式中的初始屏幕中,假设用户的手指触摸在触摸面板107上的显示客体Ob8的显示位置处,并且这种状态持续一定时间。
控制单元120基于由它掌握的每一个显示客体在显示屏上的显示位置、从触摸面板107顺序提供的坐标数据和由时钟电路140计数的时间来检测状态。
当控制单元120检测到用户的手指触摸在触摸面板107上的显示客体Ob8的显示位置处、并且该状态持续一定时间时,控制单元120控制使得显示图6所示出的针对图像组中的图像文件的搜索屏幕。
在该情况下,控制单元120基于与在记录介质135中生成的显示客体Ob8对应的图像组的信息来控制写入/读取单元134,并且在属于图像组的运动图像文件中的每一个的头部中读取图像数据。
控制单元120将读取的运动图像数据提供给解压缩处理单元110。解压缩处理单元110将所提供的运动图像数据解压缩,并且将解压缩的运动图像数据提供给显示图像生成单元111。
控制单元120通过使用用于生成准备的显示客体Ob8的信息和从解压缩处理单元110提供的运动图像数据来控制显示图像生成单元111并且生成图6所示出的针对图像组中的图像文件的搜索屏幕。
换句话说,在用户选择的显示客体Ob8的周边中,生成属于有关的图像组的运动图像文件的缩略图像,并且这些缩略图像被螺旋形地布置为显示客体Ob81-Ob87。
在该情况下,控制单元120响应于用户给予显示屏的压力来控制图像文件的缩略图的数量,该压力由设置在显示单元106中的按压传感器112检测。也就是说,与给予显示单元106的显示屏的压力成比例地显示更多属于所选图像组的运动图像文件的缩略图像。
由此,用户可以调整在显示客体Ob8的周边中显示的与运动图像文件对应的缩略图的数量,并且可以搜索与期望的运动图像文件对应的缩略图像。
在关于图像组的信息中,属于图像组的运动图像文件被布置为依照新拍摄日期的顺序存储,并且当更强烈地按压显示屏时,可以显示其拍摄日期更旧的运动图像文件的缩略图像。
在图6所示出的针对图像组中的图像文件的搜索屏幕上,显示了七个属于有关图像组的运动图像文件的缩略图像。如果增大显示屏106G上的压力,则在有关图像组中存在更多运动图像文件的情况下可以如虚线的圆圈所指示地那样显示更多的运动图像文件的缩略图像。
以这种方式,搜索属于期望的图像组的运动图像文件,并且其后,当已经触摸在显示客体Ob8上的手指从其松开时,显示屏变为搜索结果的列表显示。
在这里,考虑给予显示屏106G的压力,但是本发明不限于此。例如,代替检测压力变化或者与检测压力变化一起,可以考虑作为用户用手指触摸显示屏106G的时间的触摸时间。用户用手指触摸显示屏106G的触摸时间可以由计数来自于触摸面板107的检测输出的供应(supply)持续时间的时钟电路140来计数。
图7是示出从图6接下去显示的搜索结果的列表显示的示例的图。在图7所示出的搜索结果的列表显示中,将与作为搜索目标的图像组有关的显示客体Ob8显示在显示屏106G的左边中心处,并且将属于有关图像组的运动图像文件的缩略图像显示在显示屏106G的右边。
在该情况下,如图7所示,放置在要显示在图6所示出的搜索屏幕中的运动图像文件的缩略图像之间的中心处的运动图像文件的缩略图像被放置在显示屏的纵向上的中心。
七个缩略图像Ob81-Ob87被显示在图6所示出的搜索屏幕上。由此,缩略图像Ob83被显示为放置在图7所示出的关于搜索结果的列表显示的显示屏的纵向上的|中心|。
以这种方式,进行图7所示出的搜索结果的列表显示。此外,在图7所示出的搜索结果的列表显示中,与运动图像文件对应的缩略图像可以在显示屏的纵向上滚动。
由此,不仅可以显示观看在图6所示出的搜索屏幕上显示的运动图像文件的缩略图像而且可以显示观看属于有关图像组的所有运动图像文件的缩略图像。
另外,显示方式(型式)是一个示例,并且,可以通过各种方式(例如,从顶部开始渐旧、从底部开始渐旧、从顶部开始渐新、从底部开始渐新)来显示缩略图像。
在图7所示出的搜索结果的列表显示中,当轻敲期望的运动图像文件的缩略图像时,再现运动图像文件的运动图像。
控制单元120掌握与运动图像文件对应的缩略图被显示在显示屏上的哪一部分中。因此,指定通过轻敲选择的缩略图像,并且指定要再现与缩略图像对应的运动图像文件。
由控制单元120使用写入/读取单元134、解压缩处理单元110、显示图像生成单元111和显示处理单元105来再现所选的运动图像文件。
由于图7所示出的搜索结果的列表显示通过使用用于显示图6所示出的针对图像组中的图像文件的搜索屏幕的数据来生成,因此没有必要读取新的图像数据。
在图6和图7所示出的显示客体Ob8的显示中,以与图4所示出的相同的方式,可以在图像显示区域Ar1中摘要再现属于有关图像组的运动图像文件的运动图像。
在图7所示出的搜索结果的列表显示中,选择最左边上方的图标“后退”使得显示屏能够回到图4所示出的再现模式中的初始屏幕。
此外,在图6和图7所示出的示例中,虽然在显示客体Ob8的周边中显示运动图像文件的缩略图像,但是缩略图像可以是静态图像或者再现一定时间的运动图像。
此外,在这里,已经描述了将属于图像组的运动图像文件布置为依新拍摄日期的顺序存储,并且当更强烈地按压显示屏时,可以显示拍摄日期更旧的运动图像文件的缩略图像。然而,本发明不限于此。
相反,将属于图像组的运动图像文件布置为依较旧的拍摄日期的顺序存储,并且当更强烈地按压显示屏时,可以显示拍摄日期更新的运动图像文件的缩略图像。
在通过分组生成的每一个图像组中,例如找到针对被包括在关键字中的地点的名字或地区的名字的拍摄频率,并且图像文件被布置为基于该拍摄频率来存储。
在该情况下,基于地点,按针对获取图像的地点的高拍摄频率的次序或按低拍摄频率的次序来调用缩略图像,并且当更强烈地按压显示屏时,可以显示与在拍摄频率更低或更高的地点处获取的运动图像文件对应的缩略图。
在通过分组生成的每一个组中,例如,找到针对被包括在关键字中的人名的出现频率,并且图像文件被布置为基于该出现频率来存储。
在该情况下,基于感兴趣的人物的图像,按针对该人物的图像的高频率的次序或按低频率的次序来调用缩略图像,并且当更强烈地按压显示屏时,可以显示与包含出现频率更低或更高的人物的图像的运动图像文件对应的缩略图。
通过使用GPS信息并且使用当前位置作为参考,可以首先显示在更接近当前位置的地点处获取的运动图像文件的缩略图,或者,可以首先显示在更远离当前位置的地点处获取的运动图像文件的缩略图。
另外,基于运动图像文件的图像分析信息,可以首先出现包含较多人物的运动图像文件的缩略图像,或者可以首先出现包含较少人物的运动图像文件的缩略图像。
以这种方式,根据压力而显示的与运动图像文件对应的缩略图像可以基于添加到运动图像文件的关键字、拍摄日期与时间、GPS信息和图像分析信息来以适当的次序显示。
在多个组中AND搜索图像文件
在参考图6和图7描述的示例中,针对一个图像组中的图像文件进行搜索。然而,可能期望进行针对通常属于多个图像组的图像文件的搜索,也就是说,AND搜索。
在本实施例中的成像设备100中,可以进行其目标为多个组的针对图像文件的AND搜索。
首先,将描述目标为多个组的针对图像文件的AND搜索的概况。假设在如图4所示显示再现模式中的初始屏幕时,手指触摸在触摸面板107上的某一个显示客体的显示位置处。
在该情况下,与所选的显示客体无关的其它显示客体从显示器上去掉。也就是说,去除针对仅具有不包括由与形成与所选显示客体对应的图像组的参考(人名、地点的名字、拍摄日期与时间)共有的信息的图像文件的图像组的显示客体。
例如,如图4所示,假定显示再现模式中的初始屏幕。此外,假设用户在三周前与Mary和Linda一起在Odaiba获取运动图像并且除了该画面之外没有其它在Odaiba处获取的画面(运动图像文件)。
在该情况下,在图4所示出的再现模式中的初始屏幕中,例如,手指触摸在标题为“Odaiba”的显示客体Ob1上。在该情况下,去除标题为“Tom”的显示客体Ob3、标题为“一周”的显示客体Ob4、标题为“品川海滨公园”的显示客体Ob5和标题为“横滨”的显示客体Ob7。
因此,在该情况下,对于标题为“Odaiba”的显示客体Ob1,剩余四个显示客体。也就是说,它们是标题为“Linda”的显示客体Ob2、标题为“三个月”的显示客体Ob6、标题为“一个月”的显示客体Ob8和标题为“Mary”的显示客体Ob9。
因此,剩余的显示客体意味着用户在过去的一个月内与Linda和Mary一起去了Odaiba。反过来说,它们间接地意味着用户在过去的一周内没有去Odaiba,用户没有与Tom一起去Odaiba,并且Odaiba不同于品川海滨公园和横滨。
这向用户清楚显示了,可以在对应于用户所选的显示客体的图像组与任何其它图像组之间进行AND搜索。
假设在剩余的显示客体之中选择另一显示客体。在该情况下,去除针对仅具有不包括由与形成与新选择的显示客体对应的图像组的参考(人名、地点的名字、拍摄日期与时间)所共有的信息的图像文件的图像组的显示客体。
因而,可以使AND搜索的范围变窄。如果操作以这种方式选择的显示客体使得它们接合在一起,则可以通过以针对显示客体的图像组作为目标来进行AND搜索。
将描述以多个组为目标的针对图像文件的AND搜索的详细示例。
图8-11是示出以多个组为目标的针对图像文件的AND搜索的详细示例的图。
在图4所示出的再现模式中的初始模式中,假设手指触摸在触摸面板107上的标题为“Mary”的显示客体Ob9的显示位置处。在该情况下,控制单元120基于关于如图3所示配置的每一个图像组的信息来参考属于每一个图像组的图像文件的关键字,并且指定具有关键字“Mary”的图像文件所属的图像组。
控制单元120控制显示图像生成单元111以去除除了具有关键字“Mary”的图像文件所属的图像组外的图像组的显示客体。
由此,在该示例中,如图8所示,在关键字中包括词“Mary”的图像文件所属的图像组有三个。
换句话说,它们是分别与标题为“Odaiba”的显示客体Ob1、标题为“Linda”的显示客体Ob2和标题为“三个月”的显示客体Ob6对应的图像组。
在图8所示出的状态中,在每一个显示客体的图像显示区域Ar1中进行与标题为“Mary”的显示客体Ob9有关的运动图像文件的运动图像的摘要再现。
在显示客体Ob1、Ob2和Ob6的每一个图像显示区域Ar1中进行具有关键字“Mary”的运动图像文件的摘要再现。
也在该情况下的处理中,如上所述,用于显示的图像数据等已经在显示图像生成单元111中被准备好。由此,控制单元120控制显示图像生成单元111仅针对具有关键字“Mary”的运动图像文件来进行摘要再现。
在图8所示的状态中,假设用户用手指触摸在触摸面板107的显示客体Ob6的显示位置处。
在该情况下,控制单元120基于关于如图3所示配置的每一个图像组的信息来参考属于图像组的图像文件的拍摄日期与时间,并且指定具有相对于当前时间点在过去的三个月内获取的运动图像文件的图像组。
去除除了针对指定的图像组的显示客体之外的显示客体。换句话说,仅显示针对指定的图像组的显示客体。
因此,在该示例中,如图9所示,具有相对于当前时间点在过去的三个月内获取的运动图像文件的图像组仅有两个。
这两个图像组是标题为“三个月”的显示客体Ob6和标题为“Mary”的显示客体Ob9。因此,在该示例的情况下,在标题为“Odaiba”的显示客体Ob1和标题为“Linda”的显示客体Ob2中没有在过去的三个月内获取的图像文件,而是仅有在那之前获取的图像文件。
还是在图9所示出的状态中,在显示客体Ob6的图像显示区域Ar1中进行与标题为“Mary”的显示客体Ob9有关的运动图像文件的运动图像的摘要再现。
此外,在图9所示出的状态中,在显示客体Ob9的图像显示区域Ar1中进行在过去的三个月内获取的图像文件的摘要再现。
如果实际上要在图9所示出的状态中进行AND搜索,则通过用手指拖曳显示客体Ob6和显示客体Ob9来进行。
如图10所示,显示客体Ob6和显示客体Ob9已经彼此接触以使它们接合在一起。控制单元120保持每一个显示客体的显示位置或尺寸。同时,控制单元120基于来自于触摸面板107的坐标数据而准确地掌握手指在触摸面板107上的触摸位置。
因此,基于这种信息控制显示图像生成单元111,通过拖曳来移动显示客体Ob6和显示客体Ob9的显示位置,并且如图10所示,这两个显示客体被接合在一起。
当显示客体Ob6和显示客体Ob9被接合在一起时,为了清楚地将其通知给用户,例如,在接合部分中显示用黑色圆圈标记的接合完成标记D1。还可以由控制显示图像生成单元111的控制单元120来进行该显示。
当显示客体Ob6和显示客体Ob9被接合在一起时,控制单元120指定被共同包括在与显示客体Ob6对应的图像组和与显示客体Ob9对应的图像组中的运动图像文件。
换句话说,控制单元120通过将关于与显示客体Ob6对应的图像组的信息和关于与显示客体Ob9对应的图像组的信息进行匹配来指定共同包括的图像文件。
以与参考图6描述的针对图像组中的图像文件的搜索屏幕的情形相同的方式,生成与被包括在这两个图像组中的运动图像文件对应的缩略图像,其如图10中的缩略图A1-A3所示出地显示。
也是在该示例的情况下,当被包括在这两个图像组中的运动图像文件的数量较大时,可以根据指示显示客体的用户的手指的压力来控制所显示的缩略图像的数量。
在该情况下,以与参考图6描述的情形相同的方式,可以按获取运动图像文件的日期与时间、针对拍摄地点的拍摄频率、针对人物的拍摄频率、使用GPS信息的相对于当前位置更近/更远的拍摄地点、使用图像分析信息的包含在运动图像文件中的人物的数量等的次序进行显示。
根据压力而显示的与运动图像文件对应的缩略图像可以基于添加到运动图像文件的关键字、拍摄日期与时间、GPS信息和图像分析信息来以适当的次序显示。
此外,假设,在图10所示出的状态中,拖曳显示客体Ob6和Ob9使得这两个显示客体分开以便取消接合。也就是说,它们回到图9所示出的状态。在该情况下,取消AND搜索以回到搜索之前的状态。
如果在图9所示出的状态中正选择例如显示客体Ob6的用户手指从触摸面板107上松开,则返回图8所示出的状态,并且可以再次选择AND搜索条件。
换句话说,如果在图9所示出的状态中任何一个手指从触摸面板107上松开,则返回前一步骤,并且可以再次选择AND搜索条件。
如果在图10所示出的状态中从触摸面板107上松开触摸在触摸面板107上的手指之后已经逝去了一定的时间,如图11所示地进行搜索结果的列表显示。图11所示出的搜索结果的列表显示具有与图7所示出的搜索结果的列表显示相同的基本配置。
然而,在接合状态中在显示屏106G的左边显示针对作为搜索目标的接合的图像组的显示客体。这向用户清楚地显示已经进行了AND搜索以及搜索条件。
在该示例的情况下,用户通过在显示的搜索结果的列表显示中与运动图像文件对应的缩略图像A1-A3中的任何一个上轻敲来选择要再现的运动图像文件。
由此,控制单元120读取与轻敲的缩略图像对应的运动图像文件的图像数据,并且使用解压缩处理单元110、显示图像生成单元111、显示处理单元105和显示单元106来再现期望的运动图像。
在图11所示出的AND搜索结果的列表显示中,由与显示客体Ob6对应的图像组和与显示客体Ob9对应的图像组所共有的图像文件的所有缩略图像都是显示目标。
因此,如果与显示客体Ob6对应的图像组和与显示客体Ob9对应的图像组所共有的图像文件的数量较大,则缩略图像可以在纵向上滚动。这与参考图7描述的搜索结果的列表显示相同。
在图11所示出的AND搜索结果的列表显示中,选择最左边上方的图标“后退”使得显示屏能够回到图4所示出的再现模式中的初始屏幕。
此外,在图10和图11所示出的示例中,虽然在接合的显示客体的周边中显示运动图像文件的缩略图像,但是缩略图像可以是静态图像或者再现一定时间的运动图像。
在多个组中AND搜索图像文件的另一示例
在参考图8-11描述的AND搜索中至少两个手指等同时触摸在触摸面板107上。然而,视情况而定,可能期望仅使用一个手指来进行AND搜索。
在该示例中的成像设备100中,可以仅使用一个手指来进行AND搜索。现在将参考图12-14描述使用一个手指进行AND搜索的情形的示例。
也在该示例的情况下,如图12所示,在图4所示出的再现模式中的初始屏幕中初始选择期望的显示客体、由此使作为搜索目标的显示客体范围变窄的情况与参考图8描述的情况相同。
换句话说,在图12中,示出了在图4所示出的再现模式中的初始屏幕中初始选择显示客体Ob9的状态。当进行AND搜索时,如图12中的箭头所指示的,用手指在触摸面板107上触摸显示客体Ob9进行拖曳。
如图13所示,初始选择的显示客体Ob9与接下来将选择的显示客体(在该示例中为显示客体Ob6)重叠。
如果要接合重叠的显示客体,则如图13中的箭头所指示的,用户在重叠的显示客体Ob6和显示客体Ob9的显示位置上轻敲。
控制单元120把在重叠的显示客体上的轻敲识别为接合重叠的显示客体的指令。如图14所示,控制单元120将被指令要接合的显示客体Ob6和显示客体Ob9接合在一起来显示。
在图14中,进行被指令要接合的显示客体Ob6和显示客体Ob9的接合,并且通过接合完成标记D1来指示这两个显示客体的接合。
控制单元120识别到显示客体Ob6和显示客体Ob9已经被接合在一起。在图14所示出的状态中,手指触摸并且按压在显示客体Ob6和显示客体Ob9中的任何一个的显示位置上,由此可以在参考图10描述的方式中进行AND搜索。
其后,如果在手指从触摸面板107上松开之后已经逝去了一定时间,则可以如图11所示地进行搜索结果的列表显示。
也在该示例的情况下,用户通过在显示的搜索结果的列表显示中的与运动图像文件对应的缩略图像A1-A3中的任何一个上轻敲来选择要再现的运动图像文件。
由此,控制单元120读取与轻敲的缩略图像对应的运动图像文件的图像数据,并且使用解压缩处理单元110、显示图像生成单元111、显示处理单元105和显示单元106来再现期望的运动图像。
在上述的AND搜索的情况下,通过将两个显示客体接合在一起来进行AND搜索,但是本发明不限于此。接合的显示客体的数量可以大于一个,只要在它们具有共同的关键字的这种情形下就可以进行AND搜索。
在成像设备100中的再现模式中的处理的概括
将参考图15-19中的流程图来概括根据该实施例的在成像设备100中进行的上述再现模式中的处理。当成像设备100处于再现模式时主要由控制单元120执行图15-19所示出的处理。
如上所述,在本实施例中的成像设备100中,如果进行拍摄,根据图2示出的方式在记录介质135中生成图像文件。以预定的定时将图像文件分组,并且在记录介质135中生成参考图3描述的关于图像组的信息。
当成像设备100处于再现模式时,控制单元120基于在记录介质135中生成的图3所示出的关于图像组的信息来控制各个单元,并且显示应用主屏幕(再现模式中的初始屏幕)(步骤S1)。
如上面参考图4所描述的,再现模式中的初始屏幕是基于关于图像组的信息而由与各个图像组对应的显示客体构成的。在该情况下,控制单元120控制各个单元,例如写入/读取单元134、解压缩处理单元110、显示图像生成单元111和显示处理单元105,使得在显示单元106的显示屏上显示再现模式中的初始屏幕。
控制单元120检查来自于触摸面板107的坐标数据,并且确定在显示屏106G上显示的显示客体上是否存在触摸操作(指示操作)(步骤S2)。
当控制单元120在步骤S2的确定处理中确定在显示客体上没有触摸操作时,它重复步骤S2处的处理并且等待直到进行了触摸操作。
当控制单元120在步骤S2的确定处理中确定在显示客体上有触摸操作时,控制单元120如参考图8所描述的那样布置显示客体的显示(步骤S3)。
详细来说,在步骤S3,控制单元120仅显示可AND链接到用户指示的显示客体的图像组的显示客体。
也就是说,控制单元120仅显示包括图像文件的图像组的显示客体,所述显示文件具有与用户指示的显示客体对应的图像组的标题相关联的信息。
如参考图8所描述的,当选择标题为“Mary”的显示客体时,只显示具有在关键字中包括词“Mary”的图像文件的图像组的显示客体。
同时,在步骤S3处,控制单元120在每一个显示的显示客体中的图像显示区域Ar1中进行与由用户选择的显示客体有关的图像文件的摘要再现。
换句话说,当选择标题为“Mary”的显示客体时,在每一个显示客体的图像显示区域Ar1中通过顺序地再现在关键字中包括词“Mary”的图像文件的图像来进行摘要再现。
在步骤S3处,控制单元120通过使用时钟电路140的功能来计数自用户开始触摸显示客体以来逝去的时间。
控制单元120确定用户是否继续触摸显示客体(步骤S4)。
在步骤S4的确定处理中,当确定不继续触摸操作时,控制单元120执行在整个显示屏106上的针对与初始选择的显示客体对应的图像组的摘要再现(步骤S5)。
还通过控制单元120控制写入/读取单元134、解压缩处理单元110、显示图像生成单元111、显示处理单元105和显示单元106来进行步骤S5的处理。
控制单元120确定是否选择了图标“后退”(返回)(步骤S6)。在步骤S6的确定处理中,当确定没有选择图标“后退”(返回)时,继续针对与初始选择的显示客体对应的图像组的摘要再现,并且重复步骤S6的确定处理。
当在步骤S6的确定处理中确定选择了图标“后退”(返回)时,控制单元120从步骤S1开始进行处理,并且使显示屏能够回到再现模式中的初始屏幕。
当在步骤S4的确定处理中确定继续触摸操作时,控制单元120确定是否在另一显示客体上存在触摸操作(指示操作)(步骤S7)。
如参考图9所描述的,步骤S7的确定处理是确定是否同时选择多个显示客体(也就是说,执行所谓的多触摸操作)的处理。
当在步骤S7的确定处理中确定在另一显示客体上没有触摸操作时,确定自在步骤S2处初始检测到触摸操作以来逝去的时间T是否等于或大于预置的一定时间t(步骤S8)。
当在步骤S8的确定处理中确定触摸操作的时间T超过一定时间t时,流程进行到图16所示出的步骤S9处的处理。在步骤S8的确定处理中,当确定时间T不超过一定时间t时,流程进行到图17所示出的步骤S16处的处理。
当在步骤S8的确定处理中确定时间T超过一定时间t时,控制单元120进行图16所示出的处理,并且执行在与连续选择等于或大于一定时间t的显示客体对应的图像组中的搜索(步骤S9)。
在步骤S9处的处理是参考图6描述的处理,并且控制单元120首先只显示连续选择等于或大于一定时间t的显示客体。控制单元120根据用户在显示屏106G上的压力来在显示客体的周边中显示属于与有关显示客体对应的图像组的图像文件的缩略图像。
例如,在步骤S9处,假设在图像组的信息中按新拍摄日期与时间的次序登记图像文件,并且从拍摄日期与时间较新的图像文件的缩略图开始顺序地进行显示。在该情况下,如果进一步强烈地按压显示屏106G,则还显示拍摄日期与时间更旧的图像文件的缩略图像。
相反,例如,假设在图像组的信息中按旧拍摄日期与时间的次序登记图像文件,并且从拍摄日期与时间较旧的图像文件的缩略图开始顺序地进行显示。在该情况下,如果更强烈地按压显示屏106G,则还显示拍摄日期与时间更新的图像文件的缩略图像。
也通过控制单元120控制写入/读取单元134、解压缩处理单元110、显示图像生成单元111、显示处理单元105等来进行步骤S9的处理。
如上所述,在步骤S9处,可以考虑用户用手指触摸显示屏106G的时间T,代替检测压力变化或与检测压力变化一起。
控制单元120确定是否终止了用户在初始选择的显示客体上的触摸(步骤S10)。当在步骤S10的确定处理中确定用户在初始选择的显示客体上的触摸没有终止时,控制单元120重复从步骤S9开始的处理。在该情况下,可以继续在所选的图像组中的搜索。
在步骤S10的确定处理中,当确定用户在初始选择的显示客体上的触摸终止时,控制单元120进行如参考图7所描述的搜索结果的列表显示(步骤S11)。
控制单元120确定用户是否在搜索结果的列表显示中选择了所显示的图像文件的缩略图(步骤S12)。在步骤S12的确定处理中,当确定没有选择缩略图时,确定是否选择了图标“后退”(返回)(步骤S13)。
在步骤S13的确定处理中,当确定没有选择图标“后退”(返回)时,控制单元120重复从步骤S12开始的处理。
此外,在步骤S13的确定处理中,当确定选择了图标“后退”(返回)时,控制单元120进行从步骤S1开始的处理,并且使显示屏能够回到再现模式中的初始屏幕。
在步骤S13的确定处理中,当确定选择了缩略图时,控制单元120再现与所选的缩略图对应的图像文件(步骤S14)。
在步骤S14处的处理是控制单元120控制写入/读取单元134、解压缩处理单元110、显示图像生成单元111和显示处理单元105并且从记录介质135中读取所指示的要再现的图像文件的处理。
其后,控制单元120确定是否选择了图标“后退”(返回)(步骤S15),并且通过重复步骤S15的确定处理而进入等待状态直到选择了该图标。另外,在步骤S15的确定处理中,当确定选择了图标“后退”(返回)时,处理从步骤S11开始重复,并且可以从搜索结果的列表显示中选择图像文件。
在图15所示出的步骤S8的确定处理中,当确定时间T不超过一定时间t时,控制单元120执行在图17中的处理,并且确定是否进行了移动显示客体的操作(步骤S16)。
步骤S16的确定处理是根据通过触摸面板107输入的坐标数据来确定用户触摸显示客体的手指是否进行了拖曳的处理。
在步骤S16的确定处理中,当确定没有执行移动操作时,控制单元120重复从图15所示出的步骤S4开始的处理。
在步骤S16的确定处理中,当确定执行了移动操作时,控制单元120在显示屏上移动所选的显示客体的显示位置(步骤S17)。
在步骤S16到S17处的处理对应于例如如参考图12所描述的、通过拖曳移动显示客体的处理。
控制单元120确定是否终止了对显示客体的触摸操作(步骤S18)。当确定该触摸操作没有被终止时,控制单元120重复从步骤S17开始的处理,并且继续执行显示客体的移动操作。
在步骤S18的确定处理中,当确定要终止对显示客体的触摸操作时,确定对显示屏106G上显示的显示客体是否存在新的触摸操作(指示操作)(步骤S19)。在步骤S19处的该处理与在步骤S2处的处理相同。
在步骤S19的确定处理中,当确定没有新的触摸操作时,控制单元120重复在步骤S19处的处理并且等待直到执行新的触摸操作。
当在步骤S19的确定处理中确定存在新的触摸操作时,控制单元120确定在显示屏上的触摸位置处显示客体是否彼此重叠(步骤S20)。
在步骤S20的确定处理中,当确定在用户在显示屏上的触摸位置处没有重叠显示的显示客体时,由于只选择了一个显示客体,因此进行从图15所示出的步骤S3开始的处理。
在步骤S20的确定处理中,当确定显示客体在用户在显示屏上的触摸位置处彼此重叠时,则确定为参考图13描述的用于指示接合的操作。
在该情况下,如参考图14所描述的,将重叠的显示客体接合来显示(步骤S21)。接下来,进行稍后描述的图18中的步骤S27处的处理,并且可以进行以接合的图像组为目标的AND搜索。
在图15所示出的步骤S7的确定处理中,当确定触摸了另一显示客体时,进行图18所示出的处理。控制单元120如参考图9所描述地布置显示客体的显示(步骤S22)。
在步骤S22处的处理基本上与图15所示出的S3处的处理相同。换句话说,控制单元120基于例如初始选择的显示客体和随后选择的显示客体,仅显示用于可AND链接的图像组的显示客体。
换句话说,在步骤S22处,基于用户选择的多个显示客体,只显示用于可AND链接的图像组的显示客体。
同时,控制单元120在每一个显示的显示客体的图像显示区域Ar1中进行与由用户选择的显示客体有关的图像文件的摘要再现。
接下来,如参考图9和10所描述的,控制单元120确定是否通过拖曳接合了多个所选的显示客体(步骤S23)。
在步骤S23的确定处理中,当确定没有接合显示客体时,控制单元120确定是否取消正选择显示客体的所有在触摸面板107上的用户的触摸操作(步骤S24)。
在步骤S24处,当确定取消所有触摸操作时,控制单元120重复从图15中的步骤S1开始的处理,并且使显示屏能够回到再现模式中的初始屏幕。
在步骤S24的确定处理中,当确定不取消所有触摸操作时,控制单元120确定所选的显示客体的数量是否为一(步骤S25)。
步骤S25的确定处理是确定在例如如图9所示地选择了两个显示客体时是否取消了对两者之一的选择的处理。
在步骤S25的确定处理中,当确定所选的显示客体的数量为一时,重复从图15中的步骤S3开始的处理。由此,只显示使得能够进行AND搜索的图像组以及对应于所选的显示客体的图像组的显示客体,由此选择它。
当在步骤S25的确定处理中确定所选的显示客体的数量不是一时,确定从步骤S23所选的显示客体的数量是否减少或增大(步骤S26)。
在步骤S26的确定处理中,当确定从步骤S23所选的显示客体的数量减少或增大时,控制单元120重复从步骤S22开始的处理。换句话说,基于用户选择的多个显示客体,只显示可AND链接的图像组的显示客体。
在步骤S26的确定处理中,当确定从步骤S23所选的显示客体的数量没有减少或增大(没有变化)时,控制单元120重复从步骤S23开始的处理。换句话说,基于用户选择的多个显示客体,只显示可AND链接的图像组的显示客体。
当在步骤S23的确定处理中确定要接合多个所选的显示客体并且在图17所示出的步骤S21处进行接合处理时,控制单元120进行在步骤S27处的处理。
根据在多个接合的显示客体的显示位置处的对显示屏的压力,搜索与接合的显示客体有关的图像文件,并且显示与其对应的缩略图(步骤S27)。在步骤S27处的该处理是参考图10描述的处理。
确定是否终止了用户对触摸面板107的触摸操作(步骤S28)。当在步骤S28的确定处理中确定触摸操作没有终止时,控制单元120确定是否保持所选的显示客体的接合状态(步骤S29)。
在步骤S29的确定处理中,当确定保持接合状态时,控制单元120重复从步骤S27开始的处理,并且继续进行AND搜索。
在步骤S29的确定处理中,当确定不保持接合状态时,控制单元120重复从步骤S23开始的处理,并且处理显示客体的接合状态的变化。
当在步骤S28的确定处理中确定触摸操作终止时,控制单元120执行图19所示出的处理。另外,如参考图11所描述的,控制单元120进行搜索结果的列表显示(步骤S30)。
控制单元120确定用户是否在搜索结果的列表显示中选择了所显示的图像文件的缩略图(步骤S31)。当在步骤S31的确定处理中确定没有选择缩略图时,确定是否选择了图标“后退”(返回)(步骤S32)。
当在步骤S32的确定处理中确定没有选择图标“后退”(返回)时,控制单元120重复从步骤S31开始的处理。
当在步骤S32的确定处理中确定选择了图标“后退”(返回)时,控制单元120重复从步骤S1开始的处理,并且使显示屏能够回到再现模式中的初始屏幕。
当在步骤S31的确定处理中确定选择了缩略图时,控制单元120再现与所选的缩略图对应的图像文件(步骤S33)。
在步骤S33处的处理是控制单元120控制写入/读取单元134、解压缩处理单元110、显示图像生成单元111和显示处理单元105并且从记录介质135中读取所指示的要再现的图像文件的处理。
其后,控制单元120确定是否选择了图标“后退”(返回)(步骤S34),并且通过重复步骤S34的确定处理而进入等待状态直到选择了该图标。另外,在步骤S34的确定处理中,当确定选择了图标“后退”(返回)时,处理从步骤S30开始重复,并且可以从搜索结果的列表显示中选择图像文件。
以这种方式,在本实施例中的成像设备100中,如上所述,将指示所拍摄的人物或所拍摄的地点等的关键字添加到通过拍摄获得的图像文件中。另外,将指示拍摄日期与时间的信息自动添加到图像文件中。
由此,在成像设备100中,基于关于“人物”、“地点”、“时间”等的信息来将图像文件自动地分组,并且因此用户可以观看每一个组从而掌握每一个组的内容。
基本上,仅仅通过在触摸面板107上的触摸操作,就可以搜索期望的图像文件、指定期望的图像文件并且再现期望的图像文件。
因此,在搜索时,不进行麻烦的操作(例如输入关键字)。另外,用户不需要对图像文件进行划分并且将其存储在用户生成的文件夹中。
由此,可以从记录在记录介质上的大量图像文件中简单并且快速地找到期望的图像文件。
如可以从上述流程图的描述中看出的,在AND搜索的情况下,接合的显示客体的数量可以大于一,只要可以在它们具有共同的关键字的情形下进行AND搜索即可。
实施例的效果
在上述实施例中,当从记录在记录介质上的大量图像内容中搜索期望的图像内容时,不需要输入诸如字符串的复杂的搜索条件、或者执行GUI菜单的操作等等。实现了可以通过使用一个手指的手势操作来简单地搜索内容的用户界面。
另外,可以根据接触显示客体的手指给予显示屏的压力来搜索用户预测的内容的数量。
通过手势操作,不但可以在单个条件下进行搜索,而且可以直观且有效地进行用于缩小范围的组合条件的AND搜索。
在该情况下,GUI菜单的操作等不是必需的,并且可以通过使用根据上下文示出的搜索条件自身作为操作目标来直观且有效地执行缩小范围条件的选择。
修改的示例
在上述实施例中的成像设备100中,本发明已经被应用于搜索记录在记录介质135上的图像文件的情形。然而,本发明并不是仅仅在搜索记录在记录介质上的内容方面是有效的。
例如,即使在从菜单中选择期望的条目时,也可以通过应用本发明的实施例来有效地选择期望的条目。因此,例如,将描述如下情形,其中在具有多个功能并且能针对每一个功能进行各种设置的电子设备中,迅速地进行在期望的功能中的期望的设置。
在下面描述的示例中,存在记录和再现运动图像的功能(视频功能)以及记录和再现静态图像的功能(照片功能)。在具有图1所示出的配置的成像设备100中,假设成像设备100还具有音乐再现功能和电视功能。
在这里,电视功能是其中设置用于接收数字电视广播的模块、接收和解调制数字电视广播并且将画面显示在显示单元106的显示屏上以便被观看的功能。
另外,音乐再现功能通过使用用于再现存储在记录介质135中的音乐和用于解码所选的音乐数据的模块来实现。用户通过设置在成像设备中的扬声器或者通过连接到音频输出端子(在图1中未示出)的耳机听音乐。
因此,与图1所示出的成像设备100相比,在该示例中的成像设备100具有用于接收数字电视广播的模块和用于再现音乐的模块,并且将参考图1进行其描述。
假设下面所述的成像设备100经由外部接口132连接到各种电子设备,接收并发送各种数据,并且在那时设置通信环境。
已经由便携式电话终端等实现了这种多功能的电子设备。例如,还提供了具有电话功能、因特网访问功能、记录和再现运动图像的功能、记录和再现静态图像的功能、再现音乐的功能、接收电视广播的功能等等的便携式电话终端。
通常,在每一个照片、视频和电视中针对画面的设置(诸如图像质量)都不同。同样地,在每一个音乐再现、视频和电视中针对音频数据的设置都不同。然而,在当前状态中,在用于选择与每一个功能有关的设置条目的菜单中,将可设置的条目显示为列表,因此存在难以找到期望的条目的问题。
因此,在本修改的示例中的成像设备100中,针对每一个功能登记可设置的大条目。例如,假设,对于再现音乐的功能,“音频设置”和“通信设置”这两个条目是可设置的,并且对于视频功能,“音频设置”、“画面设置”和“通信设置”这三个条目是可设置的。
另外,假设,对于电视功能,“音频设置”和“画面设置”这两个条目是可设置的,并且对于照片功能,“画面设置”和“通信设置”这两个条目是可设置的。
假设针对各个相应功能来登记用于各个可设置的大条目的可设置的详细条目。例如,假设,在“画面设置”中,作为与照片功能有关的可设置的详细条目,设置诸如“图像尺寸设置”、“压缩比设置”、“降噪”和“色调”的详细条目。此外,假设,在“画面设置”中,设置与视频功能或电视功能有关的详细条目。
同样地,在“音频设置”或“通信设置”中设置与各个相应功能有关的可设置的详细条目。
基于这种预设置,当成像设备100切换到设置模式时,控制单元120显示设置屏幕,并且使得能够快速找到并设置期望的功能和期望的设置条目。
图20到23是示出设置模式中的处理的图。如上所述,在该示例中的成像设备100在切换到设置模式时基于预先登记的关于用于每一个功能的可设置的大条目的信息和关于用于有关的大条目的可设置的详细条目的信息来生成并显示设置模式中的初始屏幕。
在该示例中,图20是示出在设置模式中的初始屏幕的示例的图。在图20中,显示客体ObX1、ObX2、ObX3和ObX4中的每一个对应于关于用于每一个功能的可设置的大条目的信息。另外,在图20中,显示客体ObY1、ObY2和ObY3中的每一个对应于关于用于每一个大条目的可设置的详细条目的信息。
这里,例如,将描述其中进行图像质量设置作为用于照片功能的设置的情形。如上所述,对于照片功能,“画面设置”和“通信设置”这两个条目是可设置的。因此,“画面设置”和“通信设置”对应于显示客体ObX4。
在图20所示出的在设置模式中的初始屏幕中,假设手指在触摸面板107上触摸显示客体ObX4的显示位置处。在该情况下,如图21所示,控制单元120基于登记的与照片功能有关的大条目,仅仅显示供“画面设置”之用的显示客体ObY2和供“通信设置”之用的显示客体ObY3。
不显示供“音频设置”之用的显示客体ObY1,其没有要设置的与照片功能有关的详细条目。为此,即使“音频设置”不是可设置的,也没有诸如选择供“音频设置”之用的显示客体ObY1的不方便。
如上所述,用户期望的设置是图像质量调整,因此用户在图21所示出的状态中用手指在供“画面设置”之用的显示客体ObY2的显示位置处触摸触摸面板107。
如图22所示,通过用手指等在显示上进行触摸来拖曳显示客体ObX4和ObY2,将这两个显示客体接合在一起。
在该情况下,控制单元120显示用于上述的“图像尺寸设置”、“压缩比设置”、“降噪”和“色调”的客体,它们是属于“画面设置”的详细条目并且已经被设置为“照片功能”中的可设置的详细条目。
在图22中,客体ObZ1与“图像尺寸设置”有关,并且客体ObZ2与“压缩比设置”有关。此外,客体ObZ3与“降噪”有关,并且客体ObZ4与“色调”有关。
作为客体ObZ1、客体ObZ2、客体ObZ3和客体ObZ4,显示与它们中的每一个对应的例示图像等。
可以通过改变给予显示屏的压力来控制与详细条目对应的客体的数量,其因此对存在许多可设置的详细条目时搜索期望的详细设置条目的情形有用。
其后,如果用户从触摸面板107上松开手指,控制单元120进行图23所示出的搜索结果的列表显示。在图23所示出的搜索结果的列表显示中,选择客体ObZ1、客体ObZ2、客体ObZ3和客体ObZ4中的一个。控制单元120使屏幕能变为用于设置所选的细节条目的屏幕。
用户可以使用用于设置有关细节条目的屏幕来设置期望的细节条目。
以这种方式,即使当进行期望的设置时,用户经由触摸面板仅仅选择用于某一个功能的某一个设置,由此可靠地指定可设置的细节条目,并且准确和快速地进行期望的设置。
不仅增大了多媒体设备而且增加了在一个设备中设置的设置条目的数量;然而,提供仅仅示出有关设置条目使得用户有效地到达期望的条目的机构。
在参考图20-23描述的修改的示例中,以与图15-19示出的流程图中的处理相同的方式进行基本处理。也就是说,当切换到设置模式时,显示在设置模式中的初始屏幕(图20)(步骤S1),并且以与图15-19所示出的相同的方式进行后续处理。
根据本发明实施例的方法和程序
如可以从上述实施例的描述中看出,在成像设备100中,将记录在记录介质135上的图像文件分组以便生成图像组,由控制单元120控制的显示图像生成单元111等生成分配给各个图像组的显示客体,并且通过控制单元120和显示图像生成单元111合作在显示单元105的显示屏上显示分配给各个图像组的显示客体。
根据本发明实施例的显示处理方法包括:分组过程,其中分组机构根据多个可选择的条目中的每一个条目具有的信息来分组使得每一个条目属于一个或多个组;分配过程,其中分配机构生成与有关条目对应的显示客体并且将这些显示客体分配到通过在分组过程中对多个可选择的条目的分组而生成的相应的组;以及显示处理过程,其中显示处理机构在显示元件的显示屏上显示在分配过程中分配给组的显示客体。
在图1中,可以由控制单元120实现用双线标记的显示图像生成单元111和解压缩处理单元110的功能。由此,根据本发明实施例的显示处理程序,其是使用安装在显示处理设备中的计算机在控制单元120中运行的计算机可读程序,其包括:分组步骤,根据多个可选择的条目中的每一个条目具有的信息来分组使得每一个条目属于一个或多个组;分配步骤,生成与有关条目对应的显示客体并且将该显示客体分配到通过在分组步骤中对该多个可选择的条目的分组而生成的相应的组;以及显示处理步骤,在显示元件的显示屏上显示在分配步骤中分配给组的显示客体。
参考图15-19中的流程图描述的方法是根据本发明实施例的详细的显示处理方法,并且根据图15-19中的流程图创建的程序是根据本发明实施例的详细的显示处理程序。
其它
在上述实施例中,控制单元120实现分组机构的功能,显示图像生成单元111主要实现分配机构的功能,并且控制单元120和显示图像生成单元111主要实现显示处理机构的功能。
显示单元106和触摸面板107实现选择输入接收机构和选择机构的功能。控制单元120和显示图像生成单元111主要实现条目显示处理机构、列表显示处理机构以及第一和第二显示控制机构的功能。
另外,控制单元120和显示图像生成单元111主要实现客体显示控制机构和图像信息显示控制机构的功能。
在上述实施例中,经由触摸面板107接收来自于用户的指示输入,但是本发明不限于此。还可以通过例如使用诸如所谓的鼠标的定点设备进行的指示输入或使用设置在键盘中的箭头键等移动光标来接收输入的指示。
虽然已经作为示例描述了在上述实施例中成像设备主要处理运动图像文件的情形,但是本发明不限于此。处理的数据不仅可以是运动图像文件,而且可以是静态图像文件、诸如具有缩略图像或示例图像的音乐内容的声音文件、文本文件、游戏程序等。
虽然已经作为示例描述了应用于成像设备的上述实施例的情形,但是本发明不限于此。本发明的实施例适用于其中各种设置是必需的的处理各种内容的电子设备或具有多种功能的电子设备。
详细来说,本发明的实施例适合于使用在便携式电话终端、游戏机、个人计算机、使用各种记录介质的再现设备或记录/再现设备、便携式音乐再现设备等中。
本申请含有与2009年7月27日提交到日本专利局的日本优先权专利申请JP 2009-173967中所公开的那些有关的主题,上述专利申请的整个内容通过参考被合并在此。
本领域技术人员应当理解,根据设计要求以及其它因素可能进行各种修改、组合、子组合和替换,只要它们在所附权利要求或其等同物的范围之内。

Claims (18)

1.一种显示处理设备,包括:
显示元件;
分组装置,用于根据多个可选择的条目中的每一个条目具有的信息来分组,使得每一个条目属于一个或多个组;
分配装置,用于生成与有关条目对应的显示客体并且将所述显示客体分配给通过分组装置对所述多个可选择的条目的分组而生成的各个组;以及
显示处理装置,用于在所述显示元件的显示屏上显示由所述分配装置分配给组的显示客体。
2.根据权利要求1所述的显示处理设备,还包括:
选择输入接收装置,用于接收在显示元件的显示屏上显示的显示客体的选择输入;以及
条目显示处理装置,用于在经由选择输入接收装置选择在显示元件的显示屏上显示的显示客体持续一定时间时,进行与属于与所选择的显示客体对应的组的可选择的条目有关的显示。
3.根据权利要求2所述的显示处理设备,其中该条目显示处理装置根据经由选择输入接收装置从用户接收的选择输入的方式来改变作为显示目标的可选择的条目的数量。
4.根据权利要求2或3所述的显示处理设备,还包括:
列表显示处理装置,用于在完成经由选择输入接收装置进行的显示客体的选择输入时,显示与由条目显示处理装置显示的可选择的条目有关的列表。
5.根据权利要求1所述的显示处理设备,还包括:
选择输入接收装置,用于接收在显示元件的显示屏上显示的显示客体之中的一个或多个显示客体的选择输入;以及
第一显示控制装置,用于进行控制,使得在经由选择输入接收装置接收到在显示元件的显示屏上显示的显示客体的选择输入时,仅仅显示所选的显示客体和包括具有与分配给所选的对应显示客体的可选择的条目所具有的信息相同的信息的可选择的条目的显示客体。
6.根据权利要求5所述的显示处理设备,还包括:
第二显示控制装置,用于在两个或更多个显示客体经由选择输入接收装置被选择并且被接合在一起时,在显示元件的显示屏上显示在分配给所选的所述两个或更多个显示客体的可选择的条目之中的具有相同信息的可选择的条目。
7.根据权利要求6所述的显示处理设备,其中该第二显示控制装置根据经由选择输入接收装置从用户接收的选择输入的方式来改变作为显示目标的可选择的条目的数量。
8.根据权利要求6或7所述的显示处理设备,还包括:
列表显示处理装置,用于在完成经由选择输入接收装置进行的显示客体的选择输入时显示与由第二显示控制装置显示的可选择的条目有关的列表。
9.根据权利要求1到8中的任何一个所述的显示处理设备,其中所述可选择的条目是存储在存储装置中的图像数据。
10.根据权利要求1所述的显示处理设备,其中所述可选择的条目是存储在存储装置中的图像数据,并且
其中每一个条目具有的作为分组的参考的信息是时间信息、人物信息和地点信息中的一个或多个。
11.根据权利要求1所述的显示处理设备,其中所述可选择的条目是存储在存储装置中的图像数据,
其中所述显示客体设置有图像的显示区域,并且
其中所述显示处理设备还包括客体显示控制装置,用于通过属于对应组的图像数据在对应显示区域中顺序地显示图像。
12.根据权利要求1所述的显示处理设备,其中所述可选择的条目是存储在存储装置中的图像数据,并且
其中所述显示处理设备还包括:
选择装置,用于选择显示客体;以及
图像信息显示控制装置,用于在显示元件的显示屏上通过属于与经由选择装置所选的显示客体对应的组的图像数据顺序地显示图像。
13.根据权利要求3所述的显示处理设备,其中所述可选择的条目是存储在存储装置中的图像数据,并且
其中所述条目显示处理装置基于时间信息、人物信息和地点信息中的任何一个来控制所显示的条目的显示顺序。
14.根据权利要求5所述的显示处理设备,其中所述可选择的条目是存储在存储装置中的图像数据,并且
其中所述显示客体设置有图像的显示区域,以及
其中所述显示处理设备还包括客体显示控制装置,用于通过属于与经由选择输入接收装置选择的显示客体对应的组的图像数据在对应显示区域中显示图像。
15.根据权利要求1到8中的任何一个所述的显示处理设备,其中所述可选择的条目是与可执行功能中的每一个对应的条目。
16.一种显示处理方法,包含以下步骤:
分组步骤,由分组装置根据多个可选择的条目中的每一个条目具有的信息进行分组,使得每一个条目属于一个或多个组;
分配步骤,由分配装置生成与有关条目对应的显示客体并且将所述显示客体分配到在分组步骤中通过对所述多个可选择的条目的分组而生成的各个组;以及
显示处理步骤,由显示处理装置在显示元件的显示屏上显示在所述分配步骤中分配到组的显示客体。
17.一种计算机可读的显示处理程序,使安装在显示处理设备上的计算机能够执行以下步骤:
分组步骤,根据多个可选择的条目中的每一个条目具有的信息进行分组,使得每一个条目属于一个或多个组;
分配步骤,生成与有关条目对应的显示客体并且将所述显示客体分配到在分组步骤中通过对所述多个可选择的条目的分组而生成的各个组;以及
显示处理步骤,在显示元件的显示屏上显示在分配步骤中分配到组的显示客体。
18.一种显示处理设备,包括:
显示元件;
分组机构,被配置为根据多个可选择的条目中的每一个条目具有的信息进行分组,使得每一个条目属于一个或多个组;
分配机构,被配置为生成与有关条目对应的显示客体并且将所述显示客体分配到通过分组机构对所述多个可选择的条目的分组而生成的各个组;以及
显示处理机构,被配置为在显示元件的显示屏上显示由分配机构分配到组的显示客体。
CN2010102339002A 2009-07-27 2010-07-20 显示处理设备、显示处理方法和显示处理程序 Pending CN101968790A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2009-173967 2009-07-27
JP2009173967A JP5552767B2 (ja) 2009-07-27 2009-07-27 表示処理装置、表示処理方法および表示処理プログラム

Publications (1)

Publication Number Publication Date
CN101968790A true CN101968790A (zh) 2011-02-09

Family

ID=43498363

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2010102339002A Pending CN101968790A (zh) 2009-07-27 2010-07-20 显示处理设备、显示处理方法和显示处理程序

Country Status (3)

Country Link
US (1) US20110022982A1 (zh)
JP (1) JP5552767B2 (zh)
CN (1) CN101968790A (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102982123A (zh) * 2012-11-13 2013-03-20 深圳市爱渡飞科技有限公司 一种信息搜索方法及相关设备
CN103098008A (zh) * 2011-08-31 2013-05-08 乐天株式会社 信息处理装置、信息处理装置的控制方法、程序及信息存储介质
CN104035686A (zh) * 2013-03-08 2014-09-10 联想(北京)有限公司 一种文件传输方法及装置
CN104321732A (zh) * 2012-09-13 2015-01-28 株式会社Ntt都科摩 用户接口装置、搜索方法和程序

Families Citing this family (90)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8289400B2 (en) * 2009-06-05 2012-10-16 Apple Inc. Image capturing device having continuous image capture
US8645872B2 (en) * 2010-11-30 2014-02-04 Verizon Patent And Licensing Inc. User interfaces for facilitating merging and splitting of communication sessions
US9679404B2 (en) 2010-12-23 2017-06-13 Microsoft Technology Licensing, Llc Techniques for dynamic layout of presentation tiles on a grid
US20120166953A1 (en) * 2010-12-23 2012-06-28 Microsoft Corporation Techniques for electronic aggregation of information
US9436685B2 (en) 2010-12-23 2016-09-06 Microsoft Technology Licensing, Llc Techniques for electronic aggregation of information
KR101723642B1 (ko) 2011-01-31 2017-04-19 삼성전자주식회사 파노라마 이미지를 촬영하는 촬영 기기 및 그 파노라마 촬영 방법
US9715485B2 (en) 2011-03-28 2017-07-25 Microsoft Technology Licensing, Llc Techniques for electronic aggregation of information
JP5670255B2 (ja) 2011-05-27 2015-02-18 京セラ株式会社 表示機器
JP2012256105A (ja) * 2011-06-07 2012-12-27 Sony Corp 表示装置、オブジェクト表示方法、及びプログラム
JP5864144B2 (ja) * 2011-06-28 2016-02-17 京セラ株式会社 表示機器
JP4929414B1 (ja) * 2011-08-31 2012-05-09 楽天株式会社 情報処理装置、情報処理装置の制御方法、プログラム、及び情報記憶媒体
KR101812585B1 (ko) * 2012-01-02 2017-12-27 삼성전자주식회사 Ui 제공 방법 및 이를 적용한 영상 촬영 장치
JP2013140502A (ja) * 2012-01-05 2013-07-18 Dainippon Printing Co Ltd Icカード
USD682304S1 (en) 2012-01-06 2013-05-14 Path, Inc. Display screen with graphical user interface
US9672493B2 (en) * 2012-01-19 2017-06-06 International Business Machines Corporation Systems and methods for detecting and managing recurring electronic communications
US20150042676A1 (en) * 2012-03-06 2015-02-12 Nec Casio Mobile Communications, Ltd. Terminal device and method for controlling terminal device
KR101952260B1 (ko) * 2012-04-03 2019-02-26 삼성전자주식회사 다수의 동영상 썸네일을 동시에 표시하기 위한 영상 재생 장치 및 방법
CN102681847B (zh) * 2012-04-28 2015-06-03 华为终端有限公司 触屏终端对象处理方法及触屏终端
JP5502943B2 (ja) * 2012-06-29 2014-05-28 楽天株式会社 情報処理装置、認証装置、情報処理方法及び情報処理プログラム
US10529014B2 (en) 2012-07-12 2020-01-07 Mx Technologies, Inc. Dynamically resizing bubbles for display in different-sized two-dimensional viewing areas of different computer display devices
US10872374B2 (en) 2012-07-12 2020-12-22 Mx Technologies, Inc. Dynamically resizing bubbles for display in different-sized two-dimensional viewing areas of different computer display devices
JP6066602B2 (ja) 2012-07-13 2017-01-25 株式会社ソニー・インタラクティブエンタテインメント 処理装置
JP6351219B2 (ja) * 2012-08-23 2018-07-04 キヤノン株式会社 画像検索装置、画像検索方法及びプログラム
US10713730B2 (en) 2012-09-11 2020-07-14 Mx Technologies, Inc. Meter for graphically representing relative status in a parent-child relationship and method for use thereof
JP5836494B2 (ja) * 2012-09-13 2015-12-24 株式会社Nttドコモ ユーザインタフェース装置、検索方法及びプログラム
US10013671B2 (en) * 2012-12-04 2018-07-03 Sap Se Electronic worksheet with reference-specific data display
US9477376B1 (en) * 2012-12-19 2016-10-25 Google Inc. Prioritizing content based on user frequency
JP6232706B2 (ja) * 2013-02-05 2017-11-22 コニカミノルタ株式会社 情報表示装置、画像形成装置、情報表示装置の制御方法、および情報表示装置の制御プログラム
KR20140100727A (ko) 2013-02-07 2014-08-18 엘지전자 주식회사 전자 기기 및 전자 기기의 제어 방법
USD725138S1 (en) * 2013-03-14 2015-03-24 Ijet International, Inc. Display screen or portion thereof with graphical user interface
USD737319S1 (en) * 2013-06-09 2015-08-25 Apple Inc. Display screen or portion thereof with graphical user interface
USD737847S1 (en) * 2013-06-10 2015-09-01 Apple Inc. Display screen or portion thereof with graphical user interface
USD750130S1 (en) * 2013-06-10 2016-02-23 Apple Inc. Display screen or portion thereof with graphical user interface
JP5765372B2 (ja) 2013-06-18 2015-08-19 コニカミノルタ株式会社 表示装置、表示装置の制御方法、および表示装置の制御プログラム
USD757740S1 (en) * 2013-06-20 2016-05-31 Samsung Electronics Co., Ltd. Display screen or portion thereof with graphical user interface
US9477879B2 (en) * 2013-06-28 2016-10-25 Canon Kabushiki Kaisha Information processing apparatus, information processing method, and storage medium for obtaining a relationship between pieces of contents from use history information about the contents
JP6207260B2 (ja) * 2013-06-28 2017-10-04 キヤノン株式会社 情報処理装置、情報処理方法及びプログラム
USD752107S1 (en) * 2013-09-03 2016-03-22 Samsung Electronics Co., Ltd. Display screen or portion thereof with icon
US11544778B2 (en) 2013-09-09 2023-01-03 Mx Technologies, Inc. Creating an intuitive visual plan for achieving financial goals
USD740307S1 (en) * 2013-10-16 2015-10-06 Star*Club, Inc. Computer display screen with graphical user interface
US9600479B2 (en) * 2014-01-31 2017-03-21 Ricoh Company, Ltd. Electronic document retrieval and reporting with review cost and/or time estimation
USD744528S1 (en) * 2013-12-18 2015-12-01 Aliphcom Display screen or portion thereof with animated graphical user interface
USD769930S1 (en) * 2013-12-18 2016-10-25 Aliphcom Display screen or portion thereof with animated graphical user interface
US9304657B2 (en) 2013-12-31 2016-04-05 Abbyy Development Llc Audio tagging
USD762682S1 (en) * 2014-01-17 2016-08-02 Beats Music, Llc Display screen or portion thereof with animated graphical user interface
USD746859S1 (en) * 2014-01-30 2016-01-05 Aol Inc. Display screen with an animated graphical user interface
US9449000B2 (en) 2014-01-31 2016-09-20 Ricoh Company, Ltd. Electronic document retrieval and reporting using tagging analysis and/or logical custodians
USD763306S1 (en) * 2014-02-21 2016-08-09 Samsung Electronics Co., Ltd. Display screen or portion thereof with transitional graphical user interface
GB201406023D0 (en) * 2014-04-03 2014-05-21 Sony Corp A method, system, server and client
USD766283S1 (en) * 2014-04-23 2016-09-13 Google Inc. Display panel with a computer icon
US9880717B1 (en) 2014-06-23 2018-01-30 Google Llc Account switching
USD777768S1 (en) 2014-06-23 2017-01-31 Google Inc. Display screen with graphical user interface for account switching by tap
USD778311S1 (en) * 2014-06-23 2017-02-07 Google Inc. Display screen with graphical user interface for account switching by swipe
CN105227811A (zh) * 2014-06-30 2016-01-06 卡西欧计算机株式会社 图像生成装置以及图像生成方法
KR20160015838A (ko) * 2014-07-31 2016-02-15 삼성전자주식회사 컨텐츠 분류 방법 및 이를 위한 디바이스
USD735754S1 (en) 2014-09-02 2015-08-04 Apple Inc. Display screen or portion thereof with graphical user interface
USD762693S1 (en) 2014-09-03 2016-08-02 Apple Inc. Display screen or portion thereof with graphical user interface
USD752083S1 (en) 2014-09-09 2016-03-22 Mx Technologies, Inc. Display screen or portion thereof with a graphical user interface
CN105824840B (zh) * 2015-01-07 2019-07-16 阿里巴巴集团控股有限公司 一种用于区域标签管理的方法及装置
USD771667S1 (en) * 2015-01-20 2016-11-15 Microsoft Corporation Display screen with graphical user interface
USD769279S1 (en) * 2015-01-20 2016-10-18 Microsoft Corporation Display screen with graphical user interface
KR101611388B1 (ko) * 2015-02-04 2016-04-11 네이버 주식회사 태그를 활용한 검색 서비스 제공 방법 및 시스템
US10026333B2 (en) 2015-02-24 2018-07-17 Alexandra Rose HUFFMAN Educational balancing game
USD791826S1 (en) * 2015-02-24 2017-07-11 Linkedin Corporation Display screen or portion thereof with a graphical user interface
USD765098S1 (en) 2015-03-06 2016-08-30 Apple Inc. Display screen or portion thereof with graphical user interface
USD771670S1 (en) 2015-03-09 2016-11-15 Apple Inc. Display screen or portion thereof with animated graphical user interface
USD795917S1 (en) 2015-05-17 2017-08-29 Google Inc. Display screen with an animated graphical user interface
USD772269S1 (en) 2015-06-05 2016-11-22 Apple Inc. Display screen or portion thereof with graphical user interface
USD802620S1 (en) * 2015-08-12 2017-11-14 Samsung Electronics Co., Ltd. Display screen or portion thereof with animiated graphical user interface
USD831693S1 (en) * 2016-01-05 2018-10-23 Lg Electronics Inc. Display screen with animated graphical user interface
USD831692S1 (en) * 2016-01-05 2018-10-23 Lg Electronics Inc. Display screen with animated graphical user interface
USD855649S1 (en) * 2016-02-19 2019-08-06 Sony Corporation Display screen or portion thereof with animated graphical user interface
USD911385S1 (en) 2016-02-19 2021-02-23 Sony Corporation Display panel or screen or portion thereof with animated graphical user interface
US11061892B2 (en) * 2016-07-18 2021-07-13 State Street Corporation Techniques for automated database query generation
USD804504S1 (en) * 2016-08-30 2017-12-05 Sorenson Ip Holdings, Llc Display screen or a portion thereof with graphical user interface
USD808417S1 (en) * 2016-09-15 2018-01-23 General Electric Company Display screen or portion thereof with transitional graphical user interface
USD839912S1 (en) 2016-09-23 2019-02-05 Google Llc Display screen or portion thereof with new user start screen
USD813249S1 (en) * 2017-02-22 2018-03-20 Banuba Limited Display screen with an animated graphical user interface
CN107256109B (zh) * 2017-05-27 2021-03-16 北京小米移动软件有限公司 信息显示方法、装置及终端
JP1602697S (zh) * 2017-06-29 2018-04-23
USD908135S1 (en) * 2017-10-06 2021-01-19 Google Llc Display screen with shelf folders graphical user interface or portion thereof
USD871442S1 (en) * 2017-12-15 2019-12-31 Facebook, Inc. Display screen with animated graphical user interface
USD853438S1 (en) * 2017-12-18 2019-07-09 Facebook, Inc. Display screen with animated graphical user interface
WO2020026316A1 (ja) * 2018-07-30 2020-02-06 富士通株式会社 表示制御プログラム、装置、及び方法
USD882615S1 (en) 2018-09-06 2020-04-28 Apple Inc. Electronic device with animated graphical user interface
USD954730S1 (en) * 2019-03-06 2022-06-14 Ibble, Inc. Display screen having a graphical user interface
USD945472S1 (en) * 2019-03-27 2022-03-08 Staples, Inc. Display screen or portion thereof with a transitional graphical user interface
JP7309430B2 (ja) * 2019-04-18 2023-07-18 キヤノン株式会社 電子機器、電子機器の制御方法、プログラム、記憶媒体
USD965005S1 (en) * 2020-07-24 2022-09-27 Samsung Electronics Co., Ltd. Display screen or portion thereof with transitional graphical user interface
USD973071S1 (en) * 2021-05-22 2022-12-20 Airbnb, Inc. Display screen with animated graphical user interface

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101059814A (zh) * 2006-04-17 2007-10-24 株式会社理光 图像处理设备与图像处理方法
CN101107603A (zh) * 2005-01-20 2008-01-16 皇家飞利浦电子股份有限公司 一种用于图像浏览的用户界面

Family Cites Families (33)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07104766B2 (ja) * 1991-10-28 1995-11-13 インターナショナル・ビジネス・マシーンズ・コーポレイション データ処理システムのメニューから複数のオブジェクトを表示する方法及び装置
EP0955591A3 (en) * 1992-04-30 2004-05-12 Apple Computer, Inc. Method and apparatus for organizing information in a computer system
JP2710547B2 (ja) * 1994-02-15 1998-02-10 インターナショナル・ビジネス・マシーンズ・コーポレイション グラフィカル・ユーザ・インターフェース
US6003034A (en) * 1995-05-16 1999-12-14 Tuli; Raja Singh Linking of multiple icons to data units
US6169575B1 (en) * 1996-09-26 2001-01-02 Flashpoint Technology, Inc. Method and system for controlled time-based image group formation
US6121968A (en) * 1998-06-17 2000-09-19 Microsoft Corporation Adaptive menus
US8028249B2 (en) * 2001-05-23 2011-09-27 Eastman Kodak Company Method and system for browsing large digital multimedia object collections
US8549434B2 (en) * 2001-10-18 2013-10-01 Microsoft Corporation Method for graphical representation of a content collection
JP2003196316A (ja) * 2001-12-28 2003-07-11 Atsushi Matsushita 情報検索アウェアネスシステム
JP2004139246A (ja) * 2002-10-16 2004-05-13 Canon Inc 画像検索装置、画像検索方法、プログラム、及び記憶媒体
US20040130636A1 (en) * 2003-01-06 2004-07-08 Schinner Charles E. Electronic image intent attribute
US7360175B2 (en) * 2003-10-03 2008-04-15 Lexisnexis, A Division Of Reed Elsevier Inc. Hierarchical, multilevel, expand and collapse navigation aid for hierarchical structures
JP3944160B2 (ja) * 2003-12-25 2007-07-11 キヤノン株式会社 撮像装置、情報処理装置、それらの制御方法及びプログラム
US8108430B2 (en) * 2004-04-30 2012-01-31 Microsoft Corporation Carousel control for metadata navigation and assignment
SE0401737D0 (sv) * 2004-07-03 2004-07-03 Tomas Hultgren Verktyg för kompetenssökning och utökad lösningsmängd vid utvecklings- och produktionstillämpningar
KR100703690B1 (ko) * 2004-11-19 2007-04-05 삼성전자주식회사 스킨 이미지를 사용하여 아이콘을 그룹별로 관리하는사용자 인터페이스 및 방법
US7683889B2 (en) * 2004-12-21 2010-03-23 Microsoft Corporation Pressure based selection
US20060206459A1 (en) * 2005-03-14 2006-09-14 Microsoft Corporation Creation of boolean queries by direct manipulation
US7689933B1 (en) * 2005-11-14 2010-03-30 Adobe Systems Inc. Methods and apparatus to preview content
US7503009B2 (en) * 2005-12-29 2009-03-10 Sap Ag Multifunctional icon in icon-driven computer system
US7644373B2 (en) * 2006-01-23 2010-01-05 Microsoft Corporation User interface for viewing clusters of images
JP4885602B2 (ja) * 2006-04-25 2012-02-29 富士フイルム株式会社 画像再生装置ならびにその制御方法およびその制御プログラム
JP4674726B2 (ja) * 2006-09-21 2011-04-20 株式会社ソニー・コンピュータエンタテインメント ファイルの管理方法および情報処理装置
US7921139B2 (en) * 2006-12-01 2011-04-05 Whitserve Llc System for sequentially opening and displaying files in a directory
JP2008146453A (ja) * 2006-12-12 2008-06-26 Sony Corp 映像信号出力装置、操作入力処理方法
US20080163119A1 (en) * 2006-12-28 2008-07-03 Samsung Electronics Co., Ltd. Method for providing menu and multimedia device using the same
US20080163118A1 (en) * 2006-12-29 2008-07-03 Jason Wolf Representation of file relationships
US7689916B1 (en) * 2007-03-27 2010-03-30 Avaya, Inc. Automatically generating, and providing multiple levels of, tooltip information over time
US7843454B1 (en) * 2007-04-25 2010-11-30 Adobe Systems Incorporated Animated preview of images
US8086996B2 (en) * 2007-05-22 2011-12-27 International Business Machines Corporation Binding an image descriptor of a graphical object to a text descriptor
US8185839B2 (en) * 2007-06-09 2012-05-22 Apple Inc. Browsing or searching user interfaces and other aspects
US8812986B2 (en) * 2008-05-23 2014-08-19 At&T Intellectual Property I, Lp Multimedia content information display methods and device
KR100969790B1 (ko) * 2008-09-02 2010-07-15 엘지전자 주식회사 이동단말기 및 그 컨텐츠 합성방법

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101107603A (zh) * 2005-01-20 2008-01-16 皇家飞利浦电子股份有限公司 一种用于图像浏览的用户界面
CN101059814A (zh) * 2006-04-17 2007-10-24 株式会社理光 图像处理设备与图像处理方法

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103098008A (zh) * 2011-08-31 2013-05-08 乐天株式会社 信息处理装置、信息处理装置的控制方法、程序及信息存储介质
US9423948B2 (en) 2011-08-31 2016-08-23 Rakuten, Inc. Information processing device, control method for information processing device, program, and information storage medium for determining collision between objects on a display screen
CN103098008B (zh) * 2011-08-31 2017-03-08 乐天株式会社 信息处理装置、信息处理装置的控制方法
US9619134B2 (en) 2011-08-31 2017-04-11 Rakuten, Inc. Information processing device, control method for information processing device, program, and information storage medium
CN104321732A (zh) * 2012-09-13 2015-01-28 株式会社Ntt都科摩 用户接口装置、搜索方法和程序
CN102982123A (zh) * 2012-11-13 2013-03-20 深圳市爱渡飞科技有限公司 一种信息搜索方法及相关设备
CN104035686A (zh) * 2013-03-08 2014-09-10 联想(北京)有限公司 一种文件传输方法及装置
CN104035686B (zh) * 2013-03-08 2017-05-24 联想(北京)有限公司 一种文件传输方法及装置

Also Published As

Publication number Publication date
JP2011028534A (ja) 2011-02-10
JP5552767B2 (ja) 2014-07-16
US20110022982A1 (en) 2011-01-27

Similar Documents

Publication Publication Date Title
CN101968790A (zh) 显示处理设备、显示处理方法和显示处理程序
JP4752897B2 (ja) 画像処理装置、画像表示方法および画像表示プログラム
EP2192498B1 (en) Image processing apparatus, image displaying method, and image displaying program
CN100583969C (zh) 图片显示控制设备和图片显示控制方法
JP4752900B2 (ja) 画像処理装置、画像表示方法および画像表示プログラム
US7716604B2 (en) Apparatus with thumbnail display
US8875045B2 (en) Display control device, display control method, and program
JP4735995B2 (ja) 画像処理装置、画像表示方法および画像表示プログラム
CN102572271A (zh) 图像显示控制设备和图像显示控制方法
CN107870999B (zh) 多媒体播放方法、装置、存储介质及电子设备
CN102200992A (zh) 图像显示设备和图像显示方法
US8683336B2 (en) Inter-device operation interface, device control terminal, and program
WO2007089630A2 (en) Multimode system for organizing content data files
JP2010140391A (ja) 画像処理装置、画像処理方法および画像処理プログラム
US8456491B2 (en) System to highlight differences in thumbnail images, mobile phone including system, and method
EP2854126A1 (en) Display control apparatus, display control system, a method of controlling display, and program
JP4703245B2 (ja) 情報閲覧装置
US20070182822A1 (en) Media Composer
US20100157097A1 (en) Voice recordable terminal and its image processing method
CN101800870A (zh) 浏览影像文件的方法
US20050134708A1 (en) Control method of digital camera
CN1828507A (zh) 激活可点击对象的用户接口方法及执行该方法的重放设备
KR100964799B1 (ko) 영상 데이터의 파일명 생성 방법
US8416221B2 (en) Method and apparatus for selecting media files

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C12 Rejection of a patent application after its publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20110209