CN101322396A - 数字图像的回放 - Google Patents

数字图像的回放 Download PDF

Info

Publication number
CN101322396A
CN101322396A CNA2006800455227A CN200680045522A CN101322396A CN 101322396 A CN101322396 A CN 101322396A CN A2006800455227 A CNA2006800455227 A CN A2006800455227A CN 200680045522 A CN200680045522 A CN 200680045522A CN 101322396 A CN101322396 A CN 101322396A
Authority
CN
China
Prior art keywords
image
cloth
width
digital picture
images
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CNA2006800455227A
Other languages
English (en)
Inventor
K·伍德
S·胡德格斯
L·威廉姆斯
J·斯里尼瓦桑
C·洛瑟
A·克里米尼斯
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Microsoft Corp
Original Assignee
Microsoft Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Microsoft Corp filed Critical Microsoft Corp
Publication of CN101322396A publication Critical patent/CN101322396A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/0035User-machine interface; Control console
    • H04N1/00405Output means
    • H04N1/00488Output means providing an audible output to the user
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/54Browsing; Visualisation therefor
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016Input arrangements with force or tactile feedback as computer generated output to the user
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/0035User-machine interface; Control console
    • H04N1/00405Output means
    • H04N1/00408Display of information to the user, e.g. menus
    • H04N1/0044Display of information to the user, e.g. menus for image preview or review, e.g. to help the user position a sheet
    • H04N1/00442Simultaneous viewing of a plurality of images, e.g. using a mosaic display arrangement of thumbnails
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/0035User-machine interface; Control console
    • H04N1/00405Output means
    • H04N1/00408Display of information to the user, e.g. menus
    • H04N1/0044Display of information to the user, e.g. menus for image preview or review, e.g. to help the user position a sheet
    • H04N1/00442Simultaneous viewing of a plurality of images, e.g. using a mosaic display arrangement of thumbnails
    • H04N1/00445Simultaneous viewing of a plurality of images, e.g. using a mosaic display arrangement of thumbnails arranged in a one dimensional array
    • H04N1/00448Simultaneous viewing of a plurality of images, e.g. using a mosaic display arrangement of thumbnails arranged in a one dimensional array horizontally
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/0035User-machine interface; Control console
    • H04N1/00405Output means
    • H04N1/00408Display of information to the user, e.g. menus
    • H04N1/0044Display of information to the user, e.g. menus for image preview or review, e.g. to help the user position a sheet
    • H04N1/00458Sequential viewing of a plurality of images, e.g. browsing or scrolling
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/32Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N2201/3201Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N2201/3261Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of multimedia information, e.g. a sound signal

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Television Signal Processing For Recording (AREA)
  • Processing Or Creating Images (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

描述了一种在其中接收显示长度指示符并访问数字图像的显示数字图像的方法。根据该显示长度指示符和预定义选择准则从所访问的数字图像中选择一组数字图像并且以预定次序显示所选的该组数字图像。本方法可由在计算机可读介质上具体化的计算机程序来执行。

Description

数字图像的回放
背景
在过去的几年里,数码照相机的使用量大幅增加,而且数码照相机现在通常并入其他的便携式电子设备,特别是移动电话。数码照相机允许用户拍摄大量照片,允许他们知道他们能够在随后选择打印或以其他方式保存哪些和多少图像。这导致了用户具有一个很大的数字图像集合。
SenseCam(感知相机)是一款由Microsoft Research(微软研究院)开发的可佩戴照相机,它可通过使用户能够倒带该设备佩戴者最近所经历的事件来帮助唤起记忆。这对于记忆受损的个体或者在个体经历创伤性事件的情况下(例如,老年人因跌倒导致受伤)尤为有用。
该设备可以捕捉极大数量的图像,并且除了捕捉图像之外,该设备还记录传感器数据,诸如周期性运动、亮度级和温度。该传感器数据用于触发图像捕捉,例如当亮度级改变或者突然移动时。亮度级的改变可以指示用户从一个房间移动至另一房间,或者从室内移动至室外,因此捕捉的图像将会指示佩戴者位置(和环境)的变化。该设备具有广角或鱼眼镜头,使得用户不必担心需要将设备指向特定方向。一加速计用于图像稳定。
通过使用传统数码照相机或SenseCam,用户就可以生成他们想要查看的一个巨大的数字图像集合。现存有许多软件应用程序允许用户经由目录结构或文件夹层次浏览他们的照片并能以电影胶片或幻灯片的形式查看目录/文件夹内的图像。摄影胶片视图从目录中显示沿着水平线(按文件名的字母顺序排列)彼此相邻的各幅图像,其中滚动条允许用户沿着该摄影胶片移动。幻灯片放映视图根据文件名的字母次序列表顺序显示目录中的各幅图像。已经开发的快速顺次视觉呈现(RSVP)技术允许用户向前或向后并以可调节的速度来浏览他们的照片。慢速时显示类似于幻灯片放映视图,而快速时显示则更类似于电影。
虽然这些视图能够很好地显示含有几十张照片的目录,但是它们不适合显示含有多得多照片数量的目录。具体问题可能会在用户尝试查看SenseCam上拍摄的图像时出现,因为SenseCam可能会在一天之内拍摄几百幅图片(甚至有可能上千幅)图像。
概述
下面提供本揭示的简化概要以便为读者提供基本的理解。本概要不是本揭示的详尽概观,并且既不标识本发明的关键/本质元素也不描绘本发明的范围。其唯一目的是以简化形式提供在此揭示一些概念作为稍后提供的更详细描述的序言。
第一示例提供一种显示数字图像的方法,包括以下各项步骤:接收显示长度指示符;访问数字图像;根据显示长度指示符和预定义选择准则从所访问的数字图像中选择一组数字图像;并且以预定次序显示所选的该组数字图像。
有利地,本方法把要显示的图像数量自动减少至用户定义的水平。这在数字图像源很大(例如,几百幅图像)的情况下特别有用。它使得对事件序列的搜索更为简单并且更加用户友好。
预定义选择准则的示例包括但不限于根据图像的日期/时间戳、图像在序列中的位置或者图像间的差异、或者一组代表性图像的选择来进行选择。
优选地,数字图像是数字照片。
优选地,预定次序是时间次序。
有利地,通过按时间顺序显示图像,用户就看到记录在图像内各事件的代表性视图以及它们如何彼此相关,而不会超载过多的信息。
优选地,显示长度指示符包括以下各项之一:图像数量、显示时间或者图像差异阈值。
有利地,通过指定显示时间,用户能够将他们的查看体验调整成适合他们可用的时间。
访问步骤包括以下各步骤:访问数字图像;并且将所访问的数字图像限制为在定义时段内捕捉的图像。
优选地,选择步骤包括以下各步骤:从显示长度指示符确定要显示的图像数量;并且根据关联于每幅图像的时间戳和每幅图像的性质中的至少一个从所访问的图像中选择所述数量的图像。
优选地,选择所述数量的图像的步骤包括以下各项步骤:根据指定的准则从所访问图像中选择第一图像;从所访问图像中选择给出预定义能量参数极值的再一幅图像;并且重复选择再一幅图像的步骤直到已选择了预定数量的图像。
这样就有利地从被访问的图像中选择了要显示的一组代表性图像。因此显示就向用户提供了在数字图像中捕捉的活动/场景的良好代表。取决于预定的能量参数,极值可以是最大值或最小值。
优选地,能量参数是关于重要性因子和相似性因子而被定义的,并且其中重要性因子是关于一幅或多幅图像属性的度量而相似性因子则是关于两幅图像之间差异的度量。
优选地,重要性因子是以下一项或多项的度量:图像中人脸的存在;图像的有趣程度;以及图像的清晰度。
优选地,显示步骤包括:以预定次序顺序显示所选的一组数字图像。
本方法还包括以下各项步骤:访问音频剪辑;选择与所选数字图像相关联的一个或多个音频剪辑;以及与显示所选一组数字图像步骤并行地播放所选音频剪辑。
本方法还包括以下各项步骤:访问传感器数据;选择传感器数据中与所选数字图像相关联的那些部分;处理传感器数据所选的各部分以提供感知反馈信号;以及与显示所选的一组数字图像的步骤并行地输出该感知反馈信号。
有利地,提供感知反馈信号就能向查看者提供增强的体验并能让查看者更好地欣赏图像中示出的活动。
优选地,传感器数据包括加速度数据;感知反馈信号包括低频音频信号并且输出步骤包括:与显示所选的一组数字图像的步骤并行地向感知执行器输出该低频音频信号。
优选地,处理传感器数据的所选部分的步骤包括:访问音频剪辑;使用低通滤波器过滤音频剪辑以产生低频音频信号;以及根据加速度数据控制低频音频信号的放大。
本方法还包括以下步骤:与向传感执行器输出低频音频信号同步播放音频剪辑。
优选地,传感执行器包括低音扬声器。
有利地,无需专门的设备就能提供感知反馈。
第二示例提供了一种包括计算机程序代码装置的计算机程序,当所述程序在计算机上运行时适于执行上述任何方法的所有步骤。
该计算机程序可以在计算机可读介质上具体化。
第三示例提供一种用于显示数字图像的装置,包括:用户输入设备;处理器,被安排用于接收来自用户输入设备的显示长度指示符,访问数字图像并且根据显示长度指示符和预定义的选择准则从所访问的数字图像中选择一组数字图像;以及显示器,用于以预定次序显示所选的该组数字图像。
优选地,预定次序是时间次序。
再一个示例提供了一种向一幅或多幅数字图像的查看者提供感知反馈的方法,所述方法包括:访问传感器数据的源;选择关联于所述一幅或多幅数字图像中至少一幅的传感器数据的部分;处理传感器数据的所选部分以提供感知反馈信号;以及将该感知反馈信号输出至执行器。
另一示例提供一种用户界面,包括:被安排用于指示显示长度指示符的第一元素;被安排用于指示数字图像位置的第二因素以及用于启动对选自该数字图像的一组图像的显示的输入,该组图像是根据显示长度指示符和预定义选择准则来选择的。
在此描述的各方法可由存储介质上具备机器可读形式的软件执行。软件能够适于在并行处理器或串行处理器上执行,使得本方法的各步骤可以按任何合适的次序或同时开展。
这里承认软件能够是有价值的、可以单独交易的商品。它旨在包含运行于或者控制“哑(dumb)”或者标准的硬件以实现期望的功能的软件。它还旨在包含“描述”或者定义硬件配置的软件,例如HDL(硬件描述语言)软件,用于设计硅芯片,或者用于配置通用可编程芯片以实现期望的功能。
许多伴随特征将随着参考下面的详细描述并结合附图进行理解而得到更好的认识。
附图说明
从结合附图的下列详细描述将更好地理解本描述,在附图中:
图1是数字图像回放方法的一个示例性流程图;
图2-4示出了用户界面的示例;
图5示出了一种用于数字图像回放的安排的示意图;
图6是选择一组图像的方法的示例性流程图;
图7是例示图6所示选择方法的示意图;
图8是例示选择方法的另一示例的示意图;
图9是选择一组代表性图像的方法的示例性流程图;
图10是示出了用于定义通用纹理基元(texton)词汇的过程的示例性流程图;
图11是图10所示用于定义通用纹理基元词汇的过程中各阶段的示意图;
图12是示出了一种用于确定图像的纹理基元直方图的方法的示例性流程图;
图13示出了纹理基元直方图的两个示例;
图14示出了一个示例性显示屏;
图15是数字图像回放方法的另一个示例性流程图;
图16示出了用于记录加速度信息的装置的示意图;
图17示出了从所记录的加速度数据中确定的倾斜度量的示例性图表;
图18示出了典型的家用计算机音频系统的示意图;以及
图19示出了使用触觉论增强回放的信号处理步骤的一个示例的示意图。
相同的标号用于指示附图中相同的部分。
详细描述
下面结合附图提供的详细说明旨在作为本发明的例子的描述,但是并不旨在表示可以构造或者使用本例子的仅有的形式。该描述阐述本示例的功能以及用于构造和操作本示例的步骤序列。然而,相同或等价的功能与序列可由不同的示例来完成。
图1是数字图像(例如,数码照片)回放方法的一个示例性流程图。用户输入信息以提供对所需显示长度的指示符(步骤101)。该指示符可以有关所需显示的时间长度(例如,秒或分钟)、有关要显示的图像数量、或者其他参数,诸如正显示的两图像间最小差异的指示(例如,最小SAD为20,见下文讨论)。访问图像源(步骤102),其中每幅图像都具有与其相关联的日期/时间戳,以详述该图像是在何时被捕捉/拍摄(例如,存储为JPEG图像的属性)。随后根据显示长度指示符从源中选择一组图像(步骤103)。随后以预定次序(例如,按时间顺序)显示所选的一组图像(步骤104),该显示从第一幅拍摄的所选图像开始并以最后一幅拍摄的所选图像结束(按照图像日期/时间戳所定义的)。这些步骤在下面将更详细地描述。
图2-4示出了可由用户用来输入显示长度指示符(为步骤101)的用户界面(UI)示例。图2示出了在其中用户能够指定图像位置(框201)的第一示例性UI屏幕200。图像可以存储在单个目录下或是跨多个目录存储,此外它们还可以存储在正运行显示应用程序的计算机上或是可经由内联网或互联网的网络远程地进行访问。在此示例中,向用户提供了有关显示长度指示符的两个可选项单元——时间(使用按钮202选择)或者图像数量(使用按钮203选择)。在任一情况下,用户都可以直接输入所需数量(在框204、205中)或者使用箭头按钮206来设置显示长度指示符。除了选择显示长度指示符之外,用户还可以选择所需的显示类型(屏幕部分207)以及某些增强特征(屏幕部分208)。显示类型和增强特征将在以下更为详细地解释。显示长度指示符是在用户点击‘下一个’按钮209时的输入(为步骤101)。
图3示出了第二示例性UI屏幕300,该UI屏幕300具有显示区域301以及其下的两个滑块302、303和时间线304。第一滑块302能让用户通过点击和向两侧拖曳条305来指定显示长度指示符。如果用户将条305左移,则显示指示符变小而如果用户将条305右移,则显示指示符增加。第二滑块303允许用户显示所基于的时段,并且具有两个可调节标记306、307,这两个标记分别可以相对于其上的时间线304移动来设置开始和结束时间。在所选图像的回放期间(在步骤104),箭头308沿着时间线304移动以向用户指示正显示的图像是何时被拍摄的。用户可以在任何时刻点击该箭头来暂停显示。在此示例中,显示长度指示符可以只要条305沿滑块302移动使得值改变就被自动输入(为步骤101)。输入新的显示长度指示符(步骤101)会引起使用新的显示参数和新近选择的一组图像(在步骤103中选择的)的图像显示重新开始(步骤104)。
图4示出了第三示例性UI屏幕400,在其中如图2一样,向用户提供了有关显示长度指示符的两个可选项单元——时间(使用按钮401选择)或者图像数量(使用按钮402选择)。在此示例中,显示长度指示符的值通过旋转刻度盘403来设置,因此在顺时针旋转刻度盘403时显示长度增加而在逆时针旋转刻度盘403时显示时间缩短。显示长度指示符的值在合适的框404中显示。如图2一样,显示长度指示符是在用户点击按钮时的输入(为步骤101),在此示例中用户点击的按钮是‘显示’按钮405。
图5示出了根据图1所示方法的一种用于数字图像回放的安排的示意图,包括显示器501、处理器502、用户输入设备503和图像源504。显示器501用于显示UI(例如,如图2-4所示)和图像。处理器502接收来自用户输入设备503的显示长度指示符(步骤101),访问图像源(步骤102),从源中选择一组数字图像以供显示(步骤103)并在随后将所选的该组图像输出至显示器501(步骤104)。显示器501、处理器502和用户输入设备503可以集成在一数码相机内,因此回放可以在拍摄图像(即,数码照片)的相机上进行。在另一示例中,处理器502可以是附连有监视器(显示器501)和键盘和/或鼠标(用户输入设备503)的计算机的一部分。
如上所述,访问图像源的步骤(步骤101)可以涉及访问位于一个或多个地点的一个或多个目录。图像可以是本地存储的,例如与处理器相同的设备上,或者可以存储在其他地方,例如在远程计算机、服务器或网站上。图像源的位置可以由用户经由例如图2的框201之类的UI来指定。除了仅指定存储图像的目录之外,还可以对图像源进行进一步的限制。如图3所示,用户还可以例如使用滑块303来指定有趣图像的日期/时间范围。这一用户输入除了已由用户标识任何文件目录(例如,经由图2的框201)之外还用作对图像源的进一步限制。
从源中选择满足显示长度指示符的一组图像(步骤103)可以使用各种不同的方法来实现,此处描述了三种可能的方法:
·根据时间/日期戳选择
·根据序列中的位置选择
·选择一组代表性图像
在其中根据图像的时间/日期戳来作出选择的第一种选择方法可以参考图6和7进行描述。首先计算要显示的图像数量(步骤601)。如果使用了单元‘图像’,则该数量可以直接从显示长度指示符获取。作为替换,该数量也可以通过用所需显示时间除以预定义的图像显示时间(例如,1秒种)来计算。在计算出该数值(在图7所示示例中为6)之后,就从源中所有这些图像中选择所需数量的图像,使得所选组尽可能跨所有图像覆盖的时段平均分布。图7在时间线702上将每幅图像示出为圆圈701。垂直符号703示出了在源704的第一幅图像和源705的最后一幅图像之间沿时间线等分的六个点。由箭头706指示的图像是时间上最接近垂直符号703之一的那些点。虽然本方法提供了贯穿感兴趣的时段而在时间上被良好间隔的图像,但是所选图像可能不是代表性的并且如果它们沿着时间线落在了错误的点上,那么所选图像可能会未命中图像聚类(例如,聚类707)。
在其中根据图像在序列中的位置来作出选择的第二种选择方法可以参考图8进行描述。首先以与上述相同(步骤601)的方式计算要显示的图像数量。在计算出该数值(在图8所示示例中仍为6)之后,就从源中所有这些图像中选择所需数量的图像,使得所选组尽可能地按图像顺序平均选取。图8在时间线702上将每幅图像示出为圆圈701(如图7)。像箭头801指示的那样选择第一幅、第五幅、第九幅、第十三幅、第十七幅和最后一幅(第二十一幅)图像。虽然本方法提供了贯穿源内那些图像而良好间隔的图像,但是所选图像可能对全组21幅图像不具有代表性。
第三种选择方法从源内的那些图像中选择一组代表性图像。如果该源包括n幅图像,就定义具有n个元素的向量x,其中如果图像i被选作该组代表性图像之一,那么x(i)=1;否则x(i)=0。于是,如果要从包括100幅图像的源中选择10幅图像,那么向量x会具有100个元素(n=100),其中10个元素等于1而90个元素等于0。
为了选择一组X幅的代表性图像,将能量E定义为:
E=∑iIm p(i)δ(x(i)==1)+λSimiminj Sim(i,j)δ(x(i),x(j)==(1,1))
其中:
如果arg为真,则δ(arg)=1;否则δ(arg)=0
λSim是常数且示例值为100
Sim(i,j)是两幅图像之间的相似性。两幅同样的图像i,j具有等于0的Sim(i,j),而两幅很不同的图像i,j则具有较大值的Sim(i,j)。这被定义为两幅图像时间的距离,例如两幅图像文本基元直方图的绝对差之和(SAD)(将在下文中详述)。如下所述使用纹理基元直方图,这是因为它考虑到图像的颜色和纹理基元两者。在另一示例中,可以使用颜色直方图仅对具体图像内的像素颜色分布进行比较。
Imp(i)是图像的重要性,其值越高则认为该图像越重要。在一个示例中,它可被定义为:
Imp(i)=人脸权重+平均信息量(i)
其中:
如果图像中有人脸,则人脸权重=0.008;否则人脸权重=0。合适的人脸检测算法的一个示例在P.Viola和M.Jones发表于2001年的国际计算机视觉大会(ICCV)的题为‘健壮实时对象检测’(‘Robust Real-Time Object Detection’)中有所描述。
Figure A20068004552200131
其中:
平均信息量(i)是对图片多有趣的测度(例如,均匀颜色的图像会不怎么有趣,而细节感强且色彩丰富的图像则会很有趣)
k是总像素数
m是图像通道数(例如,RGB图像具有3个通道)
pi c是像素i在通道c内的值。
在上述等式中,如果图像中有人脸并且如果图像具有较高的平均信息量,即较高的有趣程度,则认为该图像比较重要。可以使用其他因素作为替换或者附加来确定图像的重要性。例如还可以将图像清晰度包括在内,模糊的图像具有极低的值(例如,0),而清晰的图像则具有较高值。图像若带有与其相关联的音频剪辑(如下将描述),则可被认为是重要的并且因此被包括在平均信息量的计算中。用户能够例如经由UI来定义他们认为比其他方面更重要的方面(例如,清晰度相比于人脸出现)。
为了选择一组代表性图像,必须找出能量E的最大值。这一优化可以在图9所示通过一次选择一幅图像来执行。首先如上所述(参考图6的步骤601)计算要显示的图像数量N(步骤900)。接下来将全部i的x(i)设置为0(步骤901)。将人脸最多的图像选择为第一图像(步骤902),并且针对该图像,将x(i)设置为1(步骤903)。随后,通过选择给出最大能量E的(第i幅)图像来一个个地选择少于的N-1幅图像(步骤904,包括904a和904b部分)。为了选择第二图像,轮流检查所有剩余的n-1幅图像,并且计算E的值以找出哪幅图像(即i为几)给出了最大值(步骤904a),并且一旦被标识,就把第二所选图像的x(i)的值设置为1(步骤904b)。随后为选择第三图像重复上述步骤,即轮流检查所有剩余的n-2幅图像,并且计算E的值以找出哪幅图像(即i为几)给出了最大值(步骤904a),并且一旦被标识,就把第三所选图像的x(i)的值设置为1(步骤904b)。随后重复上述步骤,直到已经选择了N幅图像并且在向量x中具有其x(i)=1的元素(步骤905)。
为了执行上述对E值的计算(在步骤904a),有必要计算Sim(i,j)的值。如前所述,这被定义为两幅图像时间的距离,例如两幅图像纹理基元直方图的绝对差之和(SAD)。为了计算两幅图i和j的纹理基元直方图的SAD,需要纹理基元的通用词汇。这是在许多训练图像的基础上定义,并且词汇通常依赖于应用,所以训练图像的类型优选地类似于将位于源内的实际图像。例如,由SenseCam拍摄的图像具有与常规数码照相机拍摄的图像明显不同的特性。因此,在要使用SenseCam图像的源时使用SenseCam图像作为训练图像将会是合适的,而在要使用标准数码照相机图像的源时使用标准数码照相机图像作为训练图像将会是合适的。在要从中选择其他类型的图像的情况下,则应该使用一组合适的代表图像作为训练图像以定义通用词汇。
可以参考图10和11描述定义通用词汇的过程。选择第一训练图像1101(步骤1002)并将该图像传递通过一排诸如伽柏(Gabor)滤波器排的f个滤波器(步骤902),其中f是使用的滤波器的个数。以一种能够获取纹理信息的方式来使用各滤波器。滤波器通常从围绕每个像素的10x10像素区域中捕捉信息。通常使用一排17个滤波器(f=17),并且相同的滤波器组可用于任何应用或任何图像类型。该步骤(步骤1002)的输出是一组滤波器响应图像1102,每幅图像针对一滤波器(即,f幅滤波器响应图像)。随后以f个维度标绘每幅滤波器响应图像中每个像素的滤波器响应(步骤1003)。考虑最初训练图像1101中位置(x,y)处的特定像素,存在f个滤波器响应,每个滤波器响应针对该排内的一个滤波器(即,在f幅滤波器响应图像1102的每一幅中位置(x,y)处的滤波器响应)。这创造了带有f个元素的向量(r1,r2,r3,....rf),随后可将其标绘在f维图1103上。随后可以用不同的训练图像多次重复这三个步骤(1001-1003)并且所有这些点都绘制在同一幅图1104上。随后例如使用k平均(k-means)算法标识该图上点的聚类1104a-f(步骤1004),并在每个聚类中央处定义位置1105a-f(步骤1005)。因此就得到了一组向量,它们各自都包括f个元素,并且各自定义了一个聚类中央所处的位置。该组向量(图11中示出为6个向量,虽然通常存在有50个向量或“视觉词”)是纹理基元的通用词汇(针对与所使用训练图像类型相同的图像)。每个视觉词(或向量)如下所述导致纹理基元直方图中的一个柱(bin)。词的个数较少(以及由此产生的条)导致执行图像间比较时处理速度较快,然而个数较多则提供对两图像间差异性或相似性的更好度量。
在确定了通用纹理基元词汇之后,就可以如图12所示计算图像的纹理基元直方图。选择该图像(步骤1201)并将其传递通过确定通用词汇时所使用的同一排f个滤波器(步骤1202)。随后为f个滤波器中的每一个滤波器确定针对该图像每个像素的滤波器响应以提供f维空间内的位置(步骤1203),随后将该位置与通用词汇(例如,1105中示出的6个视觉词)进行比较以确定每个像素最接近的聚类中心位置(在步骤1005中定义)。将结果绘制在直方图上,其中每个柱针对一个视觉词并且每个柱一条目针对最接近该视觉词的每个像素。图13中示出了两个纹理基元直方图1301和1302的示例。随后就可计算两幅图i和j的纹理基元直方图的SAD(即,每个柱大小之间的绝对差之和),并且这给出了用于计算如上所述的平均信息量E的Sim(i,j)的值。
在以上的描述中,定义能量参数E从而能够在确定代表性图像的过程中寻找最大值。本领域普通技术人员显而易见的是,可以为能量参数使用其他替换的表达式并且依赖于所选的表达式,可以寻找最大值或最小值来确定代表性图像。
在例如使用上述三种方法之一选择要显示的一组图像(步骤103)之后,就按时间顺序显示所选的该组图像(步骤104)。存在有各种不同的图像显示方式,并且所使用的显示类型可由用户选择(参见图2所示的用户界面的部分207)。
图像可以例如使用幻灯片放映或RSVP技术来顺序显示,并且取决于每幅图像的显示速度,在查看者看来图像的显示可以象是幻灯片放映显示(慢速)、类似于翻书的显示(中速)或者电影(快速)。每幅图像显示之间的时间可以是恒定的(例如,每幅图一秒),或者在显示间的时间可以有所变化从而为用户提供捕捉两幅图像间实际时间差异的指示。例如,如果第一幅图像在上午9点捕捉,第二幅在上午10点而第三幅在下午两点,那么若是第一幅图像在t=0时刻显示,第二幅在t=1时刻显示,则第三幅图像就可以在t=1.2时刻显示以指示用户第二幅和第三幅图像之间的拍摄时间间隔要远大于第一幅和第二幅图像之间的拍摄时间间隔。
在另一个示例中,取决于可用显示区域,可以并排显示部分或全部的所选图像。图像可以在网格内显示或者可以模拟电影胶片沿单线显示。在可用显示区域内无法显示全部图像的情况下可以提供滚动条,或者可以调整图像大小以适合可用显示区域。
在某些显示示例中,可以在显示图像的同时示出时间线以便向查看者指示图像的拍摄时间,如图3所示(时间线304)。可以使用具有带等距核对记号的线性标度的标准时间线(或轨迹条),即核对记号之间的间隔是恒定的(例如,10分钟),如图7所示(核对记号703)。在另一个示例中,可以使用改进的时间线(或轨迹条),其中核对记号(或其他指示符)用于表示场景的改变。这些场景改变可以通过比较两幅毗邻图像i和i+1并计算SAD(如上所述)来检测。如果SAD超过阈值(可以是可配置的),就指定一场景中断并在时间线的该点上放置核对记号。这些核对记号仍可以显示在线性时间线上,虽然它们将不再等距间隔。这一改进的时间线使得用户能够方便地向前/向后移动通过图像序列中示出的不同场景。在其他示例中,场景改变标记可以与时间线分开使用,并且可以作为图像序列的翻书或电影型呈现内的标志或标签。
在其它的显示示例中,可以使用同时和顺序显示的组合。这种显示技术组合的示例可以参考图14和图15描述,其中图14示出了示例性显示屏幕1400而图15则示出了数字图像回放方法的另一个示例性流程图。如上所述,接收显示长度指示符的输入(步骤101),访问图像源(步骤102)并从源中选择满足该显示长度指示符的一组图像(步骤103)。在此示例中,选择三幅代表性图像(在步骤103中)。随后在三幅代表性图像的每一幅周围选择一图像聚类(步骤1501)。这些聚类与参考图10-13所提及的聚类不同。选择聚类中的图像以使得这些图像与代表性图像相类似,而这一选择可以如下所述使用纹理基元(或颜色)直方图的SAD的计算来完成。可以定义一阈值,若SAD低于该阈值,则考虑图像是类似的。作为这一选择的替换或者组合,可以定义最大聚类大小以选择例如10幅最接近的图像(除非只有10幅以下类似图像,在这种情况下聚类将包含少于10幅的图像)。也可以在聚类内选择的图像,使得它们的拍摄时间与代表性图像接近。例如,如果源包括100幅图像,按时间顺序编号为1至100,并且图像2、30和89被选作三幅代表性图像(在步骤103)中,则关于图像2的图像聚类可以包含范围在1-29之间的图像(如果认为其相似),但是不能包含范围在30-100之间的图像,即使图像非常相似。此外,如果图像1-8都是在20分钟内拍摄的,而图像9是在图像8之后2小时拍摄的,则关于图像2的图像聚类可以包含范围在1-8之间的图像(如果认为其相似),但是可以不包括图像9及其后图像。
在选择了与每幅代表性图像相关联的聚类之后,就按时间顺序显示每个聚类内的所选图像(步骤104),其中第一聚类在第一显示区域1401内顺序显示,第二聚类在第二显示区域1402内顺序显示,而第三聚类在第三显示区域1403内顺序显示。每个聚类内的图像显示速度可以不同以使得每个聚类的总显示时间相等(即,含有10幅图像的聚类显示图像的速度要比含有5幅图像的聚类快一倍),同样地,在聚类内每幅图像的显示时间可以相同或者可以如上所述可以根据每幅图像的拍摄时间而在聚类内变化。顺序显示的速度可以是慢的(像幻灯片放映)、快的(像电影)或者是其间的任何速度。
在另一个示例中,聚类的顺序显示可由用户例如通过将鼠标指针悬停在显示区域1401-1403之一上来控制。在又一个示例中,既可以在一个显示区域(例如,显示第一聚类,之后是第二聚类,再后是第三聚类)也可以在多个显示区域(例如,在区域1401内显示第一聚类,随后在区域1402内显示第二聚类同时在区域1401内显示代表性图像等)内顺序显示每个聚类。
在其他示例中,显示可以包括以上技术的组合,为一些代表性图像(例如,在显示区域1401和1403内)而不为其他图像(例如,在显示区域1402内)显示图像聚类。
在显示器使用参考图14和15描述的技术的情况下,显示长度指示符可以具有两个方面:显示的代表性图像数量(例如,在示出示例中为3)和长度(时间)。可选地,可以固定这两个参数之一并使用显示长度指示符来确定另一参数。
以上描述涉及按时间顺序显示图像。这仅作为示例并且可以按任何预定顺序显示图像。
除了显示图像之外,其他显示技术也可以与显示图像结合使用,如以上在图2所示用户界面中增强特征选择部分208中所指示的那样。一些数码相机(例如,SenseCam)还可以自动地或者作为用户启动的备忘录特征来记录短的音频剪辑。这些音频剪辑可以与图像显示并行地回放给用户。这些音频剪辑可以存储在音频剪辑源内,该源可以与图像源504所处位置相同。在源内图像所覆盖时段内记录了大量音频剪辑的情况下,可以对音频剪辑进行选择,从而只选择与被选为代表性图像的图像(在步骤103中)相关联的音频剪辑。如上所述,带有关联音频剪辑的图像可以被认为是更重要的,因此更可能被选为代表性图像。在另一个选择示例中,可以选择位于代表性图像拍摄时间所定义时间间隔(例如,2分钟)内所记录的音频剪辑。在以运动方式显示图像(例如,幻灯片放映/翻书/电影)的情况下,音频剪辑的播放可以与正在被显示的代表性图像同时或在类似时间拍摄的各幅图像同步。这一同步可以是近似的,尤其是在图像被顺序显示而音频剪辑的长度超过关联图像显示时间的情况下。为了播放音频剪辑,图5所示的安排还需包括扬声器。
为了增强图像回放,特别是在顺序显示图像的情况下,可以使用‘触觉论(haptics)’向查看者提供对图像内所描绘的经历的‘感觉’。触觉论指涉及触觉的科学,并且也是有关物理传感器的术语,而该物理传感器提供皮肤级别的触觉以及往来自肌肉和关节的力反馈信息。触觉论接口已经在飞机内用于向飞行员提供力反馈,并且还用于计算机游戏和虚拟现实环境。通常这一反馈是通过操纵杆提供的,该操纵杆被安排为提供运动阻抗以及振动。触觉论还用于创建医疗模拟器,从而能够以仿真(即,远离病人)且为用户提供真实体验的方式来实现侵入式过程。
可以参考图16-19描述使用触觉论来增强图像回放。触觉论用于重新生成由加速计或数码相机内其他传感器所记录的运动,并且使用低音扬声器、移动地板或其他执行器来重新合成该运动。图16示出了可以在数码相机内使用以记录加速度信息的装置1600的示意图。装置1600包括加速计1601或者检测加速度的其他装置、微控制器1602(或微处理器)和存储器1603。如果有音频也被记录(如上所述),则还提供话筒输入1604。这些元件已经设置在数码相机(例如,在SenseCam)内,并且这些元件可以具有若干目的,例如存储器也可用于记录捕捉到的图像。装置1600周期性地(例如,每10ms)记录沿着一个或多个轴(例如,沿着x和y轴)的加速度。这些数据例如可被记录为10比特的值。图17示出了可以从(例如在佩戴者滑雪时记录的)测得加速度中确定的倾斜度量(以角度为单位)的示例性图表1700。用户在滑雪时经历的跌倒从图1701中清晰可见。虽然图17示出了倾斜度量,但是在其它实例中也可以使用原始的加速度数据。
图18示出了可使用触觉论来增强回放的家用计算机的典型音频系统1800的示意图。其他系统也可用于增强回放,在此示出的仅作为示例。系统1800包括计算机1801,计算机1801连接至音频功率放大器1802,而后者进而连接至两个中间扬声器1803、1804(一左一右)以及一个低音喇叭扬声器1805。在另一个示例中,可以提供两个低音喇叭扬声器。这就能够提供振动的定向角度。
信号(如图17所示)由计算机1801处理并且倾斜数据用于放大音频轨迹。例如,当佩戴者跌倒时,倾斜数据接近90°并且放大该跌倒的低频(例如,<100Hz)音频记录。以此方式,通过由低音扬声器1805产生的低频振动就能够给出振动感觉,从而能够增强对跌倒音频记录的真实感。通常由软件执行的信号处理步骤的示例在图19中示出,其中音频信号的一部分被分接并馈入低通滤波器1901(例如,100Hz低通滤波器)。放大器增益控制元件1902随后用于根据加速度输出水平来控制放大器的增益。放大器增益控制元件1902的输出随后与原始音频信号混合(在混音器1903内)并馈入音频放大器1802(在图18中),该音频放大器1802则与理想地放在地板上的至少一个低音扬声器1805相连接。这一低音扬声器1805产生地板振动,从而向图像的查看者提供额外的感知信息。
额外感知信息的提供如上所述可以与图像显示(以及音频剪辑的播放,如果合适的话)同步。在以移动方式显示图像(例如,幻灯片放映/翻书/电影)的情况下,额外感知信息的提供可以与正在被显示的代表性图像同时或在类似时间拍摄的各幅图像同步。这一同步可以是近似的,尤其是在图像被顺序显示而提供的额外感知信息剪辑的时间长度超过关联图像显示时间的情况下。
在图19示出的示例中,加速度信息与记录的音频结合使用以增强音频并提供对图像的‘感觉’。在另一个示例中,可以不使用音频而使用加速度信息本身来生成可在低音扬声器上播放的低频音频以产生可被查看者感觉到的振动。在这种情况下,可以按时序用极性相反的信号(例如,以方波或类似的形式)驱动扬声器的喇叭以实现查看者强烈的‘重击’感。
在以上参考图16-19描述的示例中,低音扬声器用于重新产生由数码相机携带者所经历的振动。如上所述,作为低音扬声器的附加或者替代,可以使用其他执行器来重新产生振动,诸如移动地板、内建于椅子的执行器、以及内建于操纵杆的执行器。
作为上述使用加速度数据生成振动的附加或者替代,由数码相机记录的其他传感器数据也可映射至其他的执行器。例如,可以生成风噪音并用标准扬声器播放以给出速度的印象,可以使用风扇产生气流以给出速度的印象,可以将环境传感器数据映射至气候控制装置(例如,空调、中央加热),并且可以将亮度数据映射至照明装置。
如上所述使用触觉论来增强数字图像的回放可以与参考图1-15描述的部分或所有技术相结合。作为替换,触觉论也可以与数字图像回放的任何其他方法相结合。
本领域的技术人员将认识到用于存储程序指令的存储设备可分布在网络上。例如,远程计算机可存储描述为软件的该过程的示例。本地或终端计算机可访问远程计算机并下载该软件的一部分或全部以运行该程序。可替换地,本地计算机可按需下载软件的片断,或者可以在本地终端上执行一些软件指令而在远程计算机(或计算机网络)上执行一些软件指令。本领域的技术人员将认识到,通过使用本领域技术人员已知的常规技术,软件指令的全部或部分可由专用电路如DSP、可编程逻辑阵列等来执行。
如对于本领域的技术人员而言,显然此处给出的任何范围或者设备值可以被扩展或者改变而不失去所寻求的效果。
文本中描述的各方法步骤可以在需要时按任何合适的次序或同时执行。
可以理解,上面对于较佳实施例的描述仅仅是作为例子给出的,而本领域的技术人员可以做出多种改变。

Claims (20)

1.一种显示数字图像的方法,包括以下各项步骤:
接收显示长度指示符;
访问数字图像;
根据所述显示长度指示符和预定义选择准则从所访问的数字图像中选择一组数字图像;以及
以预定次序显示所选的该组数字图像。
2.如权利要求1所述的方法,其特征在于,所述数字图像是数字照片。
3.如前述任一项权利要求所述的方法,其特征在于,所述预定次序是时间次序。
4.如前述任一项权利要求所述的方法,其特征在于,所述显示长度指示符包括以下各项之一:图像数量、显示时间或者图像差异阈值。
5.如前述任一项权利要求所述的方法,其特征在于,所述访问步骤包括以下各步骤:
访问数字图像;以及
将所访问的数字图像限制为在定义时段内捕捉的图像。
6.如前述任一项权利要求所述的方法,其特征在于,所述选择步骤包括以下各步骤:
从所述显示长度指示符确定要显示的图像数量;以及
根据关联于每幅图像的时间戳和每幅图像的性质中的至少一个从所访问的图像中选择所述数量的图像。
7.如权利要求6所述的方法,其特征在于,选择所述数量的图像的步骤包括以下各步骤:
根据指定的准则从所访问图像中选择第一图像;
从所访问图像中选择给出预定义能量参数极值的再一幅图像;以及
重复选择再一幅图像的所述步骤直到已选择预定数量的图像。
8.如权利要求7所述的方法,其特征在于,所述能量参数是关于重要性因子和相似性因子而被定义的,并且其中重要性因子是关于一幅或多幅图像属性的度量而相似性因子则是关于两幅图像之间差异的度量。
9.如权利要求8所述的方法,其特征在于,所述重要性因子是以下一项或多项的度量:图像中人脸的存在;图像的有趣程度;以及图像的清晰度。
10.如前述任一项权利要求所述的方法,其特征在于,所述显示步骤包括:
以预定次序顺序显示所选的一组数字图像。
11.如前述任一项权利要求所述的方法,其特征在于,还包括以下各步骤:
访问音频剪辑;
选择与所选数字图像相关联的一个或多个音频剪辑;以及
与显示所选一组数字图像的步骤并行地播放所选音频剪辑。
12.如前述任一项权利要求所述的方法,其特征在于,还包括以下各步骤:
访问传感器数据;
选择所述传感器数据中与所选数字图像相关联的那部分;
处理传感器数据的所选部分以提供感知反馈信号;以及
与显示所选的一组数字图像的步骤并行地输出该感知反馈信号。
13.如权利要求12所述的方法,其特征在于,所述传感器数据包括加速度数据;所述感知反馈信号包括低频音频信号并且所述输出步骤包括:
与显示所选的一组数字图像的步骤并行地向感知执行器输出该低频音频信号。
14.如权利要求13所述的方法,其特征在于,所述处理传感器数据的所选部分的步骤包括:
访问音频剪辑;
使用低通滤波器过滤音频剪辑以产生低频音频信号;以及
根据所述加速度数据控制所述低频音频信号的放大。
15.如权利要求14所述的方法,其特征在于,还包括以下步骤:
与向传感执行器输出低频音频信号同步播放所述音频剪辑。
16.如权利要求13至15中任一项所述的方法,其特征在于,所述传感执行器包括低音扬声器。
17.一种包括计算机程序代码装置的计算机程序,当所述程序在计算机上运行时适于执行前述任一项权利要求所述的所有步骤。
18.如权利要求17所述的计算机程序在计算机可读介质上具体化。
19.一种用于显示数字图像的装置,包括:
用户输入设备;
处理器,被安排用于从所述用户输入设备接收显示长度指示符,访问数字图像并且根据所述显示长度指示符和预定义选择准则从所访问的数字图像中选择一组数字图像;以及
显示器,用于以预定次序显示所选的该组数字图像。
20.如权利要求19所述的装置,其特征在于,所述预定次序是时间次序。
CNA2006800455227A 2005-12-05 2006-11-16 数字图像的回放 Pending CN101322396A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
EP05257463A EP1793577A1 (en) 2005-12-05 2005-12-05 Playback of digital images
EP05257463.9 2005-12-05

Publications (1)

Publication Number Publication Date
CN101322396A true CN101322396A (zh) 2008-12-10

Family

ID=36118047

Family Applications (1)

Application Number Title Priority Date Filing Date
CNA2006800455227A Pending CN101322396A (zh) 2005-12-05 2006-11-16 数字图像的回放

Country Status (5)

Country Link
US (1) US8249397B2 (zh)
EP (1) EP1793577A1 (zh)
KR (1) KR20080079645A (zh)
CN (1) CN101322396A (zh)
WO (1) WO2007067334A1 (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101794066A (zh) * 2009-01-21 2010-08-04 三星数码影像株式会社 用于提供幻灯片放映的方法和设备及计算机可读存储介质
CN105208439A (zh) * 2015-09-11 2015-12-30 深圳Tcl数字技术有限公司 音频文件播放方法及装置
CN106250070A (zh) * 2015-06-09 2016-12-21 精工爱普生株式会社 显示控制装置
CN111603194A (zh) * 2020-06-02 2020-09-01 上海联影医疗科技有限公司 乳腺断层图像显示的方法、系统和计算机可读存储介质

Families Citing this family (35)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8285052B1 (en) * 2009-12-15 2012-10-09 Hrl Laboratories, Llc Image ordering system optimized via user feedback
US8952982B2 (en) * 2007-04-24 2015-02-10 Sony Corporation Image display device, image display method and information recording medium for displaying and scrolling objects on a display
US7760912B2 (en) * 2007-08-01 2010-07-20 Tandent Vision Science, Inc. Image segregation system with method for handling textures
KR20090030923A (ko) * 2007-09-21 2009-03-25 삼성전자주식회사 휴대 단말기에서 컨텐츠를 구성하여 재생하는 방법 및 장치
EP2338271A1 (en) * 2008-10-07 2011-06-29 Koninklijke Philips Electronics N.V. Method and apparatus for generating a sequence of a plurality of images to be displayed whilst accompanied by audio
JP4692614B2 (ja) * 2008-11-28 2011-06-01 ブラザー工業株式会社 印刷装置及びプログラム
JP2010130510A (ja) 2008-11-28 2010-06-10 Brother Ind Ltd 印刷装置及びプログラム
JP4692615B2 (ja) * 2008-11-28 2011-06-01 ブラザー工業株式会社 印刷装置及びプログラム
US9210313B1 (en) 2009-02-17 2015-12-08 Ikorongo Technology, LLC Display device content selection through viewer identification and affinity prediction
US9727312B1 (en) * 2009-02-17 2017-08-08 Ikorongo Technology, LLC Providing subject information regarding upcoming images on a display
US10706601B2 (en) 2009-02-17 2020-07-07 Ikorongo Technology, LLC Interface for receiving subject affinity information
US8164617B2 (en) 2009-03-25 2012-04-24 Cisco Technology, Inc. Combining views of a plurality of cameras for a video conferencing endpoint with a display wall
US8391601B2 (en) 2009-04-30 2013-03-05 Tandent Vision Science, Inc. Method for image modification
JP5343739B2 (ja) * 2009-07-02 2013-11-13 ブラザー工業株式会社 出力装置及びプログラム
WO2012052887A1 (en) * 2010-10-19 2012-04-26 Koninklijke Philips Electronics N.V. Medical image system
TW201227367A (en) * 2010-12-31 2012-07-01 Altek Corp Image management method of digital photography device
US9014510B2 (en) 2012-06-29 2015-04-21 Intellectual Ventures Fund 83 Llc Method for presenting high-interest-level images
US9014509B2 (en) 2012-06-29 2015-04-21 Intellectual Ventures Fund 83 Llc Modifying digital images to increase interest level
US8873851B2 (en) * 2012-06-29 2014-10-28 Intellectual Ventures Fund 83 Llc System for presenting high-interest-level images
US20140189586A1 (en) 2012-12-28 2014-07-03 Spritz Technology Llc Methods and systems for displaying text using rsvp
US9483109B2 (en) 2012-07-12 2016-11-01 Spritz Technology, Inc. Methods and systems for displaying text using RSVP
US8903174B2 (en) 2012-07-12 2014-12-02 Spritz Technology, Inc. Serial text display for optimal recognition apparatus and method
US9552596B2 (en) 2012-07-12 2017-01-24 Spritz Technology, Inc. Tracking content through serial presentation
US9158765B1 (en) * 2012-10-08 2015-10-13 Audible, Inc. Managing content versions
CN103049100B (zh) * 2012-12-06 2016-05-25 惠州Tcl移动通信有限公司 一种基于移动终端调整照片回显时间的方法及移动终端
BR112015020670B1 (pt) * 2013-02-27 2021-12-28 Interdigital Madison Patent Holdings, Sas Método e dispositivo de reprodução de pelo menos uma sequência de um conteúdo de vídeo filmado usando uma câmera e mídia de armazenamento legível por computador
US9369662B2 (en) * 2013-04-25 2016-06-14 Microsoft Technology Licensing, Llc Smart gallery and automatic music video creation from a set of photos
US11609689B2 (en) 2013-12-11 2023-03-21 Given Imaging Ltd. System and method for controlling the display of an image stream
US10095398B2 (en) * 2014-02-27 2018-10-09 Dropbox, Inc. Navigating galleries of digital content
US9836205B2 (en) 2014-02-27 2017-12-05 Dropbox, Inc. Activating a camera function within a content management application
GB2541912A (en) * 2015-09-03 2017-03-08 Nokia Technologies Oy A method and system for communicating with a user immersed in a virtual reality environment
US10169849B2 (en) * 2016-11-11 2019-01-01 International Business Machines Corporation Contextual personalized focus for variable depth of field photographs on social networks
JP7271887B2 (ja) * 2018-09-21 2023-05-12 富士フイルムビジネスイノベーション株式会社 表示制御装置及び表示制御プログラム
WO2021061601A1 (en) * 2019-09-27 2021-04-01 Raitonsa Dynamics Llc Method and device for generating a map from a photo set
US11416917B2 (en) * 2020-08-04 2022-08-16 Contextlogic, Inc. Content carousel

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6813394B1 (en) * 1998-08-31 2004-11-02 Canon Kabushiki Kaisha Image storage method and apparatus
JP2001230992A (ja) 2000-02-18 2001-08-24 Nidec Copal Corp 画像表示装置及びその制御方法
US6882350B2 (en) * 2000-08-07 2005-04-19 Sony Corporation Information processing apparatus, information processing method, program storage medium and program
US7327891B2 (en) * 2001-07-17 2008-02-05 Yesvideo, Inc. Automatic selection of a visual image or images from a collection of visual images, based on an evaluation of the quality of the visual images
US7184082B2 (en) * 2001-08-28 2007-02-27 Olympus Corporation Image displaying system, image displaying method, image printing system, and image printing method
JP2003299028A (ja) * 2002-03-29 2003-10-17 Fuji Photo Film Co Ltd 画像表示装置及び画像管理プログラム
JP2004246868A (ja) 2003-01-22 2004-09-02 Canon Inc 画像抽出方法及び該方法をコンピュータに実行させるプログラム
US20040169727A1 (en) 2003-02-27 2004-09-02 Romano Nathan J. System and method for viewing and selecting images for printing
JP4200038B2 (ja) * 2003-04-07 2008-12-24 富士フイルム株式会社 ファイル選択支援プログラムおよびファイル選択支援方法
JP2007528523A (ja) * 2003-06-30 2007-10-11 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ ディジタル画像の改善された組織化及び検索のための装置及び方法
US20050034084A1 (en) * 2003-08-04 2005-02-10 Toshikazu Ohtsuki Mobile terminal device and image display method
US20050062841A1 (en) * 2003-09-18 2005-03-24 Rivera-Cintron Carlos A. System and method for multi-media record, distribution and playback using wireless communication
JP4547214B2 (ja) * 2004-09-10 2010-09-22 富士フイルム株式会社 電子アルバム表示システム、電子アルバム表示方法、及びプログラム
US7908558B2 (en) * 2005-05-12 2011-03-15 Hewlett-Packard Development Company, L.P. Method and system for automatically selecting images from among multiple images

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101794066A (zh) * 2009-01-21 2010-08-04 三星数码影像株式会社 用于提供幻灯片放映的方法和设备及计算机可读存储介质
US8924856B2 (en) 2009-01-21 2014-12-30 Samsung Electronics Co., Ltd. Method of and apparatus for providing a slide show, and computer readable storage medium having recorded thereon a computer program for providing a slide show
CN101794066B (zh) * 2009-01-21 2015-07-22 三星电子株式会社 用于提供幻灯片放映的方法和设备
CN106250070A (zh) * 2015-06-09 2016-12-21 精工爱普生株式会社 显示控制装置
CN106250070B (zh) * 2015-06-09 2021-02-26 精工爱普生株式会社 显示控制装置
CN105208439A (zh) * 2015-09-11 2015-12-30 深圳Tcl数字技术有限公司 音频文件播放方法及装置
WO2017041543A1 (zh) * 2015-09-11 2017-03-16 深圳Tcl数字技术有限公司 音频文件播放方法及装置
CN105208439B (zh) * 2015-09-11 2018-09-04 深圳Tcl数字技术有限公司 音频文件播放方法及装置
CN111603194A (zh) * 2020-06-02 2020-09-01 上海联影医疗科技有限公司 乳腺断层图像显示的方法、系统和计算机可读存储介质
CN111603194B (zh) * 2020-06-02 2023-09-19 上海联影医疗科技股份有限公司 乳腺断层图像显示的方法、系统和计算机可读存储介质

Also Published As

Publication number Publication date
EP1793577A1 (en) 2007-06-06
KR20080079645A (ko) 2008-09-01
WO2007067334A1 (en) 2007-06-14
US8249397B2 (en) 2012-08-21
US20080317386A1 (en) 2008-12-25

Similar Documents

Publication Publication Date Title
CN101322396A (zh) 数字图像的回放
JP4577173B2 (ja) 情報処理装置および方法、並びにプログラム
CN101180870B (zh) 自动编辑媒体记录的方法
CN109040297B (zh) 用户画像生成方法及装置
CN101710956B (zh) 信息处理系统、数字相框以及信息处理方法
US7882442B2 (en) Multi-frame display system with perspective based image arrangement
CN108235765A (zh) 一种故事相册的显示方法及装置
US20080235574A1 (en) Multi-frame display system with semantic image arrangement
JP6589880B2 (ja) 情報処理システム、制御方法、および記憶媒体
JP2011215964A (ja) サーバ装置、クライアント装置、コンテンツ推薦方法及びプログラム
JP2011170690A (ja) 情報処理装置、情報処理方法、およびプログラム。
US20060039674A1 (en) Image editing apparatus, method, and program
US11663261B2 (en) Defining a collection of media content items for a relevant interest
US10430149B2 (en) Image display device, image display method, and image display program
WO2008085379A2 (en) Function enhancing array for multi-frame display system
JP2007226555A (ja) 無意識に撮影された画像の閲覧装置及び方法
CN101258492A (zh) 显示装置、输出装置、显示系统、显示方法、媒体、程序以及外部单元
JP2006140559A (ja) 画像再生装置及び画像再生方法
CN103198084A (zh) 图像显示系统、图像显示装置、服务器、图像显示方法
WO2017022296A1 (ja) 情報管理装置及び情報管理方法、並びに映像再生装置及び映像再生方法
JP6958795B1 (ja) 情報処理方法、コンピュータプログラム及び情報処理装置
JP7485893B2 (ja) 情報処理装置、制御プログラム、及び制御方法
JP5517895B2 (ja) 端末装置
JP4600514B2 (ja) 画像表示装置、画像表示方法および画像表示プログラム
Jiang A prototype system for saving and representing personal moments

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Open date: 20081210