CN108780377A - 使用计算设备的对象管理和可视化 - Google Patents
使用计算设备的对象管理和可视化 Download PDFInfo
- Publication number
- CN108780377A CN108780377A CN201780016310.4A CN201780016310A CN108780377A CN 108780377 A CN108780377 A CN 108780377A CN 201780016310 A CN201780016310 A CN 201780016310A CN 108780377 A CN108780377 A CN 108780377A
- Authority
- CN
- China
- Prior art keywords
- thumbnail
- visual object
- layout
- dimensions
- multiple visual
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012800 visualization Methods 0.000 title description 3
- 230000000007 visual effect Effects 0.000 claims abstract description 388
- 238000000034 method Methods 0.000 claims abstract description 105
- 230000004044 response Effects 0.000 claims description 44
- 238000003860 storage Methods 0.000 claims description 37
- 230000033001 locomotion Effects 0.000 claims description 14
- 238000004590 computer program Methods 0.000 claims description 13
- 230000004438 eyesight Effects 0.000 description 69
- 238000012545 processing Methods 0.000 description 24
- 230000015654 memory Effects 0.000 description 22
- 238000012163 sequencing technique Methods 0.000 description 17
- 238000001514 detection method Methods 0.000 description 12
- 238000010586 diagram Methods 0.000 description 12
- 230000015572 biosynthetic process Effects 0.000 description 11
- 238000009826 distribution Methods 0.000 description 10
- 230000009471 action Effects 0.000 description 9
- 230000006870 function Effects 0.000 description 9
- 230000009897 systematic effect Effects 0.000 description 9
- 238000004891 communication Methods 0.000 description 5
- 108091023037 Aptamer Proteins 0.000 description 4
- 241000406668 Loxodonta cyclotis Species 0.000 description 4
- 230000008878 coupling Effects 0.000 description 4
- 238000010168 coupling process Methods 0.000 description 4
- 238000005859 coupling reaction Methods 0.000 description 4
- 239000004744 fabric Substances 0.000 description 4
- 238000007726 management method Methods 0.000 description 4
- 238000009877 rendering Methods 0.000 description 4
- 230000005540 biological transmission Effects 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 239000000463 material Substances 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 230000008859 change Effects 0.000 description 2
- 238000005520 cutting process Methods 0.000 description 2
- 230000001419 dependent effect Effects 0.000 description 2
- 235000013399 edible fruits Nutrition 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 230000002085 persistent effect Effects 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- RYGMFSIKBFXOCR-UHFFFAOYSA-N Copper Chemical compound [Cu] RYGMFSIKBFXOCR-UHFFFAOYSA-N 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 210000004556 brain Anatomy 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 229910052802 copper Inorganic materials 0.000 description 1
- 239000010949 copper Substances 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000005611 electricity Effects 0.000 description 1
- 230000008451 emotion Effects 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000007689 inspection Methods 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- QWXYZCJEXYQNEI-OSZHWHEXSA-N intermediate I Chemical compound COC(=O)[C@@]1(C=O)[C@H]2CC=[N+](C\C2=C\C)CCc2c1[nH]c1ccccc21 QWXYZCJEXYQNEI-OSZHWHEXSA-N 0.000 description 1
- 230000000670 limiting effect Effects 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000036651 mood Effects 0.000 description 1
- 210000003733 optic disk Anatomy 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 238000003909 pattern recognition Methods 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000008929 regeneration Effects 0.000 description 1
- 238000011069 regeneration method Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F40/00—Handling natural language data
- G06F40/10—Text processing
- G06F40/103—Formatting, i.e. changing of presentation of documents
- G06F40/106—Display of layout of documents; Previewing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/04817—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/0482—Interaction with lists of selectable items, e.g. menus
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Computational Linguistics (AREA)
- General Health & Medical Sciences (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Artificial Intelligence (AREA)
- User Interface Of Digital Computer (AREA)
- Processing Or Creating Images (AREA)
Abstract
一种用于操作电子设备的方法包括:确定多个视觉对象中的每一个的宽高比、根据宽高比确定多个视觉对象中的每一个的缩略图尺寸、基于缩略图尺寸生成多个视觉对象的缩略图的布局以及根据布局显示多个视觉对象的缩略图。
Description
技术领域
本公开涉及使用计算设备的对象管理和可视化。
背景技术
许多计算设备(诸如台式计算机、便携式计算机、智能手机、平板电脑以及其他信息设备)使用图库视图来显示图像。图库视图在计算设备的屏幕上同时显示多个图像的缩略图。通常,图库视图中的所有缩略图的尺寸一致或相同,从而允许缩略图以矩形或正方形网格显示。然而,这种一致性在视觉上不能吸引用户,并且不能向用户提供丰富的观看体验。
发明内容
问题的解决方案
一个实施例包括呈现视觉对象的缩略图的方法。该方法包括:使用处理器确定多个视觉对象的宽高比;基于视觉对象的宽高比,使用处理器将多个视觉对象中的每一个与选自多个预定缩略图尺寸的缩略图尺寸相关联;以及使用处理器确定在多个视觉对象内是否检测到视觉特征。该方法包括:基于视觉对象的时间顺序、视觉特征的检测以及与视觉对象相关联的缩略图尺寸,使用处理器生成用于显示多个视觉对象的缩略图的布局。该方法还包括:根据布局,使用屏幕和处理器显示缩略图。
另一个实施例包括用于呈现视觉对象的缩略图的装置。该装置包括:屏幕和耦接到屏幕的处理器。该处理器被配置为:确定多个视觉对象的宽高比;基于视觉对象的宽高比,将多个视觉对象中的每一个与选自多个预定缩略图尺寸的缩略图尺寸相关联;以及确定在多个视觉对象内是否检测到视觉特征。该处理器被配置为:基于视觉对象的时间顺序、视觉特征的检测以及与视觉对象相关联的缩略图尺寸,生成用于显示多个视觉对象的缩略图的布局。该处理器还被配置为:基于布局,使用屏幕显示缩略图。
另一个实施例包括计算机程序产品。该计算机程序产品包括计算机可读存储介质,计算机可读存储介质上存储有用于呈现视觉对象的缩略图的程序代码。该程序代码由处理器执行,以执行操作。该操作包括:使用处理器确定多个视觉对象的宽高比基于视觉对象的宽高比,使用处理器将多个视觉对象中的每一个与选自多个预定缩略图尺寸的缩略图尺寸相关联;以及使用处理器确定在多个视觉对象内是否检测到视觉特征。该操作包括:基于视觉对象的时间顺序、视觉特征的检测以及与视觉对象相关联的缩略图尺寸,使用处理器生成用于显示多个视觉对象的缩略图的布局。该操作还包括:根据布局,使用屏幕和处理器显示缩略图。
在其他实施例中,用于操作电子设备的方法包括:确定多个视觉对象中的每一个的宽高比、基于宽高比确定多个视觉对象中的每一个的缩略图尺寸、基于缩略图尺寸生成多个视觉对象的缩略图的布局以及根据该布局显示多个视觉对象的缩略图。
在其他实施例中,电子设备包括屏幕和处理器,该处理器耦接到屏幕并且被配置为:确定多个视觉对象中的每一个的宽高比;基于宽高比确定多个视觉对象中的每一个的缩略图尺寸;以及根据缩略图尺寸生成用于多个视觉对象的缩略图的布局。该屏幕被配置为:根据布局,显示多个视觉对象的缩略图。
在其他实施例中,一种计算机程序产品,包括计算机可读存储介质,该计算机可读介质具有存储在电子设备中的程序代码,该程序代码可由处理器执行以执行操作并且包括:确定多个视觉对象中的每一个的宽高比;基于宽高比确定多个视觉对象中的每一个的缩略图尺寸;根据缩略图尺寸生成用于多个视觉对象的缩略图的布局;以及根据布局,显示多个视觉对象的缩略图。
本发明内容部分仅仅是为了介绍某些概念,而不是确定所要求保护的主题的任何关键或必要特征。根据附图和以下详细描述,本发明的许多其他特征和实施例将是显而易见的。
附图说明
附图示出了一个或更多个实施例;然而,附图不应被视为将本发明仅限于所示的实施例。通过阅读以下详细描述并参考附图,本发明的各个方面和优点将变得显而易见。
图1是示例性数据处理系统的框图。
图2是例示了呈现视觉对象的缩略图的示例性方法的流程图。
图3是例示了视觉对象的示例性缩略图尺寸的图。
图4是例示了用于显示视觉对象的缩略图的示例性布局的图。
图5至图8是例示了用于生成布局的示例性操作的图。
图9是例示了布局的最后一个序列的可允许序列布置的示例的图。
图10是例示了示例性布局的图。
图11至图15是例示了用于生成布局的示例性操作的图。
图16是例示了呈现视觉对象的缩略图的另一示例性方法的流程图。
图17A、图17B和图17C共同作为例示了生成用于显示视觉对象的缩略图的布局的示例性方法的流程图。
具体实施方式
虽然本公开附有定义新颖性特征的权利要求,但是应当认为,通过结合附图考虑说明书,将更好地理解本文所描述的各种特征。为了说明目的,提供在本公开中描述的过程、机器、制造和它们的任何变型。所描述的任何具体的结构和功能细节不应当被解释为限制性的,而是仅作为权利要求的基础,并且作为教导本领域技术人员以各种方式采用在实际上任何适当详述结构中描述的特征的代表性基础。此外,在本公开中使用的术语和短语并非旨在为限制性的,而是提供对所描述的特征的可理解描述。
本公开涉及使用计算设备管理和显示视觉对象。根据本文描述的发明性布置,分析视觉对象以确定一个或更多个属性。宽高比和时间戳是可以确定的视觉对象的属性的示例。使用这些属性,视觉对象可以与一个或更多个不同的预定缩略图尺寸相关联。与视觉对象相关联的缩略图尺寸可以与时间顺序相结合以确定用于显示视觉对象的缩略图的布局。该计算设备可以根据布局显示视觉对象。
一方面,可以分析视觉对象的内容以确定视觉对象的附加属性。例如,可以在视觉对象内检测到一个或更多个视觉特征。检测到的视觉特征可以用于执行附加操作,诸如在布局中选择特定缩略图尺寸以用于视觉对象。检测到的视觉特征还可以用于确定在布局使用的缩略图中示出的视觉对象的区域,例如,在何处或如何裁剪缩略图。另一方面,可以分析数字对象的元数据以确定其他属性。从视觉对象的元数据的分析获得的属性可以用于选择在布局中显示的视觉对象的特定缩略图尺寸。下面参考附图描述其他细节。
图1是示例性数据处理系统(系统)100的框图。系统100可以用于实施包括处理器和存储器以及能够执行本公开中描述的操作的各种系统和/或计算设备中的任一个。
如图所示,系统100包括至少一个处理器105,该至少一个处理器105通过系统总线115或其他诸如输入/输出(I/O)子系统的合适的电路耦接到存储器元件110。系统100将程序代码存储在存储器元件110内。处理器105执行经由系统总线115从存储器元件110访问的程序代码。存储器元件110包括一个或更多个物理存储器设备,例如本地存储器120和一个或更多个大容量存储设备125。本地存储器120指的是在程序代码的实际执行期间通常使用的随机存取存储器(RAM)或其他非持久性存储器设备。大容量存储设备125可以被实施为硬盘驱动器(HDD)、固态驱动器(SSD)或其他持久性数据存储设备。系统100还可以包括一个或更多个高速缓冲存储器(未示出),其提供至少一些程序代码的临时存储,以便减少在执行期间必须从大容量存储设备125检索程序代码的次数。
系统100可以耦接到一个或更多个I/O设备,诸如屏幕135和一个或更多个附加I/O设备140。本文描述的I/O设备可以直接或通过中间I/O控制器耦接到系统100。一方面,屏幕135可以被实施为非触敏式显示设备。另一方面,屏幕135可以被实施为触敏式显示设备。
I/O设备140的示例可以包括但不限于键盘、定点设备、相机、扬声器和麦克风。在一些情况下,在触敏式显示设备(如,触摸屏)被用作显示器135的情况下,可以组合I/O设备中的一个或更多个。在这种情况下,屏幕135还可以被实施为键盘和定点设备。I/O设备140的其他示例可以包括传感器。示例性传感器可包括但不限于加速计、光传感器、触摸屏传感器、一个或更多个生物传感器、陀螺仪、罗盘等。
I/O设备140还可以包括一个或更多个网络适配器。网络适配器是被配置为与其他设备建立有线和/或无线通信链路的通信电路。通信链路可以通过网络建立或者作为对等通信链路建立。因此,网络适配器使系统100能够耦接到其他系统、计算机系统、远程打印机和/或远程存储设备。示例性网络适配器可以包括但不限于调制解调器、电缆调制解调器、以太网卡、无线收发器、短程和/或远程无线收发器(例如,蜂窝收发器、802.11x(Wi-FiTM)兼容收发器、兼容收发器等)。
如图1所示,存储器元件110可以存储操作系统155以及一个或更多个应用160。一方面,操作系统155和应用160以可执行程序代码的形式实施、由系统100执行,并且更具体地由处理器105执行。因此,操作系统155和应用160可以被认为是系统100的集成部分。操作系统155、应用160和系统100使用、生成和/或操作的任何数据项是在作为处理系统100的一部分被采用时赋予功能的功能性数据结构。
如图所示,系统100将多个视觉对象165存储在存储器元件110中。如本公开中所定义的,术语“视觉对象”表示指定数字信息的数字文件或计算机可读文件,当由处理器呈现给屏幕时,该数字信息产生图片。一方面,视觉对象是图像。另一方面,视觉对象是视频。又一方面,视觉对象是诸如文字处理文档、电子表格、演示文稿、网页等的文档。
系统100被配置为在使用屏幕135的马赛克(mosaic)视图170中显示视觉对象165的缩略图。如本公开中所定义的“马赛克视图”表示视觉对象的多个缩略图的视图,其中缩略图具有非一致的矩形尺寸。如本文所定义的,术语“缩略图”指为较大视觉对象的较小表示的图像。例如,对于图像类型视觉对象,缩略图是较大图像的较小图像表示。缩略图用于简化管理和查看一组较大的可视对象。如本文所定义的,术语“运动缩略图”表示视觉对象,其包括以连续顺序播放的多个缩略图以模拟运动、多媒体、视频或表示多个视觉对象。运动缩略图可以根据多个视觉对象生成,并且顺序地显示其中包括的多个缩略图中的不同缩略图。例如,运动缩略图可以显示从视频获得的一系列缩略图,从而实现视频的较小表示或视频的一部分。运动缩略图可以显示从以连拍模式等拍摄的多个单独图像获得的一系列缩略图。因此,马赛克视图170的一个或更多个缩略图可以是运动缩略图。
一方面,系统100可以被用于实施诸如个人计算机、服务器等的计算机。另一方面,系统100可以被用于实施移动计算设备。移动计算设备的示例可以包括但不限于“智能”手机、平板电脑、移动媒体设备、游戏控制台、移动互联网设备(MID)、个人数字助理、笔记本电脑、移动设备装置等。在一些实施例中,系统100可以被称为电子设备。
根据所实施特定类型的设备,系统100可以包括比图1所示更少的组件或者图1中未示出的附加组件。此外,所包括的特定操作系统和/或应用也可以根据设备类型而变化,如所包括的网络适配器的类型一样。此外,一个或更多个说明性组件可以结合到另一个组件中,或者以其他方式形成另一个组件的一部分。例如,处理器可以包括至少一些存储器。
图2是例示了呈现视觉对象的缩略图的示例性方法200的流程图。方法200可以由如参考图1描述的系统实施。方法200可以在多个视觉对象存储于系统内并且使用马赛克视图显示的状态下开始。例如,用户可以选择要使用马赛克视图显示的事件或其他定义的可视对象组。方法200可以通过自动响应于诸如用户请求的事件的系统,或向视觉对象组中添加一个或更多个视觉对象来实施。
在框205中,系统确定要使用马赛克视图显示的视觉对象的宽高比。系统可以分析视觉对象以确定宽高比。如本公开中所定义的,术语“宽高比”表示数字对象的帧宽度与帧高度的比。在一个实施例中,在文档的情况下,宽高比可以指文档的可打印区域的宽度与可打印区域的高度的比。例如,页面布局为8.5×11英寸的文档可以具有8.5×11的宽高比。
在一种布置中,系统可以分析并识别如正方形、纵向、横向或全景的视觉对象的宽高比。例如,在文档的情况下,文字处理文档、电子表格或演示文稿可以具有纵向、横向或正方形的宽高比,这取决于文档的指定方向、可打印区域等。例如,8.5×11的文档在纵向时可以具有纵向宽高比或在横向时可以具有横向宽高比。在另一个示例中,文档可以具有正方形的默认宽高比。
在框210中,系统根据宽高比将视觉对象与缩略图尺寸相关联。例如,系统可以根据数字对象的宽高比将每个视觉对象与一个或更多个不同的预定缩略图尺寸相关联。系统可以通过标记、在数据库中创建条目或者使用其他合适的数据结构将缩略图尺寸和视觉对象相关联,以将关联存储在存储器中。一方面,不同预定的缩略图尺寸中的每一个可以被定义为由一个或更多个正方形区块形成的网格,其中区块是不可以被进一步细分的基本测量单位。参考图3更详细地描述缩略图尺寸。
在框215中,系统确定视觉对象的缩略图布局。系统根据视觉对象的时间顺序和与在马赛克视图中显示的每个视觉对象相关联的缩略图尺寸来确定布局。除非另有明确说明正向时间顺序或反向时间顺序,否则术语“时间顺序”表示从最新到最旧的时间顺序(反向时间顺序)和从最旧到最新的时间顺序(正向时间顺序)。使用时间顺序和缩略图尺寸,系统确定布局。布局可以为每个视觉对象的缩略图指定特定缩略图尺寸和位置。在确定布局时,系统根据确定的布局生成视觉对象的缩略图。一方面,系统可以利用附加属性,在布局内选择要用于视觉对象中的一个或更多个或每一个的缩略图尺寸。下面更详细地描述缩略图选择的其他方面。
在框220中,系统使用布局显示视觉对象的缩略图。应当理解的是,图2例示了了呈现缩略图的方法,其中布局由系统动态地确定。例如,响应于用户输入以显示一组可视对象,系统可以动态地执行方法200或者至少动态地执行框215。随着新的可视对象被添加到组中,系统可以重新生成布局。
图3是例示了视觉对象的示例性缩略图尺寸的图。图3中所示的箭头的左侧示出了正方形305、纵向310、横向315和全景320的宽高比。图3中所示的箭头的右侧示出了缩略图尺寸。使用区块定义缩略图尺寸为宽度×高度。上述的区块是正方形的。
图3例示了被确定为具有正方形宽高比305的视觉对象可以使用1×1缩略图尺寸或者2×2缩略图尺寸来表示。因此,在图2的框210中,系统将被确定为具有正方形宽高比305的每个视觉对象与1×1缩略图尺寸或者2×2缩略图尺寸相关联。
可以使用1×1缩略图尺寸、1×2缩略图尺寸或2×2缩略图尺寸来表示被确定为具有纵向宽高比310的视觉对象。因此,在图2的框210中,系统将被确定为具有纵向宽高比310的每个视觉对象与1×1缩略图尺寸、1×2缩略图尺寸和2×2缩略图尺寸相关联。
可以使用1×1缩略图尺寸、2×1缩略图尺寸、2×2缩略图尺寸或3×2缩略图尺寸来表示被确定为具有横向宽高比315的视觉对象。因此,在图2的框210中,系统将被确定为具有横向宽高比315的每个视觉对象与1×1缩略图尺寸、2×1缩略图尺寸、2×2缩略图尺寸和3×2缩略图尺寸相关联。
可以使用1×1缩略图尺寸或4×1缩略图尺寸来表示被确定为具有全景宽高比320的视觉对象。因此,在图2的框210中,系统将被确定为具有全景宽高比320的每个视觉对象与1×1缩略图尺寸和4×1缩略图尺寸相关联。
系统将每个视觉对象与可用于所确定的宽高比的每个可能的缩略图尺寸相关联。在布局生成时,从与视觉对象相关联的缩略图尺寸中选择布局中的用于特定视觉对象的缩略图的特定缩略图尺寸。
图4是例示了用于显示视觉对象的缩略图的示例性布局的图。图4所示的布局可以用于在诸如参考图1描述的系统的计算设备的显示器上显示视觉对象。图4例示了第一传统布局405,其中缩略图的尺寸是一致的。在图4的示例中,无论生成缩略图的视觉对象的宽高比如何,布局405都具有使用的正方形缩略图。
布局410是根据本文公开的发明性布置创建的马赛克布局。通常,布局410由多个行415、420、425、430、435和440形成。出于讨论的目的,两个相邻的行形成序列。如图所示,行415和420形成序列445。行425和430形成序列450。行435和440形成序列455。
在图4中出于说明和讨论的目的,使用相同的附图标记来表示缩略图和生成缩略图的视觉对象。例如,在布局405中,视觉对象1-12由缩略图1-12表示,其中缩略图1用于视觉对象1、缩略图2用于视觉对象2等。在布局410中,使用相同的编号方案来说明使用本文描述的发明性布置实现的缩略图尺寸的变化。因此,对于布局410,行415由缩略图1,以及缩略图2和3的顶部形成。行420由缩略图4,以及缩略图2和3的底部形成。行425由缩略图5的顶部和缩略图6形成。行430由缩略图5的底部和缩略图7形成。行435由缩略图8和9形成。行440由缩略图10、11和12形成。
虽然仍然可以使用1×1缩略图尺寸来表示一个或更多个视觉对象,但是可以使用不同的缩略图尺寸来表示多个其他视觉对象。例如,使用1×1缩略图尺寸来表示视觉对象1、4、6、7、10和12。使用2×2缩略图尺寸表示视觉对象2。使用1×2缩略图尺寸表示视觉对象3。使用3×2缩略图尺寸表示视觉对象5。使用2×1缩略图尺寸表示视觉对象8、9和11。
在一个实施例中,在生成布局410时,系统可以创建序列445,然后是序列450,接着是序列455。此外,可以从左到右逐行地生成序列。例如,系统可以从左到右填充行415,然后从左到右填充行420。
如图3所示,可以使用1×1缩略图尺寸来表示每个不同的宽高比。因此,1×1缩略图尺寸始终是用于表示视觉对象的可用选项。然而,在一些情况下,可以选择不同的或更大的缩略图尺寸来表示视觉对象。例如,当多于一个缩略图尺寸可用时,视觉对象的诸如检测到的视觉特征和/或元数据的附加属性可以被分析并被用于选择视觉对象的特定缩略图尺寸。
作为说明性示例,可以使用较大的缩略图尺寸来显示视觉对象2和5,以响应于(1)确定较大的缩略图尺寸与视觉对象2和5相关联;(2)确定存在足够的空白空间以适配较大尺寸的缩略图;以及(3)从视觉对象的元数据中检测特定属性,诸如喜欢状态、高于用户评级阈值的特定用户评级、视觉对象的多个视图等。在另一示例中,可以使用1×2缩略图尺寸显示视觉对象3,以响应于(1)确定1×2缩略图尺寸与视觉对象3相关联;(2)确定存在足够的空白空间以适配较大的缩略图尺寸;以及(3)检测视觉对象内竖直定向的视觉特征。类似地,可以使用2×1缩略图尺寸显示视觉对象8、9和11,以响应于确定(1)2×1缩略图尺寸与视觉对象8、9和11中的每一个相关联;(2)存在足够的空白空间来适配更大的缩略图尺寸;(3)检测视觉对象8、9和11中的每一个内的水平定向的视觉特征。
在本公开中,术语“尺寸扩大条件”指视觉对象的任何属性,其使得系统选择大于视觉对象可用的最小缩略图尺寸的缩略图尺寸。属性可以是元数据项或视觉对象的视觉特征。尺寸扩大条件的示例包括但不限于检测视觉对象的元数据的一个或更多个特定属性,诸如喜欢状态、高于用户评级阈值的特定用户评级、视觉对象的多个视图等。尺寸扩大条件的其他示例包括但不限于检测视觉对象的内容内的特定视觉特征,诸如竖直定向的视觉特征、水平定向的视觉特征、一种或更多种颜色、一个或更多个纹理、一个或更多个对象(诸如面部、人类等)。下面更详细地描述了尺寸扩大条件的其他示例以及尺寸扩大条件应用于视觉对象的缩略图生成。
图5至图8是例示了用于生成布局的示例性操作的图。图5至图8中描述的操作可以由诸如图1中的系统100的系统执行,以生成布局并根据生成的布局显示缩略图。
图5例示了由系统形成的示例性序列500。系统已为序列500的最左边部分生成2×2缩略图尺寸。序列500的顶行以另外两个视觉对象的两个1×1缩略图尺寸完成。阴影区块表示序列500的一些部分,其中没有生成或分配缩略图(即,空白空间)。如图所示,在第二行中序列500仅剩下两个1×1区块。
在该示例中,系统已为视觉对象505生成了4×1缩略图尺寸。系统确定4×1缩略图尺寸将不适配序列500中的空白空间,并且响应于该确定,为视觉对象505生成1×1缩略图尺寸。视觉对象505具有全景宽高比,并且因此可以具有1×1或4×1的缩略图尺寸。在这种情况下,系统再生成视觉对象505的1×1缩略图并将其定位到序列500的阴影部分的一个区块。系统可以选择具有相关缩略图尺寸1×1的下一个视觉对象,并将1×1缩略图放置在序列500的剩余阴影区块中以完成该行。
图6例示了由系统形成的示例性序列600。系统在顶行生成1×1缩略图尺寸,接着是1×2缩略图尺寸、1×1缩略图尺寸和另一个1×1缩略图尺寸。序列600的第一行是满的。因此,高度超于一个区块的任何区块将不适配序列600的第二行中的空白空间。在图6的示例中,下一个视觉对象的缩略图尺寸为1×2,系统不会在填充第二行序列600的空白空间时使用该缩略图尺寸。
图7例示了由系统形成的示例性序列700-1、700-2和700-3,其中每个序列具有不同的缩略图布置。在每种情况下,系统生成两个1×1缩略图尺寸和两个1×2缩略图尺寸以填充第一行。此外,空白空间显示为阴影区块。在图7的示例中,序列700-1、700-2和700-3中的每一个具有第二行,其被分成两列,例如,具有两个空白区块。在所示的任何布置中,第二行中的两个空白区块不是连续的或相邻的。此外,每行的高度仅为一个区块。因此,高度超过一个区块的任何区块将不适配序列700-1、700-2或700-3的第二行中的空白空间。在图7的示例中,下一个视觉对象的缩略图尺寸为2×1,系统不会将其用于填充序列700-1、700-2或700-3中的任一个在第二行的空白空间。
图8例示了由系统形成的示例性序列800-1和800-2。系统已选择了三个1×1缩略图尺寸和一个1×2缩略图尺寸来填充每个序列的第一行。针对所示的四个缩略图尺寸,图8例示了如序列800-1和800-2所示的不同布置。在每种情况下,第二行中产生的空白空间显示为阴影区块。在图8的示例中,序列800-1和800-2中的每一个的第二行被分为两列。因为在第一行中只有一个缩略图是1×2,所以在第二行中会有三个可用的1×1区块。此外,在所示的任何布置中,三个可用的1×1区块都不是连续的。相反,第二行分为两列,其中一列宽度为1×1区块,另一列宽度为两个1×1区块。因此,宽度超过两个区块或者任何高度超过一个区块的任何缩略图都不适配序列800-1或800-2的序列的第二行中的空白空间。在图8的示例中,下一个视觉对象的缩略图尺寸为3×2,系统不使用该缩略图尺寸填充第二行的剩余部分。由于具有3×2缩略图尺寸的任何视觉对象也可以具有2×1或1×1的缩略图尺寸,所以系统可以生成2×1尺寸的缩略图,以包括在序列800-1或800-2中的任一个的第二行的可用空间中。
图9是例示了布局的最后一个序列的可允许序列布置的图。更具体地,图9例示了用于实施布局的最后一个序列的示例性过程。在图9的每一个示例性序列布置中,非阴影表示已占用空间,阴影表示空白空间。图9例示了在布局的最后一个序列中存在任何空白空间的范围,空白空间与右侧对齐。布局的最后一个序列不包括位于任何已占用块左侧的任何空白区块。序列900-1、900-2、900-3和900-4是布局的最后一个序列的可允许或合规的序列布置。如图所示,空白区域位于第二行而不是顶行。此外,任何空白空间都右侧对齐。
在一个实施例中,响应于确定出最后一个序列的布置不符合如图9所示的允许的布置,系统可以再生成最后一个序列,直到发现序列的布置匹配可允许的序列布置900-1、900-2、900-3或900-4中的一个。
图10是例示了示例性布局1000的视图。图10例示了在布局生成期间由系统执行的序列检查操作的示例。布局1000是包括序列1005、1010和1015的马赛克布局。序列1010不同于序列1005。然而,序列1015与序列1010相同。更具体地,跨越序列1010和1015的两行的缩略图尺寸的布置是相同的。根据一个实施例,系统可以监测出现两个相同或顺序相同的序列。响应于检测到两个相同的相邻序列,系统可以再创建两个序列中的第二个。在该示例中,响应于检测到序列1015与序列1010相同,系统利用不同的布置(例如,不同的缩略图尺寸、不同的排序和/或不同的视觉对象的缩略图)再创建序列1015。
图11是例示了用于生成布局的示例性操作的图。图11例示了视觉对象1105的宽高比为纵向的示例。在视觉对象1105内,系统检测视觉特征,诸如具有竖直取向的线。在所示的示例中,检测到的特征基本上在视觉对象1105的整个高度上延伸。因此,响应于检测到视觉特征,系统为视觉对象1105选择缩略图尺寸1×2而不是缩略图尺寸1×1。
图12是例示了用于生成布局的示例性操作的图。图12例示了视觉对象1205的宽高比为纵向的示例。在视觉对象1205内,系统检测视觉特征,诸如具有竖直取向的线。在所示的示例中,检测到的特征并非基本上在视觉对象1205的整个高度上延伸。因此,响应于检测到视觉特征,系统为视觉对象1205选择缩略图尺寸1×1而不是缩略图尺寸1×2。
图13是例示了用于生成布局的示例性操作的图。图13例示了视觉对象1305的宽高比为横向的示例。在视觉对象1305内,系统检测视觉特征,诸如具有水平取向的线。在所示的示例中,检测到的特征基本上在视觉对象1305的整个宽度上延伸。因此,响应于检测到视觉特征,系统为视觉对象1305选择缩略图尺寸2×1或缩略图尺寸3×2。
图14是例示了用于生成布局的示例性操作的图。图14例示了视觉对象1405的宽高比为横向的示例。在视觉对象1405内,系统检测视觉特征,诸如具有水平取向的线。在所示的示例中,检测到的特征并非基本上在视觉对象1405的整个宽度上延伸。因此,响应于检测到视觉特征,系统为视觉对象1405选择缩略图尺寸1×1。
图15是例示了用于生成布局的示例性操作的图。图15例示了视觉对象1505的宽高比为纵向的示例。在视觉对象1505内,系统检测到一个或更多个视觉特征并识别其中的人。系统还可以确定视觉对象1505的下部不包括大量特征或其他细节。因此,系统选择1×1缩略图尺寸。此外,图15例示了在生成缩略图时,系统包括视觉对象的区域,该区域包括缩略图中检测到的视觉特征(或视情况而定的对象),使得在生成的缩略图中,检测到的视觉特征可见。可以裁剪缺少视觉特征和/或细节的视觉对象1505的区域,使得包括检测到的视觉特征的区域包含在生成的缩略图中。虽然参考图15描述了该技术,但应当理解,类似的处理可以应用于图11至图14,其中包括检测到的视觉特征的视觉对象部分被包含以显示在为视觉对象生成的缩略图内,同时裁剪被确定为缺少视觉特征的区域。
图16是例示了呈现视觉对象的缩略图的另一示例性方法1600的流程图。方法1600可以由如参考图1描述的系统实施。方法1600例示了更详细的实施方式,其结合了可视对象的附加属性以用于生成缩略图的布局。方法1600可以在使用马赛克布局显示的多个视觉对象存储在系统内的状态下开始。方法1600可以由自动响应于诸如用户请求的事件的系统,或者向一组视觉对象添加一个或更多个视觉对象来实施。
在框1605中,系统确定视觉对象的宽高比。在框1610中,系统根据宽高比将视觉对象与缩略图尺寸相关联。在框1615中,系统可以检测视觉对象内的一个或更多个视觉特征。例如,系统可以分析视觉对象的内容以检测特定特征,诸如具有特定取向(如,竖直、水平、对角线)、颜色、纹理的线等。在一种布置中,系统可以检测视觉特征,作为在视觉对象上执行对象识别的一部分。系统可以使用特征检测、匹配、模式识别或其他图像处理技术来识别出现在视觉对象中的物理对象的图像。
在框1620中,系统可以分析与视觉对象相关联的元数据。系统可以从与视觉对象相关联的元数据中确定一个或更多个属性。例如,对于给定的视觉对象,无论是在特定设备上还是由其他用户通过社交媒体网站访问视觉对象,系统可以确定视觉对象被观看的次数;系统可以确定一个或更多个社交媒体网站分享视觉对象的次数;无论用户(例如,视觉对象的拥有者)将视觉对象标记为“喜欢”或是通过其他诸如星标的情感指标高度评价视觉对象,系统可以确定来自于一个或更多个社交媒体网站的视觉对象的“喜欢”或其他积极情绪指标的次数。
在框1625中开始,系统开始生成布局,该布局将用于显示视觉对象的缩略图。在框1625中,系统生成布局的新序列。在确定布局时,系统使用视觉对象的时间顺序和相关联的缩略图尺寸。此外,系统使用如参考框1615和/或框1620中描述的一个或更多个附加属性。
从来自框1610的与视觉对象相关的一组缩略图尺寸中,系统选择用于布局的视觉对象的缩略图尺寸。在一个示例中,从视觉对象相关联的一组缩略图尺寸中,系统随机选择缩略图尺寸。在另一示例中,系统使用框1615和/或1620中确定的一个或更多个附加属性,以从与该视觉对象相关联的缩略图尺寸中选择视觉对象的特定缩略图尺寸。
在一个实施例中,响应于确定视觉对象满足特定尺寸扩大条件,系统从与视觉对象相关联的缩略图尺寸中选择较大的缩略图尺寸。例如,响应于确定视觉对象具有超过根据检测到的视觉特征确定的细节量阈值的细节量,系统从视觉对象的相关联的一组缩略图尺寸中选择较大的缩略图尺寸。在另一示例中,响应于检测视觉对象(例如,面部、人、风景等)内的特定视觉特征,系统从视觉对象的相关联的一组缩略图尺寸中,选择较大的缩略图尺寸。
在另一示例中,响应于确定视觉对象的元数据属性满足或超过阈值,例如,满足尺寸扩大条件,系统从视觉对象相关联的一组缩略图尺寸中选择较大的缩略图尺寸。正如所讨论的,系统可以确定一个或更多个属性,诸如无论是在特定设备上还是由其他用户通过社交媒体网站访问视觉对象而观察视觉对象的次数、通过一个或更多个社交媒体网站分享视觉对象的次数、来自于一个或更多个社交媒体网站的视觉图像的“喜欢”或其他积极情绪指标的次数—无论用户(例如,视觉对象的拥有者)将视觉对象标记为“喜欢”还是通过诸如星标等的情绪指标高度评价视觉对象。系统可以将这些属性中的一个或更多个或组合与一个或更多个条件进行比较,并且响应于确定属性满足条件,系统从与视觉对象相关联的一组缩略图尺寸中选择较大的缩略图尺寸。
在一个实施例中,系统可以使用本文公开的各种属性的组合,以确定视觉对象的分数。系统可以为用于设置属性的相对重要性的每个属性分配加权因子,并将分数计算为加权属性的总和。。响应于分数满足尺寸扩大条件,即超过阈值,系统可以为视觉对象选择比其他情况更大的缩略图尺寸。例如,无论宽高比如何,可以使用1×1缩略尺寸来表示每个视觉对象。响应于满足如本文所述的条件,系统可以选择与视觉对象相关联的下一个最大缩略图尺寸。
在另一个实施例中,可以建立多个条件,使得超过第一(例如,最低)阈值的视觉对象的分数使系统从视觉对象的大于1×1缩略图尺寸选择下一个较大的缩略图尺寸。例如,在视觉对象的宽高比为横向的情况下,系统可以选择2×1缩略图尺寸。响应于视觉对象的分数超过大于第一阈值的第二阈值,系统可以选择下一个更大的缩略图尺寸。对于数字对象的宽高比为横向的在先示例,系统可以选择3×2缩略图尺寸。
如上所述,作为序列生成的一部分,系统生成视觉对象的缩略图。系统可以生成视觉对象的缩略图,如此根据时间顺序和相关联的缩略图尺寸选择视觉对象以布置在布局中。一方面,布局的时间顺序可以是反向时间顺序,其中最新视觉对象的缩略图从顶部开始显示并从左向右移动。系统可以通过逐行填充形成序列的两行的空间来生成序列。另一方面,可以使用正向时间顺序。在任何情况下,通过使用如上所述的较大的缩略图尺寸,可以给予视觉对象更强的突出性。此外,参考图5至图8所述,可以使用附加规则以填充序列中的空白空间。系统还可以为视觉对象生成不同的缩略图尺寸,以填充序列中的空白空间。
在生成缩略图时,系统使用选择的缩略图尺寸生成每个缩略图,并且高度或宽度上的扩大和缩小不会使视觉对象失真。此外,根据选择的缩略图尺寸确定有必要裁剪视觉对象的哪些部分时,系统基于如本文所述的视觉特征的检测来裁剪被认为不重要的那些部分。这确保了检测到视觉特征的视觉对象区域被显示在视觉对象的结果缩略图中并且不被裁剪。
在框1630中,将在框1625中形成的新序列与紧接在前面或者上面的序列(如果存在的话)相比较。框1630中的检查确保两个相邻的序列是不同的。响应于系统确定新生成的序列与先前生成的序列相同,方法1600进行到框1635,其中系统删除在框1625中生成的序列,并循环回到框1625以形成新序列。在从框1635循环回到框1625时,系统对缩略图尺寸和/或视觉对象顺序做出不同的选择以形成序列。
响应于系统确定新序列与先前序列不同,方法1600继续到框1640。在框1640中,系统确定是否要放置附加的视觉对象。若是,则方法1600循环回到框1625以继续处理。否则,方法1600继续到框1645。
在框1645中,系统确定最后一个序列是否具有可允许的序列布置。若是,则方法1600结束。否则,方法1600会继续到框1650,其中利用可允许的序列布置再创建最后一个序列。
在一个实施例中,在生成布局时,系统可以从要显示的一组或一簇视觉对象中的最新视觉对象开始。可以逐个添加剩余的视觉对象,其中系统从左到右填充空间,然后从上到下填充空间。基于视觉对象的属性是否满足一个或更多个预定条件,系统确定是否应该增加视觉对象的缩略图尺寸。系统可以根据空白空间以及给定的视觉对象是否满足建立的条件,在可能的情况下使用较大的缩略图尺寸。此外,如所讨论的,对于给定的布局,其左侧不存在空白空间。
在另一个实施例中,只要满足指定条件,就可以随机选择缩略图尺寸。例如,只要有足够用于缩略图尺寸的空白空间并且有足够用于填充空白空间的剩余视觉对象,就可以随机选择缩略图尺寸,以使最后一个序列的布置是可允许的。
此外,可以动态地应用这里描述的布局生成技术。例如,当在要使用马赛克布局显示的一组视觉对象中添加新视觉对象时,可以再评估或再生成布置以合并新添加的视觉对象。
图17A、图17B和图17C共同作为生成用于显示视觉对象的缩略图的布局的示例性方法1700的流程图。方法1700可以作为图2的框215和/或图16的框1625的一部分来执行。方法1700可以用于选择缩略图尺寸并生成缩略图,以创建用于显示视觉对象的缩略图的布局。
在框1702中,系统确定要填充的当前空白空间。对于给定的序列,无论是新的还是部分形成的,系统都会找到具有空白空间的顶行。系统进一步从所选行中最左边的空白空间(例如,空白空间的1×1区块)开始。响应于确定行中没有另外的空白空间,系统根据具体情况开始新行和/或新序列。
在框1704中,系统确定当前行的高度。当前行包括在框1702中确定的当前空白空间。当前行高度可以为1或2。如果系统确定当前空白空间左侧的所有缩略图都占用两行,则系统确定当前行高度为2。如果系统确定当前空白空间左侧的所有缩略图不都占用两行,则系统确定当前行高度为1。如果当前行为空,则系统确定高度为2。
在框1706中,系统确定当前行中空白空间的数量。出于说明的目的,假设每行包括四个1×1区块,剩余空白空间的数量为从一到四。如上所述,在行具有零个空白区块的情况下,系统启动具有四个空白区块的新一行。在框1708中,系统选择要处理的下一个视觉对象作为“当前视觉对象”。具体地,系统选择下一个视觉对象,对于该视觉对象,选择缩略图尺寸并且生成具有所选缩略图尺寸的缩略图。在图17A、图17B和图17C的示例中,系统可以使用反向时间顺序。
在框1710中,系统确定当前视觉对象是否是文档或屏幕截图。如果当前视觉对象是文档或屏幕截图,则方法1700继续到框1712,其中系统为当前视觉对象选择1×1缩略图尺寸。在框1712之后,方法1700继续到框1714。
在框1714中,系统为当前视觉对象生成所选缩略图尺寸的缩略图。另外,系统为在布局内分配生成缩略图的位置。例如,系统会分配一个位置,以使得生成的缩略图的左上角位于当前行中当前空白空间的左上角。
在框1716中,系统确定是否还有任何其他视觉对象待处理。若是,则方法1700继续到框1702以继续处理。否则,方法1700可以结束。
如果当前视觉对象不是文档或屏幕截图,则方法1700从框1710进行到框1718。在框1718中,系统确定当前视觉对象是否具有纵向、横向或正方形的宽高比。响应于确定当前视觉对象的宽高比为纵向,方法1700继续到框1720。响应于确定当前视觉对象的宽高比为横向,方法1700继续到框1736。响应于确定当前视觉对象的宽高比为正方形,方法1700进行到框1760。
进行到框1720,在当前视觉对象的宽高比为纵向的情况下,系统确定当前行的高度是否为1。若是,则方法1700继续到框1722。否则,方法1700继续到框1724。
在框1722中,系统确定当前视觉对象是否满足尺寸扩大条件以及是否存在足够的空白空间以适配2×2缩略图尺寸。如果当前视觉对象满足尺寸扩大条件并且存在足够的空白空间以适配2×2缩略图尺寸,则方法1700继续到框1730,其中系统选择2×2缩略图尺寸。在框1730之后,方法1700继续到框1714以继续处理。如果系统确定当前视觉对象不满足尺寸扩大条件,或者视觉对象确实满足尺寸扩大条件但是没有足够的空白空间来适配2×2缩略图尺寸,则方法1700继续到框1712,其中选择1×1缩略图尺寸用于当前视觉对象。在框1712之后,系统可以如所描述的那样继续处理。
在当前视觉对象的宽高比为纵向并且行高度不为1的情况下,方法1700从框1720继续到框1724。在框1724中,系统确定当前行中是否存在一个空白空间。若是,则方法1700继续到框1726。在框1726中,系统使用一个或更多个概率选择当前视觉对象的缩略图尺寸。在一个实施例中,系统可以将50%的概率分配给1×1缩略图尺寸,可以将50%的概率分配给1×2缩略图尺寸。系统在两个缩略图尺寸之间进行选择,其中选择任一个的概率被设置为50%。在框1726之后,方法1700进行到框1714以继续处理。
从框1724继续到框1728,其中当前行具有多于一个空白空间,系统确定当前视觉对象是否满足尺寸扩大条件。若是,则方法1700继续到框1730,其中系统为当前视觉对象选择2×2缩略图尺寸。在框1730之后,方法1700继续到框1714以如所描述的继续处理。如果在框1728中系统确定当前视觉对象不满足尺寸扩大条件,则方法1700进行到框1732。在框1732中,在当前行具有2、3或4个空白空间的情况下,系统根据分配的概率选择当前视觉对象的缩略图尺寸。在一个实施例中,系统将40%概率分配给1×1缩略图尺寸、将40%概率分配给1×2缩略图尺寸并且将20%概率分配给2×2缩略图尺寸。系统根据分配的概率选择1×1、1×2或2×2缩略图尺寸。在框1732之后,方法1700继续到框1714以继续处理。
进行到框1734,其中系统已确定当前视觉对象的宽高比为横向,系统确定当前行的行高度是否为1。若是,则方法1700进行到框1736。否则,方法1700继续到框1742。
在框1736中,其中系统确定当前行高度为1,系统确定当前视觉对象是否满足尺寸扩大条件以及是否存在的空白空间以适配2×2或3×2缩略图尺寸。如果当前视觉对象满足尺寸扩大条件并且存在足够的空白空间以适配2×2或3×2缩略图尺寸,则方法1700继续到框1738,其中系统为当前视觉对象选择2×2或3×2缩略图尺寸。一方面,系统可以根据空白空间选择2×2缩略图尺寸或3×2缩略图尺寸。例如,如果有足够的空白空间以适用于所选的缩略图尺寸,系统选择3×2缩略图尺寸。否则,系统选择2×2缩略图尺寸。另一方面,系统可以为两个缩略图尺寸中的每一个分配概率,并利用该概率来选择缩略图尺寸,其中存在足够的空白空间以适配2×2或3×2缩略图尺寸。在框1738之后,方法1700继续到框1714以继续处理。
如果系统确定当前视觉对象不满足尺寸扩大条件,或者视觉对象满足尺寸扩大条件但是没有足够的空白空间以适配2×2或3×2缩略图尺寸,则方法1700继续到框1740。在框1740中,系统为当前视觉对象选择1×1缩略图尺寸。在框1740之后,方法1700继续到框1714以继续处理。
继续到框1742,在当前视觉对象的宽高比为横向并且行高度为2的情况下,系统确定空白空间的数量是为一、二、三还是四。响应于系统确定当前行中可用空间的数量为一,方法1700继续到框1744。响应于系统确定当前行中可用空间的数量为二,方法1700继续到框1746。响应于系统确定当前行中可用空间的数量为三或四,方法1700继续到框1752。
在框1744中,其中可用空间的数量为一,在一个空白空间的情况下,系统根据分配的概率选择缩略图尺寸。在一个实施例中,系统将50%概率分配给1×1的缩略图尺寸并且将50%概率分配给2×1的缩略图尺寸。系统使用分配的概率选择缩略图尺寸。在框1744之后,方法1700进行到框1714以继续处理。
在块1746中,其中可用空间的数量为二,系统确定当前视觉对象是否满足尺寸扩大条件。若是,则方法1700继续到框1748,其中选择缩略图尺寸为2×2。在框1748之后,方法1700进行到框1714以继续处理。如果当前视觉对象不满足尺寸扩大条件,则方法1700继续到框1750。在框1750中,对于2个空白空间的情况,系统根据分配的概率选择当前视觉对象的缩略图尺寸。在一个实施例中,系统将40%概率分配给1×1的缩略图尺寸、将40%概率分配给2×1的缩略图尺寸并且将20%概率分配给2×2的缩略图尺寸。系统根据分配的概率选择缩略图尺寸。在框1750之后,方法1700进行到框1714以继续处理。
在框1752中,其中系统确定存在三或四个空白空间,系统确定当前视觉对象是否满足尺寸扩大条件。若是,则方法1700继续到框1756,其中系统为当前视觉对象选择2×2缩略图尺寸或3×2缩略图尺寸。一方面,系统可以根据空白空间选择2×2缩略图尺寸或3×2缩略图尺寸。一方面,系统可以为两个缩略图尺寸中的每一个分配概率,并利用该概率来选择缩略图尺寸,其中存在足够的空白空间以适配任一缩略图尺寸。在框1752之后,方法1700继续到框1714以继续处理。
在当前视觉对象不满足尺寸扩大条件的情况下,方法1700从框1752继续到框1754。在框1754中,对于三个或四个空白空间的情况,系统根据分配的概率选择缩略图尺寸。在一个实施例中,系统将40%概率分配给1×1的缩略图尺寸、将40%概率分配给2×1的缩略图尺寸、将10%概率分配给2×2的缩略图尺寸并将10%概率分配给3×2的缩略图尺寸。系统根据分配的概率选择缩略图尺寸。在框1754之后,方法1700进行到框1714以继续处理。
进行到框1760,其中系统确定当前视觉对象的宽高比为正方形,系统确定当前行的行高度是否为1。若是,则方法1700进行到框1762。否则,方法1700继续到框1768。
在框1762中,其中系统已确定当前行高度为1,系统确定当前视觉对象是否满足尺寸扩大条件以及针对2×2缩略图尺寸是否存在足够的空白空间。如果当前视觉对象满足尺寸扩大条件并且针对2×2缩略图尺寸存在足够的空白空间,则方法1700继续到框1764,其中系统选择当前视觉对象的2×2缩略图尺寸。在框1764之后,方法1700继续到块1714以继续处理。如果系统确定当前视觉对象不满足尺寸扩大条件,或者当前视觉对象满足尺寸扩大条件但没有足够的空白空间以适配2×2缩略图尺寸,则方法1700从框1762进行到框1766。在框1766中,系统为当前视觉对象选择1×1缩略图尺寸。在框1766之后,方法1700进行到框1714以继续处理。
继续框1768,其中系统已确定行高度为2,系统确定当前行中是否存在一个空白空间。若是,则方法1700继续到框1770,其中系统为当前视觉对象选择1×1缩略图尺寸。在框1770之后,方法1700继续到框1714以继续处理。如果系统确定存在多于一个空白空间,则方法1700从框1768继续到框1772。
在框1772中,系统确定当前视觉对象是否满足尺寸扩大条件。若是,则方法1700继续到框1776,其中系统为当前视觉对象选择2×2缩略图尺寸。如果当前视觉对象不满足尺寸扩大条件,则方法1700继续到块1774,其中系统根据针对两个、三或四个空白空间的分配概率,选择当前视觉对象的缩略图尺寸。在一个实施例中,系统将50%概率分配给1×1的缩略图尺寸并且将50%概率分配给2×2的缩略图尺寸。系统使用分配的概率选择缩略图尺寸。在框1774之后,方法1700进行到框1714以继续处理。
图17A、图17B和图17C例示了可以被用于生成如本公开内容一般描述的马赛克布局的示例性方法。除非正在处理的视觉对象满足一个或更多个特定的尺寸扩大条件,否则图17A、图17B和图17C偏向于较小尺寸的缩略图。应当理解,在描述图17A、图17B和图17C中使用的各种概率仅是出于说明的目的,因此并不旨在限制。这些概率可以向上或向下调整。
本文中使用的术语仅是为了描述具体实施例的目的,并不旨在限制。尽管如此,现在将提出适用于本文件的若干定义。
如本文中所定义的,除非上下文另有明确说明,否则单数形式“一”、“一个”和“该”旨在也包括复数形式。
如本文中所定义的,术语“另一个”意指至少第二个或更多个。
如本文中所定义的,除非另有明确说明,否则术语“至少一个”、“一个或更多个”以及“和/或”是在操作上连接和分离的开放性表达。例如,表达“A、B和C中的至少一个”、“A、B或C中的至少一个”、“A、B和C中的一个或更多个”、“A、B或C中的一个或更多个”以及“A、B和/或C”是指单独的A、单独的B、单独的C、A和B—起、A和C一起、B和C一起或者A、B和C一起。
如本文中所定义的,术语“自动地”表示没有用户干预。
如本文所定义的,术语“计算机可读存储介质”是指含有或存储由指令执行系统、设备或装置使用或者与它们结合使用的程序代码的存储介质。如本文所定义的,“计算机可读存储介质”本身不是瞬时传播信号。计算机可读存储介质可以是但不限于电子存储装置、磁存储装置、光学存储装置、电磁存储装置、半导体存储装置或者上述的任何合适组合。如本文所述,存储器元件是计算机可读存储介质的示例。计算机可读存储介质的更具体示例的非详尽列表可以包括:便携式计算机磁盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦除可编程只读存储器(EPROM或闪存)、静态随机存取存储器(SRAM)、便携式光盘只读存储器(CD-ROM)、数字多功能盘(DVD)、记忆棒、软盘等。
如本文所定义的,除非另有说明,否则术语“耦接”意指无需任何中间元件的直接连接或通过一个或更多个中间元件的间接连接。两个元件还可机械地耦接、电气地耦接或通过通信信道、通路、网络或系统通信地链接。
如本文所定义的,除非上下文另有说明,否则术语“可执行操作”或“操作”是由数据处理系统或数据处理系统内的处理器执行的任务。可执行操作的示例包括但不限于“处理”、“计算”、“运算”、“确定”、“显示”、“比较”等。就这点而言,操作指的是数据处理系统(例如,计算机系统或类似电子计算装置)的动作和/或过程,该数据处理系统操控并将计算机系统的寄存器和/或存储器内的表示为物理(电子)量的数据转换成类似地表示为计算机系统存储器和/或寄存器或者其他此类信息存储、传输或显示装置内的物理量的其他数据。
如本文所定义的,术语“包括”、“包含”、“含有”和/或“具有”用于说明存在所述特征、整数、步骤、操作、元件和/或部件,但并不排除存在或添加一个或更多个其他特征、整数、步骤、操作、元件、部件和/或它们的组合。
如本文所定义的,术语“如果”是指“在……时”或“一旦”或“对……作出响应”或者“响应于”,具体视上下文而定。因此,短语“如果确定”或“如果检测到[陈述的条件或事件]”可以被解释为是指“一旦确定”或“对确定……作出响应”或者“一旦检测到[陈述的条件或事件]”或“对检测到[陈述的条件或事件]作出响应”或者“响应于检测到[陈述的条件或事件]”,具体视上下文而定。
如本文所定义的,术语“一个实施例”、“实施例”、“一种布置”、“布置”或类似语言是指与本公开内描述的至少一个实施例或布置中包括的实施例或不知结合描述的特定特征、结构或特性。因此,贯穿本公开中出现的短语“在一个实施例中”、“在实施例中”、“在一个布置中”、“在布置中”和类似语言可以但未必全部指代同一实施例或布置。
如本文所定义的,术语“输出”是指存储在物理存储器元件(例如,装置)中、写入显示器或其他外围输出装置、发送或传输到另一系统、出口等。
如本文所定义的,术语“多个”是指两个或两个以上。
如本文所定义的,术语“处理器”是指被配置成实施程序代码中含有的指令的至少一个硬件电路。硬件电路可以是集成电路。处理器的示例包括但不限于中央处理单元(CPU)、阵列处理器、矢量处理器、数字信号处理器(DSP)、现场可编程门阵列(FPGA)、可编程逻辑阵列(PLA)、专用集成电路(ASIC)、可编程逻辑电路以及控制器。
如本文所定义的,术语“实时”是指处理用户或系统针对特定过程或要做出的确定能够足够立即地感觉到或者使处理器能够与一些外部过程一致的处理响应的水平。
如本文所定义的,术语“响应于”是指容易对动作或事件做出响应或反应。因此,如果“响应于”第一动作而执行第二动作,那么第一动作的发生与第二动作的发生之间存在因果关系。术语“响应于”表明因果关系。
如本文所定义的,术语“用户”意指人类。
术语第一、第二等在本文中可以用来描述各种元件。除非另有说明或上下文另有明确指出,否则这些元件不应当被这些术语限制,因为这些术语仅用来将一个元件与另一个元件区分开。
计算机程序产品可以包括计算机可读存储介质(媒介),该计算机可读存储介质上具有计算机可读程序指令,以用于使处理器实施本发明的方面。在本公开中,术语“程序代码”可以与术语“计算机可读程序指令”互换使用。本文所述的计算机可读程序指令可以从计算机可读存储介质下载到相应的计算/处理装置,或者经由网络(例如,互联网、LAN、WAN和/或无线网络)下载到外部计算机或外部存储装置。网络可以包括铜传输电缆、光学传输光纤、无线传输、路由器、防火墙、交换机、网关计算机和/或包括边缘服务器的边缘装置。每个计算/处理装置中的网络适配器卡或网络接口接收来自网络的计算机可读程序指令,并且转发计算机可读程序指令,以用于存储在相应计算/处理装置内的计算机可读存储介质中。
用于执行本文所述的发明性布置的操作的计算机可读程序指令可以是汇编程序指令、指令集架构(ISA)指令、机器指令、机器相关指令、微码、固件指令、状态设置数据或者以一个或更多个编程语言的任何组合编写的源代码或对象代码(包括面向对象的编程语言和/或程序化编程语言)。计算机可读程序指令可以完全在用户的计算机上执行、部分在用户的计算机上执行、作为独立软件包执行、部分在用户的计算机上以及部分在远程计算机上执行、或完全在远程计算机或服务器上执行。在后一种情形下,远程计算机可以通过任何类型的网络(包括LAN或WAN)连接到用户的计算机,或者连接可以通向外部计算机(例如,使用互联网服务提供商通过互联网)。在一些情况下,包括例如可编程逻辑电路、FPGA或PLA的电子电路可以通过利用计算机可读程序指令的状态信息将电子电路个性化来执行计算机可读程序指令,从而执行本文所述的发明性布置的方面。
在本文中参考方法、设备(系统)和计算机程序产品的流程图和/或框图描述发明性布置的某些方面。应当理解,流程图和/或框图中的每个框以及流程图和/或框图中的框的组合均可以由计算机可读程序指令(例如,程序代码)实施。
这些计算机可读程序指令可以提供到通用计算机、专用计算机或者其他可编程数据处理装置的处理器,以制造一种机器,使得经由计算机或其他可编程数据处理装置的处理器执行的指令创建用于实施流程图和/或框图的一个或更多个框中指定的功能/动作的装置。这些计算机可读程序指令也可以存储在计算机可读存储介质中,所述计算机可读存储介质可以指示计算机、可编程数据处理设备和/或其他装置以特定方式运行,使得存储有指令的计算机可读存储介质包括这样的制品,所述制品包括实施流程图和/或框图的一个或更多个框中指定的操作的方面的指令。
计算机可读程序指令也可以加载到计算机、其他可编程数据处理设备或其他装置上,以在计算机、其他可编程设备或其他装置上执行一系列操作,从而形成计算机实施的过程,使得在计算机、其他可编程设备或其他装置上执行的指令实施流程图和/或框图的一个或更多个框中指定的功能/动作。
附图中的流程图和框图例示了根据发明性布置的各种方面的系统、方法和计算机程序产品的可能实施方案的架构、功能和操作。就这点而言,流程图或框图中的每个框可以表示包括用于实施指定操作的一个或更多个可执行指令的模块、区段或指令部分。在一些替代实施方案中,框中提及的操作可以不按附图中示出的顺序进行。例如,连续示出的两个框可以大体同时执行,或者框有时可以按相反的顺序执行,具体取决于涉及的功能。还应当注意,框图和/或流程图中的每个框以及框图和/或流程图中的框的组合可以由专用硬件系统执行,所述专用硬件系统执行指定的功能或动作或者实施专用硬件和计算机指令的组合。
出于简单且清楚地说明的目的,附图中示出的元件未必按比例绘制。例如,为清楚起见,一些元件的尺寸可能相对于其他元件被放大。另外,在适当的情况下,附图标记在附图中重复,以指示对应、类似或相同特征。
可以在所附权利要求中发现的所有装置或步骤加功能元件的对应结构、材料、动作和等效物意图包括用于与具体声明的其他要求保护的元件结合执行功能的任何结构、材料或动作。
呈现视觉对象的缩略图的方法可以包括:使用处理器确定多个视觉对象的宽高比;基于视觉对象的宽高比,使用处理器将多个视觉对象中的每一个与选自多个预定缩略图尺寸的缩略图尺寸相关联,并使用处理器确定是否在多个视觉对象内检测到视觉特征。该方法可以包括:基于视觉对象的时间顺序、视觉特征的检测以及与视觉对象相关联的缩略图尺寸,使用处理器生成用于显示多个视觉对象的缩略图的布局。使用屏幕和处理器,可以根据布局显示缩略图。
生成布局可以包括:根据所选择的视觉对象的元数据,从与所选择的视觉对象相关联的多个缩略图尺寸中,选择要包括在布局中的所选视觉对象的缩略图尺寸。
一方面,包括检测到的视觉特征的所选视觉对象的区域在使用布局显示的所选择的视觉对象的缩略图内是可见的。
生成布局可以包括:根据检测到的视觉特征,从与所选择的视觉对象相关联的多个缩略图尺寸中,选择要包括在布局中的所选视觉对象的缩略图尺寸。
生成布局可以包括:根据多个视觉对象生成运动缩略图。
布局可以包括:组成多个序列的多个行,每个相邻的序列对是不同的。
生成布局还可以包括:确定布局的最后一个序列是否具有可允许的序列布置,并且响应于确定出最后一个序列不具有可允许的序列布置,再创建最后一个序列。
用于呈现视觉对象的缩略图的装置包括:屏幕和处理器,该处理器耦接到屏幕。该处理器被配置为:确定多个视觉对象的宽高比;基于视觉对象的宽高比,将多个视觉对象的每一个与选自多个预定缩略图尺寸的缩略图尺寸相关联;以及确定在多个视觉对象内是否检测到视觉特征。该处理器可以被配置为:根据视觉对象的时间顺序、视觉特征的检测以及与视觉对象相关联的缩略图尺寸,生成用于显示多个视觉对象的缩略图的布局。处理器可以使用屏幕根据布局显示缩略图。
一方面,处理器被配置为:根据所选择的视觉对象的元数据,从与所选择的视觉对象相关联的多个缩略图尺寸中,通过选择用于包含在布局中的视觉对象的缩略图尺寸生成布局。
另一方面,包括检测到的视觉特征的所选视觉对象的区域在使用布局显示的所选择的视觉对象的缩略图内是可见的。
另一方面,处理器被配置为:根据所选择的视觉对象,从与所选择的视觉对象相关联的多个缩略图尺寸中,通过选择用于包含在布局中的视觉对象的缩略图尺寸生成布局。
又一方面,布局生成可以包括:处理器被配置为从多个视觉对象生成运动缩略图。
布局可以包括:组成多个序列的多个行,每个相邻的序列对是不同的。
又一方面,布局生成可以包括:处理器被配置为确定布局的最后一个序列是否具有可允许的序列布置,并且响应于确定出最后一个序列不具有可允许的序列布置,再创建最后一个序列。
一种计算机程序产品包括计算机可读存储介质,该计算机可读存储介质上存储有用于呈现视觉对象的缩略图的程序代码。该程序代码可由处理器执行以执行操作。该操作可以包括:使用处理器确定多个视觉对象的宽高比;基于视觉对象的宽高比,使用处理器将多个视觉对象中的每一个与选自多个预定缩略图尺寸的缩略图尺寸相关联;以及使用处理器确定在多个视觉对象内是否检测到视觉特征。该操作可以包括:基于视觉对象的时间顺序、视觉特征的检测以及与视觉对象相关联的缩略图尺寸,使用处理器确定用于显示多个视觉对象的缩略图的布局。该操作可以包括使用屏幕和处理器根据布局显示缩略图。
生成布局包括:根据所选择的视觉对象的元数据,从与所选择的视觉对象相关联的多个缩略图尺寸中,选择要包括在布局中的所选视觉对象的缩略图尺寸。
一方面,包括检测到的视觉特征的所选视觉对象的区域在使用布局显示的所选择的视觉对象的缩略图内是可见的。
生成布局可以包括:根据检测到的视觉特征,从与所选择的视觉对象相关联的多个缩略图尺寸中,选择要包括在布局中的所选视觉对象的缩略图尺寸。
生成布局可以包括:根据多个视觉对象生成运动缩略图。
另一方面,布局包括:组成多个序列的多个行,每个相邻的序列对是不同的。
在一些实施例中,用于操作电子设备的方法包括:确定多个视觉对象中的每一个的宽高比;基于宽高比确定多个视觉对象中的每一个的缩略图尺寸;基于缩略图尺寸生成多个视觉对象的缩略图的布局;以及根据布局,显示多个视觉对象的缩略图。在其他实施例中,该方法包括:根据多个视觉中的每一个的元数据,从与多个视觉对象中的每一个相关联的多个预定缩略图尺寸中,选择要包括在布局中的多个视觉对象中的每一个的缩略图尺寸。在其他实施例中,该方法包括:根据多个视觉对象中的每一个的视觉特征,从与多个视觉对象中的每一个相关联的多个预定缩略图尺寸中,选择要包括在布局中的多个视觉对象中的每一个的缩略图尺寸。在其他实施例中,该方法包括:从多个视觉对象中的每一个生成运动缩略图。
在一些实施例中,电子设备包括:屏幕和处理器,该处理器耦接到屏幕并被配置为确定多个视觉对象中的每一个的宽高比、基于宽高比确定多个视觉对象中的每一个的缩略图尺寸并且根据缩略图尺寸生成用于多个视觉对象的缩略图的布局。该屏幕被配置为根据布局显示多个视觉对象的缩略图。在其他实施例中,该处理器被配置为:根据多个视觉中的每一个的元数据,从与多个视觉对象中的每一个相关联的多个预定缩略图尺寸中,选择要包括在布局中的多个视觉对象中的每一个的缩略图尺寸。在其他实施例中,该处理器被配置为:根据多个视觉对象中的每一个的视觉特征,从与多个视觉对象中的每一个相关联的多个预设缩略图尺寸中,选择要包括在布局中的多个视觉对象中的每一个的缩略图尺寸。在其他实施例中,处理器被配置为:根据多个视觉对象中的每一个生成运动缩略图。在其他实施例中,处理器还被配置为:确定布局的最后一个序列是否具有可允许的序列布置,并且响应于确定出最后一个序列不具有可允许的序列布置,再创建最后一个序列。
在一些实施例中,一种计算机程序产品包括计算机可读存储介质,该计算机可读存储介质具有存储在电子设备中的程序代码,可由处理器执行以执行操作的该程序代码包括:确定多个视觉对象中的每一个的宽高比;基于宽高比确定多个视觉对象中的每一个的缩略图尺寸;基于缩略图尺寸生成用于多个视觉对象的缩略图的布局;以及根据布局显示多个视觉对象的缩略图。在其他实施例中,程序代码包括:根据多个视觉中的每一个的元数据,从与多个视觉对象中的每一个相关联的多个预定缩略图尺寸中,选择要包括在布局中的多个视觉对象中的每一个的缩略图尺寸。在其他实施例中,程序代码包括:根据多个视觉对象中的每一个的视觉特征,从多个视觉对象中的每一个相关联的多个预设缩略图尺寸中,选择要包括在布局中的多个视觉对象中的每一个的缩略图尺寸。在其他实施例中,程序代码包括:根据多个视觉对象中的每一个生成运动缩略图。
在一些实施例中,包括视觉特征的多个视觉对象的每一个的区域在使用布局所显示的多个视觉对象的每一个的缩略图内是可见的。在其他实施例中,布局包括:组织成多个序列的多个行,每个相邻的序列对是不同的。
本文提供的发明性布置的描述是出于说明的目的,并非旨在穷举或限于所公开的形式和示例。本文中使用的术语经过选择以说明相对于市场上发现的技术的发明性布置、实际应用或技术改进的原理,和/或使本领域的技术人员能够理解本文中公开的实施例。在不脱离所述发明性布置的范围和精神的情况下,本领域的技术人员可以清楚更改和变化。因此,应当参考随附权利要求,而不是前述公开内容,以指示这些特征和实施方式的范围。
Claims (15)
1.一种用于操作电子设备的方法,所述方法包括:
确定多个视觉对象中的每一个的宽高比;
基于所述宽高比,确定所述多个视觉对象中的每一个的缩略图尺寸;
基于所述缩略图尺寸,生成所述多个视觉对象的缩略图的布局;以及
根据所述布局,显示所述多个视觉对象的所述缩略图。
2.根据权利要求1所述的方法,其中,确定所述缩略图尺寸包括:
根据所述多个视觉对象中的每一个的元数据,从与所述多个视觉对象中的每一个相关联的多个预定缩略图尺寸中,选择要包括在所述布局中的所述多个视觉对象中的每一个的所述缩略图尺寸。
3.根据权利要求1所述的方法,其中,确定所述缩略图尺寸包括:
根据所述多个视觉对象中的每一个的视觉特征,从与所述多个视觉对象中的每一个相关联的多个预定缩略图尺寸中,选择要包括在所述布局中的所述多个视觉对象中的每一个的所述缩略图尺寸。
4.根据权利要求1所述的方法,其中,生成所述布局包括:
根据所述多个视觉对象中的每一个生成运动缩略图。
5.一种电子设备,包括:
屏幕;以及,
处理器,所述处理器耦接到所述屏幕并且被配置为:
确定多个视觉对象中的每一个的宽高比;
根据所述宽高比,确定所述多个视觉对象中的每一个的缩略图尺寸;以及
根据所述缩略图尺寸,生成所述多个视觉对象的缩略图的布局,
其中,所述屏幕被配置为:根据所述布局显示所述多个视觉对象的所述缩略图。
6.根据权利要求5所述的装置,其中,所述处理器被配置为:根据所述多个视觉对象中的每一个的元数据,从与所述多个视觉对象中的每一个相关联的多个预定缩略图尺寸中,选择要包括在所述布局中的所述多个视觉对象中的每一个的所述缩略图尺寸。
7.根据权利要求5所述的装置,其中,所述处理器被配置为:根据所述多个视觉对象中的每一个的视觉特征,从与所述多个视觉对象中的每一个相关联的所述多个预定缩略图尺寸中,选择要包括在所述布局中的所述多个视觉对象中的每一个的缩略图尺寸。
8.根据权利要求5所述的装置,其中,所述处理器被配置为:根据所述多个视觉对象中的每一个生成运动缩略图。
9.一种计算机程序产品,其包括计算机可读存储介质,所述计算机可读存储介质具有存储在电子设备中的程序代码,所述程序代码可由处理器执行以执行操作,所述操作包括:
确定多个视觉对象中的每一个的宽高比;
基于所述宽高比,确定所述多个视觉对象中的每一个的缩略图尺寸;
基于所述缩略图尺寸,生成所述多个视觉对象的缩略图的布局;以及
根据所述布局,显示所述多个视觉对象的所述缩略图。
10.根据权利要求9所述的计算机程序产品,其中,确定所述缩略图尺寸包括:
根据所述多个视觉对象中的每一个的元数据,从与所述多个视觉对象中的每一个相关联的多个预定缩略图尺寸中,选择要包括在所述布局中的所述多个视觉对象中的每一个的缩略图尺寸。
11.根据权利要求1所述的方法、根据权利要求5所述的电子设备或根据权利要求9所述的计算机程序产品,其中,包括视觉特征的所述多个视觉对象中的每一个的区域在使用所述布局所显示的多个视觉对象中的每一个的缩略图内是可见的。
12.根据权利要求9所述的计算机程序产品,其中,确定所述缩略图尺寸包括:
根据所述多个视觉对象中的每一个的视觉特征,从与所述多个视觉对象中的每一个相关联的多个预定缩略图尺寸中,选择要包括在所述布局中所述多个视觉对象中的每一个的缩略图尺寸。
13.根据权利要求9所述的计算机程序产品,其中,生成所述布局包括:
根据所述多个视觉对象中的每一个生成运动缩略图。
14.根据权利要求1所述的方法、根据权利要求5所述的电子设备或根据权利要求9所述的计算机程序产品,其中,所述布局包括:组成多个序列的多个行,每个相邻的序列对是不同的。
15.根据权利要求14所述的装置,其中,所述处理器还被配置为:
确定所述布局的最后一个序列是否具有可允许的序列布置;以及
响应于确定出所述最后一个序列不具有可允许的序列布置,再创建所述最后一个序列。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US15/073,095 | 2016-03-17 | ||
US15/073,095 US10198147B2 (en) | 2016-03-17 | 2016-03-17 | Object management and visualization using a computing device |
PCT/KR2017/002643 WO2017160028A1 (en) | 2016-03-17 | 2017-03-10 | Object management and visualization using a computing device |
Publications (2)
Publication Number | Publication Date |
---|---|
CN108780377A true CN108780377A (zh) | 2018-11-09 |
CN108780377B CN108780377B (zh) | 2021-07-20 |
Family
ID=59850949
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201780016310.4A Expired - Fee Related CN108780377B (zh) | 2016-03-17 | 2017-03-10 | 进行对象管理和可视化的方法和电子设备以及存储介质 |
Country Status (5)
Country | Link |
---|---|
US (1) | US10198147B2 (zh) |
EP (1) | EP3408752B1 (zh) |
KR (1) | KR102317013B1 (zh) |
CN (1) | CN108780377B (zh) |
WO (1) | WO2017160028A1 (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112346671A (zh) * | 2019-08-09 | 2021-02-09 | 兄弟工业株式会社 | 存储介质 |
CN113918766A (zh) * | 2021-08-12 | 2022-01-11 | 荣耀终端有限公司 | 视频缩略图的显示方法、设备和存储介质 |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9589184B1 (en) | 2012-08-16 | 2017-03-07 | Groupon, Inc. | Method, apparatus, and computer program product for classification of documents |
CN109063085B (zh) * | 2018-07-26 | 2021-07-13 | 创新先进技术有限公司 | 缩略图生成方法和装置 |
US11314402B2 (en) * | 2019-06-01 | 2022-04-26 | Apple lnc. | Displaying assets in multiple zoom levels of a media library |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP1148412A2 (en) * | 2000-04-21 | 2001-10-24 | Sony Corporation | Managing Data Objects |
US20090208118A1 (en) * | 2008-02-19 | 2009-08-20 | Xerox Corporation | Context dependent intelligent thumbnail images |
US20100199227A1 (en) * | 2009-02-05 | 2010-08-05 | Jun Xiao | Image collage authoring |
CN102622395A (zh) * | 2011-12-20 | 2012-08-01 | 深信服网络科技(深圳)有限公司 | 虚拟化应用辅助访问网页的方法、服务器及客户端 |
CN102650985A (zh) * | 2011-02-25 | 2012-08-29 | 易搜比控股公司 | 一种显示画面的动态排版方法 |
US20140096013A1 (en) * | 2012-09-28 | 2014-04-03 | Interactive Memories, Inc. | Methods for Ensuring Adequate Image Resolution for Printing for Images of Higher Quality that Fail Upload to an Image-Based Project created in an Electronic Interface |
WO2015002799A1 (en) * | 2013-07-01 | 2015-01-08 | Facebook, Inc. | Flexible image layout |
TW201608523A (zh) * | 2014-08-29 | 2016-03-01 | 鴻海精密工業股份有限公司 | 生成圖片縮略圖的方法與系統 |
Family Cites Families (29)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8056013B2 (en) * | 2005-05-13 | 2011-11-08 | Hewlett-Packard Development Company, L.P. | Method for arranging graphic assemblies |
US8161377B2 (en) * | 2005-03-01 | 2012-04-17 | Hewlett-Packard Development Company, L.P. | Arranging images on pages of an album |
US7725837B2 (en) * | 2005-03-31 | 2010-05-25 | Microsoft Corporation | Digital image browser |
US20070209025A1 (en) | 2006-01-25 | 2007-09-06 | Microsoft Corporation | User interface for viewing images |
US7620267B2 (en) * | 2006-04-28 | 2009-11-17 | Hewlett-Packard Development Company, L.P. | Collage generation with occlusion costing |
US8078603B1 (en) * | 2006-10-05 | 2011-12-13 | Blinkx Uk Ltd | Various methods and apparatuses for moving thumbnails |
US8634674B2 (en) * | 2007-09-11 | 2014-01-21 | Vistaprint Schweiz Gmbh | Dynamic sizing and positioning of multiple images |
US8862986B2 (en) | 2007-10-01 | 2014-10-14 | Hewlett-Packard Development Company, L.P. | Arranging graphic objects on a page with relative position based control |
JP5033580B2 (ja) * | 2007-10-31 | 2012-09-26 | 株式会社リコー | 画像処理装置及び画像処理方法 |
JP2009193283A (ja) * | 2008-02-14 | 2009-08-27 | Fuji Xerox Co Ltd | 文書画像処理装置、及び文書画像処理プログラム |
JP5207940B2 (ja) * | 2008-12-09 | 2013-06-12 | キヤノン株式会社 | 画像選択装置及びその制御方法 |
JP5326910B2 (ja) * | 2009-01-20 | 2013-10-30 | ソニー株式会社 | 情報処理装置、情報処理方法およびプログラム |
US9383916B2 (en) | 2009-09-30 | 2016-07-05 | Microsoft Technology Licensing, Llc | Dynamic image presentation |
JP5489636B2 (ja) * | 2009-10-19 | 2014-05-14 | キヤノン株式会社 | 画像表示装置、画像表示方法及びプログラム |
US8976198B2 (en) * | 2009-10-22 | 2015-03-10 | Collage.Com, Llc | Method, system and computer program product for creating shape collages |
US8863025B2 (en) | 2010-08-26 | 2014-10-14 | Dell Products L.P. | System for enabling a user to view visual content on an information handling system |
JP2012168790A (ja) | 2011-02-15 | 2012-09-06 | Brother Ind Ltd | 表示プログラム、及び、表示装置 |
KR101271539B1 (ko) * | 2011-06-03 | 2013-06-05 | 엘지전자 주식회사 | 이동 단말기 및 그것의 제어 방법 |
US9269323B2 (en) | 2011-10-28 | 2016-02-23 | Microsoft Technology Licensing, Llc | Image layout for a display |
US20130311940A1 (en) | 2012-05-15 | 2013-11-21 | Salvadore V. Ragusa | System of Organizing Digital Images |
US9396518B2 (en) | 2012-05-15 | 2016-07-19 | Salvadore Ragusa | System of organizing digital images |
WO2014056112A1 (en) | 2012-10-10 | 2014-04-17 | Broadbandtv, Corp. | Intelligent video thumbnail selection and generation |
KR101990089B1 (ko) * | 2012-10-16 | 2019-06-17 | 삼성전자주식회사 | 썸네일 이미지를 생성하기 위한 방법 및 그 전자 장치 |
KR101414195B1 (ko) * | 2012-11-26 | 2014-07-01 | 네이버 주식회사 | 복수의 아이템들을 공간 내에 자동으로 배치하는 장치, 방법 및 컴퓨터 판독 가능한 기록 매체 |
US9183215B2 (en) | 2012-12-29 | 2015-11-10 | Shutterstock, Inc. | Mosaic display systems and methods for intelligent media search |
US9996957B2 (en) | 2012-12-30 | 2018-06-12 | Shutterstock, Inc. | Mosaic display system using open and closed rectangles for placing media files in continuous contact |
KR102158098B1 (ko) | 2013-01-07 | 2020-09-22 | 삼성전자주식회사 | 이미지 인식을 이용한 이미지 레이아웃 방법 및 장치 |
US9582610B2 (en) * | 2013-03-15 | 2017-02-28 | Microsoft Technology Licensing, Llc | Visual post builder |
US20160104052A1 (en) * | 2014-10-10 | 2016-04-14 | Qualcomm Incorporated | Text-based thumbnail generation |
-
2016
- 2016-03-17 US US15/073,095 patent/US10198147B2/en active Active
-
2017
- 2017-03-10 CN CN201780016310.4A patent/CN108780377B/zh not_active Expired - Fee Related
- 2017-03-10 WO PCT/KR2017/002643 patent/WO2017160028A1/en active Application Filing
- 2017-03-10 EP EP17766929.8A patent/EP3408752B1/en active Active
- 2017-03-10 KR KR1020187024158A patent/KR102317013B1/ko active IP Right Grant
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP1148412A2 (en) * | 2000-04-21 | 2001-10-24 | Sony Corporation | Managing Data Objects |
US20090208118A1 (en) * | 2008-02-19 | 2009-08-20 | Xerox Corporation | Context dependent intelligent thumbnail images |
US20100199227A1 (en) * | 2009-02-05 | 2010-08-05 | Jun Xiao | Image collage authoring |
CN102650985A (zh) * | 2011-02-25 | 2012-08-29 | 易搜比控股公司 | 一种显示画面的动态排版方法 |
CN102622395A (zh) * | 2011-12-20 | 2012-08-01 | 深信服网络科技(深圳)有限公司 | 虚拟化应用辅助访问网页的方法、服务器及客户端 |
US20140096013A1 (en) * | 2012-09-28 | 2014-04-03 | Interactive Memories, Inc. | Methods for Ensuring Adequate Image Resolution for Printing for Images of Higher Quality that Fail Upload to an Image-Based Project created in an Electronic Interface |
WO2015002799A1 (en) * | 2013-07-01 | 2015-01-08 | Facebook, Inc. | Flexible image layout |
TW201608523A (zh) * | 2014-08-29 | 2016-03-01 | 鴻海精密工業股份有限公司 | 生成圖片縮略圖的方法與系統 |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112346671A (zh) * | 2019-08-09 | 2021-02-09 | 兄弟工业株式会社 | 存储介质 |
CN112346671B (zh) * | 2019-08-09 | 2024-07-12 | 兄弟工业株式会社 | 存储介质 |
CN113918766A (zh) * | 2021-08-12 | 2022-01-11 | 荣耀终端有限公司 | 视频缩略图的显示方法、设备和存储介质 |
CN113918766B (zh) * | 2021-08-12 | 2023-10-13 | 荣耀终端有限公司 | 视频缩略图的显示方法、设备和存储介质 |
Also Published As
Publication number | Publication date |
---|---|
US10198147B2 (en) | 2019-02-05 |
EP3408752A4 (en) | 2019-02-20 |
KR102317013B1 (ko) | 2021-10-25 |
EP3408752A1 (en) | 2018-12-05 |
US20170269815A1 (en) | 2017-09-21 |
CN108780377B (zh) | 2021-07-20 |
EP3408752B1 (en) | 2021-08-04 |
WO2017160028A1 (en) | 2017-09-21 |
KR20180117619A (ko) | 2018-10-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10872446B2 (en) | Systems and methods for high dimensional 3D data visualization | |
CN108780377A (zh) | 使用计算设备的对象管理和可视化 | |
Burch et al. | Visualizing a sequence of a thousand graphs (or even more) | |
CN109643399B (zh) | 多类别分类器的交互式性能可视化 | |
US9589378B2 (en) | Particle based visualizations of abstract information | |
US8264488B2 (en) | Information processing apparatus, information processing method, and program | |
KR101627169B1 (ko) | 증강현실 컨텐츠 저작 및 제공 시스템 | |
CN104995657B (zh) | 用于调整图像大小的系统和方法 | |
WO2017085717A1 (en) | System and method for presentation of content linked comments | |
JP6487427B2 (ja) | フレキシブルなイメージ・レイアウト | |
WO2016193679A1 (en) | Method and system for visualizing or interacting with array data using limited-resolution display devices | |
US10565560B2 (en) | Alternative people charting for organizational charts | |
CN105512187B (zh) | 基于展示图片的信息展示方法及信息展示装置 | |
Tatzgern | Situated visualization in augmented reality | |
US9734606B2 (en) | Program information display system and method displaying program structure information including interval information | |
US10169734B2 (en) | Dynamic layout for organizational charts | |
CN108429905B (zh) | 一种裸眼3d显示方法、装置、电子设备及存储介质 | |
US20150242207A1 (en) | Program information generation system, method of generating program information, computer-readable program product, and program information display system | |
CN108156504A (zh) | 一种视频显示方法及装置 | |
Kang et al. | Developing a Tile‐Based Rendering Method to Improve Rendering Speed of 3D Geospatial Data with HTML5 and WebGL | |
CN116541108A (zh) | 显示版面排版转换方法、装置、计算机设备和存储介质 | |
JP5513033B2 (ja) | 情報処理装置、情報処理方法、およびプログラム | |
JP2017162240A (ja) | 熟読率計測システム、方法及びプログラム | |
US10402783B2 (en) | Method of automatically re-organizing structured data in a reporting system based on screen size by executing computer-executable instructions stored on a non-transitory computer-readable medium | |
KR20210124876A (ko) | 확장 현실 환경에서 웹페이지를 보기 위한 전자 장치 및 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20210720 |
|
CF01 | Termination of patent right due to non-payment of annual fee |