CN102547450B - 延迟的图像解码 - Google Patents

延迟的图像解码 Download PDF

Info

Publication number
CN102547450B
CN102547450B CN201210017085.5A CN201210017085A CN102547450B CN 102547450 B CN102547450 B CN 102547450B CN 201210017085 A CN201210017085 A CN 201210017085A CN 102547450 B CN102547450 B CN 102547450B
Authority
CN
China
Prior art keywords
image
coded image
service
decoding
specific type
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201210017085.5A
Other languages
English (en)
Other versions
CN102547450A (zh
Inventor
C.埃尔根
R.V.钦特伦
S.R.富尔蒂纳
P.马纳迪
S.G.罗伯茨
K.S.希尔夫
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Microsoft Technology Licensing LLC
Original Assignee
Microsoft Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Microsoft Corp filed Critical Microsoft Corp
Publication of CN102547450A publication Critical patent/CN102547450A/zh
Application granted granted Critical
Publication of CN102547450B publication Critical patent/CN102547450B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F15/00—Digital computers in general; Data processing equipment in general
    • G06F15/16—Combinations of two or more digital computers each having at least an arithmetic unit, a program unit and a register, e.g. for a simultaneous processing of several programs
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90—Details of database functions independent of the retrieved data types
    • G06F16/95—Retrieval from the web
    • G06F16/957—Browsing optimisation, e.g. caching or content distillation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F17/00—Digital computing or data processing equipment or methods, specially adapted for specific functions
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T9/00—Image coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00204—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a digital computer or a digital computer system, e.g. an internet server
    • H04N1/00209—Transmitting or receiving image data, e.g. facsimile data, via a computer, e.g. using e-mail, a computer network, the internet, I-fax
    • H04N1/00214—Transmitting or receiving image data, e.g. facsimile data, via a computer, e.g. using e-mail, a computer network, the internet, I-fax details of transmission
    • H04N1/00217—Transmitting or receiving image data, e.g. facsimile data, via a computer, e.g. using e-mail, a computer network, the internet, I-fax details of transmission only involving computer data transmission protocols, e.g. SMTP, WAP or HTTP
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/32—Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N1/333—Mode signalling or mode changing; Handshaking therefor
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00204—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a digital computer or a digital computer system, e.g. an internet server
    • H04N1/00244—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a digital computer or a digital computer system, e.g. an internet server with a server, e.g. an internet server
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/0035—User-machine interface; Control console
    • H04N1/00405—Output means
    • H04N1/00408—Display of information to the user, e.g. menus
    • H04N1/0044—Display of information to the user, e.g. menus for image preview or review, e.g. to help the user position a sheet
    • H04N1/00442—Simultaneous viewing of a plurality of images, e.g. using a mosaic display arrangement of thumbnails
    • H04N1/00453—Simultaneous viewing of a plurality of images, e.g. using a mosaic display arrangement of thumbnails arranged in a two dimensional array
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/0035—User-machine interface; Control console
    • H04N1/00405—Output means
    • H04N1/00408—Display of information to the user, e.g. menus
    • H04N1/00464—Display of information to the user, e.g. menus using browsers, i.e. interfaces based on mark-up languages
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00912—Arrangements for controlling a still picture apparatus or components thereof not otherwise provided for
    • H04N1/00954—Scheduling operations or managing resources
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00—Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/0008—Connection or combination of a still picture apparatus with another apparatus
    • H04N2201/0034—Details of the connection, e.g. connector, interface
    • H04N2201/0037—Topological details of the connection
    • H04N2201/0039—Connection via a network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00—Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/32—Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N2201/333—Mode signalling or mode changing; Handshaking therefor
    • H04N2201/33307—Mode signalling or mode changing; Handshaking therefor of a particular mode
    • H04N2201/33314—Mode signalling or mode changing; Handshaking therefor of a particular mode of reading or reproducing mode
    • H04N2201/33321—Image or page size, e.g. A3, A4

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • General Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • Signal Processing (AREA)
  • Data Mining & Analysis (AREA)
  • Computing Systems (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Software Systems (AREA)
  • Computer Hardware Design (AREA)
  • Mathematical Physics (AREA)
  • Information Transfer Between Computers (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Facsimiles In General (AREA)
  • Processing Or Creating Images (AREA)
  • Image Processing (AREA)

Abstract

在一个或更多个实施例中，提供了可以基于试探法延迟图像解码、以及基于与图像相关联的使用类型或将要使用图像的可能性而稍后发起图像解码的框架。例如，使用历史和优先级系统可以使得能够在具有被下载的历史但是从未被使用的图像之前解码当前正重现和/或可能得到重现的图像。相应地，通过使图像下载与图像解码解除关联，可以较高效地利用CPU资源和存储器。

Description

延迟的图像解码
背景技术
通常，当网络浏览器请求包括图像的网页时，在下载图像的同时也在解码该图像。解码图像涉及把图像扩展或解压缩成可以使用计算机系统的视频硬件重现它的形式。解压缩图像消耗CPU资源和开销。另外，解压缩图像还会消耗存储器资源。
然而，在一些状况中，不会最终重现和查看参考图像。在这些情况下，解码图像浪费CPU资源、开销和存储器。
发明内容
提供此发明内容以介绍下面在具体实施方式中进一步描述的简化形式的概念的选择。此发明内容并非意在确定要求保护主题的必要特征或关键特征，它也并非意在用来限制要求保护主题的范围。
在一个或更多个实施例中，提供了可以基于试探法来延迟图像解码、以及基于与图像相关联的使用类型或将要使用图像的可能性而稍后发起图像解码的框架。例如，使用历史和优先级系统可以允许在有被下载的历史但是从未被使用的图像之前解码当前正重现和/或可能得到重现的图像。相应地，通过使图像下载与图像解码解除关联，可以较高效地利用CPU资源和存储器。
附图说明
整个图使用同样标记以引用相似特征。
图1示例了按照一个或更多个实施例可以采用本文中描述的各种原理的操作环境。
图2是描述了按照一个或更多个实施例的方法中步骤的流程图。
图3示例了按照一个或更多个实施例的实例视口。
图4示例了可以利用以实施一个或更多个实施例的实例系统。
具体实施方式
概述
在一个或更多个实施例中，提供了可以基于试探法延迟图像解码、以及基于与图像相关联的使用类型或将要使用图像的可能性而稍后发起图像解码的框架。例如，使用历史和优先级系统可以允许在有被下载的历史但是从未被使用的图像之前解码当前正重现和/或可能得到重现的图像。相应地，通过使图像下载与图像解码解除关联，可以较高效地利用CPU资源和存储器。
在后续讨论中，提供了题为“操作环境”的章节，并描述了可以采用一个或更多个实施例的一个环境。继此之后，题为“图像解码器模块操作”的章节描述了按照一个或更多个实施例的图像解码器模块的操作。最后，题为“实例系统”的章节描述了按照一个或更多个实施例可以利用的实例系统。
现在考虑可以实施一个或更多个实施例的实例操作环境。
操作环境
图1总体上以100示例了按照一个或更多个实施例的操作环境。环境100包括具有一个或更多个处理器104、一个或更多个计算机可读存储介质106以及处于计算机可读存储介质上并通过处理器可执行的一个或更多个应用108的运算设备102。计算机可读存储介质可以通过实例而非限制的方式包括通常与运算设备相关联的所有形式的易失性和非易失性存储器和/或存储介质。这种介质可以包括ROM、RAM、闪存、硬盘、可移除介质等。下面在图4中示出和描述运算设备的一个具体实例。
另外，运算设备102包括网络浏览器110形式的软件应用。可以使用任何合适的网络浏览器，其实例从本文件的受让人和其它内容可得。另外，计算机可读存储介质106可以包括如上和如下所述工作的图像解码器模块111。图像解码器模块可以整合在网络浏览器110中或它可以是网络浏览器利用的单机组件。
在工作中，图像解码器模块111构成使图像下载与图像解码解除关联的框架的一部分。图像解码器模块被配置成智能地确定何时可以高效解码被下载的图像以便重现。在至少一些实施例中，图像解码器模块111可以基于试探法来延迟图像解码、以及基于与图像相关联的使用类型或将要使用图像的可能性而稍后发起图像解码。例如，图像解码器模块可以利用使用历史和优先级系统使得在具有被下载的历史但是从未被使用的图像之前能够解码当前正重现和/或可能得到重现的图像。相应地，通过使图像下载与图像解码解除关联，可以较高效地利用CPU资源和存储器。
另外，环境100包括网络112（如，互联网）和可以接收和发送内容的一个或更多个网站114。这种内容可以包括包含图像解码器模块111要处理的图像的网页。
运算设备102可以实施为任何合适的运算设备，例如作为实例而非限制的桌面计算机、便携式计算机、上网本、诸如个人数字助理（PDA）的掌上电脑、手机等。
描述了实例操作环境，现在考虑按照一个或更多个实施例的实例图像解码器模块的操作讨论。
图像解码器模块操作
图2示例了按照一个或更多个实施例的图像解码器模块111（图1）的操作的某些方面。
步骤200下载一个或更多个编码图像。可以通过任何合适方式执行此步骤。例如，在至少一些实施例中，可以通过响应于浏览器导航的适当配置的网络浏览器下载图像。步骤202解码与被下载的一个或多个图像相关联的元数据。通过解码与被下载的一个或多个图像相关联而并非与图像本身相关联的元数据，可以在图像解码以前确定与该一个或多个图像相关联的有用信息，如，尺寸信息、透明度等。例如，可以利用根据元数据确定的尺寸信息在图像解码以前预处理页面布局。此外，可以利用尺寸信息来确定是否延迟特定图像的解码。例如，对于一定尺寸阈值（例如，256 kB）以下的图像可以一下载就解码。类似地，可以在要确定的稍后时间来解码一定尺寸阈值以上的图像。
步骤204在要延迟该特定图像的图像解码的情况下缓存被编码的图像。可以为缓存的图像分配诸如“低”、“标准”、“高”等的优先级。可以按照下面描述的处理改变优先级。
步骤206确定与该一个或多个图像相关联的使用类型、或者使用特定一个或多个图像的可能性。
步骤208在可能出现其它运算的情况下，对于特定使用类型，同步或者异步地按需求解码被编码的一个或多个图像。可以通过提高所述一个或多个图像的优先级以使得适当配置的网络浏览器将会使解码队列中的该一个或多个图像提前来执行此步骤。下面在题为“实例使用类型”的章节中描述特定使用类型的实例。
可替选地或额外地，步骤210在它的使用是可能的情况下同步或者异步地按需求解码被编码的一个或多个图像。同样地，可以通过提高该一个或多个图像的优先级以使得适当配置的网络浏览器将会使解码队列中的一个或多个图像提前来执行此步骤。下面在题为“使用的可能性”的章节中提供其如何进行的实例。
现在考虑按照一个或更多个实施例的一些实例用户类型。应该明白和理解，描述的使用类型只是构成实例和并非意在把要求保护主题的应用限制为这些具体使用类型。同样，可以在不脱离要求保护主题的精神和范围的情况下采用其它使用类型。
实例使用类型
在一个或更多个实施例中，与一个或多个图像相关联的某些使用类型将会确定图像是否可以以延迟方式解码（如通过分配较低优先级），或者是否按需求执行图像的解码（如通过分配高优先级）。
可以按需求执行解码以增进用户体验的一种类型的使用与所谓的初始化操作相关联。具体地，如果要在初始视图中呈现图像，则可以按需求执行图像的解码和/或可以逐步重现图像。例如假定用户首次导航到了页面且尚未解码与页面相关联的图像，在此情况下，检测第一个视图中要呈现的图像并推迟页面重现直到解码了图像为止。在一个或更多个实施例中，可以定义和利用延迟阈值（例如，100 ms）控制把页面重现推迟多久。可以利用任何合适类型的延迟阈值。
可以按需求执行解码的另一类型的使用与用户交互相关联。具体地，在一些场景中，可以通过交互式反馈增进用户体验。例如，如果用户把他们的光标悬停（hover）在网页上呈现的特定对象上，则可以显现缩略图像来为用户提供与光标在其上悬停的对象相关联的额外信息。例如，一些桌面用户界面包括用户界面底部的任务栏。在一些情况下，任务栏中呈现的对象可以具有相关联的缩略图像，其能通过把光标悬停在任务栏对象上的“悬停”操作来访问。在这些和其它情况下，可以预先解码与缩略图像相关联的图像以使得可以准确和以及时方式重现缩略图像。
可以按需求执行解码的另一类型的使用与如下操作相关联：该操作即使在当前未显示图像的情况下也会需要对解码图像的访问。一个这种操作是打印操作。具体地，当打印网页时，生成和向打印机发送指令以使得打印机能够打印网页。例如假定用户导航到了100页的文件且文件中的各种图像都被指定为延迟解码。如果用户现在调用自页面3起的打印操作和不解码未查看的页面91上呈现的各种图像，则打印的文件将不包括那些后面的图像。在这些类型的情形、以及其它情形中，可以在把文件发送给打印机之前按需求解码已经指定用于延迟解码的图像。这可以确保准确打印文件中呈现的图像。
可以按需求执行解码的另一类型的使用与所谓的过滤操作相关联。具体地，一些网络浏览器使得能够选择或剪辑网页的一部分、以及以便向选定部分应用视觉效果。例如，网页的一部分可以被选择和旋转，或者可以具有应用于它的透明度过滤器。如果网页的选定部分包括尚未解码的图像，则过滤操作将不会完成或者在一些情况下可能失败。在这些情形中，如果网页的一部分被选择进行过滤操作并且包括尚未解码的图像，则在应用过滤操作之前，可以同步地按需求解码那些图像。
可以按需求执行解码的另一类型的使用与作为HTML 5一部分的<画布>元素相关联。如将会明白的，可以使用<画布>元素利用脚本（如，JavaScript）绘制图形。可以使用它例如绘制图、制作相片合成或进行简单和复杂动画。在一个或更多个实施例中，可以在使用之前同步地按需求解码结合<画布>元素使用的图像。
已经描述了可以按需求执行解码的一些实例使用类型，现在考虑按照一个或更多个实施例的一些“使用的可能性”场景。
使用的可能性
在一个或更多个实施例中，图像解码器模块111（图1）可以确定针对延迟解码指定的特定图像的使用是否具有被使用的可能性。如果是，则可以按需求解码图像。这帮助减轻例如对于实际上需要重现但是尚未解码图像的情形。可以通过任何合适方式执行确定使用的可能性，下面提供其实例。
在一个或更多个实施例中，可以通过考虑图像相对于当前视图的位置邻近或逻辑邻近来确定图像使用的可能性。
作为实例，考虑图3。此处，以300图解表示与网络浏览器相关联的视口。在视口内显现三个图像——图像302、304、以及306。还注意，可以通过在箭头308的方向上向下滚动或翻页、或者通过在箭头310的方向上侧向滚动来访问与呈现图像302、304、以及306的网页相关联的进一步内容。在一个或更多个实施例中，如果未看到的图像位于重现图像的位置邻近内，并且可以通过向下滚动或翻页、或者通过进行侧向滚动操作来访问，则可以在后台按需求解码这些未看到的图像。可以通过任何合适方式确定位置邻近。例如，在一些实施例中可以在一个或更多个向上翻页或向下翻页操作内呈现未看到的图像的情况下认为未看到的图像处于被显示图像的位置邻近内。
可以通过确定未看到的图像是否与被显示的图像共有关系以使得很可能可以结合被显示的图像访问它来确定逻辑邻近。例如，很可能可以通过用户查看幻灯片来访问包括与被显示图像相关联的幻灯片的未看到的图像。可替选地或额外地，可以通过一些方式链接图像以使得未看到的图像借由或如若不然通过使用被显示图像而可访问。可替选地或额外地，可以通过确定哪些图像（如果存在）可通过用户按压“结束”键或通过实施类似“文件结束”操作来访问以便查看从而确定逻辑邻近。
在这些和其它情形中，在可出现其它运算的情况下同步或者异步地按需求解码这些图像帮助减轻例如用户会向下翻页到驻留有图像但是其尚未被解码的网页的一部分的情形。
在一个或更多个实施例中，可以通过维持与描述特定图像使用频率的、与各图像相关联的的历史来确定图像使用的可能性。因而，可以按需求解码较常得到使用或被重现的那些图像，对于没有得到较常使用或被重现的那些图像可以指定为延迟解码。例如，如果一个图像的历史表明该图像被下载了10次和重现了那些次数中的九次、以及另一图像的历史表明该图像被下载了10次和重现了那些次数中的三次，则可以向第一个图像分配较高优先级，以及如果适当，则可以按需求同步或者异步地解码第一个图像。
在一个或更多个实施例中，可以通过要相对于图像执行的操作类型来确定图像使用的可能性。例如，如果图像是重现或访问操作的一部分，则可以按需求解码图像。这可以包括提升特定图像的解码优先级以使得立即对其解码。
可替选地或额外地，在一个或更多个实施例中，基于确定的优先级和/或使用可能性，可以把支持它的图像解码为渐进性级别和并非如完全图像解码一样昂贵的较小尺寸。额外地，如果可用，则可以使用GPU mipmap支持以利用在重现时间可获得的/被解码的尺寸来重现图像。
描述了实例图像解码器模块的操作，现在考虑可以利用以实施上述实施例的实例系统。
实例系统
图4示例了可以用来实施上述各种实施例的实例运算设备400。运算设备400可以是例如图1的运算设备102或任何其它合适运算设备。
运算设备400包括一个或更多个处理器或处理单元402、一个或更多个存储器和/或存储组件404、一个或更多个输入/输出（I/O）设备406、以及允许各种组件和设备相互通信的总线408。总线408表示以下若干类型总线结构中的任何类型中的一个或多个，包括存储器总线或存储器控制器、外围总线、加速图形端口、以及处理器或使用各种总线架构中的任何架构的本地总线。总线408可以包括有线和/或无线总线。
存储器/存储组件404表示一个或更多个计算机存储介质。组件404可以包括易失性介质（如，随机访问存储器（RAM））和/或非易失性介质（如，只读存储器（ROM）、闪存、光盘、磁盘等）。组件404可以包括固定介质（例如，RAM、ROM、固定硬盘驱动器等）以及可移除介质（例如，闪存驱动器、可移除硬盘驱动器、光盘等）。
一个或更多个输入/输出设备406允许用户向运算设备400录入命令和信息，以及还允许向用户和/或其它组件或设备展现信息。输入设备的实例包括键盘、光标控制设备（例如，鼠标）、麦克风、扫描仪等。输出设备的实例包括显示设备（例如，监视器或投影仪）、扬声器、打印机、网卡等。
在本文中可以在软件或程序模块的总体上下文中描述各种技术。通常，软件包括执行特定任务或实施特定抽象数据类型的例程、程序、对象、组件、数据结构等。可以在一些形式的计算机可读介质上存储或传输这些模块和技术的实施。计算机可读介质可以是可以通过运算设备访问的任何可用介质或媒体。以实例而非限制的方式，计算机可读介质可以包括“计算机可读存储介质”。
“计算机可读存储介质”包括以用于存储信息诸如计算机可读指令、数据结构、程序模块、或者其它数据的任何方法或技术实施的易失性和非易失性、可移除和不可移除介质。计算机可读存储介质包括但不限于RAM、ROM、EEPROM、闪存或其它存储器技术、CD-ROM、数字多功能盘（DVD）或其它光学存储部件、磁盒、磁带、磁盘存储或其它磁存储设备、或者可以用来存储期望信息和可以通过计算机访问的任何其它介质。
结论
如上所述，提供了可以基于试探法延迟图像解码、以及基于与图像相关联的使用类型或将要使用图像的可能性而稍后发起图像解码的框架。例如，使用历史和优先级系统可以使得能够在具有被下载的历史但是从未被使用的图像之前解码当前正重现和/或可能得到重现的图像。相应地，通过使图像下载与图像解码解除关联，可以较高效地利用CPU资源和存储器。
虽然以特定于结构特征和/或方法动作的语言描述了主题，但应该理解，所附权利要求中定义的主题并非必定限于上述具体特征或动作。而是，上述具体特征和动作作为实施权利要求的实例形式被公开。

Claims (11)

1.一种延迟图像解码的方法，包括：
在客户端设备上下载（200）与网页相关联的一个或更多个编码图像；
在客户端设备上缓存（204）所述一个或更多个编码图像；
确定（206）与所述一个或更多个编码图像相关联的使用类型；以及
对于特定使用类型同步或者异步地按需求解码（208）一个或更多个编码图像。
2.如权利要求1所述的方法，进一步包括：在所述下载之后，解码与所述一个或更多个编码图像相关联的元数据，所述元数据至少包括与所述一个或更多个编码图像相关联的尺寸信息。
3.如权利要求1所述的方法，其中，一个特定使用类型与图像呈现的初始化操作相关联。
4.如权利要求1所述的方法，其中，一个特定使用类型与缩略图像的使用相关联。
5.如权利要求1所述的方法，其中，一个特定使用类型与如下操作相关联：该操作即使在当前未显示相关联编码图像的情况下也会需要对与所述相关联编码图像对应的解码图像访问。
6.如权利要求1所述的方法，其中，一个特定使用类型与如下操作相关联：该操作即使在当前未显示相关联编码图像的情况下也会需要对与所述相关联编码图像对应的解码图像访问，其中，所述一个特定使用类型包括打印操作。
7.如权利要求1所述的方法，其中，一个特定使用类型与网页的过滤操作相关联。
8.如权利要求1所述的方法，其中，一个特定使用类型与<画布>元素相关联。
9.一种延迟图像解码的方法，包括：
在客户端设备上下载（200）与网页相关联的一个或更多个编码图像；
在客户端设备上缓存（204）所述一个或更多个编码图像；
确定（206）与所述一个或更多个编码图像中的至少一个编码图像相关联的使用类型；
确定（206）使用所述一个或更多个编码图像中的至少一个其它编码图像的可能性；
对于特定使用类型同步或者异步地按需求解码（208）所述一个或更多个编码图像中的所述至少一个编码图像；以及
在使用所述一个或更多个编码图像中的所述至少一个其它编码图像的可能性被确定的情况下，同步或者异步地按需求解码（210）所述一个或更多个编码图像中的所述至少一个其它编码图像。
10.如权利要求9所述的方法，其中，一个特定使用类型与如下操作相关联：该操作即使在当前未显示相关联编码图像的情况下也会需要对与所述相关联编码图像对应的解码图像进行访问。
11.一种延迟图像解码的装置，包括：
用于在客户端设备上下载与网页相关联的一个或更多个编码图像的装置；
用于在客户端设备上缓存所述一个或更多个编码图像的装置；
用于确定与所述一个或更多个编码图像相关联的使用类型的装置；以及
用于对于特定使用类型同步或者异步地按需求解码一个或更多个编码图像的装置。
CN201210017085.5A 2011-01-19 2012-01-19 延迟的图像解码 Active CN102547450B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US13/009,332 US8548263B2 (en) 2011-01-19 2011-01-19 Delayed image decoding
US13/009332 2011-01-19

Publications (2)

Publication Number Publication Date
CN102547450A CN102547450A (zh) 2012-07-04
CN102547450B true CN102547450B (zh) 2015-05-06

Family

ID=46353196

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201210017085.5A Active CN102547450B (zh) 2011-01-19 2012-01-19 延迟的图像解码

Country Status (6)

Country Link
US (3) US8548263B2 (zh)
EP (1) EP2666102A4 (zh)
JP (1) JP6038812B2 (zh)
KR (1) KR101954464B1 (zh)
CN (1) CN102547450B (zh)
WO (1) WO2012099757A2 (zh)

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103210653B (zh) * 2010-11-15 2016-08-31 Lg电子株式会社 用于转换帧格式的方法及使用该方法的装置
US8548263B2 (en) 2011-01-19 2013-10-01 Microsoft Corporation Delayed image decoding
US9218105B2 (en) * 2011-10-18 2015-12-22 Blackberry Limited Method of modifying rendered attributes of list elements in a user interface
US10824680B2 (en) * 2012-10-02 2020-11-03 The Boeing Company Panoptic visualization document access control
KR20150073354A (ko) * 2013-12-23 2015-07-01 삼성전자주식회사 디스플레이를 통하여 제공되는 오브젝트 처리 방법 및 장치
CN106210576A (zh) * 2016-07-13 2016-12-07 青岛海信电器股份有限公司 显示系统、内容显示装置以及内容显示方法
CN106407009A (zh) * 2016-09-06 2017-02-15 青岛海信电器股份有限公司 一种图片显示方法和装置
CN108268579B (zh) * 2017-01-19 2021-06-08 阿里巴巴（中国）有限公司 落地页显示内容的显示方法、装置
JP7451267B2 (ja) 2020-04-08 2024-03-18 キヤノンメディカルシステムズ株式会社 装置およびプログラム
CN112256995A (zh) * 2020-10-23 2021-01-22 四川长虹电器股份有限公司 改善浏览器内存的方法

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6233358B1 (en) * 1998-07-13 2001-05-15 Intel Corporation Image compression using directional predictive coding of the wavelet coefficients
US6593925B1 (en) * 2000-06-22 2003-07-15 Microsoft Corporation Parameterized animation compression methods and arrangements
EP1569453A2 (en) * 1996-07-01 2005-08-31 Opentv, Inc. Interactive television system and method for displaying web-like stills with hyperlinks

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6144727A (en) * 1997-08-29 2000-11-07 Anip, Inc. Method and system for global telecommunications network management and display of market-price information
US6487588B1 (en) 1996-09-23 2002-11-26 International Business Machines Corporation Web browser which automatically loads selected types of graphics
JP3516585B2 (ja) * 1997-03-17 2004-04-05 松下電器産業株式会社 データ処理装置及びデータ処理方法
US6430591B1 (en) 1997-05-30 2002-08-06 Microsoft Corporation System and method for rendering electronic images
US6408387B1 (en) * 1999-01-22 2002-06-18 Intel Corporation Preventing unauthorized updates to a non-volatile memory
US8060581B2 (en) 2000-07-19 2011-11-15 Akamai Technologies, Inc. Dynamic image delivery system
FI20002063A (fi) 2000-09-19 2002-03-20 Domiras Oy Menetelmä kuvainformaation siirtämiseksi ja esittämiseksi
US6879725B2 (en) 2001-01-26 2005-04-12 International Business Machine Corporation Method, system, and program for decoding a section from compressed data
US7162080B2 (en) 2001-02-23 2007-01-09 Zoran Corporation Graphic image re-encoding and distribution system and method
JP3762243B2 (ja) * 2001-03-26 2006-04-05 陣山 俊一 情報処理方法、情報処理プログラム並びに携帯情報端末装置
US20030079226A1 (en) 2001-10-19 2003-04-24 Barrett Peter T. Video segment targeting using remotely issued instructions and localized state and behavior information
JP2004280441A (ja) * 2003-03-14 2004-10-07 Canon Inc 情報端末装置
JP2005262652A (ja) * 2004-03-18 2005-09-29 Seiko Epson Corp 画像出力指示装置、画像出力装置、画像保存装置、画像出力システム、画像出力指示方法および画像出力方法
WO2010032419A1 (ja) 2008-09-18 2010-03-25 パナソニック株式会社 画像復号装置、画像符号化装置、画像復号方法、画像符号化方法およびプログラム
WO2010074200A1 (ja) * 2008-12-26 2010-07-01 国立大学法人九州工業大学 適応差分パルス符号変調の符号化装置及び復号化装置
JP5292146B2 (ja) * 2009-03-25 2013-09-18 株式会社ソニー・コンピュータエンタテインメント 情報処理装置および情報処理方法
US8548263B2 (en) 2011-01-19 2013-10-01 Microsoft Corporation Delayed image decoding

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1569453A2 (en) * 1996-07-01 2005-08-31 Opentv, Inc. Interactive television system and method for displaying web-like stills with hyperlinks
US6233358B1 (en) * 1998-07-13 2001-05-15 Intel Corporation Image compression using directional predictive coding of the wavelet coefficients
US6593925B1 (en) * 2000-06-22 2003-07-15 Microsoft Corporation Parameterized animation compression methods and arrangements

Also Published As

Publication number Publication date
JP2014511517A (ja) 2014-05-15
US8873875B2 (en) 2014-10-28
WO2012099757A2 (en) 2012-07-26
KR20140012629A (ko) 2014-02-03
US8548263B2 (en) 2013-10-01
US20150043834A1 (en) 2015-02-12
EP2666102A2 (en) 2013-11-27
US9195772B2 (en) 2015-11-24
EP2666102A4 (en) 2016-12-28
KR101954464B1 (ko) 2019-03-05
WO2012099757A3 (en) 2013-01-10
US20140029862A1 (en) 2014-01-30
JP6038812B2 (ja) 2016-12-07
CN102547450A (zh) 2012-07-04
US20120183233A1 (en) 2012-07-19

Similar Documents

Publication Publication Date Title
CN102547450B (zh) 延迟的图像解码
CN106991154B (zh) 网页渲染方法、装置、终端及服务器
CN109597617B (zh) 基于模板快速生成业务页面的方法和装置
TWI545450B (zh) 瀏覽器顯示子頁面的處理方法及瀏覽器
US11562037B2 (en) Crawlability of single page applications
WO2016107325A1 (zh) 基于移动终端的页面资源加载方法及装置
WO2018072388A1 (zh) 网页预读方法、网页访问方法、设备及可编程设备
US7984379B2 (en) Standard schema and user interface for website maps
US9430808B2 (en) Synchronization points for state information
CN105786455A (zh) 一种数据处理方法、装置及终端
CN111078228A (zh) 网页到小程序的转换方法、装置、服务器及存储介质
CN113688341B (zh) 动态图片分解方法、装置、电子设备及可读存储介质
CN109753644B (zh) 一种富文本编辑方法、装置、移动终端及存储介质
JP2013020395A (ja) 情報処理装置、情報処理方法及びプログラム
CN110647327A (zh) 基于卡片的用户界面动态控制的方法和装置
JP6764884B2 (ja) 端末装置及びこれによるイメージ表示方法、並びにウェブサーバ及びこれによるウェブページ提供方法
CN115659087B (zh) 页面渲染方法、设备及存储介质
CN109857503B (zh) 页面交互效果自适应方法、装置与电子设备
CN113918267B (zh) 地图交互方法、装置、电子设备及存储介质
CN113676677B (zh) 动态图片合成方法、装置、电子设备及可读存储介质
CN112596732B (zh) 一种电子教材制作方法及系统
CN114510284A (zh) 页面加载方法、装置、电子设备及可读存储介质
US20160147741A1 (en) Techniques for providing a user interface incorporating sign language
CN115062255B (zh) 网站适配的方法、装置、电子设备及计算机可读存储介质
KR20160097673A (ko) 애니메이션 처리 장치 및 방법

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
ASS Succession or assignment of patent right

Owner name: MICROSOFT TECHNOLOGY LICENSING LLC

Free format text: FORMER OWNER: MICROSOFT CORP.

Effective date: 20150619

C41 Transfer of patent application or patent right or utility model
TR01 Transfer of patent right

Effective date of registration: 20150619

Address after: Washington State

Patentee after: Micro soft technique license Co., Ltd

Address before: Washington State

Patentee before: Microsoft Corp.