JP2018512644A - 低品質タイルを使用してメモリ帯域幅を減らすためのシステムおよび方法 - Google Patents

低品質タイルを使用してメモリ帯域幅を減らすためのシステムおよび方法 Download PDF

Info

Publication number
JP2018512644A
JP2018512644A JP2017543907A JP2017543907A JP2018512644A JP 2018512644 A JP2018512644 A JP 2018512644A JP 2017543907 A JP2017543907 A JP 2017543907A JP 2017543907 A JP2017543907 A JP 2017543907A JP 2018512644 A JP2018512644 A JP 2018512644A
Authority
JP
Japan
Prior art keywords
tile
pixel
texture
attribute
display device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2017543907A
Other languages
English (en)
Inventor
フイ、シウ・ワイ
アルレサン、ベルピライ
ワン、イダ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Qualcomm Inc
Original Assignee
Qualcomm Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Qualcomm Inc filed Critical Qualcomm Inc
Publication of JP2018512644A publication Critical patent/JP2018512644A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/003D [Three Dimensional] image rendering
    • G06T15/04Texture mapping
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/95Retrieval from the web
    • G06F16/957Browsing optimisation, e.g. caching or content distillation
    • G06F16/9577Optimising the visualization of content, e.g. distillation of HTML documents
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00General purpose image data processing
    • G06T1/20Processor architectures; Processor configuration, e.g. pipelining
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00General purpose image data processing
    • G06T1/60Memory management
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • G06T11/001Texturing; Colouring; Generation of texture or colour
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformations in the plane of the image
    • G06T3/40Scaling of whole images or parts thereof, e.g. expanding or contracting
    • G06T3/4092Image resolution transcoding, e.g. by using client-server architectures
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G09G5/39Control of the bit-mapped memory
    • G09G5/393Arrangements for updating the contents of the bit-mapped memory
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2215/00Indexing scheme for image rendering
    • G06T2215/12Shadow map, environment map
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00Aspects of display data processing
    • G09G2340/04Changes in size, position or resolution of an image
    • G09G2340/0407Resolution change, inclusive of the use of different resolutions for different screen areas
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2350/00Solving problems of bandwidth in display systems
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2360/00Aspects of the architecture of display systems
    • G09G2360/12Frame memory handling
    • G09G2360/122Tiling
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00Aspects of data communication
    • G09G2370/02Networking aspects
    • G09G2370/027Arrangements and methods specific for the display of internet documents

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • Computer Hardware Design (AREA)
  • Data Mining & Analysis (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Graphics (AREA)
  • Image Generation (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

ディスプレイデバイス上にデータを表示するための、システムおよび方法が開示されている。ディスプレイデバイス上にデータを表示する、例となる方法は、高品質(HQ)タイルと対応する低品質(LQ)タイルとの差に基づいて、テキスチャを計算することを含む。方法はまた、LQタイルのアルファチャンネル中に、テキスチャを記憶することを含む。方法は、さらに、アルファチャンネルの属性が、しきい値を満たすとき、LQタイルを、ディスプレイデバイス上に合成することを含む。【選択図】図4

Description

関連出願の相互参照
[0001]本出願は、2015年2月20日に出願された、米国非仮特許出願第14/628,097号の利益を主張し、その全体が参照により本明細書に組み込まれている。発明者:Shiu Wai HUI, Veluppillai ARULESAN, and Yida WANG。
開示の分野
[0002]本開示は、一般的に、コンピューティングシステムに関係し、より具体的には、グラフィックス処理システムにおいてコンテンツをレンダリングすることに関係する。
背景
[0003]コンピューティングデバイスは、計算およびグラフィックスレンダリングに関して高性能を提供する、1以上の高性能グラフィックス処理ユニット(GPU)を装備し得る。コンピューティングデバイスは、ディスプレイのためのグラフィックスデータのレンダリングを加速するために、GPUを使用し得る。そのようなコンピューティングデバイスの例は、コンピュータワークステーション、モバイル電話(たとえば、スマートフォン)、埋め込みシステム、パーソナルコンピュータ、タブレットコンピュータ、およびビデオゲームコンソールを含み得る。
[0004]レンダリングは、一般的に、1以上の3次元(3D)グラフィックスオブジェクトを含み得る3Dグラフィックスシーンを、2次元(2D)ラスタライズされた画像データに変換する処理を指す。特に、GPUは、3Dグラフィックスシーンのレンダリングのための、少なくとも部分的ハードウェア加速を提供する3Dレンダリングパイプラインを含み得る。シーン中の3Dグラフィックスオブジェクトは、グラフィックスアプリケーションによって、1以上の3Dグラフィックスプリミティブ(primitives)(たとえば、点、線、三角形、パッチ、等)に細分され得、GPUは、シーンの3Dグラフィックスプリミティブを2Dラスタライズされた画像データに変換し得る。
概要
[0005]メモリ帯域幅を減らすように、LQタイルを使用して、ディスプレイデバイス上にデータを表示するためのシステムおよび方法が開示される。ユーザは、表示品質またはウェブページの情報コンテンツの最小の劣化で、ウェブページを速くスクロールし得る。
[0006]いくつかの実施形態に従って、ディスプレイデバイス上にデータを表示するための方法は、高品質(HQ)タイルと対応する低品質(LQ)タイルとの差に基づいて、テキスチャを計算することを含む。方法はまた、LQタイルのアルファチャンネル中に、テキスチャを記憶することを含む。方法は、アルファチャンネルの属性が、しきい値を満たすとき、LQタイルを、スクリーン上に合成することをさらに含む。
[0007]いくつかの実施形態に従って、ディスプレイデバイス上にデータを表示するためのシステムは、ディスプレイデバイスおよびメモリを含む。システムはまた、メモリおよびディスプレイデバイスに結合された1以上のプロセッサを含む。1以上のプロセッサは、メモリを読み取り、HQタイルと対応するLQタイルとの差に基づいて、テキスチャを計算するように構成される。プロセッサはまた、LQタイルのアルファチャンネル中に、テキスチャを記憶するように構成される。プロセッサは、アルファチャンネルの属性が、しきい値を満たすとき、LQタイルを、ディスプレイデバイス上に合成するようにさらに構成される。
[0008]いくつかの実施形態に従って、コンピュータ可読媒体は、HQタイルと対応するLQタイルとの差に基づいて、テキスチャを計算することと、テキスチャをLQタイルのアルファチャンネル中に記憶することと、アルファチャンネルの属性が、しきい値を満たすとき、LQタイルを、ディスプレイデバイス上に合成することとを含む、動作を実行するためのコンピュータ実行可能な命令を記憶する。
[0009]いくつかの実施形態に従って、ディスプレイデバイス上にデータを表示するための装置は、HQタイルと対応するLQタイルとの差に基づいて、テキスチャを計算するための手段を含む。システムはまた、LQタイルのアルファチャンネル中にテキスチャを記憶するための手段を含む。システムは、アルファチャンネルの属性が、しきい値を満たすとき、LQタイルを、ディスプレイデバイス上に合成することをさらに含む。
[0010]本明細書の一部を形成する、添付図面は、発明の実施形態を例証し、本明細書とともに実施形態の原理を説明するためにさらに役立つ。図面において、同様の参照番号は、同一の、または機能的に同様の要素を示し得る。要素がまず現れる図面は、対応する参照番号の中の最も左の数字によって一般的に示される。
[0011]図1は、いくつかの実施形態に従って、レンダリング技法をインプリメントするために使用され得る、コンピューティングデバイスを例証するブロック図である。 [0012]図2は、いくつかの実施形態に従って、図1中のコンピューティングデバイスの、CPU、GPU、およびシステムメモリを、さらに詳細に例証するブロック図である。 [0013]図3は、いくつかの実施形態に従って、ブラウザによってレンダリングされるウェブページの例証である。 [0014]図4は、いくつかの実施形態に従って、ディスプレイデバイス上にHQタイルまたはLQタイルを合成する、GPUのための処理のフローチャートである。
[0015]本開示の実施形態、およびそれらの利点は、以降の詳細な説明を参照することによって、最もよく理解される。
発明の詳細な説明
I.概観
II.例となるシステムアーキテクチャ
III.ディスプレイデバイス上にコンテンツをレンダリング
A.HQタイルが入手可能でなく、LQタイルが入手可能
B.HQタイルおよびLQタイルが入手可能
1.LQタイルと同一の解像度を有するテキスチャ「DLOW」を計算
2.LQのアルファチャンネル中にテキスチャ「DLOW」を記憶
3.しきい値に基づく、LQタイルとHQタイルとの差
IV.例となる方法
I.概観
[0016]以降の開示は、本開示の異なる特徴をインプリメントするための、多くの異なる実施形態、または例を提供することが理解される。いくつかの実施形態は、これらの特定の詳細のいくつか、または全て無しで実施され得る。コンポーネント、モジュールおよび配列の特定の例は、本開示を簡略化するために以下に説明される。これらは、もちろん、単なる例にすぎず、限定されることは意図されない。
[0017]ウェブページは、グラフィックス、ビデオ、画像、テキスト、等を含み得る豊富なマルチメディアコンテンツでいっぱいである。ウェブページレンダリングの最中、ウェブブラウザは、ウェブページをタイルに区画し得る。各タイル内部のウェブページコンテンツは、ビットマップ中にラスタライズされ、ついで、ビットマップは、GPUがアクセスするテキスチャ中にローディングされ得る。各ビットマップは、スクリーンの一部をカバーするタイルに対応し得る。ウェブページを表示するために、GPUは、スクリーン上にタイルを合成する。ユーザが、ウェブページフレームをスクロールするとき、ブラウザ窓中に新しいタイルが現れ得、古いタイルはブラウザ窓から消え得る。
[0018]GPUは、異なる解像度を有するタイルを生成し得る。低品質(LQ)タイルは、対応する高品質(HQ)タイルの、より低い解像度バージョンである。HQタイルは、スクリーンと同一の解像度を有し得るタイルである一方、LQタイルは、LQタイルによってオーバーラップされた情報コンテンツの、スケールダウンされたバージョンであり得る。LQタイルは、HQタイルと呼ばれる完全にレンダリングされるタイルと比較して、レンダリングするのに比較的速く、LQタイルによってオーバーラップされたウェブページコンテンツのサムネールスケッチを急速に伝えるために使用され得る。
[0019]速いスクロールの最中、ブラウザ窓中に新しいフレームが現れる前に、フレームのHQタイルの全てはレンダリングされ得ない。ウェブブラウザにおけるウェブページのスムーズなスクローリングを許容するために、秒あたり約60フレームのフレームレート(FPS)が所望され得る。残念ながら、このフレームレートは、典型的に、高メモリ帯域幅を必要とする。ユーザが、ウェブページフレームを速くスクロールし、スクリーン上に晒されたウェブページのHQタイルが、未だレンダリングされていない場合、ユーザは、ブランク領域を見、全体的ユーザ経験が混乱および劣化し得る。HQタイルをレンダリングする高コストに起因して、ウェブページの、より低い解像度バージョンがスクローリングの最中、表示でき得、よって、スクローリングの最中、ブランキングが起こるのを減らすように、対応するLQタイルが生成され、スクリーン上に合成され得る。情報コンテンツを完全に表示するために、LQタイルは、HQタイル中にレンダリングされ得る。
[0020]高解像度デバイスについて、ウェブページ全体を表示するために、大量のメモリ帯域幅が必要であり得る。スクリーン上にHQタイルを合成することは、対応するLQタイルを合成することと比較して、性能を劣化するのに加えて、大量のメモリ帯域幅および電力を消費し得る。性能を改善し、電力消費を減らすために、メモリ帯域幅を減らすことが所望され得る。メモリ帯域幅を減らす従来の技法は、ハードウェアテキスチャ圧縮を実行することを含む。GPUは、ハードウェアテキスチャ圧縮を実行できるが、この技法は、ハードウェア支援が必要であり、高価であり得るので、望ましくないであろう。代替的に、テキスチャ圧縮のためのソフトウェア技法も使用され得る。しかしながら、ソフトウェアテキスチャ圧縮は、必要とされる中央処理ユニット(CPU)処理の量のため、望ましくないであろう。
[0021]本開示の技法は、ウェブページの速いスクローリングの最中、表示品質または情報コンテンツの最小の劣化で、ウェブブラウザがウェブページのフレームを急速にレンダリングすることを可能としつつ、これらの不利を克服する解を提供し得る。GPUが、ディスプレイデバイス上にHQタイルまたはその対応するLQタイルの何れかを合成する、システムおよび方法が開示される。LQタイルおよびHQタイルがユーザの経験を劣化しないくらい十分類似している場合、GPUは、(LQタイルをHQタイルで置き換えること無しに、)対応するHQタイルよりもむしろLQタイルを合成し得る。LQタイルは、それらの対応するHQタイルよりも小さく、より少ないメモリ空間を消費する。HQタイルよりもむしろLQタイルを合成することによって、GPUによる合成の最中にアクセスされるメモリの量が減らされる。よって、LQタイルを使用することは、タイル合成の最中に必要とされるメモリ帯域幅を減らし得る。
[0022]いくつかの実施形態において、GPUは、HQタイルおよび対応するLQタイルを生成し、HQタイルとLQタイルとの差に基づいて、テキスチャを計算する。LQタイル中の各ピクセルは、3つのカラーチャンネル、およびアルファチャンネルを有し得る。アルファチャンネルは、典型的に、所与のピクセルに対するオブジェクトフラグメントの不透明度を記述する属性を有する。不透明度を記憶するよりもむしろ、GPUは、LQタイルのアルファチャンネル中にテキスチャを記憶し得る。そうすることによって、メモリ空間が節約され得る。テキスチャは、LQタイル中のピクセル当たりの単一スカラー値を含み得る。LQタイル中のピクセルに対応する単一スカラー値は、ピクセルと対応するHQタイル中の複数のピクセルとの差であり、アルファチャンネルの属性の値として記憶され得る。
[0023]GPUは、アルファチャンネルの属性が、しきい値を満たすとき、LQタイルを、ディスプレイデバイス上に合成し得る。例において、しきい値より下である属性は、しきい値を満たす。そのような属性は、ディスプレイデバイス上にHQタイルの代わりにLQタイルを合成することが、ユーザの経験を劣化しないであろうように、LQタイルおよびHQタイルがお互いに十分に類似しているということを示し得る。代替的に、GPUは、属性がしきい値を満たさないとき、HQタイルを、ディスプレイデバイス上に合成し得る。しきい値よりも下で無い属性は、HQタイルよりもむしろLQタイルを合成するほどには、LQタイルおよびHQタイルは、お互いに十分に類似していないということを示し得る。従って、対応するLQタイルの代わりに、HQタイルが、ディスプレイデバイス上に合成されるべきである。
II.例となるシステムアーキテクチャ
[0024]図1は、いくつかの実施形態に従って、レンダリング技法をインプリメントするために使用され得るコンピューティングデバイス102を例証するブロック図である。コンピューティングデバイス102は、パーソナルコンピュータ、デスクトップコンピュータ、ラップトップコンピュータ、コンピュータワークステーション、ビデオゲームプラットフォームまたはコンソール、ワイヤレスデバイス(たとえば、モバイル電話、セルラー電話、衛星電話、および/またはモバイル電話ハンドセット)、ポータブルビデオゲームデバイスまたは携帯情報端末(PDA)のようなハンドヘルドデバイス、パーソナルミュージックプレーヤ、ビデオプレーヤ、テレビジョン、テレビジョンセットトップボックス、メインフレームコンピュータ、グラフィカルデータを処理および/または表示する任意の他のタイプのデバイス、を含み得る。
[0025]図1の例において、例証されているように、コンピューティングデバイス102は、ユーザインターフェース104、CPU106、メモリコントローラ108、システムメモリ110、グラフィックス処理ユニット(GPU)112、GPUキャッシュ114、ディスプレイインターフェース116、ディスプレイデバイス118、およびバス120を含み得る。ユーザインターフェース104、CPU106、メモリコントローラ108、GPU112、およびディスプレイインターフェース116は、バス120を使用して、お互いに通信し得る。図1に指し示される異なるコンポーネント間のバスおよび通信インターフェースの特定の構成は単なる例であり、同一のまたは異なるコンポーネントを持った、コンピューティングデバイスの他の構成、および/または他のグラフィックス処理システムが、本開示の技法をインプリメントするために使用され得ることに留意されるべきである。
[0026]CPU106は、コンピューティングデバイス102の動作を制御する汎用プロセッサまたは専用プロセッサを含み得る。CPU106に1以上のソフトウェアアプリケーションを実行させるために、ユーザは、コンピューティングデバイス102に、入力を提供し得る。CPU106上で実行するソフトウェアアプリケーションは、例えば、オペレーティングシステム、ソフトウェアアプリケーション122(たとえば、ワードプロセッサアプリケーション、電子メールアプリケーション、スプレッドシートアプリケーション、メディアプレーヤアプリケーション、ビデオゲームアプリケーション、グラフィカルユーザインターフェース(GUI)アプリケーション、またはブラウザ)または別のプログラムを含み得る。ユーザは、キーボード、マウス、マイクロフォン、タッチパッド、またはユーザインターフェース104を介してコンピューティングデバイス102に結合される別の入力デバイスのような、1以上の入力デバイス(示されていない)を介して、入力をコンピューティングデバイス102に提供し得る。
[0027]ソフトウェアアプリケーション122は、ディスプレイデバイス118にグラフィックスデータをレンダリングするように、GPU112に命令する、1以上のグラフィックスレンダリング命令を含み得る。いくつかの例において、ソフトウェア命令は、オープングラフィクスライブラリー(OpenGL.RTM.)API、オープングラフィクスライブラリー埋め込みシステム(OpenGL ES)API、ディレクト3D API、X3D API、レンダーマンAPI、ウェブGL API、または任意の他の公共または専有標準グラフィックスAPIのような、グラフィックスアプリケーションプログラミングインターフェース(API)に準拠し得る。グラフィックスレンダリング命令を処理するために、CPU106は、GPU112が全てまたはいくらかのグラフィックスデータをレンダリングするようにさせる、1以上のグラフィックスレンダリングコマンドを、GPU112に発する。レンダリングされるグラフィックスデータは、例えば、点、線、三角形、四角形、三角形ストリップなどのグラフィックスプリミティブのリストを含み得る。
[0028]メモリコントローラ108は、システムメモリ110に出入りするデータの移送を容易にする。例えば、メモリコントローラ108は、コンピューティングデバイス102内のコンポーネントにメモリサービスを提供するために、メモリ読み取りおよび書き込みコマンドを受け、メモリシステム110に関するそのようなコマンドの要求に応じて処理し得る。メモリコントローラ108は、システムメモリ110に通信的に結合される。メモリコントローラ108は、図1の例となるコンピューティングデバイス102において、CPU106およびシステムメモリ110の両方とは別個の処理モジュールであると例証されているが、他の例では、メモリコントローラ108の機能性の内のいくつかまたは全ては、CPU106およびシステムメモリ110の一方または両方にインプリメントされ得る。
[0029]システムメモリ110は、CPU106による実行のためにアクセス可能なプログラムモジュールおよび/または命令、ならびに/あるいは、CPU106上で実行されるプログラムにより使用するためのデータを記憶し得る。例えば、システムメモリ110は、ユーザアプリケーションおよびそのアプリケーションに関連付けられたグラフィックスデータを記憶し得る。システムメモリ110は、追加的に、コンピューティングデバイス102の他のコンポーネントによる使用のためのおよび/またはそれらによって生成される情報を記憶し得る。例えば、システムメモリ110は、GPU112のためのデバイスメモリとして機能し得、GPU112によって操作されるデータに加え、GPU112によって実行される動作に起因するデータを記憶し得る。例えば、システムメモリ110は、テクスチャバッファ、深度バッファ、ステンシルバッファ、頂点バッファ、フレームバッファ、または、そのようなものの任意の組み合わせを記憶し得る。加えて、システムメモリ110は、GPU112による処理のためのコマンドストリームを記憶し得る。システムメモリ110は、ランダムアクセスメモリ(RAM)、スタティックRAM(SRAM)、ダイナミックRAM(DRAM)、読み取り専用メモリ(ROM)、消去可能なプログラマブルROM(EPROM)、電気的消去可能なプログラマブルROM(EEPROM(登録商標))、フラッシュメモリ、磁気データ媒体、または光記憶媒体のような、1以上の揮発性および不揮発性メモリまたは記憶デバイスを含み得る。
[0030]GPU112は、グラフィックス動作を実行して、1以上のグラフィックスプリミティブをディスプレイデバイス118にレンダリングし、表示のために、画像をピクセルにテキスチャマッピングするように構成され得る。CPU106上で実行されるソフトウェアアプリケーション122が、グラフィックス処理を必要とするとき、CPU106は、ディスプレイデバイス118へのレンダリングのために、グラフィックスコマンドおよびグラフィックスデータをGPU112に提供し得る。グラフィックスコマンドは、ドローコールコマンド、GPU状態プログラミングコマンド、メモリ転送コマンド、汎用コンピューティングコマンド、カーネル実行コマンド、等を含み得る。いくつかの例において、CPU106は、システムメモリ110にコマンドおよびグラフィックスデータを書きこむことによって、GPU112にコマンドおよびグラフィックスデータを提供し得、システムメモリ110は、GPU112によってアクセスされ得る。例において、グラフィックスデータは、テキスチャを含み得、テキスチャは、システムメモリ110に記憶され、ディスプレイデバイス118上のピクセルについて、カラーを決定するために、GPU112によって使用される。いくつかの例において、GPU112は、CPU106上で実行されるアプリケーションのための汎用コンピューティングを実行するようにさらに構成され得る。
[0031]GPU112は、いくつかの事例において、ベクトル操作をCPU106よりも効率的に処理することを提供する、高度に並列な構造で築かれ得る。例えば、GPU112は、並列の手法で、複数の頂点、制御ポイント、ピクセルおよび/または他のデータを走査するように構成される、複数の処理ユニットを含み得る。GPU112の高度に並列な性質は、いくつかの事例において、CPU106を使用して画像をレンダリングするよりも、GPU112が、グラフィックス画像(たとえば、GUIおよび2次元(2D)および/または3次元(3D)グラフィックスシーン)をディスプレイデバイス118上に、急速にレンダリングすることを可能にし得る。加えて、GPU112の高度に並列な性質は、GPU112が、汎用コンピューティングアプリケーションについての、あるタイプのベクトルおよびマトリックス操作を、CPU106よりも急速に処理することを可能にし得る。
[0032]GPU112は、いくつかの事例において、コンピューティングデバイス102のマザーボードに集積化され得る。他の事例において、GPU112は、コンピューティングデバイス102のマザーボード中のポートにインストールされるグラフィックスカード上に存在し得、または、そうでなければコンピューティングデバイス102と相互動作するように構成される周辺デバイス内に取り込まれ得る。さらなる事例において、GPU112は、CPU106と同一のマイクロチップ上に配置され得、チップ上システム(SoC)を形成する。GPU112は、1以上のマイクロプロセッサ、特定用途向け集積回路(ASIC)、フィールドプログラマブルゲートアレイ(FPGA)、デジタル信号プロセッサ(DSP)、または他の同等の集積回路またはディスクリート論理回路のような、1以上のプロセッサを含み得る。
[0033]GPU112は、GPUキャッシュ114に直接的に結合され得る。よって、GPU112は、バス120を必ずしも使用することなく、GPUキャッシュ114からデータを読み取り、それにデータを書き込み得る。言い換えれば、GPU112は、オフチップメモリの代わりにローカル記憶装置を使用して、データをローカルに処理し得る。これは、GPU112が、重いバストラフィックを経験し得る、GPU112がバス120を介してデータを読み取るおよび書き込む必要性を減らすことによって、より効率的な手法で動作することを許容する。GPUキャッシュ114は、たとえば、ランダムアクセスメモリ(RAM)、スタティックRAM(SRAM)、ダイナミックRAM(DRAM)、等のような、1以上の揮発性または不揮発性メモリ、または記憶デバイス含み得る。しかしながら、いくつかの事例において、GPU112は、別個のキャッシュを含まず、代わりに、バス120を介してシステムメモリ110を使用し得る。
[0034]CPU106および/またはGPU112は、レンダリングされた画像データを、システムメモリ110内に割り当てられたフレームバッファ110に記憶し得る。CPU106上で実行されるソフトウェアアプリケーションは、画像データ(たとえば、テクセルカラー、幅、高さ、およびカラー深度)を、システムメモリ110に記憶し得る。ディスプレイインターフェース116は、フレームバッファからデータを取り出し、レンダリングされる画像データによって表示される画像を表わすように、ディスプレイデバイス118を構成し得る。いくつかの例において、ディスプレイインターフェース116は、フレームバッファから取り出されたデジタル値を、ディスプレイデバイス118によって消費可能なアナログ信号へ変換するように構成されたデジタル/アナログ変換器(DAC)を含み得る。他の例において、ディスプレイインターフェース116は、処理のために、デジタル値を直接ディスプレイデバイス118に渡し得る。
[0035]ディスプレイデバイス118は、モニタ、テレビジョン、投影デバイス、液晶ディスプレイ(LCD)、プラズマディスプレイパネル、発光ダイオード(LED)アレイ、ブラウン管(CRT)ディスプレイ、表面導電放射ディスプレイ(SED)、レーザテレビジョンディスプレイ、ナノ結晶ディスプレイ、または別のタイプのディスプレイユニットを含み得る。ディスプレイデバイス118は、コンピューティングデバイス102内に集積化され得る。例えば、ディスプレイデバイス118は、モバイル電話ハンドセットまたはタブレットコンピュータのスクリーンであり得る。代替的に、ディスプレイデバイス118は、ワイヤードまたはワイヤレス通信リンクを介して、コンピューティングデバイス102に結合されたスタンドアローンデバイスであり得る。例えば、ディスプレイデバイス118は、ケーブルまたはワイヤレスリンクを介して、パーソナルコンピュータに接続されたコンピュータモニタまたはフラットパネルディスプレイであり得る。
[0036]バス120は、第1、第2、および第3世代のバス構造およびバスプロトコルと、共有されたバス構造およびバスプロトコルと、ポイントツーポイントバス構造およびバスプロトコルと、一方向バス構造およびバスプロトコルと、双方向バス構造およびバスプロトコルとを含む、任意のバス構造およびバスプロトコルの組み合わせを使用してインプリメントされ得る。バス120をインプリメントするために使用され得る、異なるバス構造およびプロトコルの例は、たとえば、ハイパートランスポートバス、インフィニバンドバス、アドバンストグラフィックスポートバス、ペリフェラルコンポーネントインターコネクト(PCI)バス、PCIエクスプレスバス、アドバンストマイクロコントローラバスアーキテクチャ(AMBA)、アドバンストハイパーフォーマンスバス(AHB)、AMBAアドバンストペリフェラルバス(APB)、およびAMBAアドバンストエクステンシブルインターフェース(AXI)バスを含む。他のタイプのバス構造およびプロトコルがまた、使用され得る。
[0037]図2は、いくつかの実施形態に従って、図1におけるコンピューティングデバイス102の、CPU106、GPU112、システムメモリ110をさらに詳細に例証するブロック図である。図2に指し示されるように、CPU106は、GPU112およびシステムメモリ110に通信的に結合され、GPU112は、CPU106およびシステムメモリ110に通信的に結合される。GPU112は、いくつかの事例において、CPU106とマザーボード上で集積化され得る。
[0038]CPU106は、ブラウザ224、グラフィックスAPI226、GPUドライバ228、およびオペレーティングシステム230のようなソフトウェアアプリケーションを実行するように構成される。ブラウザ224は、グラフィックス画像を表示させる1以上の命令、および/またはGPU112によって、非グラフィックスタスク(たとえば、汎用コンピューティングタスク)を実行させる1以上の命令を含み得る。ブラウザ224は、説明された実施形態に従って、様々な方法を実行するように動作する複数のハードウェアコンポーネントおよび/またはソフトウェアコンポーネントを含み、またはインプリメントし得る。
[0039]ユーザは、ブラウザ224をウェブページのユニフォームリソースロケータ(URL)に向け得る。ブラウザ224は、URLによって参照されたハイパーテキストマークアップラングエッジ(HTML)をローディングし、スクリーン(たとえば、図1中のディスプレイデバイス118)上にウェブページをレンダリングし得る。ブラウザ224が、GPU112に命令を発するように説明され得るが、コンピューティングデバイス102において実行可能で、グラフィックスデータを処理および/または表示する任意のソフトウェアアプリケーションが、命令を発するために使用され得ることが理解されるべきである。追加的に、ウェブページは、レンダリング可能なコンテンツとして説明されるが、これは、制限することを意図してはおらず、レンダリング可能な/レンダリングされたコンテンツは、(インターネットのようなネットワークと関連付けされた、または関連付けられていない)ページ上の任意のテキスト、画像、またはグラフィックスであり得る。
[0040]図3は、いくつかの実施形態に従って、ブラウザ224によってレンダリングされた、ウェブページ300の例証である。図2および3は、本開示のレンダリング技法をより良く説明するために、一緒に論じられるであろう。ブラウザ224は、ブラウザ窓においてウェブページ300のフレームを表示し得る。
[0041]ウェブページレンダリングの最中、ブラウザ224は、ウェブページ300を複数のタイル302に区画する。ウェブページ300は、3行および4列の、合計12個のタイル302に分割される。タイル302は、情報を伝えるビデオ等のための、グラフィックス、テキスト304、画像306および308、アイコン、リンクとオーバーラップし得る。ブラウザ224は、各タイル内部のウェブページコンテンツを、ビットマップ中にラスタライズする。各ビットマップは、ディスプレイデバイス118の一部をカバーするタイルに対応する。
[0042]ブラウザ224は、複数のタイル302のうちの1以上のタイルの、1以上のバージョンをラスタライズし得る。例において、ブラウザ224は、各タイルのLQバージョンおよびHQバージョンをラスタライズする。ブラウザ224は、タイル302のLQバージョンをLQビットマップ260中にラスタライズし、タイル302の対応するHQバージョンをHQビットマップ262中にラスタライズし得る。ブラウザ224は、タイルのLQバージョンを、タイルのHQバージョンより小さいタイルにラスタライズし得る。対応するHQタイルよりも小さく、より少ない情報を含むので、CPU106が、タイル302のLQバージョンにおけるコンテンツをラスタライズするために、より少ない時間しか取らないであろう。そのようであるので、いくつかの実施形態において、ブラウザ224は、HQビットマップ262の前にLQビットマップ260を生成する。HQビットマップ262は、LQビットマップ260が生成されている最中にバックグラウンドで、またはLQビットマップ260が生成された後に、生成され得る。
[0043]ビットマップは、GPU112にはアクセス不可能であり得る。GPU112にビットマップへのアクセスを提供するために、ブラウザ224は、ビットマップを、テキスチャメモリ264中にアップロードし得る。例において、ブラウザ224は、LQビットマップ260をLQタイル270中にアップロードし、HQビットマップ262をHQタイル272中にアップロードする。LQタイル270は、HQタイル272に対応し、HQタイル272の、より低い解像度バージョンである。例において、HQタイル272は、ディスプレイデバイス118の512x512テクセル領域にマッピングし得、対応するLQタイル270は、ディスプレイデバイス118の32x32テクセル領域にマッピングし得る。テクセル領域は、1以上のテクセルを含み、テクセルは、テキスチャメモリ264中のピクセルである。
[0044]HQタイルをライスタライズし、合成することにおける高コストに起因して、スクローリングの最中、HQタイルに対応するLQタイルが、ウェブページ300の、より低い解像度バージョンをレンダリングするために使用され得、よって、メモリ帯域幅とともにスクローリングの最中、ブランキングの発生が減らされ得る。図2において、1つのLQビットマップおよびHQビットマップが例証されているが、1以上のLQビットマップおよび/または1以上のHQビットマップが、システムメモリ110に記憶され得ることが理解されるべきである。同様に、図2において、1つのLQタイルおよびHQタイルが例証されているが、1以上のLQタイルおよび/または1以上のHQタイルが、システムメモリ110に記憶され得ることが理解されるべきである。追加的に、HQタイルは、1つの対応する、より低い解像度バージョンを有するように説明され得る。これは、制限されることを意図してはおらず、HQタイルは、1よりも多い対応する、より低い解像度バージョンを有し得ることが理解されるべきである。
[0045]ブラウザ224は、グラフィックスAPI226に、命令を発し得、グラフィックスAPI226は、ブラウザ224から受けた命令を、GPUドライバ228によって消費可能なフォーマットに変換し得る。GPUドライバ228は、グラフィックスAPI226を介して、ブラウザ224から命令を受け、命令の要求に応じて処理するようにGPU112の動作を制御する。例えば、GPUドライバ228は、1以上のコマンド240を作成し、コマンド240をシステムメモリ110中(たとえば、テキスチャメモリ264中)に配置し、GPU112に、コマンド240を実行するように命令し得る。いくつかの例において、GPUドライバ228は、コマンド240をシステムメモリ110中に配置し、オペレーティングシステム230を介して、たとえば、1以上のシステムコールを介して、GPU112と通信し得る。
[0046]システムメモリ110は、1以上のコマンド240を記憶し得る。コマンド240は、1以上のコマンドバッファ(たとえば、リングバッファ)中に記憶され、1以上の状態コマンドおよび/または1以上のドローコールコマンドを含み得る。状態コマンドは、ドローカラーのような、GPU112における状態変数のうちの1以上を変化するように、GPU112に命令し得る。ドローコールコマンドは、ディスプレイデバイス118上にシステムメモリ110中に記憶された1以上の頂点のグループによって定義された(たとえば、頂点バッファにおいて定義された)幾何学的配置をレンダリングするように、またはテキスチャ(たとえば、LQタイル270またはHQタイル272)のコンテンツを、描くように、GPU112に命令し得る。
[0047]GPU112は、コマンドエンジン232および1以上の処理ユニット234を含む。コマンドエンジン232は、システムメモリ110中に記憶されたコマンド240を取り出し、実行する。状態コマンドを受けることに応答して、コマンドエンジン232は、状態コマンドに基づいて、GPU112中の1以上の状態レジスタを、特定の値に設定するように構成され得る。ドローコールコマンドを受けることに応答して、コマンドエンジン232は、システムメモリ110中に記憶されたプリミティブタイプデータに基づいて、処理ユニット234に、頂点によって表わされた幾何学的配置をレンダリングさせるように、構成され得る。コマンドエンジン232はまた、シェーダプログラムバインディングコマンドを受け、シェーダプログラムバインディングコマンドに基づいて、プログラム可能な処理ユニット234のうちの1以上中に、特定のシェーダプログラムをローディングし得る。
[0048]処理ユニット234は、1以上の処理ユニットを含み得、それらの各々は、プログラム可能な処理ユニットまたは固定された機能処理ユニットであり得る。プログラム可能な処理ユニットは、例えば、CPU106からGPU112上にダウンロードされた、1以上のシェーダプログラムを実行するように構成されたプログラム可能なシェーダユニットを含み得る。いくつかの例において、シェーダプログラムは、OpenGLシェーディングランゲージ(GLSL)、ハイレベルシェーディングランゲージ(HLSL)、グラフィックスのためのC言語(C for Graphics)(Cg)シェーディングランゲージ、等のような、ハイレベルシェーディングランゲージで書かれたプログラムのコンパイルされたバージョンであり得る。
[0049]いくつかの例において、プログラム可能なシェーダユニットは、並列、たとえば、SIMDパイプラインで動作するように構成された複数の処理ユニットを含み得る。プログラム可能なシェーダユニットは、シェーダプログラム命令を記憶するプログラムメモリと、実行状態レジスタ、たとえば、プログラムメモリ中の実行されている現在の命令またはフェッチされる次の命令を示すプログラムカウンタレジスタとを有し得る。処理ユニット234中のプログラム可能なシェーダユニットは、例えば、頂点シェーダユニット、ピクセルシェーダユニット、ジオメトリシェーダ、ハルシェーダユニット、ドメインシェーダユニット、コンピュートシェーダユニット、および/またはユニファイドシェーダユニットを含み得る。1以上の処理ユニット234は、シェーダプログラムを実行するように構成された1以上のシェーダユニットを含み得る、3Dグラフィックスレンダリングパイプラインを形成し得る。ブラウザ224は、GPU112に、異なるシェーダプログラムを送り得る。
III.ディスプレイデバイス上にコンテンツをレンダリング
[0050]例において、コマンド240は、ウェブページ300をレンダリングするためのコマンドを含む。処理ユニット234は、レンダリングプロセスの合成ステージの最中、ディスプレイ118上にLQタイル270およびHQタイル272の精々1つを合成する、フラグメントシェーダまたはピクセルシェーダ237を含む。ピクセルシェーダ237はまた、ディスプレイデバイス118上に表示された、テキスチャオブジェクト(たとえば、テキスチャ画像)によってカバーされたピクセルのためのカラーを計算し、設定し得る。本開示において、用語「フラグメント」および「ピクセル」は、交換可能に使用され得る。
[0051]ディスプレイデバイス118の各ピクセルは、関連付けられた情報を有し得る。いくつかの例において、各ピクセルは、3つのカラーチャンネル、および1つのアルファチャンネルを有する。カラーチャンネルは、そのピクセルの特定の成分の関数であり、特定の成分は、典型的には、赤、緑、および青(RGB)成分である。従って、ピクセルは、赤チャンネル、緑チャンネル、青チャンネル、およびアルファチャンネルを有し得る。異なる強度における、これらの3つのカラーの組み合わせは、各ピクセルに対するフルレンジの可視スペクトルを表わし得る。追加的に、アルファチャンネルは、各ピクセルの不透明度を示す属性を有し得る。合成プログラムにおいて、属性が検査されるとき、1の属性値(白)は、100パーセントの不透明度を表わし、ピクセルの興味領域の全体をカバーする。対照的に、ゼロの属性値(黒)は、100パーセントの透明度を表わす。
A.HQタイルは入手可能でなく、LQタイルは入手可能
[0052]いくつかの実施形態において、レンダリングプロセスの合成ステージの最中、GPU112は、LQタイル270またはHQタイル272の何れかをディスプレイデバイス118上に、合成し得る。LQタイルは、それらの対応するHQタイルよりも小さく、より少ないメモリ空間を消費する。LQタイル270は、HQタイル272よりも低い解像度を有するコンテンツ(たとえば、ビデオのための、グラフィックス、テキスト、画像、アイコン、リンク等)を含み得る。従って、LQタイル270は、HQタイル272よりも少ない情報を含むので、GPU112が、HQタイル272の代わりに、LQタイル270をディスプレイデバイス118上に合成するのは、より急速であり得る。
[0053]ユーザがウェブページフレームをスクロールするとき、ブラウザ窓に新しいタイルが現れ得、古いタイルはブラウザ窓から消え得る。速いスクローリングの最中、フレームのHQタイルの全てが入手可能ではない。例えば、HQタイル272と比較して、LQタイル270を生成することは、より急速であるので、HQタイル272が入手可能になる前に、LQタイル270は、入手可能であり得る。ここで、入手可能でないHQタイルが表示されるであろう場所であるブランク領域をユーザが見ないように、LQタイル270が、ディスプレイデバイス118上に合成され得る。ブランク領域は、全体的ユーザ経験を混乱および劣化させ得る。
B.HQタイルおよびLQタイルが入手可能
[0054]代替的に、LQタイル270およびHQタイル272の両方が入手可能である場合、ユーザがLQタイルを見ていることに気づき得ず、または混乱しないくらいに、LQタイルおよびHQタイルが互いに十分に類似しているならば、(LQタイル270をHQタイル272で置き換えること無しに)HQタイル272よりもむしろLQタイル270をディスプレイデバイス118上に合成することが所望され得る。GPU112は、HQタイル272またはLQタイル270のいずれかを、ディスプレイデバイス118上に合成するかを決定し得る。図4は、いくつかの実施形態に従って、GPU112が、HQタイル272またはLQタイル270を、ディスプレイデバイス118上に合成するためのプロセスのフローチャート400である。方法400は、限定されることを意味せず、他のアプリケーションで使用され得る。
1.LQタイルと同一の解像度を有するテキスチャ「DLOW」を計算
[0055]処置402において、テキスチャは、HQタイル272と対応するLQタイル270との差に基づいて、計算される。例において、ブラウザ224は、テキスチャDLOWを計算するために、グラフィックスAPI226を介して、GPU112に命令を送る。GPU112は、異なる解像度を有する(たとえば、HQタイル272およびLQタイル270に対応する)2つの画像間の差を比較する。例において、ピクセルシェーダ237は、タイル間の差に基づいて、テキスチャDLOWを計算することによって、HQタイル272とLQタイル270との類似度を決定する。
[0056]LQタイル270中のピクセルは、LQピクセルと呼ばれ得、HQタイル272中のピクセルは、HQピクセルと呼ばれ得る。HQタイルおよびLQタイルは、異なる数のピクセルを有する。LQタイル270中の各LQピクセルは、HQタイル272中の複数のHQピクセルに、マッピングされ得る。例において、LQタイル270は、HQタイル272中の512x512ピクセル領域にマッピングする、32x32ピクセル領域である。LQタイル270中の各LQピクセルについて、テキスチャDLOWは、LQピクセルと、LQピクセルがマッピングされた、HQタイル272中の複数のHQピクセルとの差を表示する差値を含み得る。テキスチャDLOWは、LQタイル270と同一の解像度を有する。テキスチャDLOWにおける各ピクセルは、LQピクセルと、LQピクセルがマッピングされた複数のHQピクセルとの差を表わす単一スカラー値に関連付けられ得る。GPU112は、ピクセルを並列で処理できるので、テキスチャDLOWを効率的に計算し得る。例において、ピクセルシェーダ237の各インスタンスは、ブラウザ窓の1つのピクセルを処理し得る。
[0057]GPU112は、多様な方法で、テキスチャDLOWを計算し得る。いくつかの例において、GPU112は、1つのパス(pass)において、テキスチャDLOWを計算する。例において、LQタイル270中の各LQピクセルについて、GPU112は、HQタイル272中の対応するピクセル領域(たとえば、16x16HQピクセル)を識別する。GPU112は、ピクセル領域の属性を計算する。ピクセル領域の属性は、ピクセル領域の平均であり得る。例において、ピクセル領域におけるピクセル値の強度は、平均化される。各ピクセルは、RGBカラーを含み得る。例えば、各ピクセルは、3つのスカラー値を含み得、ここで、第1のスカラー値は赤(「R」)値に対応し、第2のスカラー値は、緑(「G」)値に対応し、第3のスカラー値は、青「B」値に対応する。ピクセル強度は、3つのカラー値の関数であり得る。例において、強度は、赤、緑、青値の線形組み合わせである。GPU112は、ついで、ピクセル領域の属性とLQピクセルとの差を計算し得る。ピクセル領域の属性とLQピクセルとの差は、テキスチャDLOWにおける値であり得る。例において、LQピクセルは、ピクセル領域の属性とLQピクセルとの差を記憶するテキスチャDLOW中のピクセルに対応する。この差は、LQタイル270中の各LQピクセルについて、計算され得、テキスチャDLOWは、これらの計算された差の各々を含み得る。
[0058]別の例において、LQタイル270中の各LQピクセルについて、GPU112は、HQタイル272中の対応するピクセル領域を識別し、LQピクセルとピクセル領域中の各ピクセルとの差を計算する。ついで、GPU112は、1以上の計算された差の平均を計算し得る。平均は、テキスチャDLOWにおける値であり得る。例において、LQピクセルは、平均を記憶するテキスチャDLOWにおけるピクセルに対応する。この平均は、LQタイル270中の各LQピクセルについて計算され得、テキスチャDLOWは、これらの計算された平均の各々を含み得る。
[0059]いくつかの例において、GPU112は、1より多いパスにおいて、テキスチャDLOWを計算する。例において、LQタイル270中の各LQピクセルについて、GPU112はHQタイル272中の対応するピクセル領域を識別し、LQピクセルとピクセル領域との差に基づいて、テキスチャDHIGHを計算する。テキスチャDHIGHの解像度は、HQタイル272の解像度と同一であり得る。テキスチャDHIGH中の各ピクセルは、HQタイル272とLQタイル270との間のピクセル強度の差を表わす、単一スカラー値に関連付けられ得る。別個のパスにおいて、GPU112は、テキスチャDHIGHを、LQタイル270の解像度にダウンサンプリングし得る。テキスチャDLOWは、LQタイル270の解像度にダウンサンプリングされたテキスチャDHIGHであり得る。例において、LQピクセルは、LQピクセルとピクセル領域との間の、ダウンサンプリングされた差を記憶する、テキスチャDLOW中のピクセルに対応する。テキスチャDHIGHは、1以上の一時的なバッファに記憶され得、テキスチャDLOWが計算された後、廃棄され得る。このダウンサンプリングされた差は、LQタイル270中の各LQピクセルについて計算され得、テキスチャDLOWは、これらのダウンサンプリングされた差の各々を含み得る。
2.LQタイルのアルファチャンネル中にテキスチャ「DLOW」を記憶
[0060]処置404において、テキスチャは、LQタイルのアルファチャンネル中に記憶される。例において、ブラウザ224は、LQタイル270のアルファチャンネル中に、テキスチャDLOWを記憶するように、GPU112に命令を送る。従って、GPU112は、LQタイル270のアルファチャンネル中に、テキスチャDLOWを記憶し得る。ピクセル当たりの単一スカラー値を記憶する、テキスチャDLOWのコンテンツは、LQタイル270のアルファチャンネルに書き込まれ得る。特に、LQタイル270中の各LQピクセルは、LQピクセルに対するオブジェクトフラグメントの不透明度を記述する、属性を有する、アルファチャンネルを有し得る。アルファチャンネルの属性は、典型的に、タイルが不透明であることを示す、1の値を有する。タイルは、典型的に、不透明であるので、アルファチャンネルの属性は、タイルの不透明度と異なる情報を記憶するために使用され得る。例えば、属性は、ディスプレイデバイス118上に、HQタイル272を合成すること無しに、LQタイル270を合成することが十分であるかを決定するために、LQタイル270とHQタイル272との類似度(または差)を示し得る。アルファチャンネルは、メモリ空間を節約するために、テキスチャDLOWを記憶するために使用され得る。
[0061]いくつかの実施形態において、テキスチャDLOWの各値は、LQタイル270中のLQピクセルのアルファチャンネルの属性中に記憶される。属性は、LQピクセルと、LQピクセルがマッピングされたHQタイル272中のピクセル領域との差に基づく。LQタイル270のアルファチャンネル中に記憶された各差値は、HQタイル272における多数の差の平均であり得る。差値は、ディスプレイデバイス118上に、HQタイル272またはLQタイル270のいずれかを合成するかの表示を提供する。例において、差値は、LQタイル270が、いかにHQタイル272に類似するかを決定するために、しきい値と比較され得る。しきい値は、スクリーンおよびウェブページの解像度のような、様々なファクターに依存し得る。例えば、しきい値は、ピクセル値における特定のパーセント差(ピクセル強度における、たとえば、20パーセント差)を示し得る。
3.しきい値に基づく、LQタイルとHQタイルとの差
[0062]処置406において、アルファチャンネルの属性が、しきい値を満たすとき、LQタイルは、ディスプレイデバイス上に合成される。従って、LQタイル270中のテクセルからのカラー値が、使用され得る。例において、ブラウザ224は、アルファチャンネルの属性から読み出し、グラフィックスAPI226を介して、属性をしきい値と比較するように、GPU112に命令を送る。GPU112は、アルファチャンネルの属性が、しきい値を満たすとき、LQタイル270を、ディスプレイデバイス118上に合成し得る。LQタイル270がいかにHQタイル272に類似するかを示し得る属性が、しきい値よりも小さい(または等しい)場合、アルファチャンネルの属性は、しきい値を満たし得る。しきい値より下の属性は、LQタイル270が、HQタイル272に、ユーザの経験を劣化しないくらい十分類似していることを示し得る。従って、HQタイル272の代わりに、LQタイル270が、ディスプレイデバイス118上に合成され得る。
[0063] ウェブページは、低周波数データ(たとえば、ブランク、一定カラー、またはゆっくり変化する階調度ないし画像)を包含し得、したがって、HQタイル272よりもむしろLQタイル270が、ディスプレイデバイス118上に合成される場合、ユーザの経験を劣化させることなく、ユーザが閲覧するに十分なくらい最終結果は良好である。Qタイルが低周波数データを包含する場合、LQタイル270は、HHQタイル272に類似し得る。
[0064]GPU112は、後の取り出しのために、GPUキャッシュ114中にLQタイル270をキャッシュし得る。GPU112が、LQタイル270をアクセスする場合、GPU112は、テキスチャメモリ264をアクセスするよりも、GPUキャッシュ114からLQタイル270を取り出し得る。多数のブラウザ窓のピクセルは、同一のLQタイルに(逆に)マッピングし得る。従って、ピクセルシェーダ237のインスタンスは、同一のLQタイルをフェッチし得、これは、GPU112のテキスチャキャッシュ中によりあり得る。これは、ウェブページが、ブランク領域、ゆっくり変化する階調度、等を包含するケースのように、HQビットマップ262とLQビットマップ260との間で類似するカラー値を有するピクセルを包含するタイルにとって、低下されたメモリ帯域幅の結果となり得る。
[0065]追加的に、GPU112は、HQタイル272をアクセスすることは、全く不要であり得る。むしろ、GPU112は、LQタイル270とHQタイル272との差が、極めて小さく、GPU112は、LQタイル272を合成できるかを決定するために、LQタイル270のアルファチャンネルを読み得る。アルファチャンネルの属性が、しきい値を満たす場合、GPU112は、HQタイル272をアクセスすることを不要にし、よって、メモリ帯域幅を減らせる。
[0066]対照的に、処置408において、アルファチャンネルの属性が、しきい値を満たさないとき、HQタイルが、ディスプレイデバイス上に合成される。従って、HQタイル272中のテクセルからのカラー値が使用され得る。GPU112は、アルファチャンネルの属性が、しきい値を満たさないとき、ディスプレイデバイス118上にHQタイル272を合成し得る。例において、属性が、しきい値よりも低くない(たとえば、しきい値より大きいまたは等しい)場合、属性は、しきい値を満たさない。しきい値よりも下で無い属性は、HQタイルに代わって表示されるには、LQタイル270は、HQタイル272に十分に類似していないことを示し得る。従って、LQタイル270に代わって、HQタイル272が、ディスプレイデバイス118上に合成され得る。ウェブページは、高周波数データを包含し得、したがって、HQタイル272よりもむしろ、LQタイル270が、ディスプレイデバイス118に合成される場合、ユーザが閲覧するには最終結果は混乱する。
[0067]GPU112は、様々な方法で、HQタイル272を、ディスプレイデバイス118に合成し得る。例において、GPU112は、高解像度タイルをアクセスし、ディスプレイデバイス118上での表示のために、HQタイル272からフレームバッファ中にテクセルをコピーする。別の例において、LQタイル270は、既に、ディスプレイデバイス118上に合成されてい得る。この例において、GPU112は、HQタイル272を取得するために、HQタイル272とLQタイル270との差を、加え戻し得る。
[0068]いくつかの実施形態において、処置402−408は、任意の数のLQタイルのために実行され得る。追加の処置が上記で論議されたブロック402−408の前、最中、または後に、実行され得ることも理解される。本明細書で説明された方法400の処置の内の1つ以上が、所望に応じて、省略され、組み合わされ、または、異なる順序で実行され得ることも理解される。
[0069]本開示において開示された技法を使用して、テキスチャフェッチの数は減らされないが、実際、増加し得る。例えば、アルファチャンネルの属性が、しきい値を満たさない場合、GPU112は、LQタイル270およびQタイル272の両方をアクセスする。これにも拘らず、開示の実施形態は、GPU112が、しばしば、LQタイルからのテクセルを使用する場合、メモリ帯域幅を減らすことによって、性能を顕著に改善し得る。
[0070]いくつかの実施形態において、処理ユニット(たとえば、GPU112および/またはCPU106)は、メモリ帯域幅を減らすために、オンザフライで、しきい値を変動させる。処理ユニットは、LQタイルが、よりしばしば使用され得るように、しきい値を減少し得る。例において、速いスクロールの間、ユーザは、LQタイルとHQタイルとの差に気付きそうでない。従って、処理ユニットが、速いスクロールを検出する場合、処理ユニットは、しきい値を減少し得る。別の例において、コンピューティングデバイス102は、低バッテリーモード(たとえば、15パーセント未満バッテリー残)であり得、電力消費を減らすことが所望され得る。従って、コンピューティングデバイスが低バッテリーモードあることを、処理ユニットが検出した場合、処理ユニットは、しきい値を減少し得る。
[0071]上記に論議され、ここで強調されるように、図1−4は、単なる例であり、それは、特許請求の範囲を極度に限定するべきでない。本開示の様々な実施形態において、本開示を実施するための命令シーケンス(たとえば、図中の処置402−408)の実行が、コンピューティングデバイス102によって実行され得る。本開示の様々な他の実施形態において、複数のコンピューティングデバイスは、通信リンクによってネットワーク(たとえば、ローカルエリアネットワーク(LAN)、無線ローカルエリアネットワーク(WLAN)、パブリックスイッチド電話ネットワーク(PTSN)、および/または電気通信、モバイル、およびセルラ電話ネットワークを含む、様々な他のワイヤードまたはワイヤレスネットワーク)に結合され得、お互いとの連携で本開示を実施するための命令シーケンスを実行し得る。
[0072]例において、LQタイルまたはHQタイルを合成するための命令は、システムメモリ110のコンピュータ可読媒体中に記憶され得る。プロセッサは、HQタイルと対応するLQタイルとの差に基づいて、テキスチャDLOWを計算するための命令を実行し、テキスチャDLOWを、LQタイルのアルファチャンネル中に記憶し得る。プロセッサはまた、アルファチャンネルの属性が、しきい値を満たすとき、LQタイルを、ディスプレイデバイス118上に合成するための命令を実行し得る。プロセッサはまた、アルファチャンネルの属性が、しきい値を満たさないとき、HQタイルを、ディスプレイデバイス118上に合成するための命令を実行し得る。
[0073]適用可能な場合、本開示によって提供される様々な実施形態は、ハードウェア、ソフトウェア、ファームウェア、またはそれらの組み合わせを使用してインプリメントされ得る。また、適用可能な場合、本明細書に記載された様々なハードウェアコンポーネント、ソフトウェアコンポーネント、および/またはファームウェアコンポーネントは、本開示の主旨から逸脱することなく、ソフトウェア、ファームウェア、ハードウェアおよび/または全てを含む合成コンポーネントに組み合わせられ得る。適用可能な場合、本明細書に記載された様々なハードウェアコンポーネント、ソフトウェアコンポーネント、および/またはファームウェアコンポーネントは、本開示の主旨から逸脱することなく、ソフトウェア、ファームウェア、ハードウェア、または全てを含むサブコンポーネントに分離され得る。加えて、適用可能な場合、ソフトウェアコンポーネントは、ハードウェアコンポーネントとしてインプリメントされ得、逆の場合も同様であり得ることが企画される。適用可能である場合、本明細書で説明された様々なステップまたは処置の順番は、本明細書で説明された特徴を提供するために、変更され、合成ステップまたは処置に組み合わされ、および/またはサブステップまたはサブ処置に分離され得る。
[0074]本開示の実施形態が説明されたが、これらの実施形態は、開示を例証するが、開示を制限はしない。本開示の実施形態は、これらの実施形態に限定されるべきではなく、本開示の主旨に従って、当業者により、数々の修正および変形がなされ得、以下、特許請求の範囲で請求されるように、本開示の主旨および範囲内に含まれ得ることがまた、理解されるべきである。

Claims (20)

  1. ディスプレイデバイス上にデータを表示する方法であって、
    高品質(HQ)タイルと対応する低品質(LQ)タイルとの差に基づいて、テキスチャを計算することと、
    前記テキスチャを、前記LQタイルのアルファチャンネル中に記憶することと、
    前記アルファチャンネルの属性が、しきい値を満たすとき、前記LQタイルを、前記ディスプレイデバイス上に合成することとを備える、方法。
  2. 前記アルファチャンネルの前記属性が、前記しきい値を満たさないとき、前記HQタイルを、前記ディスプレイデバイス上に合成することをさらに含む、請求項1に記載の方法。
  3. 前記LQタイルは、前記HQタイルの、より低解像度バージョンである、請求項1に記載の方法。
  4. 前記テキスチャを計算することは、
    前記LQタイル中の各LQピクセルについて、前記HQタイル中の対応するピクセル領域を識別することと、
    前記ピクセル領域の属性を計算することと、
    前記ピクセル領域の属性と前記LQピクセルとの差を計算することと、ここにおいて、前記テキスチャを前記記憶することは、前記ピクセル領域の前記属性と前記LQピクセルとの差を、前記属性の値として、記憶することを含む、を含む、請求項1に記載の方法。
  5. 前記ピクセル領域の属性を前記計算することは、前記ピクセル領域の平均を計算することを含む、請求項4に記載の方法。
  6. 前記LQタイル中の各LQピクセルについて、前記HQタイル中の対応するピクセル領域を識別することと、
    前記LQピクセルと前記ピクセル領域中の各ピクセルとの差を計算することと、
    前記LQピクセルと前記ピクセル領域中の各ピクセルとの、1以上の差の平均を計算することと、ここにおいて、前記テキスチャを前記記憶することは、前記LQピクセルと前記ピクセル領域中の各ピクセルとの差を、前記属性の値として、記憶することを含む、をさらに含む、請求項1に記載の方法。
  7. 前記LQタイル中の各LQピクセルについて、前記HQタイル中の対応するピクセル領域を識別することと、
    前記LQピクセルと前記ピクセル領域との差に基づいて、第2のテキスチャを計算することと、前記第2のテキスチャ中の各ピクセルは、前記HQタイルと前記LQタイルとのピクセル強度の差を表わす単一スカラー値を有し、
    前記第2のテキスチャを、前記LQタイルの解像度にダウンサンプリングすることと、ここにおいて、前記計算された第1のテキスチャは、前記ダウンサンプリングされた第2のテキスチャであり、をさらに含む、請求項1に記載の方法。
  8. 前記第2のテキスチャは、前記HQタイルと同一の解像度を有する、請求項7に記載の方法。
  9. 前記しきい値は、構成可能である、請求項1に記載の方法。
  10. ディスプレイデバイス上にデータを表示するためのシステムであって、
    ディスプレイデバイスと、
    メモリと、
    前記メモリおよびディスプレイデバイスに結合された1以上のプロセッサと、ここにおいて、前記1以上のプロセッサは、
    高品質(HQ)タイルと対応する低品質(LQ)タイルとの差に基づいて、テキスチャを計算し、
    前記テキスチャを、前記LQタイルのアルファチャンネル中に記憶し、
    前記アルファチャンネルの属性が、しきい値を満たすとき、前記LQタイルを、前記ディスプレイデバイス上に合成するように構成され、を備える、システム。
  11. 前記1以上のプロセッサは、
    前記アルファチャンネルの前記属性が、前記しきい値を満たさないとき、前記HQタイルを、前記ディスプレイデバイス上に合成するように構成される、請求項10に記載のシステム。
  12. 前記LQタイルは、前記HQタイルの、より低解像度バージョンである、請求項10に記載のシステム。
  13. 前記1以上のプロセッサは、
    前記LQタイル中の各LQピクセルについて、前記HQタイル中の対応するピクセル領域を識別し、
    前記ピクセル領域の属性を計算し、
    前記ピクセル領域の前記属性と前記LQピクセルとの差を計算するように構成され、ここにおいて、前記ピクセル領域の前記属性と前記LQピクセルとの差は、前記属性の値である、請求項10に記載のシステム。
  14. 前記1以上のプロセッサは、
    前記ピクセル領域の平均を計算するように構成され、前記平均は、前記ピクセル領域の前記属性である、請求項13に記載のシステム。
  15. 前記1以上のプロセッサは、
    前記LQタイル中の各LQピクセルについて、前記HQタイル中の対応するピクセル領域を識別し、
    前記LQピクセルと前記ピクセル領域中の各ピクセルとの差を計算し、
    前記LQピクセルと前記ピクセル領域中の各ピクセルとの、1以上の差の平均を計算するように構成され、ここにおいて、前記LQピクセルと前記ピクセル領域中の各ピクセルとの差は、前記属性の値である、請求項10に記載のシステム。
  16. 前記1以上のプロセッサは、
    前記LQタイル中の各LQピクセルについて、前記HQタイル中の対応するピクセル領域を識別し、
    前記LQピクセルと前記ピクセル領域との差に基づいて、第2のテキスチャを計算し、
    前記第2のテキスチャを、前記LQタイルの解像度にダウンサンプリングするように構成され、ここにおいて、前記計算された第1のテキスチャは、前記ダウンサンプリングされた第2のテキスチャである、請求項10に記載のシステム。
  17. 前記第2のテキスチャ中の各ピクセルは、前記HQタイルと前記LQタイルとのピクセル強度の差を表わす単一スカラー値を有し、ここにおいて、前記第2のテキスチャは、前記HQタイルと同一の解像度を有する、請求項16に記載のシステム。
  18. 前記しきい値は、構成可能である、請求項10に記載のシステム。
  19. 高品質(HQ)タイルと対応する低品質(LQ)タイルとの差に基づいて、テキスチャを計算することと、
    前記テキスチャを、前記LQタイルのアルファチャンネル中に記憶することと、
    前記アルファチャンネルの属性が、しきい値を満たすとき、前記LQタイルを、前記ディスプレイデバイス上に合成することとを備える動作を実行するための、コンピュータ実行可能な命令を記憶する、コンピュータ可読媒体。
  20. 前記動作を実行するための、前記コンピュータ実行可能な命令は、
    前記アルファチャンネルの前記属性が、前記しきい値を満たさないとき、前記HQタイルを、前記ディスプレイデバイス上に合成することをさらに含む、請求項19に記載のコンピュータ可読媒体。
JP2017543907A 2015-02-20 2016-02-08 低品質タイルを使用してメモリ帯域幅を減らすためのシステムおよび方法 Pending JP2018512644A (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US14/628,097 2015-02-20
US14/628,097 US10410398B2 (en) 2015-02-20 2015-02-20 Systems and methods for reducing memory bandwidth using low quality tiles
PCT/US2016/017027 WO2016133730A1 (en) 2015-02-20 2016-02-08 Systems and methods for reducing memory bandwidth using low quality tiles

Publications (1)

Publication Number Publication Date
JP2018512644A true JP2018512644A (ja) 2018-05-17

Family

ID=55543036

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017543907A Pending JP2018512644A (ja) 2015-02-20 2016-02-08 低品質タイルを使用してメモリ帯域幅を減らすためのシステムおよび方法

Country Status (5)

Country Link
US (1) US10410398B2 (ja)
EP (1) EP3259753A1 (ja)
JP (1) JP2018512644A (ja)
CN (1) CN107251133A (ja)
WO (1) WO2016133730A1 (ja)

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20180174359A1 (en) * 2016-12-15 2018-06-21 Mediatek Inc. Frame difference generation hardware in a graphics system
US10748244B2 (en) * 2017-06-09 2020-08-18 Samsung Electronics Co., Ltd. Systems and methods for stereo content detection
US10467724B1 (en) * 2018-02-14 2019-11-05 Apple Inc. Fast determination of workgroup batches from multi-dimensional kernels
GB2570743B (en) * 2018-06-29 2021-06-23 Imagination Tech Ltd Tile assignment to processing cores within a graphics processing unit
US11200636B2 (en) 2018-11-30 2021-12-14 Mediatek Inc. Method and apparatus for generating a series of frames with aid of synthesizer to offload graphics processing unit rendering in electronic device
US11145105B2 (en) * 2019-03-15 2021-10-12 Intel Corporation Multi-tile graphics processor rendering
US11030783B1 (en) 2020-01-21 2021-06-08 Arm Limited Hidden surface removal in graphics processing systems
US11049216B1 (en) * 2020-01-21 2021-06-29 Arm Limited Graphics processing systems
WO2023285731A1 (en) * 2021-07-13 2023-01-19 Aiforia Technologies Oyj Processing pathology images
US11373306B1 (en) * 2021-07-13 2022-06-28 Aiforia Technologies Oyj Processing pathology images
CN116205633A (zh) * 2023-03-10 2023-06-02 宁波梅港码头有限公司 港口车辆维保管理方法及系统

Family Cites Families (320)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5696531A (en) * 1991-02-05 1997-12-09 Minolta Camera Kabushiki Kaisha Image display apparatus capable of combining image displayed with high resolution and image displayed with low resolution
JP3082169B2 (ja) * 1991-11-20 2000-08-28 インターナショナル・ビジネス・マシーンズ・コーポレ−ション データ処理システム及びその実行方法
WO1994024610A1 (en) * 1993-04-13 1994-10-27 Astarix, Inc. High resolution mask programmable via selected by low resolution photomasking
US6166712A (en) * 1993-07-01 2000-12-26 Motorola, Inc. High-persistence display circuit and method to therefor
JP3890099B2 (ja) * 1996-09-30 2007-03-07 キヤノン株式会社 パターン認識装置及びその方法、及びそのプログラムを記憶した記憶媒体
US6252989B1 (en) * 1997-01-07 2001-06-26 Board Of The Regents, The University Of Texas System Foveated image coding system and method for image bandwidth reduction
US6167442A (en) * 1997-02-18 2000-12-26 Truespectra Inc. Method and system for accessing and of rendering an image for transmission over a network
US6607809B2 (en) * 1997-02-21 2003-08-19 Chris Baker-Salmon Glass tile decorated on rear viewed from front
JPH114367A (ja) * 1997-04-16 1999-01-06 Seiko Epson Corp 高速画像選択方法および高速画像選択機能付デジタルカメラ
US6278447B1 (en) * 1997-06-10 2001-08-21 Flashpoint Technology, Inc. Method and system for accelerating a user interface of an image capture unit during play mode
US5933137A (en) * 1997-06-10 1999-08-03 Flashpoint Technology, Inc. Method and system for acclerating a user interface of an image capture unit during play mode
JPH11195132A (ja) * 1997-10-31 1999-07-21 Hewlett Packard Co <Hp> テクスチャマッピング用バッファ、3次元グラフィクス処理装置、3次元グラフィクス処理システム、3次元グラフィクス処理方法および処理プログラムが記憶された記憶媒体
US6522336B1 (en) * 1997-10-31 2003-02-18 Hewlett-Packard Company Three-dimensional graphics rendering apparatus and method
CA2233831A1 (en) * 1998-03-31 1999-09-30 Tom Riley Digital-sigma fractional-n synthesizer
US6191793B1 (en) * 1998-04-01 2001-02-20 Real 3D, Inc. Method and apparatus for texture level of detail dithering
US8165155B2 (en) * 2004-07-01 2012-04-24 Broadcom Corporation Method and system for a thin client and blade architecture
US6591020B1 (en) * 1998-12-23 2003-07-08 Xerox Corporation Antialiazed high-resolution frame buffer architecture
US6847388B2 (en) * 1999-05-13 2005-01-25 Flashpoint Technology, Inc. Method and system for accelerating a user interface of an image capture unit during play mode
US6728217B1 (en) * 1999-08-17 2004-04-27 Ericsson Inc. System and method for modifying the data rate for data calls in a cellular network
US6515675B1 (en) * 1999-11-22 2003-02-04 Adobe Systems Incorporated Processing opaque pieces of illustration artwork
JP3718472B2 (ja) * 1999-12-06 2005-11-24 富士通株式会社 画像表示方法および装置
US6396503B1 (en) * 1999-12-31 2002-05-28 Hewlett-Packard Company Dynamic texture loading based on texture tile visibility
US7210099B2 (en) * 2000-06-12 2007-04-24 Softview Llc Resolution independent vector display of internet content
US6704024B2 (en) * 2000-08-07 2004-03-09 Zframe, Inc. Visual content browsing using rasterized representations
EP1393190A4 (en) * 2001-05-02 2007-07-18 Bitstream Inc METHOD AND SYSTEMS FOR DISPLAYING MEDIA SCALED AND / OR ORIENTED
AUPR678401A0 (en) * 2001-08-02 2001-08-23 Singfield, Christian Network image server
US20030030646A1 (en) * 2001-08-10 2003-02-13 Yeh Kwo-Woei Trilinear texture filtering method with proper texel selection
US6904176B1 (en) * 2001-09-19 2005-06-07 Lightsurf Technologies, Inc. System and method for tiled multiresolution encoding/decoding and communication with lossless selective regions of interest via data reuse
JP3808788B2 (ja) * 2002-03-12 2006-08-16 株式会社東芝 液晶表示方法
US7079285B2 (en) * 2002-04-10 2006-07-18 Texas Instruments Incorporated Efficient rasterizing sub-system for printers
US6658080B1 (en) * 2002-08-05 2003-12-02 Voxar Limited Displaying image data using automatic presets
US20050213125A1 (en) 2002-08-19 2005-09-29 Paul Reed Smith Guitars, Limited Partnership Method of color accentuation with compensation and adjustment
JP4005904B2 (ja) * 2002-11-27 2007-11-14 松下電器産業株式会社 表示装置、及び表示方法
US9061207B2 (en) * 2002-12-10 2015-06-23 Sony Computer Entertainment America Llc Temporary decoder apparatus and method
US8769395B2 (en) * 2002-12-13 2014-07-01 Ricoh Co., Ltd. Layout objects as image layers
US8036475B2 (en) * 2002-12-13 2011-10-11 Ricoh Co., Ltd. Compression for segmented images and other types of sideband information
US7477793B1 (en) * 2002-12-13 2009-01-13 Ricoh Co., Ltd. JPEG 2000-like access using the JPM compound document file format
US8989516B2 (en) * 2007-09-18 2015-03-24 Fotonation Limited Image processing method and apparatus
EP1695555A1 (en) * 2003-12-08 2006-08-30 Koninklijke Philips Electronics N.V. Spatial scalable compression scheme with a dead zone
SE0401850D0 (sv) * 2003-12-19 2004-07-08 Ericsson Telefon Ab L M Image processing
US9218689B1 (en) * 2003-12-31 2015-12-22 Zilabs Inc., Ltd. Multi-sample antialiasing optimization via edge tracking
US8237712B2 (en) * 2004-03-18 2012-08-07 Apple Inc. Manipulation of image content using various image representations
US7441207B2 (en) * 2004-03-18 2008-10-21 Microsoft Corporation Method and system for improved viewing and navigation of content
CA2820249C (en) * 2004-03-23 2016-07-19 Google Inc. A digital mapping system
JP4635629B2 (ja) * 2004-03-30 2011-02-23 日本ビクター株式会社 サンプリングレート変換装置及び画像信号処理方法
US20060103663A1 (en) * 2004-06-23 2006-05-18 Collodi David J Method and system for real-time anti-aliasing using fixed orientation multipixels
JP5036317B2 (ja) * 2004-10-28 2012-09-26 パナソニック株式会社 スケーラブル符号化装置、スケーラブル復号化装置、およびこれらの方法
US8878851B2 (en) * 2004-11-12 2014-11-04 Synchronica Plc Method and system for streaming documents, e-mail attachments and maps to wireless devices
WO2006055751A2 (en) * 2004-11-16 2006-05-26 Compography, Inc. Display/layout methods and apparatuses including content items and display containers
US20060127880A1 (en) * 2004-12-15 2006-06-15 Walter Harris Computerized image capture of structures of interest within a tissue sample
US20060291750A1 (en) * 2004-12-16 2006-12-28 Peyman Milanfar Dynamic reconstruction of high resolution video from low-resolution color-filtered video (video-to-video super-resolution)
JP4494196B2 (ja) * 2004-12-27 2010-06-30 京セラ株式会社 画像表示装置
JP4737991B2 (ja) * 2005-01-04 2011-08-03 株式会社東芝 再生装置
JP4417854B2 (ja) * 2005-01-04 2010-02-17 株式会社東芝 再生装置
US7801220B2 (en) * 2005-01-07 2010-09-21 Microsoft Corporation In-band wavelet video coding with spatial scalability
JP4777675B2 (ja) * 2005-03-17 2011-09-21 株式会社リコー 画像処理装置、画像表示装置、画像処理方法、その方法をコンピュータに実行させるプログラム、および記録媒体
US7773831B2 (en) * 2005-05-10 2010-08-10 Agfa-Gevaert N.V. Method for visual inspection of size-reduced digital image
US8274715B2 (en) * 2005-07-28 2012-09-25 Omnivision Technologies, Inc. Processing color and panchromatic pixels
JP2007041196A (ja) * 2005-08-02 2007-02-15 Sony Corp 画像処理装置、および画像処理方法、並びにコンピュータ・プログラム
KR101364745B1 (ko) * 2005-12-29 2014-02-21 오즈미즈 피티와이. 엘티디. 데이터를 이동 단말기에 표시하기 위한 방법 및 시스템
US7956930B2 (en) * 2006-01-06 2011-06-07 Microsoft Corporation Resampling and picture resizing operations for multi-resolution video coding and decoding
EP2320653B1 (en) * 2006-01-23 2015-09-02 Max-Planck-Gesellschaft zur Förderung der Wissenschaften e.V. High dynamic range codecs
WO2007116543A1 (ja) * 2006-03-31 2007-10-18 Nikon Corporation 画像処理方法
US7965297B2 (en) * 2006-04-17 2011-06-21 Microsoft Corporation Perfect hashing of variably-sized data
US7965902B1 (en) * 2006-05-19 2011-06-21 Google Inc. Large-scale image processing using mass parallelization techniques
US7916362B2 (en) * 2006-05-22 2011-03-29 Eastman Kodak Company Image sensor with improved light sensitivity
US8701028B2 (en) * 2006-06-14 2014-04-15 Google Inc. Graphical user interface and related method
JP4241774B2 (ja) * 2006-07-20 2009-03-18 カシオ計算機株式会社 画像処理装置、画像処理方法及びプログラム
US20080024389A1 (en) * 2006-07-27 2008-01-31 O'brien-Strain Eamonn Generation, transmission, and display of sub-frames
US20080024683A1 (en) * 2006-07-31 2008-01-31 Niranjan Damera-Venkata Overlapped multi-projector system with dithering
US20080043209A1 (en) * 2006-08-18 2008-02-21 Simon Widdowson Image display system with channel selection device
JP4208909B2 (ja) * 2006-08-24 2009-01-14 株式会社東芝 画像処理装置と撮影装置
DE102006043894B3 (de) * 2006-09-19 2007-10-04 Siemens Ag Detailtiefenstufen-Einstellung mehrdimensionaler Bilddaten mit einem Client/Server-basierten Bildrenderingsystem
JP2008092297A (ja) * 2006-10-02 2008-04-17 Olympus Corp 画像処理装置、画像処理プログラム、画像製造方法、及び記録媒体
CN101485193B (zh) * 2006-10-19 2012-04-18 松下电器产业株式会社 图像生成装置以及图像生成方法
US20080095363A1 (en) * 2006-10-23 2008-04-24 Dicarto Jeffrey M System and method for causing distortion in captured images
CN101485192B (zh) * 2006-10-30 2011-05-18 松下电器产业株式会社 图像生成装置以及图像生成方法
US8335403B2 (en) * 2006-11-27 2012-12-18 Nec Laboratories America, Inc. Soft edge smoothness prior and application on alpha channel super resolution
US20080123997A1 (en) * 2006-11-29 2008-05-29 Adams James E Providing a desired resolution color image
JP4646146B2 (ja) * 2006-11-30 2011-03-09 ソニー株式会社 画像処理装置、画像処理方法、およびプログラム
CN101601299A (zh) * 2006-12-14 2009-12-09 汤姆逊许可公司 用位深度可分级性的增强层残差预测对视频数据进行编码和/或解码的方法和设备
EP1933564A1 (en) * 2006-12-14 2008-06-18 Thomson Licensing Method and apparatus for encoding and/or decoding video data using adaptive prediction order for spatial and bit depth prediction
AU2006252191B2 (en) * 2006-12-21 2009-03-26 Canon Kabushiki Kaisha Scrolling Interface
AU2006252196B2 (en) * 2006-12-21 2009-05-14 Canon Kabushiki Kaisha Scrolling Interface
AU2006252194B2 (en) * 2006-12-21 2010-02-11 Canon Kabushiki Kaisha Scrolling Interface
US8149283B2 (en) * 2007-01-23 2012-04-03 Nikon Corporation Image processing device, electronic camera, image processing method, and image processing program
WO2008092131A2 (en) * 2007-01-25 2008-07-31 Skyfire Labs, Inc. Mobile device user interface for remote interaction
KR100894146B1 (ko) * 2007-02-03 2009-04-22 엘지전자 주식회사 이동통신 단말기 및 그 동작 제어방법
US8515194B2 (en) * 2007-02-21 2013-08-20 Microsoft Corporation Signaling and uses of windowing information for images
DE102007021035A1 (de) * 2007-05-04 2008-11-13 Siemens Ag Bildverarbeitungs-, Bildvisualisierungs- und Bildarchivierungssystem zur kontrasterhaltenden Fusionierung und Visualisierung koregistrierter Bilddaten
JP5615480B2 (ja) * 2007-05-10 2014-10-29 ルネサスエレクトロニクス株式会社 表示装置及び表示パネルドライバ
ATE494587T1 (de) * 2007-05-17 2011-01-15 Dolby Lab Licensing Corp Ableitung von gegen bildbearbeitung und rahmenratenumwandlung unempfindlichen videosignaturen
EP2143279B1 (en) * 2007-06-29 2010-10-06 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Scalable video coding supporting pixel value refinement scalability
JP4914303B2 (ja) * 2007-07-13 2012-04-11 シリコン ヒフェ ベー.フェー. 画像処理装置及び撮像装置、画像処理方法及び撮像方法、画像処理プログラム
US9013499B2 (en) * 2007-07-19 2015-04-21 Disney Enterprises, Inc. Methods and apparatus for multiple texture map storage and filtering including irregular texture maps
JP2009037460A (ja) * 2007-08-02 2009-02-19 Sanyo Electric Co Ltd 画像処理方法、画像処理装置、及びこの画像処理装置を備えた電子機器
US9569088B2 (en) * 2007-09-04 2017-02-14 Lg Electronics Inc. Scrolling method of mobile terminal
JP4874904B2 (ja) * 2007-09-13 2012-02-15 株式会社東芝 画像処理装置及びその方法
WO2009046438A1 (en) * 2007-10-05 2009-04-09 Dolby Laboratories Licensing Corp. Media fingerprints that reliably correspond to media content
KR20150126728A (ko) * 2007-10-19 2015-11-12 톰슨 라이센싱 조합된 공간 및 비트 심도 확장성
US8009329B2 (en) * 2007-11-09 2011-08-30 Xerox Corporation Fluorescence-based correlation mark for enhanced security in printed documents
US8645458B2 (en) * 2007-11-20 2014-02-04 General Electric Company Systems and methods for delivering media content and improving diagnostic reading efficiency
US20090141809A1 (en) * 2007-12-04 2009-06-04 Sony Corporation And Sony Electronics Inc. Extension to the AVC standard to support the encoding and storage of high resolution digital still pictures in parallel with video
US9123114B2 (en) * 2007-12-06 2015-09-01 The United States Of America As Represented By The Secretary Of The Army System and processor implemented method for improved image quality and enhancement based on quantum properties
DE102007058957A1 (de) * 2007-12-07 2009-06-10 Heidelberger Druckmaschinen Ag Verfahren zum Trocknen von bedrucktem Material
US7652806B2 (en) * 2007-12-20 2010-01-26 Xerox Corporation Optimal node placement for multi-dimensional profile luts for arbitrary media and halftones using parameterized minimization
US20090167870A1 (en) * 2008-01-02 2009-07-02 Serge Caleca Method for Creating Custom Digital Images Utilizing Background Replacement Technology Over a Network
US7920297B2 (en) * 2008-02-18 2011-04-05 Vistaprint Technologies Limited System and method for printing using variable-density white ink under-printed layer
US8260006B1 (en) * 2008-03-14 2012-09-04 Google Inc. System and method of aligning images
WO2009129418A1 (en) * 2008-04-16 2009-10-22 Techbridge Inc. System and method for separated image compression
US20110019088A1 (en) * 2008-04-17 2011-01-27 Daisuke Kase Digital television signal processor and method of displaying subtitle
KR101019039B1 (ko) * 2008-05-22 2011-03-04 삼성전자주식회사 터치 스크린을 구비한 단말기 및 데이터 검색 방법.
JP2009301206A (ja) * 2008-06-11 2009-12-24 Fuji Xerox Co Ltd 情報表示装置及びプログラム
US8520979B2 (en) 2008-08-19 2013-08-27 Digimarc Corporation Methods and systems for content processing
US9571856B2 (en) * 2008-08-25 2017-02-14 Microsoft Technology Licensing, Llc Conversion operations in scalable video encoding and decoding
US8081821B1 (en) * 2008-09-16 2011-12-20 Adobe Systems Incorporated Chroma keying
WO2010038337A1 (ja) * 2008-09-30 2010-04-08 株式会社ソニー・コンピュータエンタテインメント 画像処理装置および画像処理方法
JP2010140460A (ja) * 2008-11-13 2010-06-24 Sony Corp 画像処理装置および方法、並びにプログラム
US8497867B2 (en) * 2008-11-20 2013-07-30 Canon Kabushiki Kaisha Information processing system, information processing apparatus, display processing method therefor, and computer-readable storage medium
TWI468020B (zh) * 2009-02-19 2015-01-01 Sony Corp Image processing apparatus and method
US8385669B2 (en) * 2009-03-04 2013-02-26 Microsoft Corporation Scalable mutable tiled multi-resolution texture atlases
JP4748234B2 (ja) * 2009-03-05 2011-08-17 富士ゼロックス株式会社 画像処理装置および画像形成装置
US8648858B1 (en) * 2009-03-25 2014-02-11 Skyfire Labs, Inc. Hybrid text and image based encoding
JP5511468B2 (ja) * 2009-04-13 2014-06-04 キヤノン株式会社 画像処理装置およびその制御方法、並びにプログラム
US8520736B2 (en) * 2009-04-14 2013-08-27 Fastvdo, Llc Real-time superresolution and video transmission
US8396325B1 (en) * 2009-04-27 2013-03-12 Google Inc. Image enhancement through discrete patch optimization
US9269184B2 (en) * 2009-05-21 2016-02-23 Sony Computer Entertainment America Llc Method and apparatus for rendering image based projected shadows with multiple depth aware blurs
CN102099834A (zh) * 2009-05-21 2011-06-15 松下电器产业株式会社 图形描绘装置、图形描绘方法、图形描绘程序、记录了图形描绘程序的记录介质、图形描绘用集成电路
JP5455456B2 (ja) * 2009-06-09 2014-03-26 キヤノン株式会社 情報処理装置、情報処理方法、およびプログラム
US20100331041A1 (en) * 2009-06-26 2010-12-30 Fuji Xerox Co., Ltd. System and method for language-independent manipulations of digital copies of documents through a camera phone
KR101451999B1 (ko) * 2009-07-28 2014-10-21 삼성전자주식회사 데이터 스크롤 방법 및 장치
JP5315162B2 (ja) * 2009-08-05 2013-10-16 株式会社日立製作所 映像処理装置及び映像処理方法
CN101694770B (zh) * 2009-10-19 2011-06-15 华为终端有限公司 控制屏幕显示的方法、装置及手持设备
US9035973B2 (en) * 2009-10-23 2015-05-19 Kyocera Mita Corporation Display device and display control method
RU2519058C2 (ru) * 2009-10-26 2014-06-10 Сони Компьютер Энтертэйнмент Инк. Устройство формирования файлов изображения, устройство обработки изображения, способ формирования файлов изображения, способ обработки изображения и структура данных файлов изображения
US8706802B1 (en) * 2009-11-24 2014-04-22 Google Inc. Latency-guided web content retrieval, serving, and rendering
US8339470B2 (en) * 2009-11-30 2012-12-25 Indian Institute Of Technology Madras Method and system for generating a high resolution image
US20110141224A1 (en) * 2009-12-11 2011-06-16 Fotonation Ireland Limited Panorama Imaging Using Lo-Res Images
WO2011077623A1 (ja) * 2009-12-24 2011-06-30 株式会社ソニー・コンピュータエンタテインメント 画像処理装置、画像データ生成装置、画像処理方法、画像データ生成方法、および画像ファイルのデータ構造
US8498307B2 (en) * 2010-01-04 2013-07-30 Wsdb Llc Channel allocation in protected service areas
WO2011099138A1 (ja) * 2010-02-12 2011-08-18 キヤノン株式会社 画像処理装置および画像処理方法
US20110210960A1 (en) * 2010-02-26 2011-09-01 Google Inc. Hierarchical blurring of texture maps
JP4848462B2 (ja) * 2010-03-04 2011-12-28 株式会社モルフォ 圧縮画像の部分伸長方法および画像処理装置
CN102222352B (zh) * 2010-04-16 2014-07-23 株式会社日立医疗器械 图像处理方法和图像处理装置
JP2011237998A (ja) * 2010-05-10 2011-11-24 Sony Corp 画像処理装置、および画像処理方法、並びにプログラム
US8699821B2 (en) * 2010-07-05 2014-04-15 Apple Inc. Aligning images
US8296359B2 (en) * 2010-07-12 2012-10-23 Opus Medicus, Inc. Systems and methods for networked, in-context, high resolution image viewing
JP5419822B2 (ja) * 2010-07-23 2014-02-19 株式会社ソニー・コンピュータエンタテインメント 画像処理装置、画像表示装置、画像処理方法、および画像ファイルのデータ構造
US8766984B2 (en) * 2010-08-20 2014-07-01 Qualcomm Incorporated Graphics rendering methods for satisfying minimum frame rate requirements
RU2445677C1 (ru) * 2010-09-13 2012-03-20 Корпорация "САМСУНГ ЭЛЕКТРОНИКС Ко., Лтд." Способ черновой печати посредством преобразования растровых изображений в эскизы (варианты)
JP2012084125A (ja) * 2010-09-14 2012-04-26 Sanyo Electric Co Ltd 画像表示装置
US20120069020A1 (en) * 2010-09-21 2012-03-22 Siemens Medical Solutions Usa, Inc. Lighting Control for Occlusion-based Volume Illumination of Medical Data
US8466976B2 (en) * 2010-11-03 2013-06-18 Eastman Kodak Company Digital camera providing high dynamic range images
US8462221B2 (en) * 2010-11-03 2013-06-11 Eastman Kodak Company Method for producing high dynamic range images
JP5789965B2 (ja) * 2010-12-01 2015-10-07 富士通株式会社 画像送信方法、画像送信装置および画像送信プログラム
US8847973B2 (en) * 2010-12-15 2014-09-30 Microsoft Corporation Automatic adjustment of computer interface colors using image processing
US9024951B2 (en) * 2011-02-16 2015-05-05 Apple Inc. Devices and methods for obtaining high-local-contrast image data
US8768069B2 (en) * 2011-02-24 2014-07-01 Sony Corporation Image enhancement apparatus and method
US9153010B2 (en) * 2011-03-28 2015-10-06 Panasonic Intellectual Property Corporation Of America Image processing device and image processing method generating a high-resolution image from a low-resolution image
US9288500B2 (en) * 2011-05-12 2016-03-15 Texas Instruments Incorporated Luma-based chroma intra-prediction for video coding
US20120287148A1 (en) * 2011-05-13 2012-11-15 Candice Hellen Brown Elliott Method and apparatus for improved subpixel rendering
US9417479B2 (en) * 2011-05-13 2016-08-16 Samsung Display Co., Ltd. Method for reducing simultaneous contrast error
US8884994B2 (en) * 2011-05-13 2014-11-11 Samsung Display Co., Ltd. Method and apparatus for blending display modes
US8872861B2 (en) * 2011-05-13 2014-10-28 Samsung Display Co., Ltd. Apparatus for selecting backlight color values
JP2012244395A (ja) * 2011-05-19 2012-12-10 Sony Corp 学習装置および方法、画像処理装置および方法、プログラム、並びに記録媒体
US8594464B2 (en) * 2011-05-26 2013-11-26 Microsoft Corporation Adaptive super resolution for video enhancement
KR101756841B1 (ko) * 2011-06-07 2017-07-11 삼성전자주식회사 블록 기반 영상의 해상도 변환 방법 및 장치
US9047681B2 (en) * 2011-07-07 2015-06-02 Samsung Electronics Co., Ltd. Depth image conversion apparatus and method
JP2013021635A (ja) * 2011-07-14 2013-01-31 Sony Corp 画像処理装置、画像処理方法、プログラム、及び記録媒体
JP5173053B2 (ja) * 2011-07-19 2013-03-27 株式会社東芝 画像処理システム、装置、方法及び医用画像診断装置
US8891010B1 (en) * 2011-07-29 2014-11-18 Pixelworks, Inc. Encoding for super resolution playback
GB2493551A (en) * 2011-08-11 2013-02-13 Dexdyne Ltd Displaying plotted trend data at varying resolutions
US9710821B2 (en) * 2011-09-15 2017-07-18 Stephan HEATH Systems and methods for mobile and online payment systems for purchases related to mobile and online promotions or offers provided using impressions tracking and analysis, location information, 2D and 3D mapping, mobile mapping, social media, and user behavior and
US10127564B2 (en) * 2011-09-15 2018-11-13 Stephan HEATH System and method for using impressions tracking and analysis, location information, 2D and 3D mapping, mobile mapping, social media, and user behavior and information for generating mobile and internet posted promotions or offers for, and/or sales of, products and/or services
US9300980B2 (en) * 2011-11-10 2016-03-29 Luca Rossato Upsampling and downsampling of motion maps and other auxiliary maps in a tiered signal quality hierarchy
US9607420B2 (en) * 2011-11-14 2017-03-28 Microsoft Technology Licensing, Llc Animations for scroll and zoom
JP6019568B2 (ja) * 2011-11-28 2016-11-02 ソニー株式会社 画像処理装置および方法、記録媒体、並びに、プログラム
JP2015507241A (ja) * 2011-12-04 2015-03-05 デジタル メイクアップ リミテッドDigital Makeup Ltd デジタルメイクアップ
JP5963009B2 (ja) * 2011-12-08 2016-08-03 パナソニックIpマネジメント株式会社 デジタル標本作製装置、デジタル標本作製方法およびデジタル標本作製サーバ
US9230393B1 (en) * 2011-12-08 2016-01-05 Google Inc. Method and system for advancing through a sequence of items using a touch-sensitive component
JP5792607B2 (ja) * 2011-12-09 2015-10-14 株式会社ソニー・コンピュータエンタテインメント 画像処理装置および画像処理方法
CN103186909B (zh) * 2011-12-31 2015-06-17 北大方正集团有限公司 一种提高透明图像光栅化速度的方法及装置
DE102012200264B4 (de) * 2012-01-10 2024-02-01 Bayerische Motoren Werke Aktiengesellschaft Bildverarbeitungssystem fuer ein Fahrzeug
US9215266B2 (en) * 2012-01-26 2015-12-15 Zoom International S.R.O. System and method for zero-footprint screen capture
US9270916B2 (en) * 2012-02-09 2016-02-23 Screenovate Technologies Ltd. Method and system of improving quality of video beaming
US20150170386A1 (en) * 2012-02-10 2015-06-18 Google Inc. Managing updates to map tiles
US9123178B2 (en) * 2012-02-10 2015-09-01 Google Inc. Updating map tiles
US9202311B2 (en) * 2012-02-10 2015-12-01 Google Inc. Accessing map tiles
US8935606B2 (en) * 2012-02-29 2015-01-13 Ebay Inc. Systems and methods for providing a user interface with grid view
EP2823460B1 (en) * 2012-03-05 2018-05-23 Thomson Licensing DTV Method and apparatus for performing hierarchical super-resolution of an input image
JP2013201530A (ja) * 2012-03-23 2013-10-03 Canon Inc 撮像装置及びその制御方法
JP2013200640A (ja) * 2012-03-23 2013-10-03 Canon Inc 画像処理装置、画像処理システム、画像処理方法、およびプログラム
WO2013150838A1 (ja) * 2012-04-05 2013-10-10 ソニー株式会社 画像処理装置及び画像処理方法
US20150170616A1 (en) * 2012-04-27 2015-06-18 Google Inc. Local data quality heatmap
JP5979963B2 (ja) * 2012-05-07 2016-08-31 キヤノン株式会社 画像処理装置、画像処理方法、プログラム
JP5749401B2 (ja) * 2012-06-11 2015-07-15 富士フイルム株式会社 画像処理装置、撮像装置、コンピュータ、画像処理方法及びプログラム
US20140012831A1 (en) * 2012-07-07 2014-01-09 David Whitney Wallen Tile content-based image search
US20140072242A1 (en) * 2012-09-10 2014-03-13 Hao Wei Method for increasing image resolution
JP5620958B2 (ja) * 2012-09-24 2014-11-05 ヤフー株式会社 広告表示制御装置、端末装置、広告表示方法および広告表示プログラム
US9111168B2 (en) * 2012-10-04 2015-08-18 Xerox Corporation Method and system for resolution conversion of magnetic ink character recognition (MICR) content
CN104704839A (zh) * 2012-10-07 2015-06-10 努梅利有限公司 视频压缩方法
DE112013005138T5 (de) * 2012-10-24 2015-07-16 Mitsubishi Electric Corporation Bild-Rendering-Gerät, Bild-Rendering-Verfahren, und Navigationsgerät
US9497379B2 (en) * 2013-08-22 2016-11-15 California Institute Of Technology Variable-illumination fourier ptychographic imaging devices, systems, and methods
US9864184B2 (en) * 2012-10-30 2018-01-09 California Institute Of Technology Embedded pupil function recovery for fourier ptychographic imaging devices
US9892812B2 (en) * 2012-10-30 2018-02-13 California Institute Of Technology Fourier ptychographic x-ray imaging systems, devices, and methods
WO2014083857A1 (ja) * 2012-11-29 2014-06-05 日本電気株式会社 画像処理装置、及び、画像処理方法
KR101749925B1 (ko) * 2012-12-05 2017-06-23 한화테크윈 주식회사 영상 처리 방법 및 장치
US9247152B2 (en) * 2012-12-20 2016-01-26 Google Inc. Determining image alignment failure
US20140177706A1 (en) * 2012-12-21 2014-06-26 Samsung Electronics Co., Ltd Method and system for providing super-resolution of quantized images and video
US9367641B2 (en) * 2012-12-27 2016-06-14 Qualcomm Innovation Center, Inc. Predictive web page rendering using a scroll vector
US8976323B2 (en) * 2013-01-04 2015-03-10 Disney Enterprises, Inc. Switching dual layer display with independent layer content and a dynamic mask
WO2014120367A1 (en) * 2013-01-30 2014-08-07 Intel Corporation Content adaptive parametric transforms for coding for next generation video
US8983177B2 (en) * 2013-02-01 2015-03-17 Mitsubishi Electric Research Laboratories, Inc. Method for increasing resolutions of depth images
US9842571B2 (en) * 2013-02-22 2017-12-12 Samsung Electronics Co., Ltd. Context awareness-based screen scroll method, machine-readable storage medium and terminal therefor
US9589386B2 (en) * 2013-03-15 2017-03-07 Robert Bosch Gmbh System and method for display of a repeating texture stored in a texture atlas
EP2979242B1 (en) * 2013-03-27 2018-01-10 Thomson Licensing Method and apparatus for generating a super-resolved image from a single image
WO2014158050A1 (en) * 2013-03-28 2014-10-02 Huawei Technologies Co., Ltd. Method for determining predictor blocks for a spatially scalable video codec
JP5800849B2 (ja) * 2013-04-04 2015-10-28 キヤノン株式会社 情報処理装置、情報処理方法、プログラム
US9582847B2 (en) * 2013-04-22 2017-02-28 Intel Corporation Color buffer compression
EP2989607B1 (en) * 2013-04-25 2019-01-09 Thomson Licensing Method and device for performing super-resolution on an input image
US9692939B2 (en) * 2013-05-29 2017-06-27 Yeda Research And Development Co. Ltd. Device, system, and method of blind deblurring and blind super-resolution utilizing internal patch recurrence
US20150026566A1 (en) * 2013-07-16 2015-01-22 Qualcomm Incorporated Systems and methods to prioritize browser tile generation from lq tile content
US9286508B2 (en) * 2013-07-25 2016-03-15 Morphotrust Usa, Llc System and method for creating a virtual backdrop
US9286685B2 (en) * 2013-07-25 2016-03-15 Morphotrust Usa, Llc System and method for creating a virtual backdrop
FR3009029B1 (fr) * 2013-07-26 2018-03-23 Astrium Sas Tuyere d'ejection de gaz de combustion d'un moteur fusee pourvue d'un dispositif d'etancheite entre une partie fixe et une partie mobile de la tuyere
GB201313680D0 (en) * 2013-07-31 2014-01-08 Mbda Uk Ltd Image processing
GB201313681D0 (en) * 2013-07-31 2014-01-08 Mbda Uk Ltd Image processing
GB201313682D0 (en) * 2013-07-31 2013-12-18 Mbda Uk Ltd Method and apparatus for tracking an object
US10502694B2 (en) * 2013-08-06 2019-12-10 Kla-Tencor Corporation Methods and apparatus for patterned wafer characterization
WO2015028061A1 (en) * 2013-08-29 2015-03-05 Fast Forward Imaging Gmbh A method and an apparatus for obtaining an image file including an alpha channel with a photographic camera
KR20150026565A (ko) * 2013-09-03 2015-03-11 엘지전자 주식회사 디스플레이 장치 및 그것의 제어방법
CN103514580B (zh) * 2013-09-26 2016-06-08 香港应用科技研究院有限公司 用于获得视觉体验优化的超分辨率图像的方法和系统
US20150103094A1 (en) * 2013-10-11 2015-04-16 Qualcomm Mems Technologies, Inc. Region-dependent color mapping for reducing visible artifacts on halftoned displays
EP3022927A4 (en) * 2013-10-11 2016-05-25 Ericsson Telefon Ab L M METHOD AND ARRANGEMENT FOR TRANSCODING A VIDEO BIT TRAIN
JP6230366B2 (ja) * 2013-10-16 2017-11-15 オリンパス株式会社 画像出力装置および画像出力方法
CN103532554B (zh) * 2013-10-23 2016-04-27 中国电子科技集团公司第二十四研究所 电容阵列及其版图设计方法
US9208539B2 (en) * 2013-11-30 2015-12-08 Sharp Laboratories Of America, Inc. Image enhancement using semantic components
GB2534790B (en) * 2013-12-03 2020-06-03 Mitsubishi Electric Corp Image processing apparatus and image processing method
EP2887311B1 (en) * 2013-12-20 2016-09-14 Thomson Licensing Method and apparatus for performing depth estimation
SG11201605217VA (en) * 2013-12-26 2016-07-28 Univ Singapore Technology & Design A method and apparatus for reducing data bandwidth between a cloud server and a thin client
EP3100233B1 (en) * 2014-01-30 2018-05-02 Thomson Licensing Method and device for enhancing quality of an image
JP2015166846A (ja) * 2014-02-14 2015-09-24 株式会社リコー 画像形成に用いる露光量を決定する制御装置、および、これを用いた画像形成装置
KR102146560B1 (ko) * 2014-02-17 2020-08-20 삼성전자주식회사 영상 보정 방법 및 장치
US9710957B2 (en) * 2014-04-05 2017-07-18 Sony Interactive Entertainment America Llc Graphics processing enhancement by tracking object and/or primitive identifiers
CN104978970B (zh) * 2014-04-08 2019-02-12 华为技术有限公司 一种噪声信号的处理和生成方法、编解码器和编解码系统
JP5847228B2 (ja) * 2014-04-16 2016-01-20 オリンパス株式会社 画像処理装置、画像処理方法及び画像処理プログラム
US9584814B2 (en) * 2014-05-15 2017-02-28 Intel Corporation Content adaptive background foreground segmentation for video coding
JP2015232869A (ja) * 2014-05-16 2015-12-24 株式会社リコー 画像処理装置、画像処理方法及び画像処理プログラム
US9208403B1 (en) * 2014-06-16 2015-12-08 Qualcomm Incorporated Systems and methods for processing image data associated with line detection
CN105960657B (zh) * 2014-06-17 2019-08-30 北京旷视科技有限公司 使用卷积神经网络的面部超分辨率
JP6472336B2 (ja) * 2014-06-18 2019-02-20 キヤノン株式会社 画像処理装置、画像処理方法およびプログラム
US10031928B2 (en) * 2014-07-02 2018-07-24 BicDroid Inc. Display, visualization, and management of images based on content analytics
WO2016002068A1 (ja) * 2014-07-04 2016-01-07 三菱電機株式会社 画像拡大装置、画像拡大方法、及び監視カメラ、並びにプログラム及び記録媒体
KR20170007333A (ko) * 2014-07-11 2017-01-18 엘지전자 주식회사 방송 신호 송수신 방법 및 장치
WO2016014060A1 (en) * 2014-07-24 2016-01-28 Hewlett-Packard Development Company, L.P. Creating image data for a tile of an image
US10210642B2 (en) * 2014-07-28 2019-02-19 Hewlett-Packard Development Company, L.P. Representing an edit
US9665984B2 (en) * 2014-07-31 2017-05-30 Ulsee Inc. 2D image-based 3D glasses virtual try-on system
US9215468B1 (en) * 2014-08-07 2015-12-15 Faroudja Enterprises, Inc. Video bit-rate reduction system and method utilizing a reference images matrix
US9569862B2 (en) * 2014-08-15 2017-02-14 Qualcomm Incorporated Bandwidth reduction using texture lookup by adaptive shading
US9805248B2 (en) * 2014-08-29 2017-10-31 Definiens Ag Applying pixelwise descriptors to a target image that are generated by segmenting objects in other images
US9740957B2 (en) * 2014-08-29 2017-08-22 Definiens Ag Learning pixel visual context from object characteristics to generate rich semantic images
US9449395B2 (en) * 2014-09-15 2016-09-20 Winbond Electronics Corp. Methods and systems for image matting and foreground estimation based on hierarchical graphs
US9904665B2 (en) * 2014-10-15 2018-02-27 Qualcomm Innovation Center, Inc. Partial rasterization of web page tiles
US20160124696A1 (en) * 2014-11-03 2016-05-05 Qualcomm Innovation Center, Inc. Downsampled rendering of web page loads to save power
JP7345237B2 (ja) * 2014-11-05 2023-09-15 シエラ・ネバダ・コーポレイション 移動体用の改良型環境表示を生成するためのシステムおよび方法
JP6494249B2 (ja) * 2014-11-12 2019-04-03 キヤノン株式会社 画像形成装置、画像形成方法、プログラム
US9811940B2 (en) * 2014-11-19 2017-11-07 Qualcomm Innovation Center, Inc. Bandwidth reduction using vertex shader
CN104485077B (zh) * 2014-12-16 2017-04-26 深圳市华星光电技术有限公司 一种液晶显示面板及其驱动方法
US10777164B2 (en) * 2014-12-19 2020-09-15 Qualcomm Incorporated Power optimization by rendering low-resolution tiles during page load
US20160180762A1 (en) * 2014-12-22 2016-06-23 Elwha Llc Systems, methods, and devices for controlling screen refresh rates
GB2533624B (en) * 2014-12-23 2017-08-09 Canon Kk Methods, devices, and computer programs for improving coding of media presentation description data
WO2016113533A2 (en) * 2015-01-12 2016-07-21 Milan Momcilo Popovich Holographic waveguide light field displays
WO2016163603A1 (ko) * 2015-04-05 2016-10-13 엘지전자 주식회사 Xml 자막에 기반한 방송 서비스를 위한 방송 신호 송수신 방법 및 장치
US10419737B2 (en) * 2015-04-15 2019-09-17 Google Llc Data structures and delivery methods for expediting virtual reality playback
US9877031B2 (en) * 2015-04-29 2018-01-23 Pitney Bowes Inc. System and method for multi-resolution raster data processing
US10007970B2 (en) * 2015-05-15 2018-06-26 Samsung Electronics Co., Ltd. Image up-sampling with relative edge growth rate priors
US9977493B2 (en) * 2015-06-17 2018-05-22 Microsoft Technology Licensing, Llc Hybrid display system
US9640149B2 (en) * 2015-07-21 2017-05-02 Think Silicon Sa Methods for fixed rate block based compression of image data
US10249073B2 (en) * 2015-07-21 2019-04-02 Intel Corporation Distributed frame buffer and API for scalable parallel rendering
US9704270B1 (en) * 2015-07-30 2017-07-11 Teradici Corporation Method and apparatus for rasterizing and encoding vector graphics
US10451876B2 (en) * 2015-08-03 2019-10-22 Facebook Technologies, Llc Enhanced visual perception through distance-based ocular projection
US10140268B2 (en) * 2015-08-27 2018-11-27 Qualcomm Innovation Center, Inc. Efficient browser composition for tiled-rendering graphics processing units
WO2017060423A1 (en) * 2015-10-08 2017-04-13 Koninklijke Kpn N.V. Enhancing a region of interest in video frames of a video stream
KR102503210B1 (ko) * 2015-10-13 2023-02-23 삼성전자 주식회사 텍스처 필터링하는 방법 및 이를 위한 장치
US9905200B2 (en) * 2015-10-19 2018-02-27 Yahoo Holdings, Inc. Computerized system and method for automatically creating and applying a filter to alter the display of rendered media
US10416454B2 (en) * 2015-10-25 2019-09-17 Facebook Technologies, Llc Combination prism array for focusing light
JP6663201B2 (ja) * 2015-10-27 2020-03-11 キヤノン株式会社 画像符号化装置及びその制御方法、並びに、コンピュータプログラム及び記憶媒体
WO2017075768A1 (zh) * 2015-11-04 2017-05-11 北京大学深圳研究生院 一种基于字典匹配的图像超分辨率重建方法及装置
US9959672B2 (en) * 2015-11-23 2018-05-01 Adobe Systems Incorporated Color-based dynamic sub-division to generate 3D mesh
US9762893B2 (en) * 2015-12-07 2017-09-12 Google Inc. Systems and methods for multiscopic noise reduction and high-dynamic range
US20170164290A1 (en) * 2015-12-08 2017-06-08 Qualcomm Incorporated Reduced power consumption for browsing websites
US10061748B2 (en) * 2015-12-11 2018-08-28 Sap Se Adaptive tile matrix representation and multiplication
JP6566865B2 (ja) * 2015-12-28 2019-08-28 Kddi株式会社 動画像復号装置、動画像復号方法、動画像符号化装置、動画像符号化方法及びコンピュータ可読記録媒体
WO2017143392A1 (en) * 2016-02-22 2017-08-31 GenMe Inc. A video background replacement system
US10218976B2 (en) * 2016-03-02 2019-02-26 MatrixView, Inc. Quantization matrices for compression of video
CN105931179B (zh) * 2016-04-08 2018-10-26 武汉大学 一种联合稀疏表示与深度学习的图像超分辨率方法及系统
US9922443B2 (en) * 2016-04-29 2018-03-20 Adobe Systems Incorporated Texturing a three-dimensional scanned model with localized patch colors
US20170323028A1 (en) * 2016-05-04 2017-11-09 Uncharted Software Inc. System and method for large scale information processing using data visualization for multi-scale communities
US10681326B2 (en) * 2016-05-19 2020-06-09 AVAGO TECHNOLOGlES INTERNATIONAL SALES PTE. LIMITED 360 degree video system with coordinate compression
WO2017204886A1 (en) * 2016-05-23 2017-11-30 Massachusetts Institute Of Technology System and method for providing real-time super-resolution for compressed videos
WO2017205530A1 (en) * 2016-05-25 2017-11-30 The Regents Of The University Of California Wide-field imaging of birefringent crystals and other materials using lens-free polarized microscope
KR102651858B1 (ko) * 2016-07-04 2024-03-28 삼성디스플레이 주식회사 유기 발광 표시 패널
GB2552323B (en) * 2016-07-18 2020-04-29 Imagination Tech Ltd Mip map compression
KR20180011539A (ko) * 2016-07-25 2018-02-02 삼성전자주식회사 영상의 처리를 위한 전자 장치
CN106097970B (zh) * 2016-08-10 2018-11-20 深圳市华星光电技术有限公司 一种降低amoled显示残影的驱动方法及驱动系统
US10652583B2 (en) * 2016-08-19 2020-05-12 Apple Inc. Compression of image assets
US10719447B2 (en) * 2016-09-26 2020-07-21 Intel Corporation Cache and compression interoperability in a graphics processor pipeline
KR20180048081A (ko) * 2016-11-02 2018-05-10 삼성전자주식회사 텍스쳐 처리 방법 및 장치
US10242288B2 (en) * 2016-11-08 2019-03-26 Sony Corporation Method and system for video processing
US10643396B2 (en) * 2016-11-11 2020-05-05 Microbrightfield, Inc. Methods and software for creating a 3D image from images of multiple histological sections and for mapping anatomical information from a reference atlas to a histological image
US10440361B2 (en) * 2016-11-22 2019-10-08 Pixvana, Inc. Variable image data reduction system and method
US9711072B1 (en) * 2016-12-01 2017-07-18 Varjo Technologies Oy Display apparatus and method of displaying using focus and context displays
US10595069B2 (en) * 2016-12-05 2020-03-17 Adobe Inc. Prioritizing tile-based virtual reality video streaming using adaptive rate allocation
US10332001B2 (en) * 2016-12-15 2019-06-25 WaveOne Inc. Enhanced coding efficiency with progressive representation
US10438096B2 (en) * 2016-12-27 2019-10-08 Definiens Ag Identifying and excluding blurred areas of images of stained tissue to improve cancer scoring
CN106780342A (zh) * 2016-12-28 2017-05-31 深圳市华星光电技术有限公司 基于稀疏域重构的单帧图像超分辨重建方法及装置
US10523970B2 (en) * 2017-01-11 2019-12-31 Idomoo Ltd Keyframe-based video codec designed for GPU decoding
EP3364342A1 (en) * 2017-02-17 2018-08-22 Cogisen SRL Method for image processing and video compression
US11172208B2 (en) * 2017-02-28 2021-11-09 Nokia Technologies Oy Method and apparatus for improving the visual quality of viewport-based omnidirectional video streaming
US10339692B2 (en) * 2017-06-09 2019-07-02 Sony Interactive Entertainment Inc. Foveal adaptation of particles and simulation models in a foveated rendering system

Also Published As

Publication number Publication date
US20160247310A1 (en) 2016-08-25
WO2016133730A1 (en) 2016-08-25
EP3259753A1 (en) 2017-12-27
US10410398B2 (en) 2019-09-10
CN107251133A (zh) 2017-10-13

Similar Documents

Publication Publication Date Title
US10885607B2 (en) Storage for foveated rendering
JP2018512644A (ja) 低品質タイルを使用してメモリ帯域幅を減らすためのシステムおよび方法
KR102475212B1 (ko) 타일식 아키텍처들에서의 포비티드 렌더링
JP6185211B1 (ja) 適応的シェーディングによるテクスチャルックアップを使用した帯域幅低減
US10164459B2 (en) Selective rasterization
CN107003964B (zh) 处理未对准块传送操作
US10223761B2 (en) Graphics pipeline method and apparatus
US10062139B2 (en) Vertex shaders for binning based graphics processing
KR102499397B1 (ko) 그래픽스 파이프라인을 수행하는 방법 및 장치
CN106575428B (zh) 图形处理单元中的高阶滤波
US9262841B2 (en) Front to back compositing
US9384589B2 (en) Anti-aliasing for geometries
US10311627B2 (en) Graphics processing apparatus and method of processing graphics pipeline thereof