JP2005135371A - 多重ブレンディングを利用して画像を表示するためのシステムおよび方法 - Google Patents

多重ブレンディングを利用して画像を表示するためのシステムおよび方法 Download PDF

Info

Publication number
JP2005135371A
JP2005135371A JP2004166381A JP2004166381A JP2005135371A JP 2005135371 A JP2005135371 A JP 2005135371A JP 2004166381 A JP2004166381 A JP 2004166381A JP 2004166381 A JP2004166381 A JP 2004166381A JP 2005135371 A JP2005135371 A JP 2005135371A
Authority
JP
Japan
Prior art keywords
image
images
feature class
feature
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2004166381A
Other languages
English (en)
Other versions
JP2005135371A5 (ja
JP4554280B2 (ja
Inventor
Patrick M Baudisch
エム.ボーディッシュ パトリック
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Microsoft Corp
Original Assignee
Microsoft Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Microsoft Corp filed Critical Microsoft Corp
Publication of JP2005135371A publication Critical patent/JP2005135371A/ja
Publication of JP2005135371A5 publication Critical patent/JP2005135371A5/ja
Application granted granted Critical
Publication of JP4554280B2 publication Critical patent/JP4554280B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/003D [Three Dimensional] image rendering
    • G06T15/50Lighting effects
    • G06T15/503Blending, e.g. for anti-aliasing
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/14Display of multiple viewports
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00Aspects of display data processing
    • G09G2340/10Mixing of images, i.e. displayed pixel being the result of an operation, e.g. adding, on the corresponding input pixels
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00Aspects of display data processing
    • G09G2340/14Solving problems related to the presentation of information to be displayed
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/02Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the way in which colour is displayed
    • G09G5/026Control of mixing and/or overlay of colours in general

Abstract

【課題】 コンテンツの可読性および/または識別性を容易にする画像を表示するためのシステムおよび方法を提供すること。
【解決手段】 さまざまな特徴クラスの重みを利用して画像を処理するためのシステムおよび方法が提供される。コンピュータシステムが2つ以上の画像を色およびテクスチャデータのような特徴クラスデータのセットと関連付ける。コンピュータシステムは特徴クラスのそれぞれに対して処理重みのセットを割り当てる。これら2つ以上の画像が特徴クラスの重みに従ってブレンドされる。ブレンドされた画像は画像のコンテンツに従ってさらに調整することができる。
【選択図】 図3

Description

本願書は、一般に、コンピュータソフトウェアに関し、特に、多重ブレンディングを利用してグラフィカルユーザーインタフェースに複数の画像を表示するためのシステムおよび方法に関する。
一般的に説明すると、コンピュータシステムは多くのソフトウェアアプリケーションを用いる機会をユーザーに提供する。多くの動作環境において、ユーザーは同時に2つ以上のソフトウェアアプリケーションをインスタンス化することができ、しばしば「マルチタスキング」と呼ばれる。たとえば、ユーザーは文書処理プログラム、電子メールプログラムおよびインターネットブラウザソフトウェアアプリケーションを同時にインスタンス化することができる。それぞれのインスタンス化されたソフトウェアアプリケーションにアクセスするために、ユーザーはマウスまたはキーボードのような種々の制御手段を操作して、特定のインスタンス化されたソフトウェアアプリケーションを選択することができる。
ある一般的な実施形態において、インスタンス化された各ソフトウェアアプリケーションの少なくとも一部をグラフィカルディスプレイにグラフィカルウィンドウとして、ユーザーにて表示することができる。加えて、各グラフィカルウィンドウは複数のグラフィカルウィンドウが同時にユーザーに見えるように編成することができる。複数のグラフィカルウィンドウがユーザーに同時に表示される場合があるので、グラフィカルウィンドウの少なくとも一部が重なり合う状況が存在する。2つ以上のグラフィカルウィンドウが重なり合う場合があるので、一般的な動作環境では種々の方法で重なり合いを解決している。
最も単純な解決法では、各グラフィカルウィンドウは順番表示優先順位(order display priority)と関連付けられる。グラフィカルウィンドウが重なり合う場合に、最上位の表示優先順位を有するウィンドウはその全体が表示されることになる。より低い優先順位を有する下のグラフィカルウィンドウはどれもそのグラフィカルウィンドウの重なり合っている部分が取り除かれて表示される。図1を参照すると、例示的な画面表示100がインスタンス化されたソフトウェアアプリケーションに対応する2つのグラフィカルウィンドウ102、104を含んでいる。図1に例示されているように、グラフィカルウィンドウ102、104の少なくとも一部が、106に例示されているように、重なり合っている。グラフィカルウィンドウ104がより高い表示優先順位を有すると仮定すると、グラフィカルウィンドウ104はその全体が表示される一方、グラフィカルウィンドウ102は重なり合っている部分106が取り除かれて表示されている。このように、グラフィカルウィンドウ104が前景画像として現れる一方、グラフィカルウィンドウ102が背景画像となって現れる。
インスタンス化されたソフトウェアアプリケーションに対応するグラフィカルウィンドウ間の表示優先順位を解決することに加えて、もう1つの一般的な実施形態においては、ソフトウェアアプリケーションが、そのソフトウェアアプリケーションの表示の一部としてユーザーに表示される1つ以上のツールと関連付けられる場合がある。ユーザーのツールはしばしば「パレット」と呼ばれている。パレットは下にあるソフトウェアアプリケーションのグラフィカルウィンドウより高い表示優先順位を有する別個のグラフィカルウィンドウとしてユーザーに表示することができる。次に図2を参照すると、例示的な画面表示200がインスタンス化されたソフトウェアアプリケーションに対応する単一のグラフィカル表示を含んでいる。画面表示200はユーザーに表示されている一部の下にあるコンテンツ202を含んでいる。画面表示200に加えて、2つのパレット206、208は下にある画面表示200より高い表示順序で表示されている。
上記の両方の例において、より低い表示優先順位を有するグラフィカルウィンドウの下にあるコンテンツの少なくとも一部はユーザーの視野から塞がれる。ユーザーは各グラフィカルウィンドウの位置を調整すること、そして/またはより大きい画面表示または複数の画面表示を利用することができるが、グラフィカルウィンドウが重なり合うことがあり、そして視野から完全に塞がれた下にコンテンツがあることをユーザーが望まない多くの具体的な形態が存在する。
下にあるコンテンツの少なくとも一部がユーザーに見えるようにするための1つのアプローチは、より高い表示優先順位のグラフィカルウィンドウに対して透過特性を関連付けることに相当する。画像に透過特性を関連付けることに対する一般的な従来のアプローチはアルファブレンディングと呼ばれている。関連技術の当業者は、アルファブレンディングが前景および背景画像の各ピクセルのカラー値(color value)データに対して単一の重み付けされた値を関連付けることに関係することを理解するであろう。透過性の程度は前景画像にかけられた重みに対応する。式(1)は、赤、緑および青のカラー値(「RGB」)に従って画像を定義するカラースキーマ(color schema)のアルファブレンディングを次のように定義する:
(1) RxGxBx=
R1α+R2(1−α)+G1α+G2(1−α)+B1α+B2(1−α)
ここで:R1G1B1=第1の画像のためのカラーピクセル値、
R2G2B2=第2の画像のためのカラーピクセル値、および
α=アルファ値、である。
画像を表すためのRGB値の使用および画像に透過特性を与えるためのアルファブレンディングの使用はこの技術分野においてよく知られており、これ以上詳細には記述しないことにする。
K.マクラレン(K.McLaren)、「CIE1976年(L*a*b)の均一な色空間および色差方式の開発(The development of the CIE 1976(L*a*b*) uniform colour-space and colour-difference formula)」、ジャーナル・オブ・ザ・ソサイアティ・オブ・ダイアーズ・アンド・カラーリスツ(Journal of the Society of Dyers and Colourists)、92、1976、338−341
アルファブレンディングの使用により下にあるコンテンツの表示が容易になるが、アルファブレンディング技法は種々の場合において不十分となることがある。1つの態様において、前景および背景画像のブレンディングがその前景および背景コンテンツのどちらかの読み易さに影響を与えることがある。別の態様においては、前景および背景の両方のコンテンツが何らかの面(色、形、大きさなどのような)で類似している場合には、従来のアルファブレンディング技法はユーザーにとって「ブレンドされた」コンテンツが前景画像に属するか、背景画像に属するかを判断することが難しくなる場合がある。
このように、コンテンツの読み易さおよび/またはコンテンツの識別を容易にする画像を表示するためのシステムおよび方法に対する必要性が存在する。
さまざまな特徴クラスの重みを利用して画像を処理するためのシステムおよび方法を提供する。コンピュータシステムが2つ以上の画像を、色およびテクスチャデータのような特徴クラスデータのセットと関連付ける。コンピュータシステムは特徴クラスのそれぞれに対して処理重みのセットを割り当てる。これら2つ以上の画像が特徴クラスの重みに従ってブレンドされる。ブレンドされた画像は画像のコンテンツに従ってさらに調整することができる。
本発明の一態様によると、特徴クラスのセットにより表される2つ以上の画像を処理するための方法が提供される。この方法によると、コンピュータシステムがこれら2つ以上の画像のそれぞれを特徴クラスデータのセットと関連付ける。コンピュータシステムは各特徴クラスに対して処理重みを割り当てる。加えて、コンピュータシステムは割り当てられた処理重みに従って特徴クラスデータのセットを処理して、ブレンドされた画像を生成する。
本発明のもう1つの態様によると、前景画像および背景画像をブレンドするための方法が提供される。この前景および背景画像は特徴クラスのセットにより表される。この方法によると、コンピュータシステムは各特徴クラスに対して処理重みを割り当てる。コンピュータシステムは割り当てられた処理重みに従って前景および背景画像に対する特徴クラスデータのセットを処理して、ブレンドされた画像を生成する。加えて、コンピュータシステムは前景および背景画像のコンテンツに従ってブレンドされた画像を調整する。
本発明のさらにもう1つの形態によると、特徴クラスのセットにより表される2つ以上の画像を処理するための方法が提供される。コンピュータシステムがこれら2つ以上の画像のそれぞれを特徴クラスデータのセットと関連付ける。コンピュータシステムは各特徴クラスに対して処理重みを割り当て、割り当てられた処理重みに従って特徴クラスデータのセットを処理してブレンドされた画像を生成する。コンピュータシステムは次にこれら2つ以上の画像のコンテンツに従ってブレンドされた画像を調整する。
本発明の前述の態様および付随する利点の多くは、付属の図面と関連して以下の詳細な説明を参照することによってより良く理解されると、より容易に認識されるであろう。
一般的に説明すると、本発明は画像を処理するためのシステムおよび方法に関する。より詳細には、本発明は、2つ以上のブレンドされた画像を表す特徴のセットに個別の重みを適用するためのシステムおよび方法に関する。特徴は一般的に画像の属性を記述し、表示装置に画像をレンダリングするコンピュータシステムにより利用される1つまたは複数のデータ片に対応する。本発明の例示的な一実施形態においては、特徴データはRGBおよびCIEラボのカラーモデルのような、カラークラスデータを含むことができる。関連技術の当業者はCIEラボのカラーモデルがピクセルのカラー値を3つのチャンネル、すなわち、輝度(luminance)「L」、赤と緑の色差(color difference)「A」、および青と黄の色差「B」を表す知覚志向のカラーモデルに対応することを認めるであろう。CIEラボのカラーモデルは、非特許文献1でさらに説明することができ、参照により本明細書に組み込む。加えて、特徴データはユーザーがエッジまたは高コントラストの他の領域のような画像間のコントラストを知覚することを可能にするテクスチャクラスデータを含むこともできる。本発明はCIEラボのカラーモデルおよび単一のテクスチャの特徴に関して記述することになるが、関連技術の当業者は記載の実施形態が本質的に例示的であり、限定するものとして解釈されるべきではないことを理解するであろう。
RGBカラーモデルと同様に、また上述したように、ピクセル表示属性は、「L」、「a」および「b」値に従ってCIEラボのカラーモデルで表すことができる。2つ以上の画像の間に重なり合うコンテンツがある場合、本発明の例示的な一実施形態においては、重なり合うコンテンツは2つ以上の重なり合う画像の個別の「L」、「a」、「b」カラー値の重み付けされた組み合わせとみなすことができる。加えて、本発明の例示的な一実施形態においては、重なり合うコンテンツは両方の画像のテクスチャ値の重み付けされた組み合わせに従って表すことができる。しかし、伝統的なアルファブレンディングと異なり、各特徴に適用される重みは異なってもよい。本発明によれば、「L」、「a」および「b」値の組み合わせが、式(2)により次のように定義される:
(2) LxAxBx=
(ω1L1+(1−ω1)L2)+(ω2a1+(1−ω2)a2)+(ω3b1+
(1−ω3)b2)
ここで、L1a1b1=第1の画像に対するCIEラボのカラーピクセル値、
L2a2b2=第2の画像に対するCIEラボのカラーピクセル値、
ω1=Lチャンネルに対する重み値、
ω2=aチャンネルに対する重み値、および
ω3=bチャンネルに対する重み値、である。
本発明の例示的な一実施形態において、ω1、ω2およびω3は各画像の知覚のユーザーによる認識を容易にするように選択される。個別の重み値は0から1までの範囲の数に対応させることができる。加えて、本発明の1つの実際の実施形態においては、各重み値が「1」または「0」のブール値に対応する。重み値をブール値に限定することにより、各特徴クラスがその重なり合う画像の1つのチャンネル値のみに対応することになる。本発明の例示的な一実施形態において、式(2)は各テクスチャクラスチャンネルまたは重み値を含めることによりテクスチャクラスデータを含むように修正してもよい。式(3)はテクスチャクラスデータの1つまたは複数のチャンネルを含むよう式(2)を修正することに対応している:
(3) LxAxBx+τ1〜τX=
(ω1L1+(1−ω1)L2)+(ω2a1+(1−ω2)a2)+(ω3b1+
(1−ω3)b2)+(ω4τ1+(1−ω4)τ1)...+(ωXτX+
(1−ωX)τX)
ここで、L1a1b1=第1の画像に対するCIEラボのカラーピクセル値、
L2a2b2=第2の画像に対するCIEラボのカラーピクセル値、
τ1〜τX=第1の画像に対するテクスチャチャンネル値、
τ1〜τX=第2の画像に対するテクスチャチャンネル値、
ω1=Lチャンネルに対する重み値、
ω2=aチャンネルに対する重み値、
ω3=bチャンネルに対する重み値、
ω4=第1のテクスチャチャンネルに対する重み値、および
ωX=X番目のテクスチャチャンネルに対する重み値、である。
色チャンネルデータと同様に、テクスチャクラスに対する重み値は、画像の1つのみが各テクスチャ特徴クラスに対応するようにブール値として表すことができる。
本発明の例示的な一実施形態においては、個別チャンネルの重みは、ユーザーにより、ソフトウェアアプリケーションにより、またはレンダリングされるコンテンツに従って、予め割り当てることができる。たとえば、個別チャンネルの重みは特定の効果を達成するために重なり合っているコンテンツ(たとえば、重なり合っているパレットのグラフィカルウィンドウ)のタイプに関連する場合がある。重なり合っているパレットのグラフィカルウィンドウのブレンディングの一例について、以下により詳細に説明することにする。加えて、チャンネルの重み値は、マニュアル的にまたは動的に修正することができる一連の重み値として表すことができる。たとえば、コンピュータは一連のチャンネル重みを利用して、ブレンドされた画像間の移行を達成することができる。
ここで図3を参照して、複数の画像をブレンドするためのルーチン300について説明することにする。ブロック302において、コンピュータシステムがブレンドされる2つ以上の画像を特徴クラスのセットと関連付ける。上述したように、本発明の例示的な一実施形態において、画像の各ピクセルは、そのL、aおよびbのCIEラボのカラーモデル値に従って表すことができる。加えて、画像の各ピクセルは同様に1つまたは複数のテクスチャ値によって表すこともできる。画像のピクセル情報が、RGBのような別のカラーモデルで表される場合には、ルーチン300は別のカラーモデルからCIEラボのカラーモデルへのピクセルカラーモデルデータの変換を含むことができる。
ブロック304において、コンピュータシステムは特徴クラスのそれぞれに対するチャンネルの重みを関連付ける。上述したように、本発明の例示的な一実施形態においては、チャンネル重みはユーザー入力、コンピュータ設定および/またはブレンドされるウィンドウのタイプに基づいて予め割り当てられてもよい。たとえば、パレットに対応するグラフィカルウィンドウはインスタンス化されたソフトウェアアプリケーションに対応する2つの重なり合っているグラフィカルウィンドウとは異なるチャンネル重みでブレンドすることができる。また上述したように、本発明の例示的な一実施形態においては、個別のチャンネル重みはブール値として表すことができる。
ブロック306において、これら2つの画像は特定のチャンネル重みに従って処理されて、各ピクセルに対する特徴値の組み合わされたセットを生成する。本発明の例示的な一実施形態においては、画像ピクセルデータは式(2)に対応する方法で処理してもよい。たとえば、チャンネル重みω1、ω2、ω3、が「1」、「0」および「1」の値に設定される場合、結果として得られるピクセル画像は、第1の画像の「L」および「b」値、そして第2の画像の「a」カラー値を利用することになる。加えて、テクスチャチャンネルの重みが「0」に設定される場合、テクスチャ値、たとえば第2の画像のエッジ値が用いられることになる。ブロック308において、特徴値、たとえばカラー値およびテクスチャ値、の最終的なセットを、画像表示を改善するために調整することができる。関連技術の当業者はいくつかの画像処理技法/プロセスを使用して全体的な画像表示を改善することができることを認めるであろう。一実施形態において、コントラストフィルタ、カラーフィルタ、ぼかしフィルタなどのような、画像処理フィルタを活用して前景または背景画像を調整することができる。別の実施形態において、以下により詳細に説明されるように、画像の1つからのチャンネルデータを別のチャンネルに移植して、前景および背景画像を識別することができる。さらに別の実施形態において、使用データ(usage data)を活用して背景画像と関連付けられた下にあるコンテンツのために、前景画像の部分を減じてもよい。さらに別の実施形態において、アルファブレンディングのような、他の伝統的な画像処理技法を活用して画像表示を改善することもできる。ブロック310において、ルーチン300が終了する。
本発明の例示的な一実施形態において、上述した多重ブレンディング技法は、パレットに対応するグラフィカルウィンドウを表すために利用することができる。図4は、本発明に従ってコンピュータシステムにより実施されるパレットの多重ブレンディングルーチン400の例示的なフローチャートである。ルーチン400はブロック308に対応し、ここでカラーチャンネル重み値は、背景画像が写真または他のコンテンツに対応し、前景画像がパレットに対応する2つの画像に設定されている。コンテンツの特性に基づいて、チャンネルの重みω1、ω2、ω3は「1」、「0」および「0」に設定される。加えて、テクスチャ値は「1」に設定される。
図4を参照すると、ブロック402において、画像を脱色してカラーチャンネルの重みを適用する。実際の実施例を参照すると、チャンネル重みの設定により、ブレンディング画像は背景画像の赤/緑値および青/黄値を含んでいる。しかし、輝度は単に前景画像に対応している。このように、背景画像の色は保存され、希釈化されない。ブロック404において、パレットを透明にしてテクスチャチャンネル設定を適用する。本発明の例示的な一実施形態においては、パレットは一般的には制御手段に対応するアイコンからなり、その輪郭はユーザーにより認識することができる。したがって、テクスチャチャンネル設定を適用するために、画像はエンボスフィルタのようなハイパスフィルタを用いてフィルタされて、制御手段のエッジを際立たせる。基本的には、画像をフィルタしてそのテクスチャチャンネル値を呼び出す。本発明の例示的な一実施形態においては、線形光ブレンディング技法のような、追加的なブレンディング技法が明/暗のコントラストを保存してもよい。
上述したように、ブロック402および404はブール値の重みチャンネルの適用に対応している。引き続き図4を参照して、本発明の例示的な一実施形態においては、ルーチン400はブレンドされた画像の全体的な改善(図3のブロック308)に磨きをかける追加的なプロセスを含んでもよい。関連技術の当業者はこの画像改善プロセスがオプションであり、そして/またはブレンドされている画像コンテンツのタイプに依存することがあることを理解するであろう。たとえば、2つのグラフィカル画像のブレンディングでは2つのテキスト形式のメッセージのブレンディングとは異なる改善プロセスのセットを必要とする場合がある。ブロック406において、背景画像の一部をぼかして目障りな背景と関連する高周波干渉を排除する。より具体的には、背景画像の重なり合っている部分をぼかしフィルタでぼかすことができる。さらに、本発明の例示的な一実施形態においては、前景画像が動くにつれてその前景画像と重なり合っている背景画像の任意の部分を動的にぼかすようにぼかしフィルタを構成することができる。このようにして、結果として得られる画像は前景画像に対しては高いコントラストを、背景画像の重なり合っている部分に対しては低いコントラストを与える。
ブロック408において、使用データを活用して前景画像の部分の不透明度(opacity)を変更してもよい。本発明の例示的な一実施形態においては、選択データまたは他の明示的もしくは暗黙のユーザーフィードバックシステムに対応する使用データを用いて表示の部分を変更する。たとえば、パレットのような、前景画像でユーザーが精通している、境界、未使用アイコンまたは永続的なアイコンを背景画像のために減じることができる。
ブロック410において、競合する画像の場合には、1つまたは複数の特徴チャンネルを再マップすることができる。本発明の例示的な一実施形態において、前景および背景画像はそのコンテンツを表すために同様の特徴を利用している2つの画像に対応する場合がある。たとえば、主にテキストに対応している2つの画像が表現上輝度チャンネルに強くに依存する場合がある。しかし、上述したように、本発明の例示的な一実施形態においては、これらの画像の1つのみがその輝度値を用いることができることになる。というのは、そうでなければそれらが干渉してしまうためである。したがって、画像の輝度値の1つを別のチャンネル(赤/緑および青/黄の色差値など)にマップして干渉を軽減することができる。関連技術の当業者は追加的な調整プロセスを利用することができることを認めるであろう。ブロック412において、ルーチン400は終了する。
図5は、本発明に従って前景502および背景画像504を処理した結果を例示する画面表示500の一部を例示するブロック図である。図5に例示するように、カラーチャンネル値を保存することにより、背景画像504のユーザーによる認識が向上する。加えて、前景画像502の認識は、輝度およびテクスチャチャンネル値を保存することにより達成される。関連技術の当業者は結果として得られる画面表示500が本質的に例示的であり、代替の結果も本発明の範囲内で達成される得ることを理解するであろう。
本発明の例示的な実施形態を例示し、説明してきたが、本発明の精神および範囲から逸脱することなく、本発明の範囲内で種々の変更を行うことができることが理解されるであろう。
従来の表示形態に従って、重なり合っているグラフィカルウィンドウを例示する画面表示のブロック図である。 従来の表示形態に従って、重なり合っているパレットのグラフィカルウィンドウを例示する画面表示のブロック図である。 本発明の一実施形態に従って、コンピュータシステムにより実施される多重ブレンディングの表示ルーチンを例示するフローチャートである。 本発明の一実施形態に従って、多重ブレンディングを利用しコンピュータにより実施されるパレット生成ルーチンを例示するフローチャートである。 多重ブレンディングを利用する画像の処理を説明する画面表示を例示するブロック図である。
符号の説明
100、200、500 画面表示
102、104 グラフィカルウィンドウ
106 重なり合っている部分
202 コンテンツ
206、208 パレット
502 前景画像
504 背景画像

Claims (32)

  1. 特徴クラスのセットにより表される2つ以上の画像を処理するための方法であって、
    前記2つ以上の画像のそれぞれを特徴クラスデータのセットと関連付けることと、
    各特徴クラスに対して処理重みを割り当てることと、
    前記割り当てられた処理重みに従って前記特徴クラスデータのセットを処理してブレンドされた画像を生成することと
    を備えることを特徴とする方法。
  2. 前記特徴クラスデータのセットは、カラークラスデータに対応することを特徴とする請求項1に記載の方法。
  3. 前記カラークラスデータは、CIEラボのカラーモデルデータに対応することを特徴とする請求項2に記載の方法。
  4. 前記特徴クラスデータのセットは、テクスチャクラスデータに対応することを特徴とする請求項1に記載の方法。
  5. 前記テクスチャクラスデータは、エッジデータに対応することを特徴とする請求項4に記載の方法。
  6. 各特徴クラスに対する前記処理重みは、ゼロおよび1の間の範囲の数として指定されることを特徴とする請求項1に記載の方法。
  7. 各特徴クラスに対する前記処理重みは、ブール値として指定されることを特徴とする請求項1に記載の方法。
  8. 請求項1に記載の方法を行うためのコンピュータ実行可能命令を有することを特徴とするコンピュータ読み取り可能媒体。
  9. 請求項1に記載の方法を行うことを特徴とするコンピュータシステム。
  10. 前景画像および背景画像をブレンドするための方法であって、前記前景画像および背景画像が特徴クラスのセットにより表され、前記方法は、
    各特徴クラスに対して処理重みを割り当てることと、
    前記割り当てられた処理重みに従って前記前景画像および背景画像に対する前記特徴クラスデータのセットを処理してブレンドされた画像を生成することと、
    前記前景画像および背景画像の内容に従って前記ブレンドされた画像を調整することと
    を備えることを特徴とする方法。
  11. 前記特徴クラスデータのセットは、カラークラスデータに対応することを特徴とする請求項10に記載の方法。
  12. 前記カラークラスデータは、CIEラボのカラーモデルデータに対応することを特徴とする請求項11に記載の方法。
  13. 前記特徴クラスデータのセットは、テクスチャクラスデータに対応することを特徴とする請求項10に記載の方法。
  14. 各特徴クラスに対する前記処理重みは、ゼロおよび1の間の範囲の数として指定されることを特徴とする請求項10に記載の方法。
  15. 各特徴クラスに対する前記処理重みは、ブール値として指定されることを特徴とする請求項10に記載の方法。
  16. 前記ブレンドされた画像を調整することは、前記背景画像をぼかすことを含むことを特徴とする請求項10に記載の方法。
  17. 前記ブレンドされた画像を調整することは、
    前記前景画像の少なくとも一部に対する使用データを得ることと、
    前記使用データに従って前記画像を調整することと
    を含むことを特徴とする請求項10に記載の方法。
  18. 前記画像を調整することは、前記使用データに基づいて前記前景画像の一部の不透明度を減じることを含むことを特徴とする請求項17に記載の方法。
  19. 前記画像を調整することは、前記前景画像の第1の特徴クラスから別の特徴クラスへ値をマップすることを含むことを特徴とする請求項10に記載の方法。
  20. 請求項10に記載の方法を行うためのコンピュータ実行可能命令を有することを特徴とするコンピュータ読み取り可能媒体。
  21. 請求項10に記載の方法を行うことを特徴とするコンピュータシステム。
  22. 特徴クラスのセットにより表される2つ以上の画像を処理するための方法であって、
    前記2つ以上の画像のそれぞれを特徴クラスデータのセットと関連付けることと、
    各特徴クラスに対する処理重みを割り当てることと、
    前記割り当てられた処理重みに従って前記特徴クラスデータのセットを処理してブレンドされた画像を生成することと、
    前記2つ以上の画像のコンテンツに従って前記ブレンドされた画像を調整することと
    を備えることを特徴とする方法。
  23. 特徴クラスデータの前記セットは、カラークラスデータに対応することを特徴とする請求項22に記載の方法。
  24. 前記カラークラスデータは、CIEラボのカラーモデルデータに対応することを特徴とする請求項23に記載の方法。
  25. 各特徴クラスに対する前記処理重みは、ゼロおよび1の間の範囲の数として指定されることを特徴とする請求項22に記載の方法。
  26. 各特徴クラスに対する前記処理重みは、ブール値として指定されることを特徴とする請求項22に記載の方法。
  27. 前記ブレンドされた画像を調整することは、前記2つ以上の画像の少なくとも1つをぼかすことを含むことを特徴とする請求項22に記載の方法。
  28. 前記ブレンドされた画像を調整することは、
    前記2つ以上の画像の1つの少なくとも一部に対する使用データを得ることと、
    前記使用データに従って前記画像を調整することと
    を含むことを特徴とする請求項22に記載の方法。
  29. 前記画像を調整することは、前記使用データに基づいて前記2つ以上の画像の前記1つの部分の不透明度を減じることを含むことを特徴とする請求項28に記載の方法。
  30. 前記画像を調整することは、前記前景画像の第1の特徴クラスから別の特徴クラスへ値をマップすることを含むことを特徴とする請求項22に記載の方法。
  31. 請求項22に記載の方法を行うためのコンピュータ実行可能命令を有することを特徴とするコンピュータ読み取り可能媒体。
  32. 請求項22に記載の方法を行うことを特徴とするコンピュータシステム。
JP2004166381A 2003-06-12 2004-06-03 多重ブレンディングを利用して画像を表示するためのシステムおよび方法 Expired - Fee Related JP4554280B2 (ja)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
US47829403P 2003-06-12 2003-06-12

Publications (3)

Publication Number Publication Date
JP2005135371A true JP2005135371A (ja) 2005-05-26
JP2005135371A5 JP2005135371A5 (ja) 2007-07-19
JP4554280B2 JP4554280B2 (ja) 2010-09-29

Family

ID=33418472

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2004166381A Expired - Fee Related JP4554280B2 (ja) 2003-06-12 2004-06-03 多重ブレンディングを利用して画像を表示するためのシステムおよび方法

Country Status (5)

Country Link
US (1) US7667717B2 (ja)
EP (1) EP1489591B1 (ja)
JP (1) JP4554280B2 (ja)
KR (1) KR101076900B1 (ja)
CN (1) CN100390825C (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2007052382A1 (ja) * 2005-11-02 2007-05-10 Matsushita Electric Industrial Co., Ltd. 表示オブジェクト透過装置
JP2011134321A (ja) * 2009-12-22 2011-07-07 Intel Corp オペレーティングシステムに依存しないネットワークイベント処理

Families Citing this family (65)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4554280B2 (ja) * 2003-06-12 2010-09-29 マイクロソフト コーポレーション 多重ブレンディングを利用して画像を表示するためのシステムおよび方法
US20060059432A1 (en) * 2004-09-15 2006-03-16 Matthew Bells User interface having viewing area with non-transparent and semi-transparent regions
US7417647B2 (en) * 2005-08-19 2008-08-26 Seiko Epson Corporation Making an overlay image edge artifact less conspicuous
JP4215038B2 (ja) * 2005-09-16 2009-01-28 セイコーエプソン株式会社 画像処理装置、画像処理方法、およびプログラム
US8072472B2 (en) * 2006-06-26 2011-12-06 Agfa Healthcare Inc. System and method for scaling overlay images
EP1923838A1 (en) * 2006-11-20 2008-05-21 Agfa HealthCare NV Method of fusing digital images
JP4758950B2 (ja) * 2007-06-07 2011-08-31 株式会社日立製作所 プラント監視装置およびプラントの運転監視方法
JP2008306512A (ja) * 2007-06-08 2008-12-18 Nec Corp 情報提供システム
US8149247B1 (en) * 2007-11-06 2012-04-03 Nvidia Corporation Method and system for blending rendered images from multiple applications
US9473681B2 (en) 2011-06-10 2016-10-18 Flir Systems, Inc. Infrared camera system housing with metalized surface
US9208542B2 (en) 2009-03-02 2015-12-08 Flir Systems, Inc. Pixel-wise noise reduction in thermal images
US9843742B2 (en) 2009-03-02 2017-12-12 Flir Systems, Inc. Thermal image frame capture using de-aligned sensor array
US9756264B2 (en) 2009-03-02 2017-09-05 Flir Systems, Inc. Anomalous pixel detection
USD765081S1 (en) 2012-05-25 2016-08-30 Flir Systems, Inc. Mobile communications device attachment with camera
US9635285B2 (en) 2009-03-02 2017-04-25 Flir Systems, Inc. Infrared imaging enhancement with fusion
US9674458B2 (en) 2009-06-03 2017-06-06 Flir Systems, Inc. Smart surveillance camera systems and methods
US10244190B2 (en) 2009-03-02 2019-03-26 Flir Systems, Inc. Compact multi-spectrum imaging with fusion
US9235876B2 (en) 2009-03-02 2016-01-12 Flir Systems, Inc. Row and column noise reduction in thermal images
US9998697B2 (en) 2009-03-02 2018-06-12 Flir Systems, Inc. Systems and methods for monitoring vehicle occupants
US9517679B2 (en) 2009-03-02 2016-12-13 Flir Systems, Inc. Systems and methods for monitoring vehicle occupants
US10757308B2 (en) 2009-03-02 2020-08-25 Flir Systems, Inc. Techniques for device attachment with dual band imaging sensor
US9986175B2 (en) 2009-03-02 2018-05-29 Flir Systems, Inc. Device attachment with infrared imaging sensor
US9948872B2 (en) 2009-03-02 2018-04-17 Flir Systems, Inc. Monitor and control systems and methods for occupant safety and energy efficiency of structures
US9451183B2 (en) 2009-03-02 2016-09-20 Flir Systems, Inc. Time spaced infrared image enhancement
US9819880B2 (en) 2009-06-03 2017-11-14 Flir Systems, Inc. Systems and methods of suppressing sky regions in images
US9843743B2 (en) 2009-06-03 2017-12-12 Flir Systems, Inc. Infant monitoring systems and methods using thermal imaging
US9716843B2 (en) 2009-06-03 2017-07-25 Flir Systems, Inc. Measurement device for electrical installations and related methods
US10091439B2 (en) 2009-06-03 2018-10-02 Flir Systems, Inc. Imager with array of multiple infrared imaging modules
US9292909B2 (en) 2009-06-03 2016-03-22 Flir Systems, Inc. Selective image correction for infrared imaging devices
US9756262B2 (en) 2009-06-03 2017-09-05 Flir Systems, Inc. Systems and methods for monitoring power systems
EP2284800B1 (en) * 2009-07-23 2018-09-05 Samsung Electronics Co., Ltd. Method and system for creating an image
US8839128B2 (en) * 2009-11-25 2014-09-16 Cooliris, Inc. Gallery application for content viewing
US9207708B2 (en) 2010-04-23 2015-12-08 Flir Systems, Inc. Abnormal clock rate detection in imaging sensor arrays
US9848134B2 (en) 2010-04-23 2017-12-19 Flir Systems, Inc. Infrared imager with integrated metal layers
US9706138B2 (en) 2010-04-23 2017-07-11 Flir Systems, Inc. Hybrid infrared sensor array having heterogeneous infrared sensors
US9524573B2 (en) * 2011-06-05 2016-12-20 Apple Inc. Systems, methods, and computer-readable media for manipulating and mapping tiles of graphical object data
US9235023B2 (en) 2011-06-10 2016-01-12 Flir Systems, Inc. Variable lens sleeve spacer
US9961277B2 (en) 2011-06-10 2018-05-01 Flir Systems, Inc. Infrared focal plane array heat spreaders
US10079982B2 (en) 2011-06-10 2018-09-18 Flir Systems, Inc. Determination of an absolute radiometric value using blocked infrared sensors
US9900526B2 (en) 2011-06-10 2018-02-20 Flir Systems, Inc. Techniques to compensate for calibration drifts in infrared imaging devices
US10051210B2 (en) 2011-06-10 2018-08-14 Flir Systems, Inc. Infrared detector array with selectable pixel binning systems and methods
US10841508B2 (en) 2011-06-10 2020-11-17 Flir Systems, Inc. Electrical cabinet infrared monitor systems and methods
US10169666B2 (en) 2011-06-10 2019-01-01 Flir Systems, Inc. Image-assisted remote control vehicle systems and methods
US10389953B2 (en) 2011-06-10 2019-08-20 Flir Systems, Inc. Infrared imaging device having a shutter
US9058653B1 (en) 2011-06-10 2015-06-16 Flir Systems, Inc. Alignment of visible light sources based on thermal images
US9143703B2 (en) 2011-06-10 2015-09-22 Flir Systems, Inc. Infrared camera calibration techniques
CA2838992C (en) 2011-06-10 2018-05-01 Flir Systems, Inc. Non-uniformity correction techniques for infrared imaging devices
US9706137B2 (en) 2011-06-10 2017-07-11 Flir Systems, Inc. Electrical cabinet infrared monitor
CN103828343B (zh) 2011-06-10 2017-07-11 菲力尔系统公司 基于行的图像处理和柔性存储系统
CN109618084B (zh) 2011-06-10 2021-03-05 菲力尔系统公司 红外成像系统和方法
US9509924B2 (en) 2011-06-10 2016-11-29 Flir Systems, Inc. Wearable apparatus with integrated infrared imaging module
US8872927B2 (en) * 2011-08-09 2014-10-28 Cisco Technology, Inc. Fast zero recovery with alpha blending in gyroscopic image stabilization
EP2575106B1 (en) * 2011-09-30 2014-03-19 Brainlab AG Method and device for displaying changes in medical image data
CN102663806B (zh) * 2012-03-02 2014-12-10 西安交通大学 基于艺术视觉的图像卡通风格化渲染方法
US9811884B2 (en) 2012-07-16 2017-11-07 Flir Systems, Inc. Methods and systems for suppressing atmospheric turbulence in images
US9973692B2 (en) 2013-10-03 2018-05-15 Flir Systems, Inc. Situational awareness by compressed display of panoramic views
US11297264B2 (en) 2014-01-05 2022-04-05 Teledyne Fur, Llc Device attachment with dual band imaging sensor
KR102285188B1 (ko) * 2015-02-13 2021-08-05 삼성전자주식회사 시인성 개선을 위한 이미지 처리 방법 및 이를 지원하는 전자 장치
US10019737B2 (en) 2015-04-06 2018-07-10 Lewis Beach Image processing device and method
CN105828156A (zh) * 2016-03-22 2016-08-03 乐视网信息技术(北京)股份有限公司 一种在视频画面中生成标题背景的方法及装置
WO2017189039A1 (en) * 2016-04-25 2017-11-02 Beach Lewis Image processing device and method
CN106027888B (zh) * 2016-05-20 2019-03-01 Oppo广东移动通信有限公司 智能终端的相机预览方法及智能终端
FR3082979B1 (fr) * 2018-06-26 2020-10-16 Quantificare Procede et dispositif pour la simulation et la visualisation de modeles surfaciques
JP2022135128A (ja) * 2021-03-04 2022-09-15 キヤノン株式会社 情報処理装置、情報処理装置の制御方法およびプログラム
US11568587B2 (en) * 2021-03-30 2023-01-31 International Business Machines Corporation Personalized multimedia filter

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001358936A (ja) * 2001-05-21 2001-12-26 Fuji Xerox Co Ltd 画像処理装置
JP2002529863A (ja) * 1998-11-06 2002-09-10 ザ トゥルスティーズ オブ コロンビア ユニバーシティ イン ザ シティ オブニュー ヨーク 画像記述システムおよび方法
JP2002533851A (ja) * 1998-12-23 2002-10-08 トゥルースペクトラ インコーポレイテッド 画像をアクセスしレンダリングするための方法

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE69315969T2 (de) 1992-12-15 1998-07-30 Sun Microsystems Inc Darstellung von Informationen in einem Anzeigesystem mit transparenten Fenstern
JPH0713741A (ja) 1993-06-22 1995-01-17 Matsushita Electric Ind Co Ltd アルファ合成演算器
JP3681528B2 (ja) * 1997-12-22 2005-08-10 株式会社ルネサステクノロジ グラフィックプロセッサ及びデータ処理システム
EP1365385B1 (en) * 1998-11-09 2012-06-13 Broadcom Corporation Graphics display system with processing of graphics layers, alpha blending and composition with video data
US6721446B1 (en) * 1999-04-26 2004-04-13 Adobe Systems Incorporated Identifying intrinsic pixel colors in a region of uncertain pixels
US6518970B1 (en) 2000-04-20 2003-02-11 Ati International Srl Graphics processing device with integrated programmable synchronization signal generation
US7219309B2 (en) * 2001-05-02 2007-05-15 Bitstream Inc. Innovations for the display of web pages
US6781591B2 (en) * 2001-08-15 2004-08-24 Mitsubishi Electric Research Laboratories, Inc. Blending multiple images using local and global information
US6927778B2 (en) * 2002-05-16 2005-08-09 Ati Technologies, Inc. System for alpha blending and method thereof
JP4554280B2 (ja) * 2003-06-12 2010-09-29 マイクロソフト コーポレーション 多重ブレンディングを利用して画像を表示するためのシステムおよび方法
US7116342B2 (en) * 2003-07-03 2006-10-03 Sportsmedia Technology Corporation System and method for inserting content into an image sequence
US7154511B2 (en) * 2003-10-24 2006-12-26 Microsoft Corporation Fast rendering of ink
US7505054B2 (en) * 2004-05-12 2009-03-17 Hewlett-Packard Development Company, L.P. Display resolution systems and methods
US20050268226A1 (en) * 2004-05-28 2005-12-01 Lipsky Scott E Method and system for displaying image information

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002529863A (ja) * 1998-11-06 2002-09-10 ザ トゥルスティーズ オブ コロンビア ユニバーシティ イン ザ シティ オブニュー ヨーク 画像記述システムおよび方法
JP2002533851A (ja) * 1998-12-23 2002-10-08 トゥルースペクトラ インコーポレイテッド 画像をアクセスしレンダリングするための方法
JP2001358936A (ja) * 2001-05-21 2001-12-26 Fuji Xerox Co Ltd 画像処理装置

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2007052382A1 (ja) * 2005-11-02 2007-05-10 Matsushita Electric Industrial Co., Ltd. 表示オブジェクト透過装置
JP2011134321A (ja) * 2009-12-22 2011-07-07 Intel Corp オペレーティングシステムに依存しないネットワークイベント処理

Also Published As

Publication number Publication date
CN100390825C (zh) 2008-05-28
US7667717B2 (en) 2010-02-23
EP1489591B1 (en) 2016-12-07
EP1489591A3 (en) 2007-12-26
EP1489591A2 (en) 2004-12-22
CN1704883A (zh) 2005-12-07
US20050093890A1 (en) 2005-05-05
KR101076900B1 (ko) 2011-10-25
KR20040104426A (ko) 2004-12-10
JP4554280B2 (ja) 2010-09-29

Similar Documents

Publication Publication Date Title
JP4554280B2 (ja) 多重ブレンディングを利用して画像を表示するためのシステムおよび方法
US8847973B2 (en) Automatic adjustment of computer interface colors using image processing
JP3689064B2 (ja) スケーラブル三次元境界線を描く方法
CN109979401B (zh) 驱动方法、驱动装置、显示设备和计算机可读介质
US6353451B1 (en) Method of providing aerial perspective in a graphical user interface
US8890886B2 (en) User interface with color themes based on input image data
US8572501B2 (en) Rendering graphical objects based on context
US6971071B1 (en) System and method for implementing an image ancillary to a cursor
CN101360250B (zh) 沉浸产生方法和系统及因素控制、内容分析及参数预测法
US20060146054A1 (en) Use of an input overscaled bitmap to generate emboldened overscaled bitmap
KR20160068627A (ko) 영상 처리 장치, 영상 처리 방법, 및 표시 장치
US20180096643A1 (en) Transparent display apparatus and method for driving transparent display panel thereof
US20050253865A1 (en) Encoding ClearType text for use on alpha blended textures
ES2616867T3 (es) Sistema y procedimiento de visualización de imágenes utilizando mezcla múltiple
CN110880164A (zh) 一种图像处理方法、装置、设备及计算机存储介质
US7969441B2 (en) Adaptive contextual filtering based on typographical characteristics
US7286269B2 (en) Use of an input black and white bitmap to generate emboldened anti-aliasing bitmap
JP2002247405A (ja) 合成色空間を使用した色域マッピング・システムおよび方法
US11527023B2 (en) Image processing for increasing visibility of obscured patterns
US11217205B2 (en) Method and apparatus for rendering contents for vision accessibility
JPWO2020031859A1 (ja) アルファ値決定装置、アルファ値決定方法、プログラム及び画像データのデータ構造
US6295369B1 (en) Multi-dimensional color image mapping apparatus and method
Hascoët Visual color design
US20070201057A1 (en) Making electronic ink universally legible

Legal Events

Date Code Title Description
A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20070604

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20070604

RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20090901

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20091008

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100219

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100518

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20100617

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20100714

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130723

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Ref document number: 4554280

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees