JP3656054B2 - Image generation system, program, and information storage medium - Google Patents

Image generation system, program, and information storage medium Download PDF

Info

Publication number
JP3656054B2
JP3656054B2 JP2002036812A JP2002036812A JP3656054B2 JP 3656054 B2 JP3656054 B2 JP 3656054B2 JP 2002036812 A JP2002036812 A JP 2002036812A JP 2002036812 A JP2002036812 A JP 2002036812A JP 3656054 B2 JP3656054 B2 JP 3656054B2
Authority
JP
Japan
Prior art keywords
key frame
image
frame image
information
key
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2002036812A
Other languages
Japanese (ja)
Other versions
JP2003242517A (en
Inventor
慎一 藤原
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Namco Ltd
Original Assignee
Namco Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Namco Ltd filed Critical Namco Ltd
Priority to JP2002036812A priority Critical patent/JP3656054B2/en
Publication of JP2003242517A publication Critical patent/JP2003242517A/en
Application granted granted Critical
Publication of JP3656054B2 publication Critical patent/JP3656054B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Landscapes

  • Image Processing (AREA)
  • Studio Circuits (AREA)
  • Processing Or Creating Images (AREA)

Description

【０００１】
【発明の属する技術分野】
本発明は、画像生成システム、プログラム及び情報記憶媒体に関する。
【０００２】
【背景技術及び発明が解決しようとする課題】
従来より、所与の画像をズーム表示することが行われている。
【０００３】
かかるズーム表示においては、例えば拡大する過程の各フレームの画像を予め画像データとして用意しておき、これらを順次差し替えて表示することによりクオリティの高いズーム画像を作成することが出来る。しかし各フレームごとの画像を予め保持しておかなければならないため保持するデータ量が膨大になってしまう。
【０００４】
また予め大きなサイズ（画素数の多い）の元画像を用意しておき、各フレームの画像として元画像又は元画像を縮小した画像から所定範囲の画像を切り出した画像をリアルタイムに生成することによりクオリティの高いズーム画像を作成することが出来る。しかし、元画像としてデータ量がおおきなものを用意しておかなければ縮小時のクオリティを保つことが出来ない保持するデータ量が膨大になってしまう。
【０００５】
またあらかじめ保持するデータ量を抑えるためには、例えば図１５の７１０〜７６０に示すように予め用意した元画像を拡大してリアルタイムにズーム画像を生成することも可能である。しかし図１５の７１０〜７６０に示すように単純に画像を拡大すると拡大率が大きくなるにつれ画像のクオリティがさがり、ジャギーの目立つ粗い画像になってしまう。
【０００６】
また、例えば図１６の８１０〜８６０に示すように画素間で補間しながら拡大するとジャギーの発生は防げるが、ぼやけた画像になってしまう。
【０００７】
本発明は、以上のような課題に鑑みてなされたものであり、その目的とするところは、少ないデータ量でクオリティの高い倍率変化表示（例えばズーム表示）を行うことの出来る画像生成システム、プログラム及び情報記憶媒体を提供することにある。
【０００８】
【課題を解決するための手段】
（１）本発明は、画像生成を行う画像生成システムであって、
所与の元画像を拡大する過程の倍率の異なる複数のキーフレーム画像を記憶する手段と、
第１のキーフレームと第１のキーフレームの次のキーフレームである第２のキーフレームの間の所与のフレームにおいて、
第１のキーフレームに対応した第１のキーフレーム画像を元画像に対して所与の倍率Ｓになるよう拡大した第１’の画像と、第２のキーフレームに対応した第２のキーフレーム画像を元画像に対して前記所与の倍率Ｓと同じ倍率になるよう縮小した第２’の画像とを合成して所与のフレームの画像を生成するキーフレーム画像合成処理を行う手段と、
を含むことを特徴とする。
【０００９】
また本発明に係るプログラムは、コンピュータにより実行可能なプログラム（情報記憶媒体又は搬送波に具現化されるプログラム）であって、上記手段をコンピュータに実現させる（上記手段としてコンピュータを機能させる）ことを特徴とする。また本発明に係る情報記憶媒体は、コンピュータにより読み取り可能（使用可能）な情報記憶媒体であって、上記手段をコンピュータに実現させる（上記手段としてコンピュータを機能させる）ためのプログラムを含むことを特徴としている。
【００１０】
ここにおいて倍率とは、第１’の画像及び第２’の画像の元画像に対する比である。
【００１１】
例えば拡大の中に１倍以下の場合も含める場合には、縮小の代わりに拡大を行う場合も本発明の範囲内である。
【００１２】
また１’の画像と２’の画像の合成としては、例えば半透明合成処理等を行うことが出来る。半透明合成処理とは半透明情報を用いて画像を描画する手法であり、例えば半透明情報を用いた半透明ブレンディング（αブレンディング）、半透明情報を用いた加算半透明（α加算）、半透明情報を用いた減算半透明（α減算）などの合成処理方法がある。
【００１３】
ここで半透明情報とは、透明度情報と等価で、画像単位若しくは各画素の関連付けられて記憶される情報であって、オブジェクトの定義点毎に設定され、例えば色情報以外のプラスアルファの情報（α値）としての透明度（不透明度或いは半透明度と等価）を示す情報をいう。
【００１４】
例えばαブレンディングである場合には、次のような半透明情報（α）を用いた合成処理が行われる。
【００１５】
ＲQ＝（１−α）×Ｒ1＋α×Ｒ2
ＧQ＝（１−α）×Ｇ1＋α×Ｇ2
ＢQ＝（１−α）×Ｂ1＋α×Ｂ2
ここで、Ｒ1、Ｇ1、Ｂ1は、描画バッファに既に描画されているジオメトリ処理後の画像の色（輝度）のＲ、Ｇ、Ｂ成分であり、Ｒ2、Ｇ2、Ｂ2は、描画画像の色のＲ、Ｇ、Ｂ成分である。また、ＲQ、ＧQ、ＢQは、αブレンディングにより生成される画像の色のＲ、Ｇ、Ｂ成分である。なお、ここでは、α値として、ジオメトリ処理後の所与の画像のα値を用いてもよいし、描画された元画像のα値を使用するようにしてもよい。
【００１６】
本発明では第１のキーフレーム画像を拡大した第１’の画像と、第２のキーフレームの画像を縮小した第２’の画像を合成して第１のキーフレームと第２のキーフレームの間の画像を生成するため、第１のキーフレーム画像と第２のキーフレーム画像の差し替えの切れ目のないスムーズなズーム画像を生成することが出来る。
（２）また本発明に係る画像生成システム、プログラム及び情報記憶媒体は、
第１のキーフレームと第２のキーフレームの間の各フレームにおいて前記所与の倍率Ｓが時系列に大きくなるように、第１のキーフレーム画像から第１’の画像を生成する際の拡大率を時系列に増加させ、第２のキーフレーム画像から第２’の画像を生成する際の縮小率を時系列に減少させるように制御することを特徴とする。
【００１７】
例えば拡大率の中に１倍以下の場合も含める場合には、第２のキーフレーム画像から第２’の画像を生成する際の拡大率を時系列に増加させる場合も本発明の範囲内である。
【００１８】
本発明によれば、第１のキーフレームと第２のキーフレーム間の各フレームにおいて、連続的に元画像がズーム表示される画像を生成することが出来る。
（３）本発明は、画像生成を行う画像生成システムであって、
第１のキーフレームに対応した第１のキーフレーム画像と、第１のキーフレーム画像とは倍率の異なる画像であって、第１のキーフレームの次のキーフレームである第２のキーフレームに対応した第２のキーフレーム画像とを記憶する手段と、
第１のキーフレームと第２のキーフレームの間の所与のフレームにおいて、
第１のキーフレーム画像を元画像に対して所与の倍率Ｓになるように拡大又は縮小した第１’の画像と、第２のキーフレーム画像を前記所与の倍率Ｓと同じ倍率になるように拡大又は縮小した第２’の画像とを合成して所与のフレームの画像を生成するキーフレーム画像合成処理を行う手段と、
を含むことを特徴とする。
【００１９】
また本発明に係るプログラムは、コンピュータにより実行可能なプログラム（情報記憶媒体又は搬送波に具現化されるプログラム）であって、上記手段をコンピュータに実現させる（上記手段としてコンピュータを機能させる）ことを特徴とする。また本発明に係る情報記憶媒体は、コンピュータにより読み取り可能（使用可能）な情報記憶媒体であって、上記手段をコンピュータに実現させる（上記手段としてコンピュータを機能させる）ためのプログラムを含むことを特徴としている。
【００２０】
ここにおいて拡大率の中には１倍以下の場合も含めるようにしてもよい。
【００２１】
ここにおいて倍率とは、第１’の画像及び第２’の画像の元画像に対する比である。
【００２２】
例えば拡大の中に１倍以下の場合も含める場合には、縮小の代わりに拡大を行う場合も本発明の範囲内である。
【００２３】
また１’の画像と２’の画像の合成としては、例えば半透明合成処理等を行うことが出来る。半透明合成処理とは半透明情報を用いて画像を描画する手法であり、例えば半透明情報を用いた半透明ブレンディング（αブレンディング）、半透明情報を用いた加算半透明（α加算）、半透明情報を用いた減算半透明（α減算）などの合成処理方法がある。
【００２４】
ここで半透明情報とは、透明度情報と等価で、画像単位若しくは各画素の関連付けられて記憶される情報であって、オブジェクトの定義点毎に設定され、例えば色情報以外のプラスアルファの情報（α値）としての透明度（不透明度或いは半透明度と等価）を示す情報をいう。
【００２５】
例えばαブレンディングである場合には、次のような半透明情報（α）を用いた合成処理が行われる。
【００２６】
ＲQ＝（１−α）×Ｒ1＋α×Ｒ2
ＧQ＝（１−α）×Ｇ1＋α×Ｇ2
ＢQ＝（１−α）×Ｂ1＋α×Ｂ2
ここで、Ｒ1、Ｇ1、Ｂ1は、描画バッファに既に描画されているジオメトリ処理後の画像の色（輝度）のＲ、Ｇ、Ｂ成分であり、Ｒ2、Ｇ2、Ｂ2は、描画画像の色のＲ、Ｇ、Ｂ成分である。また、ＲQ、ＧQ、ＢQは、αブレンディングにより生成される画像の色のＲ、Ｇ、Ｂ成分である。なお、ここでは、α値として、ジオメトリ処理後の所与の画像のα値を用いてもよいし、描画された元画像のα値を使用するようにしてもよい。
【００２７】
本発明では第１のキーフレーム画像を拡大した第１’の画像と、第２のキーフレームの画像を縮小した第２’の画像を合成して第１のキーフレームと第２のキーフレームの間の画像を生成するため、第１のキーフレーム画像と第２のキーフレーム画像の差し替えの切れ目のないスムーズな画像を生成することが出来る。（４）また本発明に係る画像生成システム、プログラム及び情報記憶媒体は、
第１のキーフレームと第２のキーフレームの間であって、少なくとも第１のキーフレームにつづく所定区間の連続する複数のフレームにおいて前記キーフレーム画像合成処理をおこなうことを特徴とする。
【００２８】
第１のキーフレームにつづく所定区間は第１のキーフレーム画像の拡大率が１００％を超える区間として設定されることが多いため、少なくとも係る区間を前記キーフレーム画像合成処理の対象とすることで、この区間の画像のクオリティを保ちながら差し替えの切れ目のないスムーズな画像を生成することが出来る。（５）また本発明に係る画像生成システム、プログラム及び情報記憶媒体は、
第１のキーフレームと第２のキーフレームの間の各フレームにおいて生成される画像に対して、第１のキーフレーム画像の影響度を時系列に減少させる制御及び第２のキーフレーム画像の影響度を時系列に増加させる制御の少なくとも一方を行うことを特徴とする。
【００２９】
ここにおいて各フレームにおいて生成される画像に対する第１のキーフレーム画像の影響度や第１のキーフレーム画像の影響度は例えば第１のキーフレーム画像や第２のキーフレーム画像の半透明情報等により制御するようにしてもよい。
【００３０】
例えば第１のキーフレーム画像を描画した後に第２のキーフレーム画像を描画する場合には、第２のキーフレーム画像の不透明度を時系列に増加させる制御を行うようにしてもよい。
【００３１】
本発明によれば、第１のキーフレームと第２のキーフレームの間の各フレームにおいて生成される画像は、第１のキーフレーム画像の影響度が強い画像から第２のキーフレーム画像の影響度が強い画像に時系列に変化させることができる。したがって第１のキーフレーム画像から第２のキーフレーム画像に連続的にスムーズに変化する画像を生成することが出来る。
（６）また本発明に係る画像生成システム、プログラム及び情報記憶媒体は、
第１のキーフレームと第２のキーフレームの間における第１のキーフレーム画像の拡大率と第２のキーフレーム画像の拡大率の少なくとも一方に関する情報を記憶し、
記憶されている第１のキーフレーム画像の拡大率に関する情報に基づき、第１のキーフレーム画像を拡大又は縮小させ、第１’の画像を生成する処理と、
記憶されている第２のキーフレーム画像の拡大率に関する情報に基づき、第２のキーフレーム画像を拡大又は縮小させ、第２’の画像を生成する処理の少なくとも一方の処理を行うことを特徴とする。
【００３２】
ここにおいて第１の画像の拡大率とは、たとえば所与のフレーム又は時間における第１の画像の拡大率でもよいし、所定期間における第１の画像の拡大率の遷移に関する情報でもよい。
【００３３】
また第２の画像の拡大率とは、たとえば所与のフレーム又は時間における第２の画像の拡大率でもよいし、所定期間における第２の画像の拡大率の遷移に関する情報でもよい。
【００３４】
本発明によれば第１のキーフレームと第２のキーフレームの間における各フレームにおいて、第１のキーフレーム画像から生成される第１’の画像と第２のキーフレーム画像から生成される第２’の画像との倍率の同期を正確にとることが出来る。
（７）また本発明に係る画像生成システム、プログラム及び情報記憶媒体は、
第１のキーフレームと第２のキーフレームの間における第１のキーフレーム画像の半透明情報と第２のキーフレーム画像の半透明情報の少なくとも一方の情報を記憶し、
記憶されている第１のキーフレーム画像の半透明情報に基づき、第１のキーフレーム画像を拡大又は縮小させた第１’の画像を描画する処理と、
記憶されている第２のキーフレーム画像の半透明情報情報に基づき、第２のキーフレーム画像を拡大又は縮小させた第２’の画像を描画する処理の少なくとも一方の処理を行うことを特徴とする。
【００３５】
ここにおいて半透明情報とは透明度又は不透明度情報でもよい。
【００３６】
また第１のキーフレーム画像の半透明情報とは、たとえば所与のフレーム又は時間における第１のキーフレーム画像の半透明情報でもよいし、所定期間における第１の画像の半透明情報の遷移に関する情報でもよい。
【００３７】
また第２のキーフレーム画像の半透明情報とは、たとえば所与のフレーム又は時間における第２のキーフレーム画像の半透明情報でもよいし、所定期間における第２のキーフレーム画像の半透明情報の遷移に関する情報でもよい。
【００３８】
本発明によれば第１のキーフレームと第２のキーフレームの間における各フレームにおいて、第１のキーフレーム画像から生成される第１’の画像と第２のキーフレーム画像から生成される第２’の画像と半透明情報の制御を簡単に行うことが出来る。
（８）また本発明に係る画像生成システム、プログラム及び情報記憶媒体は、
第１のキーフレームと第２のキーフレームの間における第１のキーフレーム画像の描画位置特定情報と第２のキーフレーム画像の描画位置特定情報の少なくとも一方に関する情報を記憶し、
記憶されている第１のキーフレーム画像の描画位置特定情報に基づき、第１のキーフレーム画像に基づき生成された第１’の画像の描画バッファに対する描画位置を決定する処理と、
記憶されている第２のキーフレーム画像の描画位置特定情報に基づき、第２のキーフレーム画像に基づき生成された第２’の画像の描画バッファに対する描画位置を決定する処理の少なくとも一方の処理を行うことを特徴とする。
【００３９】
ここにおいて第１のキーフレーム画像の描画位置特定情報とは、たとえば所与のフレーム又は時間における第１のキーフレーム画像の描画位置特定情報でもよいし、所定期間における第１のキーフレーム画像の描画位置特定情報の遷移に関する情報でもよい。
【００４０】
また第２のキーフレーム画像の描画位置特定情報とは、たとえば所与のフレーム又は時間における第２のキーフレーム画像の描画位置特定情報でもよいし、所定期間における第２のキーフレーム画像の描画位置特定情報の遷移に関する情報でもよい。
【００４１】
また描画位置特定情報とは、第１’の画像又は第２’の画像をフレームバッファに描画する際の描画位置を特定可能な情報ならなんでものよい。例えば第１’の画像又は第２’の画像の中心点のフレームバッファに対する位置座標でもよいし、第１’の画像又は第２’の画像から切り出すフレーム画像の範囲を特定可能な情報でもよい。
【００４２】
本発明によれば第１のキーフレームと第２のキーフレームの間における各フレームにおいて、第１のキーフレーム画像から生成される第１’の画像の描画位置と第２のキーフレーム画像から生成される第２’の画像の描画位置の位置あわせの同期を正確にとることが出来る。
（９）また本発明に係る画像生成システム、プログラム及び情報記憶媒体は、
第１のキーフレーム画像から第２のキーフレーム画像へ変化する際の視点移動にあわせて、第１のキーフレーム画像の描画位置特定情報と第２のキーフレーム画像の描画位置特定情報を時系列に記憶させることを特徴とする。
【００４３】
本発明によれば第１のキーフレーム画像の描画位置特定情報と第２のキーフレーム画像の描画位置特定情報を時系列に記憶させたパスを用いるという簡単な処理で、視点移動を伴う倍率変化の画像演出を行うことが出来る。
（１０）また本発明に係る画像生成システム、プログラム及び情報記憶媒体は、複数の視点移動パターンと、各視点移動パターンに対応したキーフレーム画像群の前記描画位置特定情報を記憶し、
所与のイベント又は外部からの入力に基づきいずれかの視点移動パターンを選択し、選択された視点移動パターンに応じてキーフレーム画像群及びキーフレーム画像群の描画位置特定情報を選択することを特徴とする。
【００４４】
本発明によれば所与のイベント又は外部からの入力に基づき視点移動パターンを変化させることが出来る。
（１１）また本発明に係る画像生成システム、プログラム及び情報記憶媒体は、
時系列に与えられた複数のキーフレーム画像ｎ−１、キーフレーム画像ｎ、キーフレーム画像ｎ＋１・・に対し、
キーフレーム画像ｎ−１とキーフレーム画像ｎについて前記キーフレーム画像合成処理を行った後に、キーフレーム画像ｎとキーフレーム画像ｎ＋１について前記キーフレーム画像合成処理を行うことを特徴とする。
【００４５】
本発明によれば時系列に与えられた複数のキーフレーム画像ｎ−１、キーフレーム画像ｎ、キーフレーム画像ｎ＋１・・間において差し替えの切れ目のないスムーズな画像変化を実現することが出来る。
（１２）また本発明に係る画像生成システム、プログラム及び情報記憶媒体は、時系列に与えられたキーフレーム画像１、・・・、キーフレーム画像ｎ−１、キーフレーム画像ｎにおいて、前記キーフレーム画像ｎの一部に前記キーフレーム画像１の絵柄を含むように用意し、
キーフレーム画像ｎ−１とキーフレーム画像ｎについて前記キーフレーム画像合成処理を行った後に、キーフレーム画像ｎとキーフレーム画像１について前記キーフレーム画像合成処理を行うことを特徴とする。
【００４６】
例えばキーフレーム画像ｎにふくまれたキーフレーム画像１の絵柄の部分に視点中心をおき、キーフレーム画像ｎからキーフレーム画像１変化させるようにしてもよい。
【００４７】
本発明によればキーフレーム画像１、・・・、キーフレーム画像ｎ−１、キーフレーム画像ｎ、キーフレーム画像１、・・・、キーフレーム画像ｎ−１、キーフレーム画像ｎと無限にループする画像演出を行うことが出来る。
【００４８】
【発明の実施の形態】
以下、本発明の好適な実施形態について図面を用いて説明する。
【００４９】
なお、以下に説明する本実施形態は、特許請求の範囲に記載された本発明の内容を何ら限定するものではない。また本実施形態で説明される構成の全てが本発明の解決手段として必須であるとは限らない。
【００５０】
１． 構成
図１に、本実施形態の画像生成システム（例えばゲームシステム）の機能ブロック図の一例を示す。
【００５１】
なお同図において本実施形態は、少なくとも処理部１００を含めばよく（或いは処理部１００と記憶部１７０、或いは処理部１００と記憶部１７０と情報記憶媒体１８０を含めばよく）、それ以外のブロック（例えば操作部１６０、表示部１９０、音出力部１９２、携帯型情報記憶装置１９４、通信部１９６）については、任意の構成要素とすることができる。
【００５２】
ここで処理部１００は、システム全体の制御、システム内の各ブロックへの命令の指示、ゲーム処理、画像処理、又は音処理などの各種の処理を行うものであり、その機能は、各種プロセッサ（ＣＰＵ、ＤＳＰ等）、或いはＡＳＩＣ（ゲートアレイ等）などのハードウェアや、所与のプログラム（ゲームプログラム）により実現できる。
【００５３】
操作部１６０は、プレーヤが操作データを入力するためのものであり、その機能は、レバー、ボタン、筐体などのハードウェアにより実現できる。
【００５４】
記憶部１７０は、メインメモリ（主記憶部等）１７２やフレームバッファ（描画バッファ等）１７４等を含み、処理部１００や通信部１９６などのワーク領域となるもので、その機能はＲＡＭなどのハードウェアにより実現できる。
【００５５】
情報記憶媒体（コンピュータにより使用可能な記憶媒体）１８０は、プログラムやデータなどの情報を格納するものであり、その機能は、光ディスク（ＣＤ、ＤＶＤ）、光磁気ディスク（ＭＯ）、磁気ディスク、ハードディスク、磁気テープ、或いはメモリ（ＲＯＭ）などのハードウェアにより実現できる。処理部１００は、この情報記憶媒体１８０に格納される情報に基づいて本発明（本実施形態）の種々の処理を行う。即ち情報記憶媒体１８０には、本発明（本実施形態）の手段（特に処理部１００に含まれるブロック）を実行するための情報（プログラム或いはデータ）が格納される。
【００５６】
なお、情報記憶媒体１８０に格納される情報の一部又は全部は、システムへの電源投入時等に記憶部１７０に転送されることになる。また情報記憶媒体１８０に記憶される情報は、本発明の処理を行うためのプログラム、画像データ、音データ、表示物の形状データ、テーブルデータ、リストデータ、本発明の処理を指示するための情報、その指示に従って処理を行うための情報等の少なくとも１つを含むものである。
【００５７】
表示部１９０は、本実施形態により生成された画像を出力するものであり、その機能は、ＣＲＴ、ＬＣＤ、或いはＨＭＤ（ヘッドマウントディスプレイ）などのハードウェアにより実現できる。
【００５８】
音出力部１９２は、本実施形態により生成された音を出力するものであり、その機能は、スピーカなどのハードウェアにより実現できる。
【００５９】
携帯型情報記憶装置１９４は、プレーヤの個人データやセーブデータなどが記憶されるものであり、この携帯型情報記憶装置１９４としては、メモリカードや携帯型ゲーム装置などを考えることができる。
【００６０】
通信部１９６は、外部（例えばホスト装置や他の画像生成システム）との間で通信を行うための各種の制御を行うものであり、その機能は、各種プロセッサ、或いは通信用ＡＳＩＣなどのハードウェアや、プログラムなどにより実現できる。
【００６１】
なお本発明（本実施形態）の手段を実行するためのプログラム或いはデータは、ホスト装置（サーバ）が有する情報記憶媒体からネットワーク及び通信部１９６を介して情報記憶媒体１８０に配信するようにしてもよい。このようなホスト装置（サーバ）の情報記憶媒体の使用も本発明の範囲内に含まれる。
【００６２】
処理部１００は、画像生成部１３０、音生成部１５０を含む。
【００６３】
画像生成部１３０は、座標変換、クリッピング処理、透視変換、或いは光源計算などの種々のジオメトリ処理（３次元演算）や、ジオメトリ処理後のオブジェクト（モデル）を、フレームバッファに描画する描画処理を行うようにしてもよい。
【００６４】
また画像生成部１３０は、キーフレーム画像合成処理部１４０を含む。キーフレーム画像合成処理部１４０は、記憶された所与の元画像を拡大する過程の倍率の異なる複数のキーフレーム画像にもとづいて、第１のキーフレームと第１のキーフレームの次のキーフレームである第２のキーフレームの間の所与のフレームにおいて、第１のキーフレームに対応した第１のキーフレーム画像を元画像に対して所与の倍率Ｓになるよう拡大した第１’の画像と、第２のキーフレームに対応した第２のキーフレーム画像を元画像に対して前記所与の倍率Ｓと同じ倍率になるよう縮小した第２’の画像とを合成して所与のフレームの画像を生成するキーフレーム画像合成処理を行うようにしてもよい。
【００６５】
また記憶された第１のキーフレームに対応した第１のキーフレーム画像と、第１のキーフレーム画像とは倍率の異なる画像であって、第１のキーフレームの次のキーフレームである第２のキーフレームに対応した第２のキーフレーム画像にもとづいて、第１のキーフレームと第２のキーフレームの間の所与のフレームにおいて、第１のキーフレーム画像を元画像に対して所与の倍率Ｓになるように拡大又は縮小した第１’の画像と、第２のキーフレーム画像を前記所与の倍率Ｓと同じ倍率になるように拡大又は縮小した第２’の画像とを合成して所与のフレームの画像を生成するキーフレーム画像合成処理を行うようにしてもよい。
【００６６】
音生成部１５０は、ゲーム処理部１１０からの指示等にしたがって各種の音処理を行い、ＢＧＭ、効果音、又は音声などの音を生成し、音出力部１９２に出力する。
【００６７】
なお、画像生成部１３０、音生成部１５０の機能は、その全てをハードウェアにより実現してもよいし、その全てをプログラムにより実現してもよい。或いは、ハードウェアとプログラムの両方により実現してもよい。
【００６８】
２． 本実施形態の特徴
図２、図３は本実施の形態の特徴について説明するための図である。
【００６９】
図２は元画像であり、図３の２１０〜２５０は元画像がズーム表示される過程の画像である。
【００７０】
ここで２１０，２３０、２５０はキーフレーム画像（例えばキーフレームに対応して予め用意された画像）であり、２２０、２４０は前後のキーフレーム画像に基づいてリアルタイムに生成された画像である。
【００７１】
本実施の形態では元画像を拡大する過程２１０〜２５０の画像を生成する際に、倍率の異なる複数のキーフレーム画像２１０、２３０、２５０を用意する。そして、キーフレーム間のフレームの画像２２０、２４０を前後のキーフレーム画像２１０、２３０及び前後のキーフレーム画像２３０、２５０に基づいてキーフレーム画像合成処理をおこないリアルタイムに生成する。
【００７２】
図４はキーフレーム画像合成処理について説明するための図である。
【００７３】
ここで２１０は第１のキーフレームの倍率（Ｓ１）に対応して用意されている第１のキーフレーム画像であり、２３０は第２のキーフレームの倍率（Ｓ３）に対応して用意されている第２のキーフレーム画像である。２１２及び２３２はそれぞれ第１のキーフレーム画像及び第２のキーフレーム画像の中心点であり、第１のキーフレーム画像及び第２のキーフレーム画像を拡大又は縮小する際の拡大中心や縮小中心となる。
【００７４】
係る場合に第１のキーフレームと第２のキーフレーム間のフレームの画像２２０を以下のようにして生成する。ここで画像２２０の倍率をＳ２（Ｓ１＜Ｓ２＜Ｓ３）とする。
【００７５】
第１のキーフレーム画像２１０を中心点２１２を中心として倍率Ｓ２になるように拡大した第１’の画像２１４を生成する。また第２のキーフレーム画像２３０を中心点２３２を中心として倍率Ｓ２になるように縮小した第２’の画像２３４を生成する。ここで第１’の画像２１４と第２’の画像２３４は同じ倍率（Ｓ２）を有している。
【００７６】
ここで第１’の画像２１４と第２’の画像２３４を画像を重ねた場合にずれないように描画バッファ（例えばフレームバッファ）に対する位置あわせを行い、第１’の画像２１４を描画バッファ（例えばフレームバッファ）に描画したのち、第２’の画像２３４を描画バッファ（例えばフレームバッファ）に半透明描画することにより第１のキーフレームと第２のキーフレーム間のフレームの画像２２０を生成する。
【００７７】
本実施の形態では、各フレームにおいてキーフレーム画像を描画バッファ（例えばフレームバッファ）に描画する際の描画バッファ（例えばフレームバッファやフレーム枠）に対する描画位置を特定する情報（描画位置特定情報）を持たせておく。たとえば描画位置特定情報として、キーフレーム画像の中心点の描画バッファ（例えばフレームバッファ）に対する座標値や、キーフレーム画像の中心点の描画バッファ（例えばフレームバッファ）の中心点に対する相対位置情報等を持たせるようにしてもよい。
【００７８】
すなわち第１’の画像２１４の中心点２１２が描画バッファ（例えばフレームバッファやフレーム枠）の中心点２１８に対してどのような位置関係（ｌ１参照）にあるか、また第２’の画像２３４の中心点２３２がフレームバッファ（又はフレーム枠）の中心点２３８に対してどのような位置関係（ｌ２参照）にあるかについての情報を有する。
【００７９】
そして係る情報（１１、ｌ２）に基づいて第１’の画像及び第２’の画像の描画バッファ（例えばフレームバッファ）に対する描画位置を決定する。
【００８０】
このようにすることで第１’の画像と第２’の画像の倍率、位置をあわせて半透明合成処理を行うことが出来る。
【００８１】
次に具体的なズーム画像の生成例について説明する。
【００８２】
図５、図６は元画像とキーフレーム画像の設定例について説明するための図である。元画像３００を例えば目の部分３０２に向かってズーム表示を行う際に、（倍率の異なる６段階のフレームをキーフレームとして選択する。例えばフルショットの画像（キーフレーム画像１）３１０を出力するキーフレームＫ１、ウエストショットの画像（キーフレーム画像２）３２０を出力するキーフレームＫ２、バストショットの画像（キーフレーム画像３）３２０を出力するキーフレームＫ３、アップショットの画像（キーフレーム画像４）３４０を出力するキーフレームＫ４、クローズアップショットの画像（キーフレーム画像５）３５０を出力するキーフレームＫ５、ヴェリークローズアップショットの画像（キーフレーム画像６）３６０を出力するキーフレームＫ６をキーフレームとして決定する。
【００８３】
そして図５の３１０〜３６０に示すように前記倍率の異なる６個のキーフレーム画像をすべて同一密度（例えば縦５１２×横５１２）で描く。なお同一密度で描かれた絵はクオリティが同一であるといえる。
【００８４】
図７はキーフレーム画像に基づき元画像のズーム表示を行うための具体的な画像生成処理の一例について説明するためのタイムチャート図である。
【００８５】
縦軸は時間（インター）軸である。
【００８６】
本タイムチャートは、各フレームの画像を生成するために使用するキーフレーム画像と、各フレームにおいて使用するキーフレーム画像の拡大率及び半透明情報（半透明合成処理をおこなう際の不透明度の値）を表している。
【００８７】
例えば４０８はキーフレームＫ１ではキーフレーム画像１（図６の３１０）を拡大率１００％で拡大した第１’の画像を不透明度１００で描画バッファ（例えばフレームバッファ）に描画して、その後のキーフレーム画像２（図６の３２０）を拡大率４０％で拡大（縮小）した第２’の画像を不透明度０％（透明であることを意味する）で描画バッファ（例えばフレームバッファ）に描画する処理をおこなうことを意味している。したがってキーフレームＫ１では第１の画像（図６の３１０）を拡大率１００％で拡大した第１’の画像が出力画像として生成されることになる。
【００８８】
また例えば４１２は、キーフレームＫ１とキーフレームＫ２の間の所与のフレームの画像を生成する際に、キーフレーム画像１を拡大率１３５．７％で拡大した第１’の画像を不透明度１００％で描画したのち、キーフレーム画像２を拡大率５４．３％で拡大（縮小）した第２’の画像を６６．７％で半透明描画を行うことを意味している。
【００８９】
このように本実施の形態では、例えば第１のキーフレームとしてＫ１、第１のキーフレーム画像としてキーフレーム画像１、第２のキーフレームとしてＫ２、第２のキーフレーム画像としてキーフレーム画像２を用いてキーフレーム画像合成処理をおこなうことで、例えば前記４０８や４１２のように、第１のキーフレームと第１のキーフレームの次のキーフレームである第２のキーフレームの間の所与のフレームにおいて、第１のキーフレームに対応した第１のキーフレーム画像を元画像に対して所与の倍率Ｓになるよう拡大した第１’の画像と、第２のキーフレームに対応した第２のキーフレーム画像を元画像に対して前記所与の倍率Ｓと同じ倍率になるよう縮小した第２’の画像とを合成して所与のフレームの画像を生成するキーフレーム画像合成処理を行うことが出来る。
【００９０】
また第１のキーフレームと第２のキーフレームの間であって、第１のキーフレームにつづく所定区間４１０の連続する複数のフレームにおいて前記合成処理をおこなうようにしてもよい。
【００９１】
第１のキーフレーム以降のフレームでは第１の画像は拡大率が１００％を超えて徐々に上がっていくため画像が粗くなっていく。また第２の画像は縮小による画素のつぶれが生じる。従ってこの区間で、第１の画像の拡大による粗さと第２の画像の縮小によるつぶれが最適なバランスで補間されるように、合成時の半透明情報を設定することで（例えば第２の画像の不透明度を設定することで）、合成された画像のクオリティを保ちながら連続的に第１の画像から第２の画像に移行させることが出来る。
【００９２】
また図７に示すように連続するキーフレーム間におけるキーフレーム画像の拡大率の情報を例えばテーブル情報として記憶し、記憶されているキーフレーム画像の拡大率に関する情報に基づき、キーフレーム画像を拡大又は縮小させ描画する画像を生成するようにしてもよい。
【００９３】
また連続するキーフレーム間におけるキーフレーム画像の半透明情報を例えばテーブル情報として記憶し、記憶されているキーフレーム画像の半透明情報に基づき、キーフレーム画像に基づき生成した画像を描画バッファに描画するようにしてもよい。
【００９４】
図８はキーフレーム画像に設定されている描画位置特定情報の一例について説明するための図である。
【００９５】
図８に示すように連続するキーフレーム間におけるキーフレーム画像の描画位置特定情報を例えばテーブル情報として記憶し、記憶されている描画位置特定情報に基づき、キーフレーム画像に基づき生成した画像の描画バッファに対する描画位置を決定するようにしてもよい。
【００９６】
描画位置特定情報５１０は、キーフレーム画像の中心点の描画バッファ（又はフレーム枠）の中心点に対する位置情報で与えられている。なおこのズーム例ではｘ軸方向についてはキーフレーム画像の中心点の描画バッファ（又はフレーム枠）の中心点に対する位置関係は変化しないので、ｙ軸方向についてのみ保持している。
【００９７】
ここでｙ座標は描画バッファ（又はフレーム枠）のｙ軸方向のドット単位の位置情報である。±０が画面中央のｙ座標位置を表しており、画面下方向が＋表示となり、画面上方向が−表示となる。
【００９８】
例えばキーフレームＫ２ではキーフレーム画像を拡大率２５０％で拡大させた画像の中心点を描画バッファ（又はフレーム枠）のｙ＝＋１５０の点に配置して描画する（ｘ＝０の点に描画するようにしてもよい）。
【００９９】
このように２つのキーフレーム画像を半透明合成する場合は、予め２つのキーフレーム画像の絵柄がぴったりかさなるように描画位置特定情報を設定しておくとよい。
【０１００】
また本実施の形態では無限ズーム演出をおこなうことが出来る。
【０１０１】
図９（Ａ）〜（Ｃ），図１０（Ａ）〜（Ｃ）は無限ズーム演出の一例について説明するための図である。図９（Ａ）〜（Ｃ），図１０（Ａ）〜（Ｃ）は、元画像（ここでは図９（Ａ）の画像）をズーム表示するために、それぞれキーフレーム１、・・・キーフレーム６に対応して用意されたキーフレーム画像である。
【０１０２】
ここでキーフレーム画像６として、画像の一部に元画像の絵柄６１０（図９（Ａ）参照）を含む画像を用意する（図１０（Ｃ）参照）。
【０１０３】
そしてキーフレーム６の次のキーフレームのキーフレーム画像として再びキーフレーム画像１を用いて、上記で説明したキーフレーム画像合成処理により作成することで、図１０（Ｃ）の画像がズームされて図９（Ａ）の画像になる過程の画像を生成することが出来る。
【０１０４】
３． 本実施の形態の処理
次に図１１及び図１２をもちいて無限ズーム処理の流れの一例について説明する。図１１は無限ズーム処理のメインルーチンの処理フローチャート図である。
【０１０５】
まず変数ｉ、ｋ１、ｋ２の初期設定を行う（ステップＳ１０）。ここで変数ｉは生成する画像のフレーム番号を特定するための変数であり、ｋ１は第１のキーフレームとして処理する画像を特定する番号であり、ｋ２は第２のキーフレーム画像として処理する画像を特定する番号である。ここでキーフレーム画像として使用する画像として、図６の３１０〜３６０を用意し、それぞれ画像番号１〜６とする。
【０１０６】
次にｉをインクリメントする（ステップＳ２０）。
【０１０７】
次にズーム情報テーブルからフレームｉにおけるキーフレーム画像ｋ１の拡大率Ｓｋ１（ｉ）、不透明度αｋ１（ｉ）、描画位置Ｌｋ１（ｉ）を読み出す（ステップＳ３０）。ここでズーム情報テーブルは、例えば各フレーム（又は時間）（ｉ）に対応させて、使用するキーフレーム画像の拡大率Ｓｋ１（ｉ）、不透明度αｋ１（ｉ）、描画位置Ｌｋ１（ｉ）に関する情報を含んでいる（図７、図８参照）。
【０１０８】
次にキーフレーム画像ｋ１の拡大率Ｓｋ１（ｉ）で拡大し、フレームバッファに対して、描画位置Ｌｋ１（ｉ）、不透明度αｋ１（ｉ）で描画する（ステップＳ４０）。
【０１０９】
ここでキーフレーム画像ｋ１の拡大率Ｓｋ１（ｉ）≧１００％でないならば、ステップＳ２０に戻り再びステップＳ２０からＳ５０の処理を繰り返す（ステップＳ５０）。ステップＳ２０からＳ５０の処理によって、図７の区間４０６のフレームの画像が生成される。
【０１１０】
また拡大率Ｓｋ１（ｉ）≧１００％であれば、オーバーラップ処理を行う（ステップＳ５０、Ｓ６０）。オーバーラップ処理の具体的内容は図１２のフローチャートで説明する。オーバーラップ処理によって、図７の区間４１０、４２０、４３０、４４０，４５０のフレーム画像が生成される。
【０１１１】
次にｉをインクリメントする（ステップＳ７０）。
【０１１２】
次にズーム情報テーブルからフレームｉにおけるキーフレーム画像ｋ２の拡大率Ｓｋ２（ｉ）、不透明度αｋ２（ｉ）、描画位置Ｌｋ２（ｉ）を読み出す（ステップＳ８０）。
【０１１３】
次にキーフレーム画像ｋ２の拡大率Ｓｋ２（ｉ）で拡大し、フレームバッファに対して、描画位置Ｌｋ２（ｉ）、不透明度αｋ２（ｉ）で描画する（ステップＳ９０）。
【０１１４】
ここでキーフレーム画像ｋ２の拡大率Ｓｋ２（ｉ）≧１００％でないならば、ステップＳ７０に戻り再びステップＳ７０からＳ１００の処理を繰り返す（ステップＳ１００）。ステップＳ７０からＳ１００の処理によって、図７の区間４１６、４２６、４３６，４４６，４５６のフレームの画像が生成される。
【０１１５】
そしてｋ１，ｋ２をインクリメントする処理をおこなう（ステップＳ１１０）。
【０１１６】
そして第１のキーフレーム画像番号ｋ１＝Ｎである場合には、ｋ１を１に補正する処理をおこなう（ステップＳ１２０，Ｓ１３０）。例えば今回のように６枚のキーフレーム画像を用意している場合にはＮ＝７と設定しておくことにより、第１のキーフレーム画像番号が７になった場合に１に補正することが可能となる。
【０１１７】
そして第２のキーフレーム画像番号ｋ２＝Ｎである場合には、ｋ２を１に補正する処理をおこなう（ステップＳ１４０，Ｓ１５０）。例えば今回のように６枚のキーフレーム画像を用意している場合にはＮ＝７と設定しておくことにより、第２のキーフレーム画像番号が７になった場合に１に補正することが可能となる。
【０１１８】
ステップＳ１２０〜Ｓ１５０の処理によってキーフレーム画像を画像６（図６の３６０）から画像１（図６の３１０）に繋げることが出来る。
【０１１９】
その後再びステップＳ６０からの処理を繰り返す。
【０１２０】
図１２は無限ズーム処理のオーバーラップ処理ルーチンの処理フローチャート図である。
【０１２１】
まずｉをインクリメントする（ステップＳ２１０）。
【０１２２】
次にズーム情報テーブルからフレームｉにおけるキーフレーム画像ｋ２、ｋ２の拡大率Ｓｋ１（ｉ）、Ｓｋ２（ｉ）、不透明度αｋ１（ｉ）、αｋ２（ｉ）、描画位置Ｌｋ１（ｉ）、Ｌｋ２（ｉ）を読み出す（ステップＳ２２０）。
【０１２３】
次にキーフレーム画像ｋ１の拡大率Ｓｋ１（ｉ）で拡大し、フレームバッファに対して、描画位置Ｌｋ１（ｉ）、不透明度αｋ１（ｉ）で描画する（ステップＳ２３０）。
【０１２４】
次にキーフレーム画像ｋ２の拡大率Ｓｋ２（ｉ）で拡大し、フレームバッファに対して、描画位置Ｌｋ２（ｉ）、不透明度αｋ２（ｉ）で描画する（ステップＳ２４０）。
【０１２５】
ここでキーフレーム画像ｋ２の不透明度αｋ２（ｉ）＝１００％でないならば、ステップＳ２１０に戻り再びステップＳ２１０からＳ２５０の処理を繰り返す（ステップＳ２５０）。
【０１２６】
４． ハードウェア構成
次に、本実施形態を実現できるハードウェアの構成の一例について図１３を用いて説明する。
【０１２７】
メインプロセッサ９００は、ＣＤ９８２（情報記憶媒体）に格納されたプログラム、通信インターフェース９９０を介して転送されたプログラム、或いはＲＯＭ９５０（情報記憶媒体の１つ）に格納されたプログラムなどに基づき動作し、ゲーム処理、画像処理、音処理などの種々の処理を実行する。
【０１２８】
コプロセッサ９０２は、メインプロセッサ９００の処理を補助するものであり、高速並列演算が可能な積和算器や除算器を有し、マトリクス演算（ベクトル演算）を高速に実行する。例えば、オブジェクトを移動させたり動作（モーション）させるための物理シミュレーションに、マトリクス演算などの処理が必要な場合には、メインプロセッサ９００上で動作するプログラムが、その処理をコプロセッサ９０２に指示（依頼）する。
【０１２９】
ジオメトリプロセッサ９０４は、座標変換、透視変換、光源計算、曲面生成などのジオメトリ処理を行うものであり、高速並列演算が可能な積和算器や除算器を有し、マトリクス演算（ベクトル演算）を高速に実行する。例えば、座標変換、透視変換、光源計算などの処理を行う場合には、メインプロセッサ９００で動作するプログラムが、その処理をジオメトリプロセッサ９０４に指示する。
【０１３０】
データ伸張プロセッサ９０６は、圧縮された画像データや音データを伸張するデコード処理を行ったり、メインプロセッサ９００のデコード処理をアクセレートする処理を行う。これにより、オープニング画面、インターミッション画面、エンディング画面、或いはゲーム画面などにおいて、ＭＰＥＧ方式等で圧縮された動画像を表示できるようになる。なお、デコード処理の対象となる画像データや音データは、ＲＯＭ９５０、ＣＤ９８２に格納されたり、或いは通信インターフェース９９０を介して外部から転送される。
【０１３１】
描画プロセッサ９１０は、ポリゴンや曲面などのプリミティブ（プリミティブ面）で構成されるオブジェクトの描画（レンダリング）処理を高速に実行するものである。オブジェクトの描画の際には、メインプロセッサ９００は、ＤＭＡコントローラ９７０の機能を利用して、オブジェクトデータを描画プロセッサ９１０に渡すとともに、必要であればテクスチャ記憶部９２４にテクスチャを転送する。すると、描画プロセッサ９１０は、これらのオブジェクトデータやテクスチャに基づいて、Ｚバッファなどを利用した隠面消去を行いながら、オブジェクトをフレームバッファ９２２に高速に描画する。また、描画プロセッサ９１０は、αブレンディング（半透明処理）、デプスキューイング、ミップマッピング、フォグ処理、バイリニア・フィルタリング、トライリニア・フィルタリング、アンチエリアシング、シェーディング処理なども行うことができる。そして、１フレーム分の画像がフレームバッファ９２２に書き込まれると、その画像はディスプレイ９１２に表示される。
【０１３２】
サウンドプロセッサ９３０は、多チャンネルのＡＤＰＣＭ音源などを内蔵し、ＢＧＭ、効果音、音声などの高品位のゲーム音を生成する。生成されたゲーム音は、スピーカ９３２から出力される。
【０１３３】
ゲームコントローラ９４２（レバー、ボタン、筺体、パッド型コントローラ又はガン型コントローラ等）からの操作データや、メモリカード９４４からのセーブデータ、個人データは、シリアルインターフェース９４０を介してデータ転送される。
【０１３４】
ＲＯＭ９５０にはシステムプログラムなどが格納される。なお、業務用ゲームシステムの場合には、ＲＯＭ９５０が情報記憶媒体として機能し、ＲＯＭ９５０に各種プログラムが格納されることになる。なお、ＲＯＭ９５０の代わりにハードディスクを利用するようにしてもよい。
【０１３５】
ＲＡＭ９６０は、各種プロセッサの作業領域として用いられる。
【０１３６】
ＤＭＡコントローラ９７０は、プロセッサ、メモリ（ＲＡＭ、ＶＲＡＭ、ＲＯＭ等）間でのＤＭＡ転送を制御するものである。
【０１３７】
ＣＤドライブ９８０は、プログラム、画像データ、或いは音データなどが格納されるＣＤ９８２（情報記憶媒体）を駆動し、これらのプログラム、データへのアクセスを可能にする。
【０１３８】
通信インターフェース９９０は、ネットワークを介して外部との間でデータ転送を行うためのインターフェースである。この場合に、通信インターフェース９９０に接続されるネットワークとしては、通信回線（アナログ電話回線、ＩＳＤＮ）、高速シリアルバスなどを考えることができる。そして、通信回線を利用することでインターネットを介したデータ転送が可能になる。また、高速シリアルバスを利用することで、他の画像生成システムとの間でのデータ転送が可能になる。
【０１３９】
なお、本発明の各手段は、その全てを、ハードウェアのみにより実現（実行）してもよいし、情報記憶媒体に格納されるプログラムや通信インターフェースを介して配信されるプログラムのみにより実現してもよい。或いは、ハードウェアとプログラムの両方により実現してもよい。
【０１４０】
そして、本発明の各手段をハードウェアとプログラムの両方により実現する場合には、情報記憶媒体には、本発明の各手段をハードウェアを利用して実現するためのプログラムが格納されることになる。より具体的には、上記プログラムが、ハードウェアである各プロセッサ９０２、９０４、９０６、９１０、９３０等に処理を指示するとともに、必要であればデータを渡す。そして、各プロセッサ９０２、９０４、９０６、９１０、９３０等は、その指示と渡されたデータとに基づいて、本発明の各手段を実現することになる。
【０１４１】
図１４（Ａ）に、本実施形態を業務用ゲームシステムに適用した場合の例を示す。プレーヤは、ディスプレイ１１００上に映し出されたゲーム画像を見ながら、レバー１１０２、ボタン１１０４等を操作してゲームを楽しむ。内蔵されるシステムボード（サーキットボード）１１０６には、各種プロセッサ、各種メモリなどが実装される。そして、本発明の各手段を実行するための情報（プログラム或いはデータ）は、システムボード１１０６上の情報記憶媒体であるメモリ１１０８に格納される。以下、この情報を格納情報と呼ぶ。
【０１４２】
図１４（Ｂ）に、本実施形態を家庭用のゲームシステムに適用した場合の例を示す。プレーヤはディスプレイ１２００に映し出されたゲーム画像を見ながら、ゲームコントローラ１２０２、１２０４を操作してゲームを楽しむ。この場合、上記格納情報は、本体システムに着脱自在な情報記憶媒体であるＣＤ１２０６、或いはメモリカード１２０８、１２０９等に格納されている。
【０１４３】
図１４（Ｃ）に、ホスト装置１３００と、このホスト装置１３００とネットワーク１３０２（ＬＡＮのような小規模ネットワークや、インターネットのような広域ネットワーク）を介して接続される端末１３０４-1〜１３０４-nとを含むシステムに本実施形態を適用した場合の例を示す。この場合、上記格納情報は、例えばホスト装置１３００が制御可能な磁気ディスク装置、磁気テープ装置、メモリ等の情報記憶媒体１３０６に格納されている。端末１３０４-1〜１３０４-nが、スタンドアロンでゲーム画像、ゲーム音を生成できるものである場合には、ホスト装置１３００からは、ゲーム画像、ゲーム音を生成するためのゲームプログラム等が端末１３０４-1〜１３０４-nに配送される。一方、スタンドアロンで生成できない場合には、ホスト装置１３００がゲーム画像、ゲーム音を生成し、これを端末１３０４-1〜１３０４-nに伝送し端末において出力することになる。
【０１４４】
なお、図１１（Ｃ）の構成の場合に、本発明の各手段を、ホスト装置（サーバ）と端末とで分散して実行するようにしてもよい。また、本発明の各手段を実行するための上記格納情報を、ホスト装置（サーバ）の情報記憶媒体と端末の情報記憶媒体に分散して格納するようにしてもよい。
【０１４５】
またネットワークに接続する端末は、家庭用ゲームシステムであってもよいし業務用ゲームシステムであってもよい。そして、業務用ゲームシステムをネットワークに接続する場合には、業務用ゲームシステムとの間で情報のやり取りが可能であるとともに家庭用ゲームシステムとの間でも情報のやり取りが可能な携帯型情報記憶装置（メモリカード、携帯型ゲーム装置）を用いることが望ましい。
【０１４６】
なお本発明は、上記実施形態で説明したものに限らず、種々の変形実施が可能である。
【０１４７】
また、本発明のうち従属請求項に係る発明においては、従属先の請求項の構成要件の一部を省略する構成とすることもできる。また、本発明の１の独立請求項に係る発明の要部を、他の独立請求項に従属させることもできる。
【０１４８】
本実施の形態ではズーム時の視点移動パターンが１種類である場合を例にとり説明したがこれに限られない。例えばズーム時に複数の視点移動パターンが選択可能である場合でもよい。この場合には各視点移動パターン毎にキーフレームを設定して、設定されたキーフレームについて、各視点移動パターンに応じた描画位置特定情報をもたせるようにすればよい。
【０１４９】
例えば本実施の形態では所与の元画像を拡大する過程の画像を生成する場合を例にとり説明したがこれに限られない。例えば元画像の倍率の変化する一連の画像を生成する場合でもよい。
【０１５０】
例えば本実施の形態では１つの視点移動パターンの例について説明したが、複数の視点移動パターンが設定されている場合でもよい。
【０１５１】
また、本発明は種々のゲーム（格闘ゲーム、シューティングゲーム、ロボット対戦ゲーム、スポーツゲーム、競争ゲーム、ロールプレイングゲーム、音楽演奏ゲーム、ダンスゲーム等）に適用できる。
【０１５２】
また本発明は、業務用ゲームシステム、家庭用ゲームシステム、多数のプレーヤが参加する大型アトラクションシステム、シミュレータ、マルチメディア端末、ゲーム画像を生成するシステムボード等の種々の画像生成システム（ゲームシステム）に適用できる。
【図面の簡単な説明】
【図１】本実施形態の画像生成システムの機能ブロック図の一例である。
【図２】本実施の形態の特徴について説明するための図である。
【図３】本実施の形態の特徴について説明するための図である。
【図４】本実施の形態のキーフレーム画像合成処理について説明するための図である。
【図５】本実施の形態の元画像とキーフレーム画像の設定例について説明するための図である。
【図６】本実施の形態の元画像とキーフレーム画像の設定例について説明するための図である。
【図７】本実施の形態においてキーフレーム画像に基づき元画像のズーム表示を行うための具体的な画像生成処理の一例について説明するための図である。
【図８】本実施の形態のキーフレーム画像に設定されている描画位置特定情報の一例について説明するための図である。
【図９】図９（Ａ）〜（Ｃ）は無限ズーム演出の一例について説明するための図である。
【図１０】図１０（Ａ）〜（Ｃ）は無限ズーム演出の一例について説明するための図である。
【図１１】本実施の形態の無限ズーム処理のメインルーチンの処理フローチャート図である。
【図１２】本実施の形態の無限ズーム処理のオーバーラップ処理ルーチンの処理フローチャート図である。
【図１３】本実施形態を実現できるハードウェアの構成の一例を示す図である。
【図１４】図１４（Ａ）、（Ｂ）、（Ｃ）は、本実施形態が適用される種々の形態のシステムの例を示す図である。
【図１５】従来のズーム表示例について説明するための図である。
【図１６】従来のズーム表示例について説明するための図である。
【符号の説明】
１００ 処理部
１３０ 画像生成部
１４０ キーフレーム画像合成処理部
１５０ 音生成部
１６０ 操作部
１７０ 記憶部
１７２ メインメモリ（主記憶部）
１７４ フレームバッファ（描画バッファ）
１８０ 情報記憶媒体
１９０ 表示部
１９２ 音出力部
１９４ 携帯型情報記憶装置
１９６ 通信部[0001]
BACKGROUND OF THE INVENTION
The present invention relates to an image generation system, a program, and an information storage medium.
[0002]
[Background Art and Problems to be Solved by the Invention]
Conventionally, a given image is zoomed and displayed.
[0003]
In such zoom display, for example, an image of each frame in the process of enlarging is prepared in advance as image data, and these can be sequentially replaced and displayed to create a high-quality zoom image. However, since the image for each frame must be stored in advance, the amount of data to be stored becomes enormous.
[0004]
In addition, by preparing an original image of a large size (with a large number of pixels) in advance and generating an image in which a predetermined range of images is cut out from the original image or an image obtained by reducing the original image as an image of each frame, High zoom image can be created. However, if an original image having a large amount of data is not prepared, the amount of data to be retained cannot be maintained, and the amount of data to be retained becomes enormous.
[0005]
In order to reduce the amount of data to be stored in advance, for example, as shown in 710 to 760 in FIG. However, as shown at 710 to 760 in FIG. 15, when the image is simply enlarged, the quality of the image decreases as the enlargement ratio increases, resulting in a coarse image with noticeable jaggy.
[0006]
Further, for example, as shown by 810 to 860 in FIG. 16, if enlargement is performed while interpolating between pixels, the occurrence of jaggies can be prevented, but the image becomes blurred.
[0007]
The present invention has been made in view of the above problems, and an object of the present invention is to provide an image generation system and program capable of performing high-quality magnification change display (for example, zoom display) with a small amount of data. And providing an information storage medium.
[0008]
[Means for Solving the Problems]
(1) The present invention is an image generation system for generating an image,
Means for storing a plurality of key frame images having different magnifications in a process of enlarging a given original image;
In a given frame between a first key frame and a second key frame that is the next key frame of the first key frame,
A first key frame image corresponding to the first key frame and a second key frame corresponding to the second key frame; and a first key frame image corresponding to the second key frame. Means for performing a key frame image synthesis process for generating an image of a given frame by synthesizing an image with a second ′ image reduced to the same magnification as the given magnification S with respect to the original image;
It is characterized by including.
[0009]
Further, the program according to the present invention is a program executable by a computer (a program embodied in an information storage medium or a carrier wave), and causes the computer to realize the above means (makes the computer function as the above means). And An information storage medium according to the present invention is an information storage medium readable (usable) by a computer, and includes a program for causing the computer to realize the above means (functioning the computer as the above means). It is said.
[0010]
Here, the magnification is a ratio of the first 'image and the second' image to the original image.
[0011]
For example, in the case of including a case of 1 times or less in the enlargement, it is within the scope of the present invention to perform enlargement instead of reduction.
[0012]
Further, as the synthesis of the 1 'image and the 2' image, for example, a translucent synthesis process or the like can be performed. Translucent compositing is a method of drawing an image using translucent information. For example, translucent blending (α blending) using semitransparent information, addition semitransparent (α addition) using semitransparent information, semitransparent information There is a composition processing method such as subtractive translucency (α subtraction) using transparency information.
[0013]
Here, the translucent information is equivalent to the transparency information and is information stored in association with each image unit or each pixel, and is set for each definition point of the object, for example, plus alpha information other than color information ( Information indicating transparency (equivalent to opacity or translucency) as (α value).
[0014]
For example, in the case of α blending, the following synthesis processing using translucent information (α) is performed.
[0015]
RQ = (1-α) × R1 + α × R2
GQ = (1-α) × G1 + α × G2
BQ = (1-α) × B1 + α × B2
Here, R1, G1, and B1 are R, G, and B components of the color (luminance) of the image after geometry processing already drawn in the drawing buffer, and R2, G2, and B2 are the colors of the drawn image. R, G and B components. RQ, GQ, and BQ are R, G, and B components of the color of the image generated by α blending. Here, as the α value, the α value of a given image after the geometry processing may be used, or the α value of the drawn original image may be used.
[0016]
In the present invention, the first key frame image and the second key frame are synthesized by synthesizing the first key frame image and the first key image and the second key frame and the second key image. Since the intermediate image is generated, it is possible to generate a smooth zoom image without a break between replacement of the first key frame image and the second key frame image.
(2) Further, an image generation system, a program, and an information storage medium according to the present invention are:
Enlargement when generating the first ′ image from the first key frame image so that the given magnification S increases in time series in each frame between the first key frame and the second key frame The rate is increased in time series, and the reduction rate when generating the second ′ image from the second key frame image is controlled to decrease in time series.
[0017]
For example, in a case where the case of 1 times or less is included in the enlargement rate, the case where the enlargement rate when generating the second ′ image from the second key frame image is increased in time series is also within the scope of the present invention. is there.
[0018]
According to the present invention, it is possible to generate an image in which the original image is continuously zoomed in each frame between the first key frame and the second key frame.
(3) The present invention is an image generation system for generating an image,
The first key frame image corresponding to the first key frame and the first key frame image are images having different magnifications, and the second key frame that is the next key frame of the first key frame Means for storing a corresponding second key frame image;
In a given frame between the first key frame and the second key frame,
The first key frame image is enlarged or reduced so as to have a given magnification S with respect to the original image, and the second key frame image has the same magnification as the given magnification S. Means for synthesizing the enlarged or reduced second ′ image to generate an image of a given frame, and performing a key frame image synthesis process;
It is characterized by including.
[0019]
Further, the program according to the present invention is a program executable by a computer (a program embodied in an information storage medium or a carrier wave), and causes the computer to realize the above means (makes the computer function as the above means). And An information storage medium according to the present invention is an information storage medium readable (usable) by a computer, and includes a program for causing the computer to realize the above means (functioning the computer as the above means). It is said.
[0020]
Here, the enlargement ratio may include a case of 1 times or less.
[0021]
Here, the magnification is a ratio of the first 'image and the second' image to the original image.
[0022]
For example, in the case of including a case of 1 times or less in the enlargement, it is within the scope of the present invention to perform enlargement instead of reduction.
[0023]
Further, as the synthesis of the 1 'image and the 2' image, for example, a translucent synthesis process or the like can be performed. Translucent compositing is a method of drawing an image using translucent information. For example, translucent blending (α blending) using semitransparent information, addition semitransparent (α addition) using semitransparent information, semitransparent information There is a composition processing method such as subtractive translucency (α subtraction) using transparency information.
[0024]
Here, the translucent information is equivalent to the transparency information and is information stored in association with each image unit or each pixel, and is set for each definition point of the object, for example, plus alpha information other than color information ( Information indicating transparency (equivalent to opacity or translucency) as (α value).
[0025]
For example, in the case of α blending, the following synthesis processing using translucent information (α) is performed.
[0026]
RQ = (1-α) × R1 + α × R2
GQ = (1-α) × G1 + α × G2
BQ = (1-α) × B1 + α × B2
Here, R1, G1, and B1 are R, G, and B components of the color (luminance) of the image after geometry processing already drawn in the drawing buffer, and R2, G2, and B2 are the colors of the drawn image. R, G and B components. RQ, GQ, and BQ are R, G, and B components of the color of the image generated by α blending. Here, as the α value, the α value of a given image after the geometry processing may be used, or the α value of the drawn original image may be used.
[0027]
In the present invention, the first key frame image and the second key frame are synthesized by synthesizing the first key frame image and the first key image and the second key frame and the second key image. Since an image between the first key frame image and the second key frame image is generated, a smooth image without a break can be generated. (4) Further, an image generation system, a program, and an information storage medium according to the present invention are:
The key frame image synthesizing process is performed in a plurality of frames which are between the first key frame and the second key frame and which continue at least in a predetermined section following the first key frame.
[0028]
Since the predetermined section following the first key frame is often set as a section in which the enlargement ratio of the first key frame image exceeds 100%, at least the section concerned is the target of the key frame image synthesis process. Thus, a smooth image without replacement can be generated while maintaining the quality of the image in this section. (5) An image generation system, a program, and an information storage medium according to the present invention include
Control for reducing the influence of the first key frame image in time series on the image generated in each frame between the first key frame and the second key frame, and the influence of the second key frame image It is characterized in that at least one of the control for increasing the degree in time series is performed.
[0029]
Here, the degree of influence of the first key frame image and the degree of influence of the first key frame image on the image generated in each frame is determined by, for example, translucency information of the first key frame image or the second key frame image. You may make it control.
[0030]
For example, when the second key frame image is drawn after the first key frame image is drawn, control for increasing the opacity of the second key frame image in time series may be performed.
[0031]
According to the present invention, the image generated in each frame between the first key frame and the second key frame is the influence of the second key frame image from the image having the strong influence of the first key frame image. It is possible to change to a strong image in time series. Therefore, it is possible to generate an image that changes continuously and smoothly from the first key frame image to the second key frame image.
(6) An image generation system, a program, and an information storage medium according to the present invention are:
Storing information relating to at least one of an enlargement ratio of the first key frame image and an enlargement ratio of the second key frame image between the first key frame and the second key frame;
A process of enlarging or reducing the first key frame image based on the stored information relating to the enlargement ratio of the first key frame image to generate a first 'image;
Based on the stored information relating to the enlargement ratio of the second key frame image, the second key frame image is enlarged or reduced, and at least one of the processes for generating the second ′ image is performed. To do.
[0032]
Here, the enlargement ratio of the first image may be, for example, the enlargement ratio of the first image in a given frame or time, or may be information on the transition of the enlargement ratio of the first image in a predetermined period.
[0033]
The enlargement ratio of the second image may be, for example, the enlargement ratio of the second image in a given frame or time, or may be information on the transition of the enlargement ratio of the second image in a predetermined period.
[0034]
According to the present invention, in each frame between the first key frame and the second key frame, the first ′ image generated from the first key frame image and the second key frame image generated from the first key frame image. The magnification can be accurately synchronized with the 2 ′ image.
(7) An image generation system, a program, and an information storage medium according to the present invention include
Storing at least one information of translucent information of the first key frame image and translucent information of the second key frame image between the first key frame and the second key frame;
A process of drawing a first 'image obtained by enlarging or reducing the first key frame image based on the translucent information of the stored first key frame image;
Performing at least one of the processes of drawing a second ′ image obtained by enlarging or reducing the second key frame image based on the translucent information information of the stored second key frame image; To do.
[0035]
Here, the translucent information may be transparency or opacity information.
[0036]
Further, the translucent information of the first key frame image may be, for example, the translucent information of the first key frame image in a given frame or time, or relates to the transition of the translucent information of the first image in a predetermined period. It may be information.
[0037]
The translucent information of the second key frame image may be, for example, the translucent information of the second key frame image in a given frame or time, or the translucent information of the second key frame image in a predetermined period. Information about transitions may be used.
[0038]
According to the present invention, in each frame between the first key frame and the second key frame, the first ′ image generated from the first key frame image and the second key frame image generated from the first key frame image. 2 'image and translucent information can be easily controlled.
(8) Further, an image generation system, a program, and an information storage medium according to the present invention are:
Storing information related to at least one of drawing position specifying information of the first key frame image and drawing position specifying information of the second key frame image between the first key frame and the second key frame;
A process of determining a drawing position for a drawing buffer of the first 'image generated based on the first key frame image based on the stored drawing position specifying information of the first key frame image;
At least one of the processes for determining the drawing position of the second ′ image generated based on the second key frame image with respect to the drawing buffer based on the stored drawing position specifying information of the second key frame image It is characterized by performing.
[0039]
Here, the drawing position specifying information of the first key frame image may be, for example, drawing position specifying information of the first key frame image in a given frame or time, or drawing of the first key frame image in a predetermined period. Information regarding the transition of the position specifying information may be used.
[0040]
The drawing position specifying information of the second key frame image may be drawing position specifying information of the second key frame image in a given frame or time, or the drawing position specifying information of the second key frame image in a predetermined period, for example. Information regarding transition of specific information may be used.
[0041]
The drawing position specifying information may be any information that can specify the drawing position when drawing the first 'image or the second' image in the frame buffer. For example, it may be a position coordinate with respect to the frame buffer of the center point of the first 'image or the second' image, or may be information that can specify a range of a frame image cut out from the first 'image or the second' image.
[0042]
According to the present invention, each frame between the first key frame and the second key frame is generated from the drawing position of the first ′ image generated from the first key frame image and the second key frame image. This makes it possible to accurately synchronize the drawing position of the second 2 ′ image.
(9) An image generation system, a program, and an information storage medium according to the present invention include
The drawing position specifying information of the first key frame image and the drawing position specifying information of the second key frame image are time-sequentially matched with the viewpoint movement when changing from the first key frame image to the second key frame image. It is memorized in.
[0043]
According to the present invention, a simple process of using a path in which the drawing position specifying information of the first key frame image and the drawing position specifying information of the second key frame image are stored in chronological order, and the magnification change accompanying the viewpoint movement The image production can be performed.
(10) An image generation system, a program, and an information storage medium according to the present invention store a plurality of viewpoint movement patterns and the drawing position specifying information of a key frame image group corresponding to each viewpoint movement pattern,
One of the viewpoint movement patterns is selected based on a given event or an external input, and the key frame image group and the drawing position specifying information of the key frame image group are selected according to the selected viewpoint movement pattern. And
[0044]
  According to the present invention, the viewpoint movement pattern can be changed based on a given event or an external input.
(11) An image generation system, a program, and an information storage medium according to the present invention include
  For a plurality of key frame images n−1, key frame images n, key frame images n + 1,.
  Key frame imagen-1And keyframe imagesnAfter performing the key frame image composition processing for the key frame image n, the key frame image composition processing is performed for the key frame image n and the key frame image n + 1.And
[0045]
According to the present invention, it is possible to realize a smooth image change without replacement between a plurality of key frame images n-1, a key frame image n, and a key frame image n + 1 given in time series.
(12) Further, the image generation system, the program, and the information storage medium according to the present invention include the key frame image 1,..., Key frame image n-1, and key frame image n given in time series. Prepare to include the image of the key frame image 1 in a part of the image n,
The key frame image composition processing is performed on the key frame image n and the key frame image 1 after the key frame image composition processing is performed on the key frame image n-1 and the key frame image n.
[0046]
For example, the center of the viewpoint may be placed at the pattern portion of the key frame image 1 included in the key frame image n, and the key frame image 1 may be changed from the key frame image n.
[0047]
According to the present invention, key frame image 1,..., Key frame image n-1, key frame image n, key frame image 1,..., Key frame image n-1, and key frame image n loop infinitely. It is possible to perform image production.
[0048]
DETAILED DESCRIPTION OF THE INVENTION
Hereinafter, preferred embodiments of the present invention will be described with reference to the drawings.
[0049]
In addition, this embodiment demonstrated below does not limit the content of this invention described in the claim at all. Further, not all of the configurations described in the present embodiment are essential as a solution means of the present invention.
[0050]
1. Constitution
FIG. 1 shows an example of a functional block diagram of an image generation system (for example, a game system) of the present embodiment.
[0051]
In this figure, the present embodiment may include at least the processing unit 100 (or may include the processing unit 100 and the storage unit 170, or the processing unit 100, the storage unit 170, and the information storage medium 180), and other blocks. (For example, the operation unit 160, the display unit 190, the sound output unit 192, the portable information storage device 194, and the communication unit 196) can be arbitrary constituent elements.
[0052]
Here, the processing unit 100 performs various processing such as control of the entire system, instruction instruction to each block in the system, game processing, image processing, or sound processing, and functions thereof are various processors ( CPU, DSP, etc.) or hardware such as ASIC (gate array, etc.) or a given program (game program).
[0053]
The operation unit 160 is for a player to input operation data, and the function can be realized by hardware such as a lever, a button, and a housing.
[0054]
The storage unit 170 includes a main memory (main storage unit and the like) 172, a frame buffer (drawing buffer and the like) 174, and the like, and serves as a work area such as the processing unit 100 and the communication unit 196. It can be realized by hardware.
[0055]
An information storage medium (storage medium usable by a computer) 180 stores information such as programs and data, and functions thereof are an optical disk (CD, DVD), a magneto-optical disk (MO), a magnetic disk, and a hard disk. It can be realized by hardware such as a magnetic tape or a memory (ROM). The processing unit 100 performs various processes of the present invention (this embodiment) based on information stored in the information storage medium 180. That is, the information storage medium 180 stores information (program or data) for executing the means of the present invention (this embodiment) (particularly, the blocks included in the processing unit 100).
[0056]
Part or all of the information stored in the information storage medium 180 is transferred to the storage unit 170 when the system is powered on. Information stored in the information storage medium 180 includes a program for performing the processing of the present invention, image data, sound data, shape data of display objects, table data, list data, and information for instructing the processing of the present invention. And at least one piece of information for performing processing in accordance with the instruction.
[0057]
The display unit 190 outputs an image generated according to the present embodiment, and the function thereof can be realized by hardware such as a CRT, LCD, or HMD (head mounted display).
[0058]
The sound output unit 192 outputs the sound generated by the present embodiment, and its function can be realized by hardware such as a speaker.
[0059]
The portable information storage device 194 stores player personal data, save data, and the like. As the portable information storage device 194, a memory card, a portable game device, and the like can be considered.
[0060]
The communication unit 196 performs various controls for communicating with the outside (for example, a host device or other image generation system), and functions as hardware such as various processors or a communication ASIC. Or by a program.
[0061]
The program or data for executing the means of the present invention (this embodiment) may be distributed from the information storage medium of the host device (server) to the information storage medium 180 via the network and the communication unit 196. Good. Use of such an information storage medium of the host device (server) is also included in the scope of the present invention.
[0062]
The processing unit 100 includes an image generation unit 130 and a sound generation unit 150.
[0063]
The image generation unit 130 performs various geometry processing (three-dimensional calculation) such as coordinate transformation, clipping processing, perspective transformation, or light source calculation, and drawing processing for drawing an object (model) after the geometry processing in the frame buffer. You may do it.
[0064]
The image generation unit 130 includes a key frame image composition processing unit 140. The key frame image composition processing unit 140 performs the first key frame and the next key frame after the first key frame based on the plurality of key frame images having different magnifications in the process of enlarging the given original image. The first key frame image corresponding to the first key frame is enlarged to a given magnification S with respect to the original image in a given frame between the second key frames. The image and the second key frame image corresponding to the second key frame are combined with the original image and the second ′ image reduced to the same magnification as the given magnification S is given to the given image Key frame image composition processing for generating a frame image may be performed.
[0065]
Further, the first key frame image corresponding to the stored first key frame and the first key frame image are images having different magnifications, and the second key frame that is the next key frame after the first key frame. The first key frame image is given to the original image in a given frame between the first key frame and the second key frame based on the second key frame image corresponding to the key frame of The first 'image enlarged or reduced so as to have the magnification S and the second' image obtained by expanding or reducing the second key frame image so as to have the same magnification as the given magnification S may be combined. Then, key frame image synthesis processing for generating an image of a given frame may be performed.
[0066]
The sound generation unit 150 performs various types of sound processing in accordance with instructions from the game processing unit 110, generates a sound such as BGM, sound effect, or sound, and outputs the sound to the sound output unit 192.
[0067]
Note that all of the functions of the image generation unit 130 and the sound generation unit 150 may be realized by hardware, or all of them may be realized by a program. Alternatively, it may be realized by both hardware and a program.
[0068]
2. Features of this embodiment
2 and 3 are diagrams for explaining the features of the present embodiment.
[0069]
FIG. 2 is an original image, and reference numerals 210 to 250 in FIG. 3 are images in the process of zooming the original image.
[0070]
Here, 210, 230, and 250 are key frame images (for example, images prepared in advance corresponding to the key frames), and 220 and 240 are images generated in real time based on the preceding and following key frame images.
[0071]
In this embodiment, a plurality of key frame images 210, 230, and 250 having different magnifications are prepared when generating the images of processes 210 to 250 for enlarging the original image. Then, frame images 220 and 240 between key frames are generated in real time by performing key frame image synthesis processing based on the front and rear key frame images 210 and 230 and the front and rear key frame images 230 and 250.
[0072]
FIG. 4 is a diagram for explaining the key frame image composition processing.
[0073]
Here, 210 is a first key frame image prepared corresponding to the magnification (S1) of the first key frame, and 230 is prepared corresponding to the magnification (S3) of the second key frame. 2 is a second key frame image. Reference numerals 212 and 232 denote center points of the first key frame image and the second key frame image, respectively, and an enlargement center and a reduction center when the first key frame image and the second key frame image are enlarged or reduced. Become.
[0074]
In such a case, an image 220 of a frame between the first key frame and the second key frame is generated as follows. Here, the magnification of the image 220 is S2 (S1 <S2 <S3).
[0075]
A first 1 'image 214 is generated by enlarging the first key frame image 210 with the center point 212 as the center so that the magnification is S2. Also, a second 'image 234 is generated by reducing the second key frame image 230 so that the magnification is S2 with the center point 232 as the center. Here, the first 'image 214 and the second' image 234 have the same magnification (S2).
[0076]
Here, the first ′ image 214 and the second ′ image 234 are aligned with respect to a drawing buffer (for example, a frame buffer) so as not to be shifted when the images are overlapped, and the first ′ image 214 is changed to a drawing buffer (for example, After drawing in the frame buffer), the image 220 of the frame between the first key frame and the second key frame is generated by semi-transparently drawing the second ′ image 234 in the drawing buffer (for example, frame buffer).
[0077]
In the present embodiment, information (drawing position specifying information) for specifying a drawing position with respect to a drawing buffer (for example, a frame buffer or a frame) when drawing a key frame image in a drawing buffer (for example, a frame buffer) in each frame is provided. Let me. For example, as drawing position specifying information, the coordinate value of the center point of the key frame image with respect to the drawing buffer (eg, frame buffer), the relative position information of the center point of the key frame image with respect to the center point of the drawing buffer (eg, frame buffer), etc. You may make it let.
[0078]
That is, the positional relationship (see l1) of the center point 212 of the first ′ image 214 with respect to the center point 218 of the drawing buffer (for example, a frame buffer or a frame), and the second ′ image 234 It has information on what positional relationship (see l2) the center point 232 is with respect to the center point 238 of the frame buffer (or frame frame).
[0079]
Based on the information (11, 12), the drawing positions of the first 'image and the second' image in the drawing buffer (for example, the frame buffer) are determined.
[0080]
By doing so, it is possible to perform the translucent composition processing by combining the magnification and position of the first 'image and the second' image.
[0081]
Next, a specific example of generating a zoom image will be described.
[0082]
5 and 6 are diagrams for explaining an example of setting an original image and a key frame image. When the original image 300 is zoomed toward the eye portion 302, for example, (six levels of frames with different magnifications are selected as key frames. For example, a key for outputting a full shot image (key frame image 1) 310. A frame K1, a key frame K2 that outputs a waist shot image (key frame image 2) 320, a key frame K3 that outputs a bust shot image (key frame image 3) 320, and an up shot image (key frame image 4) 340 , Key frame K5 for outputting a close-up shot image (key frame image 5) 350, and key frame K6 for outputting a close-up shot image (key frame image 6) 360 are determined as key frames. To do.
[0083]
Then, as shown by 310 to 360 in FIG. 5, all of the six key frame images having different magnifications are drawn at the same density (for example, vertical 512 × horizontal 512). In addition, it can be said that the picture drawn with the same density has the same quality.
[0084]
FIG. 7 is a time chart for explaining an example of specific image generation processing for performing zoom display of the original image based on the key frame image.
[0085]
The vertical axis is the time (inter) axis.
[0086]
This time chart shows the key frame image used to generate an image of each frame, the enlargement ratio of the key frame image used in each frame, and translucent information (opacity value when performing the translucent compositing process) Represents.
[0087]
For example, in the key frame K1, a first frame image obtained by enlarging the key frame image 1 (310 in FIG. 6) at an enlargement ratio of 100% is drawn in a drawing buffer (for example, a frame buffer) with an opacity of 100, and the subsequent key A second image obtained by enlarging (reducing) frame image 2 (320 in FIG. 6) at an enlargement ratio of 40% is drawn in a drawing buffer (for example, a frame buffer) with an opacity of 0% (meaning that it is transparent). This means that processing is performed. Therefore, in the key frame K1, a first image obtained by enlarging the first image (310 in FIG. 6) at an enlargement ratio of 100% is generated as an output image.
[0088]
Further, for example, 412 indicates that when an image of a given frame between the key frame K1 and the key frame K2 is generated, the first ′ image obtained by enlarging the key frame image 1 at an enlargement ratio of 135.7% is converted to an opacity of 100. This means that after drawing at%, the second frame image obtained by enlarging (reducing) the key frame image 2 at an enlargement ratio of 54.3% is rendered translucent at 66.7%.
[0089]
Thus, in this embodiment, for example, K1 is used as the first key frame, key frame image 1 is used as the first key frame image, K2 is used as the second key frame, and key frame image 2 is used as the second key frame image. By performing the key frame image composition process using the first key frame and the second key frame that is the next key frame of the first key frame, for example, as in 408 and 412 described above, a given key frame is synthesized. In the frame, the first key frame image corresponding to the first key frame is enlarged so as to have a given magnification S with respect to the original image, and the second key frame corresponds to the second key frame. A key frame image for generating an image of a given frame by synthesizing a second frame image obtained by reducing the key frame image of the original image and the second image obtained by reducing the key image to the same magnification as the given magnification S. Beam image synthesis processing can be performed.
[0090]
Further, the composition processing may be performed in a plurality of frames that are between the first key frame and the second key frame and that are continuous in a predetermined section 410 following the first key frame.
[0091]
In the frames after the first key frame, the first image gradually increases with an enlargement ratio exceeding 100%, so that the image becomes rough. In the second image, pixel collapse occurs due to reduction. Therefore, by setting the translucent information at the time of synthesis so that the coarseness due to the enlargement of the first image and the collapse due to the reduction of the second image are interpolated with an optimal balance in this interval (for example, the second image) By setting the opacity of the first image, it is possible to continuously shift from the first image to the second image while maintaining the quality of the synthesized image.
[0092]
Further, as shown in FIG. 7, information on the enlargement ratio of the key frame image between successive key frames is stored as table information, for example, and the key frame image is enlarged or reduced based on the stored information on the enlargement ratio of the key frame image. You may make it produce | generate the image to reduce and draw.
[0093]
Also, translucent information of the key frame image between successive key frames is stored as table information, for example, and an image generated based on the key frame image is drawn in the drawing buffer based on the translucent information of the stored key frame image. You may do it.
[0094]
FIG. 8 is a diagram for explaining an example of the drawing position specifying information set in the key frame image.
[0095]
As shown in FIG. 8, the drawing position specifying information of the key frame image between successive key frames is stored as, for example, table information, and the drawing buffer of the image generated based on the key frame image based on the stored drawing position specifying information You may make it determine the drawing position with respect to.
[0096]
The drawing position specifying information 510 is given as position information with respect to the center point of the drawing buffer (or frame frame) of the center point of the key frame image. In this zoom example, since the positional relationship of the center point of the key frame image with respect to the center point of the drawing buffer (or frame frame) does not change in the x-axis direction, only the y-axis direction is maintained.
[0097]
Here, the y-coordinate is position information in dot units in the y-axis direction of the drawing buffer (or frame frame). ± 0 represents the y-coordinate position at the center of the screen, the screen downward direction is + display, and the screen upward direction is -display.
[0098]
For example, in the key frame K2, the center point of the image obtained by enlarging the key frame image at an enlargement ratio of 250% is arranged at the point of y = + 150 in the drawing buffer (or frame frame) and drawn (drawing at the point of x = 0). You may do it).
[0099]
When two key frame images are translucently combined in this way, the drawing position specifying information may be set in advance so that the patterns of the two key frame images are exactly the same.
[0100]
In this embodiment, an infinite zoom effect can be performed.
[0101]
FIGS. 9A to 9C and FIGS. 10A to 10C are diagrams for explaining an example of an infinite zoom effect. FIGS. 9A to 9C and FIGS. 10A to 10C respectively show a key frame 1,... Key for zooming the original image (here, the image of FIG. 9A). It is a key frame image prepared corresponding to the frame 6.
[0102]
Here, as the key frame image 6, an image including an original image pattern 610 (see FIG. 9A) as a part of the image is prepared (see FIG. 10C).
[0103]
Then, by using the key frame image 1 again as the key frame image of the key frame next to the key frame 6 and creating it by the key frame image composition processing described above, the image of FIG. An image in the process of becoming an image of 9 (A) can be generated.
[0104]
3. Processing in this embodiment
Next, an example of the flow of infinite zoom processing will be described with reference to FIGS. FIG. 11 is a process flowchart of the main routine of the infinite zoom process.
[0105]
First, variables i, k1, and k2 are initially set (step S10). Here, the variable i is a variable for specifying the frame number of the image to be generated, k1 is a number for specifying the image to be processed as the first key frame, and k2 is the image to be processed as the second key frame image. Is a number that identifies Here, 310 to 360 in FIG. 6 are prepared as images used as key frame images, and image numbers 1 to 6, respectively.
[0106]
Next, i is incremented (step S20).
[0107]
Next, the enlargement ratio Sk1 (i), opacity αk1 (i), and drawing position Lk1 (i) of the key frame image k1 in the frame i are read from the zoom information table (step S30). Here, the zoom information table corresponds to each frame (or time) (i), for example, information on the enlargement ratio Sk1 (i), opacity αk1 (i), and drawing position Lk1 (i) of the key frame image to be used. (See FIGS. 7 and 8).
[0108]
Next, the key frame image k1 is enlarged at the enlargement ratio Sk1 (i), and drawn in the frame buffer at the drawing position Lk1 (i) and the opacity αk1 (i) (step S40).
[0109]
If the enlargement ratio Sk1 (i) ≧ 100% of the key frame image k1 is not satisfied here, the process returns to step S20 and the processes from step S20 to S50 are repeated again (step S50). An image of the frame in the section 406 in FIG. 7 is generated by the processing of steps S20 to S50.
[0110]
If the enlargement ratio Sk1 (i) ≧ 100%, overlap processing is performed (steps S50 and S60). The specific contents of the overlap processing will be described with reference to the flowchart of FIG. By the overlap processing, frame images of the sections 410, 420, 430, 440, and 450 in FIG. 7 are generated.
[0111]
Next, i is incremented (step S70).
[0112]
Next, the enlargement ratio Sk2 (i), opacity αk2 (i), and drawing position Lk2 (i) of the key frame image k2 in the frame i are read from the zoom information table (step S80).
[0113]
Next, the key frame image k2 is enlarged at the enlargement ratio Sk2 (i), and drawn in the frame buffer at the drawing position Lk2 (i) and the opacity αk2 (i) (step S90).
[0114]
Here, if the enlargement ratio Sk2 (i) ≧ 100% of the key frame image k2 is not satisfied, the process returns to step S70 and the processes from step S70 to S100 are repeated again (step S100). Through the processing in steps S70 to S100, the images of the frames in the sections 416, 426, 436, 446, and 456 in FIG. 7 are generated.
[0115]
Then, k1 and k2 are incremented (step S110).
[0116]
If the first key frame image number k1 = N, a process of correcting k1 to 1 is performed (steps S120 and S130). For example, when six key frame images are prepared as in this case, N = 7 can be set so that when the first key frame image number is 7, the correction is made to 1. It becomes possible.
[0117]
If the second key frame image number k2 = N, k2 is corrected to 1 (steps S140 and S150). For example, when six key frame images are prepared as in this case, N = 7 can be set so that when the second key frame image number is 7, the correction is made to 1. It becomes possible.
[0118]
The key frame image can be connected from the image 6 (360 in FIG. 6) to the image 1 (310 in FIG. 6) by the processing in steps S120 to S150.
[0119]
Thereafter, the processing from step S60 is repeated again.
[0120]
FIG. 12 is a processing flowchart of an overlap processing routine of infinite zoom processing.
[0121]
First, i is incremented (step S210).
[0122]
Next, from the zoom information table, the enlargement ratios Sk1 (i) and Sk2 (i) of the key frame images k2 and k2 in the frame i, the opacity αk1 (i) and αk2 (i), the drawing positions Lk1 (i) and Lk2 (i ) Is read (step S220).
[0123]
Next, the key frame image k1 is enlarged at an enlargement ratio Sk1 (i), and drawn in the frame buffer at the drawing position Lk1 (i) and the opacity αk1 (i) (step S230).
[0124]
Next, the key frame image k2 is enlarged at the enlargement ratio Sk2 (i), and drawn in the frame buffer at the drawing position Lk2 (i) and the opacity αk2 (i) (step S240).
[0125]
If the opacity αk2 (i) of the key frame image k2 is not 100%, the process returns to step S210 and the processes from step S210 to S250 are repeated again (step S250).
[0126]
4). Hardware configuration
Next, an example of a hardware configuration capable of realizing the present embodiment will be described with reference to FIG.
[0127]
The main processor 900 operates based on a program stored in the CD 982 (information storage medium), a program transferred via the communication interface 990, or a program stored in the ROM 950 (one of information storage media). Various processes such as processing, image processing, and sound processing are executed.
[0128]
The coprocessor 902 assists the processing of the main processor 900, has a product-sum calculator and a divider capable of high-speed parallel calculation, and executes matrix calculation (vector calculation) at high speed. For example, if a physical simulation for moving or moving an object requires processing such as matrix operation, a program operating on the main processor 900 instructs (requests) the processing to the coprocessor 902. )
[0129]
The geometry processor 904 performs geometry processing such as coordinate transformation, perspective transformation, light source calculation, and curved surface generation, has a product-sum calculator and a divider capable of high-speed parallel computation, and performs matrix computation (vector computation). Run fast. For example, when processing such as coordinate transformation, perspective transformation, and light source calculation is performed, a program operating on the main processor 900 instructs the geometry processor 904 to perform the processing.
[0130]
The data decompression processor 906 performs a decoding process for decompressing the compressed image data and sound data, and a process for accelerating the decoding process of the main processor 900. As a result, a moving image compressed by the MPEG method or the like can be displayed on the opening screen, the intermission screen, the ending screen, or the game screen. Note that the image data and sound data to be decoded are stored in the ROM 950 and the CD 982 or transferred from the outside via the communication interface 990.
[0131]
The drawing processor 910 performs drawing (rendering) processing of an object composed of primitives (primitive surfaces) such as polygons and curved surfaces at high speed. When drawing an object, the main processor 900 uses the function of the DMA controller 970 to pass the object data to the drawing processor 910 and transfer the texture to the texture storage unit 924 if necessary. Then, the drawing processor 910 draws the object in the frame buffer 922 at high speed while performing hidden surface removal using a Z buffer or the like based on the object data and texture. The drawing processor 910 can also perform α blending (translucent processing), depth cueing, mip mapping, fog processing, bilinear filtering, trilinear filtering, anti-aliasing, shading processing, and the like. When an image for one frame is written in the frame buffer 922, the image is displayed on the display 912.
[0132]
The sound processor 930 includes a multi-channel ADPCM sound source and the like, and generates high-quality game sounds such as BGM, sound effects, and sounds. The generated game sound is output from the speaker 932.
[0133]
Operation data from the game controller 942 (lever, button, chassis, pad type controller, gun type controller, etc.), save data from the memory card 944, and personal data are transferred via the serial interface 940.
[0134]
The ROM 950 stores system programs and the like. In the case of an arcade game system, the ROM 950 functions as an information storage medium, and various programs are stored in the ROM 950. A hard disk may be used instead of the ROM 950.
[0135]
The RAM 960 is used as a work area for various processors.
[0136]
The DMA controller 970 controls DMA transfer between the processor and memory (RAM, VRAM, ROM, etc.).
[0137]
The CD drive 980 drives a CD 982 (information storage medium) in which programs, image data, sound data, and the like are stored, and enables access to these programs and data.
[0138]
The communication interface 990 is an interface for transferring data to and from the outside via a network. In this case, as a network connected to the communication interface 990, a communication line (analog telephone line, ISDN), a high-speed serial bus, or the like can be considered. By using a communication line, data transfer via the Internet becomes possible. Further, by using the high-speed serial bus, data transfer with other image generation systems becomes possible.
[0139]
All of the means of the present invention may be realized (executed) only by hardware, or only by a program stored in an information storage medium or a program distributed via a communication interface. Also good. Alternatively, it may be realized by both hardware and a program.
[0140]
When each means of the present invention is realized by both hardware and a program, the information storage medium stores a program for realizing each means of the present invention using hardware. Become. More specifically, the program instructs each processor 902, 904, 906, 910, 930, etc., which is hardware, and passes data if necessary. Each of the processors 902, 904, 906, 910, 930 and the like implements each unit of the present invention based on the instruction and the passed data.
[0141]
FIG. 14A shows an example in which the present embodiment is applied to an arcade game system. The player enjoys the game by operating the lever 1102, the button 1104, and the like while viewing the game image displayed on the display 1100. Various processors and various memories are mounted on the built-in system board (circuit board) 1106. Information (program or data) for executing each means of the present invention is stored in a memory 1108 which is an information storage medium on the system board 1106. Hereinafter, this information is referred to as storage information.
[0142]
FIG. 14B shows an example in which the present embodiment is applied to a home game system. The player enjoys the game by operating the game controllers 1202 and 1204 while viewing the game image displayed on the display 1200. In this case, the stored information is stored in the CD 1206, which is an information storage medium that is detachable from the main system, or in the memory cards 1208, 1209, and the like.
[0143]
FIG. 14C shows a host device 1300 and terminals 1304-1 to 1304-n connected to the host device 1300 via a network 1302 (a small network such as a LAN or a wide area network such as the Internet). An example of applying this embodiment to a system including In this case, the stored information is stored in an information storage medium 1306 such as a magnetic disk device, a magnetic tape device, or a memory that can be controlled by the host device 1300, for example. When the terminals 1304-1 to 1304-n can generate game images and game sounds stand-alone, the host device 1300 receives a game program and the like for generating game images and game sounds from the terminal 1304-. 1 to 1304-n. On the other hand, if it cannot be generated stand-alone, the host device 1300 generates a game image and a game sound, which is transmitted to the terminals 1304-1 to 1304-n and output at the terminal.
[0144]
In the case of the configuration shown in FIG. 11C, each unit of the present invention may be executed in a distributed manner between the host device (server) and the terminal. Further, the storage information for executing each means of the present invention may be distributed and stored in the information storage medium of the host device (server) and the information storage medium of the terminal.
[0145]
The terminal connected to the network may be a home game system or an arcade game system. A portable information storage device capable of exchanging information with the arcade game system and exchanging information with the arcade game system when the arcade game system is connected to the network. It is desirable to use (memory card, portable game device).
[0146]
The present invention is not limited to that described in the above embodiment, and various modifications can be made.
[0147]
In the invention according to the dependent claims of the present invention, a part of the constituent features of the dependent claims can be omitted. Moreover, the principal part of the invention according to one independent claim of the present invention can be made dependent on another independent claim.
[0148]
In the present embodiment, the case where there is one kind of viewpoint movement pattern during zooming has been described as an example, but the present invention is not limited to this. For example, a plurality of viewpoint movement patterns may be selected during zooming. In this case, a key frame may be set for each viewpoint movement pattern, and drawing position specifying information corresponding to each viewpoint movement pattern may be provided for the set key frame.
[0149]
For example, in the present embodiment, the case of generating an image in the process of enlarging a given original image has been described as an example, but the present invention is not limited to this. For example, a series of images in which the magnification of the original image is changed may be generated.
[0150]
For example, although an example of one viewpoint movement pattern has been described in the present embodiment, a plurality of viewpoint movement patterns may be set.
[0151]
The present invention can be applied to various games (such as fighting games, shooting games, robot fighting games, sports games, competitive games, role playing games, music playing games, dance games, etc.).
[0152]
In addition, the present invention is applied to various image generation systems (game systems) such as a business game system, a home game system, a large attraction system in which a large number of players participate, a simulator, a multimedia terminal, and a system board for generating game images. Applicable.
[Brief description of the drawings]
FIG. 1 is an example of a functional block diagram of an image generation system according to an embodiment.
FIG. 2 is a diagram for describing features of the present embodiment.
FIG. 3 is a diagram for describing features of the present embodiment;
FIG. 4 is a diagram for describing key frame image composition processing according to the present embodiment;
FIG. 5 is a diagram for describing a setting example of an original image and a key frame image according to the present embodiment.
FIG. 6 is a diagram for describing an example of setting an original image and a key frame image according to the present embodiment.
FIG. 7 is a diagram for describing an example of specific image generation processing for performing zoom display of an original image based on a key frame image in the present embodiment.
FIG. 8 is a diagram for describing an example of drawing position specifying information set in a key frame image according to the present embodiment.
FIGS. 9A to 9C are diagrams for explaining an example of an infinite zoom effect. FIG.
FIGS. 10A to 10C are diagrams for explaining an example of an infinite zoom effect.
FIG. 11 is a processing flowchart of a main routine of infinite zoom processing according to the present embodiment.
FIG. 12 is a processing flowchart of an overlap processing routine of infinite zoom processing according to the present embodiment.
FIG. 13 is a diagram illustrating an example of a hardware configuration capable of realizing the present embodiment.
FIGS. 14A, 14B, and 14C are diagrams illustrating examples of various types of systems to which the present embodiment is applied.
FIG. 15 is a diagram for explaining a conventional zoom display example;
FIG. 16 is a diagram for explaining a conventional zoom display example;
[Explanation of symbols]
100 processor
130 Image generator
140 Key frame image composition processing unit
150 sound generator
160 Operation unit
170 Storage unit
172 Main memory (main memory)
174 Frame buffer (drawing buffer)
180 Information storage medium
190 Display
192 sound output section
194 Portable information storage device
196 Communication Department

Claims (25)

画像生成を行う画像生成システムであって、
所与の元画像を拡大する過程の倍率の異なる複数のキーフレーム画像を記憶する手段と、
第１のキーフレームと第１のキーフレームの次のキーフレームである第２のキーフレームの間の所与のフレームにおいて、
第１のキーフレームに対応した第１のキーフレーム画像を元画像に対して所与の倍率Ｓになるよう拡大した第１’の画像と、第２のキーフレームに対応した第２のキーフレーム画像を元画像に対して前記所与の倍率Ｓと同じ倍率になるよう縮小した第２’の画像とを合成して所与のフレームの画像を生成するキーフレーム画像合成処理を行う手段と、
を含むことを特徴とする画像生成システム。An image generation system for generating an image,
Means for storing a plurality of key frame images having different magnifications in a process of enlarging a given original image;
In a given frame between a first key frame and a second key frame that is the next key frame of the first key frame,
A first key frame image corresponding to the first key frame and a second key frame corresponding to the second key frame; and a first key frame image corresponding to the second key frame. Means for performing a key frame image synthesis process for generating an image of a given frame by synthesizing an image with a second ′ image reduced to the same magnification as the given magnification S with respect to the original image;
An image generation system comprising: 請求項１において、
第１のキーフレームと第２のキーフレームの間の各フレームにおいて前記所与の倍率Ｓが時系列に大きくなるように、第１のキーフレーム画像から第１’の画像を生成する際の拡大率を時系列に増加させ、第２のキーフレーム画像から第２’の画像を生成する際の縮小率を時系列に減少させるように制御することを特徴とする画像生成システム。In claim 1,
Enlargement when generating the first ′ image from the first key frame image so that the given magnification S increases in time series in each frame between the first key frame and the second key frame An image generation system, characterized in that the rate is increased in time series, and the reduction rate when generating a second ′ image from the second key frame image is controlled to decrease in time series. 画像生成を行う画像生成システムであって、
第１のキーフレームに対応した第１のキーフレーム画像と、第１のキーフレーム画像とは倍率の異なる画像であって、第１のキーフレームの次のキーフレームである第２のキーフレームに対応した第２のキーフレーム画像とを記憶する手段と、
第１のキーフレームと第２のキーフレームの間の所与のフレームにおいて、
第１のキーフレーム画像を元画像に対して所与の倍率Ｓになるように拡大又は縮小した第１’の画像と、第２のキーフレーム画像を前記所与の倍率Ｓと同じ倍率になるように拡大又は縮小した第２’の画像とを合成して所与のフレームの画像を生成するキーフレーム画像合成処理を行う手段と、
を含むことを特徴とする画像生成システム。An image generation system for generating an image,
The first key frame image corresponding to the first key frame and the first key frame image are images having different magnifications, and the second key frame that is the next key frame of the first key frame Means for storing a corresponding second key frame image;
In a given frame between the first key frame and the second key frame,
The first key frame image is enlarged or reduced so as to have a given magnification S with respect to the original image, and the second key frame image has the same magnification as the given magnification S. Means for synthesizing the enlarged or reduced second ′ image to generate an image of a given frame, and performing a key frame image synthesis process;
An image generation system comprising: 請求項１乃至３のいずれかにおいて、
第１のキーフレームと第２のキーフレームの間であって、少なくとも第１のキーフレームにつづく所定区間の連続する複数のフレームにおいて前記キーフレーム画像合成処理をおこなうことを特徴とする画像生成システム。In any one of Claims 1 thru | or 3,
An image generation system characterized in that the key frame image composition processing is performed in a plurality of frames that are between a first key frame and a second key frame and that continue at least in a predetermined section following the first key frame. . 請求項１乃至４のいずれかにおいて、
第１のキーフレームと第２のキーフレームの間の各フレームにおいて生成される画像に対して、第１のキーフレーム画像の影響度を時系列に減少させる制御及び第２のキーフレーム画像の影響度を時系列に増加させる制御の少なくとも一方を行うことを特徴とする画像生成システム。In any one of Claims 1 thru | or 4,
Control for reducing the influence of the first key frame image in time series on the image generated in each frame between the first key frame and the second key frame, and the influence of the second key frame image An image generation system that performs at least one of control for increasing the degree in time series. 請求項１乃至５のいずれかにおいて、
第１のキーフレームと第２のキーフレームの間における第１のキーフレーム画像の拡大率と第２のキーフレーム画像の拡大率の少なくとも一方に関する情報を記憶し、
記憶されている第１のキーフレーム画像の拡大率に関する情報に基づき、第１のキーフレーム画像を拡大又は縮小させ、第１’の画像を生成する処理と、
記憶されている第２のキーフレーム画像の拡大率に関する情報に基づき、第２のキーフレーム画像を拡大又は縮小させ、第２’の画像を生成する処理の少なくとも一方の処理を行うことを特徴とする画像生成システム。In any one of Claims 1 thru | or 5,
Storing information relating to at least one of an enlargement ratio of the first key frame image and an enlargement ratio of the second key frame image between the first key frame and the second key frame;
A process of enlarging or reducing the first key frame image based on the stored information on the enlargement ratio of the first key frame image to generate a first ′ image;
Based on the stored information relating to the enlargement ratio of the second key frame image, the second key frame image is enlarged or reduced, and at least one of the processes for generating the second ′ image is performed. Image generation system. 請求項１乃至６のいずれかにおいて、
第１のキーフレームと第２のキーフレームの間における第１のキーフレーム画像の半透明情報と第２のキーフレーム画像の半透明情報の少なくとも一方の情報を記憶し、
記憶されている第１のキーフレーム画像の半透明情報に基づき、第１のキーフレーム画像を拡大又は縮小させた第１’の画像を描画する処理と、
記憶されている第２のキーフレーム画像の半透明情報情報に基づき、第２のキーフレーム画像を拡大又は縮小させた第２’の画像を描画する処理の少なくとも一方の処理を行うことを特徴とする画像生成システム。In any one of Claims 1 thru | or 6.
Storing at least one information of translucent information of the first key frame image and translucent information of the second key frame image between the first key frame and the second key frame;
A process of drawing a first ′ image obtained by enlarging or reducing the first key frame image based on the translucent information of the stored first key frame image;
Performing at least one of the processes of drawing a second ′ image obtained by enlarging or reducing the second key frame image based on the translucent information information of the stored second key frame image; Image generation system. 請求項１乃至７のいずれかにおいて、
第１のキーフレームと第２のキーフレームの間における第１のキーフレーム画像の描画位置特定情報と第２のキーフレーム画像の描画位置特定情報の少なくとも一方に関する情報を記憶し、
記憶されている第１のキーフレーム画像の描画位置特定情報に基づき、第１のキーフレーム画像に基づき生成された第１’の画像の描画バッファに対する描画位置を決定する処理と、
記憶されている第２のキーフレーム画像の描画位置特定情報に基づき、第２のキーフレーム画像に基づき生成された第２’の画像の描画バッファに対する描画位置を決定する処理の少なくとも一方の処理を行うことを特徴とする画像生成システム。In any one of Claims 1 thru | or 7,
Storing information related to at least one of drawing position specifying information of the first key frame image and drawing position specifying information of the second key frame image between the first key frame and the second key frame;
A process of determining a drawing position of the first ′ image generated based on the first key frame image with respect to the drawing buffer based on the stored drawing position specifying information of the first key frame image;
Based on the stored drawing position specifying information of the second key frame image, at least one process of determining a drawing position for the drawing buffer of the second ′ image generated based on the second key frame image is performed. An image generation system characterized by performing. 請求項８において、
第１のキーフレーム画像から第２のキーフレーム画像へ変化する際の視点移動にあわせて、第１のキーフレーム画像の描画位置特定情報と第２のキーフレーム画像の描画位置特定情報を時系列に記憶させることを特徴とする画像生成システム。In claim 8,
The drawing position specifying information of the first key frame image and the drawing position specifying information of the second key frame image are time-sequentially matched with the viewpoint movement when changing from the first key frame image to the second key frame image. An image generation system characterized in that it is stored in a computer. 請求項８乃至９のいずれかにおいて、
複数の視点移動パターンと、各視点移動パターンに対応したキーフレーム画像群の前記描画位置特定情報を記憶し、
所与のイベント又は外部からの入力に基づきいずれかの視点移動パターンを選択し、選択された視点移動パターンに応じてキーフレーム画像群及びキーフレーム画像群の描画位置特定情報を選択することを特徴とする画像生成システム。In any one of Claims 8 thru | or 9.
Storing a plurality of viewpoint movement patterns and the drawing position specifying information of a key frame image group corresponding to each viewpoint movement pattern;
One of the viewpoint movement patterns is selected based on a given event or an external input, and the key frame image group and the drawing position specifying information of the key frame image group are selected according to the selected viewpoint movement pattern. An image generation system. 請求項１乃至１０のいずれかにおいて、
時系列に与えられた複数のキーフレーム画像ｎ−１、キーフレーム画像ｎ、キーフレーム画像ｎ＋１・・に対し、
キーフレーム画像ｎ−１とキーフレーム画像ｎについて前記キーフレーム画像合成処理を行った後に、キーフレーム画像ｎとキーフレーム画像ｎ＋１について前記キーフレーム画像合成処理を行うことを特徴とする画像生成システム。In any one of Claims 1 thru | or 10.
For a plurality of key frame images n−1, key frame images n, key frame images n + 1,.
An image generation system, wherein the key frame image composition processing is performed on the key frame image n and the key frame image n + 1 after the key frame image composition processing is performed on the key frame image n-1 and the key frame image n . 請求項１乃至１１のいずれかにおいて、
時系列に与えられたキーフレーム画像１、・・・、キーフレーム画像ｎ−１、キーフレーム画像ｎにおいて、前記キーフレーム画像ｎの一部に前記キーフレーム画像１の絵柄を含むように用意し、
キーフレーム画像ｎ−１とキーフレーム画像ｎについて前記キーフレーム画像合成処理を行った後に、キーフレーム画像ｎとキーフレーム画像１について前記キーフレーム画像合成処理を行うことを特徴とする画像生成システム。In any one of Claims 1 thru | or 11,
The key frame images 1,..., Key frame image n-1, and key frame image n given in time series are prepared so that a part of the key frame image n includes the design of the key frame image 1. ,
An image generation system, wherein the key frame image composition processing is performed on the key frame image n and the key frame image 1 after the key frame image composition processing is performed on the key frame image n-1 and the key frame image n. コンピュータが実行可能なプログラムであって、
所与の元画像を拡大する過程の倍率の異なる複数のキーフレーム画像を記憶する手段と、
第１のキーフレームと第１のキーフレームの次のキーフレームである第２のキーフレームの間の所与のフレームにおいて、
第１のキーフレームに対応した第１のキーフレーム画像を元画像に対して所与の倍率Ｓになるよう拡大した第１’の画像と、第２のキーフレームに対応した第２のキーフレーム画像を元画像に対して前記所与の倍率Ｓと同じ倍率になるよう縮小した第２’の画像とを合成して所与のフレームの画像を生成するキーフレーム画像合成処理を行う手段と、
コンピュータに実現させることを特徴とするプログラム。A computer executable program,
Means for storing a plurality of key frame images having different magnifications in a process of enlarging a given original image;
In a given frame between a first key frame and a second key frame that is the next key frame of the first key frame,
A first key frame image corresponding to the first key frame and a second key frame corresponding to the second key frame; and a first key frame image corresponding to the second key frame. Means for performing a key frame image synthesis process for generating an image of a given frame by synthesizing an image with a second ′ image reduced to the same magnification as the given magnification S with respect to the original image;
A program characterized by being realized by a computer. 請求項１３において、
第１のキーフレームと第２のキーフレームの間の各フレームにおいて前記所与の倍率Ｓが時系列に大きくなるように、第１のキーフレーム画像から第１’の画像を生成する際の拡大率を時系列に増加させ、第２のキーフレーム画像から第２’の画像を生成する際の縮小率を時系列に減少させるように制御することを特徴とするプログラム。In claim 13,
Enlargement when generating the first ′ image from the first key frame image so that the given magnification S increases in time series in each frame between the first key frame and the second key frame A program that increases the rate in time series, and controls to reduce the reduction rate in generating the second ′ image from the second key frame image in time series. コンピュータが実行可能なプログラムであって、
第１のキーフレームに対応した第１のキーフレーム画像と、第１のキーフレーム画像とは倍率の異なる画像であって、第１のキーフレームの次のキーフレームである第２のキーフレームに対応した第２のキーフレーム画像とを記憶する手段と、
第１のキーフレームと第２のキーフレームの間の所与のフレームにおいて、
第１のキーフレーム画像を元画像に対して所与の倍率Ｓになるように拡大又は縮小した第１’の画像と、第２のキーフレーム画像を前記所与の倍率Ｓと同じ倍率になるように拡大又は縮小した第２’の画像とを合成して所与のフレームの画像を生成するキーフレーム画像合成処理を行う手段と、
コンピュータに実現させることを特徴とするプログラム。A computer executable program,
The first key frame image corresponding to the first key frame and the first key frame image are images having different magnifications, and the second key frame that is the next key frame of the first key frame Means for storing a corresponding second key frame image;
In a given frame between the first key frame and the second key frame,
The first key frame image is enlarged or reduced so as to have a given magnification S with respect to the original image, and the second key frame image has the same magnification as the given magnification S. Means for synthesizing the enlarged or reduced second ′ image to generate an image of a given frame, and performing a key frame image synthesis process;
A program characterized by being realized by a computer. 請求項１３乃至１５のいずれかにおいて、
第１のキーフレームと第２のキーフレームの間であって、少なくとも第１のキーフレームにつづく所定区間の連続する複数のフレームにおいて前記キーフレーム画像合成処理をおこなうことを特徴とするプログラム。In any of claims 13 to 15,
A program characterized in that the key frame image composition processing is performed in a plurality of frames that are between a first key frame and a second key frame and that continue at least in a predetermined section following the first key frame. 請求項１３乃至１６のいずれかにおいて、
第１のキーフレームと第２のキーフレームの間の各フレームにおいて生成される画像に対して、第１のキーフレーム画像の影響度を時系列に減少させる制御及び第２のキーフレーム画像の影響度を時系列に増加させる制御の少なくとも一方を行うことを特徴とするプログラム。In any of claims 13 to 16,
Control for reducing the influence of the first key frame image in time series on the image generated in each frame between the first key frame and the second key frame, and the influence of the second key frame image A program for performing at least one of the control for increasing the degree in time series. 請求項１３乃至１７のいずれかにおいて、
第１のキーフレームと第２のキーフレームの間における第１のキーフレーム画像の拡大率と第２のキーフレーム画像の拡大率の少なくとも一方に関する情報を記憶し、
記憶されている第１のキーフレーム画像の拡大率に関する情報に基づき、第１のキーフレーム画像を拡大又は縮小させ、第１’の画像を生成する処理と、
記憶されている第２のキーフレーム画像の拡大率に関する情報に基づき、第２のキーフレーム画像を拡大又は縮小させ、第２’の画像を生成する処理の少なくとも一方の処理を行うことを特徴とするプログラム。In any of claims 13 to 17,
Storing information relating to at least one of an enlargement ratio of the first key frame image and an enlargement ratio of the second key frame image between the first key frame and the second key frame;
A process of enlarging or reducing the first key frame image based on the stored information on the enlargement ratio of the first key frame image to generate a first ′ image;
Based on the stored information relating to the enlargement ratio of the second key frame image, the second key frame image is enlarged or reduced, and at least one of the processes for generating the second ′ image is performed. Program to do. 請求項１３乃至１８のいずれかにおいて、
第１のキーフレームと第２のキーフレームの間における第１のキーフレーム画像の半透明情報と第２のキーフレーム画像の半透明情報の少なくとも一方の情報を記憶し、
記憶されている第１のキーフレーム画像の半透明情報に基づき、第１のキーフレーム画像を拡大又は縮小させた第１’の画像を描画する処理と、
記憶されている第２のキーフレーム画像の半透明情報情報に基づき、第２のキーフレーム画像を拡大又は縮小させた第２’の画像を描画する処理の少なくとも一方の処理を行うことを特徴とするプログラム。In any of claims 13 to 18,
Storing at least one information of translucent information of the first key frame image and translucent information of the second key frame image between the first key frame and the second key frame;
A process of drawing a first ′ image obtained by enlarging or reducing the first key frame image based on the translucent information of the stored first key frame image;
Performing at least one of the processes of drawing a second ′ image obtained by enlarging or reducing the second key frame image based on the translucent information information of the stored second key frame image; Program to do. 請求項１３乃至１９のいずれかにおいて、
第１のキーフレームと第２のキーフレームの間における第１のキーフレーム画像の描画位置特定情報と第２のキーフレーム画像の描画位置特定情報の少なくとも一方に関する情報を記憶し、
記憶されている第１のキーフレーム画像の描画位置特定情報に基づき、第１のキーフレーム画像に基づき生成された第１’の画像の描画バッファに対する描画位置を決定する処理と、
記憶されている第２のキーフレーム画像の描画位置特定情報に基づき、第２のキーフレーム画像に基づき生成された第２’の画像の描画バッファに対する描画位置を決定する処理の少なくとも一方の処理を行うことを特徴とするプログラム。In any of claims 13 to 19,
Storing information related to at least one of drawing position specifying information of the first key frame image and drawing position specifying information of the second key frame image between the first key frame and the second key frame;
A process of determining a drawing position of the first ′ image generated based on the first key frame image with respect to the drawing buffer based on the stored drawing position specifying information of the first key frame image;
Based on the stored drawing position specifying information of the second key frame image, at least one process of determining a drawing position for the drawing buffer of the second ′ image generated based on the second key frame image is performed. A program characterized by being performed. 請求項２０において、
第１のキーフレーム画像から第２のキーフレーム画像へ変化する際の視点移動にあわせて、第１のキーフレーム画像の描画位置特定情報と第２のキーフレーム画像の描画位置特定情報を時系列に記憶させることを特徴とするプログラム。In claim 20,
The drawing position specifying information of the first key frame image and the drawing position specifying information of the second key frame image are time-sequentially matched with the viewpoint movement when changing from the first key frame image to the second key frame image. A program characterized by being memorized. 請求項２０乃至２１のいずれかにおいて、
複数の視点移動パターンと、各視点移動パターンに対応したキーフレーム画像群の前記描画位置特定情報を記憶し、
所与のイベント又は外部からの入力に基づきいずれかの視点移動パターンを選択し、選択された視点移動パターンに応じてキーフレーム画像群及びキーフレーム画像群の描画位置特定情報を選択することを特徴とするプログラム。A device according to any one of claims 20 to 21.
Storing a plurality of viewpoint movement patterns and the drawing position specifying information of a key frame image group corresponding to each viewpoint movement pattern;
One of the viewpoint movement patterns is selected based on a given event or an external input, and the key frame image group and the drawing position specifying information of the key frame image group are selected according to the selected viewpoint movement pattern. Program. 請求項１３乃至２２のいずれかにおいて、
時系列に与えられた複数のキーフレーム画像ｎ−１、キーフレーム画像ｎ、キーフレーム画像ｎ＋１・・に対し、
キーフレーム画像ｎ−１とキーフレーム画像ｎについて前記キーフレーム画像合成処理を行った後に、キーフレーム画像ｎとキーフレーム画像ｎ＋１について前記キーフレーム画像合成処理を行うことを特徴とするプログラム。In any of claims 13 to 22,
For a plurality of key frame images n−1, key frame images n, key frame images n + 1,.
A program characterized by performing the key frame image composition processing on the key frame image n and the key frame image n + 1 after performing the key frame image composition processing on the key frame image n-1 and the key frame image n . 請求項１３乃至２３のいずれかにおいて、
時系列に与えられたキーフレーム画像１、・・・、キーフレーム画像ｎ−１、キーフレーム画像ｎにおいて、前記キーフレーム画像ｎの一部に前記キーフレーム画像１の絵柄を含むように用意し、
キーフレーム画像ｎ−１とキーフレーム画像ｎについて前記キーフレーム画像合成処理を行った後に、キーフレーム画像ｎとキーフレーム画像１について前記キーフレーム画像合成処理を行うことを特徴とするプログラム。24. Any one of claims 13 to 23.
The key frame images 1,..., Key frame image n-1, and key frame image n given in time series are prepared so that a part of the key frame image n includes the design of the key frame image 1. ,
A program characterized by performing the key frame image composition processing on the key frame image n and the key frame image 1 after performing the key frame image composition processing on the key frame image n-1 and the key frame image n. コンピュータにより読みとり可能な情報記憶媒体であって、請求項１３乃至２４のいずれかに記載のプログラムを記憶することを特徴とする情報記憶媒体。  An information storage medium readable by a computer, wherein the program according to any one of claims 13 to 24 is stored.
JP2002036812A 2002-02-14 2002-02-14 Image generation system, program, and information storage medium Expired - Fee Related JP3656054B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2002036812A JP3656054B2 (en) 2002-02-14 2002-02-14 Image generation system, program, and information storage medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2002036812A JP3656054B2 (en) 2002-02-14 2002-02-14 Image generation system, program, and information storage medium

Publications (2)

Publication Number Publication Date
JP2003242517A JP2003242517A (en) 2003-08-29
JP3656054B2 true JP3656054B2 (en) 2005-06-02

Family

ID=27778585

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2002036812A Expired - Fee Related JP3656054B2 (en) 2002-02-14 2002-02-14 Image generation system, program, and information storage medium

Country Status (1)

Country Link
JP (1) JP3656054B2 (en)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101377950B1 (en) * 2007-05-04 2014-03-25 엘지전자 주식회사 Image display method and terminal implementing the same
JP4829269B2 (en) * 2008-04-11 2011-12-07 富士フイルム株式会社 Image processing system and method
CN102737619A (en) * 2011-04-14 2012-10-17 王萌 Eye-protection type video processing technology
JP2014529930A (en) 2011-08-05 2014-11-13 フォックス スポーツ プロダクションズ，インコーポレイティッド Selective capture and display of a portion of a native image
US11039109B2 (en) 2011-08-05 2021-06-15 Fox Sports Productions, Llc System and method for adjusting an image for a vehicle mounted camera
US11159854B2 (en) 2014-12-13 2021-10-26 Fox Sports Productions, Llc Systems and methods for tracking and tagging objects within a broadcast
US11758238B2 (en) 2014-12-13 2023-09-12 Fox Sports Productions, Llc Systems and methods for displaying wind characteristics and effects within a broadcast

Also Published As

Publication number Publication date
JP2003242517A (en) 2003-08-29

Similar Documents

Publication Publication Date Title
JP3262772B2 (en) Image generation system and information storage medium
US20100156918A1 (en) Program, information storage medium, image generation system, and image generation method for generating an image for overdriving the display device
JP3656054B2 (en) Image generation system, program, and information storage medium
JP2001319244A (en) Game system and information storage medium
JP2002216158A (en) Image generation system, program and information storage medium
JP3350654B2 (en) Image generation system and information storage medium
JP2005032140A (en) Image generation system, program, and information storage medium
JP3990258B2 (en) Image generation system, program, and information storage medium
JP2004334661A (en) Image generating system, program, and information storage medium
JP3576126B2 (en) Image generation system, program, and information storage medium
JP4447000B2 (en) Image generation system, program, and information storage medium
JP4656616B2 (en) GAME SYSTEM, PROGRAM, AND INFORMATION STORAGE MEDIUM
JP2006011539A (en) Program, information storage medium, and image generating system
JP3663407B2 (en) GAME DEVICE AND INFORMATION STORAGE MEDIUM
JP4443083B2 (en) Image generation system and information storage medium
JP3467259B2 (en) GAME SYSTEM, PROGRAM, AND INFORMATION STORAGE MEDIUM
JP2002163671A (en) Game system, program and information storage medium
JP3538394B2 (en) GAME SYSTEM, PROGRAM, AND INFORMATION STORAGE MEDIUM
JP2001084402A (en) Picture generation system and information storage medium
JP2002269582A (en) Game information, information storage medium, and game device
JP4704615B2 (en) Image generation system, program, and information storage medium
JP4913898B2 (en) GAME SYSTEM, PROGRAM, AND INFORMATION STORAGE MEDIUM
JP2004038639A (en) System for generating picture, program and medium for recording information
JP4605914B2 (en) GAME SYSTEM, PROGRAM, AND INFORMATION STORAGE MEDIUM
JP4680670B2 (en) Program, information storage medium, and image generation system

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20041102

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20041206

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20050215

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20050307

R150 Certificate of patent or registration of utility model

Ref document number: 3656054

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

S533 Written request for registration of change of name

Free format text: JAPANESE INTERMEDIATE CODE: R313533

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20080311

Year of fee payment: 3

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20080311

Year of fee payment: 3

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20080311

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090311

Year of fee payment: 4

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090311

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100311

Year of fee payment: 5

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100311

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100311

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110311

Year of fee payment: 6

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110311

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120311

Year of fee payment: 7

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120311

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120311

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130311

Year of fee payment: 8

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130311

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130311

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140311

Year of fee payment: 9

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S533 Written request for registration of change of name

Free format text: JAPANESE INTERMEDIATE CODE: R313533

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R360 Written notification for declining of transfer of rights

Free format text: JAPANESE INTERMEDIATE CODE: R360

R370 Written measure of declining of transfer procedure

Free format text: JAPANESE INTERMEDIATE CODE: R370

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees