JPH11161814A - 画像生成装置、シミュレーション装置及び情報記憶媒体 - Google Patents
画像生成装置、シミュレーション装置及び情報記憶媒体Info
- Publication number
- JPH11161814A JPH11161814A JP9339305A JP33930597A JPH11161814A JP H11161814 A JPH11161814 A JP H11161814A JP 9339305 A JP9339305 A JP 9339305A JP 33930597 A JP33930597 A JP 33930597A JP H11161814 A JPH11161814 A JP H11161814A
- Authority
- JP
- Japan
- Prior art keywords
- information
- image
- focus
- blur
- dimensional
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/20—Input arrangements for video game devices
- A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
- A63F13/212—Input arrangements for video game devices characterised by their sensors, purposes or types using sensors worn by the player, e.g. for measuring heart beat or leg activity
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/20—Input arrangements for video game devices
- A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
- A63F13/219—Input arrangements for video game devices characterised by their sensors, purposes or types for aiming at specific areas on the display, e.g. light-guns
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/50—Controlling the output signals based on the game progress
- A63F13/53—Controlling the output signals based on the game progress involving additional visual information provided to the game scene, e.g. by overlay to simulate a head-up display [HUD] or displaying a laser sight in a shooting game
- A63F13/537—Controlling the output signals based on the game progress involving additional visual information provided to the game scene, e.g. by overlay to simulate a head-up display [HUD] or displaying a laser sight in a shooting game using indicators, e.g. showing the condition of a game character on screen
- A63F13/5375—Controlling the output signals based on the game progress involving additional visual information provided to the game scene, e.g. by overlay to simulate a head-up display [HUD] or displaying a laser sight in a shooting game using indicators, e.g. showing the condition of a game character on screen for graphically or textually suggesting an action, e.g. by displaying an arrow indicating a turn in a driving game
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
- A63F2300/60—Methods for processing data by generating or executing the game program
- A63F2300/66—Methods for processing data by generating or executing the game program for rendering three dimensional images
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
- A63F2300/60—Methods for processing data by generating or executing the game program
- A63F2300/66—Methods for processing data by generating or executing the game program for rendering three dimensional images
- A63F2300/6653—Methods for processing data by generating or executing the game program for rendering three dimensional images for altering the visibility of an object, e.g. preventing the occlusion of an object, partially hiding an object
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Human Computer Interaction (AREA)
- Life Sciences & Earth Sciences (AREA)
- Optics & Photonics (AREA)
- Health & Medical Sciences (AREA)
- Physics & Mathematics (AREA)
- Biophysics (AREA)
- Cardiology (AREA)
- General Health & Medical Sciences (AREA)
- Heart & Thoracic Surgery (AREA)
- Processing Or Creating Images (AREA)
- Image Generation (AREA)
Abstract
(57)【要約】
【課題】 任意の焦点位置や観客の注視点（視線方向）
に基づいてフォーカシングされた画像、又は観客の注視
点を誘導するようにフォーカシングされた画像をリアル
タイムに生成すること。 【解決手段】 本画像生成装置１００は、予めピント別
に複数のオブジェクト情報をピント別オブジェクト情報
記憶部１３１に登録しておき、ぼやけ情報に応じてリア
ルタイムに差し替えてフォーカシングされた画像を生成
する。注視点検出部１１０は看者の注視点を検出し、焦
点演算部１２２は、注視点に基づいて焦点位置を決定
し、ぼやけ情報記憶部１２３は各オブジェクトのぼやけ
情報を決定する。３次元演算部１２６及び画像描画部１
２７は前記ぼやけ情報に基づいてピント別オブジェクト
情報を読み出し画像を生成する。なお、焦点演算部１２
２は観客の注視点を誘導するような焦点位置を決定して
もよい。
に基づいてフォーカシングされた画像、又は観客の注視
点を誘導するようにフォーカシングされた画像をリアル
タイムに生成すること。 【解決手段】 本画像生成装置１００は、予めピント別
に複数のオブジェクト情報をピント別オブジェクト情報
記憶部１３１に登録しておき、ぼやけ情報に応じてリア
ルタイムに差し替えてフォーカシングされた画像を生成
する。注視点検出部１１０は看者の注視点を検出し、焦
点演算部１２２は、注視点に基づいて焦点位置を決定
し、ぼやけ情報記憶部１２３は各オブジェクトのぼやけ
情報を決定する。３次元演算部１２６及び画像描画部１
２７は前記ぼやけ情報に基づいてピント別オブジェクト
情報を読み出し画像を生成する。なお、焦点演算部１２
２は観客の注視点を誘導するような焦点位置を決定して
もよい。
Description
【０００１】
【発明が属する技術分野】本発明は、リアルタイムＣＧ
で静止画像、動画像、立体映像など各種の画像生成を行
う画像生成装置、シミュレーション装置及び、情報記憶
媒体に関する。特に、注視点や注視点誘導を行いたいも
のにフォーカシングを行った画像を生成する画像生成装
置、シミュレーション装置及び情報記憶媒体に関する。
で静止画像、動画像、立体映像など各種の画像生成を行
う画像生成装置、シミュレーション装置及び、情報記憶
媒体に関する。特に、注視点や注視点誘導を行いたいも
のにフォーカシングを行った画像を生成する画像生成装
置、シミュレーション装置及び情報記憶媒体に関する。
【０００２】
【背景の技術】従来の映像はリアルタイム映像生成の手
段をもっていなかったため、観客の注視点に対応したリ
アルタイムでのピント調整（以下リアルタイムフォーカ
シングという）を行うという概念が欠落していた。この
ため、映像内の個々の被写体のピントを固定して表示し
焦点調節に関しては以下の表現方法がとられていた。
段をもっていなかったため、観客の注視点に対応したリ
アルタイムでのピント調整（以下リアルタイムフォーカ
シングという）を行うという概念が欠落していた。この
ため、映像内の個々の被写体のピントを固定して表示し
焦点調節に関しては以下の表現方法がとられていた。
【０００３】例えば、パンフォーカス方式は、映像内の
全ての被写体にピントを合わせ、ピンぼけの被写体が画
面内には存在しない状態にする方法である。従来のビデ
オゲームはほとんどこの方式である。しかし、至近距離
から遠距離まで全ての被写体にピントが合っている画像
は日常生活では体験しない変則的な視界環境であるた
め、見た目に不自然さがあった。
全ての被写体にピントを合わせ、ピンぼけの被写体が画
面内には存在しない状態にする方法である。従来のビデ
オゲームはほとんどこの方式である。しかし、至近距離
から遠距離まで全ての被写体にピントが合っている画像
は日常生活では体験しない変則的な視界環境であるた
め、見た目に不自然さがあった。
【０００４】また、人が立体感を感じるための重要な要
因の一つには、眼球と被写体との距離に応じて、被写体
のピントにずれが生じるという現象がある。しかし、パ
ンフォーカシングを導入すると、このような自然なピン
トずれが生じないため、映像が平板な印象となり、その
立体感が低下してしまうという問題がある。
因の一つには、眼球と被写体との距離に応じて、被写体
のピントにずれが生じるという現象がある。しかし、パ
ンフォーカシングを導入すると、このような自然なピン
トずれが生じないため、映像が平板な印象となり、その
立体感が低下してしまうという問題がある。
【０００５】また例えば固定フォーカス方式は、映像内
の主たる被写体にだけ焦点を合わせることにより、焦点
が合っていない被写体には、視線が向かないように演出
する方法である。特開平８−１６８１２にもこの方式の
一例が開示されている。
の主たる被写体にだけ焦点を合わせることにより、焦点
が合っていない被写体には、視線が向かないように演出
する方法である。特開平８−１６８１２にもこの方式の
一例が開示されている。
【０００６】しかし、個点フォーカシング方式は、全被
写体のピント状態は固定状態、即ち主たる被写体には常
にピントが合っており、その他は常にピンぼけ状態であ
り、焦点を合わせられない被写体が存在する。映像が自
然な立体感を得るためには、観客が映像内のすべての被
写体に対して焦点を合わせることが可能で、しかも観客
の焦点調節に伴い全被写体のピント状況が変化すること
が望ましい。
写体のピント状態は固定状態、即ち主たる被写体には常
にピントが合っており、その他は常にピンぼけ状態であ
り、焦点を合わせられない被写体が存在する。映像が自
然な立体感を得るためには、観客が映像内のすべての被
写体に対して焦点を合わせることが可能で、しかも観客
の焦点調節に伴い全被写体のピント状況が変化すること
が望ましい。
【０００７】
【発明が解決しようとする課題】本発明の第１の目的
は、変化する任意の焦点位置に対して、リアルタイムに
フォーカシングされた画像を生成する画像生成装置、シ
ミュレーション装置及び情報記憶媒体を提供することで
ある。
は、変化する任意の焦点位置に対して、リアルタイムに
フォーカシングされた画像を生成する画像生成装置、シ
ミュレーション装置及び情報記憶媒体を提供することで
ある。
【０００８】本発明の第２の目的は、観客の注視点（視
線方向）をリアルタイムに検出し、この検出位置に合わ
せてフォーカシングされた画像をリアルタイムに生成す
る画像生成装置、シミュレーション装置及び情報記憶媒
体を提供することである。
線方向）をリアルタイムに検出し、この検出位置に合わ
せてフォーカシングされた画像をリアルタイムに生成す
る画像生成装置、シミュレーション装置及び情報記憶媒
体を提供することである。
【０００９】本発明の第３の目的は、フォーカシング位
置を映像内において移動させることにより観客の注視点
を誘導する画像をリアルタイムに生成する画像生成装
置、シミュレーション装置及び情報記憶媒体を提供する
ことである。
置を映像内において移動させることにより観客の注視点
を誘導する画像をリアルタイムに生成する画像生成装
置、シミュレーション装置及び情報記憶媒体を提供する
ことである。
【００１０】
【課題を解決するための手段】本発明の画像生成装置
は、視点位置情報、３次元オブジェクトの位置情報及び
２次元ピクチャーの位置情報の少なくとも一つの位置情
報に基づき、リアルタイムに変化する任意の焦点位置に
対する前記３次元オブジェクト及び前記２次元ピクチャ
ーの少なくとも一方の画像のぼやけ程度を表すぼやけ情
報を決定するぼやけ情報決定手段と、前記ぼやけ情報に
基づき、フォーカシングされた画像を生成するフォーカ
シング画像生成手段とを含むことを特徴とする。
は、視点位置情報、３次元オブジェクトの位置情報及び
２次元ピクチャーの位置情報の少なくとも一つの位置情
報に基づき、リアルタイムに変化する任意の焦点位置に
対する前記３次元オブジェクト及び前記２次元ピクチャ
ーの少なくとも一方の画像のぼやけ程度を表すぼやけ情
報を決定するぼやけ情報決定手段と、前記ぼやけ情報に
基づき、フォーカシングされた画像を生成するフォーカ
シング画像生成手段とを含むことを特徴とする。
【００１１】また本発明の情報記憶媒体は、視点位置情
報、３次元オブジェクトの位置情報及び２次元ピクチャ
ーの位置情報の少なくとも一つの位置情報に基づき、リ
アルタイムに変化する任意の焦点位置に対する前記３次
元オブジェクト及び前記２次元ピクチャーの少なくとも
一方の画像のぼやけ程度を表すぼやけ情報を決定するた
めの情報と、前記ぼやけ情報に基づき、フォーカシング
された画像を生成するための情報とを含むことを特徴と
する。
報、３次元オブジェクトの位置情報及び２次元ピクチャ
ーの位置情報の少なくとも一つの位置情報に基づき、リ
アルタイムに変化する任意の焦点位置に対する前記３次
元オブジェクト及び前記２次元ピクチャーの少なくとも
一方の画像のぼやけ程度を表すぼやけ情報を決定するた
めの情報と、前記ぼやけ情報に基づき、フォーカシング
された画像を生成するための情報とを含むことを特徴と
する。
【００１２】ここにおいて３次元オブジェクトとは、オ
ブジェクトの形状を表すデータが（Ｘ、Ｙ、Ｚ）の３次
元の要素で定義されているものであり、例えばポリゴン
オブジェクトや自由曲面で形成されたオブジェクト等で
ある。また２次元ピクチャーとは、ピクチャーの形状を
表すデータが（Ｘ、Ｙ）の２次元の要素で定義されてい
るものであり例えばアニメのセル画やＣＧでのスプライ
ト等である。
ブジェクトの形状を表すデータが（Ｘ、Ｙ、Ｚ）の３次
元の要素で定義されているものであり、例えばポリゴン
オブジェクトや自由曲面で形成されたオブジェクト等で
ある。また２次元ピクチャーとは、ピクチャーの形状を
表すデータが（Ｘ、Ｙ）の２次元の要素で定義されてい
るものであり例えばアニメのセル画やＣＧでのスプライ
ト等である。
【００１３】人の眼球は注視しているものに焦点があう
ため、人の視界画像は注視しているものは鮮明に、その
他のものは位置関係に応じてぼやけたものとなる。本発
明によれば表示物や視点位置の位置関係に応じて任意の
焦点位置に対してリアルタイムにフォーカシングされた
画像を生成することができる。このため全ての表示物に
ピントが合っているパンフォーカス方式の画像と違い、
人の視界画像に近い自然でリアルな画像を、任意の焦点
位置に対してリアルタイムに生成することができる。
ため、人の視界画像は注視しているものは鮮明に、その
他のものは位置関係に応じてぼやけたものとなる。本発
明によれば表示物や視点位置の位置関係に応じて任意の
焦点位置に対してリアルタイムにフォーカシングされた
画像を生成することができる。このため全ての表示物に
ピントが合っているパンフォーカス方式の画像と違い、
人の視界画像に近い自然でリアルな画像を、任意の焦点
位置に対してリアルタイムに生成することができる。
【００１４】従って、リアルタイムに変化する焦点位置
に基づき２次元ピクチャーの位置情報に応じてぼやけた
状態の画像を生成することにより、平面映像の立体感を
向上させることができる。また、リアルタイムに変化す
る焦点位置に基づき３次元オブジェクトの位置情報に応
じてぼやけた状態の画像を生成することにより、両眼視
差を利用した既存の立体映像と組み合わせて立体映像の
立体感をより向上させることもできる。
に基づき２次元ピクチャーの位置情報に応じてぼやけた
状態の画像を生成することにより、平面映像の立体感を
向上させることができる。また、リアルタイムに変化す
る焦点位置に基づき３次元オブジェクトの位置情報に応
じてぼやけた状態の画像を生成することにより、両眼視
差を利用した既存の立体映像と組み合わせて立体映像の
立体感をより向上させることもできる。
【００１５】また本発明の画像生成装置の前記ぼやけ情
報決定手段は、前記３次元オブジェクト及び前記２次元
ピクチャーの少なくとも一方と前記視点位置との距離を
表す第一の距離と、前記焦点位置と前記視点位置の距離
を表す第二の距離とで特定される距離差及び距離比に基
づき前記ぼやけ情報を決定し、前記フォーカシング画像
生成手段は、前記３次元オブジェクト及び前記２次元ピ
クチャーの少なくとも一方に対して前記ぼやけ情報によ
り特定される前記距離差及び距離比が大きくなるほどぼ
やけた画像を生成することを特徴とする。
報決定手段は、前記３次元オブジェクト及び前記２次元
ピクチャーの少なくとも一方と前記視点位置との距離を
表す第一の距離と、前記焦点位置と前記視点位置の距離
を表す第二の距離とで特定される距離差及び距離比に基
づき前記ぼやけ情報を決定し、前記フォーカシング画像
生成手段は、前記３次元オブジェクト及び前記２次元ピ
クチャーの少なくとも一方に対して前記ぼやけ情報によ
り特定される前記距離差及び距離比が大きくなるほどぼ
やけた画像を生成することを特徴とする。
【００１６】また本発明の情報記憶媒体の前記ぼやけ情
報を決定するための情報は、前記３次元オブジェクト及
び前記２次元ピクチャーの少なくとも一方と前記視点位
置との距離を表す第一の距離と、前記焦点位置と前記視
点位置の距離を表す第二の距離とで特定される距離差及
び距離比に基づき前記ぼやけ情報を決定するための情報
を含み、前記フォーカシングされた画像を生成するため
情報は、前記３次元オブジェクト及び前記２次元ピクチ
ャーの少なくとも一方に対して前記ぼやけ情報により特
定される前記距離差及び距離比が大きくなるほどぼやけ
た画像を生成するための情報を含むことを特徴とする。
報を決定するための情報は、前記３次元オブジェクト及
び前記２次元ピクチャーの少なくとも一方と前記視点位
置との距離を表す第一の距離と、前記焦点位置と前記視
点位置の距離を表す第二の距離とで特定される距離差及
び距離比に基づき前記ぼやけ情報を決定するための情報
を含み、前記フォーカシングされた画像を生成するため
情報は、前記３次元オブジェクト及び前記２次元ピクチ
ャーの少なくとも一方に対して前記ぼやけ情報により特
定される前記距離差及び距離比が大きくなるほどぼやけ
た画像を生成するための情報を含むことを特徴とする。
【００１７】一般に人の目のレンズの厚みは、注視点ま
での距離に合わせて変化する。従って視界画像は注視点
にピントが合っており、焦点距離から離れた位置にある
ものほどぼやけた画像となる。
での距離に合わせて変化する。従って視界画像は注視点
にピントが合っており、焦点距離から離れた位置にある
ものほどぼやけた画像となる。
【００１８】また本発明の第二の距離は焦点距離を表す
ため、前記距離差は焦点距離との距離差を表すことにな
る。従って本発明によれば、焦点距離との距離差及び距
離比が大きい位置の３次元オブジェクトや２次元ピクチ
ャーほどぼやけた画像を生成することができる。このた
め、本発明の画像生成装置は人の視界画像に近い自然で
リアルな画像を生成することができる。
ため、前記距離差は焦点距離との距離差を表すことにな
る。従って本発明によれば、焦点距離との距離差及び距
離比が大きい位置の３次元オブジェクトや２次元ピクチ
ャーほどぼやけた画像を生成することができる。このた
め、本発明の画像生成装置は人の視界画像に近い自然で
リアルな画像を生成することができる。
【００１９】また本発明の画像生成装置は、看者の注視
点をリアルタイムに検出する注視点検出手段と、検出さ
れた前記注視点に基づき、焦点位置を決定する手段とを
更に含むことを特徴とする。
点をリアルタイムに検出する注視点検出手段と、検出さ
れた前記注視点に基づき、焦点位置を決定する手段とを
更に含むことを特徴とする。
【００２０】また本発明の情報記憶媒体は、リアルタイ
ムに検出された看者の注視点に基づき、焦点位置を決定
するための情報を更に含むことを特徴とする。
ムに検出された看者の注視点に基づき、焦点位置を決定
するための情報を更に含むことを特徴とする。
【００２１】ここにおいて看者の注視点を検出するとは
看者の視線を検出することをいい、注視点検出手段を用
いることにより、看者がどこを注視しているかがわか
る。人の眼球は注視しているものに焦点があうため、看
者の視界画像は注視点にあるものは鮮明に、その他のも
のは位置関係に応じてぼやけた映像となる。
看者の視線を検出することをいい、注視点検出手段を用
いることにより、看者がどこを注視しているかがわか
る。人の眼球は注視しているものに焦点があうため、看
者の視界画像は注視点にあるものは鮮明に、その他のも
のは位置関係に応じてぼやけた映像となる。
【００２２】本発明によれば看者の注視点変化に応じて
リアルタイムにフォーカシングされた画像を生成するこ
とができる。即ち、看者が注視している表示物にピント
が合っており他の表示物は位置関係に応じてぼやけた画
像を生成することができる。このためリアルタイムに変
化する看者の注視点に応じて、看者の視界画像に近い自
然でリアルな画像を生成することができる。
リアルタイムにフォーカシングされた画像を生成するこ
とができる。即ち、看者が注視している表示物にピント
が合っており他の表示物は位置関係に応じてぼやけた画
像を生成することができる。このためリアルタイムに変
化する看者の注視点に応じて、看者の視界画像に近い自
然でリアルな画像を生成することができる。
【００２３】なお、看者の注視点を検出する手段として
は、例えばアイカメラ等を用いて構成することができる
が、他の方法でもよい。
は、例えばアイカメラ等を用いて構成することができる
が、他の方法でもよい。
【００２４】また本発明の画像生成装置は、所与のルー
ルに基づき画像の焦点位置、焦点の存在する３次元オブ
ジェクト及び焦点の存在する２次元ピクチャーの少なく
とも一方を決定する手段を更に含み、前記ぼやけ情報決
定手段は、前記焦点位置、焦点の存在する前記３次元オ
ブジェクト及び焦点の存在する前記２次元ピクチャーの
少なくとも一方に基づき前記ぼやけ情報を決定すること
を特徴とする。
ルに基づき画像の焦点位置、焦点の存在する３次元オブ
ジェクト及び焦点の存在する２次元ピクチャーの少なく
とも一方を決定する手段を更に含み、前記ぼやけ情報決
定手段は、前記焦点位置、焦点の存在する前記３次元オ
ブジェクト及び焦点の存在する前記２次元ピクチャーの
少なくとも一方に基づき前記ぼやけ情報を決定すること
を特徴とする。
【００２５】また本発明の情報記憶媒体は、所与のルー
ルに基づき画像の焦点位置、焦点の存在する３次元オブ
ジェクト及び焦点の存在する２次元ピクチャーの少なく
とも一方を決定するための情報を更に含み、前記ぼやけ
情報を決定するための情報は、前記焦点位置、焦点の存
在する前記３次元オブジェクト及び焦点の存在する前記
２次元ピクチャーの少なくとも一方に基づき前記ぼやけ
情報を決定する情報を含むことを特徴とする。
ルに基づき画像の焦点位置、焦点の存在する３次元オブ
ジェクト及び焦点の存在する２次元ピクチャーの少なく
とも一方を決定するための情報を更に含み、前記ぼやけ
情報を決定するための情報は、前記焦点位置、焦点の存
在する前記３次元オブジェクト及び焦点の存在する前記
２次元ピクチャーの少なくとも一方に基づき前記ぼやけ
情報を決定する情報を含むことを特徴とする。
【００２６】本発明によれば、所与のルールに基づいて
決定される画像の焦点位置、３次元オブジェクト及び２
次元ピクチャーの少なくとも１つにピントが合うようフ
ォーカシングされた画像を生成することができる。従っ
て、映像内容に応じて適切な焦点位置等を決定すること
により看者の注視点誘導を行うことができる。
決定される画像の焦点位置、３次元オブジェクト及び２
次元ピクチャーの少なくとも１つにピントが合うようフ
ォーカシングされた画像を生成することができる。従っ
て、映像内容に応じて適切な焦点位置等を決定すること
により看者の注視点誘導を行うことができる。
【００２７】なお生成された画像の用途によっては、乱
数等を利用して焦点が不規則に定まるようにしてもよ
い。
数等を利用して焦点が不規則に定まるようにしてもよ
い。
【００２８】また本発明の前記フォーカシング画像生成
手段は、所与の１の３次元オブジェクトに対してぼやけ
情報毎に複数のピント別オブジェクト情報を記憶するピ
ント別オブジェクト情報記憶手段を含み、前記ぼやけ情
報に基づき、ピント別オブジェクト情報記憶手段からピ
ント別オブジェクト情報を読み出して、該ピント別オブ
ジェクト情報にもとづいて画像を生成することを特徴と
する。
手段は、所与の１の３次元オブジェクトに対してぼやけ
情報毎に複数のピント別オブジェクト情報を記憶するピ
ント別オブジェクト情報記憶手段を含み、前記ぼやけ情
報に基づき、ピント別オブジェクト情報記憶手段からピ
ント別オブジェクト情報を読み出して、該ピント別オブ
ジェクト情報にもとづいて画像を生成することを特徴と
する。
【００２９】本発明のピント別オブジェクト情報記憶手
段は、１のオブジェクトに対して例えばピントの合った
画像を生成するためのオブジェクト情報、ピントの少し
合っていない画像を生成するためのオブジェクト情報、
ピントの全く合っていない画像を生成するためのオブジ
ェクト情報等の複数のオブジェクト情報を記憶してい
る。従って、前記複数のオブジェクト情報からぼやけ情
報に応じて最適なオブジェクト情報を選択するという簡
単な構成で、表示物や視点位置の位置関係に応じて任意
の焦点位置に対してリアルタイムにフォーカシングされ
た画像を生成することができる。
段は、１のオブジェクトに対して例えばピントの合った
画像を生成するためのオブジェクト情報、ピントの少し
合っていない画像を生成するためのオブジェクト情報、
ピントの全く合っていない画像を生成するためのオブジ
ェクト情報等の複数のオブジェクト情報を記憶してい
る。従って、前記複数のオブジェクト情報からぼやけ情
報に応じて最適なオブジェクト情報を選択するという簡
単な構成で、表示物や視点位置の位置関係に応じて任意
の焦点位置に対してリアルタイムにフォーカシングされ
た画像を生成することができる。
【００３０】また本発明は、前記フォーカシング画像生
成手段が所与の１の２次元ピクチャーに対してぼやけ情
報毎に複数のピント別ピクチャー情報を記憶するピント
別ピクチャー情報記憶手段を含み、前記ぼやけ情報に基
づき、ピント別ピクチャー情報記憶手段からピント別ピ
クチャー情報を読み出して、該ピント別ピクチャー情報
にもとづいて画像を生成することを特徴とする。
成手段が所与の１の２次元ピクチャーに対してぼやけ情
報毎に複数のピント別ピクチャー情報を記憶するピント
別ピクチャー情報記憶手段を含み、前記ぼやけ情報に基
づき、ピント別ピクチャー情報記憶手段からピント別ピ
クチャー情報を読み出して、該ピント別ピクチャー情報
にもとづいて画像を生成することを特徴とする。
【００３１】本発明のピント別ピクチャー情報記憶手段
は、１のピクチャーに対して例えばピントの合った画像
を生成するためのピクチャー情報、ピントの少し合って
いない画像を生成するためのピクチャー情報、ピントの
全く合っていない画像を生成するためのピクチャー情報
等の複数のピクチャー情報を記憶している。従って、前
記複数のピクチャー情報からぼやけ情報に応じて最適な
ピクチャー情報を選択するという簡単な構成で、表示物
や視点位置の位置関係に応じて任意の焦点位置に対して
リアルタイムにフォーカシングされた画像を生成するこ
とができる。
は、１のピクチャーに対して例えばピントの合った画像
を生成するためのピクチャー情報、ピントの少し合って
いない画像を生成するためのピクチャー情報、ピントの
全く合っていない画像を生成するためのピクチャー情報
等の複数のピクチャー情報を記憶している。従って、前
記複数のピクチャー情報からぼやけ情報に応じて最適な
ピクチャー情報を選択するという簡単な構成で、表示物
や視点位置の位置関係に応じて任意の焦点位置に対して
リアルタイムにフォーカシングされた画像を生成するこ
とができる。
【００３２】また本発明は、前記フォーカシング画像生
成手段が所与の１の３次元オブジェクトに対して少なく
とも１つのオブジェクト情報を記憶するオブジェクト情
報記憶手段と、前記ぼやけ情報に基づき前記オブジェク
ト情報記憶手段に記憶されたオブジェクト情報をぼやけ
加工し、ぼやけ情報に応じたオブジェクト情報を生成す
るぼやけ加工手段とを含むことを特徴とする。
成手段が所与の１の３次元オブジェクトに対して少なく
とも１つのオブジェクト情報を記憶するオブジェクト情
報記憶手段と、前記ぼやけ情報に基づき前記オブジェク
ト情報記憶手段に記憶されたオブジェクト情報をぼやけ
加工し、ぼやけ情報に応じたオブジェクト情報を生成す
るぼやけ加工手段とを含むことを特徴とする。
【００３３】一般にピントが合っている場合は鮮明な画
像が表示され、ピントが合わなくなるほどぼやけた画像
が表示されることになる。このため一般に、１のオブジ
ェクトに対してもピントのあい具合に応じてオブジェク
ト情報は異なったものとなる。本発明のぼやけ加工手段
は、ぼやけ情報に基づいて前記オブジェクト情報記憶手
段に記憶されたオブジェクト情報をぼやけ加工し、ぼや
け情報に応じたオブジェクト情報をリアルタイムに生成
する。このため１のオブジェクトに対して少なくとも１
の状態の画像を生成するためのオブジェクト情報を記憶
しておくだけでよいため、ぼやけ情報に基づいて異なっ
たオブジェクト情報を予め複数記憶しておく場合に比べ
てオブジェクト情報の記憶量を削減することができる。
像が表示され、ピントが合わなくなるほどぼやけた画像
が表示されることになる。このため一般に、１のオブジ
ェクトに対してもピントのあい具合に応じてオブジェク
ト情報は異なったものとなる。本発明のぼやけ加工手段
は、ぼやけ情報に基づいて前記オブジェクト情報記憶手
段に記憶されたオブジェクト情報をぼやけ加工し、ぼや
け情報に応じたオブジェクト情報をリアルタイムに生成
する。このため１のオブジェクトに対して少なくとも１
の状態の画像を生成するためのオブジェクト情報を記憶
しておくだけでよいため、ぼやけ情報に基づいて異なっ
たオブジェクト情報を予め複数記憶しておく場合に比べ
てオブジェクト情報の記憶量を削減することができる。
【００３４】なお、オブジェクトをポリゴンで構成した
場合、前記ぼやけ加工手段として前記ぼやけ情報に基づ
きポリゴンデータをぼやけ加工するポリゴンデータぼや
け加工手段とテクスチャデータをぼやけ加工するテクス
チャデータぼやけ加工手段を含むようにしても良い。こ
の場合オブジェクト情報記憶手段は、ポリゴン情報とテ
クスチャ情報を含む情報を記憶させておくことが好まし
い。
場合、前記ぼやけ加工手段として前記ぼやけ情報に基づ
きポリゴンデータをぼやけ加工するポリゴンデータぼや
け加工手段とテクスチャデータをぼやけ加工するテクス
チャデータぼやけ加工手段を含むようにしても良い。こ
の場合オブジェクト情報記憶手段は、ポリゴン情報とテ
クスチャ情報を含む情報を記憶させておくことが好まし
い。
【００３５】例えば前記オブジェクト情報記憶手段には
所与のオブジェクトＡのピントが合った状態の画像を生
成するためのポリゴン情報とテクスチャ情報からなる情
報が記憶されていたとする。ポリゴンデータぼやけ加工
手段は例えば、前記ポリゴン情報に所与ルールに従って
ポリゴン数を減らす処理を行いオブジェクトＡのぼやけ
た画像を生成するための新たなポリゴン情報を生成する
等してもよい。そしてテクチャぼやけ加工手段は例え
ば、前記テクスチャ情報に所与ルールに従って半透明処
理等をおこないオブジェクトＡのぼやけた画像を生成す
るための新たなテクスチャ情報を生成する等してもよ
い。
所与のオブジェクトＡのピントが合った状態の画像を生
成するためのポリゴン情報とテクスチャ情報からなる情
報が記憶されていたとする。ポリゴンデータぼやけ加工
手段は例えば、前記ポリゴン情報に所与ルールに従って
ポリゴン数を減らす処理を行いオブジェクトＡのぼやけ
た画像を生成するための新たなポリゴン情報を生成する
等してもよい。そしてテクチャぼやけ加工手段は例え
ば、前記テクスチャ情報に所与ルールに従って半透明処
理等をおこないオブジェクトＡのぼやけた画像を生成す
るための新たなテクスチャ情報を生成する等してもよ
い。
【００３６】このようにすると、ピントのあった画像を
生成するためのオブジェクト情報に基づき、ピントのあ
っていない画像のオブジェクト情報をリアルタイムに生
成することができる。
生成するためのオブジェクト情報に基づき、ピントのあ
っていない画像のオブジェクト情報をリアルタイムに生
成することができる。
【００３７】また本発明の前記フォーカシング画像生成
手段は、フォーカシングされた画像を生成するために、
所与の３次元オブジェクトにレンダリング処理を行って
得られた２次元画像情報に対してぼやけ情報に基づいた
２Ｄ画像処理を行う手段を含むことを特徴とする。
手段は、フォーカシングされた画像を生成するために、
所与の３次元オブジェクトにレンダリング処理を行って
得られた２次元画像情報に対してぼやけ情報に基づいた
２Ｄ画像処理を行う手段を含むことを特徴とする。
【００３８】一般にピントが合っている場合は鮮明な画
像が表示され、ピントが合わなくなるほどぼやけた画像
が表示されることになる。本発明ではレンダリング処理
後の２次元画像情報に対して、ぼやけ情報に基づいて２
Ｄ画像処理を行う。ここにおいて２Ｄ画像処理とは、生
成された画像にフィルター等でぼかしをいれることをい
う。このようにすれば簡単な構成で、表示物や視点位置
の位置関係に応じて任意の焦点位置に対してリアルタイ
ムにフォーカシングされた画像を生成することができ
る。
像が表示され、ピントが合わなくなるほどぼやけた画像
が表示されることになる。本発明ではレンダリング処理
後の２次元画像情報に対して、ぼやけ情報に基づいて２
Ｄ画像処理を行う。ここにおいて２Ｄ画像処理とは、生
成された画像にフィルター等でぼかしをいれることをい
う。このようにすれば簡単な構成で、表示物や視点位置
の位置関係に応じて任意の焦点位置に対してリアルタイ
ムにフォーカシングされた画像を生成することができ
る。
【００３９】また本発明の前記フォーカシング画像生成
手段は、フォーカシングされた画像を生成するために、
所与の３次元オブジェクトに対してぼやけ情報に基づい
たレンダリング処理を行う手段を含むことを特徴とす
る。
手段は、フォーカシングされた画像を生成するために、
所与の３次元オブジェクトに対してぼやけ情報に基づい
たレンダリング処理を行う手段を含むことを特徴とす
る。
【００４０】一般にピントが合っている場合は鮮明な画
像が表示され、ピントが合わなくなるほどぼやけた画像
が表示されることになる。本発明ではぼやけ情報に基づ
いてレンダリング処理を行う。即ち同一のオブジェクト
に対してもぼやけ情報にもとづいて異なったレンダリン
グ処理を行うことで、ピントのあい具合を反映した画像
をリアルタイムに生成する。このようにすれば簡単な構
成で、表示物や視点位置の位置関係に応じて任意の焦点
位置に対してリアルタイムにフォーカシングされた画像
を生成することができる。
像が表示され、ピントが合わなくなるほどぼやけた画像
が表示されることになる。本発明ではぼやけ情報に基づ
いてレンダリング処理を行う。即ち同一のオブジェクト
に対してもぼやけ情報にもとづいて異なったレンダリン
グ処理を行うことで、ピントのあい具合を反映した画像
をリアルタイムに生成する。このようにすれば簡単な構
成で、表示物や視点位置の位置関係に応じて任意の焦点
位置に対してリアルタイムにフォーカシングされた画像
を生成することができる。
【００４１】また本発明の前記フォーカシング画像生成
手段は、フォーカシングされた画像を生成するために、
所与の２次元ピクチャーに対してぼやけ情報に基づいた
２Ｄ画像処理を行う手段を含むことを特徴とする。
手段は、フォーカシングされた画像を生成するために、
所与の２次元ピクチャーに対してぼやけ情報に基づいた
２Ｄ画像処理を行う手段を含むことを特徴とする。
【００４２】一般にピントが合っている場合は鮮明な画
像が表示され、ピントが合わなくなるほどぼやけた画像
が表示されることになる。本発明では所与の２次元ピク
チャーに対して、ぼやけ情報に基づいて２Ｄ画像処理を
行う。ここにおいて２Ｄ画像処理とは、生成された画像
にフィルター等でぼかしをいれることをいう。このよう
にすれば簡単な構成で、表示物や視点位置の位置関係に
応じて任意の焦点位置に対してリアルタイムにフォーカ
シングされた画像を生成することができる。
像が表示され、ピントが合わなくなるほどぼやけた画像
が表示されることになる。本発明では所与の２次元ピク
チャーに対して、ぼやけ情報に基づいて２Ｄ画像処理を
行う。ここにおいて２Ｄ画像処理とは、生成された画像
にフィルター等でぼかしをいれることをいう。このよう
にすれば簡単な構成で、表示物や視点位置の位置関係に
応じて任意の焦点位置に対してリアルタイムにフォーカ
シングされた画像を生成することができる。
【００４３】また本発明は、前記記載のいずれかの画像
生成装置を含み、表示部に表示された被写体に対してシ
ューティングデバイスを用いてシューティングを行うシ
ミュレーション装置であって、前記シューティングデバ
イスの照準を検出する手段と、検出された前記照準に基
づき、焦点位置を決定する手段とを更に含むことを特徴
とする。
生成装置を含み、表示部に表示された被写体に対してシ
ューティングデバイスを用いてシューティングを行うシ
ミュレーション装置であって、前記シューティングデバ
イスの照準を検出する手段と、検出された前記照準に基
づき、焦点位置を決定する手段とを更に含むことを特徴
とする。
【００４４】このようにするとシューティングデバイス
の照準位置にピントが合うようリアルタイムにフォーカ
シングされた画像を生成することができる。従って、プ
レーヤのシューティングデバイスの操作に対応してリア
ルタイムに人の視界画像に近いリアルで緊張感あふれた
画像を生成するシミュレーション装置を提供することが
できる。
の照準位置にピントが合うようリアルタイムにフォーカ
シングされた画像を生成することができる。従って、プ
レーヤのシューティングデバイスの操作に対応してリア
ルタイムに人の視界画像に近いリアルで緊張感あふれた
画像を生成するシミュレーション装置を提供することが
できる。
【００４５】また本発明は、前記記載のいずれかの画像
生成装置を含み、生成された画像を表示部に表示するシ
ミュレーション装置であって、表示部に表示する画像の
中で、注視点誘導の対象となる３次元オブジェクト及び
２次元ピクチャーの少なくとも一方を決定する手段と、
前記３次元オブジェクト及び２次元ピクチャーの少なく
とも一方に基づき焦点位置を決定する手段とを更に含む
ことを特徴とする。
生成装置を含み、生成された画像を表示部に表示するシ
ミュレーション装置であって、表示部に表示する画像の
中で、注視点誘導の対象となる３次元オブジェクト及び
２次元ピクチャーの少なくとも一方を決定する手段と、
前記３次元オブジェクト及び２次元ピクチャーの少なく
とも一方に基づき焦点位置を決定する手段とを更に含む
ことを特徴とする。
【００４６】このようにすればシミュレーション内容に
応じて適切な位置に注視点誘導を行うことのできるシミ
ュレーション装置を提供することができる。
応じて適切な位置に注視点誘導を行うことのできるシミ
ュレーション装置を提供することができる。
【００４７】
【発明の実施の形態】１．注視点検出の実施例 図１はビデオゲームの画面１０の例である。道路１２
と、道路沿いの柱１４、１６、１８、２０及び背景の雲
２２といったオブジェクトから画面が構成されている。
柱には、カメラに近い物から順番に１、２、３の番号が
ついている。既存のリアルタイムＣＧ映像では、画面を
構成する全ての被写体に焦点が合っていた。
と、道路沿いの柱１４、１６、１８、２０及び背景の雲
２２といったオブジェクトから画面が構成されている。
柱には、カメラに近い物から順番に１、２、３の番号が
ついている。既存のリアルタイムＣＧ映像では、画面を
構成する全ての被写体に焦点が合っていた。
【００４８】しかし、このＣＧ映像が表現する空間が現
実が存在した場合肉眼では１番の柱と雲に同時に焦点が
合うことはない。視点からの距離が１番の柱と雲ではあ
まりに異なるからである。柱に注視しているときには雲
がぼやけ、雲に注視しているときには柱がぼやけて見え
る。
実が存在した場合肉眼では１番の柱と雲に同時に焦点が
合うことはない。視点からの距離が１番の柱と雲ではあ
まりに異なるからである。柱に注視しているときには雲
がぼやけ、雲に注視しているときには柱がぼやけて見え
る。
【００４９】同様に、１番の柱と２番の柱の間にもこう
した関係が存在している。但し、１番と２番の柱間の間
隔は雲と柱との間隔に比べ狭い分、目と対象物の距離差
は小さい。従ってぼやけの程度は弱まる。
した関係が存在している。但し、１番と２番の柱間の間
隔は雲と柱との間隔に比べ狭い分、目と対象物の距離差
は小さい。従ってぼやけの程度は弱まる。
【００５０】つまり、日常あまり意識しないが肉眼で見
る世界は、眼球が注視している対象物と異なる距離に存
在する物は程度の差はあれすべてピンぼけ状態であり、
実はそれが自然な知覚状態なのである。このことは、被
写体全てにピントが合っている既存のリアルタイムＣＧ
（例えばビデオゲーム）は、フォーカシングという点で
は非常に不自然な視覚世界を観客に提供していることを
意味している。
る世界は、眼球が注視している対象物と異なる距離に存
在する物は程度の差はあれすべてピンぼけ状態であり、
実はそれが自然な知覚状態なのである。このことは、被
写体全てにピントが合っている既存のリアルタイムＣＧ
（例えばビデオゲーム）は、フォーカシングという点で
は非常に不自然な視覚世界を観客に提供していることを
意味している。
【００５１】そこで、リアルタイムＣＧにおいても肉眼
に近い自然な視覚画像を提供したり、あるいは意図的に
被写体のピント状態を操作することによって映画的演出
効果を発生させることが望ましい。
に近い自然な視覚画像を提供したり、あるいは意図的に
被写体のピント状態を操作することによって映画的演出
効果を発生させることが望ましい。
【００５２】リアルタイムＣＧにおいて肉眼に近い自然
な視覚画像を提供するためには、画面を見ている看者の
注視点をリアルタイムに検出する必要がある。次に本実
施例において、看者の注視点をリアルタイム検出するた
めの手法について説明する。
な視覚画像を提供するためには、画面を見ている看者の
注視点をリアルタイムに検出する必要がある。次に本実
施例において、看者の注視点をリアルタイム検出するた
めの手法について説明する。
【００５３】図２はアイカメラ３０を装着した看者３２
が画面４０の映像を見ている様子を表している。該アイ
カメラ３０は、角膜反射方式で看者の注視点を検出する
よう構成されている。角膜反射方式とは、眼球に対して
光（近赤外光）をあて、眼球の角膜内部に生じる虚像
（反射光）を捕らえる方式であり、眼球の回転中心と角
膜の曲率中心がずれていることを利用して虚像点の動き
から被験者の実際に見ている注視点を算出する。
が画面４０の映像を見ている様子を表している。該アイ
カメラ３０は、角膜反射方式で看者の注視点を検出する
よう構成されている。角膜反射方式とは、眼球に対して
光（近赤外光）をあて、眼球の角膜内部に生じる虚像
（反射光）を捕らえる方式であり、眼球の回転中心と角
膜の曲率中心がずれていることを利用して虚像点の動き
から被験者の実際に見ている注視点を算出する。
【００５４】次にこのようにして検出した注視点に基づ
きフォーカシングされた画像を生成する手段の概要につ
いて説明する。
きフォーカシングされた画像を生成する手段の概要につ
いて説明する。
【００５５】図３（Ａ）（Ｂ）は、看者の注視点と画面
の各オブジェクト毎のぼやけ具合の関係を説明するため
の図である。
の各オブジェクト毎のぼやけ具合の関係を説明するため
の図である。
【００５６】図３（Ａ）は、前記アイカメラ３０等で検
知した看者の注視点４２を画面４０上の位置としてあら
わしたものである。前記注視点４２を画面上のＸＹ座標
で定義すれば、仮想空間内の注視オブジェクトを算出で
きる。図３（Ａ）においては２番の柱が看者が注視して
いるオブジェクトである。
知した看者の注視点４２を画面４０上の位置としてあら
わしたものである。前記注視点４２を画面上のＸＹ座標
で定義すれば、仮想空間内の注視オブジェクトを算出で
きる。図３（Ａ）においては２番の柱が看者が注視して
いるオブジェクトである。
【００５７】このようにして特定した看者の注視オブジ
ェクトと視点との距離である第一の距離、各オブジェク
トと視点間の距離である第二の距離を求め、前記第一の
距離及び第二の距離に基づき各々のオブジェクトの適切
なぼやけ程度を判断する。そして各オブジェクト毎に最
も適切なぼやけ具合の映像を生成して表示する。
ェクトと視点との距離である第一の距離、各オブジェク
トと視点間の距離である第二の距離を求め、前記第一の
距離及び第二の距離に基づき各々のオブジェクトの適切
なぼやけ程度を判断する。そして各オブジェクト毎に最
も適切なぼやけ具合の映像を生成して表示する。
【００５８】図３（Ｂ）は、前記第一の距離及び第二の
距離に基づき各々のオブジェクトを適切なぼやけ具合に
して生成した映像を表している。注視オブジェクトであ
る右の２番の柱１６はピントがあっている映像を表示
し、３番の柱２０には少しピンがずれたものを表示す
る。１番の柱１４及び背後の雲２２は非常にピントがず
れたものを表示する。視点からの距離という点では左の
２番の柱１８も注視オブジェクトである２番の柱とほぼ
同じ条件であるので、左の２番の柱１８も焦点が合って
いる画像を表示する。
距離に基づき各々のオブジェクトを適切なぼやけ具合に
して生成した映像を表している。注視オブジェクトであ
る右の２番の柱１６はピントがあっている映像を表示
し、３番の柱２０には少しピンがずれたものを表示す
る。１番の柱１４及び背後の雲２２は非常にピントがず
れたものを表示する。視点からの距離という点では左の
２番の柱１８も注視オブジェクトである２番の柱とほぼ
同じ条件であるので、左の２番の柱１８も焦点が合って
いる画像を表示する。
【００５９】このように全被写体について適切なぼやけ
具合の映像を生成して表示することを画面毎、あるいは
数回に１回行うことによって、肉眼で実際の世界を見て
いる状態と近似の映像を看者に提供することができる。
具合の映像を生成して表示することを画面毎、あるいは
数回に１回行うことによって、肉眼で実際の世界を見て
いる状態と近似の映像を看者に提供することができる。
【００６０】次に適切なぼやけ具合を生成するための各
手法について説明する。
手法について説明する。
【００６１】図４は適切なぼやけ具合を生成するための
一手法を説明するための図である。同図には雲及び柱に
ついてのＡ．焦点が合っているもの、Ｂ．焦点が少し合
っていないもの、Ｃ．焦点が全く合っていないものの３
種類の画像を生成するためのオブジェクト情報が示され
ている。このように、全てのオブジェクトについてＡ
Ｂ、Ｃの３オブジェクト情報を用意しておく。一方、前
記第一の距離及び第二の距離に基づき表示対象となる全
てのオブジェクトのぼやけ情報を前記Ａ、Ｂ、Ｃのいず
れかに決定する。そして、前記ぼやけ情報に基づき３種
類のオブジェクト情報の中から１のオブジェクト情報を
選択して、該選択されたオブジェクト情報を用いて画像
を生成する。例えば、図３（Ｂ）にでは、１番の柱はぼ
やけ情報がＣであるとして図４に示すオブジェクト情報
６６を選択し、２番の柱はぼやけ情報がＡであるとして
図４に示すオブジェクト情報６２を選択し、３番の柱は
ぼやけ情報がＢであるとして図４に示すオブジェクト情
報６４を選択し、雲はぼやけ情報がＣであるとして図４
に示すオブジェクト情報５６を選択し、これらのオブジ
ェクト情報を用いて画像を生成する。
一手法を説明するための図である。同図には雲及び柱に
ついてのＡ．焦点が合っているもの、Ｂ．焦点が少し合
っていないもの、Ｃ．焦点が全く合っていないものの３
種類の画像を生成するためのオブジェクト情報が示され
ている。このように、全てのオブジェクトについてＡ
Ｂ、Ｃの３オブジェクト情報を用意しておく。一方、前
記第一の距離及び第二の距離に基づき表示対象となる全
てのオブジェクトのぼやけ情報を前記Ａ、Ｂ、Ｃのいず
れかに決定する。そして、前記ぼやけ情報に基づき３種
類のオブジェクト情報の中から１のオブジェクト情報を
選択して、該選択されたオブジェクト情報を用いて画像
を生成する。例えば、図３（Ｂ）にでは、１番の柱はぼ
やけ情報がＣであるとして図４に示すオブジェクト情報
６６を選択し、２番の柱はぼやけ情報がＡであるとして
図４に示すオブジェクト情報６２を選択し、３番の柱は
ぼやけ情報がＢであるとして図４に示すオブジェクト情
報６４を選択し、雲はぼやけ情報がＣであるとして図４
に示すオブジェクト情報５６を選択し、これらのオブジ
ェクト情報を用いて画像を生成する。
【００６２】図５〜図１０は注視点を検出してフォーカ
シングされた画像を生成する画像生成装置の機能ブロッ
ク図を示したものである。
シングされた画像を生成する画像生成装置の機能ブロッ
ク図を示したものである。
【００６３】図５はピント別に複数のオブジェクト情報
を予め記憶部に登録しておき、ぼやけ情報に応じてリア
ルタイムに差し替えてフォーカシングされた画像を生成
する画像生成装置２００の機能ブロック図である。
を予め記憶部に登録しておき、ぼやけ情報に応じてリア
ルタイムに差し替えてフォーカシングされた画像を生成
する画像生成装置２００の機能ブロック図である。
【００６４】該画像生成装置１００は、注視点検出部１
１０、画像生成制御部１２０、ピント別オブジェクト情
報記憶部１３１、空間情報記憶部１４０を含む。注視点
検出部１１０は、看者の注視点をリアルタイムに検出す
るもので、例えば図２に示すアイカメラ３０等を用いて
構成する。
１０、画像生成制御部１２０、ピント別オブジェクト情
報記憶部１３１、空間情報記憶部１４０を含む。注視点
検出部１１０は、看者の注視点をリアルタイムに検出す
るもので、例えば図２に示すアイカメラ３０等を用いて
構成する。
【００６５】前記ピント別オブジェクト情報記憶部１３
１は、オブジェクト空間に存在する各オブジェクトの形
状及び外観にかかる情報を記憶するものであり、図４で
説明したように１のオブジェクトに対してピント別に異
なるオブジェクト情報を複数記憶している。本実施例で
はポリゴンオブジェクトを用いて画像生成しているた
め、ピント別オブジェクト情報記憶部１３１は、ピント
別ポリゴン情報記憶部１３３とピント別テクスチャ情報
記憶部１３５を含んでおり、それぞれ１のオブジェクト
に対してピント別に異なるポリゴン情報及びテクスチャ
情報を記憶している。
１は、オブジェクト空間に存在する各オブジェクトの形
状及び外観にかかる情報を記憶するものであり、図４で
説明したように１のオブジェクトに対してピント別に異
なるオブジェクト情報を複数記憶している。本実施例で
はポリゴンオブジェクトを用いて画像生成しているた
め、ピント別オブジェクト情報記憶部１３１は、ピント
別ポリゴン情報記憶部１３３とピント別テクスチャ情報
記憶部１３５を含んでおり、それぞれ１のオブジェクト
に対してピント別に異なるポリゴン情報及びテクスチャ
情報を記憶している。
【００６６】前記ピント別ポリゴン情報記憶部１３３に
は、各オブジェクトの形状を表す情報として、該オブジ
ェクトを構成する各ポリゴンの頂点座標と、それぞれの
ポリゴンにマッピングするテクスチャ情報を読み出す情
報とが対応して記憶される。前記頂点座標は各オブジェ
クトにそれぞれ設けられた座標系（ボディ座標系）にお
ける各頂点の位置座標として記憶されている。
は、各オブジェクトの形状を表す情報として、該オブジ
ェクトを構成する各ポリゴンの頂点座標と、それぞれの
ポリゴンにマッピングするテクスチャ情報を読み出す情
報とが対応して記憶される。前記頂点座標は各オブジェ
クトにそれぞれ設けられた座標系（ボディ座標系）にお
ける各頂点の位置座標として記憶されている。
【００６７】前記ピント別テクスチャ情報記憶部１３５
には、これらのポリゴンにマッピングするテクスチャの
テクスチャ情報が記憶される。ここで、テクスチャ情報
とは表示物の表面の色や模様等の情報を意味する。
には、これらのポリゴンにマッピングするテクスチャの
テクスチャ情報が記憶される。ここで、テクスチャ情報
とは表示物の表面の色や模様等の情報を意味する。
【００６８】前記空間情報記憶部１４０には、オブジェ
クト空間内における各オブジェクトの位置情報及び方向
情報が記憶されている。即ち、各オブジェクトの基準点
の位置情報（Ｘ，Ｙ，Ｚ）及び方向情報（θ，φ，ρ）
が記憶されている。移動物に関しては、該位置情報及び
方向情報は位置演算部１２４によってリアルタイムに更
新される。
クト空間内における各オブジェクトの位置情報及び方向
情報が記憶されている。即ち、各オブジェクトの基準点
の位置情報（Ｘ，Ｙ，Ｚ）及び方向情報（θ，φ，ρ）
が記憶されている。移動物に関しては、該位置情報及び
方向情報は位置演算部１２４によってリアルタイムに更
新される。
【００６９】画像生成制御部１２０は、焦点演算部１２
２、ぼやけ情報決定部１２３、位置演算部１２４、３次
元演算部１２６、画像描画部１２７を含む。位置演算部
１２４は、ＣＰＵ、メモリ等を用いて構成されており、
図示しない所与の入力手段及び所与のプログラムに基づ
き、オブジェクト空間内に存在する各オブジェクトの位
置情報及び方向情報を演算する。そして各オブジェクト
の位置情報及び方向情報に変化があれば空間情報記憶部
１４０に記憶されている当該情報を更新する。またどの
位置から見た画像を表示するのかという視点位置や視線
方向、視野角等の視点情報等も演算する。そして表示す
べき画像を生成するために必要となるオブジェクトの位
置情報及び方向情報を空間情報記憶部１４０から読み出
し、該情報と前記視点情報を含む空間情報を３次元演算
部１２６に出力する。
２、ぼやけ情報決定部１２３、位置演算部１２４、３次
元演算部１２６、画像描画部１２７を含む。位置演算部
１２４は、ＣＰＵ、メモリ等を用いて構成されており、
図示しない所与の入力手段及び所与のプログラムに基づ
き、オブジェクト空間内に存在する各オブジェクトの位
置情報及び方向情報を演算する。そして各オブジェクト
の位置情報及び方向情報に変化があれば空間情報記憶部
１４０に記憶されている当該情報を更新する。またどの
位置から見た画像を表示するのかという視点位置や視線
方向、視野角等の視点情報等も演算する。そして表示す
べき画像を生成するために必要となるオブジェクトの位
置情報及び方向情報を空間情報記憶部１４０から読み出
し、該情報と前記視点情報を含む空間情報を３次元演算
部１２６に出力する。
【００７０】焦点演算部１２２は、前記注視点検出部１
１０が検出した看者の注視点の座標及び空間情報記憶部
１４０に記憶された各オブジェクトの位置情報に基づい
て、図３（Ａ）で説明したようにして焦点の存在するオ
ブジェクトを決定し、該オブジェクトの位置情報を焦点
位置とする焦点位置情報をぼやけ情報決定部１２３に出
力する。
１０が検出した看者の注視点の座標及び空間情報記憶部
１４０に記憶された各オブジェクトの位置情報に基づい
て、図３（Ａ）で説明したようにして焦点の存在するオ
ブジェクトを決定し、該オブジェクトの位置情報を焦点
位置とする焦点位置情報をぼやけ情報決定部１２３に出
力する。
【００７１】ぼやけ情報決定部１２３は、前記焦点位置
情報及び空間情報記憶部１４０に記憶された各オブジェ
クトの位置情報に基づき、図３（Ｂ）で説明したように
看者の注視オブジェクトと視点との距離である第一の距
離、各オブジェクトと視点間の距離である第二の距離を
求め、前記第一の距離及び第二の距離に基づき各々のオ
ブジェクトの適切なぼやけ程度を判断し、ぼやけ程度を
表すぼやけ情報を各オブジェクト毎に決定し、３次元演
算部１２６へ出力する。
情報及び空間情報記憶部１４０に記憶された各オブジェ
クトの位置情報に基づき、図３（Ｂ）で説明したように
看者の注視オブジェクトと視点との距離である第一の距
離、各オブジェクトと視点間の距離である第二の距離を
求め、前記第一の距離及び第二の距離に基づき各々のオ
ブジェクトの適切なぼやけ程度を判断し、ぼやけ程度を
表すぼやけ情報を各オブジェクト毎に決定し、３次元演
算部１２６へ出力する。
【００７２】前記３次元演算部１２６は、ぼやけ情報に
基づいて各オブジェクト毎にピント別ポリゴン情報記憶
部１３３から読み出したポリゴン情報及び前記空間情報
に基づき座標変換、クリッピング等の３次元演算を行
う。
基づいて各オブジェクト毎にピント別ポリゴン情報記憶
部１３３から読み出したポリゴン情報及び前記空間情報
に基づき座標変換、クリッピング等の３次元演算を行
う。
【００７３】具体的にはオブジェクトを構成するポリゴ
ンを、ワールド座標系（Ｘｗ，Ｙｗ，Ｚｗ）で表現され
るオブジェクト上に配置するための演算を行う。すなわ
ち、前記ピント別オブジェクト情報記憶部１３１のポリ
ゴン情報記憶部１３２には、表示物を構成するポリゴン
の位置情報がボディ座標系における座標情報として各オ
ブジェクトについてピント別に記憶されている。３次元
演算部１２６は前記ぼやけ情報に基づいて最適なポリゴ
ン情報を読み出して、前記空間情報に含まれた当該オブ
ジェクトの位置情報（Ｘ，Ｙ，Ｚ）及び方向情報（θ，
φ，ρ）に基づいて、平行移動、回転、反転、拡大、縮
小等の３次元座標変換を施し、ワールド座標系（Ｘｗ，
Ｙｗ，Ｚｗ）での位置座標に変換している。次に、前記
空間情報に含まれた視点情報に基づき、各オブジェクト
についてそれを構成するポリゴンを所与の視点を基準と
した視点座標系（Ｘｖ，Ｙｖ，Ｚｖ）へ座標変換する処
理を行う。その後、クリッピング処理等を施し処理後の
データを画像描画部１２７に出力する。
ンを、ワールド座標系（Ｘｗ，Ｙｗ，Ｚｗ）で表現され
るオブジェクト上に配置するための演算を行う。すなわ
ち、前記ピント別オブジェクト情報記憶部１３１のポリ
ゴン情報記憶部１３２には、表示物を構成するポリゴン
の位置情報がボディ座標系における座標情報として各オ
ブジェクトについてピント別に記憶されている。３次元
演算部１２６は前記ぼやけ情報に基づいて最適なポリゴ
ン情報を読み出して、前記空間情報に含まれた当該オブ
ジェクトの位置情報（Ｘ，Ｙ，Ｚ）及び方向情報（θ，
φ，ρ）に基づいて、平行移動、回転、反転、拡大、縮
小等の３次元座標変換を施し、ワールド座標系（Ｘｗ，
Ｙｗ，Ｚｗ）での位置座標に変換している。次に、前記
空間情報に含まれた視点情報に基づき、各オブジェクト
についてそれを構成するポリゴンを所与の視点を基準と
した視点座標系（Ｘｖ，Ｙｖ，Ｚｖ）へ座標変換する処
理を行う。その後、クリッピング処理等を施し処理後の
データを画像描画部１２７に出力する。
【００７４】画像描画部１２７は、ぼやけ情報に基づい
て各オブジェクト毎にピント別テクスチャ情報記憶部１
３５から読み出したテクスチャ情報及び前記空間情報に
基づき隠面消去やシェーディング等のレンダリング処理
を行い各画素毎の色情報や輝度情報等を出力する。
て各オブジェクト毎にピント別テクスチャ情報記憶部１
３５から読み出したテクスチャ情報及び前記空間情報に
基づき隠面消去やシェーディング等のレンダリング処理
を行い各画素毎の色情報や輝度情報等を出力する。
【００７５】なお、位置演算部１２４、３次元演算部１
２６、画像描画部１２７、ピント別オブジェクト情報記
憶部１３１、ピント別ポリゴン情報記憶部１３３、ピン
ト別テクスチャ情報記憶部１３５が、フォーカシング画
像生成手段１５０として機能する。
２６、画像描画部１２７、ピント別オブジェクト情報記
憶部１３１、ピント別ポリゴン情報記憶部１３３、ピン
ト別テクスチャ情報記憶部１３５が、フォーカシング画
像生成手段１５０として機能する。
【００７６】図６はぼやけ情報に基づき、記憶されてい
るオブジェクト情報にぼやけ加工を行い、ぼやけたオブ
ジェクト情報をリアルタイムに生成してフォーカシング
された画像を生成する画像生成装置１０１の機能ブロッ
ク図である。 注視点演算部１１０、焦点演算部１２
２、ぼやけ情報決定部１２３、位置演算部１２４、空間
情報記憶部１４０は図５と同様であるため説明を省略
し、図５と異なる部分について説明する。図５のピント
別オブジェクト情報記憶部１３１の代わりに１つのオブ
ジェクトに対して１種類のオブジェクト情報を記憶する
オブジェクト情報記憶部１３０を、同様にピント別ポリ
ゴン情報記憶部１３３の代わりにポリゴン情報記憶部１
３２を、ピント別テクスチャ情報記憶部１３５の代わり
にテクスチャ情報記憶部１３４を有している。
るオブジェクト情報にぼやけ加工を行い、ぼやけたオブ
ジェクト情報をリアルタイムに生成してフォーカシング
された画像を生成する画像生成装置１０１の機能ブロッ
ク図である。 注視点演算部１１０、焦点演算部１２
２、ぼやけ情報決定部１２３、位置演算部１２４、空間
情報記憶部１４０は図５と同様であるため説明を省略
し、図５と異なる部分について説明する。図５のピント
別オブジェクト情報記憶部１３１の代わりに１つのオブ
ジェクトに対して１種類のオブジェクト情報を記憶する
オブジェクト情報記憶部１３０を、同様にピント別ポリ
ゴン情報記憶部１３３の代わりにポリゴン情報記憶部１
３２を、ピント別テクスチャ情報記憶部１３５の代わり
にテクスチャ情報記憶部１３４を有している。
【００７７】また、ぼやけ情報に基づきリアルタイムに
オブジェクト情報を生成するために、ポリゴンデータぼ
やけ加工部１２５とテクスチャデータぼやけ加工部１２
９を有している。ポリゴンデータぼやけ加工部１２５
は、各オブジェクト毎に、ポリゴン情報記憶部１３２か
ら読み出したポリゴンデータをぼやけ情報に基づきぼや
けた画像に加工して出力する。テクスチャデータデータ
ぼやけ加工部１２９は、各オブジェクト毎に、テクスチ
ャ情報記憶部１３４から読み出したテクスチャ情報をぼ
やけ情報に基づきぼやけた画像に加工して出力する。そ
して、３次元演算部１２６及び画像描画部１２７はポリ
ゴンデータぼやけ加工部１２５及びテクスチャデータぼ
やけ加工部１２９の出力したデータに基づきそれぞれの
処理を行う。
オブジェクト情報を生成するために、ポリゴンデータぼ
やけ加工部１２５とテクスチャデータぼやけ加工部１２
９を有している。ポリゴンデータぼやけ加工部１２５
は、各オブジェクト毎に、ポリゴン情報記憶部１３２か
ら読み出したポリゴンデータをぼやけ情報に基づきぼや
けた画像に加工して出力する。テクスチャデータデータ
ぼやけ加工部１２９は、各オブジェクト毎に、テクスチ
ャ情報記憶部１３４から読み出したテクスチャ情報をぼ
やけ情報に基づきぼやけた画像に加工して出力する。そ
して、３次元演算部１２６及び画像描画部１２７はポリ
ゴンデータぼやけ加工部１２５及びテクスチャデータぼ
やけ加工部１２９の出力したデータに基づきそれぞれの
処理を行う。
【００７８】なお、位置演算部１２４、ポリゴンデータ
ぼやけ加工部１２５、３次元演算部１２６、画像描画部
１２７、テクスチャデータぼやけ加工部１２９、オブジ
ェクト情報記憶部１３０が、フォーカシング画像生成手
段１５０として機能する。
ぼやけ加工部１２５、３次元演算部１２６、画像描画部
１２７、テクスチャデータぼやけ加工部１２９、オブジ
ェクト情報記憶部１３０が、フォーカシング画像生成手
段１５０として機能する。
【００７９】図７はレンダリング後のデータにぼやけ情
報に基づきフィルタリング等の２Ｄ画像処理を施してフ
ォーカシングされた画像を生成する画像生成装置１０２
の機能ブロック図である。注視点演算部１１０、焦点演
算部１２２、ぼやけ情報決定部１２３、位置演算部１２
４、空間情報記憶部１４０は図５と同様であるため説明
を省略し、図５と異なる部分について説明する。図５の
ピント別オブジェクト情報記憶部１３１の代わりに１つ
のオブジェクトに対して１種類のオブジェクト情報を記
憶するオブジェクト情報記憶部１３０を、同様にピント
別ポリゴン情報記憶部１３３の代わりにポリゴン情報記
憶部１３２を、ピント別テクスチャ情報記憶部１３５の
代わりにテクスチャ情報記憶部１３４を有している。
報に基づきフィルタリング等の２Ｄ画像処理を施してフ
ォーカシングされた画像を生成する画像生成装置１０２
の機能ブロック図である。注視点演算部１１０、焦点演
算部１２２、ぼやけ情報決定部１２３、位置演算部１２
４、空間情報記憶部１４０は図５と同様であるため説明
を省略し、図５と異なる部分について説明する。図５の
ピント別オブジェクト情報記憶部１３１の代わりに１つ
のオブジェクトに対して１種類のオブジェクト情報を記
憶するオブジェクト情報記憶部１３０を、同様にピント
別ポリゴン情報記憶部１３３の代わりにポリゴン情報記
憶部１３２を、ピント別テクスチャ情報記憶部１３５の
代わりにテクスチャ情報記憶部１３４を有している。
【００８０】また、図７の画像生成装置１０２はレンダ
リング後のデータにぼやけ情報に基いてぼやけた画像を
生成するための処理を施す構成のため、３次元演算部１
２６はぼやけ情報に基づいた処理は行わず通常の座標変
換やクリッピング処理を行う。また、画像描画部１２７
はぼやけ情報に基づいた処理は行わず、通常のレンダリ
ング処理等を行う。そして、２Ｄ処理部１２８は、画像
描画部１２７の出力データに対して、ぼやけ情報に基づ
きフィルタリング等の２Ｄ画像処理を行う。このような
フィルタリングの一例としてはガウシアンフィルター
（Ｇａｕｓｓｉａｎ Ｆｉｌｔｅｒ）を用いる手法等が
ある。
リング後のデータにぼやけ情報に基いてぼやけた画像を
生成するための処理を施す構成のため、３次元演算部１
２６はぼやけ情報に基づいた処理は行わず通常の座標変
換やクリッピング処理を行う。また、画像描画部１２７
はぼやけ情報に基づいた処理は行わず、通常のレンダリ
ング処理等を行う。そして、２Ｄ処理部１２８は、画像
描画部１２７の出力データに対して、ぼやけ情報に基づ
きフィルタリング等の２Ｄ画像処理を行う。このような
フィルタリングの一例としてはガウシアンフィルター
（Ｇａｕｓｓｉａｎ Ｆｉｌｔｅｒ）を用いる手法等が
ある。
【００８１】なお、位置演算部１２４、３次元演算部１
２６、画像描画部１２７、２Ｄ処理部１２８、オブジェ
クト情報記憶部１３０が、フォーカシング画像生成手段
１５０として機能する。
２６、画像描画部１２７、２Ｄ処理部１２８、オブジェ
クト情報記憶部１３０が、フォーカシング画像生成手段
１５０として機能する。
【００８２】図８はぼやけ情報に基づき、記憶されてい
るオブジェクトに対し、適切なぼやけ具合の映像を生成
するレンダリング処理を施してフォーカシングされた画
像を生成する画像生成装置１０３の機能ブロック図であ
る。注視点演算部１１０、焦点演算部１２２、ぼやけ情
報決定部１２３、位置演算部１２４、空間情報記憶部１
４０は図５と同様であるため説明を省略し、図５と異な
る部分について説明する。図５のピント別オブジェクト
情報記憶部１３１の代わりに１つのオブジェクトに対し
て１種類のオブジェクト情報を記憶するオブジェクト情
報記憶部１３０を、同様にピント別ポリゴン情報記憶部
１３３の代わりにポリゴン情報記憶部１３２を、ピント
別テクスチャ情報記憶部１３５の代わりにテクスチャ情
報記憶部１３４を有している。
るオブジェクトに対し、適切なぼやけ具合の映像を生成
するレンダリング処理を施してフォーカシングされた画
像を生成する画像生成装置１０３の機能ブロック図であ
る。注視点演算部１１０、焦点演算部１２２、ぼやけ情
報決定部１２３、位置演算部１２４、空間情報記憶部１
４０は図５と同様であるため説明を省略し、図５と異な
る部分について説明する。図５のピント別オブジェクト
情報記憶部１３１の代わりに１つのオブジェクトに対し
て１種類のオブジェクト情報を記憶するオブジェクト情
報記憶部１３０を、同様にピント別ポリゴン情報記憶部
１３３の代わりにポリゴン情報記憶部１３２を、ピント
別テクスチャ情報記憶部１３５の代わりにテクスチャ情
報記憶部１３４を有している。
【００８３】また、図８の画像生成装置１０３はぼやけ
情報に基づいてレンダリング処理を行う構成のため、３
次元演算部１２６はぼやけ情報に基づいた処理は行わず
通常の座標変換やクリッピング処理を行う。そして、画
像描画部１２７はピント別レンダリング処理部１２９を
含んでいる。
情報に基づいてレンダリング処理を行う構成のため、３
次元演算部１２６はぼやけ情報に基づいた処理は行わず
通常の座標変換やクリッピング処理を行う。そして、画
像描画部１２７はピント別レンダリング処理部１２９を
含んでいる。
【００８４】ピント別レンダリング処理部１２９はぼや
け情報に応じて適切なぼやけ具合の映像を生成するレン
ダリング処理を行う。このような処理の一例を図２５を
用いて説明する。前述したようにコンピュータグラフィ
ックスによってつくられる映像は、ピンホールカメラの
映像と同じく画面上の全ての像にピントが合っている。
け情報に応じて適切なぼやけ具合の映像を生成するレン
ダリング処理を行う。このような処理の一例を図２５を
用いて説明する。前述したようにコンピュータグラフィ
ックスによってつくられる映像は、ピンホールカメラの
映像と同じく画面上の全ての像にピントが合っている。
【００８５】これに対して、図２５に示す仮想的なカメ
ラレンズの絞り効果を利用すると焦点深度をもった画像
を実現することができる。即ち、仮想カメラの絞り１４
０４は、座標系０′−ｘ′−ｙ′の原点に存在し、その
背後（スクリーン１４０２側）に仮想的な光学レンズが
おかれているものとすると、スクリーン上の座標のある
点の光の強さＵ″（ｘ″,ｙ″）（言い換えると画像の
明るさ）は、絞り座標系上の点（ｘ″,ｙ″）まで到達
する光の強さＵ′（ｘ′,ｙ′）とレンズの性質によっ
て決まる伝達関数ｈ（ｘ″,ｙ″,ｘ′,ｙ′）の積をレ
ンズの絞りの面積で積分したものに等しいため以下の式
で表される。
ラレンズの絞り効果を利用すると焦点深度をもった画像
を実現することができる。即ち、仮想カメラの絞り１４
０４は、座標系０′−ｘ′−ｙ′の原点に存在し、その
背後（スクリーン１４０２側）に仮想的な光学レンズが
おかれているものとすると、スクリーン上の座標のある
点の光の強さＵ″（ｘ″,ｙ″）（言い換えると画像の
明るさ）は、絞り座標系上の点（ｘ″,ｙ″）まで到達
する光の強さＵ′（ｘ′,ｙ′）とレンズの性質によっ
て決まる伝達関数ｈ（ｘ″,ｙ″,ｘ′,ｙ′）の積をレ
ンズの絞りの面積で積分したものに等しいため以下の式
で表される。
【００８６】
【数１】 このような式を用いて演算を行うことにより、焦点深度
によるぼけを発生させることができる。
によるぼけを発生させることができる。
【００８７】この絞り効果の考えかたをもちいて、各画
素の色の表示を行えばよい。
素の色の表示を行えばよい。
【００８８】なお、位置演算部１２４、３次元演算部１
２６、画像描画部１２７、ピント別レンダリング処理部
１２９、オブジェクト情報記憶部１３０が、フォーカシ
ング画像生成手段１５０として機能する。
２６、画像描画部１２７、ピント別レンダリング処理部
１２９、オブジェクト情報記憶部１３０が、フォーカシ
ング画像生成手段１５０として機能する。
【００８９】図９はピント別に複数のピクチャー情報を
予め記憶部に登録しておき、ぼやけ情報に応じてリアル
タイムに差し替えてフォーカシングされた画像を生成す
る画像生成装置１０４の機能ブロック図である。注視点
演算部１１０、焦点演算部１２２、ぼやけ情報決定部１
２３、位置演算部１２４、空間情報記憶部１４０は図５
と同様であるため説明を省略し、図５と異なる部分につ
いて説明する。図９の画像生成装置１０４は２次元の座
標で形状を特定するピクチャーを３次元空間に配置して
画像を生成する。従って、図５のピント別オブジェクト
情報記憶部１３１の代わりにピント別ピクチャー記憶部
１４１を有している。ピント別ピクチャー記憶部１４１
は、１つのピクチャーに対してピント別に複数のピクチ
ャー情報を記憶する。
予め記憶部に登録しておき、ぼやけ情報に応じてリアル
タイムに差し替えてフォーカシングされた画像を生成す
る画像生成装置１０４の機能ブロック図である。注視点
演算部１１０、焦点演算部１２２、ぼやけ情報決定部１
２３、位置演算部１２４、空間情報記憶部１４０は図５
と同様であるため説明を省略し、図５と異なる部分につ
いて説明する。図９の画像生成装置１０４は２次元の座
標で形状を特定するピクチャーを３次元空間に配置して
画像を生成する。従って、図５のピント別オブジェクト
情報記憶部１３１の代わりにピント別ピクチャー記憶部
１４１を有している。ピント別ピクチャー記憶部１４１
は、１つのピクチャーに対してピント別に複数のピクチ
ャー情報を記憶する。
【００９０】空間情報記憶部１４０は各ピクチャーの位
置情報及び方向情報を記憶する。各ピクチャーは３次元
空間に配置されるものであるため、３次元座標（Ｘ、
Ｙ、Ｚ）で特定される位置情報を有している。位置演算
部１２４は各ピクチャーの位置情報及び方向情報を演算
する。そして各ピクチャーの位置情報及び方向情報に変
化があれば空間情報記憶部１４０に記憶されている当該
情報を更新する。またどの位置から見た画像を表示する
のかという視点位置や視線方向、視野角等の視点情報等
も演算する。そして表示すべき画像を生成するために必
要となるピクチャーの位置情報及び方向情報を空間情報
記憶部１４０から読み出し、該情報と前記視点情報を含
む空間情報を３次元演算部１２６に出力する。
置情報及び方向情報を記憶する。各ピクチャーは３次元
空間に配置されるものであるため、３次元座標（Ｘ、
Ｙ、Ｚ）で特定される位置情報を有している。位置演算
部１２４は各ピクチャーの位置情報及び方向情報を演算
する。そして各ピクチャーの位置情報及び方向情報に変
化があれば空間情報記憶部１４０に記憶されている当該
情報を更新する。またどの位置から見た画像を表示する
のかという視点位置や視線方向、視野角等の視点情報等
も演算する。そして表示すべき画像を生成するために必
要となるピクチャーの位置情報及び方向情報を空間情報
記憶部１４０から読み出し、該情報と前記視点情報を含
む空間情報を３次元演算部１２６に出力する。
【００９１】３次元演算部１２６は、ぼやけ情報に関係
なく各ピクチャーに対して前記空間情報に基づき座標変
換、クリッピング等の３次元演算を行う。
なく各ピクチャーに対して前記空間情報に基づき座標変
換、クリッピング等の３次元演算を行う。
【００９２】画像描画部１２７は、ぼやけ情報に基づい
て各ピクチャー毎にピント別ピクチャー情報記憶部１４
１から読み出したピント別ピクチャー情報及び前記空間
情報に基づき隠面消去やシェーディング等のレンダリン
グ処理を行い各画素毎の色情報や輝度情報等を出力す
る。
て各ピクチャー毎にピント別ピクチャー情報記憶部１４
１から読み出したピント別ピクチャー情報及び前記空間
情報に基づき隠面消去やシェーディング等のレンダリン
グ処理を行い各画素毎の色情報や輝度情報等を出力す
る。
【００９３】なお、位置演算部１２４、３次元演算部１
２６、画像描画部１２７、ピント別ピクチャー情報記憶
部１４１が、フォーカシング画像生成手段１５０として
機能する。
２６、画像描画部１２７、ピント別ピクチャー情報記憶
部１４１が、フォーカシング画像生成手段１５０として
機能する。
【００９４】また、図９ではピクチャーのみを用いて画
像生成を行う場合の構成を説明したが、ピクチャー及び
オブジェクトの両方を用いて画像を生成するような構成
としても良い。
像生成を行う場合の構成を説明したが、ピクチャー及び
オブジェクトの両方を用いて画像を生成するような構成
としても良い。
【００９５】図１０はぼやけ情報に基づきレンダリング
後のピクチャーにフィルター等の２Ｄ画像処理を施して
フォーカシングされた画像を生成する画像生成装置１０
５の機能ブロック図である。図７に示す画像生成装置１
０２においてオブジェクトの代わりにピクチャーを用い
て画像生成を行う場合である。また、２Ｄ処理部１２８
は図７と同様の機能を有しており、その他の構成は、図
９の場合の変形である。注視点演算部１１０、焦点演算
部１２２、ぼやけ情報決定部１２３、位置演算部１２
４、３次元演算部１２６、空間情報記憶部１４０は図９
と同様であるため説明を省略し、図９と異なる部分につ
いて説明する。図９のピント別ピクチャー情報記憶部１
４１の代わりに１つのピクチャーに対して１種類のピク
チャー情報を記憶するピクチャー情報記憶部１４２を有
している。
後のピクチャーにフィルター等の２Ｄ画像処理を施して
フォーカシングされた画像を生成する画像生成装置１０
５の機能ブロック図である。図７に示す画像生成装置１
０２においてオブジェクトの代わりにピクチャーを用い
て画像生成を行う場合である。また、２Ｄ処理部１２８
は図７と同様の機能を有しており、その他の構成は、図
９の場合の変形である。注視点演算部１１０、焦点演算
部１２２、ぼやけ情報決定部１２３、位置演算部１２
４、３次元演算部１２６、空間情報記憶部１４０は図９
と同様であるため説明を省略し、図９と異なる部分につ
いて説明する。図９のピント別ピクチャー情報記憶部１
４１の代わりに１つのピクチャーに対して１種類のピク
チャー情報を記憶するピクチャー情報記憶部１４２を有
している。
【００９６】また、図１０の画像生成装置１０５はレン
ダリング後のデータにぼやけ情報に基いた処理を施す構
成のため、画像描画部１２７はぼやけ情報に基づいた処
理は行わず、通常のレンダリング処理等を行う。そし
て、２Ｄ処理部１２８は、画像描画部１２７の出力デー
タに対して、ぼやけ情報に基づきフィルタリング等の２
Ｄ画像処理を行う。
ダリング後のデータにぼやけ情報に基いた処理を施す構
成のため、画像描画部１２７はぼやけ情報に基づいた処
理は行わず、通常のレンダリング処理等を行う。そし
て、２Ｄ処理部１２８は、画像描画部１２７の出力デー
タに対して、ぼやけ情報に基づきフィルタリング等の２
Ｄ画像処理を行う。
【００９７】なお、位置演算部１２４、３次元演算部１
２６、画像描画部１２７、２Ｄ処理部１２８、ピクチャ
ー情報記憶部１４２が、フォーカシング画像生成手段１
５０として機能する。
２６、画像描画部１２７、２Ｄ処理部１２８、ピクチャ
ー情報記憶部１４２が、フォーカシング画像生成手段１
５０として機能する。
【００９８】２．注視点誘導の実施例 看者の注視点を受動的に検知して画像にフィードバック
させるだけでなく、画像の作り手が積極的にピントを変
化させることによって、看者の視線を誘導したり、映像
的な演出効果を高めたりすることもできる。例えば、焦
点があっているオブジェクトに注視しやすい人間の性質
を利用し、画像内の看者の注視点を誘導できる。図３
（Ａ）を例に挙げれば、焦点を１番の柱１４、２番の柱
１６、３番の柱２０と移行させていけば、看者の視線を
画面の右端から画面中央へと誘導することができる。
させるだけでなく、画像の作り手が積極的にピントを変
化させることによって、看者の視線を誘導したり、映像
的な演出効果を高めたりすることもできる。例えば、焦
点があっているオブジェクトに注視しやすい人間の性質
を利用し、画像内の看者の注視点を誘導できる。図３
（Ａ）を例に挙げれば、焦点を１番の柱１４、２番の柱
１６、３番の柱２０と移行させていけば、看者の視線を
画面の右端から画面中央へと誘導することができる。
【００９９】ここでドライブゲームを例にとり既存の画
面と本実施例の注視点誘導の画面の違いについて説明す
る。
面と本実施例の注視点誘導の画面の違いについて説明す
る。
【０１００】図１１（Ａ）（Ｂ）は、いずれもドライブ
ゲームにおける既存の画像例６１０、６２０である。い
ずれも、カーブにさしかかる前の映像を表しており、画
面内の標識６１２、６２２にプレーヤーの注意を向けた
い場合の画面を表している。またいずれも画面内に表示
されている全てのオブジェクトに焦点が合っている。図
１１（Ａ）は、プレーヤの注意を促すために、実際より
大きい標識６１２をゲーム空間内に置いて対処する場合
の映像である。前記標識６１２は現実のものよりデフォ
ルメされているため通常表示されている場合に比べて眼
に止まりやすいが、全てのオブジェクトに焦点が合って
いるため必ずしも前記標識６１２がプレーヤの注意を引
くとは限らなかった。
ゲームにおける既存の画像例６１０、６２０である。い
ずれも、カーブにさしかかる前の映像を表しており、画
面内の標識６１２、６２２にプレーヤーの注意を向けた
い場合の画面を表している。またいずれも画面内に表示
されている全てのオブジェクトに焦点が合っている。図
１１（Ａ）は、プレーヤの注意を促すために、実際より
大きい標識６１２をゲーム空間内に置いて対処する場合
の映像である。前記標識６１２は現実のものよりデフォ
ルメされているため通常表示されている場合に比べて眼
に止まりやすいが、全てのオブジェクトに焦点が合って
いるため必ずしも前記標識６１２がプレーヤの注意を引
くとは限らなかった。
【０１０１】同様に図１１（Ｂ）は、プレーヤの注意を
促すために、現実にはない標識６２２をゲーム空間内に
置いて対処する場合の映像である。実在しない標識６２
２を画面中央付近に突然表示することでプレーヤの注意
を引きやすいが、画像のリアリティを損なう原因にもな
りかねない。
促すために、現実にはない標識６２２をゲーム空間内に
置いて対処する場合の映像である。実在しない標識６２
２を画面中央付近に突然表示することでプレーヤの注意
を引きやすいが、画像のリアリティを損なう原因にもな
りかねない。
【０１０２】図１２（Ａ）（Ｂ）は、いずれもドライブ
ゲームにおける本実施例の画像例６３０、６４０であ
る。図１２（Ａ）は直線コースを走行中の画面であり特
別に注視点を誘導しない場面であるため、全ての被写体
に焦点が合っている状態となっている。図１２（Ｂ）は
前記図１１（Ｂ）同様にカーブにさしかかる前の画面６
３０を表しており、画面内の標識６４２やライバルカー
６４４にプレーヤーの注意を向けたい場合の画面を表し
ている。従って、図１２（Ｂ）では、前記標識６４２や
ライバルカー６４４に焦点が合った状態となっている。
前述したように人は焦点があっているオブジェクトに注
視しやすいため、このようにするとプレーヤの注意を前
記標識６４２やライバルカー６４４に向けることができ
る。
ゲームにおける本実施例の画像例６３０、６４０であ
る。図１２（Ａ）は直線コースを走行中の画面であり特
別に注視点を誘導しない場面であるため、全ての被写体
に焦点が合っている状態となっている。図１２（Ｂ）は
前記図１１（Ｂ）同様にカーブにさしかかる前の画面６
３０を表しており、画面内の標識６４２やライバルカー
６４４にプレーヤーの注意を向けたい場合の画面を表し
ている。従って、図１２（Ｂ）では、前記標識６４２や
ライバルカー６４４に焦点が合った状態となっている。
前述したように人は焦点があっているオブジェクトに注
視しやすいため、このようにするとプレーヤの注意を前
記標識６４２やライバルカー６４４に向けることができ
る。
【０１０３】次にサッカーゲームを例にとり既存の画面
と本実施例の注視点誘導の画面の違いについて説明す
る。
と本実施例の注視点誘導の画面の違いについて説明す
る。
【０１０４】図１３（Ａ）は既存の画像例７１０であ
り、図１３（Ｂ）（Ｃ）は本実施例の画像例７２０、６
５０である。図１３（Ａ）の既存の画像例では、表示内
容に関わらず画面内の全ての被写体に焦点が合ってい
る。このため、フォーカシングという点では非常に不自
然な画像となっており、どこに注目していいのかわから
ない画像でもある。そこで本実施例では、表示内容に応
じて図１３（Ｂ）（Ｃ）のような画像を生成している。
り、図１３（Ｂ）（Ｃ）は本実施例の画像例７２０、６
５０である。図１３（Ａ）の既存の画像例では、表示内
容に関わらず画面内の全ての被写体に焦点が合ってい
る。このため、フォーカシングという点では非常に不自
然な画像となっており、どこに注目していいのかわから
ない画像でもある。そこで本実施例では、表示内容に応
じて図１３（Ｂ）（Ｃ）のような画像を生成している。
【０１０５】図１３（Ｂ）は画面内のサッカーボール７
２２に焦点が合っている画像である。通常サッカーを観
戦する場合の観客の視線はサッカーボールにあることか
ら、本実施例でも特別な注視点誘導が必要ない場合は、
サッカーボールに焦点を合わせた画像を生成することで
肉眼に近い自然でリアリティに富んだ画像を提供してい
る。
２２に焦点が合っている画像である。通常サッカーを観
戦する場合の観客の視線はサッカーボールにあることか
ら、本実施例でも特別な注視点誘導が必要ない場合は、
サッカーボールに焦点を合わせた画像を生成することで
肉眼に近い自然でリアリティに富んだ画像を提供してい
る。
【０１０６】図１３（Ｃ）は、画面内のボールをパスす
る相手６５２だけに焦点を合わせて生成した画像であ
る。このようにするとプレーヤーの視線は自然にパスす
る相手６５２に向くためゲーム内容がわかりやすいもの
となり、またプレーヤの視線を誘導することにより特別
なゲーム演出を行うこともできる。
る相手６５２だけに焦点を合わせて生成した画像であ
る。このようにするとプレーヤーの視線は自然にパスす
る相手６５２に向くためゲーム内容がわかりやすいもの
となり、またプレーヤの視線を誘導することにより特別
なゲーム演出を行うこともできる。
【０１０７】次にシューティングゲームを例にとり既存
の画面と本実施例の注視点誘導の画面の違いについて説
明する。
の画面と本実施例の注視点誘導の画面の違いについて説
明する。
【０１０８】図１４（Ａ）（Ｂ）は、いずれもプレーヤ
がシューティングデバイスを用いて画面内の標的に向か
ってのシューティングを行うシューティングゲームにお
ける既存の画像例６６０、６７０である。図１４（Ａ）
では攻撃を加えることが好ましい標的等に対して特別な
表示はなにもしていない場合であり、表示図１４（Ｂ）
はプレーヤが攻撃を加えることが好ましい標的６７２に
対して注意を促すマーカー６７４などをゲーム空間内に
置いている場合であり、いずれも画面内の全てのオブジ
ェクトに焦点が合っている。
がシューティングデバイスを用いて画面内の標的に向か
ってのシューティングを行うシューティングゲームにお
ける既存の画像例６６０、６７０である。図１４（Ａ）
では攻撃を加えることが好ましい標的等に対して特別な
表示はなにもしていない場合であり、表示図１４（Ｂ）
はプレーヤが攻撃を加えることが好ましい標的６７２に
対して注意を促すマーカー６７４などをゲーム空間内に
置いている場合であり、いずれも画面内の全てのオブジ
ェクトに焦点が合っている。
【０１０９】図１４（Ａ）では全てのオブジェクトに焦
点が合っているため、初心者のプレーヤ等はどの標的に
対してシューティングを行えばよいのか判別するのが困
難な場合もあった。また、図１４（Ｂ）のようにプレー
ヤの注意を促すために現実にはないマーカー６７４等を
ゲーム空間内に置くとプレーヤの注意を引きやすいが、
画像のリアリティを損なう原因にもなりかねない。
点が合っているため、初心者のプレーヤ等はどの標的に
対してシューティングを行えばよいのか判別するのが困
難な場合もあった。また、図１４（Ｂ）のようにプレー
ヤの注意を促すために現実にはないマーカー６７４等を
ゲーム空間内に置くとプレーヤの注意を引きやすいが、
画像のリアリティを損なう原因にもなりかねない。
【０１１０】そこで本実施例のシューティングゲームで
は、常にプレーヤが攻撃を加えることが好ましい標的に
注視点を誘導する画像を生成するシューティングゲーム
装置を提供している。図１５（Ａ）（Ｂ）は、いずれも
シューティングゲームにおける本実施例の画像例６８
０、６９０である。図１５（Ａ）は、プレーヤが撃った
標的６８２に焦点があっており、図１５（Ｂ）ではプレ
ーヤが次にねらう標的６９２に焦点が合っている。この
ようにプレーヤのシューティング及びゲームの進行に合
わせて常に焦点を移動させることで、リアリティに富ん
だゲーム演出を行うことができる。
は、常にプレーヤが攻撃を加えることが好ましい標的に
注視点を誘導する画像を生成するシューティングゲーム
装置を提供している。図１５（Ａ）（Ｂ）は、いずれも
シューティングゲームにおける本実施例の画像例６８
０、６９０である。図１５（Ａ）は、プレーヤが撃った
標的６８２に焦点があっており、図１５（Ｂ）ではプレ
ーヤが次にねらう標的６９２に焦点が合っている。この
ようにプレーヤのシューティング及びゲームの進行に合
わせて常に焦点を移動させることで、リアリティに富ん
だゲーム演出を行うことができる。
【０１１１】また画面内に標的が存在していない場合
は、図１６の画像例７００に示すように全ての被写体に
焦点をあわせてもよい。このように、単なる風景など焦
点を誘導する必要がない場面では、全ての被写体に焦点
をあわせ、ゲーム内容に応じて間欠的に注視点誘導を行
うような構成にしてもよい。
は、図１６の画像例７００に示すように全ての被写体に
焦点をあわせてもよい。このように、単なる風景など焦
点を誘導する必要がない場面では、全ての被写体に焦点
をあわせ、ゲーム内容に応じて間欠的に注視点誘導を行
うような構成にしてもよい。
【０１１２】図１７〜図２２は注視点誘導を行いフォー
カシングされた画像を生成する画像生成装置の機能ブロ
ック図を示したものである。
カシングされた画像を生成する画像生成装置の機能ブロ
ック図を示したものである。
【０１１３】図１７はピント別に複数のオブジェクト情
報を予め記憶部に登録しておき、ぼやけ情報に応じてリ
アルタイムに差し替えてフォーカシングされた画像を生
成する画像生成装置２００の機能ブロック図である。図
５に示す画像生成装置１００から注視点検出部１１０を
のぞいた構成を有しており、本実施例の焦点演算部２２
２は、予めプログラムされた所与のルールに応じて、ゲ
ーム内容に応じた焦点を演算する。なおゲームの種類に
よっては、乱数やバイオリズムなどを利用して焦点が不
規則に定まるようにしてもよい。他の構成については図
５と同様であるので説明を省略する。
報を予め記憶部に登録しておき、ぼやけ情報に応じてリ
アルタイムに差し替えてフォーカシングされた画像を生
成する画像生成装置２００の機能ブロック図である。図
５に示す画像生成装置１００から注視点検出部１１０を
のぞいた構成を有しており、本実施例の焦点演算部２２
２は、予めプログラムされた所与のルールに応じて、ゲ
ーム内容に応じた焦点を演算する。なおゲームの種類に
よっては、乱数やバイオリズムなどを利用して焦点が不
規則に定まるようにしてもよい。他の構成については図
５と同様であるので説明を省略する。
【０１１４】なお、位置演算部１２４、３次元演算部１
２６、画像描画部１２７、ピント別オブジェクト情報記
憶部１３１、ピント別ポリゴン情報記憶部１３３、ピン
ト別テクスチャ情報記憶部１３５が、フォーカシング画
像生成手段１５０として機能する。
２６、画像描画部１２７、ピント別オブジェクト情報記
憶部１３１、ピント別ポリゴン情報記憶部１３３、ピン
ト別テクスチャ情報記憶部１３５が、フォーカシング画
像生成手段１５０として機能する。
【０１１５】図１８はぼやけ情報に基づきぼやけ加工を
行い、ぼやけたオブジェクト情報をリアルタイムに生成
してフォーカシングされた画像を生成する画像生成装置
２０１の機能ブロック図である。図６に示す画像生成装
置１０１から注視点検出部１１０をのぞいた構成を有し
ており、本実施例の焦点演算部２２２は、予めプログラ
ムされた所与のルールに応じて、ゲーム内容に応じた焦
点を演算する。なおゲームの種類によっては、乱数やバ
イオリズムなどを利用して焦点が不規則に定まるように
してもよい。他の構成については図６と同様であるので
説明を省略する。
行い、ぼやけたオブジェクト情報をリアルタイムに生成
してフォーカシングされた画像を生成する画像生成装置
２０１の機能ブロック図である。図６に示す画像生成装
置１０１から注視点検出部１１０をのぞいた構成を有し
ており、本実施例の焦点演算部２２２は、予めプログラ
ムされた所与のルールに応じて、ゲーム内容に応じた焦
点を演算する。なおゲームの種類によっては、乱数やバ
イオリズムなどを利用して焦点が不規則に定まるように
してもよい。他の構成については図６と同様であるので
説明を省略する。
【０１１６】なお、位置演算部１２４、ポリゴンデータ
ぼやけ加工部１２５、３次元演算部１２６、画像描画部
１２７、テクスチャデータぼやけ加工部１２９、オブジ
ェクト情報記憶部１３０が、フォーカシング画像生成手
段１５０として機能する。
ぼやけ加工部１２５、３次元演算部１２６、画像描画部
１２７、テクスチャデータぼやけ加工部１２９、オブジ
ェクト情報記憶部１３０が、フォーカシング画像生成手
段１５０として機能する。
【０１１７】図１９はレンダリング後のデータにぼやけ
情報に基づきフィルター等の２Ｄ画像処理を施してフォ
ーカシングされた画像を生成する画像生成装置２０２の
機能ブロック図である。図７に示す画像生成装置１０２
から注視点検出部１１０をのぞいた構成を有しており、
本実施例の焦点演算部２２２は、予めプログラムされた
所与のルールに応じて、ゲーム内容に応じた焦点を演算
する。なおゲームの種類によっては、乱数やバイオリズ
ムなどを利用して焦点が不規則に定まるようにしてもよ
い。他の構成については図７と同様であるので説明を省
略する。
情報に基づきフィルター等の２Ｄ画像処理を施してフォ
ーカシングされた画像を生成する画像生成装置２０２の
機能ブロック図である。図７に示す画像生成装置１０２
から注視点検出部１１０をのぞいた構成を有しており、
本実施例の焦点演算部２２２は、予めプログラムされた
所与のルールに応じて、ゲーム内容に応じた焦点を演算
する。なおゲームの種類によっては、乱数やバイオリズ
ムなどを利用して焦点が不規則に定まるようにしてもよ
い。他の構成については図７と同様であるので説明を省
略する。
【０１１８】なお、位置演算部１２４、３次元演算部１
２６、画像描画部１２７、２Ｄ処理部１２８、オブジェ
クト情報記憶部１３０が、フォーカシング画像生成手段
１５０として機能する。
２６、画像描画部１２７、２Ｄ処理部１２８、オブジェ
クト情報記憶部１３０が、フォーカシング画像生成手段
１５０として機能する。
【０１１９】図２０はぼやけ情報に基づき、記憶されて
いるオブジェクトに対し、適切なぼやけ具合の映像を生
成するレンダリング処理を施してフォーカシングされた
画像を生成する画像生成装置２０３の機能ブロック図で
ある。図８に示す画像生成装置１０３から注視点検出部
１１０をのぞいた構成を有しており、本実施例の焦点演
算部２２２は、予めプログラムされた所与のルールに応
じて、ゲーム内容に応じた焦点を演算する。なおゲーム
の種類によっては、乱数やバイオリズムなどを利用して
焦点が不規則に定まるようにしてもよい。他の構成につ
いては図８と同様であるので説明を省略する。
いるオブジェクトに対し、適切なぼやけ具合の映像を生
成するレンダリング処理を施してフォーカシングされた
画像を生成する画像生成装置２０３の機能ブロック図で
ある。図８に示す画像生成装置１０３から注視点検出部
１１０をのぞいた構成を有しており、本実施例の焦点演
算部２２２は、予めプログラムされた所与のルールに応
じて、ゲーム内容に応じた焦点を演算する。なおゲーム
の種類によっては、乱数やバイオリズムなどを利用して
焦点が不規則に定まるようにしてもよい。他の構成につ
いては図８と同様であるので説明を省略する。
【０１２０】なお、位置演算部１２４、３次元演算部１
２６、画像描画部１２７、ピント別レンダリング処理部
１２９、オブジェクト情報記憶部１３０が、フォーカシ
ング画像生成手段１５０として機能する。
２６、画像描画部１２７、ピント別レンダリング処理部
１２９、オブジェクト情報記憶部１３０が、フォーカシ
ング画像生成手段１５０として機能する。
【０１２１】図２１はピント別に複数のピクチャー情報
を予め記憶部に登録しておき、ぼやけ情報に応じてリア
ルタイムに差し替えてフォーカシングされた画像を生成
する画像生成装置２０４の機能ブロック図である。図９
に示す画像生成装置１０４から注視点検出部１１０をの
ぞいた構成を有しており、本実施例の焦点演算部２２２
は、予めプログラムされた所与のルールに応じて、ゲー
ム内容に応じた焦点を演算する。なおゲームの種類によ
っては、乱数やバイオリズムなどを利用して焦点が不規
則に定まるようにしてもよい。他の構成については図９
と同様であるので説明を省略する。
を予め記憶部に登録しておき、ぼやけ情報に応じてリア
ルタイムに差し替えてフォーカシングされた画像を生成
する画像生成装置２０４の機能ブロック図である。図９
に示す画像生成装置１０４から注視点検出部１１０をの
ぞいた構成を有しており、本実施例の焦点演算部２２２
は、予めプログラムされた所与のルールに応じて、ゲー
ム内容に応じた焦点を演算する。なおゲームの種類によ
っては、乱数やバイオリズムなどを利用して焦点が不規
則に定まるようにしてもよい。他の構成については図９
と同様であるので説明を省略する。
【０１２２】なお、位置演算部１２４、３次元演算部１
２６、画像描画部１２７、ピント別ピクチャー情報記憶
部１４１が、フォーカシング画像生成手段１５０として
機能する。
２６、画像描画部１２７、ピント別ピクチャー情報記憶
部１４１が、フォーカシング画像生成手段１５０として
機能する。
【０１２３】図２２はぼやけ情報に基づきレンダリング
後のピクチャーにフィルター等の２Ｄ画像処理を施して
フォーカシングされた画像を生成する画像生成装置２０
５の機能ブロック図である。図１０に示す画像生成装置
１０５から注視点検出部１１０をのぞいた構成を有して
おり、本実施例の焦点演算部２２２は、予めプログラム
された所与のルールに応じて、ゲーム内容に応じた焦点
を演算する。なおゲームの種類によっては、乱数やバイ
オリズムなどを利用して焦点が不規則に定まるようにし
てもよい。他の構成については図１０と同様であるので
説明を省略する。
後のピクチャーにフィルター等の２Ｄ画像処理を施して
フォーカシングされた画像を生成する画像生成装置２０
５の機能ブロック図である。図１０に示す画像生成装置
１０５から注視点検出部１１０をのぞいた構成を有して
おり、本実施例の焦点演算部２２２は、予めプログラム
された所与のルールに応じて、ゲーム内容に応じた焦点
を演算する。なおゲームの種類によっては、乱数やバイ
オリズムなどを利用して焦点が不規則に定まるようにし
てもよい。他の構成については図１０と同様であるので
説明を省略する。
【０１２４】なお、位置演算部１２４、３次元演算部１
２６、画像描画部１２７、２Ｄ処理部１２８、ピクチャ
ー情報記憶部１４２が、フォーカシング画像生成手段１
５０として機能する。
２６、画像描画部１２７、２Ｄ処理部１２８、ピクチャ
ー情報記憶部１４２が、フォーカシング画像生成手段１
５０として機能する。
【０１２５】次に、本実施例を実現できるハードウェア
の構成の一例について図２３を用いて説明する。同図に
示す装置では、ＣＰＵ１０００、ＲＯＭ１００２、ＲＡ
Ｍ１００４、情報記憶媒体１００６、音合成ＩＣ１００
８、画像合成ＩＣ１０１０、Ｉ／Ｏポート１０１２、１
０１４が、システムバス１０１６により相互にデータ送
受信可能に接続されている。そして前記画像合成ＩＣ１
０１０にはディスプレイ１０１８が接続され、音合成Ｉ
Ｃ１００８にはスピーカ１０２０が接続され、Ｉ／Ｏポ
ート１０１２にはコントロール装置１０２２が接続さ
れ、Ｉ／Ｏポート１０１４には通信装置１０２４が接続
されている。
の構成の一例について図２３を用いて説明する。同図に
示す装置では、ＣＰＵ１０００、ＲＯＭ１００２、ＲＡ
Ｍ１００４、情報記憶媒体１００６、音合成ＩＣ１００
８、画像合成ＩＣ１０１０、Ｉ／Ｏポート１０１２、１
０１４が、システムバス１０１６により相互にデータ送
受信可能に接続されている。そして前記画像合成ＩＣ１
０１０にはディスプレイ１０１８が接続され、音合成Ｉ
Ｃ１００８にはスピーカ１０２０が接続され、Ｉ／Ｏポ
ート１０１２にはコントロール装置１０２２が接続さ
れ、Ｉ／Ｏポート１０１４には通信装置１０２４が接続
されている。
【０１２６】情報記憶媒体１００６は、プログラム、表
示物を表現するための画像情報、音情報等が主に格納さ
れるものであり、ＣＤ−ＲＯＭ、ゲームカセット、ＩＣ
カード、ＤＶＤ、ＭＯ、ＦＤ、メモリ等が用いられる。
例えば家庭用ゲーム装置ではゲームプログラム等を格納
する情報記憶媒体としてＣＤ−ＲＯＭ、ゲームカセッ
ト、ＤＶＤ等が用いられる。また業務用ゲーム装置では
ＲＯＭ等のメモリが用いられ、この場合には情報記憶媒
体１００６はＲＯＭ１００２になる。
示物を表現するための画像情報、音情報等が主に格納さ
れるものであり、ＣＤ−ＲＯＭ、ゲームカセット、ＩＣ
カード、ＤＶＤ、ＭＯ、ＦＤ、メモリ等が用いられる。
例えば家庭用ゲーム装置ではゲームプログラム等を格納
する情報記憶媒体としてＣＤ−ＲＯＭ、ゲームカセッ
ト、ＤＶＤ等が用いられる。また業務用ゲーム装置では
ＲＯＭ等のメモリが用いられ、この場合には情報記憶媒
体１００６はＲＯＭ１００２になる。
【０１２７】コントロール装置１０２２はゲームコント
ローラ、操作パネル等に相当するものであり、プレーヤ
がゲーム進行に応じて行う判断の結果を装置本体に入力
するための装置である。
ローラ、操作パネル等に相当するものであり、プレーヤ
がゲーム進行に応じて行う判断の結果を装置本体に入力
するための装置である。
【０１２８】情報記憶媒体１００６に格納されるプログ
ラム、ＲＯＭ１００２に格納されるシステムプログラム
（装置本体の初期化情報等）、コントロール装置１０２
２によって入力される信号等に従って、ＣＰＵ１０００
は装置全体の制御や各種データ処理を行う。ＲＡＭ１０
０４はこのＣＰＵ１０００の作業領域等として用いられ
る記憶手段であり、情報記憶媒体１００６やＲＯＭ１０
０２の所与の内容、あるいはＣＰＵ１０００の演算結果
等が格納される。
ラム、ＲＯＭ１００２に格納されるシステムプログラム
（装置本体の初期化情報等）、コントロール装置１０２
２によって入力される信号等に従って、ＣＰＵ１０００
は装置全体の制御や各種データ処理を行う。ＲＡＭ１０
０４はこのＣＰＵ１０００の作業領域等として用いられ
る記憶手段であり、情報記憶媒体１００６やＲＯＭ１０
０２の所与の内容、あるいはＣＰＵ１０００の演算結果
等が格納される。
【０１２９】更に、この種の装置には音合成ＩＣ１００
８と画像合成ＩＣ１０１０とが設けられていてゲーム音
やゲーム画像の好適な出力が行えるようになっている。
音合成ＩＣ１００８は情報記憶媒体１００６やＲＯＭ１
００２に記憶される情報に基づいて効果音やバックグラ
ウンド音楽等のゲーム音を合成する集積回路であり、合
成されたゲーム音はスピーカ１０２０によって出力され
る。また、画像合成ＩＣ１０１０は、ＲＡＭ１００４、
ＲＯＭ１００２、情報記憶媒体１００６等から送られる
画像情報に基づいてディスプレイ１０１８に出力するた
めの画素情報を合成する集積回路である。なおディスプ
レイ１０１８として、いわゆるヘッドマウントディスプ
レイ（ＨＭＤ）と呼ばれるものを使用することもでき
る。
８と画像合成ＩＣ１０１０とが設けられていてゲーム音
やゲーム画像の好適な出力が行えるようになっている。
音合成ＩＣ１００８は情報記憶媒体１００６やＲＯＭ１
００２に記憶される情報に基づいて効果音やバックグラ
ウンド音楽等のゲーム音を合成する集積回路であり、合
成されたゲーム音はスピーカ１０２０によって出力され
る。また、画像合成ＩＣ１０１０は、ＲＡＭ１００４、
ＲＯＭ１００２、情報記憶媒体１００６等から送られる
画像情報に基づいてディスプレイ１０１８に出力するた
めの画素情報を合成する集積回路である。なおディスプ
レイ１０１８として、いわゆるヘッドマウントディスプ
レイ（ＨＭＤ）と呼ばれるものを使用することもでき
る。
【０１３０】また、通信装置１０２４はゲーム装置内部
で利用される各種の情報を外部とやりとりするものであ
り、他のゲーム装置と接続されてゲームプログラムに応
じた所与の情報を送受したり、通信回線を介してゲーム
プログラム等の情報を送受することなどに利用される。
で利用される各種の情報を外部とやりとりするものであ
り、他のゲーム装置と接続されてゲームプログラムに応
じた所与の情報を送受したり、通信回線を介してゲーム
プログラム等の情報を送受することなどに利用される。
【０１３１】そして図１〜図２２で説明した種々の処理
は、該処理等を行うプログラムを格納した情報記憶媒体
１００６と、該プログラムに従って動作するＣＰＵ１０
００、画像合成ＩＣ１０１０、音合成ＩＣ１００８等に
よって実現される。なお画像合成ＩＣ１０１０、音合成
ＩＣ１００８等で行われる処理は、ＣＰＵ１０００ある
いは汎用のＤＳＰ等によりソフトウェア的に行ってもよ
い。
は、該処理等を行うプログラムを格納した情報記憶媒体
１００６と、該プログラムに従って動作するＣＰＵ１０
００、画像合成ＩＣ１０１０、音合成ＩＣ１００８等に
よって実現される。なお画像合成ＩＣ１０１０、音合成
ＩＣ１００８等で行われる処理は、ＣＰＵ１０００ある
いは汎用のＤＳＰ等によりソフトウェア的に行ってもよ
い。
【０１３２】図２４（Ａ）に、本実施例を業務用ゲーム
装置に適用した場合の例を示す。プレーヤは、ディスプ
レイ１１００上に映し出されたゲーム画像を見ながら、
レバー１１０２、ボタン１１０４等を操作してゲームを
楽しむ。装置に内蔵されるＩＣ基板１１０６には、ＣＰ
Ｕ、画像合成ＩＣ、音合成ＩＣ等が実装されている。
装置に適用した場合の例を示す。プレーヤは、ディスプ
レイ１１００上に映し出されたゲーム画像を見ながら、
レバー１１０２、ボタン１１０４等を操作してゲームを
楽しむ。装置に内蔵されるＩＣ基板１１０６には、ＣＰ
Ｕ、画像合成ＩＣ、音合成ＩＣ等が実装されている。
【０１３３】本実施例の画像生成処理を行うための情報
等は、ＩＣ基板１１０６上の情報記憶媒体であるメモリ
１１０８に格納される。以下、これらの情報を格納情報
と呼ぶ。これらの格納情報は、上記の種々の処理を行う
ためのプログラムコード、画像情報、音情報、表示物の
形状情報、テーブルデータ、リストデータ、プレーヤ情
報等の少なくとも１つを含むものである。
等は、ＩＣ基板１１０６上の情報記憶媒体であるメモリ
１１０８に格納される。以下、これらの情報を格納情報
と呼ぶ。これらの格納情報は、上記の種々の処理を行う
ためのプログラムコード、画像情報、音情報、表示物の
形状情報、テーブルデータ、リストデータ、プレーヤ情
報等の少なくとも１つを含むものである。
【０１３４】図２４（Ｂ）に、本実施例を家庭用のゲー
ム装置に適用した場合の例を示す。プレーヤはディスプ
レイ１２００に映し出されたゲーム画像を見ながら、ゲ
ームコントローラ１２０２、１２０４を操作してゲーム
を楽しむ。この場合、上記格納情報は、本体装置に着脱
自在な情報記憶媒体であるＣＤ−ＲＯＭ１２０６、ＩＣ
カード１２０８、１２０９等に格納されている。
ム装置に適用した場合の例を示す。プレーヤはディスプ
レイ１２００に映し出されたゲーム画像を見ながら、ゲ
ームコントローラ１２０２、１２０４を操作してゲーム
を楽しむ。この場合、上記格納情報は、本体装置に着脱
自在な情報記憶媒体であるＣＤ−ＲＯＭ１２０６、ＩＣ
カード１２０８、１２０９等に格納されている。
【０１３５】図２４（Ｃ）に、ホスト装置１３００と、
このホスト装置１３００と通信回線１３０２を介して接
続される端末１３０４ー1〜１３０４-nとを含むゲーム装
置に本実施例を適用した場合の例を示す。この場合、上
記格納情報は、例えばホスト装置１３００が制御可能な
磁気ディスク装置、磁気テープ装置、メモリ等の情報記
憶媒体１３０６に格納されている。端末１３０４ー1〜１
３０４-nが、ＣＰＵ、画像合成ＩＣ、音合成ＩＣを有
し、スタンドアロンでゲーム画像、ゲーム音を合成でき
るものである場合には、ホスト装置１３００からは、ゲ
ーム画像、ゲーム音を合成するためのゲームプログラム
等が端末１３０４ー1〜１３０４-nに配送される。一方、
スタンドアロンで合成できない場合には、ホスト装置１
３００がゲーム画像、ゲーム音を合成し、これを端末１
３０４ー1〜１３０４-nに伝送し端末において出力するこ
とになる。
このホスト装置１３００と通信回線１３０２を介して接
続される端末１３０４ー1〜１３０４-nとを含むゲーム装
置に本実施例を適用した場合の例を示す。この場合、上
記格納情報は、例えばホスト装置１３００が制御可能な
磁気ディスク装置、磁気テープ装置、メモリ等の情報記
憶媒体１３０６に格納されている。端末１３０４ー1〜１
３０４-nが、ＣＰＵ、画像合成ＩＣ、音合成ＩＣを有
し、スタンドアロンでゲーム画像、ゲーム音を合成でき
るものである場合には、ホスト装置１３００からは、ゲ
ーム画像、ゲーム音を合成するためのゲームプログラム
等が端末１３０４ー1〜１３０４-nに配送される。一方、
スタンドアロンで合成できない場合には、ホスト装置１
３００がゲーム画像、ゲーム音を合成し、これを端末１
３０４ー1〜１３０４-nに伝送し端末において出力するこ
とになる。
【０１３６】なお本発明は、上記実施例で説明したもの
に限らず、種々の変形実施が可能である。
に限らず、種々の変形実施が可能である。
【０１３７】本実施例ではポリゴンオブジェクトを例に
とり説明したが、自由曲面等で構成されたオブジェクト
でもよい。
とり説明したが、自由曲面等で構成されたオブジェクト
でもよい。
【０１３８】また、注視点検出手段としてアイカメラを
用いた場合を例にとり説明したが、例えば、シューティ
ングデバイスをもちいたゲームの場合そのシューティン
グ位置を注視点と擬制してフォーカシングを行うような
構成にしても良い。
用いた場合を例にとり説明したが、例えば、シューティ
ングデバイスをもちいたゲームの場合そのシューティン
グ位置を注視点と擬制してフォーカシングを行うような
構成にしても良い。
【０１３９】また本発明は、家庭用、業務用のゲーム装
置のみならず、シミュレータ、多数のプレーヤが参加す
る大型アトラクション装置、パーソナルコンピュータ、
マルチメディア端末、ゲーム画像を合成するＩＣ基板等
の種々のゲーム装置に適用できる。
置のみならず、シミュレータ、多数のプレーヤが参加す
る大型アトラクション装置、パーソナルコンピュータ、
マルチメディア端末、ゲーム画像を合成するＩＣ基板等
の種々のゲーム装置に適用できる。
【０１４０】
【図１】ビデオゲームの画面の例である。
【図２】アイカメラを装着した看者が画面の映像を見て
いる様子を表した図である。
いる様子を表した図である。
【図３】図３（Ａ）（Ｂ）は、看者の注視点と画面の各
オブジェクト毎のぼやけ具合の関係を説明するための図
である。
オブジェクト毎のぼやけ具合の関係を説明するための図
である。
【図４】適切なぼやけ具合を生成するための一手法を説
明するための図である。
明するための図である。
【図５】注視点を検出してフォーカシングされた画像を
生成する画像生成装置の機能ブロック図の一例を示した
ものである。
生成する画像生成装置の機能ブロック図の一例を示した
ものである。
【図６】注視点を検出してフォーカシングされた画像を
生成する画像生成装置の機能ブロック図の一例を示した
ものである。
生成する画像生成装置の機能ブロック図の一例を示した
ものである。
【図７】注視点を検出してフォーカシングされた画像を
生成する画像生成装置の機能ブロック図の一例を示した
ものである。
生成する画像生成装置の機能ブロック図の一例を示した
ものである。
【図８】注視点を検出してフォーカシングされた画像を
生成する画像生成装置の機能ブロック図の一例を示した
ものである。
生成する画像生成装置の機能ブロック図の一例を示した
ものである。
【図９】注視点を検出してフォーカシングされた画像を
生成する画像生成装置の機能ブロック図の一例を示した
ものである。
生成する画像生成装置の機能ブロック図の一例を示した
ものである。
【図１０】注視点を検出してフォーカシングされた画像
を生成する画像生成装置の機能ブロック図の一例を示し
たものである。
を生成する画像生成装置の機能ブロック図の一例を示し
たものである。
【図１１】図１１（Ａ）（Ｂ）は、いずれもドライブゲ
ームにおける既存の画像例である。
ームにおける既存の画像例である。
【図１２】図１２（Ａ）（Ｂ）は、いずれもドライブゲ
ームにおける本実施例の画像例である。
ームにおける本実施例の画像例である。
【図１３】図１３（Ａ）は既存の画像例であり、図１３
（Ｂ）（Ｃ）は本実施例の画像例である。
（Ｂ）（Ｃ）は本実施例の画像例である。
【図１４】図１４（Ａ）（Ｂ）は、いずれもプレーヤが
シューティングデバイスを用いて画面内の標的に向かっ
てのシューティングを行うシューティングゲームにおけ
る既存の画像例である。
シューティングデバイスを用いて画面内の標的に向かっ
てのシューティングを行うシューティングゲームにおけ
る既存の画像例である。
【図１５】図１５（Ａ）（Ｂ）は、いずれもシューティ
ングゲームにおける本実施例の画像例である。
ングゲームにおける本実施例の画像例である。
【図１６】画面内に標的が存在していない場合の本実施
例の画像例である。
例の画像例である。
【図１７】注視点誘導を行いフォーカシングされた画像
を生成する画像生成装置の機能ブロック図の一例を示し
たものである。
を生成する画像生成装置の機能ブロック図の一例を示し
たものである。
【図１８】注視点誘導を行いフォーカシングされた画像
を生成する画像生成装置の機能ブロック図の一例を示し
たものである。
を生成する画像生成装置の機能ブロック図の一例を示し
たものである。
【図１９】注視点誘導を行いフォーカシングされた画像
を生成する画像生成装置の機能ブロック図の一例を示し
たものである。
を生成する画像生成装置の機能ブロック図の一例を示し
たものである。
【図２０】注視点誘導を行いフォーカシングされた画像
を生成する画像生成装置の機能ブロック図の一例を示し
たものである。
を生成する画像生成装置の機能ブロック図の一例を示し
たものである。
【図２１】注視点誘導を行いフォーカシングされた画像
を生成する画像生成装置の機能ブロック図の一例を示し
たものである。
を生成する画像生成装置の機能ブロック図の一例を示し
たものである。
【図２２】注視点誘導を行いフォーカシングされた画像
を生成する画像生成装置の機能ブロック図の一例を示し
たものである。
を生成する画像生成装置の機能ブロック図の一例を示し
たものである。
【図２３】本実施例を実現するハードウェアの構成の一
例を示す図である。
例を示す図である。
【図２４】図２４（Ａ）（Ｂ）（Ｃ）は、本実施例が適
用される種々の形態の装置を示す図である。
用される種々の形態の装置を示す図である。
【図２５】ぼやけ情報に応じて適切なぼやけ具合の映像
を生成するレンダリング処理の一例を説明するための図
である。
を生成するレンダリング処理の一例を説明するための図
である。
１００〜１０４、２００〜２０４ 画像生成装置 １１０ 注視点検出部 １２２、２２２ 焦点検出部 １２３ ぼやけ情報決定部 １２４ 位置演算部 １２５ ポリゴンデータぼやけ加工部 １２６ ３次元演算部 １２７ 画像描画部 １２８ ２Ｄ処理部 １２９ テクスチャデータぼやけ加工部 １３０ オブジェクト情報記憶部 １３１ ピント別オブジェクト情報記憶部 １３２ ポリゴン情報記憶部 １３３ ピント別ポリゴン情報記憶部 １３４ テクスチャ情報記憶部 １３５ ピント別テクスチャ情報記憶部 １４０ 空間情報記憶部 １４１ ピント別ピクチャー情報記憶部 １４２ ピクチャー情報記憶部 １５０ フォーカシング画像生成手段
Claims (16)
- 【請求項１】 視点位置情報、３次元オブジェクトの位
置情報及び２次元ピクチャーの位置情報の少なくとも一
つの位置情報に基づき、リアルタイムに変化する任意の
焦点位置に対する前記３次元オブジェクト及び前記２次
元ピクチャーの少なくとも一方の画像のぼやけ程度を表
すぼやけ情報を決定するぼやけ情報決定手段と、 前記ぼやけ情報に基づき、フォーカシングされた画像を
生成するフォーカシング画像生成手段とを含むことを特
徴とする画像生成装置。 - 【請求項２】 請求項１において、 前記ぼやけ情報決定手段は、 前記３次元オブジェクト及び前記２次元ピクチャーの少
なくとも一方と前記視点位置との距離を表す第一の距離
と、前記焦点位置と前記視点位置の距離を表す第二の距
離とで特定される距離差及び距離比に基づき前記ぼやけ
情報を決定し、 前記フォーカシング画像生成手段は、 前記３次元オブジェクト及び前記２次元ピクチャーの少
なくとも一方に対して前記ぼやけ情報により特定される
前記距離差及び距離比が大きくなるほどぼやけた画像を
生成することを特徴とする画像生成装置。 - 【請求項３】 請求項１〜２のいずれかにおいて、 看者の注視点をリアルタイムに検出する注視点検出手段
と、 検出された前記注視点に基づき、焦点位置を決定する手
段とを更に含むことを特徴とする画像生成装置。 - 【請求項４】 請求項１〜３のいずれかにおいて、 所与のルールに基づき画像の焦点位置、焦点の存在する
３次元オブジェクト及び焦点の存在する２次元ピクチャ
ーの少なくとも一方を決定する手段を更に含み、 前記ぼやけ情報決定手段は、 前記焦点位置、焦点の存在する前記３次元オブジェクト
及び焦点の存在する前記２次元ピクチャーの少なくとも
一方に基づき前記ぼやけ情報を決定することを特徴とす
る画像生成装置。 - 【請求項５】 請求項１〜４のいずれかにおいて、 前記フォーカシング画像生成手段は、 所与の１の３次元オブジェクトに対してぼやけ情報毎に
複数のピント別オブジェクト情報を記憶するピント別オ
ブジェクト情報記憶手段を含み、 前記ぼやけ情報に基づき、ピント別オブジェクト情報記
憶手段からピント別オブジェクト情報を読み出して、該
ピント別オブジェクト情報にもとづいて画像を生成する
ことを特徴とする画像生成装置。 - 【請求項６】 請求項１〜５のいずれかにおいて、 前記フォーカシング画像生成手段は、 所与の１の２次元ピクチャーに対してぼやけ情報毎に複
数のピント別ピクチャー情報を記憶するピント別ピクチ
ャー情報記憶手段を含み、 前記ぼやけ情報に基づき、ピント別ピクチャー情報記憶
手段からピント別ピクチャー情報を読み出して、該ピン
ト別ピクチャー情報にもとづいて画像を生成することを
特徴とする画像生成装置。 - 【請求項７】 請求項１〜６のいずれかにおいて、 前記フォーカシング画像生成手段は、 所与の１の３次元オブジェクトに対して少なくとも１つ
のオブジェクト情報を記憶するオブジェクト情報記憶手
段と、 前記ぼやけ情報に基づき前記オブジェクト情報記憶手段
に記憶されたオブジェクト情報をぼやけ加工し、ぼやけ
情報に応じたオブジェクト情報を生成するぼやけ加工手
段とを含むことを特徴とする画像生成装置。 - 【請求項８】 請求項１〜７のいずれかにおいて、 前記フォーカシング画像生成手段は、 フォーカシングされた画像を生成するために、レンダリ
ング後の所与の３次元オブジェクトに対してぼやけ情報
に基づいた２Ｄ画像処理を行う手段を含むことを特徴と
する画像生成装置。 - 【請求項９】 請求項１〜８のいずれかにおいて、 前記フォーカシング画像生成手段は、 フォーカシングされた画像を生成するために、所与の３
次元オブジェクトに対してぼやけ情報に基づいたレンダ
リング処理を行う手段を含むことを特徴とする画像生成
装置。 - 【請求項１０】 請求項１〜９のいずれかにおいて、 前記フォーカシング画像生成手段は、 フォーカシングされた画像を生成するために、所与の２
次元ピクチャーに対してぼやけ情報に基づいた２Ｄ画像
処理を行う手段を含むことを特徴とする画像生成装置。 - 【請求項１１】 請求項１〜１０のいずれかに記載され
た画像生成装置を含み、表示部に表示された被写体に対
してシューティングデバイスを用いてシューティングを
行うシミュレーション装置であって、 前記シューティングデバイスの照準を検出する手段と、 検出された前記照準に基づき、焦点位置を決定する手段
とを更に含むことを特徴とするシミュレーション装置。 - 【請求項１２】 請求項１〜１１のいずれかに記載され
た画像生成装置を含み、生成された画像を表示部に表示
するシミュレーション装置であって、 表示部に表示する画像の中で、注視点誘導の対象となる
３次元オブジェクト及び２次元ピクチャーの少なくとも
一方を決定する手段と、 前記３次元オブジェクト及び２次元ピクチャーの少なく
とも一方に基づき焦点位置を決定する手段とを更に含む
ことを特徴とするシミュレーション装置。 - 【請求項１３】 視点位置情報、３次元オブジェクトの
位置情報及び２次元ピクチャーの位置情報の少なくとも
一つの位置情報に基づき、リアルタイムに変化する任意
の焦点位置に対する前記３次元オブジェクト及び前記２
次元ピクチャーの少なくとも一方の画像のぼやけ程度を
表すぼやけ情報を決定するための情報と、 前記ぼやけ情報に基づき、フォーカシングされた画像を
生成するための情報とを含むことを特徴とする情報記憶
媒体。 - 【請求項１４】 請求項１３において、 前記ぼやけ情報を決定するための情報は、 前記３次元オブジェクト及び前記２次元ピクチャーの少
なくとも一方と前記視点位置との距離を表す第一の距離
と、前記焦点位置と前記視点位置の距離を表す第二の距
離とで特定される距離差及び距離比に基づき前記ぼやけ
情報を決定するための情報を含み、 前記フォーカシングされた画像を生成するため情報は、 前記３次元オブジェクト及び前記２次元ピクチャーの少
なくとも一方に対して前記ぼやけ情報により特定される
前記距離差及び距離比が大きくなるほどぼやけた画像を
生成するための情報を含むことを特徴とする情報記憶媒
体。 - 【請求項１５】 請求項１３又は１４のいずれかにおい
て、 リアルタイムに検出された看者の注視点に基づき、焦点
位置を決定するための情報を更に含むことを特徴とする
情報記憶媒体。 - 【請求項１６】 請求項１３〜１５のいずれかにおい
て、 所与のルールに基づき画像の焦点位置、焦点の存在する
３次元オブジェクト及び焦点の存在する２次元ピクチャ
ーの少なくとも一方を決定するための情報を更に含み、 前記ぼやけ情報を決定するための情報は、 前記焦点位置、焦点の存在する前記３次元オブジェクト
及び焦点の存在する前記２次元ピクチャーの少なくとも
一方に基づき前記ぼやけ情報を決定する情報を含むこと
を特徴とする情報記憶媒体。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP33930597A JP3442270B2 (ja) | 1997-11-25 | 1997-11-25 | 画像生成装置及び情報記憶媒体 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP33930597A JP3442270B2 (ja) | 1997-11-25 | 1997-11-25 | 画像生成装置及び情報記憶媒体 |
Related Child Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2002333434A Division JP2003203250A (ja) | 2002-11-18 | 2002-11-18 | シューティングゲーム装置及び情報記憶媒体 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH11161814A true JPH11161814A (ja) | 1999-06-18 |
| JP3442270B2 JP3442270B2 (ja) | 2003-09-02 |
Family
ID=18326207
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP33930597A Expired - Fee Related JP3442270B2 (ja) | 1997-11-25 | 1997-11-25 | 画像生成装置及び情報記憶媒体 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP3442270B2 (ja) |
Cited By (24)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2001117046A (ja) * | 1999-10-22 | 2001-04-27 | Shimadzu Corp | 視線検出機能付ヘッドマウントディスプレイシステム |
| JP2001148027A (ja) * | 1999-11-19 | 2001-05-29 | Matsushita Electric Ind Co Ltd | 画像処理装置および画像処理方法 |
| JP2002024847A (ja) * | 2000-07-11 | 2002-01-25 | Dainippon Printing Co Ltd | 画像生成装置、画像生成方法及び記録媒体 |
| JP2002032780A (ja) * | 2000-05-10 | 2002-01-31 | Namco Ltd | ゲームシステム、プログラム及び情報記憶媒体 |
| WO2002095684A1 (fr) * | 2001-05-18 | 2002-11-28 | Sony Computer Entertainment Inc. | Afficheur |
| JP2004187912A (ja) * | 2002-12-11 | 2004-07-08 | Sophia Co Ltd | 遊技機 |
| JP2005310101A (ja) * | 2004-03-24 | 2005-11-04 | Seiko Epson Corp | 視線誘導度算出システム、視線誘導度算出プログラムおよび記憶媒体、並びに視線誘導度算出方法 |
| EP1808207A2 (en) * | 2005-10-11 | 2007-07-18 | Nintendo Co., Ltd. | Storage medium having game program stored thereon and game apparatus |
| JP2008140134A (ja) * | 2006-12-01 | 2008-06-19 | Mazda Motor Corp | 車両企画支援システム、車両企画支援プログラム、及び車両企画支援方法 |
| JP2008140139A (ja) * | 2006-12-01 | 2008-06-19 | Mazda Motor Corp | 車両企画支援システム、車両企画支援プログラム、及び車両企画支援方法 |
| JP2008140138A (ja) * | 2006-12-01 | 2008-06-19 | Mazda Motor Corp | 車両企画支援システム、車両企画支援プログラム、及び車両企画支援方法 |
| JP2008140136A (ja) * | 2006-12-01 | 2008-06-19 | Mazda Motor Corp | 車両企画支援システム、車両企画支援プログラム、及び車両企画支援方法 |
| JP2008257127A (ja) * | 2007-04-09 | 2008-10-23 | Toppan Printing Co Ltd | 画像表示装置及び画像表示方法 |
| JP2011156061A (ja) * | 2010-01-29 | 2011-08-18 | Konami Digital Entertainment Co Ltd | ゲームプログラム、ゲーム装置、ゲーム制御方法 |
| JP2012128514A (ja) * | 2010-12-13 | 2012-07-05 | Nintendo Co Ltd | 情報処理プログラム、情報処理装置、情報処理方法及び情報処理システム |
| JP2012173821A (ja) * | 2011-02-17 | 2012-09-10 | Namco Bandai Games Inc | プログラム、情報記憶媒体及び画像生成システム |
| JP2012238088A (ja) * | 2011-05-10 | 2012-12-06 | Vri Inc | 画像選択表示方法および装置 |
| JP2016201812A (ja) * | 2016-06-29 | 2016-12-01 | ヴイアールアイ株式会社 | 画像選択表示方法および装置 |
| JP2018010488A (ja) * | 2016-07-13 | 2018-01-18 | 株式会社バンダイナムコエンターテインメント | シミュレーションシステム及びプログラム |
| JP2018029968A (ja) * | 2013-06-07 | 2018-03-01 | 株式会社ソニー・インタラクティブエンタテインメント | ヘッドマウンテッドディスプレイ上でのゲームプレイの移行 |
| JP2018526726A (ja) * | 2015-07-17 | 2018-09-13 | マジック リープ， インコーポレイテッドＭａｇｉｃ Ｌｅａｐ，Ｉｎｃ． | 動的領域分解能を有する仮想／拡張現実システム |
| WO2019107507A1 (ja) * | 2017-11-30 | 2019-06-06 | 国立大学法人東京工業大学 | 視線誘導システム |
| JP2020530157A (ja) * | 2017-08-08 | 2020-10-15 | 株式会社ソニー・インタラクティブエンタテインメント | ビデオ生成方法および装置 |
| WO2022230253A1 (ja) * | 2021-04-28 | 2022-11-03 | ソニーグループ株式会社 | 情報処理装置及び情報処理方法 |
-
1997
- 1997-11-25 JP JP33930597A patent/JP3442270B2/ja not_active Expired - Fee Related
Cited By (32)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2001117046A (ja) * | 1999-10-22 | 2001-04-27 | Shimadzu Corp | 視線検出機能付ヘッドマウントディスプレイシステム |
| JP2001148027A (ja) * | 1999-11-19 | 2001-05-29 | Matsushita Electric Ind Co Ltd | 画像処理装置および画像処理方法 |
| JP2002032780A (ja) * | 2000-05-10 | 2002-01-31 | Namco Ltd | ゲームシステム、プログラム及び情報記憶媒体 |
| JP2002024847A (ja) * | 2000-07-11 | 2002-01-25 | Dainippon Printing Co Ltd | 画像生成装置、画像生成方法及び記録媒体 |
| US7193629B2 (en) | 2001-05-18 | 2007-03-20 | Sony Computer Entertainment Inc. | Display apparatus |
| JP2003058912A (ja) * | 2001-05-18 | 2003-02-28 | Sony Computer Entertainment Inc | 表示装置及び画像処理方法 |
| WO2002095684A1 (fr) * | 2001-05-18 | 2002-11-28 | Sony Computer Entertainment Inc. | Afficheur |
| JP2004187912A (ja) * | 2002-12-11 | 2004-07-08 | Sophia Co Ltd | 遊技機 |
| JP2005310101A (ja) * | 2004-03-24 | 2005-11-04 | Seiko Epson Corp | 視線誘導度算出システム、視線誘導度算出プログラムおよび記憶媒体、並びに視線誘導度算出方法 |
| EP1808207A3 (en) * | 2005-10-11 | 2012-09-05 | Nintendo Co., Ltd. | Storage medium having game program stored thereon and game apparatus |
| EP1808207A2 (en) * | 2005-10-11 | 2007-07-18 | Nintendo Co., Ltd. | Storage medium having game program stored thereon and game apparatus |
| JP2008140134A (ja) * | 2006-12-01 | 2008-06-19 | Mazda Motor Corp | 車両企画支援システム、車両企画支援プログラム、及び車両企画支援方法 |
| JP2008140139A (ja) * | 2006-12-01 | 2008-06-19 | Mazda Motor Corp | 車両企画支援システム、車両企画支援プログラム、及び車両企画支援方法 |
| JP2008140138A (ja) * | 2006-12-01 | 2008-06-19 | Mazda Motor Corp | 車両企画支援システム、車両企画支援プログラム、及び車両企画支援方法 |
| JP2008140136A (ja) * | 2006-12-01 | 2008-06-19 | Mazda Motor Corp | 車両企画支援システム、車両企画支援プログラム、及び車両企画支援方法 |
| JP2008257127A (ja) * | 2007-04-09 | 2008-10-23 | Toppan Printing Co Ltd | 画像表示装置及び画像表示方法 |
| JP2011156061A (ja) * | 2010-01-29 | 2011-08-18 | Konami Digital Entertainment Co Ltd | ゲームプログラム、ゲーム装置、ゲーム制御方法 |
| JP2012128514A (ja) * | 2010-12-13 | 2012-07-05 | Nintendo Co Ltd | 情報処理プログラム、情報処理装置、情報処理方法及び情報処理システム |
| JP2012173821A (ja) * | 2011-02-17 | 2012-09-10 | Namco Bandai Games Inc | プログラム、情報記憶媒体及び画像生成システム |
| JP2012238088A (ja) * | 2011-05-10 | 2012-12-06 | Vri Inc | 画像選択表示方法および装置 |
| US10870049B2 (en) | 2013-06-07 | 2020-12-22 | Sony Interactive Entertainment Inc. | Transitioning gameplay on a head-mounted display |
| JP2018029968A (ja) * | 2013-06-07 | 2018-03-01 | 株式会社ソニー・インタラクティブエンタテインメント | ヘッドマウンテッドディスプレイ上でのゲームプレイの移行 |
| US10286299B2 (en) | 2013-06-07 | 2019-05-14 | Sony Interactive Entertainment Inc. | Transitioning gameplay on a head-mounted display |
| JP2021073561A (ja) * | 2015-07-17 | 2021-05-13 | マジック リープ， インコーポレイテッドＭａｇｉｃ Ｌｅａｐ，Ｉｎｃ． | 動的領域分解能を有する仮想／拡張現実システム |
| JP2018526726A (ja) * | 2015-07-17 | 2018-09-13 | マジック リープ， インコーポレイテッドＭａｇｉｃ Ｌｅａｐ，Ｉｎｃ． | 動的領域分解能を有する仮想／拡張現実システム |
| JP2016201812A (ja) * | 2016-06-29 | 2016-12-01 | ヴイアールアイ株式会社 | 画像選択表示方法および装置 |
| JP2018010488A (ja) * | 2016-07-13 | 2018-01-18 | 株式会社バンダイナムコエンターテインメント | シミュレーションシステム及びプログラム |
| WO2018012395A1 (ja) * | 2016-07-13 | 2018-01-18 | 株式会社バンダイナムコエンターテインメント | シミュレーションシステム、処理方法及び情報記憶媒体 |
| US11493990B2 (en) | 2016-07-13 | 2022-11-08 | Bandai Namco Entertainment Inc. | Simulation system, processing method, and information storage medium |
| JP2020530157A (ja) * | 2017-08-08 | 2020-10-15 | 株式会社ソニー・インタラクティブエンタテインメント | ビデオ生成方法および装置 |
| WO2019107507A1 (ja) * | 2017-11-30 | 2019-06-06 | 国立大学法人東京工業大学 | 視線誘導システム |
| WO2022230253A1 (ja) * | 2021-04-28 | 2022-11-03 | ソニーグループ株式会社 | 情報処理装置及び情報処理方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| JP3442270B2 (ja) | 2003-09-02 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP3442270B2 (ja) | 画像生成装置及び情報記憶媒体 | |
| US10372209B2 (en) | Eye tracking enabling 3D viewing | |
| KR100812905B1 (ko) | 입체 화상 처리 방법, 장치 및 컴퓨터 판독가능 기록 매체 | |
| JP2003107603A (ja) | 立体視画像生成装置、立体視画像生成情報および情報記憶媒体 | |
| EP2105905A2 (en) | Image generation apparatus | |
| JP4917664B1 (ja) | 画像表示装置、ゲームプログラム、ゲーム制御方法 | |
| US9196078B2 (en) | System and methods for displaying virtual space including a silhouette image | |
| JP3959354B2 (ja) | 画像生成装置、画像生成方法、及び画像生成プログラム | |
| US20120306860A1 (en) | Image generation system, image generation method, and information storage medium | |
| JPH10334275A (ja) | 仮想現実方法及び装置並びに記憶媒体 | |
| JP2012212237A (ja) | 画像生成システム、サーバシステム、プログラム及び情報記憶媒体 | |
| JP2012079291A (ja) | プログラム、情報記憶媒体及び画像生成システム | |
| US20120092367A1 (en) | Computer readable medium storing image processing program of synthesizing images | |
| JPH11244534A (ja) | 画像生成装置及び情報記憶媒体 | |
| JP5620202B2 (ja) | プログラム、情報記憶媒体及び画像生成システム | |
| TW478943B (en) | Game machine, and image processing method for use with the game machine | |
| JP7560835B2 (ja) | プログラム及び情報処理方法 | |
| US6890261B2 (en) | Game system, program and image generation method | |
| JP5649846B2 (ja) | プログラム及び画像生成システム | |
| JP2003203250A (ja) | シューティングゲーム装置及び情報記憶媒体 | |
| JP2001314647A (ja) | ゲーム装置および情報記憶媒体 | |
| JP4229317B2 (ja) | 画像生成システム、プログラム及び情報記憶媒体 | |
| JPH11328437A (ja) | ゲ―ム機及びゲ―ム機における画像処理方法 | |
| JP2001314648A (ja) | ゲーム装置および情報記憶媒体 | |
| JP5701638B2 (ja) | プログラム及び画像生成システム |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20030527 |
|
| S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
| S533 | Written request for registration of change of name |
Free format text: JAPANESE INTERMEDIATE CODE: R313533 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20080620 Year of fee payment: 5 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090620 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090620 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090620 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100620 Year of fee payment: 7 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100620 Year of fee payment: 7 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110620 Year of fee payment: 8 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110620 Year of fee payment: 8 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120620 Year of fee payment: 9 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120620 Year of fee payment: 9 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130620 Year of fee payment: 10 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130620 Year of fee payment: 10 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
| R360 | Written notification for declining of transfer of rights |
Free format text: JAPANESE INTERMEDIATE CODE: R360 |
|
| S533 | Written request for registration of change of name |
Free format text: JAPANESE INTERMEDIATE CODE: R313533 |
|
| R370 | Written measure of declining of transfer procedure |
Free format text: JAPANESE INTERMEDIATE CODE: R370 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| LAPS | Cancellation because of no payment of annual fees |