JP2005230156A - 画像表示システム、画像処理システム及びビデオゲームシステム - Google Patents

画像表示システム、画像処理システム及びビデオゲームシステム Download PDF

Info

Publication number
JP2005230156A
JP2005230156A JP2004041210A JP2004041210A JP2005230156A JP 2005230156 A JP2005230156 A JP 2005230156A JP 2004041210 A JP2004041210 A JP 2004041210A JP 2004041210 A JP2004041210 A JP 2004041210A JP 2005230156 A JP2005230156 A JP 2005230156A
Authority
JP
Japan
Prior art keywords
image
card
image data
identification
identification information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2004041210A
Other languages
English (en)
Other versions
JP3851907B2 (ja
Inventor
Yusuke Watanabe
祐介 渡辺
Akira Miyaki
暁 宮木
Tsukasa Yoshimura
司 吉村
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Interactive Entertainment Inc
Sony Corp
Original Assignee
Sony Corp
Sony Computer Entertainment Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp, Sony Computer Entertainment Inc filed Critical Sony Corp
Priority to JP2004041210A priority Critical patent/JP3851907B2/ja
Priority to AT05710301T priority patent/ATE457793T1/de
Priority to PCT/JP2005/002451 priority patent/WO2005077479A1/ja
Priority to DE602005019350T priority patent/DE602005019350D1/de
Priority to EP05710301A priority patent/EP1618930B1/en
Publication of JP2005230156A publication Critical patent/JP2005230156A/ja
Priority to US11/243,481 priority patent/US7690975B2/en
Application granted granted Critical
Publication of JP3851907B2 publication Critical patent/JP3851907B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/60Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor
    • A63F13/65Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor automatically by game devices or servers from real world data, e.g. measurement in live racing competition
    • A63F13/655Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor automatically by game devices or servers from real world data, e.g. measurement in live racing competition by importing photos, e.g. of the player
    • A63F13/10
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20Input arrangements for video game devices
    • A63F13/21Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/213Input arrangements for video game devices characterised by their sensors, purposes or types comprising photodetecting means, e.g. cameras, photodiodes or infrared cells
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/45Controlling the progress of the video game
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/90Constructional details or arrangements of video game devices not provided for in groups A63F13/20 or A63F13/25, e.g. housing, wiring, connections or cabinets
    • A63F13/95Storage media specially adapted for storing game information, e.g. video game cartridges
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/20Analysis of motion
    • G06T7/254Analysis of motion involving subtraction of images
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F1/00Card games
    • A63F1/04Card games combined with other games
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F9/00Games not otherwise provided for
    • A63F9/24Electric games; Games using electronic circuits not otherwise provided for
    • A63F2009/2401Detail of input, input devices
    • A63F2009/2411Input form cards, tapes, discs
    • A63F2009/2419Optical
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/10Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals
    • A63F2300/1087Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals comprising photodetecting means, e.g. a camera
    • A63F2300/1093Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals comprising photodetecting means, e.g. a camera using visible light
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/20Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterised by details of the game platform
    • A63F2300/206Game information storage, e.g. cartridges, CD ROM's, DVD's, smart cards
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/50Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by details of game servers
    • A63F2300/55Details of game data or player data management
    • A63F2300/5546Details of game data or player data management using player registration data, e.g. identification, account, preferences, game history
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/60Methods for processing data by generating or executing the game program
    • A63F2300/65Methods for processing data by generating or executing the game program for computing the condition of a game character
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/60Methods for processing data by generating or executing the game program
    • A63F2300/69Involving elements of the real world in the game world, e.g. measurement in live races, real video
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/80Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game specially adapted for executing a specific type of game
    • A63F2300/8058Virtual breeding, e.g. tamagotchi
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/80Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game specially adapted for executing a specific type of game
    • A63F2300/8082Virtual reality

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Processing Or Creating Images (AREA)
  • User Interface Of Digital Computer (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Image Processing (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

【課題】実空間でしか楽しめなかったカードゲームを仮想空間にまで広げることができ、カードゲームとビデオゲームとが融合した新規なゲームを提供する。
【解決手段】所定のタイミングに基づいてCCDカメラ42からの撮像画像データを第1の差分用メモリ24に記憶する機能188と、別のタイミングに基づいてCCDカメラ42からの撮像画像データを第2の差分用メモリ26に記憶する機能190と、第1の差分用メモリ24に記憶された撮像画像データと第2の差分用メモリ26に記憶された撮像画像データとの差分をとる機能192と、差分後のデータから動きのあった画像を特定する機能194と、動きのあった画像がキャラクタの画像を触っているかどうかを判別する機能196と、動きのあった画像がキャラクタの画像に接触していると判別した場合に、パラメータ、例えば経験値、体力、攻撃力等の値を増加させる機能200とを有する。
【選択図】図19

Description

本発明は、机やテーブル等の上に置かれたカードを撮像し、その撮像した映像と共に、カードに貼付された識別情報に対応するオブジェクトの三次元画像を表示する画像表示システム、様々に配置されたカードの認識についての画像処理システム並びにこれら画像表示システム及び画像処理システムの原理を利用したビデオゲームシステムに関する。
近時、表面又は裏面に識別画像(二次元バーコード等)が貼付されたカードを例えばCCDカメラで撮像し、この撮像画像の画像データから前記カードに貼付された識別画像の画像データを探知し、探知された識別画像の画像データから前記カードの識別情報を検出する方法が特許文献1によって開示されている。
そして、この方法を発展させて、前記CCDカメラからの前記カードの画像を含むを撮像画像をモニタ上に表示すると共に、前記モニタに表示されている前記カードの画像上に、検出された前記識別情報に対応したオブジェクトの三次元画像を重畳して表示するようにした例が特許文献2によって明らかにされている。この方法によれば、実空間と仮想空間を融合した視覚効果を表現することが可能となる。
特開2000−82108号公報 特開2000−322602号公報
本発明は、上述した特許文献2の方法をさらに発展させて、様々なビデオゲームに簡単に適用させることができ、ビデオゲームの範疇の拡大化、多様化を図ることができる画像表示システム及び画像処理システムを提供することを目的とする。
また、本発明の目的は、上述した特許文献2の方法をさらに発展させて、実空間でしか楽しめなかったカードゲームを仮想空間にまで広げることができ、カードゲームとビデオゲームとが融合した新規なゲームを提供することができるビデオゲームシステムを提供することにある。
本発明では、表示されたカードの画像上に、該カードの識別情報に対応するオブジェクトの画像が重畳して表示される。そして、所定のタイミングで撮像した画像データと前記所定のタイミングとは別のタイミングで撮像した画像データとの差分をとられ、差分後のデータに基づいて動きのあった画像が特定される。この特定された画像がオブジェクトの画像に接触しているかどうかが判別され、接触していると判別された場合に、前記識別情報に対応するパラメータが変更されることになる。これは、例えばビデオゲームであれば、ユーザがキャラクタをなでることで、キャラクタの経験値や体力等が増加する等の処理が行われ、キャラクタの育成ゲーム等に好適である。ここで、キャラクタとは、オブジェクトのうち、動きを伴うオブジェクトであって、人間や動物、あるいはテレビ番組やアニメーション映画等で登場する主人公等を模したオブジェクトを指す。
そして、差分演算処理は、第1の差分信号に基づいて前記撮像手段からの撮像画像の画像データを第1の差分用メモリに記憶し、第2の差分信号に基づいて前記撮像手段からの撮像画像の画像データを第2の差分用メモリに記憶し、前記第1の差分メモリに記憶された画像データと前記第2の差分メモリに記憶された画像データとの差分をとるようにしてもよい。
接触判別処理は、前記画像特定手段にて特定された画像の一部のスクリーン座標と前記オブジェクトの一部のスクリーン座標とが同じ場合に、前記特定された画像が前記オブジェクトに接触していると判別するようにしてもよい。
画像特定処理は、前記動きのあった画像をユーザの手の画像として疑似的に特定するようにしてもよい。つまり、ここでの処理は、上述した差分演算処理を行った結果、ある画像がキャラクタの画像に接触するように動いていることが判明したとき、その画像はユーザの手であって、例えばユーザがキャラクタをなでていると疑似的に認識する等である。
また、本発明は、所定のタイミングで撮像した画像データと前記所定のタイミングとは別のタイミングで撮像した画像データとの差分をとり、差分後のデータに基づいて前記カードに動きがあったかどうかを判別し、その判別結果に従った表示処理を行う。例えば、複数のカードが重なった場合に、前記複数のカードが重なった画像の上に1つの新たなオブジェクトの画像を重畳して表示する等の表示処理が行われる。この場合、前記新たなオブジェクトとしては、前記複数のカードの識別情報の組み合わせに対応したオブジェクト等が考えられる。ビデオゲームに適用した場合は、前記判別結果に従ってビデオゲームのシナリオを進行させる等である。この場合、撮像されたカードの画像が複数ある場合であって、かつ、前記カード動き判別手段にて1つのカードが移動していると判別した場合に、前記各カードの画像上に表示されている複数のオブジェクトの画像のうち、移動していると判別したカードの画像上に表示されているオブジェクトの画像を選択してシナリオを進行させる等の処理を行うことができる。
また、本発明は、前記カードに描かれた識別情報を検出し、所定のタイミングで撮像した前記カードの画像データと前記所定のタイミングとは別のタイミングで撮像した前記カードの画像データとの差分をとり、差分後のデータに基づいて前記カードに動きがあったかどうかを判別する。そして、前記カードに動きがあった場合に、該カードの識別情報を再度検出する。これによって、複数のカードがあった場合の配置換えや新たなカードへの交換が行われた場合でもその動きのあったカードの画像上にそのカードの識別情報に対応したオブジェクトの画像を重畳させて表示させることができる。
また、本発明は、撮像画像に存在する1枚目のカードに貼付された識別画像の位置から前記撮像画像全体のカメラ座標系を求めると共に、前記識別画像に基づいて1枚目のカードの識別情報を検出する。そして、1枚目のカードのカメラ座標に基づいて他のカードの配置位置を予測し、予測した配置位置における画像から他のカードに貼付された識別画像を検出して、他のカードの識別情報を検出する。
この処理としては、例えば1枚目のカードの識別画像の画像データをアフィン変換して1枚目のカードの識別情報を検出し、他のカードの識別画像の画像データをアフィン変換して該他のカードの識別情報を検出する等である。
例えば2人のユーザがそれぞれ複数のカードを例えば横方向に並べる場合であって、かつ、前記各ユーザがそれぞれ1枚目のカードを1つの対角線上に置く場合においては、前記撮像画像のうち、対角線上に並んだ2つのカードの画像の位置を検出し、検出された前記2つのカードの位置から前記対角線を含む矩形領域を特定する。そして、特定された前記矩形領域内の画像データから残りのカードの識別情報を検出するようにしてもよい。
これにより、複数のカードに対する認識処理の負荷を軽減することができ、処理スピードの高速化につながる。
上述の発明において、同一のオブジェクトに複数の識別情報を割り当て、前記複数の識別情報のそれぞれにおいて前記同一のオブジェクトに関するパラメータを異なせるようにしてもよい。これにより、例えば同じオブジェクトであっても、その後のシナリオの進行や時間の経過に伴って別のオブジェクトに変化する場合や変化しない場合等、あるいは経験値の増加が速い場合や遅い場合等、様々なパラメータの違いを自由に設定することができる。そのため、例えばビデオゲームに適用した場合に、キャラクタ毎の成長の過程を楽しんだり、カードのランク付け等を楽しむことが可能となる。
また、前記コンピュータに接続される着脱自在の記憶媒体を有し、前記識別情報に対応する情報を前記記憶媒体にて管理するようにしてもよいし、前記コンピュータをネットワークを介してネットワークサーバに接続し、前記識別情報に対応する情報を前記ネットワークサーバにて管理するようにしてもよい。
この場合、例えばユーザのビデオゲームシステムに識別情報に対応する情報を記憶している場合、カードに対応するオブジェクトやパラメータ等はそれぞれユーザ毎に異なることとなる。そのため、カードを譲渡しても、識別情報に対応する情報の内容が異なれば、ほとんど意味がない。しかし、識別情報に対応する情報を着脱自在の記憶媒体やネットワークサーバで一括管理できれば、識別情報に対応する情報はそれぞれユニークな情報となり、全ユーザにおいて共通とすることができる。そのため、カードの譲渡を可能にすることができる。
更に、本発明では、前記カードの識別画像を、セルが多数配置されてなる二次元バーコードにて構成するようにしてもよい。この場合、セルを黒の油性ペンや水性ペンで塗り足したり、セルを白の油性ペンや水性ペンで消したりすることで、自由に識別情報を変えることができる。どのようなオブジェクトの画像が登場するか、また、経験値のアップによってどのような形態に変化していくかを楽しむことができ、ビデオゲームに対して更に面白みを加えることができる。
以上説明したように、本発明に係る画像表示システム及び画像処理システムによれば、様々なビデオゲームに簡単に適用させることができ、ビデオゲームの範疇の拡大化、多様化を図ることができる。
また、本発明に係るビデオゲームシステムによれば、実空間でしか楽しめなかったカードゲームを仮想空間にまで広げることができ、カードゲームとビデオゲームとが融合した新規なゲームを提供することができる。
以下、本発明に係る画像表示システム及び画像処理システムをビデオゲームシステムに適用した実施の形態例を図1〜図29を参照しながら説明する。
本実施の形態に係るビデオゲームシステム10は、図1に示すように、ビデオゲーム機12と各種外部機器14とを有する。
ビデオゲーム機12は、各種プログラムを実行するCPU16と、各種プログラムやデータが格納されるメインメモリ18と、画像データが記録(描画)される画像メモリ20と、各種外部機器14とのデータのやりとりを行うための入出力ポート22と、後述する差分演算を行うための第1及び第2の差分用メモリ24及び26とを有する。
入出力ポート22に接続される各種外部機器14は、表示用インターフェース(I/F)28を介して接続されるモニタ30と、光ディスク(DVD−ROM、DVD−RW、DVD−RAM、CD−ROM等)32に対して再生/記録を行う光ディスクドライブ34と、メモリカード用インターフェース(I/F)36を介して接続されるメモリカード38と、撮像用インターフェース(I/F)40を介して接続されるCCDカメラ42と、ハードディスク44に対して再生/記録を行うハードディスクドライブ(HDD)46と、音声用インターフェース48を介して接続されるスピーカ50とを有する。もちろん、入出力ポート22から図示しないルータを介してインターネット(図示せず)に接続される場合もある。
これら外部機器14に対するデータの入出力並びにビデオゲーム機12内でのデータの加工等はCPU16とメインメモリ18を通じて行われ、特に、撮像データや画像データは画像メモリ20に記録(描画)される。
次に、この実施の形態に係るビデオゲームシステム10が有する特徴的な機能、即ち、例えば光ディスク32、メモリカード38やハードディスク44のようなランダムアクセス可能な記録媒体、さらにはインターネットやイントラネットのようなネットワークによってビデオゲーム機12に提供されるプログラムによって実現される機能について図2〜図31を参照しながら説明する。
まず、このビデオゲームシステム10にて使用されるカード54について説明する。このカード54は、一般にカードゲームで使用されるカードと同じ大きさ厚みを有し、表面には、図2Aに示すように、カード54に対応したキャラクタを示す絵柄が印刷され、裏面には、図2Bに示すように、識別画像56が印刷されている。もちろん、透明性のカードでもかまわない。この場合、識別画像56だけが印刷されることになる。
識別画像56は、図2Bに示すような二次元バーコード(以下、2Dコードと略記する)のパターンにて構成されている。識別画像56は、1ブロックを1単位とし、縦方向が9.5ブロック分の長さで、横方向が7ブロック分の長さの長方形の範囲内に、ロゴ部58とコード部60が1ブロック分離して配置されている。ロゴ部58は、コード部60の基準位置とカード54の方向を知らせるための2Dコードであって、縦方向が1.5ブロック分の長さで、横方向が7ブロック分の長さの大きな長方形の黒色の基準セル62が配置されている。なお、このロゴ部58には、例えば、キャラクタの名称、あるいは宣伝のためのマーク(ロゴ)等が印刷される場合もある。
コード部60は、縦方向と横方向が共に7ブロック分の長さの正方形の範囲のうち、各コーナー部に対応して識別情報認識用の例えば黒色の方形のコーナーセル64が配置され、さらに、4つのコーナーセル64で囲まれた領域に識別情報を認識するための例えば黒色の方形の識別セル66が二次元的にパターン化され配置されている。
撮像画像データから識別画像56の位置を検出する手法、コーナーセル64の画像を検出する手法並びに識別セル66の二次元パターンを検出する手法は、例えば先に述べた特許文献1(特開2000−82108号公報)に詳しく説明してあるため、該特許文献1を参照されたい。
また、本実施の形態では、識別セル66の二次元パターンの各種パターンと各パターンに対応する識別番号との対応テーブルが例えばデータベース68(2Dコードのデータベース:図6や図7参照)としてハードディスク44や光ディスク32等に登録されている。従って、検出した識別セル66の二次元パターンをデータベース68内の前記対応テーブルで照合することによって、カード54の識別番号を容易に検出することができる。
そして、ビデオゲームシステムで実現される機能は、図3A及び図3Bに示すように、机やテーブル52等に置かれた例えば6つのカード541、542、543、544、545及び546をCCDカメラ42で撮像してモニタ30の画面に表示すると共に、モニタ30の画面に表示されたカード541、542、543、544、545及び546の各画像、例えば各カード541、542、543、544、545及び546に貼付された識別画像561、562、563、564、565及び566の上に、各カード541〜546の識別画像561〜566等に対応するオブジェクト(キャラクタ)の画像701、702、703、704、705及び706を重畳して表示することで、ゲームとビデオゲームとを融合したゲームを実現させるというものである。なお、キャラクタとは、オブジェクトのうち、人間や動物、あるいはテレビ番組やアニメーション映画等で登場する主人公等を指す。
また、CCDカメラ42は、図3Aに示すように、机やテーブル52上に固定されたスタンド72に取り付けられるが、このとき、例えばユーザによって、CCDカメラ42の撮像面がカード541〜546の置かれた部分に向くように調整される。もちろん、図4Aに示すように、ユーザ74が例えば1つのカード542を持っている姿を撮像してモニタ30に映し出すことによって、モニタ30の画面には、図4Bに示すように、ユーザ74の画像とカード542の識別画像562とキャラクタの画像702が表示され、ユーザ74が持っているカード542上にキャラクタが乗っているようなシーンを表示させることもできる。
そして、本実施の形態の上述した機能は、例えばハードディスク44にインストールされた各種プログラムのうち、前記機能を実現するためのアプリケーションプログラムがCPU16で実行されることによって達成される。
このアプリケーションプログラム80は、図5に示すように、カード認識プログラム82、キャラクタ出現表示プログラム84、キャラクタ動作表示プログラム86、第1のカード位置予測プログラム88、第2のカード位置予測プログラム90、画像動き検出プログラム92、カード動き検出プログラム94、カード再認識プログラム96、キャラクタ変化プログラム98、情報テーブル参照プログラム100を有する。
ここで、前記アプリケーションプログラム80の機能について図5〜図29を参照しながら説明する。
まず、カード認識プログラム82は、机やテーブル52等の上に置かれたカード(例えば図3Aにおけるカード541)の識別画像561を認識して、識別画像561上に表示させるべきキャラクタの画像(例えば図3Bにおける画像701)を特定する処理を行うもので、図6に示すように、撮像画像描画機能102と、基準セル探知機能104と、識別情報検出機能106と、カメラ座標検出機能108と、キャラクタ画像検索機能110とを有する。ここで、「認識」とは、画像メモリ20に描画された撮像画像データから検出されたカード541の識別画像561から当該カード541の識別番号や方向を検出することを示す。
撮像画像描画機能102は、撮像した被写体の映像を画像メモリ20に背景画像として設定し描画する。背景画像として設定する処理の1つとしては、ZバッファリングへのZ値の設定等が挙げられる。
基準セル探知機能104は、上述したように、画像メモリ20に描画された画像データ(撮像画像データ)からロゴ部58の基準セル62の画像データを探知して、基準セル62の画像データの位置を検出する。基準セル62の画像データの位置は、スクリーン座標として検出される。
識別情報検出機能106は、図7に示すように、検出した基準セル62の画像データの位置に基づいてコーナーセル64の画像データを検出し、これら基準セル62及びコーナーセル64によって形成される領域112の画像データをアフィン変換して、カード541の識別画像561を上面から見た画像114と等価な画像データとし、該画像データからコード部60の二次元パターン、すなわち、コーナーセル64と識別セル66の二次元パターンからなるコード116を抽出し、該コード116から識別番号等を検出する。識別番号の検出は、上述したように、抽出したコード116を2Dコードのデータベース68と照合することによって行われる。
カメラ座標検出機能108は、図8に示すように、検出したスクリーン座標並びにCCDカメラの焦点距離に基づいてカメラ視点C0を原点とするカメラ座標系(6軸の方向:x、y、z、θx、θy及びθz)を求め、カード541における識別画像561のカメラ座標を求める。このとき、カード541におけるロゴ部58の中心のカメラ座標とコード部60の中心のカメラ座標が求められる。
なお、画像メモリ20に描画された画像のスクリーン座標から該画像のカメラ座標を求める手法、並びにある画像のカメラ座標から画像メモリ20上のスクリーン座標を求める手法については、先に述べた特許文献2(特開2000−322602号公報)に詳しく説明してあるため、該特許文献2を参照されたい。
キャラクタ画像検索機能110は、検出した識別番号に基づくキャラクタの画像(例えば図3Bに示すキャラクタの画像701)をオブジェクト情報テーブル118から検索する。
オブジェクト情報テーブル118の内訳は、例えば図9に示すように、多数のレコードが配列されて構成され、1つのレコードに、識別番号、基本パラメータ(経験値、レベル)、キャラクタの画像データ(レベル1)の格納先頭アドレス、レベル1のパラメータ(体力、攻撃力、防御力等)、キャラクタの画像データ(レベル2)の格納先頭アドレス、レベル2のパラメータ(体力、攻撃力、防御力等)、キャラクタの画像データ(レベル3)の格納先頭アドレス、レベル3のパラメータ(体力、攻撃力、防御力等)、有効/無効ビットが登録されている。
画像データとしては、基本パラメータの1つであるレベルに対応する画像データが読み出される。つまり、レベルが1であれば、レベル1に対応する格納先頭アドレスから画像データが読み出され、さらに、レベル1のパラメータが読み出されることになる。レベル2及びレベル3についても同様である。また、有効/無効ビットは、そのレコードが有効であるかどうかを判別するためのビットである。「無効」が設定される場合は、例えば現段階ではキャラクタの画像が設定されていない場合や、例えばキャラクタがビデオゲームで設定された戦闘で負け、死亡した場合等である。
そして、このキャラクタ画像検索機能110は、オブジェクト情報テーブル118から当該識別番号に対応するレコードを検索し、検索したレコードが「有効」であれば、該レコードに登録された複数の格納先頭アドレスのうち、現在のレベルに対応する格納先頭アドレスから画像データ120を読み出す。例えばハードディスク44や光ディスク32等に記録され、かつ、多数の画像データ120が登録されたデータファイル122のうち、前記格納先頭アドレスから当該キャラクタに対応する画像データ120を読み出す。「無効」の場合は、画像データ120を読み出さない。
従って、机やテーブル52等に1つのカード541を置いたとき、前記カード認識プログラム82が起動されて、置かれたカード541の識別画像561で特定される識別番号及びレベル(以下、識別番号等と記す)に対応するキャラクタの画像701が特定されることになる。なお、レベルに応じてキャラクタの画像を変化させないのであれば、オブジェクト情報テーブル118の各レコードには、画像データ120について1つの格納先頭アドレスだけが登録されることから、この場合は、カード541の識別画像561で特定される識別番号に対応するキャラクタの画像701が特定されることになる。
このカード認識プログラム82により、実空間と仮想空間を融合した視覚効果を表現することが可能となる。そして、このカード認識プログラム82から様々なアプリケーションプログラム(キャラクタ出現表示プログラム84、キャラクタ動作表示プログラム86、第1のカード位置予測プログラム88、第2のカード位置予測プログラム90等)に制御が移されることになる。
次に、キャラクタ出現表示プログラム84は、検出したカード(例えばカード541)の識別画像561で特定される識別番号等に対応するキャラクタの画像701をカード541の識別画像561に重畳させて登場させる表示を行うもので、図10に示すように、動作データ列検索機能124、登場姿勢設定機能126、三次元画像設定機能128、画像描画機能130、画像表示機能132及び繰返し機能134とを有する。
動作データ列検索機能124は、キャラクタが登場するシーンを表示するための動作データ列を識別番号等に基づいて登場動作情報テーブル136から検索する。具体的には、まず、例えばハードディスク44や光ディスク32等に記録され、かつ、各レコードに動作データ列の格納先頭アドレスが登録された登場動作情報テーブル136から識別番号等に対応するレコードを検索する。そして、例えばハードディスク44や光ディスク32等に記録され、かつ、多数の動作データ列138が登録されたデータファイル140のうち、前記検索したレコードに登録された格納先頭アドレスから当該キャラクタの画像701が登場する動作を示す動作データ列138を読み出す。
登場姿勢設定機能126は、キャラクタの画像701が登場する過程の1つの姿勢を設定する。例えば読み出された動作データ列138のiフレーム目(i=1,2,3・・・)の動作データに基づいてキャラクタの画像701の頂点データをカメラ座標系で移動して1つの姿勢を設定する。
三次元画像設定機能128は、検出したカード541の識別画像561のカメラ座標に基づいて該カード541の識別画像561の上に前記キャラクタの画像701が登場する過程の1つの姿勢の三次元画像を設定する。
画像描画機能130は、キャラクタの画像701が登場する過程の1つの姿勢の三次元画像をスクリーン座標系の画像に透視変換して画像メモリ20に描画(隠面処理を含む)する。このとき、Zバッファリングのうち、キャラクタの画像701のZ値をフレーム単位に設定し直すことで、カード541の識別画像561の下からキャラクタの画像701が徐々に出現するようなシーンを表現することができる。
画像表示機能132は、画像メモリ20に描画された画像を1フレーム単位に入出力ポート22を介してモニタ30に出力し、モニタ30の画面に前記画像を表示する。
繰返し機能134は、登場姿勢設定機能126による処理→三次元画像設定機能128による処理→画像描画機能130による処理→画像表示機能132による処理を順次繰り返す。これによって、カード541の識別画像561の上に、該カード541の識別番号等に対応するキャラクタの画像701が登場するシーンが表示されることになる。
次に、キャラクタ動作表示プログラム86は、キャラクタが待機しているシーンや攻撃しているシーン、魔法をかけるシーン、他のキャラクタを庇うシーン等を表示するもので、図11に示すように、上述したキャラクタ出現表示プログラム84とほぼ同様に、動作データ列検索機能142、姿勢設定機能144、三次元画像設定機能146、画像描画機能148、画像表示機能150及び繰返し機能152とを有する。
動作データ列検索機能142は、キャラクタが待機するシーン、攻撃するシーン、魔法をかけるシーン、他のキャラクタを庇うシーンを表示するための動作データ列をシーンに応じた各種動作情報テーブル154から検索する。具体的には、まず、例えばハードディスク44や光ディスク32等に記録され、かつ、各レコードに動作データ列の格納先頭アドレスが登録された各種動作情報テーブル154から表示すべき動作に対応する動作情報テーブル154を特定し、さらに、特定された動作情報テーブル154から当該識別番号等に対応するレコードを検索する。そして、例えばハードディスク44や光ディスク32等に記録され、かつ、多数の動作データ列156が登録されたデータファイル158のうち、前記検索したレコードに登録された先頭アドレスから今回表示すべき動作(キャラクタが待機する動作、攻撃する動作、魔法をかける動作、他のキャラクタを庇う動作等)に対応した動作データ列156を読み出す。
姿勢設定機能144は、例えばカード541に関するキャラクタであれば、キャラクタの画像701が待機する過程の1つの姿勢、攻撃する過程の1つの姿勢、魔法をかける過程の1つの姿勢、他のキャラクタを庇う過程の1つの姿勢を設定する。例えば読み出された動作データ列156のiフレーム目(i=1,2,3・・・)の動作データに基づいてキャラクタの画像701の頂点データをカメラ座標系で移動して1つの姿勢を設定する。
三次元画像設定機能146は、検出したカード541の識別画像561のカメラ座標に基づいて該カード541の識別画像561の上に前記キャラクタの画像701が待機する過程の1つの姿勢、攻撃する過程の1つの姿勢、魔法をかける過程の1つの姿勢、他のキャラクタを庇う過程の1つの姿勢の三次元画像を設定する。
画像描画機能148は、キャラクタの画像701が待機する過程の1つの姿勢、攻撃する過程の1つの姿勢、魔法をかける過程の1つの姿勢、他のキャラクタを庇う過程の1つの姿勢の三次元画像をスクリーン座標系の画像に透視変換して画像メモリ20に描画(隠面処理を含む)する。
画像表示機能150は、画像メモリ20に描画された画像を1フレーム単位に入出力ポート22を介してモニタ30に出力し、モニタ30の画面に前記画像を表示する。
繰返し機能152は、姿勢設定機能144による処理→三次元画像設定機能146による処理→画像描画機能148による処理→画像表示機能150による処理を順次繰り返す。これによって、キャラクタの画像701が待機するシーン、攻撃するシーン、魔法をかけるシーン、他のキャラクタを庇うシーンが表示されることになる。
これらカード認識プログラム82、キャラクタ出現表示プログラム84及びキャラクタ動作表示プログラム86によって、カードゲームのキャラクタをビデオゲームのシナリオ中に出現させて様々な動作を行わせることができる。つまり、実空間でしか楽しめなかったカードゲームを仮想空間にまで広げることができ、カードゲームとビデオゲームとが融合した新規なゲームを提供することができる。
次に、第1のカード位置予測プログラム88について説明する。このプログラム88は、例えば図12に示すように、3つのカードを例えば横方向に並べる場合を想定したものである。
そして、この第1のカード位置予測プログラム88は、図13Aに示すように、例えば上述したカード認識プログラム82によって1つのカード541の識別画像561の位置が検出された場合に、該識別画像561の位置に基づいて他のカード542及び543(図12参照)の配置位置を予測するものであって、図14に示すように、探知領域設定機能162と、基準セル探知機能164と、識別情報検出機能166と、キャラクタ画像検索機能168とを有する。
ここで、第1のカード位置予測プログラム88の処理動作、特に、図13Aに示すように、1つのカード541の識別画像561のカメラ座標が、例えばカード認識プログラム82によって検出された後の動作について図15を参照しながら説明する。
まず、図15のステップS1において、探知領域設定機能162は、検出された1つの識別画像561のカメラ座標に基づいて、図13Aに示すように、識別画像561を含むある範囲の探知領域170のカメラ座標を求める。この探知領域170は、複数のカードを横方向に配置するのであれば矩形の領域となる。
その後、ステップS2において、得られた探知領域170のカメラ座標から画像メモリ20上での前記探知領域170の描画範囲172を求める。
その後、ステップS3において、基準セル探知機能164は、画像メモリ20のうち、探知領域170の描画範囲172に基準セル62の画像データが存在しているか否かを判別する。
基準セル62の画像データが存在している場合、例えば図12Aに示すように、カード541の横に2つのカード542及び543が横方向に並べられている場合を想定したとき、図15のステップS4に進み、識別情報検出機能166は、検出した基準セル62及びコーナーセル64によって形成される領域の画像データをアフィン変換する。そして、カード542及び543の識別画像562及び563から各カード542及び543に対応する識別番号を検出する。識別番号の検出は、上述したように、識別画像562及び563から抽出したコードを2Dコードのデータベース68と照合することによって行われる。
その後、ステップS5において、キャラクタ画像検索機能168は、カード542及び543の各識別番号等に基づくキャラクタの画像データ120をオブジェクト情報テーブル118から検索する。例えばオブジェクト情報テーブル118からそれぞれ識別番号に対応するレコードを検索し、検索したレコードが「有効」であれば、各レコードに登録された複数の格納先頭アドレスのうち、現在のレベルに対応する格納先頭アドレスからそれぞれ画像データ120を読み出す。
一方、前記ステップS3において、基準セル62の画像データが存在していないと判別された場合は、基準セル探知機能164は、ステップS6に進み、モニタ30の画面に全てのカードを置くように促すエラーメッセージを出力する。その後、ステップS7において、所定時間(例えば3秒間)だけ待機した後、ステップS3に戻り、上述した処理を繰り返す。
そして、探知領域に存在する全てのカードについてキャラクタの画像701〜703を決定した段階で、上述した処理動作が終了する。
この場合も、例えばキャラクタ出現表示プログラム84が起動されることによって、図12Bに示すように、各カード541〜543の識別画像561〜563上にそれぞれカード541〜543の識別番号に対応するキャラクタの画像701〜703が登場するシーンが表示されることになる。
この第1のカード位置予測プログラム88では、複数のカード542及び543に対する認識を、既に検出された1つのカード541の識別画像561の位置に基づいて設定された探知領域170に対して行うようにしたので、複数のカード542及び543を認識するために、再度、画像メモリ20全体を探知する必要がなくなり、複数のカード542及び543に対する認識処理の負荷を軽減することができる。これは、処理スピードの高速化につながる。
次に、第2のカード位置予測プログラム90について説明する。このプログラム82は、図3Aに示すように、2人がそれぞれ3つのカードを例えば横方向に並べる場合であって、かつ、各人が最初に例えば左側に1枚目のカード541及び544を置く場合、即ち、対角線上に2枚のカード541及び544を置く場合を想定したものである。
そして、この第2のカード位置予測プログラム90は、2つのカードが対角線上に置かれた場合に、他のカードの位置を予測するものであって、図16に示すように、矩形領域設定機能174と、基準セル探知機能176と、識別情報検出機能178と、キャラクタ画像検索機能180とを有する。
ここで、第2のカード位置予測プログラム90の処理動作、特に、図17Aに示すように、対角線Lm上に置かれた2つのカード541及び544の識別画像561及び564のカメラ座標が、例えばカード認識プログラム82によって検出された後の動作について図18を参照しながら説明する。
まず、図18のステップS101において、矩形領域設定機能174は、図17Aに示すように、対角線Lm上に置かれた2つのカード541及び544の識別画像561及び564のカメラ座標に基づいて、該対角線Lmを含む矩形領域182のカメラ座標を求める。
その後、ステップS102において、得られた矩形領域182のカメラ座標から、図17Bに示すように、画像メモリ20上での前記矩形領域182の描画範囲184を求める。その後、ステップS103において、基準セル探知機能176は、画像メモリ20のうち、矩形領域182の描画範囲184に基準セル62の画像データが存在しているか否かを判別する。
基準セル62の画像データが存在している場合、例えば図3Aに示すように、カード541の横に2つのカード542及び543が横方向に並べられ、かつ、カード544の横に2つのカード545及び546が横方向に並べられている場合を想定したとき、図18のステップS104に進み、識別情報検出機能178は、検出した基準セル62及びコーナーセル64によって形成される領域の画像データをアフィン変換する。そして、残りのカード542、543、545及び546の識別画像562、563、565及び566から各カード542、543、545及び546に対応する識別番号を検出する。識別番号の検出は、上述したように、識別画像562、563、565及び566から抽出したコードを2Dコードのデータベース68と照合することによって行われる。
その後、ステップS105において、キャラクタ画像検索機能180は、カード542、543、545及び546の各識別番号等に基づくキャラクタの画像データ120をオブジェクト情報テーブル118から検索する。例えばオブジェクト情報テーブル118からそれぞれ識別番号に対応するレコードを検索し、検索したレコードが「有効」であれば、各レコードに登録された複数の格納先頭アドレスのうち、現在のレベルに対応する格納先頭アドレスからそれぞれ画像データ120を読み出す。
一方、前記ステップS3において、残りのカード542、543、545及び546の識別画像562、563、565及び566が存在していないと判別された場合は、基準セル探知機能176は、ステップS106に進み、モニタ30の画面に残りの全てのカード542、543、545及び546を置くように促すエラーメッセージを出力し、その後、ステップS107において、所定時間(例えば3秒間)だけ待機した後、ステップS103に戻り、処理を繰り返す。
そして、矩形領域182に存在する全てのカード541〜546についてキャラクタの画像701〜706を決定した段階で、上述した処理動作が終了する。
この場合も、例えばキャラクタ出現表示プログラム84が起動されることによって、各カード541〜546の識別画像561〜566上にそれぞれカード541〜546の識別番号等に対応するキャラクタの画像701〜706が登場するシーンが表示されることになる。
この第2のカード位置予測プログラム90では、複数のカード542、543、545及び546に対する認識を、対角線Lm上に置かれた2つのカード541及び544にて形成される矩形領域182に対して行うようにしたので、対角線Lm上に置かれた2枚のカード541及び544を認識した後に、他のカード542、543、545及び546を認識するために、再度、画像メモリ20全体を探知する必要がなくなり、複数のカード542、543、545及び546に対する認識処理の負荷を軽減することができる。
上述した第1及び第2のカード位置予測プログラム88及び90においては、カード541〜546の配置を示す情報テーブル(カード配置情報テーブル:図示せず)を複数の対戦者に対応して複数用意し、カード541〜546の識別画像561〜566のカメラ座標とカード541〜546の識別番号が検出される毎に、該当するカード配置情報テーブルに登録するようにしてもよい。この場合、机やテーブル52等に置かれた全てのカード541〜546のカメラ座標がすべてカード配置情報テーブルに登録された段階で、それ以降、このカード配置情報テーブルに登録されたカメラ座標に基づいてカード541〜546の認識(再認識)を行うようにしてもよい。
なお、対戦者がそれぞれ3つのカードを例えば横方向に並べる場合において、それぞれ3つのカードの方向を変えて配置することで、各対戦者での処理手順をそれぞれ1つに特定するようにしてもよい。
例えば3つのカード541〜543のうち、左側のカード541の配置方向によって動作を行うキャラクタを特定し、中央のカード542の配置方向によって動作によって影響を与えるべき相手のキャラクタを特定し、右側のカードの配置方向によって動作を特定する、等である。
すなわち、左側のカード541の配置方向によって動作を行うキャラクタが特定される場合、前記カード541が左方向であれば、該カード541に対応するキャラクタの画像701が選択され、上方向であれば、中央のカード542に対応するキャラクタの画像702が選択され、右方向であれば、右側のカード543に対応するキャラクタの画像703が選択され、下方向であれば、3つのカード541〜543に対応する3つのキャラクタの画像701〜703が選択される。
中央のカード542の配置方向によって相手となるキャラクタが特定される場合、前記カード542が左方向であれば、相手方のカード544に対応するキャラクタの画像704が選択され、上方向であれば、相手方の中央のカード545に対応するキャラクタの画像705が選択され、右方向であれば、相手方の右側のカード546に対応するキャラクタの画像706が選択され、下方向であれば、自分方の左側のカード541の配置方向で選択したキャラクタの画像が選択される。
右側のカード543の配置方向によって動作が特定される場合、カード543が左方向であれば「攻撃する」が選択され、上方向であれば「魔法をかける」が選択され、右方向であれば「防御する」が選択され、下方向であれば「庇う」が選択される。
このカードの配置方向に応じた処理を行うようにすれば、操作装置(キー操作によってコマンド入力を行うための装置)を使用しなくても、複数のカード541〜543の向きの組み合わせによって様々な処理を指示することができる。
次に、画像動き検出プログラム92について説明する。このプログラム92は、所定のタイミングで撮像した画像データと前記所定のタイミングとは別のタイミングで撮像した画像データとの差分をとり、差分後のデータに基づいて動きのあった画像を特定し、この特定された画像(ユーザの手の画像等)がキャラクタの画像に接触しているかどうかを判別し、接触していると判別した場合に、前記キャラクタに対応するパラメータを変更するというものである。
このプログラム92は、図19に示すように、第1のメモリ機能188と、第2のメモリ機能190と、差分演算機能192と、画像特定機能194と、接触判別機能196と、繰返し機能198と、パラメータ変更機能200とを有する。
このプログラム92の動作、例えば、図20Aに示すように、ユーザ74が一方の手202に1つのカード542を持つことによって、モニタ30の画面上において、カード542の識別画像562上に、該カード542の識別番号等に対応するキャラクタの画像702が登場した以降の動作について図19〜図21を参照しながら説明する。
まず、第1のメモリ機能188は、第1の差分信号S1の入力タイミングに基づいてCCDカメラ42からの撮像画像データ204を取り込んで第1の差分用メモリ24に記憶する。第1の差分信号S1の入力タイミングは任意に設定することができる。
第2のメモリ機能190は、第2の差分信号S2の入力タイミングに基づいてCCDカメラ42からの撮像画像データ206を取り込んで第2の差分用メモリ26に記憶する。第2の差分信号S2の入力タイミングも任意に設定することができ、例えば第1の差分信号S1の1フレーム後、2フレーム後、5フレーム後等が挙げられる。
差分演算機能192は、図21に示すように、第1の差分用メモリ24に記憶された撮像画像データ204と第2の差分用メモリ26に記憶された撮像画像データ206との差分をとる。例えば第2の差分用メモリ26に記憶された撮像画像データ206から第1の差分用メモリ24に記憶された撮像画像データ204を差し引く等の処理を行うようにしてもよい。
画像特定機能194は、差分後のデータ208から動きのあった画像を特定する。差分後のデータ208としては、1画素単位や数画素単位でそれぞれ島状に分散したデータが想定されるが、ここでは、差分後のデータ208について、100画素以上の大きな固まりを示すデータを抽出し、抽出したデータを動きのあった画像として特定する。図21の例では、動きのあった画像として3つの画像208a〜208cが特定された場合を示している。特定とは、抽出したデータ208a〜208cの記録範囲をスクリーン座標として検出することを示す。
接触判別機能196は、動きのあった1以上の画像208a〜208cについて、各動きのあった画像208a〜208cのスクリーン座標と画像メモリ20に描画されたキャラクタの画像702のスクリーン座標に基づいて、キャラクタの画像702に触っている画像208cがあるかどうかを判別する。この判別は、それぞれ動きのあった画像(208a〜208c)の一部のスクリーン座標とキャラクタの画像702の一部のスクリーン座標(画像メモリ20上のスクリーン座標)とが同じであれば、キャラクタの画像702を触っている画像があったものと判別する。図21の例では、画像208cが該当する。
動きのあった画像が1つ(例えば画像208c)であれば、この接触判別機能196は、該動きのあった画像208cがキャラクタの画像702を触っているかどうかを判別することとなり、該動きのあった画像208cの一部のスクリーン座標とキャラクタの画像702の一部のスクリーン座標とが同じであれば、キャラクタの画像702を触っている画像があったものと判別する。それ以外は触っていないと判別する。
繰返し機能198は、第1のメモリ機能188による処理→第2のメモリ機能190による処理→差分演算機能192による処理→画像特定機能194による処理→接触判別機能196による処理を順次繰り返す。
パラメータ変更機能200は、繰返し機能198によって上述した各種機能による処理が繰り返されている間に、接触判別機能196において、動きのあった画像がキャラクタの画像702に接触していると判別した回数が所定回数(例えば5回以上の任意の整数を選ぶことができる)以上であれば、オブジェクト情報テーブル118のうち、当該カード542の識別番号に対応するレコードに登録されているパラメータ、例えば経験値、体力、攻撃力等の値を増加させる。
これは、前記画像特定機能194によって特定された画像208a〜208cのうち、接触判別機能196によってキャラクタの画像702に接触していると判別された画像208cが、ユーザの手210であると疑似的に推定し、ユーザがキャラクタをなでてかわいがっていることを推定しているものである。
従って、対戦ゲーム等のほか、例えばユーザが特定のキャラクタを育てて、攻撃力を高めたり、防御力を高めたりするという育成ゲームにも好ましく適用させることができる。
なお、ユーザがキャラクタを手でなでてかわいがる場合、ユーザの手210の画像でキャラクタの画像702が隠れてしまい、キャラクタが喜ぶという動作を画像メモリ20に描画したとしても、キャラクタの画像702がほとんど見えない場合もありえる。そこで、撮像した画像を画像メモリ20に描画する際に、ZバッファリングのZ値を例えば最も高い値(カメラ座標系における原点であるカメラ視点から最も遠いことを示す値)に設定することで、ユーザが手210でキャラクタをなでるという画像が表示されても、ユーザの手210の画像でキャラクタの画像702が隠れるということがなくなる。従って、ユーザは、キャラクタが喜ぶという動作を見ながらキャラクタをかわいがることができ、育成ゲーム等に面白みを加えることができる。
ところで、ビデオゲームの進行に伴って、机やテーブル52等に置かれたカードがユーザの手で動かされる場合がある。例えば1以上のカードの位置がずれたり、カードの配置の入れ替えや新たなカードとの交換等である。このようにカードに動きがあった場合、動きのあったカードについて再度認識する必要がある。
これを解決するには、カード認識プログラム82、第1のカード位置予測プログラム88並びに第2のカード位置予測プログラム90を、数フレーム単位あるいは数10フレーム単位に起動すればよい。もちろん、新たなカード(例えばカード541)を認識した場合は、キャラクタ出現表示プログラム84を起動して新たなカード541の識別画像561上に、該新たなカード541の識別番号等に応じたキャラクタの画像701を登場させ、カード541の位置がずれたり、配置が入れ替わる程度であれば、キャラクタ動作表示プログラム86を起動して、例えば「待機」の動作を表示すればよい。
カードの再認識においては、上述したように、カード認識プログラム82、第1のカード位置予測プログラム88並びに第2のカード位置予測プログラム90を数フレーム単位あるいは数10フレーム単位に起動するようにしてもよいが、カードに動きがあったときにだけカードの再認識を行うようにしてもよい。以下、その手法、すなわち、カード動き検出プログラム94及びカード再認識プログラム96の処理について説明する。
まず、カード動き検出プログラム94は、所定のタイミングで撮像した画像データと前記所定のタイミングとは別のタイミングで撮像した画像データとの差分をとり、差分後のデータに基づいて動きのあったカードを特定するというものである。
すなわち、机やテーブル52等に置かれた例えば3つのカード541〜543は、その後、図22Aに示すように、これら3つのカード541〜543のうち、例えば1つのカード541がユーザの手によって左右に揺らされたり、図22Bに示すように、1つのカード541が一方向にずらされたり、図22Cに示すように、一緒に置かれた複数のカード542及び543の配置が入れ替えられたり(配置換え)、図23Aに示すように、例えば1つのカード541が新しいカード544と交換されたり、図23Bに示すように、一緒に置かれた3つのカード541〜543が重ねられたりするが、このプログラムはこれらの動きを検出して、動きのあったカードを特定するものである。
このプログラム94は、図24に示すように、上述した画像動き検出プログラム92と同様の第1のメモリ機能212と、第2のメモリ機能214と、差分演算機能216とを有するほか、カード特定機能218と、繰返し機能220とを有する。
第1及び第2のメモリ機能212及び214並びに差分演算機能216は、上述した画像動き検出プログラム92における第1及び第2のメモリ機能188及び190並びに差分演算機能192と同様の処理を行うため、ここではその重複説明を省略する。なお、繰返し機能220は、第1のメモリ機能212による処理→第2のメモリ機能214による処理→差分演算機能216による処理→カード特定機能218による処理を順次繰り返す。
カード特定機能218は、差分後のデータのうち、カード(例えばカード541)が置かれた範囲について探知を行って、カード541の識別画像561が存在するかどうかを検出する。ここでのカード541の識別画像561は、移動によって現れた新たなカード541の識別画像(ポジ画像)と、移動によって存在しなくなったカード541の識別画像(ネガ画像)を含む。カード541の識別画像561が存在すれば、カード541に動きがあったものとして、該カード541の画像561の記録範囲をスクリーン座標として検出する。
具体的には、1つのカード541をずらすあるいは揺らす動作があった場合は、該1つのカード541の画像561のスクリーン座標が検出され、2つ以上のカード(例えばカード541〜543)についてずらすあるいは揺らす動作があれば、ずらされたあるいは揺らされた2つ以上のカード541〜543の識別画像561〜563の各スクリーン座標が検出されることになる。例えば図22Cに示すように、カード542とカード543の入れ替えの場合は、入れ替えがあったカード542及び543の識別画像562及び563の各スクリーン座標が検出されることになる。例えば図23Aに示すように、カード543を別のカード544に交換する場合は、交換があったカード543及び544の識別画像563及び564のスクリーン座標が検出されることになる。例えば図23Bに示すように、3つのカード541〜543を重ねた場合は、重ねられた3つのカード541〜543のうち、一番上のカード(例えばカード541)の識別画像561のスクリーン座標が検出されることになる。
このように、あるカードの識別画像についてのスクリーン座標が検出された段階で、動きのあったカードが特定されることになる。検出されたスクリーン座標は、その後に起動されるカード再認識プログラム96に供給される。
次に、カード再認識プログラム96について説明する。このプログラム96は、カード動き検出プログラム94でのカード特定機能218において、動きのあったカードを特定したときに起動されるもので、動きのあったカードについて再度識別情報の認識を行う。このカード再認識プログラム96は、図25に示すように、上述したカード認識プログラム82と同様のカメラ座標検出機能222と、識別情報検出機能224と、キャラクタ画像検索機能226とを有する。このカード再認識プログラム96での処理は、上述したカード認識プログラム82とほぼ同様の処理を行うため、ここではその重複説明を省略する。
このカード再認識プログラム96での処理によって、動きのあったカードの識別番号等に対応するキャラクタの画像が特定される。従って、新たなカードを認識した場合は、キャラクタ出現表示プログラム84が起動されることによって、新たなカードの画像上に、該新たなカードの識別番号等に応じたキャラクタの画像が登場され、カードの位置がずれたり、配置が入れ替わる程度であれば、キャラクタ動作表示プログラム86が起動されることによって、動きのあったカードの画像上に、該カードの識別番号等に対応するキャラクタの画像が表示されると共に、カードの動かし方に応じて「攻撃する」、「魔法をかける」、「防御する」、「庇う」等の動作が行われることになる。
複数のカードを重ねた場合は、一番上にあるカードの識別番号等に対応するキャラクタの画像を出現させるようにしてもよい。あるいは、重ねられた2以上のカードの識別番号を記憶させることで、これら2以上の識別番号の組合せに対応する新たなキャラクタ、例えば重ねられたカードに対応する2以上のキャラクタが合体してできた巨大なキャラクタの画像を出現させるようにしてもよい。これは、例えば図示しない合体情報テーブルから2以上の識別情報の組合せに対応するレコードを検索し、検索されたレコードに登録された画像データの先頭アドレスから当該合体に対応したキャラクタの画像データを読み出す等の処理を行えばよい。
また、図26に示すように、2つの透明性のカード547及び548を重ねると、透明性のカード547の識別画像567と透明性のカード548の識別画像568とが合成された新たな識別画像569が形成される。従って、この新たな識別画像569がカード認識プログラム82によって認識され、その後、例えばキャラクタ出現表示プログラム84が起動されることで、モニタ30の画面上には、新たな識別画像569上に、該識別画像569で特定される識別番号等に対応した新たなキャラクタの画像が登場する表示が行われることになる。
次に、キャラクタ変化プログラム98について説明する。このプログラム98は、キャラクタの画像を、キャラクタのレベルアップ時において、レベルに応じた画像に変化させるものであって、図27に示すように、レベルアップ機能228を有する。
このプログラム98は、上述した各種アプリケーションプログラム80において、オブジェクト情報テーブル118に対する書込み、特に経験値への書込みが行われるたびに起動される。レベルアップ機能228は、経験値の書込みが行われたレコードについて、該レコードに格納されている経験値が一定の数値を超えているか否かを判別し、超えていれば、当該レコードに格納されているレベルを+1更新する。
上述したように、カード認識プログラム82やカード再認識プログラム96においては、カードの識別番号とレベルに応じた画像データを検索し、また、キャラクタ出現表示プログラム84及びキャラクタ動作表示プログラム86は、カードの識別番号とレベルに応じた動作データ列を検索することから、カードの識別画像上には、カードの識別番号とレベルとに応じたキャラクタの画像が重畳して表示されることになる。
従って、例えば図28に示すように、3つの識別番号(第1〜第3の識別番号601〜603)があった場合に、レベル1では、それぞれ同じキャラクタ(第1のキャラクタ)の画像711であっても、レベル2においては、第1の識別番号601は第2のキャラクタの画像712、第2及び第3の識別番号602及び603はそれぞれ同じ第3のキャラクタの画像713とし、レベル3では、それぞれ別のキャラクタ(第4〜第6のキャラクタ)の画像714〜716とすることができる。
もちろん、例えば1つの識別番号について、レベル1〜レベル2にわたって同じキャラクタの画像とすることもできるし、レベル1からレベル2になった段階で別のキャラクタの画像に変化するが、レベル2〜レベル3にわたって、同じキャラクタの画像とすることもできる。また、1つの識別番号について、レベル1〜レベル3にわたって同じキャラクタの画像とすることもできる。
これによって、ユーザに対して、同一のキャラクタが出現する同種類のカードであっても、レベルによって様々な進化をとげるというイメージを与えることができ、カードゲームの面白みをさらに向上させることができる。
次に、情報テーブル参照プログラム100について説明する。このプログラム100は、図29に示すように、オブジェクト情報テーブル118等がメモリカード38やネットワークサーバ230にて管理される場合に、これらメモリカード38やネットワークサーバ230に対してアクセスを行うものであって、テーブルアクセス機能232を有する。ネットワークサーバ230は、ネットワーク234を通じて本実施の形態に係るビデオゲームシステム10に接続される。
例えばオブジェクト情報テーブル118を例えばハードディスク44に記憶している場合、カードに対応するキャラクタやパラメータ等はそれぞれユーザ毎に異なる。そのため、カードを譲渡しても、オブジェクト情報テーブル118の内容が異なれば、ほとんど意味がない。
そこで、この情報テーブル参照プログラム100は、カードの譲渡を可能にするものであって、前記テーブルアクセス機能232は、アクセス先がメモリカード38であれば、対戦するユーザの情報を登録し、メモリカード38に登録されたオブジェクト情報テーブル118の使用を該メモリカード38に登録したユーザのみに限定する。これによって、メモリカード38に登録したユーザ間でのカードの譲渡を可能にする。
また、前記テーブルアクセス機能232は、アクセス先がネットワークサーバ230であれば、ブラウザを通じて対戦するユーザの情報をネットワークサーバ230に登録することで、ネットワークサーバ230で管理されているオブジェクト情報テーブル118の使用が許可される。この場合、ネットワークサーバ230で管理されているオブジェクト情報テーブル118は、ネットワークサーバ230に登録したユーザ間でユニークな情報となり、登録した全ユーザにおいて共通とすることができる。そのため、ネットワークサーバ230に登録したユーザ間でのカードの譲渡が可能になる。
ネットワークサーバ230でオブジェクト情報テーブル118を管理している場合は、「無効」が設定されているレコードについて、所定期間の経過後やビデオゲームのバージョンアップ等によって新たにキャラクタの画像の登録やパラメータを設定して、「有効」に再設定する等の処理を行うことができる。この場合、新たなカードの生産に合わせた新たなキャラクタの追加、死亡したキャラクタの復活等をホームページでの宣伝と共にスムーズに行うことができ、カードの有効利用等を図ることができる。
また、図2Bに示すように、カードの識別画像56におけるコード部60の二次元パターンを、複数の識別セル66が配置して構成するようにしたので、識別セル66を黒の油性ペンや水性ペンで塗り足したり、識別セル66を白の油性ペンや水性ペンで消したりすることで、自由にコード部60の二次元パターンを変えることができる。どのようなキャラクタの画像が登場するか、また、レベルアップによってどのような形態に変化していくかを楽しむことができ、カードゲームが融合されたビデオゲームに対してさらに面白みを加えることができる。
なお、本発明に係る画像表示システム、画像処理システム及びビデオゲームシステムは、上述の実施の形態に限らず、本発明の要旨を逸脱することなく、種々の構成を採り得ることはもちろんである。
本実施の形態に係るビデオゲームシステムの構成を示すブロック図である。 図2Aはカードの表面を示す平面図であり、図2Bはカードの裏面を示す背面図である。 図3A及び図3Bは本実施の形態に係るビデオゲームシステムの使用形態の一例を示す説明図である。 図4A及び図4Bは本実施の形態に係るビデオゲームシステムの使用形態の他の例を示す説明図である。 本実施の形態に係るビデオゲームシステムで実行されるアプリケーションプログラムを示す構成図である。 カード認識プログラムの機能を示すブロック図である。 撮像されたカードの識別画像からカードの識別番号を検出するまでの過程を示す説明図である。 取り込まれた撮像画像から撮像画像のカメラ座標を求める過程を示す説明図である。 オブジェクト情報テーブルの内訳を示す説明図である。 キャラクタ出現表示プログラムの機能を示すブロック図である。 キャラクタ動作表示プログラムの機能を示すブロック図である。 図12A及び図12Bは第1のカード位置予測プログラムの機能を説明するための使用形態の一例を示す図である。 図13A及び図13Bは机やテーブル等に置かれた1つのカードから探知領域を求める過程を示す説明図である。 第1のカード位置予測プログラムの機能を示すブロック図である。 第1のカード位置予測プログラムの処理を示すフローチャートである。 第2のカード位置予測プログラムの機能を示すブロック図である。 図17A及び図17Bは対角線上に置かれた2つのカードから矩形領域を求める過程を示す説明図である。 第2のカード位置予測プログラムの処理を示すフローチャートである。 画像動き検出プログラムの機能を示すブロック図である。 図20A及び図20Bはユーザがカードを手に持ったときの状態を撮像し、モニタ上にその撮像映像と共にキャラクタの画像を表示した状態を示す説明図である。 撮像画像データの差分演算に基づいて動きのある画像を検出する過程を示す説明図である。 図22Aは1つのカードを揺らす状態を示す説明図であり、図22Bは1つのカードをずらした状態を示す説明図であり、図22Cは2つのカードの配置を入れ替えた状態を示す説明図である。 図23Aは1つのカードを新たなカードに交換する状態を示す説明図であり、図23Bは3つのカードを重ねた状態を示す説明図である。 カード動き検出プログラムの機能を示すブロック図である。 カード再認識プログラムの機能を示すブロック図である。 透明性のカードを重ねて2つの2Dコードを合成させる例を示す説明図である。 キャラクタ変化プログラムの機能を示すブロック図である。 識別番号とレベルに応じてキャラクタの画像が変化する例を示す説明図である。 情報テーブル参照プログラムの機能を示すブロック図である。
符号の説明
10…ビデオゲームシステム 12…ビデオゲーム機
16…CPU 18…メインメモリ
20…画像メモリ 24…第1の差分用メモリ
26…第2の差分用メモリ 30…モニタ
32…光ディスク 38…メモリカード
42…CCDカメラ 44…ハードディスク
54、541〜548…カード 56、561〜569…識別画像
58…ロゴ部 60…コード部
62…基準セル 64…コーナーセル
66…識別セル 82…カード認識プログラム
84…キャラクタ出現表示プログラム 86…キャラクタ動作表示プログラム
88…第1のカード位置予測プログラム
90…第2のカード位置予測プログラム 92…画像動き検出プログラム
94…カード動き検出プログラム 96…カード再認識プログラム
98…キャラクタ変化プログラム 100…情報テーブル参照プログラム
230…ネットワークサーバ
701〜706、711〜716…キャラクタの画像

Claims (26)

  1. コンピュータと、
    前記コンピュータに接続され、識別画像が貼付されたカードを撮像する撮像手段と、
    前記コンピュータに接続された表示装置とを有する画像表示システムにおいて、
    前記撮像手段からの前記カードの識別画像を含む撮像画像の画像データを前記表示装置に出力して、該表示装置に前記撮像画像を表示させる撮像画像表示手段と、
    前記撮像画像の画像データから前記カードに貼付された前記識別画像の画像データを探知する探知手段と、
    前記探知手段が探知した前記識別画像の画像データから前記カードの識別情報を検出する識別情報検出手段と、
    前記表示装置に表示された前記カードの識別画像上に、該カードの前記識別情報に対応するオブジェクトの画像を重畳して表示するように制御するオブジェクト表示制御手段と、
    所定のタイミングで撮像した画像データと前記所定のタイミングとは別のタイミングで撮像した画像データとの差分をとる差分演算手段と、
    差分後のデータに基づいて動きのあった画像の画像データを特定する画像特定手段と、
    前記画像特定手段にて特定された画像データと前記オブジェクトの画像データに基づいて前記動きのあった画像が前記オブジェクトの画像に接触しているかどうかを判別する接触判別手段と、
    前記動きのあった画像が前記オブジェクトの画像に接触していると判別された場合に、前記識別情報に対応するパラメータを変更するパラメータ変更手段とを有することを特徴とする画像表示システム。
  2. 請求項1記載の画像表示システムにおいて、
    前記差分演算手段は、
    第1の差分信号に基づいて前記撮像手段からの撮像画像の画像データを第1の差分用メモリに記憶する手段と、
    第2の差分信号に基づいて前記撮像手段からの撮像画像の画像データを第2の差分用メモリに記憶する手段と、
    前記第1の差分メモリに記憶された画像データと前記第2の差分メモリに記憶された画像データとの差分をとる手段とを有することを特徴とする画像表示システム。
  3. 請求項1又は2記載の画像表示システムにおいて、
    前記接触判別手段は、
    前記画像特定手段にて特定された画像データの一部のスクリーン座標と前記オブジェクトの画像の画像データの一部のスクリーン座標とが同じ場合に、前記動きのあった画像が前記オブジェクトの画像に接触していると判別することを特徴とする画像表示システム。
  4. 請求項1〜3のいずれか1項に記載の画像表示システムにおいて、
    前記画像特定手段は、
    前記動きのあった画像の画像データをユーザの手の画像の画像データとして特定することを特徴とする画像表示システム。
  5. コンピュータと、
    前記コンピュータに接続され、識別画像が貼付されたカードを撮像する撮像手段と、
    前記コンピュータに接続された表示装置とを有する画像表示システムにおいて、
    所定のタイミングで撮像した前記カードの画像データと前記所定のタイミングとは別のタイミングで撮像した前記カードの画像データとの差分をとる差分演算手段と、
    差分後のデータに基づいて前記カードに動きがあったかどうかを判別するカード動き判別手段と、
    前記カード動き判別手段にて判別された結果に従った表示処理を行う表示手段を有することを特徴とする画像表示システム。
  6. 請求項5記載の画像表示システムにおいて、
    前記撮像手段からの前記カードの画像を含む撮像画像の画像データを前記表示装置に出力して、該表示装置に前記撮像画像を表示させる撮像画像表示手段と、
    前記撮像画像の画像データから前記カードに貼付された前記識別画像の画像データを探知する探知手段と、
    前記探知手段が探知した前記識別画像の画像データから前記カードの識別情報を検出する識別情報検出手段と、
    前記表示装置に表示された前記撮像画像のうち、前記カードの画像上に、該カードの識別情報に対応するオブジェクトの画像を重畳して表示するように制御するオブジェクト表示制御手段を有することを特徴とする画像表示システム。
  7. 請求項1〜4、6のいずれか1項に記載の画像表示システムにおいて、
    同一のオブジェクトに複数の識別情報が割り当てられ、
    前記複数の識別情報のそれぞれにおいて前記同一のオブジェクトに関するパラメータが異なることを特徴とする画像表示システム。
  8. 請求項1〜4、6、7のいずれか1項に記載の画像表示システムにおいて、
    前記コンピュータに接続される着脱自在の記憶媒体を有し、
    前記識別情報に対応する情報が前記記憶媒体にて管理されていることを特徴とする画像表示システム。
  9. 請求項1〜4、6、7のいずれか1項に記載の画像表示システムにおいて、
    前記コンピュータがネットワークを介してネットワークサーバに接続され、
    前記識別情報に対応する情報が前記ネットワークサーバにて管理されていることを特徴とする画像表示システム。
  10. コンピュータと、
    前記コンピュータに接続され、識別画像が貼付されたカードを撮像する撮像手段とを有する画像処理システムにおいて、
    所定のタイミングで撮像した前記カードの画像データと前記所定のタイミングとは別のタイミングで撮像した前記カードの画像データとの差分をとる差分演算手段と、
    差分後のデータに基づいて前記カードに動きがあったかどうかを判別するカード動き判別手段と、
    前記カードに動きがあった場合に、該カードの画像から該カードの識別情報を検出する手段とを有することを特徴とする画像処理システム。
  11. コンピュータと、
    前記コンピュータに接続され、それぞれ識別画像が貼付された複数のカードを撮像する撮像手段とを有する画像処理システムにおいて、
    前記撮像手段からの撮像画像の画像データから1枚目のカードに貼付された識別画像の画像データを探知する第1の探知手段と、
    前記第1の探知手段が探知した前記識別画像の画像データから前記1枚目のカードの識別情報を検出する第1の識別情報検出手段と、
    前記第1の探知手段が探知した前記識別画像の画像データの位置から前記撮像画像全体のカメラ座標系を求める座標系変換手段と、
    前記1枚目のカードの画像データのカメラ座標に基づいて他のカードの画像データの配置位置を予測する配置位置予測手段と、
    予測した配置位置における画像データから前記他のカードに貼付された識別画像の画像データを探知する第2の探知手段と、
    前記第2の探知手段が探知した前記識別画像の画像データから前記他のカードの識別情報を検出する第2の識別情報検出手段とを有することを特徴とする画像処理システム。
  12. 請求項11記載の画像処理システムにおいて、
    前記第1の識別情報検出手段は、
    前記第1の探知手段が探知した前記1枚目のカードの識別画像の画像データをアフィン変換して前記1枚目のカードの識別情報を検出し、
    前記第2の識別情報検出手段は、
    前記第2の探知手段が探知した前記他のカードの識別画像の画像データをアフィン変換して前記他のカードの識別情報を検出することを特徴とする画像処理システム。
  13. 請求項11又は12記載の画像処理システムにおいて、
    2人のユーザがそれぞれ複数のカードを例えば横方向に並べる場合であって、かつ、前記各ユーザがそれぞれ1枚目のカードを1つの対角線上に置く場合に、
    前記配置位置予測手段は、
    前記撮像画像のうち、対角線上に並んだ前記2つのカードの画像データの位置を検出し、検出された前記2つのカードの画像データの位置から前記対角線を含む矩形領域を特定し、
    前記第2の識別情報検出手段は、
    特定された前記矩形領域内の画像データから残りのカードの識別情報を検出することを特徴とする画像処理システム。
  14. コンピュータと、
    前記コンピュータに接続され、識別画像が貼付されたカードを撮像する撮像手段と、
    前記コンピュータに接続された表示装置とを有するビデオゲームシステムにおいて、
    前記撮像手段からの前記カードの画像を含む撮像画像の画像データを前記表示装置に出力して、該表示装置に前記撮像画像を表示させる撮像画像表示手段と、
    前記撮像画像の画像データから前記カードに貼付された前記識別画像の画像データを探知する探知手段と、
    前記探知手段が探知した前記識別画像の画像データから前記カードの識別情報を検出する識別情報検出手段と、
    前記表示装置に表示された前記カードの画像上に、該カードの前記識別情報に対応するオブジェクトの画像を重畳して表示するように制御するオブジェクト表示制御手段と、
    所定のタイミングで撮像した画像データと前記所定のタイミングとは別のタイミングで撮像した画像データとの差分をとる差分演算手段と、
    差分後のデータに基づいて動きのあった画像の画像データを特定する画像特定手段と、
    前記画像特定手段にて特定された画像データと前記オブジェクトの画像データに基づいて前記動きのあった画像が前記オブジェクトの画像に接触しているかどうかを判別する接触判別手段と、
    前記動きのあった画像が前記オブジェクトの画像に接触していると判別された場合に、前記識別情報に対応するパラメータを変更するパラメータ変更手段とを有し、
    前記オブジェクトがビデオゲームにおけるキャラクタを示すオブジェクトであって、
    前記ビデオゲームの内容は、前記キャラクタが他のキャラクタと戦闘を行うことで経験値を増やすことを含む場合に、
    前記パラメータ変更手段は、前記識別情報に対応するオブジェクトの経験値を変更することを特徴とするビデオゲームシステム。
  15. 請求項14記載のビデオゲームシステムにおいて、
    前記画像特定手段は、
    前記動きのあった画像の画像データをユーザの手の画像の画像データとして擬似的に特定することを特徴とするビデオゲームシステム。
  16. コンピュータと、
    前記コンピュータに接続され、識別画像が貼付されたカードを撮像する撮像手段と、
    前記コンピュータに接続された表示装置とを有するビデオゲームシステムにおいて、
    前記撮像手段からの前記カードの画像を含む撮像画像の画像データを前記表示装置に出力して、該表示装置に前記撮像画像を表示させる撮像画像表示手段と、
    前記撮像画像の画像データから前記カードに貼付された前記識別画像の画像データを探知する探知手段と、
    前記探知手段が探知した前記識別画像の画像データから前記カードの識別情報を検出する識別情報検出手段と、
    前記表示装置に表示された前記カードの画像上に、該カードの前記識別情報に対応するオブジェクトの画像を重畳して表示するように制御するオブジェクト表示制御手段と、
    所定のタイミングで撮像した前記カードの画像データと前記所定のタイミングとは別のタイミングで撮像した前記カードの画像データとの差分をとる差分演算手段と、
    差分後のデータに基づいて前記カードに動きがあったかどうかを判別するカード動き判別手段とを有し、
    前記オブジェクトがビデオゲームにおけるキャラクタを示すオブジェクトであって、
    前記カード動き判別手段にて判別された結果に従って前記ビデオゲームのシナリオを進行させるシナリオ進行手段を有することを特徴とするビデオゲームシステム。
  17. 請求項16記載のビデオゲームシステムにおいて、
    前記撮像画像に複数のカードの画像データが存在する場合であって、かつ、前記カード動き判別手段にて前記複数のカードの画像のうち、1つのカードの画像が移動していると判別した場合に、
    前記シナリオ進行手段は、
    前記各カードの画像上に表示されている複数のオブジェクトの画像のうち、移動していると判別したカードの画像上に表示されているオブジェクトの画像を選択してシナリオを進行させることを特徴とするビデオゲームシステム。
  18. コンピュータと、
    前記コンピュータに接続され、識別画像が貼付されたカードを撮像する撮像手段と、
    前記コンピュータに接続された表示装置とを有するビデオゲームシステムにおいて、
    前記撮像手段からの前記カードの画像を含む撮像画像の画像データを前記表示装置に出力して、該表示装置に前記撮像画像を表示させる撮像画像表示手段と、
    前記撮像画像の画像データから前記カードに貼付された前記識別画像の画像データを探知する探知手段と、
    前記探知手段が探知した前記識別画像の画像データから前記カードの識別情報を検出する識別情報検出手段と、
    前記表示装置に表示された前記カードの画像上に、該カードの前記識別情報に対応するオブジェクトの画像を重畳して表示するように制御するオブジェクト表示制御手段と、
    所定のタイミングで撮像した前記カードの画像データと前記所定のタイミングとは別のタイミングで撮像した前記カードの画像データとの差分をとる差分演算手段と、
    差分後のデータに基づいて前記カードに動きがあったかどうかを判別するカード動き判別手段と、
    前記カードに動きがあった場合に、該カードの識別情報を前記識別情報検出手段にて再度検出させる再検出手段とを有し、
    前記オブジェクトがビデオゲームにおけるキャラクタを示すオブジェクトであって、
    前記オブジェクト表示制御手段は、移動した後の前記カードの画像上に、前記再検出手段にて検出された識別情報に対応するオブジェクトの画像を重畳して表示するように制御することを特徴とするビデオゲームシステム。
  19. 請求項18記載のビデオゲームシステムにおいて、
    前記カード動き判別手段にて、複数のカードの配置位置が所定時間内に入れ替わっていると判別した場合に、
    前記オブジェクト表示制御手段は、入れ替わった後の前記複数のカードの画像上に、それぞれ前記再検出手段にて検出された識別情報に対応するオブジェクトの画像を重畳して表示するように制御することを特徴とするビデオゲームシステム。
  20. コンピュータと、
    前記コンピュータに接続され、識別画像が貼付されたカードを撮像する撮像手段と、
    前記コンピュータに接続された表示装置とを有するビデオゲームシステムにおいて、
    前記撮像手段からの前記カードの画像を含む撮像画像の画像データを前記表示装置に出力して、該表示装置に前記撮像画像を表示させる撮像画像表示手段と、
    前記撮像画像の画像データから前記カードに貼付された前記識別画像の画像データを探知する探知手段と、
    前記探知手段が探知した前記識別画像の画像データから前記カードの識別情報を検出する識別情報検出手段と、
    前記表示装置に表示された前記カードの画像上に、該カードの前記識別情報に対応するオブジェクトの画像を重畳して表示するように制御するオブジェクト表示制御手段と、
    所定のタイミングで撮像した前記カードの画像データと前記所定のタイミングとは別のタイミングで撮像した前記カードの画像データとの差分をとる差分演算手段と、
    差分後のデータに基づいて前記カードに動きがあったかどうかを判別するカード動き判別手段とを有し、
    前記オブジェクトがビデオゲームにおけるキャラクタを示すオブジェクトであって、
    前記カード動き判別手段にて判別された結果に従った表示処理を行うように制御する表示制御手段を有することを特徴とするビデオゲームシステム。
  21. 請求項20記載のビデオゲームシステムにおいて、
    前記撮像画像に複数のカードの画像データが存在する場合であって、かつ、前記カード動き判別手段にて複数のカードの画像が重なっていると判別した場合に、
    前記表示制御手段は、
    前記複数のカードが重なった画像の上に1つの新たなオブジェクトの画像を重畳して表示するように制御することを特徴とするビデオゲームシステム。
  22. 請求項21記載のビデオゲームシステムにおいて、
    前記新たなオブジェクトは、前記複数のカードの識別情報の組み合わせに対応したオブジェクトであることを特徴とするビデオゲームシステム。
  23. 請求項14〜22のいずれか1項に記載のビデオゲームシステムにおいて、
    同一のオブジェクトに複数の識別情報が割り当てられ、
    前記複数の識別情報のそれぞれにおいて前記同一のオブジェクトに関するパラメータが異なることを特徴とするビデオゲームシステム。
  24. 請求項14〜23のいずれか1項に記載のビデオゲームシステムにおいて、
    前記コンピュータに接続される着脱自在の記憶媒体を有し、
    前記識別情報に対応する情報が前記記憶媒体にて管理されていることを特徴とするビデオゲームシステム。
  25. 請求項14〜23のいずれか1項に記載のビデオゲームシステムにおいて、
    前記コンピュータがネットワークを介してネットワークサーバに接続され、
    前記識別情報に対応する情報が前記ネットワークサーバにて管理されていることを特徴とするビデオゲームシステム。
  26. 請求項14〜25のいずれか1項に記載のビデオゲームシステムにおいて、
    前記カードの識別画像は、セルが多数配置されてなる二次元バーコードにて構成されていることを特徴とするビデオゲームシステム。
JP2004041210A 2004-02-18 2004-02-18 画像表示システム及びビデオゲームシステム Expired - Fee Related JP3851907B2 (ja)

Priority Applications (6)

Application Number Priority Date Filing Date Title
JP2004041210A JP3851907B2 (ja) 2004-02-18 2004-02-18 画像表示システム及びビデオゲームシステム
AT05710301T ATE457793T1 (de) 2004-02-18 2005-02-17 Bildanzeigesystem, bildverarbeitungssystem und ein videospielsystem
PCT/JP2005/002451 WO2005077479A1 (ja) 2004-02-18 2005-02-17 画像表示システム、画像処理システム及びビデオゲームシステム
DE602005019350T DE602005019350D1 (de) 2004-02-18 2005-02-17 Videospielsystem
EP05710301A EP1618930B1 (en) 2004-02-18 2005-02-17 Image display system, image processing system, and a video game system
US11/243,481 US7690975B2 (en) 2004-02-18 2005-10-04 Image display system, image processing system, and video game system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2004041210A JP3851907B2 (ja) 2004-02-18 2004-02-18 画像表示システム及びビデオゲームシステム

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2006183879A Division JP4436345B2 (ja) 2006-07-03 2006-07-03 画像表示システム、画像処理システム及びビデオゲームシステム

Publications (2)

Publication Number Publication Date
JP2005230156A true JP2005230156A (ja) 2005-09-02
JP3851907B2 JP3851907B2 (ja) 2006-11-29

Family

ID=34857919

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2004041210A Expired - Fee Related JP3851907B2 (ja) 2004-02-18 2004-02-18 画像表示システム及びビデオゲームシステム

Country Status (6)

Country Link
US (1) US7690975B2 (ja)
EP (1) EP1618930B1 (ja)
JP (1) JP3851907B2 (ja)
AT (1) ATE457793T1 (ja)
DE (1) DE602005019350D1 (ja)
WO (1) WO2005077479A1 (ja)

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008079815A (ja) * 2006-09-27 2008-04-10 Sony Computer Entertainment Inc ゲーム装置、ゲーム制御方法、及びゲーム制御プログラム
WO2008093733A1 (ja) * 2007-01-30 2008-08-07 Sega Corporation ゲーム装置
WO2008123428A1 (ja) * 2007-03-30 2008-10-16 Kabushiki Kaisha Sega Doing Business As Sega Corporation ゲーム装置及びそれに用いるカード
JP2009297303A (ja) * 2008-06-13 2009-12-24 Taito Corp 透明カードを用いたカードゲーム機
JP2012203786A (ja) * 2011-03-28 2012-10-22 Tomy Co Ltd 情報処理装置および情報処理プログラム
JP2013518292A (ja) * 2010-01-25 2013-05-20 ローカス パブリッシング カンパニー 対話型情報システム、対話型情報方法及びそのコンピュータ読み取り可能な媒体
WO2013141349A1 (ja) * 2012-03-23 2013-09-26 株式会社コナミデジタルエンタテインメント ゲーム用カード
WO2013141348A1 (ja) * 2012-03-23 2013-09-26 株式会社コナミデジタルエンタテインメント ゲーム装置、ゲーム装置の制御方法、プログラム、ならびに、非一時的な記録媒体
JP5658387B1 (ja) * 2014-02-20 2015-01-21 株式会社マーベラス ゲーム装置およびゲーム装置の処理方法
JP5658386B1 (ja) * 2014-02-20 2015-01-21 株式会社マーベラス ゲーム装置用記録媒体
KR101520835B1 (ko) * 2013-06-27 2015-05-18 파크시스템스 주식회사 이미지 획득 방법 및 이를 이용한 이미지 획득 장치
JP2017192063A (ja) * 2016-04-14 2017-10-19 株式会社ソニー・インタラクティブエンタテインメント 処理装置および投影画像生成方法
JP2020137551A (ja) * 2019-02-26 2020-09-03 株式会社コナミデジタルエンタテインメント 特定システム、特定装置、プログラム、及び特定方法

Families Citing this family (33)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3904562B2 (ja) * 2004-02-18 2007-04-11 株式会社ソニー・コンピュータエンタテインメント 画像表示システム、記録媒体及びプログラム
EP1801735B1 (en) * 2004-10-15 2011-01-26 Sony Computer Entertainment Inc. Card and image data transmission method
AU2006201734A1 (en) * 2005-04-27 2006-11-16 Aruze Corp. Gaming machine
JP4137128B2 (ja) * 2006-01-25 2008-08-20 株式会社スクウェア・エニックス ビデオゲーム処理装置、ビデオゲーム処理方法、およびビデオゲーム処理プログラム
JP4650381B2 (ja) * 2006-09-08 2011-03-16 日本ビクター株式会社 電子機器
US8023725B2 (en) * 2007-04-12 2011-09-20 Samsung Electronics Co., Ltd. Identification of a graphical symbol by identifying its constituent contiguous pixel groups as characters
US9703369B1 (en) * 2007-10-11 2017-07-11 Jeffrey David Mullen Augmented reality video game systems
GB2470072B (en) * 2009-05-08 2014-01-01 Sony Comp Entertainment Europe Entertainment device,system and method
US9633476B1 (en) * 2009-10-29 2017-04-25 Intuit Inc. Method and apparatus for using augmented reality for business graphics
US20110310260A1 (en) * 2010-06-18 2011-12-22 Minx, Inc. Augmented Reality
CN102959938B (zh) * 2010-06-30 2016-06-22 富士胶片株式会社 图像处理方法和设备
US20120113141A1 (en) * 2010-11-09 2012-05-10 Cbs Interactive Inc. Techniques to visualize products using augmented reality
JP5704963B2 (ja) * 2011-02-25 2015-04-22 任天堂株式会社 情報処理システム、情報処理方法、情報処理装置、及び情報処理プログラム
JP5145444B2 (ja) * 2011-06-27 2013-02-20 株式会社コナミデジタルエンタテインメント 画像処理装置、画像処理装置の制御方法、及びプログラム
JP5620414B2 (ja) 2012-01-18 2014-11-05 株式会社スクウェア・エニックス ゲーム装置
US9589000B2 (en) * 2012-08-30 2017-03-07 Atheer, Inc. Method and apparatus for content association and history tracking in virtual and augmented reality
US10713846B2 (en) 2012-10-05 2020-07-14 Elwha Llc Systems and methods for sharing augmentation data
US10180715B2 (en) 2012-10-05 2019-01-15 Elwha Llc Correlating user reaction with at least an aspect associated with an augmentation of an augmented view
US8928695B2 (en) * 2012-10-05 2015-01-06 Elwha Llc Formatting of one or more persistent augmentations in an augmented view in response to multiple input factors
US9077647B2 (en) 2012-10-05 2015-07-07 Elwha Llc Correlating user reactions with augmentations displayed through augmented views
US9111383B2 (en) 2012-10-05 2015-08-18 Elwha Llc Systems and methods for obtaining and using augmentation data and for sharing usage data
US10269179B2 (en) 2012-10-05 2019-04-23 Elwha Llc Displaying second augmentations that are based on registered first augmentations
US9141188B2 (en) 2012-10-05 2015-09-22 Elwha Llc Presenting an augmented view in response to acquisition of data inferring user activity
KR20160014418A (ko) 2014-07-29 2016-02-11 삼성전자주식회사 유저 인터페이스 장치 및 유저 인터페이스 방법
US9754417B2 (en) * 2014-12-31 2017-09-05 Canon Information And Imaging Solutions, Inc. Methods and systems for displaying virtual objects
JP6558006B2 (ja) * 2015-03-20 2019-08-14 株式会社リコー 画像管理装置、画像管理方法、画像管理プログラムおよび表示システム
US10134191B2 (en) 2016-07-18 2018-11-20 Disney Enterprises, Inc. Systems and methods for generating a virtual space based on a physical layout of objects
US9898871B1 (en) 2016-10-05 2018-02-20 Disney Enterprises, Inc. Systems and methods for providing augmented reality experience based on a relative position of objects
US11389718B2 (en) 2016-10-14 2022-07-19 Lego A/S Game system
US11452935B2 (en) * 2016-11-11 2022-09-27 Lego A/S Virtual card game system
US11291919B2 (en) * 2017-05-07 2022-04-05 Interlake Research, Llc Development of virtual character in a learning game
US20180341343A1 (en) * 2017-05-25 2018-11-29 SmartWorld, Inc. Physically Interactive Cloud Computing Device, System, and Method
JP7411368B2 (ja) 2019-09-30 2024-01-11 株式会社バンダイナムコエンターテインメント コンピュータシステム、サーバシステム及びプログラム

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07254064A (ja) * 1994-03-16 1995-10-03 Casio Comput Co Ltd クロマキー検出装置及びそれを使用した画像制御装置
JP2000082108A (ja) * 1998-06-30 2000-03-21 Sony Corp 2次元コ―ド認識処理方法、2次元コ―ド認識処理装置、および媒体
JP2000322602A (ja) * 1999-05-12 2000-11-24 Sony Corp 画像処理装置および方法、並びに媒体
JP2001300130A (ja) * 2000-04-26 2001-10-30 Namco Ltd ゲームシステムおよび個人認証情報配信システム
JP2001307124A (ja) * 2000-02-15 2001-11-02 Sega Corp 画像処理システム、画像処理装置及び撮像装置
JP2002301264A (ja) * 2001-02-02 2002-10-15 Sega Corp カードゲーム装置及びカードデータ読み取り装置及びカードゲーム制御方法及び記録媒体及びプログラム及びカード
JP2003334384A (ja) * 2003-06-26 2003-11-25 Konami Computer Entertainment Yokyo Inc ゲーム装置、コンピュータゲームシステムの制御方法及びプログラム

Family Cites Families (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6411266B1 (en) * 1993-08-23 2002-06-25 Francis J. Maguire, Jr. Apparatus and method for providing images of real and virtual objects in a head mounted display
US5577981A (en) * 1994-01-19 1996-11-26 Jarvik; Robert Virtual reality exercise machine and computer controlled video system
JPH1015152A (ja) 1996-07-08 1998-01-20 Sanyo Electric Co Ltd 将棋盤上の駒有無認識装置
DE29612454U1 (de) 1996-07-18 1996-09-12 Testo GmbH & Co., 79853 Lenzkirch Wasserdichte Schutzvorrichtung zur Aufnahme eines Meß- oder Anzeigegerätes
US6522312B2 (en) * 1997-09-01 2003-02-18 Canon Kabushiki Kaisha Apparatus for presenting mixed reality shared among operators
AU2211799A (en) * 1998-01-06 1999-07-26 Video Mouse Group, The Human motion following computer mouse and game controller
US6175343B1 (en) * 1998-02-24 2001-01-16 Anivision, Inc. Method and apparatus for operating the overlay of computer-generated effects onto a live image
TW434520B (en) * 1998-06-30 2001-05-16 Sony Corp Two-dimensional code recognition processing method, device therefor and medium
JP2000047967A (ja) 1998-07-31 2000-02-18 Sony Corp 情報処理装置および方法、情報処理システム、並びに提供媒体
US7084887B1 (en) * 1999-06-11 2006-08-01 Canon Kabushiki Kaisha Marker layout method, mixed reality apparatus, and mixed reality space image generation method
US6972734B1 (en) * 1999-06-11 2005-12-06 Canon Kabushiki Kaisha Mixed reality apparatus and mixed reality presentation method
US7058204B2 (en) * 2000-10-03 2006-06-06 Gesturetek, Inc. Multiple camera control system
JP2002157607A (ja) * 2000-11-17 2002-05-31 Canon Inc 画像生成システム、画像生成方法および記憶媒体
JP3406965B2 (ja) * 2000-11-24 2003-05-19 キヤノン株式会社 複合現実感提示装置及びその制御方法
JP3631151B2 (ja) * 2000-11-30 2005-03-23 キヤノン株式会社 情報処理装置、複合現実感提示装置及びその方法並びに記憶媒体
US20030062675A1 (en) * 2001-09-28 2003-04-03 Canon Kabushiki Kaisha Image experiencing system and information processing method
JP2003215494A (ja) * 2002-01-22 2003-07-30 Canon Inc 複合現実感提示装置および画像処理方法
US6782238B2 (en) * 2002-08-06 2004-08-24 Hewlett-Packard Development Company, L.P. Method for presenting media on an electronic device
US7427996B2 (en) * 2002-10-16 2008-09-23 Canon Kabushiki Kaisha Image processing apparatus and image processing method
US7295220B2 (en) * 2004-05-28 2007-11-13 National University Of Singapore Interactive system and method
US7474318B2 (en) * 2004-05-28 2009-01-06 National University Of Singapore Interactive system and method

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07254064A (ja) * 1994-03-16 1995-10-03 Casio Comput Co Ltd クロマキー検出装置及びそれを使用した画像制御装置
JP2000082108A (ja) * 1998-06-30 2000-03-21 Sony Corp 2次元コ―ド認識処理方法、2次元コ―ド認識処理装置、および媒体
JP2000322602A (ja) * 1999-05-12 2000-11-24 Sony Corp 画像処理装置および方法、並びに媒体
JP2001307124A (ja) * 2000-02-15 2001-11-02 Sega Corp 画像処理システム、画像処理装置及び撮像装置
JP2001300130A (ja) * 2000-04-26 2001-10-30 Namco Ltd ゲームシステムおよび個人認証情報配信システム
JP2002301264A (ja) * 2001-02-02 2002-10-15 Sega Corp カードゲーム装置及びカードデータ読み取り装置及びカードゲーム制御方法及び記録媒体及びプログラム及びカード
JP2003334384A (ja) * 2003-06-26 2003-11-25 Konami Computer Entertainment Yokyo Inc ゲーム装置、コンピュータゲームシステムの制御方法及びプログラム

Cited By (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008079815A (ja) * 2006-09-27 2008-04-10 Sony Computer Entertainment Inc ゲーム装置、ゲーム制御方法、及びゲーム制御プログラム
WO2008093733A1 (ja) * 2007-01-30 2008-08-07 Sega Corporation ゲーム装置
JP2008183212A (ja) * 2007-01-30 2008-08-14 Sega Corp ゲーム装置
WO2008123428A1 (ja) * 2007-03-30 2008-10-16 Kabushiki Kaisha Sega Doing Business As Sega Corporation ゲーム装置及びそれに用いるカード
JP2009297303A (ja) * 2008-06-13 2009-12-24 Taito Corp 透明カードを用いたカードゲーム機
JP2013518292A (ja) * 2010-01-25 2013-05-20 ローカス パブリッシング カンパニー 対話型情報システム、対話型情報方法及びそのコンピュータ読み取り可能な媒体
JP2012203786A (ja) * 2011-03-28 2012-10-22 Tomy Co Ltd 情報処理装置および情報処理プログラム
WO2013141348A1 (ja) * 2012-03-23 2013-09-26 株式会社コナミデジタルエンタテインメント ゲーム装置、ゲーム装置の制御方法、プログラム、ならびに、非一時的な記録媒体
WO2013141349A1 (ja) * 2012-03-23 2013-09-26 株式会社コナミデジタルエンタテインメント ゲーム用カード
JP2013198520A (ja) * 2012-03-23 2013-10-03 Konami Digital Entertainment Co Ltd ゲーム装置、ゲーム装置の制御方法、ならびに、プログラム
JP2015037456A (ja) * 2012-03-23 2015-02-26 株式会社コナミデジタルエンタテインメント ゲーム用カード
KR101520835B1 (ko) * 2013-06-27 2015-05-18 파크시스템스 주식회사 이미지 획득 방법 및 이를 이용한 이미지 획득 장치
JP5658387B1 (ja) * 2014-02-20 2015-01-21 株式会社マーベラス ゲーム装置およびゲーム装置の処理方法
JP5658386B1 (ja) * 2014-02-20 2015-01-21 株式会社マーベラス ゲーム装置用記録媒体
JP2015154832A (ja) * 2014-02-20 2015-08-27 株式会社マーベラス ゲーム装置用記録媒体
JP2017192063A (ja) * 2016-04-14 2017-10-19 株式会社ソニー・インタラクティブエンタテインメント 処理装置および投影画像生成方法
JP2020137551A (ja) * 2019-02-26 2020-09-03 株式会社コナミデジタルエンタテインメント 特定システム、特定装置、プログラム、及び特定方法

Also Published As

Publication number Publication date
EP1618930A4 (en) 2007-01-10
EP1618930A1 (en) 2006-01-25
US7690975B2 (en) 2010-04-06
WO2005077479A1 (ja) 2005-08-25
EP1618930B1 (en) 2010-02-17
US20060079324A1 (en) 2006-04-13
DE602005019350D1 (de) 2010-04-01
JP3851907B2 (ja) 2006-11-29
ATE457793T1 (de) 2010-03-15

Similar Documents

Publication Publication Date Title
JP3851907B2 (ja) 画像表示システム及びビデオゲームシステム
JP3904562B2 (ja) 画像表示システム、記録媒体及びプログラム
JP5738569B2 (ja) 画像処理プログラム、装置、システムおよび方法
AU2009238476B2 (en) Method and apparatus for real-time viewer interaction with a media presentation
US9064335B2 (en) System, method, device and computer-readable medium recording information processing program for superimposing information
CN105279795B (zh) 基于3d标记的增强现实系统
CN105593856B (zh) 适应位置图的视频游戏
US20070126874A1 (en) Image processing device, image processing method, and information storage medium
CN104937641A (zh) 信息处理装置、客户端装置、信息处理方法以及程序
JP2006072668A (ja) 画像処理装置、ゲーム装置および画像処理方法
CN105451837A (zh) 骨骼动画的用户生成记录
JP2006260602A (ja) 画像処理装置
TW200914096A (en) Game device, control method of game device and information recording media
JP4436345B2 (ja) 画像表示システム、画像処理システム及びビデオゲームシステム
JP4746074B2 (ja) 画像処理システム
JP2013066613A (ja) ゲーム装置、表示方法、および、プログラム
JP7160707B2 (ja) 仮想キャラクタを含む画像を提供するための方法
JP4422695B2 (ja) 画像表示システム、記録媒体及びプログラム
JP6546574B2 (ja) ゲーム装置、ゲーム制御装置およびゲーム用プログラム
Bergig et al. Out of the Cube: Augmented Rubik′ s Cube
JP4729604B2 (ja) 画像表示システム、画像処理システム、記録媒体及びプログラム
KR101280213B1 (ko) 결합 홀로그램 영상 제공 방법 및 그 시스템
JP2007075640A (ja) 画像表示制御方法及び、これを適用するゲーム装置
JP2005319193A (ja) 画像処理システム、プログラム、情報記憶媒体および画像処理方法
JP2005321965A (ja) ゲームソフトウエア及びゲーム装置

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20060502

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20060703

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20060808

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20060904

R150 Certificate of patent or registration of utility model

Ref document number: 3851907

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090908

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100908

Year of fee payment: 4

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100908

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110908

Year of fee payment: 5

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120908

Year of fee payment: 6

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130908

Year of fee payment: 7

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees