JP4433948B2 - 背景画像取得プログラム、ビデオゲーム装置、背景画像取得方法、および、プログラムを記録したコンピュータ読み取り可能な記録媒体 - Google Patents

背景画像取得プログラム、ビデオゲーム装置、背景画像取得方法、および、プログラムを記録したコンピュータ読み取り可能な記録媒体 Download PDF

Info

Publication number
JP4433948B2
JP4433948B2 JP2004255947A JP2004255947A JP4433948B2 JP 4433948 B2 JP4433948 B2 JP 4433948B2 JP 2004255947 A JP2004255947 A JP 2004255947A JP 2004255947 A JP2004255947 A JP 2004255947A JP 4433948 B2 JP4433948 B2 JP 4433948B2
Authority
JP
Japan
Prior art keywords
background image
acquisition
background
player
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2004255947A
Other languages
English (en)
Other versions
JP2006068314A (ja
JP2006068314A5 (ja
Inventor
善久 橋本
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sega Corp
Original Assignee
Sega Corp
Sega Games Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sega Corp, Sega Games Co Ltd filed Critical Sega Corp
Priority to JP2004255947A priority Critical patent/JP4433948B2/ja
Priority to CN2005100985767A priority patent/CN1743042B/zh
Priority to US11/219,377 priority patent/US7785201B2/en
Priority to EP05255407A priority patent/EP1645314A3/en
Publication of JP2006068314A publication Critical patent/JP2006068314A/ja
Priority to HK06106299.9A priority patent/HK1086214A1/xx
Publication of JP2006068314A5 publication Critical patent/JP2006068314A5/ja
Application granted granted Critical
Publication of JP4433948B2 publication Critical patent/JP4433948B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/40—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment
    • A63F13/42—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/213—Input arrangements for video game devices characterised by their sensors, purposes or types comprising photodetecting means, e.g. cameras, photodiodes or infrared cells
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/50—Controlling the output signals based on the game progress
    • A63F13/53—Controlling the output signals based on the game progress involving additional visual information provided to the game scene, e.g. by overlay to simulate a head-up display [HUD] or displaying a laser sight in a shooting game
    • A63F13/533—Controlling the output signals based on the game progress involving additional visual information provided to the game scene, e.g. by overlay to simulate a head-up display [HUD] or displaying a laser sight in a shooting game for prompting the player, e.g. by displaying a game menu
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/50—Controlling the output signals based on the game progress
    • A63F13/53—Controlling the output signals based on the game progress involving additional visual information provided to the game scene, e.g. by overlay to simulate a head-up display [HUD] or displaying a laser sight in a shooting game
    • A63F13/537—Controlling the output signals based on the game progress involving additional visual information provided to the game scene, e.g. by overlay to simulate a head-up display [HUD] or displaying a laser sight in a shooting game using indicators, e.g. showing the condition of a game character on screen
    • A63F13/5375—Controlling the output signals based on the game progress involving additional visual information provided to the game scene, e.g. by overlay to simulate a head-up display [HUD] or displaying a laser sight in a shooting game using indicators, e.g. showing the condition of a game character on screen for graphically or textually suggesting an action, e.g. by displaying an arrow indicating a turn in a driving game
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/60—Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor
    • A63F13/65—Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor automatically by game devices or servers from real world data, e.g. measurement in live racing competition
    • A63F13/655—Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor automatically by game devices or servers from real world data, e.g. measurement in live racing competition by importing photos, e.g. of the player
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/10—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals
    • A63F2300/1087—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals comprising photodetecting means, e.g. a camera
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/10—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals
    • A63F2300/1087—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals comprising photodetecting means, e.g. a camera
    • A63F2300/1093—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals comprising photodetecting means, e.g. a camera using visible light
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/30—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by output arrangements for receiving control signals generated by the game device
    • A63F2300/303—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by output arrangements for receiving control signals generated by the game device for displaying additional data, e.g. simulating a Head Up Display
    • A63F2300/305—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by output arrangements for receiving control signals generated by the game device for displaying additional data, e.g. simulating a Head Up Display for providing a graphical or textual hint to the player
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/30—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by output arrangements for receiving control signals generated by the game device
    • A63F2300/308—Details of the user interface
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/60—Methods for processing data by generating or executing the game program
    • A63F2300/6045—Methods for processing data by generating or executing the game program for mapping control signals received from the input arrangement into game commands
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/60—Methods for processing data by generating or executing the game program
    • A63F2300/69—Involving elements of the real world in the game world, e.g. measurement in live races, real video
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/60—Methods for processing data by generating or executing the game program
    • A63F2300/69—Involving elements of the real world in the game world, e.g. measurement in live races, real video
    • A63F2300/695—Imported photos, e.g. of the player

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Image Analysis (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Processing Or Creating Images (AREA)

Description

本発明はカメラから入力された映像を利用するビデオゲームにおける背景画像取得プログラム、ビデオゲーム装置、背景画像取得方法、および、プログラムを記録したコンピュータ読み取り可能な記録媒体に関する。
昨今、カメラから入力された映像を利用するビデオゲームが人気を博している。この種のビデオゲームでは、カメラでプレイヤ（遊戯者）の姿態を撮影し、ボタンアイテム等の画像と合成してモニタ上に表示し、プレイヤの手（腕）などをボタンアイテム等の画像に重ね合わせて動かすことにより、ボタンアイテム等が反応してアクションが発動するようになっている。すなわち、手に持って操作するゲームコントローラ（コントロールパッド）を必要とせずに、カメラで撮影された画像のみによってコマンド入力を行い、ゲームの進行を操作することができるようになっている。
ところで、従来のこの種のビデオゲームでは「フレーム差分」と呼ばれる、直前フレームの画像と現フレームの画像との差分（フレーム間のピクセル単位の画素情報の差分であり、画素情報としてはＲＧＢ方式による色信号やＹＵＶ方式による輝度信号、輝度信号と赤色信号の差を示す信号、輝度信号と青色信号の差を示す信号等がある。）をとり、所定値以上の変化があった部分に動きがあったものと判断する手法が採用されている。また、ゲームの進行を操作するためのボタンアイテム等をモニタ画面上に一つもしくは複数配置し、それらのボタンアイテム等の上に手などの画像を重ねて動かすことがゲーム操作の基本になっている。
しかしながら、このようなボタンアイテム等の上に手などの画像を重ねて動かす方式では、プレイヤの姿態がモニタ画面上に表示されることが必須であり、そのためモニタ画面の全面にわたってゲーム性の高いＣＧ（Computer Graphics）画面等を表示することができず、ゲーム作品として内容的に乏しいものにならざるを得ない。また、ボタンアイテム等を反応させるだけであるため、操作内容が限られており、ゲームキャラクタ等の位置や動きを連続的に制御するような、例えばゲームコントローラのアナログスティック（スティック状の操作部を指で上下左右に傾倒させることで中間値を含めた操作情報を出力）によるような、きめの細かい操作を行うことはできない。
そこで、ボタンアイテム等の上に手などの画像を重ねて動かす方式に加え、手などの位置からプレイヤのポーズを検出することで、よりきめの細かいゲーム操作を可能にすることが考えられる。この場合、ポーズの形によっては上述した「フレーム差分」のみでは判断できない場合があるとともに、プレイヤが静止し続けている場合にはフレーム差分では検出が行えないことから、「背景差分」を導入することが必要となる場合がある。ここで、背景差分とは、プレイヤの映っていない背景画像とプレイヤの映っている現画像との差分（ピクセル単位での画素情報の差分）をとり、所定値以上の変化があった部分にプレイヤの手などが存在すると判断するものである。
上述した「背景差分」を導入することで数々のポーズを検出することができ、より細かいゲーム操作を可能にすることができるが、予めプレイヤの映っていない背景画像を撮影して記憶しておく必要がある。
しかし、背景画像を撮影するためにプレイヤをカメラの前から立ち退かせてしまうと画像認識によるコマンド入力（ボタンアイテム等の上に手などの画像を重ねて動かす方式）が行えなくなってしまうため、ゲームコントローラを使用せざるを得なくなり、原則としてゲームコントローラを使用しなくてもよいというこの種のカメラから入力された映像を利用するビデオゲームのメリットを失わせてしまい、不便を強いることになる。
本発明は上記の従来の問題点に鑑み提案されたものであり、その目的とするところは、カメラから入力された映像を利用するビデオゲームにおける背景差分を計算するために必要な背景画像を取得するにあたり、プレイヤの画像認識によるコマンド入力を可能とした状態で背景画像の取得を行うことのできる背景画像取得プログラム、ビデオゲーム装置、背景画像取得方法、および、プログラムを記録したコンピュータ読み取り可能な記録媒体を提供することにある。
上記の課題を解決するため、本発明にあっては、請求項１に記載されるように、カメラから入力された映像を利用するビデオゲームにおける背景差分を計算するために必要な背景画像を取得するためのプログラムであって、上記ビデオゲームを実行するコンピュータを、上記ビデオゲームのプレイヤの姿態を上記カメラで撮影した画像のうちの一部の操作領域内に上記プレイヤの操作をフレーム差分の所定値以上の変化により受け付けるボタンアイテムを合成して上記コンピュータのモニタ画面に表示するとともに、当該操作領域内に上記プレイヤの姿態の画像が収まる位置に上記プレイヤを誘導する背景画像取得案内表示手段、および、当該操作領域以外の背景取得領域の画像を背景画像として取得する背景画像取得手段として機能させる背景画像取得プログラムを要旨としている。
また、請求項２に記載されるように、上記背景画像取得手段は、上記プレイヤの姿態を上記カメラで撮影した画像を左右の領域に略２分割し、分割した第１の領域および第２の領域を順次に上記背景取得領域として背景画像の取得を行うようにすることができる。
また、請求項３に記載されるように、上記背景画像取得手段は、上記第１および第２の領域を重なりをもって配置するようにすることができる。
また、請求項４に記載されるように、上記コンピュータを、上記第１および第２の領域の重なりの部分の画像の差分が一定量以上であるか否かの判断により、上記第１の領域の背景画像の取得と上記第２の領域の背景画像の取得との間に上記カメラが動いたと判断された場合に、背景画像の取得を最初からやり直すべき旨のメッセージを表示する手段として更に機能させるようにすることができる。
また、請求項５に記載されるように、上記背景画像取得手段は、上記プレイヤの姿態を上記カメラで撮影した画像のうち左側の所定幅の端部および右側の所定幅の端部を除いた領域を上記操作領域とし、上記端部を背景取得領域として背景画像の取得を行うようにすることができる。
また、請求項６に記載されるように、上記コンピュータを、上記背景取得領域内の画像のフレーム差分が一定量以上であるか否かの判断により、上記背景取得領域に動くものが映っていると判断された場合に、背景画像の取得を中断し、背景画像の取得をやり直すべき旨のメッセージを表示する手段として更に機能させるようにすることができる。
また、請求項７に記載されるように、カメラから入力された映像を利用するビデオゲームを実行するビデオゲーム装置であって、上記ビデオゲームのプレイヤの姿態を上記カメラで撮影した画像のうちの一部の操作領域内に上記プレイヤの操作をフレーム差分の所定値以上の変化により受け付けるボタンアイテムを合成して上記ビデオゲーム装置のモニタ画面に表示するとともに、当該操作領域内に上記プレイヤの姿態の画像が収まる位置に上記プレイヤを誘導する背景画像取得案内表示手段と、当該操作領域以外の背景取得領域の画像を背景画像として取得する背景画像取得手段とを備えるビデオゲーム装置として構成することができる。
また、請求項１０に記載されるように、カメラから入力された映像を利用するビデオゲームにおける背景差分を計算するために必要な背景画像を取得する方法であって、上記ビデオゲームを実行するコンピュータが、上記ビデオゲームのプレイヤの姿態を上記カメラで撮影した画像のうちの一部の操作領域内に上記プレイヤの操作をフレーム差分の所定値以上の変化により受け付けるボタンアイテムを合成して上記ビデオゲームを実行する装置のモニタ画面に表示するとともに、当該操作領域内に上記プレイヤの姿態の画像が収まる位置に上記プレイヤを誘導する背景画像取得案内表示工程と、上記ビデオゲームを実行するコンピュータが、当該操作領域以外の背景取得領域の画像を背景画像として取得する背景画像取得工程とを備える背景画像取得方法として構成することができる。
また、請求項１３に記載されるように、カメラから入力された映像を利用するビデオゲームにおける背景差分を計算するために必要な背景画像を取得するためのプログラムを記録したコンピュータ読み取り可能な記録媒体であって、上記ビデオゲームを実行するコンピュータを、上記ビデオゲームのプレイヤの姿態を上記カメラで撮影した画像のうちの一部の操作領域内に上記プレイヤの操作をフレーム差分の所定値以上の変化により受け付けるボタンアイテムを合成して上記コンピュータのモニタ画面に表示するとともに、当該操作領域内に上記プレイヤの姿態の画像が収まる位置に上記プレイヤを誘導する背景画像取得案内表示手段、および、当該操作領域以外の背景取得領域の画像を背景画像として取得する背景画像取得手段として機能させるためのプログラムを記録したコンピュータ読み取り可能な記録媒体として構成することができる。
本発明の背景画像取得プログラム、ビデオゲーム装置、背景画像取得方法、および、プログラムを記録したコンピュータ読み取り可能な記録媒体にあっては、背景差分を計算するために必要な背景画像を取得するにあたり、プレイヤがカメラの前から完全に立ち退く必要がなく、プレイヤの画像認識によるコマンド入力を可能とした状態で背景画像の取得を行うことができ、ゲームコントローラを使用せざるを得ないといった不便を強いることがなくなる。
以下、本発明の好適な実施形態につき図面を参照して説明する。
図１は本発明の一実施形態にかかるビデオゲーム装置の構成図である。
図１において、ビデオゲーム装置は、ビデオゲーム装置本体１と、このビデオゲーム装置本体１にＵＳＢ（Universal Serial Bus）ケーブル等によって接続されるカメラ２と、テレビ等のディスプレイモニタ３およびスピーカ４とから構成されている。なお、カメラ２は必ずしもビデオゲーム装置本体１に直結するものでなくてもよく、ネットワーク経由等で接続されるものであってもよい。
また、ビデオゲーム装置本体１には、ＣＤ−ＲＯＭ、ＤＶＤ等のゲームのソフトウェア（プログラム）が装着されるプログラム記憶装置１１と、主たる制御処理を行うＣＰＵ１２と、制御の過程で使用されるプログラムおよびデータを格納するメインメモリ１３と、画像データを格納するグラフィックスメモリ１４と、ゲーム内容に応じた画像の生成および制御を行う画像処理部１５と、音声の生成および制御を行う音声処理部１６と、ディスプレイモニタ３に対して画像信号を出力する画像出力部１７と、スピーカ４に対して音声信号を出力する音声出力部１８とが含まれている。
図２は上記のビデオゲーム装置において背景差分を計算するために必要な背景画像取得の処理を示すフローチャートであり、ビデオゲーム装置本体１内のＣＰＵ上で実行されるプログラムにより実現されるものである。
図２において、ゲームの開始にあたり、ディスプレイモニタ３（図１）にゲーム選択メニューの表示を行い（ステップＳ１）、プレイヤの選択に応じてゲームを決定する（ステップＳ２）。なお、これらの処理は一つのゲームソフトに複数のミニゲームが含まれている場合を想定しているため、単一のゲームである場合には省略される。
次いで、左側背景画像取得のための案内をディスプレイモニタ３に表示する（ステップＳ３）。図３は左側背景画像取得時の画面例を示す図であり、モニタ画面３０１の右側の操作領域３０２にプレイヤ５０１の立ち位置の目標を示す枠３０３と確認時にプレイヤ５０１が操作するためのボタンアイテム３０４とを表示し、左側の背景取得領域３０５には「ゲームを始めるための準備をします。枠の中に入るように立ち、この領域に動くものが映らない状態でＯＫボタンの上で手を振ってください。」というメッセージ３０６を表示している。なお、背景取得領域３０５はモニタ画面３０１を２分割したものよりも若干大きく設定されており、後述する右側の背景取得領域３１１（図５）と重なり部分が生じるようにしてある。これは、分割部分のノイズの影響をなくすとともに、重なり部分の画像の差分からカメラが途中で動いてしまっていないかを確認するためである（動作は後述）。
図２に戻り、ＯＫボタンが反応したか否かを判断し（ステップＳ４）、反応していない場合は左側背景画像取得のための案内表示（ステップＳ３）を続け、反応した場合には左側の背景取得領域のフレーム差分（フレーム間のピクセル単位の画素情報の差分）から動くものが存在しないか否かを判断する（ステップＳ５）。これは、動くものが映っている場合は背景差分を計算するための背景画像として使用できないため、取得前に事前にチェックするのが効率的だからである。
ここで、動くものが存在すると判断された場合、エラー表示を一定時間にわたって行う（ステップＳ６）。図４は左側背景画像取得が失敗した場合の画面例を示す図であり、「画面左側の領域に動くものが映っています。動いているものは、水色の点で表示されています。動くものが映らない状態にしてやり直してください。」というメッセージ３０７を表示している。
図２に戻り、左側の背景取得領域に動くものが存在しないと判断された場合、背景取得領域の画像を背景画像として取得する（ステップＳ７）。
次いで、右側背景画像取得のための案内をディスプレイモニタ３に表示する（ステップＳ８）。図５は右側背景画像取得時の画面例を示す図であり、モニタ画面３０１の左側の操作領域３０８にプレイヤ５０１の立ち位置の目標を示す枠３０９と確認時にプレイヤ５０１が操作するためのボタンアイテム３１０とを表示し、右側の背景取得領域３１１には「枠の中に入るように立ち、この領域に動くものが映らない状態でＯＫボタンの上で手を振ってください。」というメッセージ３１２を表示している。
図２に戻り、ＯＫボタンが反応したか否かを判断し（ステップＳ９）、反応していない場合は右側背景画像取得のための案内表示（ステップＳ８）を続け、反応した場合には右側の背景取得領域のフレーム差分から動くものが存在しないか否かを判断する（ステップＳ１０）。
ここで、動くものが存在すると判断された場合、エラー表示を一定時間にわたって行う（ステップＳ１１）。図６は右側背景画像取得が失敗した場合の画面例を示す図であり、「画面右側の領域に動くものが映っています。動いているものは、水色の点で表示されています。動くものが映らない状態にしてやり直してください。」というメッセージ３１３を表示している。
図２に戻り、右側の背景取得領域に動くものが存在しないと判断された場合、背景取得領域の画像を背景画像として取得する（ステップＳ１２）。
次いで、左側背景画像と右側背景画像の重なり領域に一定量以上の色差分がないか否かを判断し（ステップＳ１３）、差分がある場合にはエラーを表示し（ステップＳ１４）、左側背景画像取得のための案内表示（ステップＳ３）に戻る。図７は左側背景画像取得と右側背景画像取得との間にカメラが動いてしまった場合の画面例を示す図であり、「カメラが動いてしまいました。ゲームを始めるための準備を最初からやり直してください。」というメッセージ３１４を表示している。
図２に戻り、左側背景画像と右側背景画像の重なり領域に一定量以上の色差分がない場合、背景画像の取得を完了し、ゲームを開始する（ステップＳ１５）。
次に、図８は左右端部の領域のみの背景画像取得時の画面例を示す図である。すなわち、図２〜図７で説明した処理では、カメラで撮影した画像の全体について背景画像を取得するものであったが、ゲームによっては一部の領域のみしか背景差分を計算する必要がない場合があり、その場合はその部分の背景画像を取得すれば足りる。
図８に示す例では、左右端部の一定幅の背景取得領域３１５、３１６についてのみ背景画像を取得するようにしており、その中央の操作領域３１７にプレイヤ５０１の立ち位置の目標を示す枠３１８と確認時にプレイヤ５０１が操作するためのボタンアイテム３１９とを表示し、「ゲームを始めるための準備をします。左右の領域に動くものが映らない状態でＯＫボタンの上で手を振ってください。」というメッセージ３２０を表示している。
このように、背景差分を計算するために必要な背景画像を取得するにあたって、プレイヤの姿態をカメラで撮影した画像のうちの一部の領域内にプレイヤの操作を受け付けるボタンアイテムを合成してモニタ画面に表示するとともに、当該領域内に姿態の画像が収まるようにプレイヤを誘導し、当該領域以外の領域の画像を背景画像として取得するようにしたので、プレイヤの画像認識によるコマンド入力を可能とした状態で背景画像の取得を行うことができ、プレイヤに不便を強いることがない。
次に、上述した処理により取得された背景画像を用いたポーズ検出について説明する。
図９はポーズ検出のための機能ブロック図であり、背景差分に関する機能部分として、カメラ２から取得した背景画像を記憶する背景画像記憶部１０１と、カメラ２の現画像と背景画像記憶部１０１に記憶された背景画像との差分（背景差分）を計算する背景差分計算部１０２と、所定の領域における背景差分の有無を判定する背景差分判定部１０３とを備えている。
また、フレーム差分に関する機能部分として、カメラ２の前フレームの画像を記憶する前フレーム画像記憶部１０４と、カメラ２の現画像と前フレーム画像記憶部１０４に記憶された前フレームの画像との差分（フレーム差分）を計算するフレーム差分計算部１０５と、所定の領域内におけるフレーム差分の重心位置を計算するフレーム差分重心計算部１０６と、フレーム差分重心計算部１０６で算出されたフレーム差分の重心位置からゲームコントローラのアナログスティック信号に相当する信号に変換するアナログスティック入力変換部１０７とを備えている。 また、背景差分による検出結果とフレーム差分による検出結果を統合する機能部分として、背景差分判定部１０３の判定結果とアナログスティック入力変換部１０７のアナログスティック信号とからゲームキャラクタの操作情報を生成する操作情報変換部１０８を備えている。
図１０は上記の機能部により行われるポーズ検出のための画像処理の例を示す図である。
図１０において、カメラ２による撮影画像２０１に対しフレーム差分計算部１０５でフレーム差分を計算し、フレーム差分重心計算部１０６により左右両端の所定幅の領域２０２および領域２０３内で検出されたプレイヤ５０１の手（腕）に相当するフレーム差分の重心２０４および重心２０５を計算する。
すなわち、領域２０２および領域２０３内の画像のフレーム差分の重心２０４および重心２０５の上下方向の重心位置２０６および重心位置２０７を計算し、算出された左右それぞれの重心位置２０６および重心位置２０７の差２０８と平均値２０９とを計算する。
そして、アナログスティック入力変換部１０７は、重心位置２０６および重心位置２０７の差２０８に所定の係数を掛けた値をアナログスティック信号の左右方向の信号として出力し、重心位置２０６および重心位置２０７の平均値２０９に所定の係数を掛けた値をアナログスティック信号の上下方向の信号として出力する。
また、カメラ２による撮影画像２０１に対し背景差分計算部１０２で背景差分を計算し、背景差分判定部１０３では左右両端の領域２０２および領域２０３において背景差分が存在するか否かを判定するとともに、領域２１０において背景差分が存在するか否かを判定する。すなわち、プレイヤ５０１の左右の手の重心２０４および重心２０５の位置関係のみから判定できるポーズ（例えば、手を広げた状態で左右を同時に上下するか、左右交互に上下する場合等）に検出対象が限られている場合には、これらの処理は特に必要ないが、両手を真下に下げる「停止」や両手を真上に上げる「急加速」等のポーズを検出対象とする場合、プレイヤ５０１の左右の手の重心２０４および重心２０５の検出が行えなくなるため（手を真下に下げた場合は体の画像と重なって認識ができないため検出のための領域を設けていない）、領域２０２および領域２０３に背景差分がなく、かつ領域２１０にも背景差分がない場合には両手が真下に下がっていると判定し、更に領域２０２および領域２０３に背景差分がなく、かつ領域２１０に背景差分がある場合には両手が真上に上がっていると判定するようにしている。
なお、プレイヤ５０１の手の重心を求めるのにフレーム差分により行う場合について説明したが、背景差分により行うようにしてもよい。フレーム差分による場合はプレイヤ５０１の手に全く動きがない場合には差分が検出されないが（この場合は以前の検出状態を維持することで問題は生じない）、背景差分による場合にはプレイヤ５０１の手に全く動きがない場合でも検出できるという利点がある。また、領域２１０についても、背景差分に代えてフレーム差分を認識に用いてもよいが、認識精度の観点からは背景差分が望ましい。
図１１はポーズ検出に際してのモニタ画面の表示例を示す図であり、ディスプレイモニタ３（図１）のモニタ画面３３１にゲーム画面を表示するとともに、ポーズ検出のための操作確認用子画面３３５を一部に表示するようにしている。なお、このゲーム画面では、湾曲するコース３３２に沿ってゲームキャラクタ（モンキー）の乗ったボール３３３をころがしていき、コース３３２に沿って設けられたバナナ等のアイテム３３４を取得するようになっている。
拡大して示す操作確認用子画面３３５において、プレイヤ５０１の手（腕）の位置を認識する領域３３６および領域３３７では、認識した手の位置がマーカ３３８およびマーカ３３９によって表示されるようになっている。
図１２は検出されるポーズの例を示す図であり、（ａ）は両手を広げた状態で上げる「減速」、（ｂ）は両手を広げて水平にする「やや加速」、（ｃ）は両手を広げた状態で下げる「加速」、（ｄ）は左側の手を上げ右側を下げる「右旋回」、（ｅ）は右側の手を上げ左側を下げる「左旋回」をそれぞれ示している。なお、図示される各ポーズの中間の状態も検出が行われるものであり、アナログ的に操作情報が生成される。
次に、図１３はポーズ検出に際してのモニタ画面の他の表示例を示す図であり、ディスプレイモニタ３（図１）のモニタ画面３４１にゲーム画面を表示するとともに、ポーズ検出のための操作確認用子画面３４３を一部に表示するようにしている。なお、このゲーム画面では、空中をゲームキャラクタ３４２が自由自在に飛び回るようになっている。
拡大して示す操作確認用子画面３４３において、プレイヤ５０１の手（腕）の位置を認識する領域３４４および領域３４５では、認識した手の位置がマーカ３４６およびマーカ３４７によって表示されるようになっている。また、この例では、飛行速度を急激に上げるダッシュボタン３４８が上部に設けられている。なお、このダッシュボタン３４８は図１０に示した領域２１０に対応している。
図１４は検出されるポーズの例を示す図であり、（ａ）は両手を広げた状態で上げる「前進しながら上昇」、（ｂ）は両手を広げて水平にする「水平飛行」、（ｃ）は両手を広げた状態で下げる「前進しながら下降」、（ｄ）は左側の手を上げ右側を下げる「前進しながら右旋回」、（ｅ）は右側の手を上げ左側を下げる「前進しながら左旋回」、（ｆ）は両手を真上に上げる「急加速」、（ｇ）は左側の手を真下に下げ右側を水平に上げる「停止状態で右旋回」、（ｈ）は右側の手を真下に下げ左側を水平に上げる「停止状態で左旋回」、（ｉ）は両手を真下に下げる「停止」をそれぞれ示している。なお、図示される各ポーズの中間の状態も検出が行われるものであり、アナログ的に操作情報が生成される。
以上、本発明の好適な実施の形態により本発明を説明した。ここでは特定の具体例を示して本発明を説明したが、特許請求の範囲に定義された本発明の広範な趣旨および範囲から逸脱することなく、これら具体例に様々な修正および変更を加えることができることは明らかである。すなわち、具体例の詳細および添付の図面により本発明が限定されるものと解釈してはならない。
本発明の一実施形態にかかるビデオゲーム装置の構成図である。 背景画像取得の処理を示すフローチャートである。 左側背景画像取得時の画面例を示す図である。 左側背景画像取得が失敗した場合の画面例を示す図である。 右側背景画像取得時の画面例を示す図である。 右側背景画像取得が失敗した場合の画面例を示す図である。 左側背景画像取得と右側背景画像取得との間にカメラが動いてしまった場合の画面例を示す図である。 左右端部の領域のみの背景画像取得時の画面例を示す図である。 ポーズ検出のための機能ブロック図である。 ポーズ検出のための画像処理の例を示す図である。 ポーズ検出に際してのモニタ画面の表示例を示す図である。 検出されるポーズの例を示す図である。 ポーズ検出に際してのモニタ画面の他の表示例を示す図である。 検出されるポーズの他の例を示す図である。
符号の説明
１ ビデオゲーム装置本体
１１ プログラム記憶装置
１２ ＣＰＵ
１３ メインメモリ
１４ グラフィックスメモリ
１５ 画像処理部
１６ 音声処理部
１７ 画像出力部
１８ 音声出力部
１０１ 背景画像記憶部
１０２ 背景差分計算部
１０３ 背景差分判定部
１０４ 前フレーム画像記憶部
１０５ フレーム差分計算部
１０６ フレーム差分重心計算部
１０７ アナログスティック入力変換部
１０８ 操作情報変換部
２ カメラ
３ ディスプレイモニタ
４ スピーカ

Claims (15)

  1. カメラから入力された映像を利用するビデオゲームにおける背景差分を計算するために必要な背景画像を取得するためのプログラムであって、
    上記ビデオゲームを実行するコンピュータを、
    上記ビデオゲームのプレイヤの姿態を上記カメラで撮影した画像のうちの一部の操作領域内に上記プレイヤの操作をフレーム差分の所定値以上の変化により受け付けるボタンアイテムを合成して上記コンピュータのモニタ画面に表示するとともに、当該操作領域内に上記プレイヤの姿態の画像が収まる位置に上記プレイヤを誘導する背景画像取得案内表示手段、および、
    当該操作領域以外の背景取得領域の画像を背景画像として取得する背景画像取得手段として機能させる背景画像取得プログラム。
  2. 上記背景画像取得手段は、
    上記プレイヤの姿態を上記カメラで撮影した画像を左右の領域に略２分割し、分割した第１の領域および第２の領域を順次に上記背景取得領域として背景画像の取得を行う請求項１に記載の背景画像取得プログラム。
  3. 上記背景画像取得手段は、
    上記第１および第２の領域を重なりをもって配置する請求項２に記載の背景画像取得プログラム。
  4. 上記コンピュータを、
    上記第１および第２の領域の重なりの部分の画像の差分が一定量以上であるか否かの判断により、上記第１の領域の背景画像の取得と上記第２の領域の背景画像の取得との間に上記カメラが動いたと判断された場合に、背景画像の取得を最初からやり直すべき旨のメッセージを表示する手段として更に機能させる請求項３に記載の背景画像取得プログラム。
  5. 上記背景画像取得手段は、
    上記プレイヤの姿態を上記カメラで撮影した画像のうち左側の所定幅の端部および右側の所定幅の端部を除いた領域を上記操作領域とし、上記端部を背景取得領域として背景画像の取得を行う請求項１に記載の背景画像取得プログラム。
  6. 上記コンピュータを、
    上記背景取得領域内の画像のフレーム差分が一定量以上であるか否かの判断により、上記背景取得領域に動くものが映っていると判断された場合に、背景画像の取得を中断し、背景画像の取得をやり直すべき旨のメッセージを表示する手段として更に機能させる請求項１乃至５のいずれか一項に記載の背景画像取得プログラム。
  7. カメラから入力された映像を利用するビデオゲームを実行するビデオゲーム装置であって、
    上記ビデオゲームのプレイヤの姿態を上記カメラで撮影した画像のうちの一部の操作領域内に上記プレイヤの操作をフレーム差分の所定値以上の変化により受け付けるボタンアイテムを合成して上記ビデオゲーム装置のモニタ画面に表示するとともに、当該操作領域内に上記プレイヤの姿態の画像が収まる位置に上記プレイヤを誘導する背景画像取得案内表示手段と、
    当該操作領域以外の背景取得領域の画像を背景画像として取得する背景画像取得手段とを備えたことを特徴とするビデオゲーム装置。
  8. 上記背景画像取得手段は、
    上記プレイヤの姿態を上記カメラで撮影した画像を左右の領域に略２分割し、分割した第１の領域および第２の領域を順次に上記背景取得領域として背景画像の取得を行うことを特徴とする請求項７に記載のビデオゲーム装置。
  9. 上記背景画像取得手段は、
    上記プレイヤの姿態を上記カメラで撮影した画像のうち左側の所定幅の端部および右側の所定幅の端部を除いた領域を上記操作領域とし、上記端部を背景取得領域として背景画像の取得を行うことを特徴とする請求項７に記載のビデオゲーム装置。
  10. カメラから入力された映像を利用するビデオゲームにおける背景差分を計算するために必要な背景画像を取得する方法であって、
    上記ビデオゲームを実行するコンピュータが、上記ビデオゲームのプレイヤの姿態を上記カメラで撮影した画像のうちの一部の操作領域内に上記プレイヤの操作をフレーム差分の所定値以上の変化により受け付けるボタンアイテムを合成して上記ビデオゲームを実行する装置のモニタ画面に表示するとともに、当該操作領域内に上記プレイヤの姿態の画像が収まる位置に上記プレイヤを誘導する背景画像取得案内表示工程と、
    上記ビデオゲームを実行するコンピュータが、当該操作領域以外の背景取得領域の画像を背景画像として取得する背景画像取得工程とを備えたことを特徴とする背景画像取得方法。
  11. 上記背景画像取得工程は、
    上記プレイヤの姿態を上記カメラで撮影した画像を左右の領域に略２分割し、分割した第１の領域および第２の領域を順次に上記背景取得領域として背景画像の取得を行うことを特徴とする請求項１０に記載の背景画像取得方法。
  12. 上記背景画像取得工程は、
    上記プレイヤの姿態を上記カメラで撮影した画像のうち左側の所定幅の端部および右側の所定幅の端部を除いた領域を上記操作領域とし、上記端部を背景取得領域として背景画像の取得を行うことを特徴とする請求項１０に記載の背景画像取得方法。
  13. カメラから入力された映像を利用するビデオゲームにおける背景差分を計算するために必要な背景画像を取得するためのプログラムを記録したコンピュータ読み取り可能な記録媒体であって、
    上記ビデオゲームを実行するコンピュータを、
    上記ビデオゲームのプレイヤの姿態を上記カメラで撮影した画像のうちの一部の操作領域内に上記プレイヤの操作をフレーム差分の所定値以上の変化により受け付けるボタンアイテムを合成して上記コンピュータのモニタ画面に表示するとともに、当該操作領域内に上記プレイヤの姿態の画像が収まる位置に上記プレイヤを誘導する背景画像取得案内表示手段、および、
    当該操作領域以外の背景取得領域の画像を背景画像として取得する背景画像取得手段として機能させるためのプログラムを記録したコンピュータ読み取り可能な記録媒体。
  14. 上記背景画像取得手段は、
    上記プレイヤの姿態を上記カメラで撮影した画像を左右の領域に略２分割し、分割した第１の領域および第２の領域を順次に上記背景取得領域として背景画像の取得を行う請求項１３に記載のプログラムを記録したコンピュータ読み取り可能な記録媒体。
  15. 上記背景画像取得手段は、
    上記プレイヤの姿態を上記カメラで撮影した画像のうち左側の所定幅の端部および右側の所定幅の端部を除いた領域を上記操作領域とし、上記端部を背景取得領域として背景画像の取得を行う請求項１３に記載のプログラムを記録したコンピュータ読み取り可能な記録媒体。
JP2004255947A 2004-09-02 2004-09-02 背景画像取得プログラム、ビデオゲーム装置、背景画像取得方法、および、プログラムを記録したコンピュータ読み取り可能な記録媒体 Expired - Fee Related JP4433948B2 (ja)

Priority Applications (5)

Application Number Priority Date Filing Date Title
JP2004255947A JP4433948B2 (ja) 2004-09-02 2004-09-02 背景画像取得プログラム、ビデオゲーム装置、背景画像取得方法、および、プログラムを記録したコンピュータ読み取り可能な記録媒体
CN2005100985767A CN1743042B (zh) 2004-09-02 2005-09-02 背景图像获取方法和视频游戏装置
US11/219,377 US7785201B2 (en) 2004-09-02 2005-09-02 Background image acquisition method, video game apparatus, background image acquisition program, and computer-readable medium containing computer program
EP05255407A EP1645314A3 (en) 2004-09-02 2005-09-02 Background image acquisition method, video game apparatus, background image acquisition program, and computer-readable medium containing computer program
HK06106299.9A HK1086214A1 (en) 2004-09-02 2006-05-30 Background image acquisition method and video game apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2004255947A JP4433948B2 (ja) 2004-09-02 2004-09-02 背景画像取得プログラム、ビデオゲーム装置、背景画像取得方法、および、プログラムを記録したコンピュータ読み取り可能な記録媒体

Publications (3)

Publication Number Publication Date
JP2006068314A JP2006068314A (ja) 2006-03-16
JP2006068314A5 JP2006068314A5 (ja) 2007-09-27
JP4433948B2 true JP4433948B2 (ja) 2010-03-17

Family

ID=35735230

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2004255947A Expired - Fee Related JP4433948B2 (ja) 2004-09-02 2004-09-02 背景画像取得プログラム、ビデオゲーム装置、背景画像取得方法、および、プログラムを記録したコンピュータ読み取り可能な記録媒体

Country Status (5)

Country Link
US (1) US7785201B2 (ja)
EP (1) EP1645314A3 (ja)
JP (1) JP4433948B2 (ja)
CN (1) CN1743042B (ja)
HK (1) HK1086214A1 (ja)

Families Citing this family (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080036763A1 (en) * 2006-08-09 2008-02-14 Mediatek Inc. Method and system for computer graphics with out-of-band (oob) background
JP4992618B2 (ja) * 2007-09-05 2012-08-08 カシオ計算機株式会社 ジェスチャー認識装置及びジェスチャー認識方法
CN101332362B (zh) * 2008-08-05 2012-09-19 北京中星微电子有限公司 基于人体姿态识别的互动娱乐系统及其实现方法
GB2463312A (en) * 2008-09-09 2010-03-17 Skype Ltd Games system with bi-directional video communication
JP2010142592A (ja) * 2008-12-22 2010-07-01 Nintendo Co Ltd ゲームプログラムおよびゲーム装置
US9030536B2 (en) 2010-06-04 2015-05-12 At&T Intellectual Property I, Lp Apparatus and method for presenting media content
US9787974B2 (en) 2010-06-30 2017-10-10 At&T Intellectual Property I, L.P. Method and apparatus for delivering media content
US8640182B2 (en) 2010-06-30 2014-01-28 At&T Intellectual Property I, L.P. Method for detecting a viewing apparatus
US8918831B2 (en) 2010-07-06 2014-12-23 At&T Intellectual Property I, Lp Method and apparatus for managing a presentation of media content
US9049426B2 (en) 2010-07-07 2015-06-02 At&T Intellectual Property I, Lp Apparatus and method for distributing three dimensional media content
US9560406B2 (en) 2010-07-20 2017-01-31 At&T Intellectual Property I, L.P. Method and apparatus for adapting a presentation of media content
US9032470B2 (en) 2010-07-20 2015-05-12 At&T Intellectual Property I, Lp Apparatus for adapting a presentation of media content according to a position of a viewing apparatus
US9232274B2 (en) 2010-07-20 2016-01-05 At&T Intellectual Property I, L.P. Apparatus for adapting a presentation of media content to a requesting device
US8994716B2 (en) 2010-08-02 2015-03-31 At&T Intellectual Property I, Lp Apparatus and method for providing media content
US8438502B2 (en) 2010-08-25 2013-05-07 At&T Intellectual Property I, L.P. Apparatus for controlling three-dimensional images
US8947511B2 (en) * 2010-10-01 2015-02-03 At&T Intellectual Property I, L.P. Apparatus and method for presenting three-dimensional media content
US9259643B2 (en) * 2011-04-28 2016-02-16 Microsoft Technology Licensing, Llc Control of separate computer game elements
US9030522B2 (en) 2011-06-24 2015-05-12 At&T Intellectual Property I, Lp Apparatus and method for providing media content
US8947497B2 (en) 2011-06-24 2015-02-03 At&T Intellectual Property I, Lp Apparatus and method for managing telepresence sessions
US9445046B2 (en) 2011-06-24 2016-09-13 At&T Intellectual Property I, L.P. Apparatus and method for presenting media content with telepresence
US9602766B2 (en) 2011-06-24 2017-03-21 At&T Intellectual Property I, L.P. Apparatus and method for presenting three dimensional objects with telepresence
US8587635B2 (en) 2011-07-15 2013-11-19 At&T Intellectual Property I, L.P. Apparatus and method for providing media services with telepresence
US9033795B2 (en) * 2012-02-07 2015-05-19 Krew Game Studios LLC Interactive music game
JP6474026B2 (ja) * 2014-11-20 2019-02-27 株式会社セガゲームス ゲーム装置及びプログラム
CN106933364B (zh) * 2017-03-15 2019-09-27 京东方科技集团股份有限公司 字符输入方法、字符输入设备以及可穿戴设备
JP6276460B1 (ja) * 2017-10-03 2018-02-07 株式会社 ディー・エヌ・エー ゲームを提供するためのプログラム、システム、及び方法

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5454043A (en) * 1993-07-30 1995-09-26 Mitsubishi Electric Research Laboratories, Inc. Dynamic and static hand gesture recognition through low-level image analysis
US5704836A (en) * 1995-03-23 1998-01-06 Perception Systems, Inc. Motion-based command generation technology
US6176782B1 (en) * 1997-12-22 2001-01-23 Philips Electronics North America Corp. Motion-based command generation technology
JPH1133230A (ja) * 1997-07-16 1999-02-09 Sega Enterp Ltd 通信ゲームシステム
US6072494A (en) * 1997-10-15 2000-06-06 Electric Planet, Inc. Method and apparatus for real-time gesture recognition
JP2000036032A (ja) 1998-07-17 2000-02-02 Fujitsu Ltd 前景画像抽出方法、画像処理装置、自動トリミング装置、記録媒体及び肖像写真装置
US6798897B1 (en) * 1999-09-05 2004-09-28 Protrack Ltd. Real time image registration, motion detection and background replacement using discrete local motion estimation
US7227526B2 (en) * 2000-07-24 2007-06-05 Gesturetek, Inc. Video-based image control system
US7071914B1 (en) * 2000-09-01 2006-07-04 Sony Computer Entertainment Inc. User input device and method for interaction with graphic images
JP3725460B2 (ja) * 2000-10-06 2005-12-14 株式会社ソニー・コンピュータエンタテインメント 画像処理装置、画像処理方法、記録媒体、コンピュータプログラム、半導体デバイス
US6678413B1 (en) * 2000-11-24 2004-01-13 Yiqing Liang System and method for object identification and behavior characterization using video analysis
US20020168091A1 (en) * 2001-05-11 2002-11-14 Miroslav Trajkovic Motion detection via image alignment
JP3417555B2 (ja) * 2001-06-29 2003-06-16 株式会社コナミコンピュータエンタテインメント東京 ゲーム装置、人物画像処理方法及びプログラム
JP3611807B2 (ja) 2001-07-19 2005-01-19 コナミ株式会社 ビデオゲーム装置、ビデオゲームにおける擬似カメラ視点移動制御方法及びプログラム
JP2003135851A (ja) * 2001-10-31 2003-05-13 Konami Computer Entertainment Yokyo Inc ゲーム装置、コンピュータゲームシステムの制御方法及びプログラム
JP3894782B2 (ja) * 2001-12-10 2007-03-22 株式会社国際電気通信基礎技術研究所 物体認識装置
GB2398691B (en) * 2003-02-21 2006-05-31 Sony Comp Entertainment Europe Control of data processing

Also Published As

Publication number Publication date
EP1645314A3 (en) 2008-07-30
CN1743042B (zh) 2010-05-05
EP1645314A2 (en) 2006-04-12
HK1086214A1 (en) 2006-09-15
US7785201B2 (en) 2010-08-31
CN1743042A (zh) 2006-03-08
JP2006068314A (ja) 2006-03-16
US20060046846A1 (en) 2006-03-02

Similar Documents

Publication Publication Date Title
JP4433948B2 (ja) 背景画像取得プログラム、ビデオゲーム装置、背景画像取得方法、および、プログラムを記録したコンピュータ読み取り可能な記録媒体
JP2006068315A (ja) ポーズ検出プログラム、ビデオゲーム装置、ポーズ検出方法、および、プログラムを記録したコンピュータ読み取り可能な記録媒体
JP4991458B2 (ja) 画像表示装置及びその制御方法
EP1760571B1 (en) Input data processing program and information processing apparatus
US9268480B2 (en) Computer-readable storage medium, apparatus, system, and method for scrolling in response to an input
US8777742B2 (en) Game device, control method for a game device, and non-transitory information storage medium
EP2521097A1 (en) System and Method of Input Processing for Augmented Reality
US9323339B2 (en) Input device, input method and recording medium
JP5437726B2 (ja) 情報処理プログラム、情報処理装置、情報処理システム、および座標算出方法
US9448717B2 (en) Computer-readable storage medium having information processing program stored therein, information processing apparatus, information processing system, and information processing method
US20190294314A1 (en) Image display device, image display method, and computer readable recording device
JP2011258158A (ja) プログラム、情報記憶媒体及び画像生成システム
US20120147058A1 (en) Computer-readable storage medium having information processing program stored therein, information processing apparatus, information processing system, and information processing method
JP5378742B2 (ja) 画像処理プログラムおよび画像処理装置
US8345001B2 (en) Information processing system, entertainment system, and information processing system input accepting method
US20120133676A1 (en) Storage medium having stored thereon image processing program, image processing apparatus, image processing system, and image processing method
JP2010079589A (ja) 画像処理プログラムおよび画像処理装置
JP2014109885A (ja) 表示装置及び通知方法
JP5213913B2 (ja) プログラム及び画像生成システム
WO2024089889A1 (ja) リモートコミュニケーションシステムおよびリモートコミュニケーション方法
JP2023177828A (ja) 映像分析装置、映像分析方法、及びプログラム
JP2013168822A (ja) 画像撮像装置、その制御方法及びプログラム
JP2005176096A (ja) 画像処理方法、画像処理装置
JPH09172646A (ja) 非接触型画像特殊効果装置

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20070809

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20070809

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20090818

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20091016

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20091208

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20091221

R150 Certificate of patent or registration of utility model

Ref document number: 4433948

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130108

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130108

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130108

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130108

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140108

Year of fee payment: 4

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140108

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140108

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140108

Year of fee payment: 4

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

S533 Written request for registration of change of name

Free format text: JAPANESE INTERMEDIATE CODE: R313533

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees