JP2001307124A - 画像処理システム、画像処理装置及び撮像装置 - Google Patents

画像処理システム、画像処理装置及び撮像装置

Info

Publication number
JP2001307124A
JP2001307124A JP2001039272A JP2001039272A JP2001307124A JP 2001307124 A JP2001307124 A JP 2001307124A JP 2001039272 A JP2001039272 A JP 2001039272A JP 2001039272 A JP2001039272 A JP 2001039272A JP 2001307124 A JP2001307124 A JP 2001307124A
Authority
JP
Japan
Prior art keywords
image
image data
player
color
difference
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2001039272A
Other languages
English (en)
Other versions
JP4006949B2 (ja
JP2001307124A5 (ja
Inventor
Takuya Matsumoto
卓也 松本
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sega Corp
Original Assignee
Sega Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sega Corp filed Critical Sega Corp
Priority to JP2001039272A priority Critical patent/JP4006949B2/ja
Publication of JP2001307124A publication Critical patent/JP2001307124A/ja
Publication of JP2001307124A5 publication Critical patent/JP2001307124A5/ja
Application granted granted Critical
Publication of JP4006949B2 publication Critical patent/JP4006949B2/ja
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Classifications

    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/10—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals
    • A63F2300/1087—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals comprising photodetecting means, e.g. a camera
    • A63F2300/1093—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals comprising photodetecting means, e.g. a camera using visible light
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/60—Methods for processing data by generating or executing the game program
    • A63F2300/66—Methods for processing data by generating or executing the game program for rendering three dimensional images
    • A63F2300/6692—Methods for processing data by generating or executing the game program for rendering three dimensional images using special effects, generally involving post-processing, e.g. blooming

Landscapes

  • User Interface Of Digital Computer (AREA)
  • Image Analysis (AREA)
  • Processing Or Creating Images (AREA)
  • Image Processing (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Studio Devices (AREA)

Abstract

(57)【要約】 【課題】 遊戯者の指示に関連して移動体をスムーズか
つユニークに動かすことができる画像処理システムを提
供する。 【解決手段】 遊戯者の画像を撮像する撮像手段２３２
が設けられ、撮像手段２３３により撮像した画像データ
を複数フレーム分順次記憶して、記憶手段に記憶された
画像データを表示画面２１６上に順次表示する。現在表
示されている画像データと過去に表示された画像データ
とを比較して差分を得る。この差分に基づいて表示画面
２１６上に表示する移動体３０２、３０４の挙動を決定
する。

Description

【発明の詳細な説明】
【０００１】
【発明の属する技術分野】本発明は、遊戯者の画像を撮
像して、その撮像画像を利用する画像処理システムに関
する。
【０００２】
【従来の技術】ゲームセンタ等に設置されるアーケード
ゲーム装置や家庭用のビデオゲーム装置には、近年多種
多様な興趣溢れるゲームが開発され、娯楽として人気が
非常に高いものがある。
【０００３】従来のゲーム装置に、遊戯者を撮像してそ
の撮像画像を利用したものが知られている。例えば、プ
リントクラブのように、遊戯者の像を取り込んで背景と
組み合わせて印刷して遊戯者に提供するものや、遊戯者
の顔画像を取り込んで、それをゲームキャラクタの顔に
貼り付けて独自なキャラクタを創出したりするものがあ
る。
【０００４】また、従来のゲーム装置には、コントロー
ラのような位置指示手段により表示画面上の位置を指示
して、その指示位置に表示された色情報に基づいて、ゲ
ームを制御したり、特定の移動体を発生したりするもの
がある。
【０００５】
【発明が解決しようとする課題】しかしながら、従来の
ゲーム装置では、遊戯者を撮像しても、その撮像画像の
全部又は一部を画像として利用するにとどまっており、
その撮像画像から特定の情報を得るものではなかった。
【０００６】本発明の目的は、遊戯者等の撮像画像から
特定の情報を得て、その情報に基づいて画像表示を制御
する画像処理システムを提供することにある。
【０００７】本発明の他の目的は、遊戯者の指示に関連
して移動体をスムーズかつユニークに動かすことができ
る画像処理システムを提供することにある。
【０００８】本発明の更に他の目的は、遊戯者から操作
入力をスムーズに行うことができる画像処理システムを
提供することにある。
【０００９】
【課題を解決するための手段】本発明による画像処理シ
ステムは、遊戯者の画像を撮像する撮像手段と、前記撮
像手段により撮像した画像データを複数フレーム分記憶
する記憶手段と、前記記憶手段に記憶された画像データ
を表示画面上に順次表示する画像表示手段と、現在表示
されている画像データと過去に表示された画像データと
を比較して差分を得る差分算出手段とを有し、前記差分
算出手段により算出された差分に基づいて、前記表示画
面上に表示する移動体の挙動を決定することを特徴とす
る。
【００１０】また、本発明による画像処理システムは、
遊戯者の画像を撮像する撮像手段と、前記撮像手段によ
り撮像した画像データを複数フレーム分記憶する記憶手
段と、前記記憶手段に記憶された画像データを表示画面
上に順次表示する画像表示手段と、前記表示画面内の予
め定められた領域における、現在表示されている画像デ
ータと過去に表示された画像データとを比較して所定の
色成分の差分を得る差分算出手段とを有し、前記差分算
出手段により算出された所定の色成分の差分が所定値以
上であった場合に、前記遊戯者からの所定の操作入力が
あったと判断することを特徴とする。
【００１１】
【発明の実施の形態】［第１実施形態］本発明の第１実
施形態によるビデオゲーム装置について図１乃至図４を
用いて説明する。図１は本実施形態のビデオゲーム装置
の機能を示すブロック図であり、図２は本実施形態のビ
デオゲーム装置の遊戯方法の第１の具体例を示す説明図
であり、図３は本実施形態のビデオゲーム装置の遊戯方
法の第２の具体例を示す説明図であり、図４は本実施形
態のビデオゲーム装置の遊戯方法の第３の具体例を示す
説明図である。
【００１２】ゲーム装置２００には、図１に示すよう
に、ゲームプログラムの実行やシステム全体を制御する
ＣＰＵ２０２と、ＣＰＵ２０２が処理を行うのに必要な
プログラムやデータを格納するバッファメモリとして利
用されるシステムメモリ（ＲＡＭ）２０４とがバスライ
ンにより共通接続され、バスアービタ２１０に接続され
ている。
【００１３】更に、ゲームプログラムやデータが格納さ
れたプログラムデータ記憶装置又は記憶媒体２０６とし
て、ゲーム用記録媒体であるＣＤ−ＲＯＭを駆動するＣ
Ｄ−ＲＯＭドライブと、ゲーム装置２００を起動するた
めのプログラムやデータが格納されているＢＯＯＴＲＯ
Ｍ２０８とがバスラインを介してバスアービタ２１０に
接続されている。
【００１４】また、バスアービタ２１０を介して、描画
ライブラリによって生成された描画コマンドに従ってレ
ンダリングを行うレンダリングプロセッサ２１２と、そ
のレンダリングプロセッサ２１２により描画された画像
信号が記録されるグラフィックメモリ２１４とが接続さ
れている。グラフィックメモリ２１４に記録された画像
データは、ビデオＤＡＣ（図示せず）によりデジタル信
号からアナログ信号に変換され、ディスプレイモニタ２
１６に表示される。
【００１５】また、バスアービタ２１０を介して、音声
データを生成するオーディオプロセッサ２１８と、その
生成した音声データを記録するオーディオメモリ２２０
とが接続されている。オーディオメモリ２２０に記録さ
れた音声データは、オーディオＤＡＣ（図示せず）によ
りデジタル信号からアナログ信号に変換され、スピーカ
２２２から音声出力される。
【００１６】また、バスアービタ２１０はインターフェ
ースとしての機能も有し、モデム２２４を介して外部の
通信回線と接続される。ゲーム装置２００はモデム２２
４を介して他のゲーム装置等との通信が可能となる。
【００１７】また、バスアービタ２１０にはゲーム装置
２００を操作するためのコントローラ２２６が接続され
る。コントローラ２２６には、例えば、メモリカード等
により構成されたバックアップメモリ２２８が装着され
ている。
【００１８】また、遊戯者の画像や音声を入力するため
に、バスアービタ２１０には画像を撮影するための電子
カメラ２３２が接続され、コントローラ２２６には音声
を入力するためのマイク２３０が接続されている。
【００１９】本実施形態のビデオゲーム装置を用いた遊
戯方法の第１の具体例を図２を用いて説明する。
【００２０】本具体例では、ゲーム装置２００に接続さ
れた電子カメラ２３２をディスプレイモニタ２１６上に
置き、遊戯者３００は電子カメラ２３２の前に立って後
述する様々な指示を行う。電子カメラ２３２により撮像
された画像はディスプレイモニタ２１６に表示される。
遊戯者３００は自分の撮像画像を見ながら様々な動作を
行う。
【００２１】本具体例では、電子カメラ２３２によりＹ
ＵＶ方式で撮像する。ＹＵＶ方式は、家庭用テレビ等で
あつかうデータフォーマットであって、輝度（Ｙ）と、
赤との色差（Ｕ）と、青との色差（Ｖ）との３つの情報
で色を表現する方式である。例えば、Ｙ成分だけで、画
像を表示すると白黒画像となる。ＹＵＶ方式で撮像され
た画像は圧縮されてシステムメモリ２０４に格納され
る。なお、ディスプレイの種類によってはＲＧＢ信号へ
変換が必要である。
【００２２】遊戯者３００は、ディスプレイ２１６に表
示される画像を見ながら電子カメラ２３２に向かって様
々な動作を行うので、違和感なく操作できるように、撮
像された画像３００′を反転して表示する。すなわち、
図２に示すように、遊戯者３００が左手を上げた場合に
は、ディスプレイ２１６に表示される遊戯者の像３０
０′では右手が上がるように表示する。
【００２３】本具体例では、電子カメラ２３２により撮
像された画像データは圧縮されてシステムメモリ２０４
に順次記憶される。システムメモリ２０４に、現在表示
されている画像データに加えて過去に表示された画像デ
ータとが記憶される。過去に表示された画像データとし
ては、例えば、現在表示されている画像データの１フレ
ーム前の画像データであってもよいし、現在表示されて
いる画像データの所定フレーム前の画像データであって
もよい。また、過去の画像データは１フレーム分の画像
データであってもよいし、２以上のフレーム分の画像デ
ータであってもよい。
【００２４】本具体例では、システムメモリ２０４に記
憶された現在の画像データと過去の画像データとの差分
を算出し、その差分データに基づいて様々な処理を行
う。現在の画像データと過去の画像データについて、ピ
クセル毎にＹＵＶ方式における各色成分（輝度、赤、
青）の差分を算出する。
【００２５】本具体例では、各色成分の差分データに基
づいて移動体の制御を行う。これにより背景等の動かな
い画像データに影響しないようにする。例えば、人間の
手には赤み成分が多いので、遊戯者３００が手を動かす
と、その動かした領域のみに大きな赤み成分の差分値が
現れ、他の領域での赤み成分の差分値はほぼゼロとな
る。
【００２６】そこで、本実施形態では、赤み成分の差分
値が所定値以上になると、例えば、蛙を模した移動体３
０２を自動的に発生する。赤み成分の差分値が所定値以
上の領域に無数の泡３０３を表示し、発生した移動体３
０２は赤み成分の差分値が最大値の部分に追随して移動
する。これにより遊戯者が手を動かすと、その領域全体
に泡３０３が現れ、移動体３０３の蛙が泡３０３の中を
泳ぐように追随して表示される。なお、赤み成分の差分
値が所定値以上の領域に泡以外のもの、例えば、ハート
マークや炎等を表示して特殊な効果を出すようにしても
よい。
【００２７】移動体３０２の発生、追随、消滅のアルゴ
リズムは、後述する本発明の第２実施形態における虫移
動描画処理（図１４乃至図２４）のアルゴリズムと基本
的に同じである。第２実施形態の虫移動描画処理では画
像の色データそのものを用いて虫等の移動体の描画制御
を行ったが、本実施形態では色成分の差分データを用い
ている点が異なる。
【００２８】移動体３０２を、赤み成分の差分データに
より発生し、差分データの最大値のピクセルに追随する
ように描画すると、人間の手には赤み成分が多いので、
遊戯者３００が手を振るとそれに自然に移動体３０２が
追随するように表示され、あたかも移動体３０２が遊戯
者３００の手を追いかけているように表示される。
【００２９】本具体例では、図２に示すように、撮像画
像の青み成分の差分データにより発生、追随、消滅する
他の移動体３０４を表示するようにしている。その他
に、差分データにより挙動が決定される他の移動体を表
示するようにしてもよい。例えば、現在の画像データと
過去の画像データとの各色成分（輝度、赤、青）の差分
データの合計値や、最大値、平均値、分布等の状態に基
づいて移動体を発生、追随、消滅等の処理を行うように
してもよい。
【００３０】また、移動体３０２に対する処理のアルゴ
リズムに、後述する本発明の第２実施形態における動物
移動描画処理（図２７乃至図３６）のアルゴリズムを利
用してもよい。画像データの色成分の差分データに対し
て、このアルゴリズムを適用し、ディスプレイモニタ２
１６に移動体等を発生させ、移動体の周囲の差分データ
に基づいて移動体の絵を切り換えたり、ときどき停止し
たりしてもよい。
【００３１】このように本具体例によれば、人間の手の
赤み成分を利用しているので、特別な装置を衣服や手に
装着する必要がなく、より簡便なキャラクタ入力手段と
して用いることができ、遊戯者の指示に関連して移動体
をスムーズかつユニークに動かすことができる。
【００３２】また、人間の手の赤み成分を利用する代わ
りに、特殊な道具を装着してもよい。例えば、手の代わ
りに先端が赤色の指揮棒を手に持って操作して、本具体
例のような効果的な表示をしてもよい。また、右手に赤
色の手袋、左手に青色の手袋をつけ、赤み成分により発
生する移動体３０２と青み成分により発生する移動体３
０４を右手の動きと左手の動きにより自在に操るように
してもよい。更に、人間の手そのものを用いる方法と、
特殊な道具を用いる方法とを適宜組み合わせるようにし
てもよい。
【００３３】本実施形態のビデオゲーム装置を用いた遊
戯方法の第２の具体例を図３を用いて説明する。
【００３４】本具体例も、第１の具体例と同様に、電子
カメラ２３２により撮像された画像データは圧縮されて
システムメモリ２０４に順次記憶される。システムメモ
リ２０４に記憶された現在の画像データと過去の画像デ
ータとの差分を算出し、その差分データに基づいて処理
を行う。
【００３５】本具体例では、ディスプレイモニタ２１６
上に特定の検出領域３１２を設定し、その特定の検出領
域３１２における差分データの値により遊戯者３１０の
操作情報を検出する。例えば、遊戯者３１０に赤色の指
示棒３１４を持たせ、その指示棒３１４の像３１４′が
検出領域３１２内を移動したか否かにより操作情報を検
出する。指示棒３１４の像３１４′が検出領域３１２内
を移動すると、検出領域３１２内における赤み成分の差
分値が所定値以上になる。これにより遊戯者３１０の操
作を検出する。
【００３６】遊戯者３１０は、ディスプレイモニタ２１
６に表示された像３１０′、３１４′を見ながら、ゲー
ム装置２００に所定の操作指示を行いたい場合には、指
示棒３１４の像３１４′が検出領域３１２内を横切るよ
うに操作すればよい。遊戯者３１０は自由なスタイルで
自由に操作を行うことができる。
【００３７】なお、遊戯者３１０に位置がわかるように
検出領域３１２に予め特定の色をつけて他の領域と区別
してもよい。遊戯者３１０が検出領域３１２を知って確
実に操作することができる。逆に、検出領域３１２に特
別な色をつけないようにしてもよい。遊戯者３１０に検
出領域３１２の位置を捜すことをゲームに取り入れるこ
とができる。
【００３８】このように本具体例によれば、単に指示棒
等の操作手段を移動するだけでよいので、より簡便な操
作入力手段として用いることができ、遊戯者から操作入
力をスムーズに行うことができる。
【００３９】本実施形態のビデオゲーム装置を用いた遊
戯方法の第３の具体例を図４を用いて説明する。
【００４０】本具体例も、第１の具体例と同様に、電子
カメラ２３２により撮像された画像データは圧縮されて
システムメモリ２０４に順次記憶される。システムメモ
リ２０４に記憶された現在の画像データと過去の画像デ
ータとの差分を算出し、その差分データに基づいて処理
を行う。
【００４１】本具体例では、遊戯者の意図的な操作を検
出してゲーム開始に対して起動するものである。遊戯者
が電子カメラ２３２の前で手を振ったときに、その手の
動きの移動距離を累積して、その累積距離が所定の設定
値を超えた場合に入力されたと判断する。この操作入力
により、ゲームを開始したり、特定のキャラクタを出現
したり、画面を切り換えたり等の様々な制御を行う。
【００４２】初期画面においては、図４（ａ）に示すよ
うに、黒い画面の中に円い窓３２０が表示されている。
この窓３２０が手の動きを検出する窓となる。遊戯者が
電子カメラ２３２の前に手をかざして動かすと、赤み成
分の差分データから手が動いた位置を検出し、その動い
た位置に窓３２０を移動する。その結果、図４（ｂ）に
示すように、丸い窓３２０内に遊戯者の手３２２が写っ
た状態が表示される。
【００４３】遊戯者が手３２２を動かすと、図４
（ｃ）、（ｄ）に示すように、遊戯者の手３２２の動き
に追随して丸い窓３２０が移動する。ゲーム装置２００
は円い窓３２０の移動距離を演算して、その移動距離を
累積していく。遊戯者による操作の開始時からの累積距
離が所定値に達した場合にゲーム開始操作が入力された
と判断し、図２６（ｅ）に示すように、ゲームを開始す
る。
【００４４】遊戯者による意図しない動きによりゲーム
開始と判断されることを防止するために様々な工夫をし
ている。例えば、手の動きの速度を考慮して移動距離を
累積する。手の動きの速さが所定値以上の場合には移動
距離をそのまま累積するが、手の動きが所定値以下の場
合には実際の移動距離から所定距離を減算したものを累
積する。また、手の動きが検出されてから所定時間が経
過しても累積距離がゲーム開始のための所定値に達しな
い場合には累積距離をリセットする。
【００４５】上記実施形態では丸い窓３２０の中に遊戯
者の手の像３２２を組み込んで表示したが、実際の手の
画像を用いることなく模式的なマークにより表示しても
よい。すなわち、遊戯者の手の動きが検出されたら、単
なる円い窓のマークから円い窓内に手が描かれたマーク
に移動体の画像を変更するようにしてもよい。なお、遊
戯者の手を振る操作をゲーム開始以外の他の操作情報と
してもよい。
【００４６】このように本具体例によれば、遊戯者が電
子カメラの前で手を振ることによりゲームを開始する等
の操作指示を行うことができ、遊戯者から操作入力をス
ムーズに行うことができる。
【００４７】［第２実施形態］本発明の第２実施形態に
よるビデオゲーム装置について図５乃至図８を用いて説
明する。図５は本実施形態のビデオゲーム装置の外観を
示す斜視図であり、図６は本実施形態のビデオゲーム装
置のソフトウエアカートリッジであり、図７は本実施形
態のビデオゲーム装置のハードウエアを示すブロック図
であり、図８は本実施形態のビデオゲーム装置の機能を
示すブロック図である。
【００４８】（ゲーム装置本体）本実施形態のビデオゲ
ーム装置は、折り畳み式のゲーム装置本体１０に絵本タ
イプのソフトウエアカートリッジ１２を装着するもので
ある。図５に示すように、ゲーム装置本体１０の底蓋１
４から上蓋１６を外して開き、その内側のカートリッジ
スロット１８にソフトウエアカートリッジ１２を差し込
む。
【００４９】後述するように、本実施形態では、第１実
施形態と同様に電子カメラ５５を設けることも可能であ
る。電子カメラ５５は、例えば、図３に示すようにモニ
タ９０の上に置かれ、ソフトウエアカートリッジ１２の
コネクタ（図示せず）に接続される。
【００５０】ゲーム装置本体１０の底蓋１４内側には、
左側に方向ボタン２０と実行ボタン２２が設けられ、中
央にお絵描きタブレット２４が設けられ、右側にタッチ
ペンホルダ２６が設けられている。
【００５１】方向ボタン２０及び実行ボタン２２は、遊
戯者が操作するものであって、方向ボタン２０により上
下左右の４方向を指示し、実行ボタン２２により実行指
示を与える。タッチペンホルダ２６は、タッチペン２８
を保持する。タッチペン２８は、お絵描きタブレット２
４に触って、絵本ソフトを操作するために用いられる。
タッチペン２８の先端にはペンボタン２８ａが設けられ
ている。遊戯者はペンボタン２８ａを押すことにより指
示を与える。
【００５２】お絵描きタブレット２４は、電磁誘導方式
によりタッチペン２８が近接している位置を検出する。
お絵描きタブレット２４から発せられる電磁信号をタッ
チペン２８により受信することにより位置を検出する。
遊戯者はペンボタン２８ａを押すことにより、その位置
に基づいた指示を与える。
【００５３】ゲーム装置本体１０の上蓋１６内側には、
中央に絵本タイプのソフトウエアカートリッジ１２が装
着される絵本タブレット３２が設けられている。この絵
本タブレット３２は、お絵描きタブレット２４と同様の
電磁誘導方式により、タッチペン２８が近接した位置を
検出する。
【００５４】絵本タブレット３２の左側下部には電源を
オンオフするためのパワースイッチ３４が設けられてい
る。絵本タブレット３２の右側下部にはソフトウエアカ
ートリッジ１２が差し込まれるカートリッジスロット１
８が設けられている。装着されたソフトウエアカートリ
ッジ１２は、リジェクトボタン３６を押すことによりカ
ートリッジスロット１８から取り外すことができる。
【００５５】絵本タブレット３２内の上部右側にはペー
ジセンサ３８が設けられている。ソフトウエアカートリ
ッジ１２の絵本のどのページ４２が開かれているかをペ
ージセンサ３８により検出する。絵本の各ページ４２の
右上部には切り込みが形成され、ページ順に切り込み幅
を広くしている。このようにすることにより、開かれて
いるページに応じて遮蔽するセンサ数が異なり、現在開
かれているページを検出することができる。
【００５６】ソフトウエアカートリッジ１２は、図５に
示すように、左縁部の綴じリング４０により複数ページ
４２を綴じた絵本のような基本形態をしている。各ペー
ジ４２にはゲームプログラムに対応した絵が描かれてい
る。
【００５７】（ソフトウエアカートリッジ）ソフトウエ
アカートリッジ１２を図６を用いて説明する。図６は絵
本の各ページ４２が閉じられている状態のソフトウエア
カートリッジ１２の平面図である。
【００５８】ソフトウエアカートリッジ１２は、上部
が、絵本を載置する絵本載置部４６となっており、下部
が、回路基板４８を内部に収納する基板収納部５０とな
っている。
【００５９】絵本載置部４６の左縁部には綴じリング４
０が設けられ、絵本の各ページ４２が閉じられている。
本実施形態では５頁のページ４２が閉じられており、各
ページ４２の右縁部にはインデックスがずらして形成さ
れている。絵本載置部４６の右上部には、絵本タブレッ
ト３２のページセンサ３８の位置に対応した６個のセン
サ用穴５２が開けられている。
【００６０】基板収納部５０には内部に回路基板４８が
収納されている。回路基板４８には、ゲーム装置本体１
０に接続するためのコネクタ４９が形成され、ゲームプ
ログラムを格納したプログラムＲＯＭ５４が搭載されて
いる。
【００６１】（ハードウエア）次に、本実施形態のビデ
オゲーム装置のハードウエアの構成を図７を用いて説明
する。
【００６２】ゲーム装置本体１０について説明する。Ｍ
ＰＵ６０はビデオゲーム装置全体を制御する。ＲＡＭ６
２はＭＰＵ６０のワーク用メモリである。ビデオディス
プレイプロセッサ（ＶＤＰ）６４は背景やキャラクタ等
の描画処理を制御する。映像情報はビデオＲＡＭ６６に
書き込まれる。ビデオディスプレイプロセッサ６４から
の映像信号は映像端子７０からモニタ９０に出力され
る。
【００６３】なお、電子カメラ５５を利用する場合に
は、ビデオプロセッサ（ＶＤＰ）６４は電子カメラ５５
で撮像した映像情報を、背景やキャラクタ等のゲーム画
像と合成して描画情報を制御する。その映像情報をビデ
オＲＡＭ６６に書き込み、ビデオプロセッサ（ＶＤＰ）
６４により、映像端子７０からモニタ９０に出力する。
電子カメラ５５で撮像した映像情報を画像認識すること
により操作入力することもできる。
【００６４】音声合成ＬＳＩ（ＡＤＰＣＭ）７２はキャ
ラクタがしゃべる言葉等のあらゆる音声を合成する。ゲ
ームに応じた音声を合成して発音する。ビデオディスプ
レイプロセッサ６４からの音声信号と音声合成ＬＳＩ７
２からの音声信号を混合して、音声端子７６を介してモ
ニタ９０に出力する。
【００６５】コントローラ７８は、方向ボタン２０、実
行ボタン２２、タッチペン２８、ペンボタン２８ａ、ペ
ージセンサ３８の状態を監視して、遊戯者の操作による
入力情報をＭＰＵ６０に出力する。
【００６６】コントローラ７８は、アナログスイッチ８
０を介して、絵本タブレット３２、お絵描きタブレット
２４の状態を監視して、遊戯者の操作による入力情報を
ＭＰＵ６０に出力する。
【００６７】なお、電子カメラ５５を利用する場合は、
電子カメラ５５で撮像した操作者の画像情報又は操作者
の操作による入力情報をＭＰＵ６０に出力する。
【００６８】これらＭＰＵ６０、ＲＡＭ６２、ビデオデ
ィスプレイプロセッサ６４、音声合成ＬＳＩ７２、コン
トローラ７８は、アドレスバス８４、データバス８６、
コントロールバス８８により接続されている。
【００６９】ソフトウエアカートリッジ１２では、ゲー
ムプログラムを格納したプログラムＲＯＭ５４が回路基
板４８に搭載されている。ソフトウエアカートリッジ１
２は、コネクタ４９、８２を介してゲーム装置本体１０
と接続され、アドレスバス８４、データデータバス８
６、コントロールバス８８がそれぞれ接続される。な
お、電源ライン（図示せず）もコネクタ４９、８２を介
してソフトウエアカートリッジ１２に接続される。
【００７０】（機能ブロック図）次に、本実施形態のビ
デオゲーム装置の機能を図８のブロック図を用いて説明
する。図８は、ゲーム装置本体１０にソフトウエアカー
トリッジ１２が装着され、全体がビデオゲーム装置とし
て動作している際の機能ブロック図である。
【００７１】制御部１００はビデオゲーム装置における
描画処理及び発音処理を制御する。描画制御部１０２
は、タッチペン２８による絵本タブレット３２への近接
位置に基づいて、所定の絵を描画するように描画処理部
１０４を制御する。描画処理部１０４はバッファメモリ
入出力部１１０を介してバッファメモリ１２０に線図を
描画する。描画処理部１０４の制御によりバッファメモ
リ１２０に所定の絵を描画したり、タッチペン２８によ
るお絵描きタブレット２４への近接位置に応じてバッフ
ァメモリ１２０に線図を描画したり、移動体描画部１０
６の制御によりバッファメモリ１２０に虫や動物等の移
動体の絵を描画したりする。移動体描画部１０６は進路
決定部１０７により決定された虫や動物等の移動体の進
路方向に従って移動体の絵を描画する。発音処理部１０
８は、タッチペン２８によるお絵描きタブレット２４へ
の近接位置と、バッファメモリ１２０の色情報に基づい
て、発音処理を行なう。
【００７２】なお、電子カメラ５５を利用する場合は、
描画処理部１０４は、電子カメラ５５による画像データ
が記憶されているメモリ（図示せず）から画像データに
基づいた制御を行う。
【００７３】バッファメモリ入出力部１１０は、制御部
１００からの描画制御に応じて色情報をバッファメモリ
１２０に書き込んだり、バッファメモリ１２０から色情
報を読み取って制御部１００に出力したりする。
【００７４】色情報を書き込む場合には、制御部１００
からの書込み位置を座標変換部１１２でバッファメモリ
１２０のアドレスに変換し、その変換したアドレスに、
色情報書込部１１４により制御部１００から指示された
色情報を書込む。
【００７５】色情報を読み取る場合には、制御部１００
からの読取り位置を座標変換部１１６でバッファメモリ
１２０のアドレスに変換し、その変換したアドレスのバ
ッファメモリ１２０の色情報を色情報読出部１１８によ
り読取り、制御部１００の発音処理部１０８に出力す
る。
【００７６】映像情報は、バッファメモリ１２０に格納
されている色情報に基づいた画像を、フレーム毎にビデ
オＲＡＭ６６に書込み、映像端子７０を介してモニタ９
０に出力する。
【００７７】音声情報は、発音処理部１０８から出力さ
れた音声信号を、音声端子７６を介してモニタ９０に出
力する。
【００７８】（ビデオゲームの第１具体例）次に、本実
施形態のビデオゲーム装置のビデオゲームの第１の具体
例について図９乃至図２４を用いて説明する。
【００７９】（基本的描画処理）本具体例の描画処理に
ついて図９乃至図１２を用いて説明する。
【００８０】図９は本具体例の描画処理において用いら
れるソフトウエアカートリッジ１２の絵の具体例であ
る。図９の絵の各部分にタッチペン２８を近接させる
と、絵本タブレット３２によりタッチペン２８の近接位
置を検出し、更にペンボタン２８ａを押すことにより、
近接位置に応じた描画指示を入力する。
【００８１】なお、電子カメラ５５を利用する場合に
は、図９と同様な選択画面、例えば、鉛筆領域２１１、
消しゴム領域２１２、あみ領域２１３、指揮棒領域２１
４、色指定領域２１５等のアイコンを含む選択画面をモ
ニタ９０に表示し、例えば遊戯者の手の移動によってカ
ーソルを動かして上記アイコンを選択する。
【００８２】図９の左側のページ２００には、キャンパ
ス領域２０１、サンプル絵領域２０２、２０３、２０４
が配置されている。タッチペン２８でキャンパス領域２
０１に接触すると、自由に絵を描画できるキャンパスが
モニタ９０に表示される。タッチペン２８でサンプル絵
領域２０２、２０３、２０４に接触すると、予め定めら
れたサンプルの絵がモニタ９０に表示される。
【００８３】図８の右側のページ２１０には、鉛筆領域
２１１、消しゴム領域２１２、あみ領域２１３、指揮棒
領域２１４、色指定領域２１５が配置されている。タッ
チペン２８で鉛筆領域２１１に接触すると、タッチペン
２８が鉛筆として機能する。更にタッチペン２８で色指
定領域２１５の所望の色領域に接触することにより、そ
の鉛筆の色を指定できる。タッチペン２８で消しゴム領
域２１２に接触すると、タッチペン２８が消しゴムとし
て機能する。タッチペン２８であみ領域２１３に接触す
ると、タッチペン２８が捕虫あみとして機能する。タッ
チペン２８で指揮棒領域２１４に接触すると、タッチペ
ン２８が指揮棒として機能する。
【００８４】図１０のフローチャートを用いて描画処理
について説明する。
【００８５】まず、タッチペン２８によりサンプル絵が
選択されたかどうか判断する（ステップＳ１０）。遊戯
者がタッチペン２８をいずれかのサンプル絵領域２０
２、２０３、２０４に接触すると、描画制御部１０２に
より描画処理部１０４を制御して、選択されたサンプル
絵をモニタ９０に描画する（ステップＳ１１）。図１１
にサンプル絵の具体例を示す。グランドピアノの絵が描
画されている。
【００８６】なお、電子カメラ５５を利用する場合に
は、例えば、赤み成分に反応してカーソルが移動するよ
うに設定しておけば、人間の手には赤み成分が多いの
で、プレイヤが電子カメラ５５に向かって手を移動させ
ることにより、そのプレイヤの思い通りに操作すること
ができる。
【００８７】また、タッチペン２８で、サンプル領域、
鉛筆領域、消しゴム領域、色指定領域に接触して希望の
機能を選択し、その選択状態のときに、電子カメラ５５
の前で手を移動すると、タブレット２４を使ったペン入
力と異なり非接触で操作することができる。
【００８８】サンプル絵が選択されていない場合には、
タッチペン２８によりキャンパスが選択されたかどうか
判断する（ステップＳ１２）。遊戯者がタッチペン２８
をキャンパス領域２０１に接触すると、描画制御部１０
２により描画処理部１０４を制御して、キャンパスをモ
ニタ９０に描画する（ステップＳ１３）。図１１にキャ
ンパス絵の具体例を示す。最初は絵が全く描かれていな
いキャンパスが描画される。
【００８９】次に、鉛筆を用いてモニタ９０上に線図を
描画する。図１２に示すキャンパス上に線図を描画する
場合として説明するが、図１１に示すサンプル絵上にも
線図を描画することができる。
【００９０】なお、電子カメラ５５を利用する場合に
は、人間の手に多い赤み成分に反応するようにすれば、
プレイヤが手を移動することにより線図を描画すること
もできる。
【００９１】まず、タッチペン２８により鉛筆と色が選
択されたかどうか判断する（ステップＳ１４）。タッチ
ペン２８を鉛筆領域２１１に接触し、色指定領域２１５
のいずれかに接触すると、モニタ９０上に指定した色の
絵筆２００が表示される。
【００９２】次に、タッチペン２８がお絵描きタブレッ
ト２４上にあるかどうか判断し（ステップＳ１５）、更
にペンボタン（図示せず）が押されているかどうか判断
する（ステップＳ１６）。遊戯者がタッチペン２８をお
絵描きタブレット２４に接触すると、描画処理部１０４
から位置信号が座標変換部１１２に出力され、色信号が
色情報書込部１１４に出力される。座標変換部１１２は
位置信号をバッファメモリ１２０のアドレス信号に変換
し、その変換したアドレスに、色情報書込部１１４によ
り色信号で指示された色情報を書込む（ステップＳ１
７）。遊戯者がタッチペン２８をお絵描きタブレット２
４に接触しながら動かすと、図１２に示すように、モニ
タ９０上では絵筆５００がタッチペン２８の動きに同期
して動いてキャンパス上に選択された色の線図が描画さ
れる。
【００９３】なお、電子カメラ５５を利用する場合に
は、電子カメラ５５に向かって手を移動することによ
り、モニタ９０上に表示された指定した色の絵筆を移動
させ、モニタ９０上に線図を描画することができる。
【００９４】タッチペン２８を色指定領域２１５を接触
すれば、絵筆５００の色が変更されモニタ９０のキャン
パス上に複数の色の線図が描画される。また、タッチペ
ン２８を消しゴム領域２１２に接触して、モニタ９０に
消しゴムを表示し、その後、タッチペン２８をお絵描き
タブレット２４に接触しながら動かすことにより、モニ
タ９０のキャンパス上に描画された線図を消すことがで
きる。このようにして、実際のキャンパスに絵を描くよ
うに、モニタ９０のキャンパスに絵を自由に描くことが
できる。
【００９５】なお、電子カメラ５５を利用する場合に
は、タッチペン２８で希望領域に接触しての各機能を選
択すると、キャンパスに絵を書くように、モニタ９０に
絵を自由に描くことができる。ここで、「消しゴム領
域」や「色指定領域」などの画面データを予め用意して
モニタ９０上に表示し、電子カメラ５５に向かって手を
移動してモニタ９０上のカーソルをその領域に移動すれ
ば、希望の機能を選択できる。
【００９６】さらに、プレイヤが手を電子カメラ５５に
向けて移動させれば、その手の移動に沿った軌跡をモニ
タ９０上に表示でき、モニタ９０のキャンパスに絵を自
由に描くことができる。
【００９７】なお、電子カメラ５５を利用する場合は、
タッチペン２８とタブレット２４を使う場合と異なり、
非接触で操作入力できるので、不思議な感覚で描画を楽
しむことができる。
【００９８】（発音処理１）本具体例の発音処理につい
て図１３のフローチャートを用いて説明する。図１１に
示すグランドピアノのサンプル絵を用いて発音処理する
場合として説明するが、図１２に示すキャンパス上の線
図を用いても発音処理することができる。
【００９９】まず、タッチペン２８により指揮棒が選択
されたかどうか判断する（ステップＳ２０）。遊戯者が
タッチペン２８を指揮棒領域２１４に接触すると、モニ
タ９０上に指揮棒５０２が表示される。
【０１００】次に、タッチペン２８がお絵描きタブレッ
ト２４上にあるかどうか判断し（ステップＳ２１）、更
にペンボタン２８ａが押されているかどうか判断する
（ステップＳ２２）。遊戯者がタッチペン２８をお絵描
きタブレット２４に接触すると、発音処理部１０８から
位置信号が座標変換部１１６に出力され、バッファメモ
リ１２０のアドレスに変換される。続いて、色情報読出
部１１８により、その変換したアドレスにおけるバッフ
ァメモリ１２０の色信号が読み出され、発音処理部１０
８に出力される（ステップＳ２３）。
【０１０１】なお、電子カメラ５５を利用する場合に
は、赤み成分に反応するようにすれば、制御部１００が
電子カメラ５５によって赤み成分（例えば遊戯者の手）
を認識させることにより位置信号の入力ができる。電子
カメラ５５により位置信号を入力すると、発音処理部１
０８から位置信号が座標変換部１１６に出力され、バッ
ファメモリ１２０のアドレスに変換され、色情報読出部
により、その変換したアドレスにおけるバッファメモリ
１２０の色信号が読み出され、発音処理部１０８に出力
されることになる。
【０１０２】次に、色情報の変化があったか否か判断す
る（ステップＳ２４）。色情報の変化がなかった場合に
はペンボタン２８ａが押された直後か否か判断する（ス
テップＳ２５）。ペンボタン２８ａが押された直後でな
ければステップＳ２０に戻る。
【０１０３】ペンボタン２８ａが押された直後であれ
ば、発音処理部１０８は読み出された色情報が透明又は
黒であるか否か判断する（ステップＳ２６）。透明又は
黒の場合は音を発生させないためである。なお、黒の場
合は光る粉を出して（ステップＳ２７）、ステップＳ２
０に戻る。
【０１０４】なお、電子カメラ５５を利用する場合に
は、ＭＰＵ６０が電子カメラ５５を介して赤み成分を認
識した直後に色情報が透明又は黒であるか否か判断す
る。
【０１０５】読み出された色情報が透明又は黒でなけれ
ば、発音処理部１０８は、その色情報に応じて発音する
音を決定する（ステップＳ２８）。各色情報に応じた音
の周波数の倍率を定めた発声周波数表を定めておき、こ
の発声周波数表に基づいて周波数倍率を定める。続い
て、発音処理部１０８は、決定された音信号を出力し、
音声端子７６を介してモニタ９０に出力し、音を発生す
る（ステップＳ２９）。
【０１０６】図１１では指揮棒５０２が黄色の音符５０
４上に位置しているので、黄色に対して予め定められて
いる音、例えば、ピアノの音で高さがレの音が発生す
る。
【０１０７】このようにして、タッチペン２８をお絵描
きタブレット２４上で移動してペンボタン２８ａを押す
ことにより、指示した色に応じた様々な音を発生するこ
とができる。
【０１０８】また、電子カメラ５５を利用する場合に
は、遊戯者の例えば手の移動によって指示した色に応じ
た様々な音を発生することができる。
【０１０９】更に、図１１に示すように、ピアノの鍵盤
を音程にあうような色で描画しておけば、指揮棒５０２
によりピアノの鍵盤を指示することにより、簡単な音楽
を自在に演奏することも可能である。
【０１１０】なお、電子カメラ５５を利用する場合に
は、遊戯者の手の移動に応じて指揮棒５０２が画面上で
移動するので、その指揮棒５０２によりピアノの鍵盤を
指示することにより、簡単な音楽を自在に演奏すること
も可能である。また、この場合は、非接触で操作するこ
とができるのでより実際の指揮者感覚で演奏することが
できる。
【０１１１】（移動体描画処理１）本具体例における虫
を移動する虫移動描画処理について図１４乃至図２４を
用いて説明する。
【０１１２】この虫移動描画処理は、キャンパスの線図
に用いられた色に応じて、その色が好きな虫を移動体描
画部１０６により自動的に発生させ、その虫を色の線に
沿って動かすものである。遊戯者はその虫を捕虫あみに
より捕獲する等のゲームを行なうことができる。
【０１１３】（基本フロー）図１４は虫移動描画処理の
基本フローを示している。
【０１１４】虫移動描画処理の基本フローは、各種パラ
メータを初期化する初期化処理（ステップＳ３０）、虫
の発生が求められるまで待機する待機処理（ステップＳ
３１）、発生した虫が画面内に飛来する飛来処理（ステ
ップＳ３２）、画面内で虫を移動する移動処理（ステッ
プＳ３３）、虫が画面から飛び去る飛去処理（ステップ
Ｓ３４）の順となっている。発生する虫の数だけ独立に
描画処理される。
【０１１５】各処理の詳細について順次説明する。
【０１１６】（初期化処理）図１５は初期化処理のフロ
ーチャートである。
【０１１７】まず、表示部用の各種パラメータを初期化
する（ステップＳ４０）。
【０１１８】次に、虫が発生する際の画面外の初期位置
を乱数により設定する（ステップＳ４１）。この初期位
置から虫が飛来する。
【０１１９】次に、発生した虫が着陸する着陸位置を乱
数により設定する（ステップＳ４２）。飛来した虫は最
初この位置に着陸する。
【０１２０】次に、滞在時間タイマを初期化する（ステ
ップＳ４３）。飛来してきた虫は一定時間が経過すると
飛び去る。滞在時間タイマは虫が画面内で滞在する時間
を計測する。
【０１２１】次に、移動方向設定タイマを初期化する
（ステップＳ４４）。虫は動きながら移動方向を周囲の
色情報に基づいて一定の頻度で再設定する。移動方向設
定タイマは移動方向を再設定する時間を計測する。
【０１２２】次に、進行方向揺らぎタイマを初期化する
（ステップＳ４５）。虫が自然に動いているように見せ
るために、一定の頻度で移動方向を少しずつずらす。進
行方向揺らぎタイマは移動方向に揺らぎを発生する時間
を計測する。
【０１２３】初期化処理が終了すると、次の待機処理に
進む。
【０１２４】（待機処理）図１６は待機処理のフローチ
ャートである。
【０１２５】待機処理では、キャンパスに虫を発生する
特定の色が描画されるまで待機し、特定の色が描画され
れば、その色にしたがって発生する虫の種類を決定す
る。例えば、図２４に示すように、赤色の線５０６が描
画されていれば、赤色が好きな赤いてんとう虫５０８を
発生し、青色の線５１０が描画されていれば青色が好き
な虫５１２を発生する。
【０１２６】まず、キャンパスに色が描画されてから一
定時間が経過したか否か判断する（ステップＳ５０）。
キャンパスに色が描画されていなかったり、色が描画さ
れても一定時間が経過していなければ、再びステップＳ
５０に戻る。
【０１２７】キャンパスに色が描画されて一定時間が経
過すると、続いて、虫が好きな色か否か、すなわち、虫
を発生させる色か否か判断する（ステップＳ５１）。虫
が好きな色でなければ、再びステップＳ５０に戻る。
【０１２８】虫が好きな色のひとつであれば、その色に
応じた虫の種類を決定する（ステップＳ５２）。例え
ば、赤であればてんとう虫を選択し、青であれば青色が
好きな虫を選択する。
【０１２９】続いて、決定した虫の種類に基づいて、そ
の虫が嫌いな色を設定する（ステップＳ５３）。例え
ば、てんとう虫であれば緑を選択し、青色が好きな虫で
あれば茶色を選択する。
【０１３０】待機処理が終了すると、次の飛来処理に進
む。
【０１３１】（飛来処理）図１７は飛来処理のフローチ
ャートである。
【０１３２】まず、図１５の初期化処理のステップＳ４
１で定めた画面外の初期位置から、図１６の待機処理の
ステップＳ５２で定めた種類の虫を飛ばし（ステップＳ
６０）、図１５の初期化処理のステップＳ４２で定めた
画面内の着陸位置に向かって飛ばす（ステップＳ６
１）。
【０１３３】続いて、虫が着陸位置に到達したか否か判
断する（ステップＳ６２）。着陸位置に到達していなけ
れば、再びステップＳ６１に戻る。着陸位置に到達して
いれば飛来処理を終了し、次の移動処理に進む。
【０１３４】（移動処理）図１８は移動処理のフローチ
ャートであり、図１９は移動処理中の進路決定処理のフ
ローチャートであり、図２０は移動処理中の移動境界チ
ェック処理のフローチャートである。
【０１３５】まず、図１８に示すように、周囲の色情報
にしたがって虫の進路を決定する進路決定処理を行う
（ステップＳ７１）。進路決定処理の詳細を図１９を用
いて説明する。
【０１３６】進路決定処理においては、まず、移動方向
設定タイマを減じ（ステップＳ９０）、この移動方向設
定タイマがゼロになったか否か判断する（ステップＳ９
１）。移動方向設定タイマがゼロになっていなければ、
現在の進行方向を変更することなく維持して、移動処理
を終了する。
【０１３７】移動方向設定タイマがゼロになっている
と、色情報ワークメモリを作成する（ステップＳ９
３）。色情報ワークメモリとは、進路決定の際に参照す
るために、虫の現在位置の周囲の色情報を検出して記憶
するものである。虫の現在位置の周囲に、図２２に示す
ように、１６個の特定方向領域を設定する。これら１６
個の特定方向領域は、現在位置を中心として全周囲１６
方向の所定距離離れた位置に配置されている。各特定方
向領域は、一定ドット数、例えば６ドットの面積であ
る。
【０１３８】進路決定部１０７は特定方向領域の色情報
を読み込む。進路決定部１０７は特定方向領域の各ドッ
トの読取り位置を座標変換部５６に出力し、座標変換部
１１６はバッファメモリ１２０のアドレスに変換し、そ
の変換したアドレスのバッファメモリ１２０の色情報を
色情報読出部１１８により読取り、進路決定部１０７に
出力する。その色情報が、虫が好きな色か否か、嫌いな
色か否かを判定し、それぞれカウントする。全ての１６
個の特定方向領域について色情報を読み取り、各特定方
向領域についての好きな色の数と嫌いな色の数をカウン
トして、色情報ワークメモリに格納する。
【０１３９】次に、色情報ワークメモリを参照して、虫
の次の進行方向（以下「転回方向」という）を決定する
（ステップＳ９４）。現在の進行方向を中心として好き
な色が多い方向を転回方向として決定するようにする。
例えば、図２３に示すように、現在の進行方向が右上方
の方向（１）であるとすると、最初は、進行方向である
右上方の方向（１）の特定方向領域を調査し、続いて、
進行方向の左隣りの方向（２）の特定方向領域の色情報
を調査し、続いて、進行方向の右隣りの方向（３）の特
定方向領域の色情報を調査し、続いて、進行方向のさら
に左隣りの方向（４）の特定方向領域の色情報を調査
し、．．．順次、図２３に丸数字で示した順番に進行方
向を中心とする９個の特定方向領域の色情報を調査す
る。好きな色のドット数と嫌いな色の有無を調査する。
【０１４０】調査の結果、最も好きな色のドット数が多
い方向を転回方向とする。好きな色のドット数が同じで
あれば、図２３に示した丸数字の少ない方向を転回方向
として、現在の進行方向に近い方向を優先する。
【０１４１】次に、ステップＳ９４で調査した嫌いな色
の有無から、調査した特定方向領域中で嫌いな色を含む
特定方向領域の数をカウントする（ステップＳ９５）。
嫌いな色を含む特定方向領域が１個もなければ、ステッ
プＳ９４で決定した転回方向を維持してステップＳ９７
に進む。嫌いな色を含む特定方向領域が１個又は２個で
あれば、周囲に嫌いな色があると判断し、ステップＳ９
４で決定した転回方向を１８０度変更して（ステップＳ
９６）ステップＳ９７に進む。嫌いな色を含む特定方向
領域が３個以上であれば、周囲に嫌いな色がたくさんあ
ると判断し、虫が飛び去る処理（ステップＳ３４）に進
む。
【０１４２】次に、進行方向揺らぎタイマを減じ（ステ
ップＳ９７）、この進行方向揺らぎタイマがゼロになっ
たか否か判断する（ステップＳ９８）。進行方向揺らぎ
タイマがゼロになっていなければ、現在の進行方向を変
更することなく維持して、進路決定処理を終了する。
【０１４３】進行方向揺らぎタイマがゼロになっていれ
ば、決定した転回方向に揺らぎを与える（ステップＳ９
９）。決定した転回方向と、転回方向から反時計回りに
隣りの方向と、転回方向から時計回りに隣の方向という
３つの方向から乱数に基づいていずれかの方向を選択
し、新たな転回方向とする。
【０１４４】ステップＳ７１の進路決定処理により、周
囲の色情報にしたがって虫の進路を決定すると、続い
て、画面の縁で虫の移動を反転させるために移動境界チ
ェック処理を行う（ステップＳ７２）。移動境界チェッ
ク処理の詳細を図２０を用いて説明する。
【０１４５】移動境界チェック処理においては、まず、
進路決定処理により決定された転回方向で進んだ場合、
左右方向に関して画面からはみ出すか否か判断する（ス
テップＳ１００）。はみ出すと判断された場合には、進
行方向を左右逆にする（ステップＳ１０１）。
【０１４６】次に、進路決定処理により決定された転回
方向で進んだ場合、上下方向に関して画面からはみ出す
か否か判断する（ステップＳ１０２）。はみ出すと判断
された場合には、進行方向を上下逆にする（ステップＳ
１０３）。
【０１４７】このようにして決定された最終的な転回方
向に現在の速度分を加えて、次の新しい座標を決定する
（ステップＳ１０４）。このようにして決定された座標
位置に虫が移動するように描画処理部１０４が虫を描画
する。
【０１４８】ステップＳ７２の移動境界処理により最終
的に次の新しい座標を決定すると、続いて、図１８のス
テップＳ７３以降の虫取りゲームの処理に進む。
【０１４９】虫取りゲームの概要について説明する。遊
戯者が虫取りゲームを行いたい場合には、タッチペン２
８をあみ領域２１３に接触して、図２４に示すように、
モニタ９０に虫取り網のカーソル５１４を表示してお
く。タッチペン２８をお絵描きタブレット２４に接触し
てペンボタン２８ａを押しながら動かすことにより、モ
ニタ９０上の虫５０８、５１２を捕まえて虫取り網５１
４と一緒に動かすことができる。
【０１５０】なお、電子カメラを利用する場合には、赤
みに反応して網のカーソル５１４が移動するように設定
すれば、例えば、遊戯者の手の移動に応じて網のカーソ
ル５１４が画面上で移動するので、モニタ９０上の虫５
０８、５１２を捕まえて虫取り網５１４と一緒に動かす
ことができる。
【０１５１】これとは別に、画面上に選択ボタン（図示
せず）を表示させ、電子カメラ５５に向けて手の移動さ
せることによって、画面上のカーソルを移動させて、そ
のカーソルをその選択ボタンに重ねると、網のカーソル
５１４に変化して表示するように制御してもよい。
【０１５２】まず、タッチペン２８による画面上のカー
ソルが虫に触っていて、かつ、ペンボタン２８ａが押さ
れているか否か判断する（ステップＳ７３）。画面上の
カーソルが虫に触っていてペンボタン２８ａが押されて
いると判断されると、そのカーソルが虫取り網か否か判
断する（ステップＳ７４）。カーソルが虫取り網ではな
いと判断されると、次の飛び去り処理（ステップＳ３
４）に進む。
【０１５３】なお、電子カメラを利用する場合には、画
面上のカーソルが虫に触っていて、かつカーソルの移動
スピードが所定のスピード以上であるときに飛び去り処
理に進むようにしてもよい。現在のフレームと過去のフ
レームとの差から、カーソルの移動に要したフレーム数
を求め、そのフレーム数に１／６０秒（１フレームの時
間）を乗算してスピードを計算する。
【０１５４】カーソルが虫取り網であると判断される
と、虫取り網から離されたか否か判断する（ステップＳ
７５）。離されていると判断されるとステップＳ７７に
戻り、上述した処理を繰り返す。虫取り網から離されて
いない場合には、虫が虫取り網に捕まえられていると判
断し、虫取り網の中央の方向に虫が移動するように虫の
新たな座標値を決定する（ステップＳ７６）。続いて、
再びステップＳ７５に戻り、ステップＳ７５、Ｓ７６の
処理を繰り返す。このようにすることにより、虫取り網
５１４で虫５０８、５１０を捕まえて一緒に動かすこと
ができる。
【０１５５】ステップＳ７３で、タッチペン２８による
画面上のカーソルが虫に触っていないと判断されると、
続いて、画面が全消去されたか否か判断する（ステップ
Ｓ７７）。画面が全消去されている場合には、次の飛び
去り処理（ステップＳ３４）に進む。
【０１５６】画面が全消去されていない場合には、色情
報ワークメモリを参照して、周囲にその虫が好きな色が
あるか否か判断する（ステップＳ７８）。周囲に好きな
色がある場合には、滞在時間タイマを初期化して（ステ
ップＳ８１）、ステップＳ７７に戻り、上述した処理を
繰り返す。
【０１５７】周囲に好きな色がない場合には、滞在時間
タイマを減じ（ステップＳ７９）、この滞在時間タイマ
がゼロになったか否か判断する（ステップＳ８０）。滞
在時間タイマがゼロになっていなければ、ステップＳ７
７に戻り、上述した処理を繰り返す。滞在時間タイマが
ゼロになっていれば、次の飛び去り処理（ステップＳ３
４）に進む。
【０１５８】（飛去処理）図２１は飛去処理のフローチ
ャートである。
【０１５９】まず、現在位置から虫を飛ばし（ステップ
Ｓ１１０）、画面外の所定の位置にに向かって飛ばす
（ステップＳ１１１）。続いて、虫が画面外に出たか否
か判断する（ステップＳ１１２）。画面外に出ていなけ
れば、再びステップＳ１１１に戻る。画面外に出ていれ
ば飛去処理を終了し、再び初期化処理（ステップＳ３
０）に戻り、上述した処理を繰り返す。
【０１６０】このように、これら虫の発生及び移動は自
動的に行われ、遊戯者による特別の操作を必要としない
が、遊戯者はその虫を捕虫あみにより捕獲する等のゲー
ムを行なうことができる。
【０１６１】上述したような発音処理や移動体描画処理
によれば、モニタに単に絵を描画するだけでなく、その
絵を利用して音を発生したり、音楽を演奏したり、虫を
捕獲したりする等の様々なゲームを行うことができる。
【０１６２】（ビデオゲームの第２具体例）次に、本実
施形態のビデオゲーム装置のビデオゲームの第２の具体
例について図２５乃至図３６を用いて説明する。第１の
具体例とは発音処理及び移動体描画処理が異なってい
る。
【０１６３】（発音処理２）本具体例の発音処理につい
て図２５のフローチャートを用いて説明する。図２６に
示すグランドピアノのサンプル絵を用いて発音処理する
場合として説明する。
【０１６４】まず、タッチペン２８によりどの種類の指
揮棒が選択されたかどうか判断する（ステップＳ１２
０）。本具体例では指揮棒として通常のオルガン音を奏
でる指揮棒の他に他の動物の音色を発する指揮棒を選択
することができる。指揮棒の種類は、図２６に示すよう
に、画面上にツールボックス５２０として表示すること
ができ、遊戯者がタッチペン２８を操作して、ツールボ
ックス５２０内の動物の絵にカーソルを合わせペンボタ
ン２８ａを押して好みの動物を選択する。例えば、ツー
ルボックス５２０内の猫の絵５２２を選択すると、図２
６に示すように、先端が猫の絵の指揮棒５２４が表示さ
れる。
【０１６５】なお、電子カメラ５５を利用して選択する
場合には、選択可能な複数種類の指揮棒ボタンを画面上
に表示し、その中から希望の指揮ボタンに画面上のカー
ソルを重ねることで選択する。カーソルの移動は、例え
ば赤みに反応するように画像処理する設定にすれば、電
子カメラ５５に向かって遊戯者が手を移動すると、それ
に応じてカーソルを移動させることで実現できる。
【０１６６】次に、タッチペン２８がお絵描きタブレッ
ト２４上にあるかどうか判断し（ステップＳ１２１）、
更にペンボタン２８ａが押されているかどうか判断する
（ステップＳ１２２）。遊戯者がタッチペン２８をお絵
描きタブレット２４に接触すると、発音処理部１０８か
ら位置信号が座標変換部１１６に出力され、バッファメ
モリ１２０のアドレスに変換される。続いて、色情報読
出部１１８により、その変換したアドレスにおけるバッ
ファメモリ１２０の色信号が読み出され、発音処理部１
０８に出力される（ステップＳ１２３）。
【０１６７】次に、色情報の変化があったか否か判断す
る（ステップＳ１２４）。色情報の変化がなかった場合
にはペンボタン２８ａが押された直後か否か判断する
（ステップＳ１２５）。ペンボタン２８ａが押された直
後でなければステップＳ１２０に戻る。
【０１６８】ペンボタン２８ａが押された直後であれ
ば、発音処理部１０８は読み出された色情報が透明又は
水又は黒であるか否か判断する（ステップＳ１２６）。
透明又は水又は黒の場合は音を発生することなく、ステ
ップＳ１２０に戻る。
【０１６９】読み出された色情報が透明又は水又は黒で
なければ、発音処理部１０８は、その色情報と指揮棒の
種類に応じて発音する音を決定する（ステップＳ１２
７）。指揮棒の種類に応じた音色（オルガン音、犬の
声、猫の声、猿の声、豚の声、象の声）を定めると共
に、各色情報に応じた音の周波数の倍率を定めた発声周
波数表を定めておき、この音色と発声周波数表に基づい
て発生音を定める。例えば、猫を選択した場合には、猫
の声で音階を奏でることができる。
【０１７０】続いて、発音処理部１０８は、決定された
音信号を出力し、音声端子７６を介してモニタ９０に出
力し、音を発生する（ステップＳ１２８）。
【０１７１】図２６では猫の指揮棒５２４が黄色の音符
５０４上に位置しているので、猫の指揮棒と黄色に対し
て予め定められている音、例えば、猫の声で高さがレの
音が発生する。
【０１７２】このようにして、タッチペン２８をお絵描
きタブレット２４上で移動してペンボタン２８ａを押す
ことにより、指示した色に応じた様々な音を発生するこ
とができる。
【０１７３】（移動体描画処理１）本具体例における動
物を移動する動物移動描画処理について図２７乃至図３
６用いて説明する。
【０１７４】この動物移動描画処理は、絵本の動物の絵
をクリックすることによりキャンパス内に動物を登場さ
せ、その動物を色の線に沿って動かすものである。周囲
の色情報により動物の絵が切り替わったり、ときどき休
憩したりする。本具体例では、図３４に示すように、か
ば２２１、ゴリラ２２２、ライオン２３２、鳥２３１、
象２３４が絵本に描かれており、これら５種類の動物を
登場させることができる。
【０１７５】（基本フロー）図２７は動物移動描画処理
の基本フローを示している。
【０１７６】動物移動描画処理の基本フローは、各種パ
ラメータを初期化する初期化処理（ステップＳ１３
０）、動物の発生が求められるまで待機する待機処理
（ステップＳ１３１）、選択された動物を画面内に登場
させる登場処理（ステップＳ１３２）、画面内で動物を
移動したり休憩したりする移動処理（ステップＳ１３
３）、動物が画面から退場する退場処理（ステップＳ１
３４）の順となっている。発生する動物の数だけ独立に
描画処理される。
【０１７７】各処理の詳細について順次説明する。
【０１７８】（初期化処理）図２８は初期化処理のフロ
ーチャートである。
【０１７９】まず、表示部用の各種パラメータを初期化
する（ステップＳ１４０）。
【０１８０】次に、動物が登場する際の画面外の初期位
置を乱数により設定する（ステップＳ１４１）。この初
期位置から動物が登場する。
【０１８１】次に、登場する動物の種類に応じた好きな
色を設定する（ステップＳ１４２）。例えば、カバであ
れば水色、象であれば草色が好きな色となる。
【０１８２】次に、移動方向設定タイマを初期化する
（ステップＳ１４３）。動物は動きながら移動方向を周
囲の色情報に基づいて一定の頻度で再設定する。移動方
向設定タイマは移動方向を再設定する時間を計測する。
【０１８３】次に、進行方向揺らぎタイマを初期化する
（ステップＳ１４４）。動物が自然に動いているように
見せるために、一定の頻度で移動方向を少しずつずら
す。進行方向揺らぎタイマは移動方向に揺らぎを発生す
る時間を計測する。
【０１８４】次に、反転抑制タイマを初期化する（ステ
ップＳ１４５）。動物の移動方向が反転した場合、その
向きに応じて動物の画像を切り換えるが、動物が自然に
動いているように見せるために、移動方向が反転しても
直ちに動物の画像を切り換えることなく一定時間画像を
反転するのを抑制する。反転抑制タイマは画像の反転を
抑制する時間を計測する。
【０１８５】初期化処理が終了すると、次の待機処理に
進む。
【０１８６】（待機処理）図２９は待機処理のフローチ
ャートである。
【０１８７】待機処理では、タッチペン２８により絵本
の動物の絵が触れられるまで待機し、触れられた動物を
登場させるための準備を行う。
【０１８８】まず、絵本の動物の絵がタッチペン２８で
触れられたか否か判断する（ステップＳ１５０）。タッ
チペン２８でどこにも触れられていなかったり、触れら
れても動物の絵の位置でなければ、再びステップＳ１５
０に戻る。
【０１８９】タッチペン２８により動物の絵が触れられ
ていると、絵本タブレット３２の出力から動物の種類を
決定する（ステップＳ１５１）。
【０１９０】なお、電子カメラ５５を利用して選択する
場合には、選択可能な動物の絵を画面上に表示し、その
中から希望の動物の絵に画面上のカーソルを重ねること
で選択する。
【０１９１】続いて、動物が登場した際のキャンパス内
の移動の終了位置を乱数で設定する（ステップＳ１５
２）。
【０１９２】待機処理が終了すると、次の登場処理に進
む。
【０１９３】（登場処理）図３０は登場処理のフローチ
ャートである。
【０１９４】まず、図２８の初期化処理のステップＳ１
４１で定めた画面外の初期位置から、図２９の待機処理
のステップＳ１５１で定めた種類の動物を登場させ（ス
テップＳ１６０）、図２９の待機処理のステップＳ１５
２で定めた画面内の終了位置に向かって移動する（ステ
ップＳ１６１）。
【０１９５】続いて、動物が終了位置に到達したか否か
判断する（ステップＳ１６２）。終了位置に到達してい
なければ、再びステップＳ１６１に戻る。終了位置に到
達していれば登場処理を終了し、次の移動処理に進む。
【０１９６】（移動処理）図３１は移動処理のフローチ
ャートであり、図３２は移動処理中の速度設定・動物反
転処理のフローチャートである。なお、移動処理中の進
路決定処理と移動境界チェック処理の詳細については、
第１の具体例と同様であるので説明を省略する。
【０１９７】まず、図３１に示すように、周囲の色情報
にしたがって動物の進路を決定する進路決定処理を行う
（ステップＳ１７０）。進路決定処理の詳細は第１の具
体例の図１９と同様であるが、第１の具体例と異なるの
は、嫌いな色に関する処理を行っていない点である。
【０１９８】ステップＳ１７０の進路決定処理により、
周囲の色情報にしたがって動物の進路を決定すると、続
いて、速度設定・動物反転処理を行う（ステップＳ１７
１）。速度設定・動物反転処理の詳細について図３２を
用いて説明する。
【０１９９】速度設定・動物判定処理においては、ま
ず、進路決定処理により決定された転回方向から速度を
決定し、水平方向及び垂直方向の速度成分を得る（ステ
ップＳ１８１）。動物により移動速度が異なるので、速
度変換テーブルから移動速度を読み取り、その移動速度
と転回方向から、水平方向及び垂直方向の速度成分を得
る。
【０２００】次に、現在の進行方向は、現在の動物の画
像の左右の向きと一致しているか否か判断する（ステッ
プＳ１８２）。各動物の画像として予め左向きの画像と
右向きの画像が用意されている。速度の水平成分が左向
きであれば動物の左向きの画像を表示し、右向きであれ
ば右向きの画像を表示するようにしている。ステップＳ
１８２では、動物の画像の向きが進行方向にあっている
か否か判断する。
【０２０１】現在の進行方向と動物の画像の向きが一致
していないと判断されると、反転抑制タイマを減じ（ス
テップＳ１８３）、この反転抑制タイマがゼロになった
か否か判断する（ステップＳ１８４）。反転抑制タイマ
がゼロになっていれば動物の画像を一致している向きの
画像に切り換える（ステップＳ１８５）。
【０２０２】ステップＳ１８２で現在の進行方向と動物
の画像の左右の向きが一致していると判断された場合に
は、反転抑制タイマを初期化して（ステップＳ１８
６）、次の移動境界チェック処理に進む。
【０２０３】ステップＳ１８４で反転抑制タイマがゼロ
になっていないと判断された場合には、次の移動境界チ
ェック処理に進む。
【０２０４】続いて、画面の縁で動物を反転させるため
に移動境界チェック処理を行う（ステップＳ７２）。移
動境界チェック処理の詳細は第１の具体例の図２０と同
様であるので、説明を省略する。
【０２０５】ステップＳ７２の移動境界処理により最終
的に次の新しい座標を決定すると、続いて、図３１のス
テップＳ１７３以降の処理に進む。
【０２０６】最初に周囲の色情報に基づいて動物の画像
を切り換える処理を行う。
【０２０７】まず、ステップＳ１７０の進路決定処理に
おいて作成した色情報ワークメモリを参照し、登場して
いる動物の好きな色が周囲に何ドットあるかカウント
し、例えば、４６個以上あるか否か判断する（ステップ
Ｓ１７３）。４６個以上であれば動物の画像を切り換え
る（ステップＳ１７４）。
【０２０８】例えば、カバの場合、好きな水色５３０に
囲まれた場合には水中にあるものと判断し、カバの画像
を、図３５に示す歩いているカバの画像５３２から図３
６の足が水中に没した泳いでいるカバの画像５３４に切
り換える。図３６に示すように、あたかもカバ５３４が
水中５３０を泳いでいるかのように見える。他の動物に
ついても好きな色に囲まれた場合に画像を切り換えるこ
とにより、リアリティのある画像表示を行うことができ
る。
【０２０９】次に、動物が一定時間毎に休憩する処理を
行う。一定時間毎に移動を一時休止し、休憩状態の動物
の画像を表示する。休憩時間が終了すれば再び移動を開
始する。各動物に対して休憩時間タイマを設定してお
く。動物により休憩時間タイマの時間が異なる。
【０２１０】まず、休憩のタイミングか否か判断する
（ステップＳ１７５）。休憩のタイミングであれば、休
憩状態の動物の画像を表示する（ステップＳ１７６）。
休憩のタイミングでなければ、ステップＳ１７８に進
む。
【０２１１】続いて、休憩時間を計測する休憩時間タイ
マがゼロになった否か判断する（ステップＳ１７７）。
休憩時間タイマがゼロであれば、休憩終了の動物の画像
を表示する（ステップＳ１８０）。
【０２１２】次に、動物の画像をクリックすることによ
り鳴き声を発生させる処理を行う。タッチペン２８を操
作して、画面上の動物にカーソルを合わせ、クリックす
ると、その動物が画像を変化して鳴き声を発生する。
【０２１３】まず、動物上にカーソルがあってタッチペ
ン２８がクリックされたか否か判断する（ステップＳ１
７８）。クリックされた場合には、鳴き声を発生する動
物の画像を表示すると共に、鳴き声を発生する（ステッ
プＳ１７９）。
【０２１４】なお、電子カメラ５５を利用して選択する
場合には、選択可能な動物の絵を画面上に表示し、その
中から希望の動物の絵に画面上のカーソルを重ね、カー
ソルを左右に振ることで選択する。
【０２１５】（退場処理）図３３は退場処理のフローチ
ャートである。
【０２１６】まず、絵本の動物の絵がタッチペン２８で
触れられたか否か判断する（ステップＳ１９０）。タッ
チペン２８でどこにも触れられていなかったり、触れら
れても動物の絵の位置でなければ、再び初期化処理（ス
テップＳ１３０）に戻り、上述した処理を繰り返す。
【０２１７】タッチペン２８により動物の絵が触れられ
ていれば、表示されている動物を画面外に退場させる退
場処理を行う。その動物の画像を画面外の所定の位置に
向かって移動する（ステップＳ１９１）。続いて、動物
が画面外に出たか否か判断する（ステップＳ１９２）。
画面外に出ていなければ、再びステップＳ１９１に戻
る。画面外に出ていれば退場処理を終了し、再び初期化
処理（ステップＳ１３０）に戻り、上述した処理を繰り
返す。
【０２１８】このように、遊戯者の指示にしたがって動
物を発生させ、描いた絵の色情報にしたがって移動さ
せ、画像を切り換えたり、休憩させたり、鳴き声を鳴か
せたりといって種々のゲームを行うことができる。
【０２１９】なお、電子カメラ５５を利用する場合に
は、入力手段としてタッチペン２８を用いるか電子カメ
ラ５５を用いるかを選択できるような選択手段又は切換
手段を設けるようにする。この選択手段又は切換手段は
切換スイッチ等のハードウエアとして設けてもよいし、
画面上で選択できるようにするプログラム等のソフトウ
エアとして設けてもよい また、電子カメラ５５による操作入力とタッチペン２８
による操作入力を共に可能なようにして、双方の入力手
段を同時に用いられるようにしてもよい。例えば、子供
はタッチペン２８により操作入力し、親は電子カメラ５
５を利用して操作入力できるようにする。表示画面上に
はそれぞれ独立に操作できるカーソルを表示し、それぞ
れの操作入力に応じた操作表示、例えば、カーソルで線
図を書く入力操作を同じ画面上に表示するようにしても
よい。
【０２２０】［変形実施形態］本発明は上記実施形態に
限らず種々の変形が可能である。
【０２２１】例えば、上記実施形態では幼児用ビデオゲ
ーム装置を用いたが、基本的な構成は上記実施形態と同
様に構成し、他のゲーム装置に本発明を適用してもよ
い。
【０２２２】また、ゲーム装置に限らず、基本的な構成
は上記実施形態と同様に構成し、電子的に絵を書く電子
タブレットのような電子タブレットに本発明を適用して
もよい。
【０２２３】また、基本的な構成は上記実施形態と同様
に構成し、パーソナルコンピュータ等の汎用のコンピュ
ータにおけるゲームプログラムや画像プログラム等の画
像処理に本発明を適用してもよい。
【０２２４】また、基本的な構成は上記実施形態と同様
に構成し、音楽に合わせて操作を行う音楽ゲーム等の他
のゲームに本発明を適用してもよい。
【０２２５】
【発明の効果】以上の通り、本発明によれば、画像を撮
像する撮像手段と、撮像手段により撮像した画像データ
を複数フレーム分記憶する記憶手段と、記憶手段に記憶
された画像データを表示画面上に順次表示する画像表示
手段と、一のフレームの画像データと他のフレームの画
像データとを比較して得られる差分データを算出する差
分算出手段とを有し、差分算出手段により算出された差
分データに基づいて表示画面上に表示する移動体の挙動
を決定するようにしたので、遊戯者等の撮像画像から特
定の情報を得て、その情報に基づいて画像表示を制御す
ることができる。
【図面の簡単な説明】
【図１】本発明の第１実施形態によるビデオゲーム装置
の機能を示すブロック図である。
【図２】本発明の第１実施形態によるビデオゲーム装置
の遊戯方法の第１の具体例を示す説明図である。
【図３】本発明の第１実施形態によるビデオゲーム装置
の遊戯方法の第２の具体例を示す説明図である。
【図４】本発明の第１実施形態によるビデオゲーム装置
の遊戯方法の第３の具体例を示す説明図である。
【図５】本発明の第２実施形態によるビデオゲーム装置
の外観を示す斜視図である。
【図６】本発明の第２実施形態によるビデオゲーム装置
のソフトウエアカートリッジを示す図である。
【図７】本発明の第２実施形態によるビデオゲーム装置
のハードウエアの構成を示すブロック図である。
【図８】本発明の第２実施形態によるビデオゲーム装置
の機能ブロック図である。
【図９】本発明の第２実施形態におけるビデオゲームの
第１の具体例におけるソフトウエアカートリッジの絵本
の絵の一例を示す図である。
【図１０】本発明の第２実施形態におけるビデオゲーム
の第１の具体例における描画処理のフローチャートであ
る。
【図１１】本発明の第２実施形態におけるビデオゲーム
の第１の具体例におけるサンプル絵の一例を示す図であ
る。
【図１２】本発明の第２実施形態におけるビデオゲーム
の第１の具体例におけるキャンパスの絵の一例を示す図
である。
【図１３】本発明の第２実施形態におけるビデオゲーム
の第１の具体例における発音処理のフローチャートであ
る。
【図１４】本発明の第２実施形態におけるビデオゲーム
の第１の具体例における虫移動描画処理のフローチャー
トである。
【図１５】本発明の第２実施形態におけるビデオゲーム
の第１の具体例における初期化処理のフローチャートで
ある。
【図１６】本発明の第２実施形態におけるビデオゲーム
の第１の具体例における待機処理のフローチャートであ
る。
【図１７】本発明の第２実施形態におけるビデオゲーム
の第１の具体例における飛来処理のフローチャートであ
る。
【図１８】本発明の第２実施形態におけるビデオゲーム
の第１の具体例における移動処理のフローチャートであ
る。
【図１９】本発明の第２実施形態におけるビデオゲーム
の第１の具体例における進路決定処理のフローチャート
である。
【図２０】本発明の第２実施形態におけるビデオゲーム
の第１の具体例における移動境界チェック処理のフロー
チャートである。
【図２１】本発明の第２実施形態におけるビデオゲーム
の第１の具体例における飛去処理のフローチャートであ
る。
【図２２】本発明の第２実施形態におけるビデオゲーム
の第１の具体例における進路決定処理の説明図である。
【図２３】本発明の第２実施形態におけるビデオゲーム
の第１の具体例における進路決定処理の説明図である。
【図２４】本発明の第２実施形態におけるビデオゲーム
の第１の具体例におけるキャンパスの絵の一例を示す図
である。
【図２５】本発明の第２実施形態におけるビデオゲーム
の第２の具体例における発音処理のフローチャートであ
る。
【図２６】本発明の第２実施形態におけるビデオゲーム
の第２の具体例におけるサンプル絵の具体例を示す図で
ある。
【図２７】本発明の第２実施形態におけるビデオゲーム
の第２の具体例における動物移動描画処理のフローチャ
ートである。
【図２８】本発明の第２実施形態におけるビデオゲーム
の第２の具体例における初期化処理のフローチャートで
ある。
【図２９】本発明の第２実施形態におけるビデオゲーム
の第２の具体例における待機処理のフローチャートであ
る。
【図３０】本発明の第２実施形態におけるビデオゲーム
の第２の具体例における登場処理のフローチャートであ
る。
【図３１】本発明の第２実施形態におけるビデオゲーム
の第２の具体例における移動処理のフローチャートであ
る。
【図３２】本発明の第２実施形態におけるビデオゲーム
の第２の具体例における速度設定・動物反転処理のフロ
ーチャートである。
【図３３】本発明の第２実施形態におけるビデオゲーム
の第２の具体例における退場処理のフローチャートであ
る。
【図３４】本発明の第２実施形態におけるビデオゲーム
の第２の具体例におけるソフトウエアカートリッジの絵
本の絵の一例を示す図である。
【図３５】本発明の第２実施形態におけるビデオゲーム
の第２の具体例におけるキャンパスの絵の一例を示す図
である。
【図３６】本発明の第２実施形態におけるビデオゲーム
の第２の具体例におけるキャンパスの絵の一例を示す図
である。
【符号の説明】
１０…ゲーム装置本体 １２…ソフトウエアカートリッジ １４…底蓋 １６…上蓋 １８…カートリッジスロット ２０…方向ボタン ２２…実行ボタン ２４…お絵描きタブレット ２６…タッチペンホルダ ２８…タッチペン ２８ａ…ペンボタン ３２…絵本タブレット ３４…パワースイッチ ３６…リジェクトボタン ３８…ページセンサ ４０…綴じリング ４２…ページ ４６…絵本載置部 ４８…回路基板 ５０…基板収納部 ５２…センサ用穴 ５４…プログラムＲＯＭ ５５…電子カメラ ６０…ＭＰＵ ６２…ＲＡＭ ６４…ビデオディスプレイプロセッサ（ＶＤＰ） ６６…ビデオＲＡＭ ７０…映像端子 ７２…音声合成ＬＳＩ ７６…音声端子 ７８…コントローラ ８０…アナログスイッチ ８４…アドレスバス ８６…データバス ８８…コントロールバス ９０…モニタ １００…制御部 １０２…描画制御部 １０３…描画処理部 １０６…移動体描画部 １０７…進路決定部 １１０…バッファメモリ入出力部 １１２…座標変換部 １１４…色情報書込部 １１６…座標変換部 １１８…色情報読取部 １２０…バッファメモリ ２００…ゲーム装置 ２０２…ＣＰＵ ２０４…システムメモリ ２０６…プログラムデータ記憶装置又は記憶媒体 ２０８…ＢＯＯＴＲＯＭ ２１０…バスアービタ ２１２…レンダリングプロセッサ ２１４…グラフィックメモリ ２１６…ディスプレイモニタ ２１８…オーディオプロセッサ ２２０…オーディオメモリ ２２２…スピーカ ２２４…モデム ２２６…コントローラ ２２８…バックアップメモリ ２３０…マイク ２３２…電子カメラ ３００、３１０…遊戯者 ３０２、３０４…移動体 ３１４…指示棒
───────────────────────────────────────────────────── フロントページの続き (51)Int.Cl.7 識別記号 ＦＩ テーマコート゛(参考） Ｇ０６Ｔ 7/20 Ｇ０６Ｔ 7/20 Ｃ Ｈ０４Ｎ 5/232 Ｈ０４Ｎ 5/232 Ｚ 7/18 7/18 Ｐ

Claims (5)

    【特許請求の範囲】
  1. 【請求項１】 画像を撮像する撮像手段と、 前記撮像手段により撮像した画像データを複数フレーム
    分記憶する記憶手段と、 前記記憶手段に記憶された画像データを表示画面上に順
    次表示する画像表示手段と、 一のフレームの画像データと他のフレームの画像データ
    とを比較して得られる差分データを算出する差分算出手
    段とを有し、 前記差分算出手段により算出された差分データに基づい
    て前記表示画面上に表示する移動体の挙動を決定するこ
    とを特徴とする画像処理システム。
  2. 【請求項２】 画像を撮像する撮像手段と、 前記撮像手段により撮像した画像データを複数フレーム
    分記憶する記憶手段と、 前記記憶手段に記憶された画像データを表示画面上に順
    次表示する画像表示手段と、 一のフレームの画像データと他のフレームの画像データ
    とを比較して得られる差分データを算出する差分算出手
    段と、 算出された前記差分データに基づいて遊戯者による操作
    入力と判断する判断手段とを有することを特徴とする画
    像処理システム。
  3. 【請求項３】 撮像手段により撮像した画像データを複
    数フレーム分記憶する記憶手段と、 前記記憶手段に記憶された画像データを表示画面上に順
    次表示する画像表示手段と、 一のフレームの画像データと他のフレームの画像データ
    とを比較して得られる差分データを算出する差分算出手
    段とを有し、 前記差分算出手段により算出された差分データに基づい
    て前記表示画面上に表示する移動体の挙動を決定するこ
    とを特徴とする画像処理装置。
  4. 【請求項４】 撮像手段により撮像した画像データを複
    数フレーム分記憶する記憶手段と、 前記記憶手段に記憶された画像データを表示画面上に順
    次表示する画像表示手段と、 一のフレームの画像データと他のフレームの画像データ
    とを比較して得られる差分データを算出する差分算出手
    段と、 算出された前記差分データに基づいて遊戯者による操作
    入力と判断する判断手段とを有することを特徴とする画
    像処理装置。
  5. 【請求項５】 請求項１又は２記載の画像処理システム
    に用いられ、前記画像データを生成する画像を撮像する
    ことを特徴とする撮像装置。
JP2001039272A 2000-02-15 2001-02-15 画像処理システム、画像処理装置及び撮像装置 Expired - Lifetime JP4006949B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2001039272A JP4006949B2 (ja) 2000-02-15 2001-02-15 画像処理システム、画像処理装置及び撮像装置

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2000-37282 2000-02-15
JP2000037282 2000-02-15
JP2001039272A JP4006949B2 (ja) 2000-02-15 2001-02-15 画像処理システム、画像処理装置及び撮像装置

Publications (3)

Publication Number Publication Date
JP2001307124A true JP2001307124A (ja) 2001-11-02
JP2001307124A5 JP2001307124A5 (ja) 2005-04-14
JP4006949B2 JP4006949B2 (ja) 2007-11-14

Family

ID=26585415

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2001039272A Expired - Lifetime JP4006949B2 (ja) 2000-02-15 2001-02-15 画像処理システム、画像処理装置及び撮像装置

Country Status (1)

Country Link
JP (1) JP4006949B2 (ja)

Cited By (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004280856A (ja) * 2000-10-06 2004-10-07 Sony Computer Entertainment Inc 画像処理装置、画像処理方法、記録媒体、コンピュータプログラム、半導体デバイス
WO2005028053A1 (ja) * 2003-09-18 2005-03-31 Ssd Company Limited 音楽ゲーム装置、音楽ゲームシステム、操作物、音楽ゲームプログラム、及び、音楽ゲーム方法
JP2005144158A (ja) * 2003-10-23 2005-06-09 Shinsedai Kk ゲーム装置、操作物、ゲームシステム、ゲームプログラム、及び、ゲーム方法
JP2005230156A (ja) * 2004-02-18 2005-09-02 Sony Computer Entertainment Inc 画像表示システム、画像処理システム及びビデオゲームシステム
WO2006003869A1 (ja) * 2004-06-30 2006-01-12 Sony Computer Entertainment Inc. プレイヤの画像を用いてオブジェクトを制御する情報処理装置、情報処理装置におけるオブジェクト制御方法
WO2006003870A1 (ja) * 2004-06-30 2006-01-12 Sony Computer Entertainment Inc. プレイヤの画像を用いてゲームキャラクタの移動を制御する情報処理装置、ゲームキャラクタ移動制御方法
WO2006059743A1 (en) * 2004-12-03 2006-06-08 Ssd Company Limited Boxing game processing method, display control method, position detection method, cursor control method, energy consumption calculating method and exercise system
WO2006098255A1 (ja) * 2005-03-15 2006-09-21 Shunsuke Nakamura 画像表示方法およびその装置
GB2438449A (en) * 2006-05-24 2007-11-28 Sony Comp Entertainment Europe Control of data processing in dependence on detection of motion in an image region associated with a processor control function
JP2010142592A (ja) * 2008-12-22 2010-07-01 Nintendo Co Ltd ゲームプログラムおよびゲーム装置
JP2011036483A (ja) * 2009-08-12 2011-02-24 Hiroshima Industrial Promotion Organization 画像生成システム、制御プログラム、及び記録媒体
JP2012040435A (ja) * 2011-11-30 2012-03-01 Sony Computer Entertainment Inc ゲーム装置および仮想オブジェクト制御方法
US8152637B2 (en) 2004-02-18 2012-04-10 Sony Computer Entertainment Inc. Image display system, information processing system, image processing system, and video game system
JP2013048924A (ja) * 2012-11-07 2013-03-14 Nintendo Co Ltd ゲームプログラムおよびゲーム装置
WO2013117977A3 (en) * 2012-02-06 2013-12-19 Sony Computer Entertainment Europe Book object for augmented reality
JP2014237016A (ja) * 2014-07-28 2014-12-18 株式会社クラス・マイスター ゲーム装置の制御プログラム
WO2019123509A1 (ja) * 2017-12-18 2019-06-27 ガンホー・オンライン・エンターテイメント株式会社 端末装置、システム、プログラム及び方法
CN115500740A (zh) * 2022-11-18 2022-12-23 科大讯飞股份有限公司 清洁机器人及清洁机器人控制方法

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9384329B2 (en) 2010-06-11 2016-07-05 Microsoft Technology Licensing, Llc Caloric burn determination from body movement

Cited By (34)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004280856A (ja) * 2000-10-06 2004-10-07 Sony Computer Entertainment Inc 画像処理装置、画像処理方法、記録媒体、コンピュータプログラム、半導体デバイス
JP4615252B2 (ja) * 2000-10-06 2011-01-19 株式会社ソニー・コンピュータエンタテインメント 画像処理装置、画像処理方法、記録媒体、コンピュータプログラム、半導体デバイス
WO2005028053A1 (ja) * 2003-09-18 2005-03-31 Ssd Company Limited 音楽ゲーム装置、音楽ゲームシステム、操作物、音楽ゲームプログラム、及び、音楽ゲーム方法
JP4701411B2 (ja) * 2003-09-18 2011-06-15 新世代株式会社 音楽ゲーム装置、音楽ゲームシステム、操作物、音楽ゲームプログラム、及び、音楽ゲーム方法
JPWO2005028053A1 (ja) * 2003-09-18 2006-11-30 新世代株式会社 音楽ゲーム装置、音楽ゲームシステム、操作物、音楽ゲームプログラム、及び、音楽ゲーム方法
JP2005144158A (ja) * 2003-10-23 2005-06-09 Shinsedai Kk ゲーム装置、操作物、ゲームシステム、ゲームプログラム、及び、ゲーム方法
JP4735802B2 (ja) * 2003-10-23 2011-07-27 新世代株式会社 ゲーム装置、ゲームプログラム、及び、ゲーム装置の制御方法
US7690975B2 (en) 2004-02-18 2010-04-06 Sony Computer Entertainment Inc. Image display system, image processing system, and video game system
JP2005230156A (ja) * 2004-02-18 2005-09-02 Sony Computer Entertainment Inc 画像表示システム、画像処理システム及びビデオゲームシステム
US8152637B2 (en) 2004-02-18 2012-04-10 Sony Computer Entertainment Inc. Image display system, information processing system, image processing system, and video game system
US7911447B2 (en) 2004-06-30 2011-03-22 Sony Computer Entertainment Inc. Information processing device for controlling object by using player image and object control method in the information processing device
US7959511B2 (en) 2004-06-30 2011-06-14 Sony Computer Entertainment Inc. Information processing device for controlling movement of a game character by using a player image and game character movement control method
WO2006003869A1 (ja) * 2004-06-30 2006-01-12 Sony Computer Entertainment Inc. プレイヤの画像を用いてオブジェクトを制御する情報処理装置、情報処理装置におけるオブジェクト制御方法
WO2006003870A1 (ja) * 2004-06-30 2006-01-12 Sony Computer Entertainment Inc. プレイヤの画像を用いてゲームキャラクタの移動を制御する情報処理装置、ゲームキャラクタ移動制御方法
WO2006059743A1 (en) * 2004-12-03 2006-06-08 Ssd Company Limited Boxing game processing method, display control method, position detection method, cursor control method, energy consumption calculating method and exercise system
WO2006098255A1 (ja) * 2005-03-15 2006-09-21 Shunsuke Nakamura 画像表示方法およびその装置
US8654099B2 (en) 2006-05-24 2014-02-18 Sony Computer Entertainment Europe Limited Control of data processing based on inter-image motion detection
GB2438449A (en) * 2006-05-24 2007-11-28 Sony Comp Entertainment Europe Control of data processing in dependence on detection of motion in an image region associated with a processor control function
GB2438449B (en) * 2006-05-24 2010-01-27 Sony Comp Entertainment Europe Control of data processing
JP2009537923A (ja) * 2006-05-24 2009-10-29 ソニー コンピュータ エンタテインメント ヨーロッパ リミテッド データ処理の制御
JP2010142592A (ja) * 2008-12-22 2010-07-01 Nintendo Co Ltd ゲームプログラムおよびゲーム装置
US9220976B2 (en) 2008-12-22 2015-12-29 Nintendo Co., Ltd. Storage medium storing game program, and game device
JP2011036483A (ja) * 2009-08-12 2011-02-24 Hiroshima Industrial Promotion Organization 画像生成システム、制御プログラム、及び記録媒体
JP2012040435A (ja) * 2011-11-30 2012-03-01 Sony Computer Entertainment Inc ゲーム装置および仮想オブジェクト制御方法
WO2013117977A3 (en) * 2012-02-06 2013-12-19 Sony Computer Entertainment Europe Book object for augmented reality
CN104245067A (zh) * 2012-02-06 2014-12-24 索尼电脑娱乐欧洲有限公司 用于增强现实的书对象
US9310882B2 (en) 2012-02-06 2016-04-12 Sony Computer Entertainment Europe Ltd. Book object for augmented reality
JP2013048924A (ja) * 2012-11-07 2013-03-14 Nintendo Co Ltd ゲームプログラムおよびゲーム装置
JP2014237016A (ja) * 2014-07-28 2014-12-18 株式会社クラス・マイスター ゲーム装置の制御プログラム
WO2019123509A1 (ja) * 2017-12-18 2019-06-27 ガンホー・オンライン・エンターテイメント株式会社 端末装置、システム、プログラム及び方法
JPWO2019123509A1 (ja) * 2017-12-18 2019-12-26 ガンホー・オンライン・エンターテイメント株式会社 端末装置、システム、プログラム及び方法
US10748341B2 (en) 2017-12-18 2020-08-18 GungHo Online Entertainment, Inc. Terminal device, system, program and method for compositing a real-space image of a player into a virtual space
CN115500740A (zh) * 2022-11-18 2022-12-23 科大讯飞股份有限公司 清洁机器人及清洁机器人控制方法
CN115500740B (zh) * 2022-11-18 2023-04-18 科大讯飞股份有限公司 清洁机器人及清洁机器人控制方法

Also Published As

Publication number Publication date
JP4006949B2 (ja) 2007-11-14

Similar Documents

Publication Publication Date Title
KR100395719B1 (ko) 화상처리방법및전자장치
JP4006949B2 (ja) 画像処理システム、画像処理装置及び撮像装置
US8574069B2 (en) Hand-held game apparatus and game program
US8016671B2 (en) Game apparatus and storage medium storing game program
US7938721B2 (en) Game apparatus, game program, storage medium storing game program and game control method
JP5436912B2 (ja) プログラム、情報記憶媒体及びゲーム装置
US8267761B2 (en) Storage medium having game program stored therein and game apparatus
JP5274187B2 (ja) 画像処理プログラム、情報処理装置、画像処理方法、および画像処理システム
JP2007195830A (ja) ゲーム装置およびゲームプログラム
US20120196681A1 (en) Game system and game program medium
US20100185981A1 (en) Display controlling program and display controlling apparatus
JP2009240794A (ja) 情報再生装置及び情報入力装置
JP2011258158A (ja) プログラム、情報記憶媒体及び画像生成システム
US6793576B2 (en) Methods and apparatus for causing a character object to overcome an obstacle object
JP2008186441A (ja) 画像処理装置及び画像処理システム
JP2005319191A (ja) ゲームシステム、プログラム、情報記憶媒体および画像生成方法
JP4371182B2 (ja) ゲーム装置、これに使用する入力手段、及び記憶媒体
JP2972346B2 (ja) 画像処理方法及び電子装置
JP2010263951A (ja) プログラム、情報記憶媒体及び電子機器
JP5213913B2 (ja) プログラム及び画像生成システム
JPH11339057A (ja) 画像処理方法及び電子装置
CN109040721B (zh) 客制化动态影音场景生成系统
JP5168835B2 (ja) ゲーム装置の表示処理方法、ゲーム装置、記憶媒体及びそのゲームプログラム
JP2002210233A (ja) エンタテインメント装置、記録媒体及びプログラム
US9230293B2 (en) Display controlling program and display controlling apparatus

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20040604

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20040604

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20061214

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20070109

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20070307

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20070508

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20070530

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20070711

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20070807

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20070820

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100907

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Ref document number: 4006949

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110907

Year of fee payment: 4

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120907

Year of fee payment: 5

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120907

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120907

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120907

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130907

Year of fee payment: 6

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130907

Year of fee payment: 6

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

S533 Written request for registration of change of name

Free format text: JAPANESE INTERMEDIATE CODE: R313533

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

EXPY Cancellation because of completion of term