JP3499203B2 - オーディオ処理・画像発生装置、オーディオ処理・画像発生方法および記録媒体 - Google Patents

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】この発明は、モニタ画面上に
おいて音楽に関連する新規な線画画像を表示させること
を可能とするオーディオ処理・画像発生装置、オーディ
オ処理・画像発生方法および記録媒体に関する。

【０００２】

【従来の技術】ビデオゲーム機を含むエンタテインメン
ト装置のような情報機器（エンタテインメントシステ
ム）として、たとえば、ＣＤ−ＲＯＭ等の記録媒体に格
納されたゲーム内容をモニタとしてのテレビジョン受像
機の画面上に表示させながら、操作装置で操作してゲー
ムを進行させるものがある。

【０００３】

【発明が解決しようとする課題】ところで、現在、市場
に提供されているゲーム映像のリアル化、高度化、精緻
化が推進され、また、これに対応して操作装置に振動を
与えたり、ボタン入力のアナログ化等が進展し、ゲーム
等が一層面白くなる可能性を有しているが、ゲームの難
易度が増加し、全ての使用者がゲームをクリアすること
ができない等の状況が発生している。しかも、これらの
ゲームは、一旦、クリアされ、その操作に慣れてしまう
と飽きられるおそれがある。

【０００４】その一方、画面に線画画像のみを表示する
ゲームは、ほのぼのとした感じがあり、低年齢層から高
年齢層まで、幅広い年齢層に対応するという可能性を有
している。

【０００５】また、音楽は、さまざまなジャンルがあ
り、万人に受け入れられる可能性を有している。

【０００６】 この発明はこのような課題を考慮してな
されたものであり、モニタ画面上に音楽に関連する新規
な線画画像を表示させることを可能とするオーディオ処
理・画像発生装置、オーディオ処理・画像発生方法およ
び記録媒体を提供することを目的とする。

【０００７】

【課題を解決するための手段】この発明のオーディオ処
理・画像発生装置は、オーディオ信号を解析するオーデ
ィオ信号解析手段と、オーディオ信号解析結果に基づ
き、線画画像を発生する線画画像発生手段とを備え、前
記線画画像は、表示画面上、画面の左側から右側に延び
る略直線状の線画画像中に、前記オーディオ信号解析結
果に応じた非直線の線画画像が含まれた画像であること
を特徴とする（請求項１記載の発明）。

【０００８】 この発明のオーディオ処理・画像発生方
法、この発明のプログラムが格納された記録媒体は、そ
れぞれ、オーディオ信号を解析するオーディオ信号解析
ステップと、オーディオ信号解析結果に基づき、線画画
像を発生する線画画像発生ステップとを備え、前記線画
画像は、表示画面上、画面の左側から右側に延びる略直
線状の線画画像中に、前記オーディオ信号解析結果に応
じた非直線の線画画像が含まれた画像であることを特徴
とする（請求項９および１７記載の発明）。

【０００９】 請求項１、９および１７記載の発明によ
れば、オーディオ信号解析結果に基づき、線画画像を発
生するようにしているので、音楽に関連する新規な線画
画像を発生することができる。また、線画画像を、表示
画面上、画面の左側から右側に延びる略直線状の線画画
像中に、前記周波数分析結果に応じた非直線の線画画像
が含まれた画像とすることで、線画画像の内容に多様性
を持たせることができる。

【００１０】 ここで、前記非直線の線画画像を、複数
の操作部を有する操作装置中、特定の操作部の操作入力
タイミングを操作者に知らせる画像とすることができる
（請求項２、１０および１８記載の発明）。

【００１１】この発明のオーディオ処理・画像発生装置
は、オーディオ信号を解析するオーディオ信号解析手段
と、オーディオ信号解析結果に基づき、画像を発生する
画像発生手段とを備え、前記画像は、複数の操作部を有
する操作装置中、特定の操作部の操作入力タイミングを
操作者に知らせる画像であることを特徴とする（請求項
３記載の発明）。

【００１２】 この発明のオーディオ処理・画像発生方
法、この発明のプログラムが格納された記録媒体は、そ
れぞれ、オーディオ信号を解析するオーディオ信号解析
ステップと、オーディオ信号解析結果に基づき、画像を
発生する画像発生ステップとを有し、前記画像は、複数
の操作部を有する操作装置中、特定の操作部の操作入力
タイミングを操作者に知らせる画像であることを特徴と
する（請求項１１および１９記載の発明）。

【００１３】 ここで、前記操作入力タイミングを、前
記オーディオ信号に基づく音楽にあったタイミングとす
ることができる（請求項４、１２および２０記載の発
明）。

【００１４】この発明のオーディオ処理・画像発生装置
は、オーディオ信号を解析するオーディオ信号解析手段
と、オーディオ信号解析結果に基づき、線画画像を発生
する線画画像発生手段とを備え、前記オーディオ信号解
析手段は、一定時間分のオーディオ信号における音の振
幅のピーク値を大きい方から順番に所定個抽出し、前記
線画画像発生手段は、抽出した前記所定個に対応して所
定の線画画像を発生することを特徴とする（請求項５記
載の発明）。

【００１５】 この発明のオーディオ処理・画像発生方
法、この発明のプログラムが格納された記録媒体は、そ
れぞれ、オーディオ信号を解析するオーディオ信号解析
ステップと、オーディオ信号解析結果に基づき、線画画
像を発生する線画画像発生ステップとを有し、前記オー
ディオ信号解析ステップは、一定時間分のオーディオ信
号における音の振幅のピーク値を大きい方から順番に所
定個抽出し、前記線画画像発生ステップは、抽出した前
記所定個に対応して所定の線画画像を発生することを特
徴とする（請求項１３および２１記載の発明）。

【００１６】この発明のオーディオ処理・画像発生装置
は、オーディオ信号を解析するオーディオ信号解析手段
と、オーディオ信号解析結果に基づき、線画画像を発生
する線画画像発生手段とを備え、前記オーディオ信号解
析手段は、一定時間分のオーディオ信号における音の振
幅のピーク値を大きい方から順番に所定個抽出し、抽出
した所定個のピーク値の隣り合うピーク間の正の傾きと
負の傾きからなる傾きの組み合わせを決定し、前記線画
画像発生手段は、前記正負の傾きの組み合わせに対応し
て所定の線画画像を発生することを特徴とする（請求項
６記載の発明）。

【００１７】 この発明のオーディオ処理・画像発生方
法、この発明のプログラムが格納された記録媒体は、そ
れぞれ、オーディオ信号を解析するオーディオ信号解析
ステップと、オーディオ信号解析結果に基づき、線画画
像を発生する線画画像発生ステップとを有し、前記オー
ディオ信号解析ステップは、一定時間分のオーディオ信
号における音の振幅のピーク値を大きい方から順番に所
定個抽出し、抽出した所定個のピーク値の隣り合うピー
ク間の正の傾きと負の傾きからなる傾きの組み合わせを
決定し、前記線画画像発生ステップは、前記正負の傾き
の組み合わせに対応して所定の線画画像を発生すること
を特徴とする（請求項１４および２２記載の発明）。

【００１８】この発明のオーディオ処理・画像発生装置
は、オーディオ信号を解析するオーディオ信号解析手段
と、オーディオ信号解析結果に基づき、線画画像を発生
する線画画像発生手段とを備え、前記オーディオ信号解
析手段は、一定時間分のオーディオ信号に対して高速フ
ーリエ変換を施して周波数スペクトラムを検出し、検出
した周波数スペクトラム中、所定周波数以上と未満とで
それぞれ複数のピーク値を検出して、上記所定周波数以
上の周波数領域と上記所定周波数未満の周波数領域と
で、それぞれ検出したピーク値を大きい順に並べ、それ
ぞれ所定番目までの各所定個のピーク値に係る周波数の
配列順番を決定し、前記線画画像発生手段は、前記配列
順番に対応して所定の線画画像を発生することを特徴と
する（請求項７記載の発明）。

【００１９】 この発明のオーディオ処理・画像発生方
法およびこの発明のプログラムが格納された記録媒体
は、それぞれ、オーディオ信号を解析するオーディオ信
号解析ステップと、オーディオ信号解析結果に基づき、
線画画像を発生する線画画像発生ステップとを有し、前
記オーディオ信号解析ステップは、一定時間分のオーデ
ィオ信号に対して高速フーリエ変換を施して周波数スペ
クトラムを検出し、検出した周波数スペクトラム中、所
定周波数以上と未満とでそれぞれ複数のピーク値を検出
して、上記所定周波数以上の周波数領域と上記所定周波
数未満の周波数領域とで、それぞれ検出したピーク値を
大きい順に並べ、それぞれ所定番目までの各所定個のピ
ーク値に係る周波数の配列順番を決定し、前記線画画像
発生ステップは、前記配列順番に対応して所定の線画画
像を発生することを特徴とする（請求項１５および２３
記載の発明）。

【００２０】 オーディオ信号解析手段により、一定時
間内のオーディオ信号を周波数分析あるいは振幅分析す
ることで、オーディオ信号を簡単に処理でき、しかも簡
単な処理で、多様な線画画像を発生させることができる
（請求項５、６、７、１３、１４、１５、２１、２２お
よび２３記載の発明）。

【００２１】 画像および線画画像を、３次元線画画像
とすることにより、よりエンタテインメント性の高い線
画画像とすることができる（請求項８、１６および２４
記載の発明）。

【００２２】

【００２３】

【００２４】

【００２５】

【００２６】

【００２７】

【００２８】

【００２９】

【発明の実施の形態】以下、この発明の一実施の形態に
ついて図面を参照して説明する。

【００３０】図１は、この一実施の形態に係るオーディ
オ処理・画像発生装置が適用されたエンタテインメント
システム１０の全体的な構成を示している。

【００３１】このエンタテインメントシステム１０は、
基本的には、各種プログラムを実行させるエンタテイン
メント装置１２と、該エンタテインメント装置１２に対
して着脱自在とされるメモリカード１４と、エンタテイ
ンメント装置１２に対してコネクタ６２により着脱自在
とされた操作装置（コントローラ）１６と、エンタテイ
ンメント装置１２からの映像・音声信号が供給されるテ
レビジョン受像機等の表示装置であるモニタ（ディスプ
レイ）１８とから構成される。

【００３２】エンタテインメント装置１２は、たとえ
ば、ＣＤ−ＲＯＭ等の光ディスク２０等の大容量記憶媒
体に記憶されているプログラムおよびデータを読み出し
て、使用者（ユーザ：たとえばゲームプレイヤ等）から
の指示に応じてゲーム等を実行するためのものである。
なお、ゲームの実行とは、主として、操作装置１６から
の入力をコネクタ６２を通じて受け、モニタ１８上にお
ける表示や音声を制御しながらゲームの進行を制御する
ことをいう。

【００３３】なお、エンタテインメント装置１２は、光
ディスク２０として記憶媒体であるＣＤ（compact-dis
k）を再生することも可能であり、この場合には、ＣＤ
に記憶されているＴＯＣ（table of contents）データ
を参照してオーディオ信号としての音楽データ（楽音デ
ータともいう。）が読み出されて再生される。

【００３４】後に説明するように、このエンタテインメ
ント装置１２では、ＣＤに記憶されているＴＯＣデータ
や音楽データを利用してゲームを実行することも可能で
ある。

【００３５】なお、アプリケーションプログラムや音楽
データを供給するための記録媒体は光ディスク２０に限
定されるものではなく、通信回線を介して供給されるよ
うにしてもよい。

【００３６】このエンタテインメント装置１２は、ほぼ
扁平な直方体状の形状を有しており、その中央部にビデ
オゲーム等のアプリケーションプログラムやデータが記
憶されこれらを供給するための光ディスク２０が装着さ
れるディスク装着部２２と、現在実行中のプログラムを
任意にリセットとするためのリセットスイッチ２４と、
光ディスク２０の装着を操作するためのディスク操作ス
イッチ２６と、電源スイッチ２８と、たとえば２つのス
ロット部３０、３２とを備えて構成されている。

【００３７】スロット部３０、３２は、それぞれ上側の
スロット部３０Ｂ、３２Ｂと下側のスロット部３０Ａ、
３２Ａとを備えており、下側のスロット部３０Ａ、３２
Ａには、それぞれ操作装置１６をコネクタ６２を介して
接続することができ、上側のスロット部３０Ｂ、３２Ｂ
には、それぞれゲーム等の途中状態を示すフラグ等を記
憶することの可能なメモリカード１４を装着することが
できるようになっている。

【００３８】なお、スロット部３０（３０Ａ、３０
Ｂ）、３２（３２Ａ、３２Ｂ）は、それぞれ誤挿入を回
避するために非対称の形状とされている。

【００３９】操作装置１６は、図１と図２に示すよう
に、基本的には、第１および第２の操作部３４、３６
と、Ｌボタン３８ＬおよびＲボタン３８Ｒと、スタート
ボタン４０と、選択ボタン４２と、アナログ操作が可能
な左右の回転操作子４４、４６と、これらの回転操作子
４４、４６の操作モードを選択するモード選択スイッチ
４８と、選択された操作モードを表示するための表示部
５０とを有している。表示部５０は、発光ダイオード等
の発光素子によって構成される。

【００４０】また、この操作装置１６は、図２に示すよ
うに、上ハーフ１００と下ハーフ１０２を互いに付き合
わせ、ねじ等の固定手段を用いて結合された操作装置本
体１０４を有する。

【００４１】図２に示すように、操作装置本体１０４の
端部側には、この操作装置１６をエンタテインメント装
置１２に接続して、たとえばゲームの実行や情報の検索
を実行するとき、左右の手のひらで内包するように把持
される左右の把持部１０６および１０８が突き出すよう
に設けられている。

【００４２】これら左右の把持部１０６、１０８は、図
１に示すように、先端部側に向かって互いに離間すると
ともに操作装置本体１０４の下方側に向くように配置さ
れている。

【００４３】図２に示すように、操作装置本体１０４の
上面側の一方には、その上面側に突き出る第１〜第４の
押圧操作子１１０ａ〜１１０ｄを互いに直交するように
配列した前記第１の操作部３４が配設されている。

【００４４】第１の操作部３４には、第１〜第４の押圧
操作子１１０ａ〜１１０ｄに対応してそれぞれ内部に信
号入力素子としてのスイッチ素子が設けられる。第１の
操作部３４は、たとえば表示キャラクタの移動を制御す
る方向指示制御部として機能するものであり、第１〜第
４の押圧操作子１１０ａ〜１１０ｄを選択的に押圧操作
し、これら押圧操作子１１０ａ〜１１０ｄに対応するス
イッチ素子をオン／オフさせることにより、画面上のた
とえば表示キャラクタが押圧操作された各押圧操作子１
１０ａ〜１１０ｄの配列方向に移動することになる。一
般には、押圧操作子１１０ａは「↑」上方向、押圧操作
子１１０ｂは「→」右方向、押圧操作子１１０ｃは
「←」左方向、押圧操作子１１０ｄは「↓」下方向への
移動を示す。その意味から、第１〜第４の押圧操作子１
１０ａ〜１１０ｄを、それぞれ上ボタン１１０ａ、右ボ
タン１１０ｂ、左ボタン１１０ｃおよび下ボタン１１０
ｄともいう。

【００４５】また、操作装置本体１０４の上面側の他方
には、その上面側に突き出る第１〜第４の押圧操作子１
１２ａ〜１１２ｄを互いに直交するように配列した第２
の操作部３６が配設されている。

【００４６】これら第１〜第４の押圧操作子１１２ａ〜
１１２ｄは、それぞれ独立の部材として形成され、各押
圧操作子１１２ａ〜１１２ｄに対応して信号入力素子と
してのスイッチ素子が内部に設けられる。

【００４７】第２の操作部３６は、たとえば第１〜第４
の押圧操作子１１２ａ〜１１２ｄに対応したスイッチを
オン操作することによって、たとえば各押圧操作子１１
２ａ〜１１２ｄに割り付けられた表示キャラクタの機能
を設定し、あるいは表示キャラクタが有する機能を実行
する機能設定実行部として用いられる。

【００４８】なお、第１〜第４の押圧操作子１１２ａ〜
１１２ｄは、それぞれ△ボタン１１２ａ、○ボタン１１
２ｂ、×ボタン１１２ｃおよび□ボタン１１２ｄともい
う。

【００４９】また、操作装置本体１０４の前面側には左
右にＬボタン３８ＬおよびＲボタン３８Ｒが配設されて
いる。Ｌボタン３８ＬおよびＲボタン３８Ｒは、図２に
示すように、それぞれ第１および第２の押圧操作子１１
４ａ、１１４ｂおよび１１６ａ、１１６ｂを備えてい
る。

【００５０】これら各押圧操作子１１４ａ、１１４ｂ、
１１６ａ、１１６ｂには、それぞれに対応して内部にス
イッチ素子が設けられている。

【００５１】Ｌボタン３８ＬおよびＲボタン３８Ｒは、
たとえば第１および第２の押圧操作子１１４ａ、１１４
ｂ、１１６ａ、１１６ｂに対応したスイッチをオン操作
することによって、たとえば各押圧素子１１４ａ、１１
４ｂ、１１６ａ、１１６ｂに割り付けられた表示キャラ
クタの機能を設定し、あるいは表示キャラクタが有する
機能を実行する機能設定実行部として用いられる。

【００５２】この場合、第１の押圧操作子１１４ａはＬ
１ボタン１１４ａ、第２の押圧操作子１１４ｂはＬ２ボ
タン１１４ｂ、第１の押圧操作子１１６ａはＲ１ボタン
１１６ａ、第２の押圧操作子１１６ｂはＲ２ボタン１１
６ｂともいう。

【００５３】また、この操作装置１６は、図２に示すよ
うに、左右の把持部１０６、１０８の基端部側の相対向
する位置に左右のアナログ操作部１１８、１２０が配設
されている。

【００５４】これら左右のアナログ操作部１１８、１２
０は、操作軸を中心に３６０度方向に回転可能な左右の
回転操作子４４、４６と、これら左右の回転操作子４
４、４６によって操作される内部の可変抵抗素子等の信
号入力素子を備えている。すなわち、左右の回転操作子
４４、４６は、弾性部材により中立位置に復帰するよう
に取り付けられた操作軸の先端側に取り付けられ、操作
軸の回転支点を中心に３６０度方向に回転操作される。

【００５５】これら左右のアナログ操作部１１８、１２
０は、左右の回転操作子４４、４６を回転操作すること
により、たとえば表示キャラクタを回転しながら移動さ
せ、あるいは速度を可変しながら移動させ、さらには形
態を変更させる等のアナログ的な動きを行うことを可能
とする指令信号を入力することが可能な操作部として用
いられる。

【００５６】そして、モード選択スイッチ４８の切換操
作によって、たとえばアナログ操作部１１８、１２０か
らの指令信号の入力を可能とする操作モードと、左右の
アナログ操作部１１８、１２０からの指令信号の入力を
禁止する操作モードが選択される。

【００５７】前記モード選択スイッチ４８の切換操作に
よって、さらに、左右のアナログ操作部１１８、１２０
からの指令信号の入力を可能とするとともに、第２の操
作部３６の第１〜第４の押圧操作子１１２ａ〜１１２ｄ
の機能とＬボタン３８Ｌ、Ｒボタン３８Ｒの第１および
第２の押圧操作子１１４ａ、１１４ｂ、１１６ａ、１１
６ｂの機能の切換を行った操作モードの選択が行われ
る。これら操作モードの状態に応じて表示部５０が点滅
され、されに表示光の切換が行われる。

【００５８】上述したように、操作装置本体１０４から
左右の把持部１０６、１０８が突き出すように設けられ
た操作装置１６は、図２に示すように、左右の把持部１
０６、１０８を両手の手のひらで包み込むように把持す
ることにより、操作装置本体１０４を指で指示する必要
がなくなり、両手の最大１０本の指、少なくとも６本の
指を自由に動かせる状態で把持することができる。

【００５９】図２に示すように、たとえば左右の把持部
１０６、１０８を両手の手のひらで包み込むように把持
したとき、左右の手Ｒｆ、Ｌｆの各親指Ｒｆ１、Ｌｆ１
をそれぞれ左右のアナログ操作部１１８、１２０の左右
の回転操作子４４、４６上、第１の操作部３４の第１〜
第４の押圧操作子１１０ａ〜１１０ｄ上および第２の操
作部３６の第１〜第４の押圧操作子１１２ａ〜１１２ｄ
上に延在させ、これら各回転操作子４４、４６、各押圧
操作子１１０ａ〜１１０ｄ、１１２ａ〜１１２ｄを選択
的に押圧することができる。

【００６０】特に、左右のアナログ操作部１１８、１２
０の各回転操作子４４、４６は、両手の手のひらで包み
込むように把持される左右の把持部１０６、１０８の操
作装置本体１０４への連結部である基端部側に相対向し
て配置されているので、左右の把持部１０６、１０８を
左右の手Ｒｆ、Ｌｆによって把持したとき、左右の手Ｒ
ｆ、Ｌｆの各親指Ｒｆ１、Ｌｆ１に最も近い位置に延在
させる。したがって、各回転操作子４４、４６は、左右
の手Ｒｆ、Ｌｆの親指Ｒｆ１、Ｌｆ１により容易に回転
操作されることが可能となる。

【００６１】また、図２に示すように、左右の把持部１
０６、１０８を、両手の手のひらで包み込むように把持
したとき、左右の手Ｒｆ、Ｌｆの人差し指Ｒｆ２、Ｌｆ
２および中指Ｒｆ３、Ｌｆ３をＲボタン３８ＲおよびＬ
ボタン３８Ｌの第１および第２の押圧操作子１１６ａ、
１１６ｂ、１１４ａ、１１４ｂを選択的に押圧操作可能
とする位置に延在させることができる。

【００６２】なお、操作装置１６には、図示していない
駆動モータ等からなる振動付与機構が設けられ、ゲーム
の進行状態等に応じてエンタテインメント装置１２側か
ら振動付与機構に対して振動指令が発行される。

【００６３】次に、エンタテインメント装置１２と操作
装置１６の回路構成について説明する。

【００６４】図３は、エンタテインメント装置１２の主
要部の概略的な回路構成の一例を含むエンタテインメン
トシステム１０の構成を示している。

【００６５】エンタテインメント装置１２は、中央演算
処理装置（ＣＰＵ：Central Processing Unit ）２５１
及びその周辺機器等からなる制御系２５０と、フレーム
バッファ２６３に描画を行う画像処理装置（ＧＰＵ：Gr
aphic Processing Unit ）２６２等からなるグラフィッ
クシステム２６０と、楽音、効果音等を発生する音声処
理装置（ＳＰＵ：Sound Processing Unit ）２７１等か
らなるサウンドシステム２７０と、アプリケーションプ
ログラムが記録されている光ディスク２０の制御を行う
光ディスク制御部２８０と、使用者からの指示が入力さ
れる操作装置１６からの信号及びゲームの設定等を記録
するメモリカード１４や、携帯用電子機器からのデータ
の入出力を制御する通信制御部２９０と、上記の各部が
接続されているバスＢＵＳ等を備えて構成されている。

【００６６】上記の制御系２５０は、ＣＰＵ２５１と、
割り込み制御やダイレクトメモリアクセス（ＤＭＡ：Di
rect Memory Access）転送の制御等を行う周辺機器制御
部２５２と、ランダムアクセスメモリ（ＲＡＭ：Random
Access Memory）からなるメインメモリ（主記憶装置）
２５３と、このメインメモリ２５３、グラフィックシス
テム２６０、サウンドシステム２７０等の管理を行うい
わゆるオペレーティングシステム等のプログラムが格納
されたリードオンリーメモリ（ＲＯＭ：Read Only Memo
ry）２５４とを備えている。なお、ここでいうメインメ
モリ２５３は、そのメモリ上でプログラムを実行できる
ものをいう。

【００６７】上記のＣＰＵ２５１は、ＲＯＭ２５４に記
憶されているオペレーティングシステムを実行すること
により、このエンタテインメント装置１２の全体を制御
するもので、例えば３２ビットのＲＩＳＣ−ＣＰＵから
なる。

【００６８】そして、このエンタテインメント装置１２
は、電源が投入されると、上記の制御系２５０のＣＰＵ
２５１がＲＯＭ２５４に記憶されているオペレーティン
グシステムを実行することにより、ＣＰＵ２５１が、上
記のグラフィックシステム２６０、サウンドシステム２
７０等の制御を行うようになっている。また、オペレー
ティングシステムが実行されると、ＣＰＵ２５１は、動
作確認等のエンタテインメント装置１２全体の初期化を
行った後、上記の光ディスク制御部２８０を制御して、
ディスク装着部２２（図１参照）内に装着収容された光
ディスク２０に記録されているゲーム等のアプリケーシ
ョンプログラムを実行する。このゲーム等のプログラム
の実行により、ＣＰＵ２５１は、使用者からの入力に応
じて上記のグラフィックシステム２６０、サウンドシス
テム２７０等を制御して、画像の表示、効果音、音楽
（楽音ともいう。）の発生を制御する。

【００６９】また、上記のグラフィックシステム２６０
は、透視投影変換を含む座標変換等の処理を行うジオメ
トリトランスファエンジン（ＧＴＥ：Geometry Transfe
r Engine）２６１と、ＣＰＵ２５１からの描画指示に従
って描画を行うＧＰＵ２６２と、このＧＰＵ２６２によ
り描画された画像を記憶するとともに、原則として垂直
同期信号等の画面切替信号（画像切替）の発生毎に画像
が更新されるフレームバッファ２６３と、離散コサイン
変換等の直交変換により圧縮されて符号化された画像デ
ータを復号する画像デコーダ２６４とを備えている。こ
の場合、フレームバッファ２６３に描画された画像がＧ
ＰＵ２６２を介してビデオ出力とされ、このビデオ出力
が出力端子を介してテレビジョン受像機等のモニタ１８
の表示部１８Ａに供給される。表示部１８Ａの画面（ス
クリーン）に表示された画像（３次元画像を含む。）
は、垂直同期信号毎に更新される。

【００７０】上記のＧＴＥ２６１は、例えば複数の演算
を並列に実行する並列演算機構を備え、上記のＣＰＵ２
５１からの演算要求に応じて座標変換（透視投影を実行
するために、３次元空間上の画像を２次元空間上の画像
に変換する透視投影変換を含む）、光源計算、行列ある
いはベクトル等の演算を高速に行うことができるように
なっている。具体的には、このＧＴＥ２６１は、例えば
１つの三角形状のポリゴンに同じ色で描画するフラット
シェーディングを行う演算の場合では、１秒間に最大１
５０万程度のポリゴンの座標演算を行うことができるよ
うになっており、これによって、このエンタテインメン
ト装置１２では、ＣＰＵ２５１の負荷を低減するととも
に、高速な座標演算を行うことができるようになってい
る。この実施の形態において、ＣＰＵ２５１とＧＴＥ２
６１は、描画制御手段を構成する。

【００７１】上記のＧＰＵ２６２は、ＣＰＵ２５１から
の描画命令に従って、フレームバッファ２６３に対して
多角形（ポリゴン）等の描画を行う。このＧＰＵ２６２
は、１秒間に最大３６万程度のポリゴンの描画を行うこ
とができるようになっている。

【００７２】さらに、上記のフレームバッファ２６３
は、いわゆるデュアルポートＲＡＭからなり、ＧＰＵ２
６２からの描画あるいはメインメモリ２５３からの転送
と、表示のための読み出しとを同時に行うことができる
ようになっている。このフレームバッファ２６３は、例
えば１Ｍバイトの容量を有し、それぞれ１６ビットの、
横が１０２４画素、縦が５１２画素からなるマトリック
スとして扱われる。また、このフレームバッファ２６３
には、ＧＰＵ２６２により選択的に切り換えられる、画
像の描画用と画像のビデオ出力用の少なくとも２つの描
画領域の他に、ＧＰＵ２６２がポリゴン等の描画を行う
際に参照されるカラールックアップテーブル（ＣＬＵ
Ｔ：Color Look Up Table ）が記憶されるＣＬＵＴ領域
と、描画時に座標変換されてＧＰＵ２６２によって描画
されるポリゴン等の中に挿入（マッピング）される素材
（テクスチャ）が記憶されるテクスチャ領域が設けられ
ている。このテクスチャ領域には、空とか雲等を表す２
次元の背景画像の素材も記憶される。

【００７３】これらのＣＬＵＴ領域とテクスチャ領域
は、表示領域の変更等に従って動的に変更されるように
なっている。

【００７４】なお、上記のＧＰＵ２６２は、上述のフラ
ットシェーディングの他にポリゴンの頂点の色から補完
してポリゴン内の色を決めるグーローシェーディング
と、上記のテクスチャ領域に記憶されているテクスチャ
をポリゴンに貼り付けるテクスチャマッピングを行うこ
とができるようになっている。これらのグーローシェー
ディングまたはテクスチャマッピングを行う場合には、
上記のＧＴＥ２６１は、１秒間に最大５０万程度のポリ
ゴンの座標演算を行うことができる。

【００７５】さらに、画像デコーダ２６４は、上記のＣ
ＰＵ２５１からの制御により、メインメモリ２５３に記
憶されている静止画あるいは動画の画像データを復号し
てメインメモリ２５３に記憶する。

【００７６】また、この再生された画像データを、ＧＰ
Ｕ２６２を介してフレームバッファ２６３に記憶するこ
とにより、上述のＧＰＵ２６２によって描画される画像
の背景等として使用することができるようになってい
る。

【００７７】上記のサウンドシステム２７０は、ＣＰＵ
２５１からの指示に基づいて、楽音、効果音等を発生す
るＳＰＵ２７１と、このＳＰＵ２７１により、波形デー
タ等が記録されるサウンドバッファ２７２とを有し、Ｓ
ＰＵ２７１によって発生される楽音、効果音等は、オー
ディオ出力としてモニタ１８のスピーカ部１８Ｂに供給
され、楽音がスピーカ部１８Ｂから出力される。

【００７８】上記のＳＰＵ２７１は、例えば１６ビット
の音声データを４ビットの差分信号として適応予測符号
化（ＡＤＰＣＭ：Adaptive Differential PCM）された
音声データを再生するＡＤＰＣＭ復号機能と、サウンド
バッファ２７２に記憶されている波形データを再生する
ことにより、効果音等を発生する再生機能と、サウンド
バッファ２７２に記憶されている波形データを変調させ
て再生する変調機能等を備えている。

【００７９】このような機能を備えることによって、こ
のサウンドシステム２７０は、ＣＰＵ２５１からの指示
によってサウンドバッファ２７２に記録された波形デー
タに基づいて楽音、効果音等を発生するいわゆるサンプ
リング音源として使用することができるようになってい
る。

【００８０】上記の光ディスク制御部２８０は、光ディ
スク２０に記録されたプログラムやデータ等を再生する
光ディスク装置２８１と、例えばエラー訂正符号（ＥＣ
Ｃ：Error Correction Code ）が付加されて記録されて
いるプログラム、データ等を復号するデコーダ２８２
と、光ディスク装置２８１からのデータを一時的に記憶
することにより、光ディスク２０からのデータの読み出
しを高速化するバッファ２８３とを備えている。上記の
デコーダ２８２には、サブＣＰＵ２８４が接続されてい
る。

【００８１】また、光ディスク装置２８１で読み出され
る、光ディスク２０に記録されている音声データとして
は、上述のＡＤＰＣＭデータの他に音声信号をアナログ
／デジタル変換したいわゆるＰＣＭデータがある。

【００８２】ＡＤＰＣＭデータとして、例えば１６ビッ
トのデジタルデータの差分を４ビットで表わして記録さ
れている音声データは、デコーダ２８２で復号された
後、上述のＳＰＵ２７１に供給され、ＳＰＵ２７１でデ
ジタル／アナログ変換等の処理が施された後、スピーカ
部１８Ｂを駆動するために使用される。

【００８３】また、ＰＣＭデータとして、例えば１６ビ
ットのデジタルデータとして記録されている音声データ
は、デコーダ２８２で復号された後、スピーカ部１８Ｂ
を駆動するために使用される。

【００８４】さらに、通信制御部２９０は、バスＢＵＳ
を介してＣＰＵ２５１との通信の制御を行う通信制御器
２９１を備え、この通信制御器２９１には、使用者から
の指示を入力する操作装置１６と、ゲームの設定データ
等を記憶する補助記憶装置としてのメモリカード１４や
図示していない携帯用電子機器が接続される。

【００８５】通信制御器２９１に接続された操作装置１
６は、使用者からの指示を入力するために、図１、図２
に示したように、十数個の指示キーを有し、通信制御器
２９１からの指示に従って、この指示キーの状態を、同
期式通信により、通信制御器２９１に毎秒６０回程度送
信する。そして、通信制御器２９１は、操作装置１６の
指示キーの状態をＣＰＵ２５１に送信する。

【００８６】これにより、使用者からの指示がＣＰＵ２
５１に入力され、ＣＰＵ２５１は、実行しているゲーム
プログラム等に基づいて、使用者からの指示に従った処
理を行う。

【００８７】ここで、上記のメインメモリ２５３、ＧＰ
Ｕ２６２、画像デコーダ２６４及びデコーダ２８２等の
間では、プログラムの読み出し、画像の表示あるいは描
画等を行う際に、大量の画像データを高速に転送する必
要がある。そこで、このエンタテインメント装置１２で
は、上述のようにＣＰＵ２５１を介さずに周辺機器制御
部２５２からの制御により上記のメインメモリ２５３、
ＧＰＵ２６２、画像デコーダ２６４及びデコーダ２８２
等の間で直接データの転送を行ういわゆるＤＭＡ転送を
行うことができるようになっている。これにより、デー
タ転送によるＣＰＵ２５１の負荷を低減させることがで
き、高速なデータの転送を行うことができる。

【００８８】また、上記のＣＰＵ２５１は、実行してい
るゲームの設定データ等を記憶する必要があるときに、
その記憶するデータを通信制御器２９１に送信し、通信
制御器２９１はＣＰＵ２５１からのデータをスロット部
３０Ｂ、３２Ｂに挿着されたメモリカード１４や携帯用
情報端末として機能する図示していない携帯用電子機器
に書き込む。

【００８９】ここで、メモリカード１４は、エンタテイ
ンメント装置１２に接続するための本体インタフェース
と、内蔵される不揮発メモリにデータを入出力するため
のメモリインタフェースを備えている。

【００９０】上記の通信制御器２９１（図３参照）に
は、電気的な破壊を防止するための保護回路が内蔵され
ている。上記のメモリカード１４は、バスＢＵＳから分
離されており、エンタテインメント装置１２の電源を入
れた状態で、着脱することができる。従って、上記のメ
モリカード１４の記憶容量が足りなくなった場合等に、
エンタテインメント装置１２本体の電源を遮断すること
なく、新たなメモリカード１４を挿着することができ
る。このため、バックアップする必要があるゲームデー
タが失われてしまうことなく、新たなメモリカード１４
を挿着して、必要なデータを新たなメモリカード１４に
書き込むことができる。

【００９１】また、パラレルＩ／Ｏインタフェース（Ｐ
ＩＯ）２９６には、図３に示すようにＣＤプレーヤやＤ
ＡＴ（digital audio tape recorder）等の音楽再生装
置（楽音再生装置ともいう。）２９８を接続することが
可能であり、ＣＰＵ２５１側からこの音楽再生装置２９
８に対して動作（たとえば、電源オン／オフ、再生、停
止、スキップ、曲選択）を制御することができる。シリ
アルＩ／Ｏインタフェース（ＳＩＯ）２９７には、図示
していない携帯用電子機器等の携帯情報端末（personal
digital assistant）を接続することが可能である。

【００９２】このエンタテインメント装置１２では、光
ディスク装置２８１により光ディスク２０に記録された
プログラムを実行しながら、並列的にＰＩＯ２９６を介
して、音楽再生装置２９８からデジタルオーディオ信号
を取り込むことが可能である。

【００９３】エンタテインメント装置１２と操作装置１
６との間の双方向通信機能は、図４に示すように、操作
装置１６と双方向のシリアル通信を行うコネクタ６２を
エンタテインメント装置１２と接続して行うことができ
る。

【００９４】操作装置１６側の双方向通信機能を行う構
成は、エンタテインメント装置１２とシリアル通信を行
うシリアルＩ／ＯインターフェースＳＩＯと、複数の操
作ボタンＰＢからの操作データを入力するパラレルＩ／
ＯインターフェースＰＩＯ、ＣＰＵ、ＲＡＭ及びＲＯＭ
であるワンチップマイクロコンピュータ（以下、マイコ
ンと記す）ＭＣＰと、振動付与機構の駆動モータ１３０
を回転駆動させるモータドライバ１５０とから構成さ
れ、駆動モータ１３０はモータドライバ１５０からの供
給電圧及び電流により回転駆動される。

【００９５】なお、複数の操作ボタンＰＢとして、図２
を参照して説明したように、上ボタン１１０ａ、右ボタ
ン１１０ｂ、左ボタン１１０ｃ、下ボタン１１０ｄ、△
ボタン１１２ａ、○ボタン１１２ｂ、×ボタン１１２
ｃ、□ボタン１１２ｄ、Ｌ１ボタン１１４ａ、Ｌ２ボタ
ン１１４ｂ、Ｒ１ボタン１１６ａ、Ｒ２ボタン１１６ｂ
等の十数個のボタンがある。

【００９６】エンタテインメント装置１２側には、操作
装置１６間でシリアル通信を行うシリアルＩ／Ｏインタ
ーフェースＳＩＯを設けた構造となっており、操作装置
１６のコネクタ６２を接続すると、該コネクタ６２を介
して操作装置１６側のシリアルＩ／Ｏインターフェース
ＳＩＯと接続され、双方向の通信手段、即ち、双方向の
シリアル通信を行うことができる構成となっている。な
お、エンタテインメント装置１２のその他の詳細な構成
は省略してある。

【００９７】双方向のシリアル通信を行う信号線及び制
御線は、エンタテインメント装置１２から操作装置１６
に対してデータを送るデータ伝送用の信号線ＴＸＤ（Tr
ansmit X' for Data）と、操作装置１６側からエンタテ
インメント装置１２側にデータを送るデータ伝送用の信
号線ＲＸＤ（Received X' for Data）と、各データ伝送
用の信号線ＴＸＤ、ＲＸＤからデータを抜き出すシリア
ル同期クロック用の信号線ＳＣＫ（Serial Clock）と、
ターミナル側である操作装置１６の通信の確立及び中断
等を行うための制御線ＤＴＲ（Data Terminal Ready ）
と、大量のデータ転送を行うためのフロー制御用の制御
線ＤＳＲ（Data Set Ready）とから構成されている。

【００９８】また、この双方向のシリアル通信を行う信
号線及び制御線からなるケーブルには、図４に示すよう
に、信号線及び制御線の他にエンタテインメント装置１
２側の電源から直接取り出した電源用ケーブル１５２が
含まれており、この電源用ケーブル１５２は操作装置１
６側のモータドライバ１５０に接続され、駆動モータ１
３０を回転させる電源を供給するとともに、操作装置１
６の各部に電源を供給する。

【００９９】このような構成からなる双方向のシリアル
通信手順は、例えばエンタテインメント装置１２が操作
装置１６と通信をして、第１及び第２の操作部３４、３
６並びにＬボタン３８Ｌ、Ｒボタン３８Ｒ等の操作ボタ
ンＰＢの操作データ（ボタン情報）を取り込むために、
まず、エンタテインメント装置１２は制御線ＤＴＲに選
択データを出力する。この結果、操作装置１６は制御線
ＤＴＲによって選択されたことを確認して、それに続く
信号線ＴＸＤの受信待ち状態になる。続いてエンタテイ
ンメント装置１２は、データ伝送用の信号線ＴＸＤに操
作装置１６を示す識別コードを送出する。これにより操
作装置１６が信号線ＴＸＤよりこの識別コードを受け取
る。

【０１００】操作装置１６が識別コードを認識すること
により、これ以降、エンタテインメント装置１２との通
信を開始する。即ち、エンタテインメント装置１２から
は制御データ等がデータ伝送用の信号線ＴＸＤを介して
操作装置１６側に送信され、逆に操作装置１６からは操
作ボタンで操作された操作データ等がデータ伝送用の信
号線ＲＸＤを介してエンタテインメント装置１２に送信
される。このようにしてエンタテインメント装置１２と
操作装置１６との間で双方向のシリアル通信が行われ、
この通信はエンタテインメント装置１２が制御線ＤＴＲ
を通じて選択中止データを出力することにより終了す
る。

【０１０１】このように双方向のシリアル通信機能を備
えていれば、操作装置１６側からの主として操作ボタン
ＰＢの操作データをエンタテインメント装置１２側に送
信することができると共に、エンタテインメント装置１
２側からは、データ伝送用の信号線ＴＸＤを介して振動
付与機構１２８の駆動モータ１３０を回転させるための
振動発生コマンドを操作装置１６側に送出することがで
きる。

【０１０２】この駆動モータ１３０を回転させるための
振動発生コマンドは、エンタテインメント装置１２にセ
ットされた光ディスク２０によって予め設定されてい
る。

【０１０３】次に、この実施の形態に係るエンタテイン
メントシステム１０が有する特徴的な機能および動作に
ついて図５に示すフローチャートを参照して説明する。

【０１０４】まず、モニタ１８、メモリカード１４、操
作装置１６がエンタテインメント装置１２に接続され
る。また、各種機能がプログラムおよびデータとして記
録されたＣＤ−ＲＯＭ等の記録媒体である光ディスク２
０が、エンタテインメント装置１２のディスク装着部２
２に装着される。

【０１０５】この状態において、ステップＳ１におい
て、電源スイッチ２８が押されるとエンタテインメント
装置１２に図示していない交流電源等から電源が供給さ
れる。

【０１０６】電源が供給されると、ステップＳ２におい
て、ＣＰＵ２５１は、ＲＯＭ２５４に記憶されているオ
ペレーティングシステムによる動作を開始し、ＲＯＭ２
５４から必要なプログラム、データ（初期画面データと
初期音楽データとを含む。）をメインメモリ２５３にダ
ウンロードする等の初期設定が行われる。

【０１０７】ステップＳ３において、周辺機器制御部２
５２の管理下に、前記初期画面データが画像デコーダ２
６４、ＧＰＵ２６２を介してフレームバッファ２６３に
描画され、描画された初期画面データがＧＰＵ２６２を
介してビデオ出力としてモニタ１８の表示部１８Ａに供
給され、表示部１８Ａ上に初期画面が表示されるととも
に、このときＲＯＭ２５４に記憶されていた初期音楽デ
ータがＳＰＵ２７１を介してサウンドバッファ２７２に
記憶され、記憶された初期画面データがＳＰＵ２７１を
介してオーディオ出力としてモニタ１８のスピーカ部１
８Ｂに供給され、前記初期画面に同期してスピーカ部１
８Ｂから音楽（楽音）が発せられる。

【０１０８】次に、ステップＳ４において、たとえばＣ
ＰＵ２５１によりデコーダ２８２の状態を確認し、ＣＤ
−ＲＯＭである光ディスク２０の装着により自動起動さ
れた光ディスク装置２８１からデコーダ２８２を通じて
のプログラムおよびデータのバッファ２８３へのダウン
ロードが発生しているかどうかにより、光ディスク２０
のディスク装着部２２内の存在を確認する。

【０１０９】実際上、光ディスク２０が存在していない
場合には、光ディスク２０のディスク装着部２２への装
着の確認がなされるまで、ステップＳ３の初期画面表示
が継続され、光ディスク２０の存在が確認されたとき、
次のステップＳ５の処理に移る。

【０１１０】このステップＳ５の処理では、光ディスク
装置２８１を通じてサブＣＰＵ２８４の制御下に、光デ
ィスク２０からダウンロードされたプログラムやデータ
が、デコーダ２８２を介して直接的にメインメモリ２５
３に記憶され、あるいはバッファ２８３を介してメイン
メモリ２５３に記憶される。

【０１１１】なお、以下の説明において、画像処理の主
体は、ＣＰＵ２５１あるいはＧＰＵ２６２である。

【０１１２】図６は、ステップＳ５の処理により表示部
１８Ａに表示されたスタート画面３００を示している。

【０１１３】このスタート画面３００では、それぞれ、
所定長さで、かつ揺らぎの与えられた３次元線画画像、
あるいは所定長さで分割され、かつ揺らぎの与えられた
３次元線画画像であるアルファベット表記の「Ｖｉｂｒ
ｉｂｂｏｎ（商標名）」の表示や、カタカナ表記の「ビ
ブリボン（登録商標名）」の文字、英語表記の「Ｐｕｓ
ｈ Ｓｔａｒｔ」の文字、数個のアスタリスク模様等が
表示される。この状態において、たとえば、「Ｖｉｂｒ
ｉｂｂｏｎ（商標名）」の表示は、所定時間毎に、仮想
的な透明円柱の軸を中心に画面上横方向に周壁を回転す
るようにされている（「Ｖｉｂｒｉｂｂｏｎ（商標
名）」の表示が、一体となったまま、画面の後ろ側に回
って、また前側にもどってくるような表示）。

【０１１４】なお、この発明に係る表示の基本的な特徴
となっている、所定長さで、あるいは所定長さで分割さ
れ、かつ揺らぎの与えられた３次元線画画像を発生する
処理（３次元線画ばらばら表示処理ともいう。）の詳細
については後述する。

【０１１５】図６のスタート画面３００が表示された状
態において、ステップＳ６で操作装置１６のスタートボ
タン４０が押されたことを検出したとき、ステップＳ７
では使用者（操作者）の名前登録処理が行われる。

【０１１６】このステップＳ７では、表示部１８Ａの画
面上に、図７に示すような名前登録処理画面３０２が表
示される。この名前登録処理画面３０２では、現在選択
中の部分が拡大され（図７中、文字「セ」参照）、かつ
各文字や記号が、３次元線画ばらばら表示とされてい
る。そして、操作装置１６の操作ボタンＰＢの操作によ
り名前がカタカナ表記で「ポケポケ」等と入力され、操
作ボタンＰＢによりカーソル（カーソルは、拡大されか
つ３次元線画ばらばら表示とされている箇所で示され
る。）を、図８の表示画面３０４に示すように「ＯＫ」
の箇所に移動し、○ボタン１１２ｂを押すことで、入力
されている名前がメインメモリ２５３に記憶（登録）さ
れる。

【０１１７】このとき、ステップＳ８において、ゲーム
選択処理を行うための図９に示す３次元線画画像である
ゲーム選択画面３０６が表示される。この画面では、１
０角形のオブジェクト３０８の各頂点から外方に引かれ
た直線上に、選択可能なゲームの種類等が表示されてい
る。現在、選択されているゲームの種類は「カンタン」
である。このビブリボン（登録商標名）ゲーム（ビブリ
ボン（登録商標名）とは、振動するリボンを意味す
る。）では、予め、光ディスク２０中に、音楽に関連し
てキャラクタを操作する難易度の異なる３種類のゲーム
がそれぞれウメ「カンタン」、タケ「フツウ」およびマ
ツ「ムズカシイ」として選択可能に記憶されている。な
お、この３種類のゲームには、光ディスク２０内にそれ
ぞれ２曲の音楽が選択可能に記録されている。

【０１１８】また、「エンドレス」モードの音楽に、音
楽ＣＤを用いることが可能である。たとえば、図９のゲ
ーム選択画面３０６において「エンドレス」モードを選
択した場合には、使用者に対して音楽ＣＤが必要である
ことを知らせる表示が表示部１８Ａの画面上になされ、
使用者がプログラムが格納された光ディスク２０に代替
して音楽ＣＤをディスク装着部２２に装着したときに
は、その音楽ＣＤに記憶されている曲がシャッフルされ
て（ランダムに再生されて）、詳細を後述するビブリボ
ンゲームをエンドレスで（果てしなく）楽しむことがで
きる。

【０１１９】もちろん、音楽ＣＤを音楽再生装置２９８
に装着しておくことにより、「エンドレス」モードが選
択されたとき、ビブリボン（登録商標名）ゲームのプロ
グラムおよびデータが記録された光ディスク２０をディ
スク装着部２２から取り外すことなくビブリボン（登録
商標名）ゲームを実行することが可能であり、この場合
には、ゲームのリアルタイム性がより向上する。すなわ
ち、音楽ＣＤを音楽再生装置２９８に装着しておくこと
により、プログラムにより指定される箇所（ステップ）
で、その音楽ＣＤに記憶されている曲がシャッフルされ
て、音楽再生装置２９８を介してエンタテインメント装
置１２に略リアルタイムで曲が読み込まれ、記憶され
る。

【０１２０】このゲーム選択画面３０６において、上下
ボタン１１０ａ、１１０ｄのいずれか一方を一回押すご
とに、１０角形のオブジェクト３０８と選択肢が、図１
０のゲーム選択画面３１０に示すように回転され、他の
所望のゲームを選択することができる。図９のゲーム選
択画面３１０では音楽のテンポが早くなる「スピード」
モードが強調表示されている。この状態で使用者が決定
ボタン１１２ｂを押すことによって、「スピードモー
ド」が選択される。

【０１２１】なお、図８または図９のゲーム選択画面３
０６において、「Ｅｘｉｔ」モードを選択することによ
り図６に示したビブリボン（登録商標名）ゲームのスタ
ート画面３００にもどる。通常、スタート画面３００が
表示されているときに、電源スイッチ２８を押すこと
で、電源が切られる。

【０１２２】この実施の形態では、ステップＳ９におい
て、ゲーム選択画面３０６（図９参照）の状態で決定ボ
タンとしての○ボタン１１２ｂが押されたものとする。
この決定により、ウメ「カンタン」モードのビブリボン
（登録商標名）ゲームが開始され、ステップＳ１０にお
けるゲーム処理が行われる。

【０１２３】ステップＳ１０におけるゲーム処理の詳細
フローを図１１に示す。

【０１２４】まず、ステップＳ２１において、次のステ
ップＳ２２で説明するゲーム処理に係る初期処理が行わ
れているかどうかを確認する。

【０１２５】このステップＳ２２のゲーム処理に係る初
期処理では、光ディスク２０に記憶されている図１２に
示す３種類のキャラクタオブジェクト４０１、４０２、
４０３、図１３に示す４種類の障害物オブジェクト４１
１、４１２、４１３、４１４、および図１４に示す移動
用路（仮想ロードともいう。）オブジェクト４２０を読
み出し、ワールド座標系でメインメモリ２５３に記憶す
る。

【０１２６】ここで、キャラクタオブジェクト４０１、
４０２、４０３は、それぞれ動物である、うさぎ、かえ
る、へびをモデファイしたものである。また、障害物オ
ブジェクト４１１、４１２、４１３、４１４は、それぞ
れ４角形（方形、箱形）、円形、Ｖ字（逆三角形）、ジ
グザグ（抵抗器の記号）をモデファイしたものである。
さらに、仮想ロードオブジェクト４２０は、上記キャラ
クタオブジェクト４０１、４０２、４０３の移動用の仮
想ロード（３次元線画画像ロード）とされる。この仮想
ロードオブジェクト４２０には、後述する音解析結果に
応じて発生する上記障害物オブジェクト４１１、４１
２、４１３、４１４が挿入配置される。

【０１２７】この場合、各キャラクタオブジェクト４０
１、４０２、４０３と各障害物オブジェクト４１１、４
１２、４１３、４１４と仮想ロードオブジェクト４２０
は、それぞれ、図１５に、障害物オブジェクト４１１を
例としてその構成を模式的に示すように、基本的には、
細長い直方体の凸形状モデル（凸多面体モデル）として
の基本オブジェクト４１５から構成されている。基本オ
ブジェクト４１５の拡大・縮小・座標変換（移動も含
む）等は、ＧＴＥ２６１により行うことができる。

【０１２８】図１５から分かるように、各キャラクタオ
ブジェクト４０１、４０２、４０３と各障害物オブジェ
クト４１１、４１２、４１３、４１４と仮想ロードオブ
ジェクト４２０は、ポリゴンとして、各基本オブジェク
ト４１５を構成するたとえば四角形（三角形でもよ
い。）のポリゴン成分に分割され、各ポリゴンは、その
３次元頂点座標とその頂点における色により定義され
て、メインメモリ２５３の所定領域（各キャラクタオブ
ジェクト４０１、４０２、４０３と各障害物オブジェク
ト４１１、４１２、４１３、４１４と仮想ロードオブジ
ェクト４２０の格納領域）に格納される。

【０１２９】なお、この実施の形態では、色は白（たと
えば、輝度階調が８ビットであれば、Ｒ（赤）、Ｇ
（緑）、Ｂ（青）の各階調値はＲ（赤）＝Ｇ（緑）＝Ｂ
（青）＝２５５）として格納されている。他の色とする
ことも可能であることはいうまでもない。

【０１３０】さらに、ステップＳ２２の初期処理では、
図１６に模式的に示すビブリボン（登録商標名）ゲーム
の実行に係わる操作ボタンＰＢと障害物オブジェクト４
１１、４１２、４１３、４１４の対応テーブル（操作ボ
タン障害物対応テーブル）４１６が光ディスク２０から
読み出され、メインメモリ２５３の所定領域（操作ボタ
ン障害物対応テーブル格納領域）に格納される。

【０１３１】この対応テーブル４１６では、図１６から
分かるように、障害物オブジェクト４１１、４１２、４
１３、４１４に対応して、それぞれＬ１ボタン１１４
ａ、Ｒ１ボタン１１６ａ、上ボタン１１０ａ、△ボタン
１１２ａが割り当てられている。

【０１３２】さらにまた、ステップＳ２２の初期処理で
は、後述するフラグ（ＮＧフラグＦ１等）やレジスタ
（キャラクタオブジェクト状態レジスタ）４５６等が初
期状態（これも後述する。）に設定される。

【０１３３】上記したステップＳ２２の初期処理の終了
後に、ステップＳ２３の処理では、バッファ２８３に音
楽データが残っているかどうかが確認され、バッファ２
８３に音楽データが残っていない場合には、ステップＳ
２４において、音楽データ１曲分のゲームが終了したか
どうかが確認され、音楽データ１曲分のゲームが終了し
ていない場合には、ステップＳ２５において、ウメ「カ
ンタン」モードにおける、たとえば、１曲分の音楽デー
タが、光ディスク２０から読み出されて、メインメモリ
２５３に記憶される。この場合、バッファ２８３に記憶
するようにしてもよい。

【０１３４】上記のエンドレスモードでは、このステッ
プＳ２５の処理において、たとえば、音楽再生装置２９
８に装着されているＣＤ等から音楽データが１曲分読み
出されてメインメモリ２５３に記憶される。

【０１３５】次に、ステップＳ２６のオーディオ信号分
析処理と、ステップＳ２７の線画表示更新処理が並列的
に行われて、表示部１８Ａの画面上にゲーム映像が表示
される。

【０１３６】図１７は、ステップ２６のオーディオ信号
分析処理（オーディオ信号解析手段）のフローチャート
を示している。

【０１３７】ステップＳ５１の処理では、再生用所定時
間分の音楽データが読み出されているかどうかを、バッ
ファ２８３に音楽データが格納されているかどうかによ
り判断する。

【０１３８】バッファ２８３に音楽データが格納されて
いなかった場合には、ステップＳ５２において、前記１
曲分の音楽データの最初から所定時間分、この実施の形
態では仮想ロードオブジェクト４２０が画面上右上側か
ら左下側に１画面分相対的に移動する時間として８秒間
分（正確には、この８秒間分＋余裕分の時間）が読み出
されバッファ２８３に書き込まれる。

【０１３９】次に、バッファ２８３（所定時間の音楽デ
ータ格納領域）に記憶されている８秒間分の音楽データ
を微小時間毎に所定分割して（この実施の形態では、
０．５秒毎に１６分割して）オーディオ信号を分析し、
結果として障害物オブジェクトの発生を決定する処理に
ついて説明する。

【０１４０】この場合、ステップＳ５３において、微小
時間、この実施の形態では、０．５秒にオーディオ信号
（音楽データともいう。）を分割するために、バッファ
２８３から０．５秒分に対応する音楽データを読み出
す。

【０１４１】ステップＳ５４では、この読み出し操作の
カウントパラメータとしてレジスタｉを１だけ更新する
（ｉ←ｉ＋１）。

【０１４２】次に、ステップＳ５５では、微小時間分の
音楽データをサンプリング周波数でサンプリングし、ス
テップＳ５６において、周波数スペクトラムを抽出す
る。すなわち、高速フーリエ変換処理を行う。なお、サ
ンプリングした後、ノイズを除去するために、音声周波
数帯での帯域通過フィルタによる処理を行ってもよい。

【０１４３】次に、ステップＳ５７の処理では、抽出し
た周波数スペクトラム中、所定周波数ｆｃ（この周波数
をランダムに変化させることもできる。）以上と未満と
でそれぞれピーク値（音の大きさである波高値）を３個
（この数も適当に変えることができる。）検出し、ステ
ップＳ５８では、それぞれの周波数領域、すなわち、所
定周波数ｆｃ未満の周波数領域と所定周波数ｆｃ以上の
周波数領域とで、検出した周波数スペクトラムのピーク
値を大きい順に並べ、それぞれ３番目までの各３個のピ
ーク値に係る周波数の配列順番を決定する。

【０１４４】たとえば、所定周波数ｆｃ未満の３つのピ
ーク周波数を周波数の低い順にｆｌ１、ｆｌ２、ｆｌ３
とし、所定周波数ｆｃ以上の３つのピーク周波数を周波
数の低い順にｆ４、ｆ５、ｆ６とすると、ｆｃ以上の周
波数領域とｆｃ未満の周波数領域とでそれぞれ６通りの
組み合わせがあるので、全部で３６通りのピーク周波数
の配列順番Ｐの組み合わせが発生する。

【０１４５】次に、ステップＳ５９では、このピーク周
波数配列順番Ｐと障害物オブジェクト４１１、４１２、
４１３、４１４との、図１８に示す対応テーブル４２８
（オーディオ信号解析結果と発生しようとする障害オブ
ジェクトとの対応テーブル）を参照し、ステップＳ６０
において、今回の周波数分析結果で発生すべき障害物オ
ブジェクト４１１、４１２、４１３、４１４のいずれか
を決定する。

【０１４６】図１８から分かるように、たとえばピーク
周波数配列順番ＰがＰ＝［ｆｌ１、ｆｌ２、ｆｌ３、ｆ
ｈ１、ｆｈ２、ｆｈ３］であるときには、障害物オブジ
ェクト４１１に決定され、Ｐ＝［ｆｌ３、ｆｌ２、ｆｌ
１、ｆｈ３、ｆｈ２、ｆｈ１］であるときには、障害物
オブジェクト４１４に決定される。

【０１４７】もちろん、１回の周波数分析結果に基づ
き、複数の障害物オブジェクト発生の順番を決定するこ
ともできる。

【０１４８】なお、ステップＳ５３〜Ｓ６０に係るオー
ディオ信号分析処理は、周波数軸上での一例であるが、
周波数軸上ではなく、時間軸上でも行うことができる。
この場合、時間軸上で一定時間、たとえば０．５秒毎に
音楽データを区切って、その区間内における音の振幅の
ピーク値を大きい方から順番に５個抽出する。そして、
図１９に示すように、５個のピーク中、時間軸上で隣り
合うピーク間の傾きＱを算出し、その傾きＱの順列組み
合わせで対応テーブル４２９を持つようにしてもよい。
たとえば、ピーク間の傾きＱの組み合わせが、傾き：
正、正、正、正であれば、障害物オブジェクト４１１を
選択するというように決めればよい。

【０１４９】なお、オーディオ信号分析処理として、た
とえば、エンドレスモードでは、オーディオ信号自体で
はなく、ＣＤのＴＯＣ（table of contents）データ
（曲数、演奏時間、曲の論理アドレス等）に基づき、予
め障害物オブジェクト４１１、４１２、４１３、４１４
の出現順序を決定しておくようにすることもできる。

【０１５０】次いで、ステップＳ２７（図１１参照）の
線画表示更新処理を行うが、この線画表示更新処理中
に、ステップＳ６１とステップＳ６２の処理が並列的に
行われる。ステップＳ６１の処理では、ステップＳ５４
で設定したカウンタパラメータに係るレジスタｉの値
が、ｉ＝１６（上記８秒間に対応した値）になるまで、
ステップＳ５３〜Ｓ６０の処理を繰り返す。ｉ＝１６の
ときには、ステップＳ６２において、カウンタパラメー
タに係るレジスタｉの値をｉ＝０値に設定する。このと
き、上記バッファ２８３（所定時間の音楽データ格納領
域）の８秒間分の音楽データが全て読み出されることに
なり、ステップＳ２７（図１１参照）に進む。

【０１５１】図２０は、ステップＳ２７の線画表示更新
処理（最初の表示を含む）のフローチャートを示してい
る。

【０１５２】ステップＳ７１では、モニタ１８における
表示部１８Ａの表示画面上、画面の左端下方から右端上
方側に延びる略直線状（実際には分割された直線）の１
本の線画画像が、仮想ロードオブジェクト４２０（図１
４参照）からＧＴＥ２６１により作成され、このＧＰＵ
２６２により、図２１に示すフレームバッファ２６３の
模式図中、描画領域２６５（２つの描画領域２６５Ａ、
２６５Ｂ）の一方の描画領域、たとえば、描画領域２６
５Ａに描画される。ここで、フレームバッファ２６３
は、ｘｙ方向にそれぞれ、たとえば１０２４画素×５１
２画素の大きさを有し、たとえば２５６画素×２４０画
素からなる描画領域２６５Ａ、２６５Ｂを有する、いわ
ゆるダブルバッファとして機能する。

【０１５３】また、ステップＳ７２では、後に図示して
説明するが、前記略直線状の１本の線画画像中に、ステ
ップＳ５８によりオーディオ信号分析結果により決定さ
れた非直線の線画画像である障害物オブジェクト４１
１、４１２、４１３、４１４の線画画像が、分析順に画
面上右奥後方に挿入されることになる線画画像が、フレ
ームバッファ２６３の描画領域２６５Ａに同様に描画さ
れることで、直線状の線画画像と非直線の線画画像が合
成される。

【０１５４】さらに、ステップＳ７３では、前記非直線
の線画画像付き略直線状の１本の線画画像上、画面の左
端側近傍に、所定のキャラクタオブジェクト４０１（図
１２参照）の線画画像がフレームバッファ２６３の描画
領域２６５Ａに同様に描画されることで合成される。な
お、キャラクタオブジェクト４０１、４０２、４０３等
のうち、いずれを選択するかは、図３２を参照して後に
説明するキャラクタオブジェクト状態レジスタ４５６の
内容に従う。ゲーム開始時に、このキャラクタオブジェ
クト状態レジスタ４５６の内容（データ）は、上述のス
テップＳ２２の初期処理によりキャラクタオブジェクト
４０１に対応するデータとなっている。

【０１５５】ステップＳ７１、Ｓ７２、Ｓ７３の処理で
は、実際上、描画の際に、略直線状線画画像に係る仮想
ロードオブジェクト４２０、非直線の線画画像に係る障
害物オブジェクト４１１、４１２、４１３、４１４およ
び非直線の線画画像に係るキャラクタオブジェクト４０
１を構成する、それぞれの細長い直方体の基本オブジェ
クト４１５（図１５参照）に対して、前記ワールド座標
からカメラ座標系への座標変換、さらに透視投影変換に
よるスクリーン座標系への変換、隠面処理、ポリゴンに
対する色処理等のレンダリング処理（適宜、拡大縮小処
理も行われる。）が行われて描画される。

【０１５６】図２２は、基本オブジェクト４１５から構
成される仮想ロードオブジェクト４２０がカメラ座標系
ｘｙｚに配され、スクリーン座標系ｘｙ（ｘｙ平面）に
配される前の処理を模式的に示している。このようにす
れば、この図２２例では、表示部１８Ａの画面（ｘｙ平
面）上、左端下方手前側から、右端上方奥側に、直線状
の１本の３次元線画画像が表示されることになる。

【０１５７】ここで、理解の容易化のために、便宜上、
描画領域２６５Ａ、２６５Ｂのうち、前回描画してあっ
た他方の描画領域２６５Ｂから描画データが読み出され
て、表示部１８Ａに表示される３次元画像について説明
する。

【０１５８】図２３は、ＧＰＵ２６２によって描画領域
２６５Ａ、２６５Ｂからモニタ１８側に色処理等がなさ
れて読み出され、表示部１８Ａの画面上に表示される３
次元線画画像４３０を示している。

【０１５９】この３次元線画画像４３０上では、それぞ
れ、分割され、かつ揺らぎを与えられた基本オブジェク
ト４１５に対応する線画片からなる仮想ロードオブジェ
クト線画画像４２０Ｉａの左端側に、キャラクタオブジ
ェクト線画画像４０１Ｉａが乗ったような画像とされ
る。

【０１６０】そして、ステップＳ７４において、仮想ロ
ードオブジェクト線画画像４２０Ｉａ（障害物オブジェ
クト線画画像が存在する場合には、障害物オブジェクト
線画画像の挿入された仮想ロードオブジェクト線画画
像）が矢印Ｅ方向に所定時間毎、たとえば、画面更新毎
（ＮＴＳＣ方式では、１／３０秒毎）に、所定量移動す
るように描画され、同時にキャラクタオブジェクト線画
画像４０１Ｉａを構成する構成要素、この場合、モデフ
ァイされたうさぎの腕や足等が前後方向に交互に移動さ
れるように描画されることで、キャラクタオブジェクト
線画画像４０１Ｉａが画面上、矢印Ｆ方向へ相対的に移
動している（走っている）ように見える画像が得られ
る。

【０１６１】なお、図２３に示した３次元線画画像４３
０は、キャラクタオブジェクト線画画像４０１Ｉａと仮
想ロードオブジェクト線画画像４２０Ｉａのみが表示さ
れた画像である。周波数分析結果に係る障害物オブジェ
クトに対応する線画画像は、この表示の後、周波数分析
結果に基づき表示される。

【０１６２】図２３上、符号４１５Ｉは、基本オブジェ
クト４１５の線画画像（基本オブジェクト線画画像）を
示している。実際上、基本オブジェクト４１５は、きわ
めて細長いオブジェクトであるので、このオブジェクト
を構成するポリゴンの稜線部分のみを白色で描画するよ
うにしている。

【０１６３】したがって、図２３例の３次元線画画像４
３０は、背景が黒で、前記ポリゴンの稜線で構成される
線画部分が白の、きわめてシンプルなモノクロ画像（実
際には、モノクロ映像）とされている。

【０１６４】この実施の形態において、３次元線画画像
４３０上、仮想ロードオブジェクト線画画像４２０Ｉの
右端が左端まで移動する所要時間が上記の８秒間に設定
されている。

【０１６５】実際上、使用者（ゲームプレーヤ）は、モ
ニタ１８の表示部１８Ａの画面上、仮想ロードオブジェ
クト線画画像４２０Ｉａ中に、後述する障害物オブジェ
クト線画画像が現れたとき、図１６の操作ボタン障害物
対応テーブル４１６に定義された操作ボタンＰＢの操作
を、モニタ１８のスピーカ部１８Ｂやヘッドホン（不図
示）から流れてくる音楽から抽出された様々な要素に合
った所定のタイミングで行うことで、その障害物オブジ
ェクト線画画像をクリアすることができる。クリアする
とは、音楽から抽出された様々な要素に合った的確なタ
イミングでキャラクタオブジェクト線画画像が、障害物
オブジェクト線画画像上を乗り越えたり、回転したりし
て相対的に移動する状態をいう。あるいは、所定のタイ
ミングで定義された操作ボタンＰＢの操作を行うことが
できなくて非クリア状態となることで、後述する特定の
画像が発生する。このようにしてビブリボンゲームは進
行する。

【０１６６】この実施の形態では、ステップ７４で、こ
のクリア状態を、後述するＮＧフラグＦ１の状態により
判断する。ＮＧフラグＦ１が、Ｆ１＝０（クリア）の場
合には、ステップＳ７６において、次に描画すべき３次
元線画画像に小さな揺らぎ（比較的小さな振動）を付与
する小揺らぎ付与処理を行い、ＮＧフラグＦ１が、Ｆ１
＝１（非クリア、すなわちＮＧ）の場合には、ステップ
Ｓ７７において、次に描画すべき３次元線画画像に大き
な揺らぎ（比較的大きな振動）を付与する大揺らぎ付与
処理を行う。

【０１６７】一般的に、小さい揺らぎは、使用者（操作
者）に心地よい感じとリズム感を与え、大きな揺らぎ
は、使用者（操作者）に驚き等を与えるようになってい
る。スピーカ部１８Ｂからは、小さな揺らぎに同期して
心地良いリズム感のある音楽、大きな揺らぎに同期して
大きな破裂音のような音が発生するようにされている。
なお、音楽は、発生しないようにすることもできる。

【０１６８】この場合、小さな揺らぎと大きな揺らぎと
は程度の差を示し、この実施の形態において、小さな揺
らぎは、オブジェクトの原形をとどめる程度の揺らぎ
（小振動）の範囲をいい、大きな揺らぎは、オブジェク
トの原形が不明になる程度の揺らぎ（大振動）をいう。

【０１６９】なお、ステップＳ７７の大揺らぎ付与処理
を行った場合には、ステップＳ７８で、ＮＧフラグＦ１
をＦ１←０（Ｆ＝０）にリセットする（フラグを下げ
る）。

【０１７０】そして、ステップＳ７９では、ステップＳ
７８の処理により現在表示用として読み出されている上
述した描画領域２６５Ｂとは異なる現在描画中の描画領
域２６５Ａに、新たな揺らぎ付与（小揺らぎまたは大揺
らぎの付与）処理後の３次元線画画像を描画する。

【０１７１】ここで、ステップＳ７６、Ｓ７７の揺らぎ
処理について説明する。

【０１７２】揺らぎ付与処理は、３次元空間に配置され
た全オブジェクトを構成する線画画像片である各基本オ
ブジェクト４１５のポリゴンの各頂点に乱数を加えた
後、各頂点に乱数が加えられたポリゴンの稜線部分のみ
からなる画像を再描画する処理としている。

【０１７３】数式的に説明すれば、小さい揺らぎ処理の
場合には、比較的小さい乱数ＲＤＳを発生し、大きい揺
らぎ処理の場合には、比較的大きい乱数ＲＤＢを発生す
る。そして、基本オブジェクト４１５の各頂点座標
（ｘ，ｙ，ｚ）に、ＮＧフラグＦ１がＦ１＝０のときに
は、それぞれ比較的小さい乱数ＲＤＳ（Δｘｓ，Δｙ
ｓ，Δｚｓ）を加えて頂点座標を変換した頂点座標（ｘ
＋Δｘｓ，ｙ＋Δｙｓ，ｚ＋Δｚｓ）とした後、各変換
した頂点座標間に直線を引き、新たなポリゴンの新たな
稜線とする。

【０１７４】一方、ＮＧフラグＦ１がＦ１＝１のときに
は、それぞれ比較的大きい乱数ＲＤＢ（Δｘｂ，Δｙ
ｂ，Δｚｂ）を各頂点座標（ｘ，ｙ，ｚ）に加えて頂点
座標を変換した頂点座標（ｘ＋Δｘｂ，ｙ＋Δｙｂ，ｚ
＋Δｚｂ）とした後、各変換した頂点座標間に直線を引
き、新たなポリゴンの新たな稜線とする。

【０１７５】図面で説明すれば、図２４に示すように、
最初に描画されている基本オブジェクト４１５に対し
て、小さな揺らぎ処理では、矢印ＳＶ、ＳＶ´で示す
分、３次元空間上で少し移動（回転、拡大、位置移動）
した基本オブジェクト４１５ａが作成され、大きな揺ら
ぎ処理では、矢印ＬＶ、ＬＶ´で示す分３次元空間上で
大きく移動した基本オブジェクト４１５ｂが作成され
る。

【０１７６】揺らぎの付与された３次元オブジェクト
は、ステップＳ７７において、現在描画中ではない他方
の描画領域２６５（２６５Ａまたは２６５Ｂ）に描画さ
れる。描画領域２６４への描画の際、基本オブジェクト
４１５を構成するポリゴンの面部にはテクスチャを貼っ
ていないので、基本オブジェクト４１５を拡大・縮小し
ても画像の質感・素材感が変化しない、換言すれば、拡
大・縮小しても画像のシンプル性を損なうことがないと
いう利点が得られる。

【０１７７】なお、図２３に示した３次元線画画像４３
０は、各基本オブジェクト線画画像４１５Ｉａに小さい
揺らぎの付与された画像を示している。

【０１７８】ステップＳ７９において、揺らぎを付与さ
れた３次元線画画像が現在表示中ではない描画領域２６
５Ｂに描画され、ステップＳ８０において、すでに描画
が終了している描画領域２６５Ａによる表示がなされ
る。なお、上述したように、ステップＳ８０の表示処理
と、その他の処理とは並列的に行われる。ここで、その
他の処理とは、ステップＳ２６（ステップＳ５１〜Ｓ６
０）およびステップＳ７１〜Ｓ７９までの処理および後
述するステップＳ２８からステップ２３を通じてステッ
プＳ２６までの処理を指す。

【０１７９】ここで、理解の便宜のために、表示部１８
Ａの画面上に表示される３次元線画画像とゲーム進行に
ついて、図２５〜図３２を参照して説明する。

【０１８０】図２５は、図１１に示したステップＳ１０
のゲーム処理フローが数秒間繰り返された後の、小さい
揺らぎのみが付与されている３次元線画画像４３２を示
している。

【０１８１】この３次元線画画像４３２では、キャラク
タを構成する分割された線画画像片としては走っている
ように見えるが、キャラクタ全体としては、画面の左端
側近傍に相対的に静止しているキャラクタオブジェクト
線画画像４０１Ｉｂに対して、仮想ロードオブジェクト
線画画像４２０Ｉｂ中に挿入された障害物オブジェクト
線画画像４１１Ｉｂ、障害物オブジェクト線画画像４１
４Ｉｂおよび障害物オブジェクト線画画像４１２Ｉｂ
が、画面の右奥方向から左手前方向（矢印Ｅ方向）に順
次移動している状態の画像を示している。

【０１８２】すなわち、この３次元線画画像４３２で
は、比喩的に表現すれば、うさぎ（キャラクタオブジェ
クト線画画像４０１Ｉｂ）が、前方から向かってくるよ
うに移動してくる４角形の障害物（障害物オブジェクト
線画画像４１１Ｉｂ）、ジグザグの障害物（障害物オブ
ジェクト線画画像４１４Ｉｂ）、Ｖ字形の障害物（障害
物オブジェクト線画画像４１３Ｉｂ）および円形の障害
物（障害物オブジェクト線画画像４１２Ｉｂ）に対し
て、その位置で上下動して走っているように見える。

【０１８３】次に、図２６に示す３次元線画画像４３４
では、左端手前側に移動してきて３次元画像上、大きな
４角形となった障害物オブジェクト線画画像４１１Ｉｃ
に対して所定タイミング（所定範囲）で、Ｌ１ボタン１
１４ａが押されたとき、キャラクタオブジェクト線画画
像４０１Ｉｃが、４角形状の障害物オブジェクト線画画
像４１１Ｉｃを、いわゆる馬飛び風にジャンプして乗り
越えている状態を示している。このようにして、４角形
状の障害物オブジェクト線画画像４１１Ｉｃをクリアす
ることができる。

【０１８４】このとき、残りの仮想ロードオブジェクト
線画画像４２０Ｉｃ、障害物オブジェクト線画画像４１
４Ｉｃ、障害物オブジェクト線画画像４１３Ｉｃ、およ
び障害物オブジェクト線画画像４１２Ｉｃも、矢印Ｅ方
向に徐々に大きくなりながら移動してきている。

【０１８５】また、図２７に示す３次元線画画像４３６
では、左端手前側に移動してきて大きなジグザグ形状と
なった障害物オブジェクト線画画像４１４Ｉｄに対して
所定タイミング（所定範囲）で、△ボタン１１２ａが押
されたとき、キャラクタオブジェクト線画画像４０１Ｉ
ｃが、ジグザグ形状の障害物オブジェクト線画画像４１
４Ｉｄを、いわゆる前転で移動している状態を示してい
る。このようにして、ジグザグ形状の障害物オブジェク
ト線画画像４１４Ｉｄをクリアすることができる。

【０１８６】このとき、残りの仮想ロードオブジェクト
線画画像４２０Ｉｄ、障害物オブジェクト線画画像４１
３Ｉｄ、および障害物オブジェクト線画画像４１２Ｉｄ
も、矢印Ｅ方向に徐々に大きくなりながら移動してきて
いる。

【０１８７】さらに、図２８に示す３次元線画画像４３
８では、左端手前側に移動してきて大きなＶ字形となっ
た障害物オブジェクト線画画像４１３Ｉｅに対して所定
タイミング（所定範囲）で、上ボタン１１０ａが押され
たとき、キャラクタオブジェクト線画画像４０１Ｉｅ
が、Ｖ字形の障害物オブジェクト線画画像４１３Ｉｅ
を、いわゆる跨いで歩くように移動している状態を示し
ている。このようにして、Ｖ字形の障害物オブジェクト
線画画像４１３Ｉｅをクリアすることができる。

【０１８８】この場合、残りの仮想ロードオブジェクト
線画画像４２０Ｉｅおよび障害物オブジェクト線画画像
４１２Ｉｅも、矢印Ｅ方向に徐々に大きくなりながら移
動してきている。

【０１８９】なお、この３次元線画画像４３８では、該
表示処理と並列的に行われているオーディオ信号分析処
理により発生した新たな障害物オブジェクト線画画像４
１４Ｉｅが仮想ロードオブジェクト線画画像４２０Ｉｅ
の右端側に描画されている。

【０１９０】さらにまた、図２９に示す３次元線画画像
４４０では、左端手前側に移動してきて大きな円形状と
なった障害物オブジェクト線画画像４１２Ｉｆに対して
所定タイミング（所定範囲）で、Ｒ１ボタン１１６ａが
押されたとき、キャラクタオブジェクト線画画像４０１
Ｉｆが、円形の障害物オブジェクト線画画像４１２Ｉｆ
の内側を歩くように移動している状態を示している。こ
のようにして、円形の障害物オブジェクト線画画像４１
２Ｉｆをクリアすることができる。

【０１９１】このとき、残りの仮想ロードオブジェクト
線画画像４２０Ｉｆおよび障害物オブジェクト線画画像
４１４Ｉｆ、新規に発生している障害物オブジェクト線
画画像４１３Ｉｆも、矢印Ｅ方向に徐々に大きくなりな
がら移動してきている。

【０１９２】図２６〜図２９は、キャラクタオブジェク
ト４０１により障害物オブジェクト４１１、４１２、４
１３、４１４をそれぞれクリアした場合の線画画像を示
している。

【０１９３】その一方、図２５の３次元線画画像４３２
が表示されている状態において、障害物オブジェクト線
画画像４１１ｂに対して所定タイミング（所定範囲）
で、Ｌ１ボタン１１４ａが押されなかったとき、あるい
は、所定タイミング（所定範囲）であっても対応するＬ
１ボタン１１４ａ以外の操作ボタンＰＢが押された直後
の、いわゆる非クリア状態直後の３次元線画画像４５０
を図３０に示す。

【０１９４】図３０から分かるように、障害物オブジェ
クト線画画像４１１Ｉｇを構成する各基本オブジェクト
線画画像４１５Ｉｇに対して、それぞれステップＳ７７
の処理として説明した大きい揺らぎ（破裂的な振動）が
付与され、ばらばらとなった画像として表示される。こ
の大きい揺らぎは、キャラクタオブジェクト線画画像４
０１Ｉｇやこの近傍の仮想ロードオブジェクト線画画像
４２０Ｉｇにも影響を与えるようにされ、同図に示すよ
うに、キャラクタオブジェクト線画画像４０１Ｉｇと仮
想ロードオブジェクト線画画像４２０Ｉｇを構成する各
基本オブジェクト線画画像４０１Ｉｇに対しても、ステ
ップＳ７６の処理に係る小さな揺らぎの範疇ではあるが
比較的大きな揺らぎが付与された画像とされる。

【０１９５】このとき、モータドライバ１５０およびモ
ータ１３０を介して、回転操作子４４、４６に対して振
動を付与するようにすることもできる。

【０１９６】図３０に示した、ばらばらとなったオブジ
ェクトを含む３次元線画画像４５０により、使用者は、
障害物オブジェクト線画画像４１１Ｉｇをクリアするこ
とができなかったこと（非クリア、すなわちＮＧであっ
たこと）を明確に知ることができる。

【０１９７】図３１は、障害物オブジェクト線画画像４
１１Ｉｇをクリアできなかった場合の、一定時間後（た
とえば１秒以内）の３次元線画画像４５２を示してい
る。

【０１９８】図３１から分かるように、図２５に示した
障害物オブジェクト線画画像４１１Ｉｂ（他の障害物線
画画像４１４Ｉｂ、４１３Ｉｂ、４１２Ｉｂでも同じ）
をクリアできなかった場合の次の画像では、小さな揺ら
ぎが少し大きくなる揺らぎが付与された画像となる。ま
た、非クリアのとき、仮想ロードオブジェクト線画画像
４２０Ｉｇの矢印Ｅ方向への移動速度が速くされ、キャ
ラクタオブジェクト４０１Ｉｈで障害物オブジェクト４
１４Ｉｈをクリアするための所定タイミング（所定範
囲）がより短くなり、ゲームの難易度を増加するように
することもできる。

【０１９９】図３２は、図１２に示したキャラクタオブ
ジェクト４０１、４０２、４０３の変化状態（模擬的に
は退化と進化）を表す、ウメ「カンタン」モードに係る
キャラクタ状態テーブル４５４を示している。

【０２００】ビブリボン（登録商標名）ゲームのウメ
「カンタン」モードにおいて最初（ゲームスタート時）
に登場するキャラクタオブジェクトは、キャラクタ状態
テーブル４５４から分かるように、うさぎをモデファイ
したほんの僅かな揺らぎ（ステップＳ７６の小さい揺ら
ぎ）の与えられたキャラクタオブジェクト４０１である
が、障害物オブジェクト４１１、４１２、４１３、４１
４をクリアできなかった場合には、上述した大揺らぎ
（大振動）が付与されてばらばらとなった後、揺らぎの
少し大きいキャラクタオブジェクト４０１′になる。

【０２０１】この揺らぎの大きくされた（原形をとどめ
るステップＳ７６の小さい揺らぎ）キャラクタオブジェ
クト４０１´の状態において、さらにクリアできなかっ
た場合には、上述した大揺らぎ（大振動）付与でばらば
らとなった後、蛙をモデファイしたほんの僅かな揺らぎ
の与えられたキャラクタオブジェクト４０２に変化する
（変身する）。

【０２０２】同様に、非クリアが繰り返されると、キャ
ラクタオブジェクトの変化が繰り返される。具体的に
は、上述した大揺らぎ（大振動）付与でばらばらとなっ
た後、より大きな揺らぎの与えられたキャラクタオブジ
ェクト４０２´に変化し、さらに小さな揺らぎの与えら
れた蛇をモデファイしたほんの僅かな揺らぎの与えられ
たキャラクタオブジェクト４０３に変身する。さらにま
た、より大きな揺らぎの与えられたキャラクタオブジェ
クト４０３´に変化する。このように、非クリアのたび
にキャラクタオブジェクトの外見がみじめになってい
く。最終的に、障害物オブジェクト４１１、４１２、４
１３、４１４を所定回数を超えてもクリアできなかった
場合には、すなわちキャラクタオブジェクト４０３´に
変化した後に障害物オブジェクトのクリアに失敗した場
合には、ゲーム終了、いわゆるゲームオーバーとなる。

【０２０３】なお、一旦、キャラクタオブジェクト４０
１が、矢印Ｂ方向に変化（退化）しても、すなわち、キ
ャラクタオブジェクト４０１が、４０１´、４０２、４
０２´、４０３、４０３´の順に変化しても、以降、ク
リア状態が連続したり、クリアの確率が高くなってくる
と、矢印Ｂ方向とは反対の方向である矢印Ｆ方向に変化
（進化）するようになっている。たとえば、キャラクタ
オブジェクト４０３からキャラクタオブジェクト４０２
´等に再変身することができるようになっている。

【０２０４】どのようなクリア状態を達成した場合に変
身するか等のアルゴリズムについては、予めゲームモー
ド毎に決定され、プログラムにその回数、パターン等が
決定されている。

【０２０５】キャラクタオブジェクト４０１、４０１
´、４０２、４０２´、４０３、４０３´のいずれかの
状態で音楽の１曲が終了したとき、そのゲームモードが
クリア状態での終了となり、このときの障害物オブジェ
クト４１１、４１２、４１３、４１４のクリア状態に応
じて点数が表示されるようになっている。

【０２０６】キャラクタオブジェクト４０１、４０１
´、４０２、４０２´、４０３、４０３´の状態は、Ｃ
ＰＵ２５１中のレジスタ｛図３２に模式的に示すキャラ
クタオブジェクト状態レジスタ（キャラクタオブジェク
ト状態記憶領域）４５６｝にキャラクタオブジェクト状
態として記憶される。ウメ「カンタン」モードのゲーム
開始時に、このキャラクタオブジェクト状態レジスタ４
５６の内容は、キャラクタオブジェクト４０１を示すデ
ータとされている。

【０２０７】以上の説明が、表示部１８Ａの画面上に表
示される３次元線画画像と、操作装置１６に係わるゲー
ム進行についての説明である。

【０２０８】ゲームの進行について、図１１に示したフ
ローチャートとの関係において説明する。

【０２０９】図２５〜図３１に示した３次元線画画像４
３２等が表示されている状態において、たとえば、図２
５に示す３次元線画画像４３２が表示されている状態に
おいて、ステップＳ２８では、操作ボタンＰＢの操作が
あったかどうかが確認される。

【０２１０】操作が確認されなかった場合には、ステッ
プＳ２９において、キャラクタオブジェクト線画画像４
０１Ｉｂが、障害物オブジェクト線画画像４１１Ｉｂの
所定位置、たとえば立ち上がり位置に到達しているかど
うかが確認され、障害物オブジェクト線画画像４１１Ｉ
ｂの所定位置に到達していない場合には、ＮＧではない
ので、ステップＳ３０において、ＮＧフラグＦ１がＦ１
＝０とされ、ステップＳ２３以降の処理、音楽データが
残っている場合には、ステップＳ２６のオーディオ信号
分析処理、ステップＳ２７の線画表示更新処理が行われ
る。

【０２１１】なお、ステップＳ２７の線画表示更新処理
の際、ステップＳ７５（図２０参照）のＮＧフラグＦ１
の判断がＦ１＝０であるので、小さな揺らぎのままの表
示がなされる。

【０２１２】一方、ステップＳ２８の判断において、操
作ボタンＰＢの操作があった場合、ステップ３１では、
クリアしたかどうかが判断される。具体的には、その操
作時点において、キャラクタオブジェクト線画画像４０
１Ｉｂの所定部位、たとえば、前足部位が障害物オブジ
ェクト線画画像４１１Ｉｂの所定位置（たとえば、立ち
上がり位置）の所定範囲内にあるかどうか（実際には画
素数で判断される。）、かつ障害物オブジェクト線画画
像４１１Ｉｂを越えるために適切な操作ボタンＰＢ、す
なわちＬ１ボタン１１４ａの操作であったかどうかが、
それぞれ図示していない所定画素数テーブルおよび図１
６に示した操作ボタン障害物対応テーブル４１６を参照
して判断される。

【０２１３】ステップＳ３１において、いずれの条件も
満足している場合、クリアと判断され、ステップＳ３２
において、ＮＧフラグＦ１が、ＯＫ（クリア）を表す状
態、すなわちＦ１←０とされる。なお、障害物オブジェ
クト４１１、４１２、４１３、４１４をクリアした場合
には、図示していない点数レジスタに点数が加算される
ように構成されている。

【０２１４】ステップＳ３１において、いずれかの条件
（所定範囲かつ所定ボタン）を満足していなかった場
合、非クリアと判断され、ステップＳ３３において、Ｎ
ＧフラグＦ１が、ＮＧ（非クリア）を表す状態、すなわ
ちＦ１←１とされる。

【０２１５】なお、上記のステップＳ２９の判断におい
て、操作ボタンＰＢを操作していない場合には、キャラ
クタオブジェクト線画画像４０１Ｉｂ等が障害物オブジ
ェクト線画画像４１１Ｉｂ等の所定位置に到達済みであ
るときにも、操作ボタンＰＢの操作が遅れたとみなされ
て、ＮＧフラグＦ１がＦ１←１（ＮＧ）とされる。

【０２１６】ステップＳ３３の処理（Ｆ１←０）の後
に、ステップＳ３４では、現在の表示状態において、キ
ャラクタオブジェクト４０１、４０２、４０３の正常化
（図３２中、矢印Ｆ方向への変化をいう。）が可能であ
るかどうかが判断される。正常化が可能であるとは、た
とえば、キャラクタオブジェクト４０１´（図３２参
照）で説明すれば、より揺らぎの少ないキャラクタオブ
ジェクト４０１に変化させること、また、キャラクタオ
ブジェクト４０２で説明すれば、キャラクタオブジェク
ト４０１´に変身する、矢印Ｆ方向への変化をいう。

【０２１７】ステップＳ３４の判断が成立したとき、言
い換えれば、キャラクタオブジェクト状態レジスタ４５
６のデータを参照したときにキャラクタオブジェクト
が、キャラクタオブジェクト４０１を除く、キャラクタ
オブジェクト４０１´、４０２、４０２´、４０３、４
０３´のいずれかの状態であった場合には、ステップＳ
３６において、キャラクタオブジェクト状態レジスタ４
５６の内容を矢印Ｆ方向のキャラクタオブジェクトを表
すデータに書き換える。

【０２１８】もちろん、ステップＳ３４の判断が成立し
ない場合は、キャラクタオブジェクト状態レジスタ４５
６の内容が、キャラクタオブジェクト４０１を表すデー
タとなっている場合である。

【０２１９】ステップＳ３２、Ｓ３４、Ｓ３６の処理か
ら類推されるように、ステップＳ３２の処理（Ｆ１←
１）の後に、ステップＳ３５では、現在の表示状態にお
いて、キャラクタオブジェクト４０１、４０２、４０３
の劣化（図３２中、矢印Ｂ方向へ向かう変化）が可能で
あるかどうかが判断される。劣化が可能であるとは、た
とえば、キャラクタオブジェクト４０１´（図３２参
照）で説明すれば、キャラクタオブジェクト４０２に変
身すること、キャラクタオブジェクト４０２で説明すれ
ば、大きな揺らぎを有するキャラクタオブジェクト４０
２´への変化である矢印Ｂ方向への変化をいう。

【０２２０】ステップＳ３５の判断が成立したとき、言
い換えれば、キャラクタオブジェクト状態レジスタ４５
６のデータを参照したときキャラクタオブジェクトが、
キャラクタオブジェクト４０１、４０１´、４０２、４
０２´、４０３のいずれかの状態であった場合には、ス
テップＳ３６において、キャラクタオブジェクト状態レ
ジスタ４５６の内容を矢印Ｂ方向のものを表すデータに
書き換える。なお、ステップＳ３５の判断が成立しない
場合は、キャラクタオブジェクト状態レジスタ４５６の
内容が、キャラクタオブジェクト４０３´を表すデータ
となっている場合であるので、ステップＳ１１（図５参
照）の処理に進む。

【０２２１】また、ステップＳ２４の判断において、１
曲分のゲームが終了した場合にも、ステップＳ１１の処
理に進む。

【０２２２】図３３、図３４、図３５は、それぞれ、ス
テップＳ１２の終了処理に係るステップＳ１１の処理で
行われる終了可能画面４５７、４５８、４６０を示して
いる。

【０２２３】すなわち、ステップＳ３５の判断が否定的
であった場合には、図３３に示す終了可能画面４５７が
表示される。

【０２２４】この終了可能画面４５７上には、それぞれ
小さな揺らぎ処理で、「ゲームオーバー！（ゲーム終了
の意味）」、「モッカイヤル？（もう１回ゲームをする
かどうかの意味）」、「Ｙｅｓ」、「Ｎｏ（画面上の文
字がつぶれている。）」を表す文字が表示され、この状
態で、○ボタン１１２ｂを押すと、もう１回ゲームに挑
戦することとなり、ステップＳ１２の判断が否定的とな
り、ステップＳ１０のゲーム処理が開始され、図９に示
したゲーム選択画面３０６が表示される。

【０２２５】このゲーム選択画面３０６上で「Ｅｘｉ
ｔ」を選択して決定した場合、図６に示したスタート画
面３００が表示される。

【０２２６】また、図３３に示す終了画面４５７上で、
下ボタン１１０ｃを使用して「Ｎｏ」を選択した場合の
画面が、図３４に示す終了可能画面４５８である。この
状態で、○ボタン１１２ｂを押した場合には、ステップ
Ｓ１２の判断が肯定的となり、図６に示したスタート画
面３００が表示される。

【０２２７】さらに、ステップＳ２４の判断が肯定的で
あった場合には、図３５に示す終了可能画面（ゲームク
リア画面）４６０が表示される。

【０２２８】この終了可能画面４６０では、それぞれ小
さな揺らぎ処理で、「クリアー！」、「１５７０テ
ン」、「ダヨーン（「です。」を意味する。）」を表す
文字が表示され、この状態で、○ボタン１１２ｂを押す
と、ステップＳ１２の判断が否定的となり、ステップＳ
１０のゲーム処理が開始され、図９に示したゲーム選択
画面３０６が表示される。

【０２２９】図３６は、上述した実施の形態に係る画像
処理・オーディオ処理の機能ブロック図を示している。

【０２３０】図３６において、オーディオ信号解析手段
５０２は、光ディスク２０あるいは音楽ＣＤ等から読み
出されたオーディオ信号を一定時間毎に分割するオーデ
ィオ信号分割手段５０４、一定時間毎に分割されたオー
ディオ信号をサンプリングするサンプリング手段５０６
と、サンプリング結果から周波数スペクトラムを検出す
る周波数スペクトラム検出手段５０８と、検出された各
周波数スペクトラムのピーク値を検出するか、あるいは
サンプリング結果から、直接、信号のピーク値を検出す
るピーク値検出手段５１０と、検出したピーク値を処理
して一定の順序を決定する順序決定手段５１２と、決定
された順序に基づき障害物オブジェクト４１１等を決定
する非直線オブジェクト決定手段（障害物オブジェクト
決定手段）５１４とを有する。

【０２３１】ここで、順序決定手段５１２における順序
決定処理として、第１に、周波数スペクトラム検出手段
５０８を経由しての周波数軸上の処理（周波数分析処
理）としては、検出したピーク値を、たとえば５００Ｈ
ｚより低域と高域のピーク値に分け、低域と高域とでピ
ーク値の大きい順に検出周波数を配列し、この検出周波
数の配列順を順序として決定する処理があり、第２に、
周波数スペクトラム検出手段５０８を迂回しての時間軸
上の処理（振幅分析処理）としては、検出したピーク値
のうち、大きい値から５番目のピーク値まで検出し、時
間軸上で隣り合うピーク値とピーク値とを結び、ピーク
値と次のピーク値との傾き（微分値）を正あるいは負と
し、この正、負の並びを順序として決定する処理を挙げ
ることができる。

【０２３２】非直線オブジェクト決定手段５１４は、オ
ーディオ信号解析結果と発生しようとする障害オブジェ
クトとの対応テーブル４２８または４２９を参照し、決
定された順序に対応して予め決められた所定の非直線オ
ブジェクト（障害物オブジェクト）を決定し、非直線線
画画像発生手段５１６に送る。

【０２３３】また、図３６の画像処理・オーディオ処理
機能ブロックにおいて、線画画像発生手段としては、非
直線線画画像発生手段５１６以外に、直線状線画画像発
生手段５１８と、キャラクタオブジェクト線画発生手段
５２０を有する。この場合、キャラクタオブジェクト線
画画像発生手段５２０は、操作装置１６の所定の押しボ
タンＰＢの操作タイミングを監視する操作監視手段５２
２からの監視結果によりキャラクタオブジェクト線画画
像の変化を決定するキャラクタオブジェクト線画画像変
化決定手段５２４の決定に基づいて所定のキャラクタオ
ブジェクト線画画像を発生する。

【０２３４】移動付与手段５２６は、直線状線画画像と
非直線線画画像とキャラクタオブジェクト線画画像に移
動量を付与する。

【０２３５】揺らぎ量決定手段５２８は、操作監視手段
５２２の監視結果に基づき揺らぎ量を決定する。

【０２３６】揺らぎ付与手段５３０は、揺らぎ量決定手
段５２８により決定された揺らぎ量に基づき、移動量が
付与された直線状線画画像と非直線線画画像とキャラク
タオブジェクト線画画像に対して、それぞれ異なる処理
の揺らぎを与える。

【０２３７】移動と揺らぎの付与された直線状線画画像
と非直線線画画像とキャラクタオブジェクト線画画像
は、合成手段５３２により合成され、描画手段５３４に
よりフレームバッファ２６３に描画される。

【０２３８】フレームバッファ２６３に描画された画像
は、表示制御手段５３６（ＧＰＵ２６２）の制御下に表
示部１８Ａの画面上に表示される。

【０２３９】以上説明したように、上述した実施の形態
によれば、オーディオ信号解析手段５０２によるオーデ
ィオ信号の解析結果に基づき、線画画像を発生するよう
にしているので、音楽に関連する新規な線画画像を発生
することができる。

【０２４０】この場合、オーディオ信号解析手段５０２
により、一定時間内のオーディオ信号を周波数分析する
ことで、オーディオ信号を簡単に処理することができ
る。

【０２４１】また、線画画像として、３次元線画画像と
することにより、よりエンタテインメント性の高い線画
画像とすることができる。

【０２４２】たとえば、図２５に示すように、３次元線
画画像４３２は、表示画面上、画面の左側から右側に延
びる略直線状の線画画像（仮想ロードオブジェクト線画
画像４２０Ｉｂ）中に、前記周波数分析結果に応じた非
直線の線画画像（障害物オブジェクト線画画像４１１Ｉ
ｂ等）が含まれた画像とすることで、線画画像の内容に
多様性を持たせることができる。

【０２４３】ここで、オーディオ信号は、エンタテイン
メント装置１２に対して記録媒体（光ディスク２０や音
楽ＣＤ）あるいは通信によりダウンロードされたオーデ
ィオ信号を用いることができる。

【０２４４】以上説明したオーディオ信号解析手段５０
２、線画画像発生手段５１６、５１８、５２０、移動付
与手段５２６、キャラクタオブジェクト線画画像変化決
定手段（キャラクタオブジェクト線画画像変化手段）５
２４、および揺らぎ付与手段５３０は、それぞれプログ
ラムとして光ディスク２０等の記録媒体に格納すること
ができる。

【０２４５】そして、この実施の形態に係るゲーム操作
を、たとえば、図２６を参照して説明すれば、所定のタ
イミングで、操作装置１６の所定の操作ボタンＰＢであ
るＬ１ボタン１１４ａを押すことで、画面の右奥方向か
ら左手前方向（矢印Ｅ方向）に移動する障害物オブジェ
クト線画画像４１１Ｉｃ、４１４Ｉｃ、４１３Ｉｃ、４
１２Ｉｃ付き仮想ロードオブジェクト線画画像４２０Ｉ
ｃを、キャラクタオブジェクト線画画像４０１Ｉｃによ
りクリアすることができる。

【０２４６】この場合、操作ボタンＰＢの押すタイミン
グを失したり、押す操作ボタンＰＢの種類を間違えたと
きには、図３０に示すように、クリアしようとした障害
物オブジェクト４１１が、原形をほとんど留めない程ば
らばらな障害物オブジェクト線画画像４１１Ｉｇとさ
れ、かつキャラクタオブジェクト４０１が、相当に大き
な揺らぎ振動の付与されたキャラクタオブジェクト線画
画像４０１Ｉｇに変化する。

【０２４７】このような操作により実行されるゲーム操
作のエンタテインメント性は、きわめて高いものといえ
る。

【０２４８】なお、この発明は、上述の実施の形態に限
らず、この発明の要旨を逸脱することなく、種々の構成
を採り得ることはもちろんである。

【０２４９】（１）たとえば、図１６に示した操作ボタ
ン障害物対応テーブル４１６、いわゆるキーアサインメ
ント（キーの割り当て）の他の例として、図３７に示す
操作ボタン障害物対応テーブル４１６Ａを併せて記憶し
ておくこともできる。この操作ボタン障害物対応テーブ
ル４１６Ａでは、障害物オブジェクト４１１、４１２、
４１３、４１４に対して、それぞれ、Ｌ１、Ｌ２ボタン
１１４ａ、１１４ｂ（どちらでもよい。）、Ｒ１、Ｒ２
ボタン１１６ａ、１１６ｂ（どちらでもよい。）、下ボ
タン１１０ｄ、×ボタン１１２ｃが割り当てられるよう
になっている。このようにすることで、使用者（操作
者）の嗜好等に合わせることができる。

【０２５０】（２）また、ステップＳ２６のオーディオ
信号分析処理に基づいて発生する障害物オブジェクトと
して、図１８および図１９に示したオーディオ信号解析
結果と発生しようとする障害オブジェクトとの対応テー
ブル４２８、４２９中に、たとえば図３８に示すよう
な、障害物オブジェクト４１４と４１２を合成手段によ
り合成した障害物オブジェクト６０２を発生するように
することもできる。この合成障害物オブジェクト６０２
をキャラクタオブジェクト４０１等によりクリアするに
は、所定のタイミング（所定範囲）で、対応するＲ１ボ
タン１１６ａと×ボタン１１２ｃの同時押しが必要にな
るようにすることができる。

【０２５１】合成障害物オブジェクトとしては、合成障
害物オブジェクト６０２の他、図３９に示すような種々
の合成障害物オブジェクト６０４、６０６、６０８、６
１０、６１２を発生（作成）するようにすることができ
る。

【０２５２】（３）さらに、ゲームの操作を簡単にする
ために、スタート画面３００が表示された状態におい
て、スタートボタン４０が押されたときには、図７、図
８を参照して説明した名前登録処理（ステップＳ７）が
行われることなく、図９に示したゲーム選択画面３０６
が表示されるようにして、名前登録処理を省略するよう
にすることもできる。

【０２５３】（４）さらにまた、障害物オブジェクト４
１１、４１２、４１３、４１４、仮想ロードオブジェク
ト４２０に特殊な動きを追加することができる。これ
は、たとえば音楽（曲）の要素と関連してあるいは音楽
の要素と関係なく、第１に、ゲームプログラムの設定に
より仮想ロードオブジェクト線画画像４２０Ｉｂの移動
速度を急激に変化させるようにすることができる。第２
に、たとえば、図２５において、手前側にある障害物オ
ブジェクト線画画像４１３Ｉｂを、その後方側にある障
害物オブジェクト４１２Ｉｂが早いスピードで追い越す
ようにすることができる。第３に、図４０において、表
示部１８Ａの画面６２０中の３次元線画画像６２２に示
すように、障害物オブジェクト線画画像６０２Ｉｉａ、
６０２Ｉｉｂが、矢印Ｅ方向に移動しながら仮想ロード
オブジェクト線画画像４２０Ｉｉを軸として右方向およ
び（または）左方向に回転するように表示することもで
きる。

【０２５４】

【発明の効果】以上説明したように、この発明によれ
ば、新規な線画画像をモニタ画面等に表示させることが
できる。

【０２５５】また、この発明によれば、オーディオ信号
解析結果に基づく非直線線画画像部分付き略直線状線画
画像上に、キャラクタオブジェクトの線画画像を発生さ
せるようにしているので、音楽に関連して新規な線画画
像をモニタ画面等に表示させることができる。

【０２５６】さらにこの発明では、モニタ画面上に揺ら
ぎのある線画画像を表示させることができる。

【０２５７】このように、画面に線画画像を表示するゲ
ームは、ほのぼのとした感じがあり、低年齢層から高年
齢層まで、幅広い年齢層に対応できるという可能性があ
る。

【０２５８】この場合、線画画像を３次元線画画像とす
ることで、飽きのこないエンタテインメント性の高い音
楽に関連したゲームを提供することが可能となる。

【図面の簡単な説明】

【図１】この発明の一実施の形態が適用されたエンタテ
インメントシステムの構成を示す斜視図である。

【図２】操作装置を示す斜視図である。

【図３】エンタテインメントシステムの回路構成を示す
ブロック図である。

【図４】操作装置の回路構成を示すブロック図である。

【図５】エンタテインメントシステムの全体動作説明に
供されるフローチャートである。

【図６】ゲームのスタート画面を示す説明図である。

【図７】名前登録画面を示す説明図である。

【図８】名前登録画面を示す説明図である。

【図９】ゲーム選択画面を示す説明図である。

【図１０】ゲーム選択画面を示す説明図である。

【図１１】ゲーム処理の詳細を示すフローチャートであ
る。

【図１２】キャラクタオブジェクトの説明図である。

【図１３】障害物オブジェクトの説明図である。

【図１４】仮想ロードオブジェクトの説明図である。

【図１５】オブジェクトの構成例を示す説明図である。

【図１６】操作ボタン障害物オブジェクト対応テーブル
の説明図である。

【図１７】オーディオ信号分析処理の説明に供されるフ
ローチャートである。

【図１８】オーディオ信号解析結果と発生しようとする
障害オブジェクトとの対応テーブルの説明図である。

【図１９】オーディオ信号解析結果と発生しようとする
障害物オブジェクトとの対応テーブルの説明図である。

【図２０】線画表示更新処理の説明に供されるフローチ
ャートである。

【図２１】フレームバッファの説明図である。

【図２２】３次元直線線画の発生の説明に供される図で
ある。

【図２３】ゲーム開始直後の画面を示す説明図である。

【図２４】揺らぎ処理の説明に供される図である。

【図２５】ゲーム開始後、数秒後の画面を示す説明図で
ある。

【図２６】キャラクタオブジェクトが障害物オブジェク
トを乗り越える画面を示す説明図である。

【図２７】キャラクタオブジェクトが障害物オブジェク
ト上で回転する画面を示す説明図である。

【図２８】キャラクタオブジェクトが障害物オブジェク
トを跨ぐ画面を示す説明図である。

【図２９】キャラクタオブジェクトが障害物オブジェク
トの中を回転する画面を示す説明図である。

【図３０】キャラクタオブジェクトが障害物オブジェク
トの乗り越えに失敗した直後の画面を示す説明図であ
る。

【図３１】キャラクタオブジェクトが障害物オブジェク
トの乗り越えに失敗した後、１秒程度以上の時間が過ぎ
たときの画面を示す説明図である。

【図３２】キャラクタ状態テーブルを示す説明図であ
る。

【図３３】ゲーム終了可能画面を示す説明図である。

【図３４】ゲーム終了可能画面を示す説明図である。

【図３５】クリア画面を示す説明図である。

【図３６】画像処理・オーディオ処理機能を示すブロッ
ク図である。

【図３７】他の例の操作ボタン障害物対応テーブルの説
明図である。

【図３８】他の例の障害物オブジェクト作成の説明に供
される図である。

【図３９】他の例の障害物オブジェクトの説明図であ
る。

【図４０】障害物オブジェクトが仮想ロードを軸として
回転動作する際の画面を示す説明図である。

【符号の説明】

１０…エンタテインメントシステム １２…エンタテ
インメント装置 １６…操作装置 １８…モニタ ２０…光ディスク（記録媒体） ２６３…フレー
ムバッファ ４０１、４０２、４０３…キャラクタオブジェクト ４１１、４１２、４１３、４１４…障害物オブジェクト ４１５、４１５ａ、４１５ｂ…基本オブジェクト ４２０…仮想ロードオブジェクト ４２８、４２９…オーディオ信号解析結果と発生しよう
とする障害オブジェクトとの対応テーブル ５０２…オーディオ信号解析手段 ５０４…オーデ
ィオ信号分割手段 ５０６…サンプリング手段 ５０８…周波数
スペクトラム検出手段 ５１０…ピーク値検出手段 ５１２…順序決
定手段 ５１４…非直線オブジェクト決定手段（障害物オブジェ
クト決定手段） ５１６…非直線線画画像発生手段 ５１８…直線状
線画画像発生手段 ５２０…キャラクタオブジェクト線画画像発生手段 ５２２…操作監視手段 ５２４…キャラクタオブジェクト線画画像変化決定手段 ５２６…移動付与手段 ５２８…揺らぎ
量決定手段 ５３０…揺らぎ付与手段 ５３２…合成手
段 ５３４…描画手段 ５３６…表示制
御手段

───────────────────────────────────────────────────── フロントページの続き (51)Int.Cl.⁷ 識別記号 ＦＩ Ｇ１０Ｌ 21/06 (72)発明者 アンソニー キャリコ アメリカ合衆国、マサチューセッツ州 サンダーランド、 フォールズ ロード 300 (56)参考文献 特開 平６−348811（ＪＰ，Ａ) 特開 平11−149565（ＪＰ，Ａ) 特開 平９−251368（ＪＰ，Ａ) 特開 平７−65143（ＪＰ，Ａ) 特開 平８−293039（ＪＰ，Ａ) 特開 平８−30807（ＪＰ，Ａ) 特開 平６−31058（ＪＰ，Ａ) 田淵 健康，”ダンスダンスレボリュ ーション２ｎｄＭＩＸ”，ＧＡＭＥＳ Ｔ，株式会社新声社，1999年３月15日, 第14巻，第10号，ｐ．104 ”Ｃｈｅｃｋ＆Ｒｅｐｏｒｔ／Ｓｏｕ ｎｄ Ｆｏｒｇｅ４．５＜Ｓｏｎｉｃ Ｆｏｕｎｄｒｙ＞”，ＤＴＭ ＭＡＧＡ ＺＩＮＥ，株式会社寺島情報企画，1999 年 １月 １日，第６巻，第１号，ｐ. 82−83 ”ビートマニア”，電撃ＰｌａｙＳｔ ａｔｉｏｎ，メディアワークス，1998年 11月27日，第４巻，第27号，ｐ．84−87 (58)調査した分野(Int.Cl.⁷，ＤＢ名) G06T 13/00 A63F 13/00 G10L 13/00 G10L 21/06 G06F 3/14 - 3/153 ＣＳＤＢ（日本国特許庁)

Claims (24)

(57)【特許請求の範囲】
1. 【請求項１】オーディオ信号を解析するオーディオ信号
   解析手段と、 オーディオ信号解析結果に基づき、線画画像を発生する
   線画画像発生手段とを備え、 前記線画画像は、表示画面上、画面の左側から右側に延
   びる略直線状の線画画像中に、前記オーディオ信号解析
   結果に応じた非直線の線画画像が含まれた画像であるこ
   とを特徴とするオーディオ処理・画像発生装置。
2. 【請求項２】請求項１記載のオーディオ処理・画像発生
   装置において、 前記非直線の線画画像は、複数の操作部を有する操作装
   置中、特定の操作部の操作入力タイミングを操作者に知
   らせる画像であることを特徴とするオーディオ処理・画
   像発生装置。
3. 【請求項３】オーディオ信号を記録した記録媒体または
   通信回線を介して供給されるオーディオ信号を解析する
   オーディオ信号解析手段と、 オーディオ信号解析結果に基づき、画像を発生する画像
   発生手段とを備え、 前記画像は、複数の操作部を有する操作装置中、特定の
   操作部の操作入力タイミングを操作者に知らせる画像で
   あることを特徴とするオーディオ処理・画像発生装置。
4. 【請求項４】請求項２または３記載のオーディオ処理・
   画像発生装置において、 前記操作入力タイミングは、前記オーディオ信号に基づ
   く音楽にあったタイミングであることを特徴とするオー
   ディオ処理・画像発生装置。
5. 【請求項５】オーディオ信号を解析するオーディオ信号
   解析手段と、 オーディオ信号解析結果に基づき、線画画像を発生する
   線画画像発生手段とを備え、 前記オーディオ信号解析手段は、 一定時間分のオーディオ信号における音の振幅のピーク
   値を大きい方から順番に所定個抽出し、 前記線画画像発生手段は、 抽出した前記所定個に対応して所定の線画画像を発生す
   ることを特徴とするオーディオ処理・画像発生装置。
6. 【請求項６】オーディオ信号を解析するオーディオ信号
   解析手段と、 オーディオ信号解析結果に基づき、線画画像を発生する
   線画画像発生手段とを備え、 前記オーディオ信号解析手段は、 一定時間分のオーディオ信号における音の振幅のピーク
   値を大きい方から順番に所定個抽出し、抽出した所定個
   のピーク値の隣り合うピーク間の正の傾きと負の傾きか
   らなる傾きの組み合わせを決定し、 前記線画画像発生手段は、 前記正負の傾きの組み合わせに対応して所定の線画画像
   を発生することを特徴とするオーディオ処理・画像発生
   装置。
7. 【請求項７】オーディオ信号を解析するオーディオ信号
   解析手段と、 オーディオ信号解析結果に基づき、線画画像を発生する
   線画画像発生手段とを備え、 前記オーディオ信号解析手段は、 一定時間分のオーディオ信号に対して高速フーリエ変換
   を施して周波数スペクトラムを検出し、検出した周波数
   スペクトラム中、所定周波数以上と未満とでそれぞれ複
   数のピーク値を検出して、上記所定周波数以上の周波数
   領域と上記所定周波数未満の周波数領域とで、それぞれ
   検出したピーク値を大きい順に並べ、それぞれ所定番目
   までの各所定個のピーク値に係る周波数の配列順番を決
   定し、 前記線画画像発生手段は、 前記配列順番に対応して所定の線画画像を発生すること
   を特徴とするオーディオ処理・画像発生装置。
8. 【請求項８】請求項１−７のいずれか１項に記載のオー
   ディオ処理・画像発生装置において、 前記画像および前記線画画像は、３次元線画画像である
   ことを特徴とするオーディオ処理・画像発生装置。
9. 【請求項９】オーディオ信号を解析するオーディオ信号
   解析ステップと、 オーディオ信号解析結果に基づき、線画画像を発生する
   線画画像発生ステップとを備え、 前記線画画像は、表示画面上、画面の左側から右側に延
   びる略直線状の線画画像中に、前記オーディオ信号解析
   結果に応じた非直線の線画画像が含まれた画像であるこ
   とを特徴とするオーディオ処理・画像発生方法。
10. 【請求項１０】請求項９記載のオーディオ処理・画像発
    生方法において、 前記非直線の線画画像は、複数の操作部を有する操作装
    置中、特定の操作部の操作入力タイミングを操作者に知
    らせる画像であることを特徴とするオーディオ処理・画
    像発生方法。
11. 【請求項１１】オーディオ信号を記録した記録媒体また
    は通信回線を介して供給されるオーディオ信号を解析す
    るオーディオ信号解析ステップと、 オーディオ信号解析結果に基づき、画像を発生する画像
    発生ステップとを備え、 前記画像は、複数の操作部を有する操作装置中、特定の
    操作部の操作入力タイミングを操作者に知らせる画像で
    あることを特徴とするオーディオ処理・画像発生方法。
12. 【請求項１２】請求項１０または１１記載のオーディオ
    処理・画像発生方法において、 前記操作入力タイミングは、前記オーディオ信号に基づ
    く音楽にあったタイミングであることを特徴とするオー
    ディオ処理・画像発生方法。
13. 【請求項１３】オーディオ信号を解析するオーディオ信
    号解析ステップと、 オーディオ信号解析結果に基づき、線画画像を発生する
    線画画像発生ステップとを備え、 前記オーディオ信号解析ステップは、 一定時間分のオーディオ信号における音の振幅のピーク
    値を大きい方から順番に所定個抽出し、 前記線画画像発生ステップは、 抽出した前記所定個に対応して所定の線画画像を発生す
    ることを特徴とするオーディオ処理・画像発生方法。
14. 【請求項１４】オーディオ信号を解析するオーディオ信
    号解析ステップと、 オーディオ信号解析結果に基づき、線画画像を発生する
    線画画像発生ステップとを備え、 前記オーディオ信号解析ステップは、 一定時間分のオーディオ信号における音の振幅のピーク
    値を大きい方から順番に所定個抽出し、抽出した所定個
    のピーク値の隣り合うピーク間の正の傾きと負の傾きか
    らなる傾きの組み合わせを決定し、 前記線画画像発生ステップは、 前記正負の傾きの組み合わせに対応して所定の線画画像
    を発生することを特徴とするオーディオ処理・画像発生
    方法。
15. 【請求項１５】オーディオ信号を解析するオーディオ信
    号解析ステップと、 オーディオ信号解析結果に基づき、線画画像を発生する
    線画画像発生ステップとを備え、 前記オーディオ信号解析ステップは、 一定時間分のオーディオ信号に対して高速フーリエ変換
    を施して周波数スペクトラムを検出し、検出した周波数
    スペクトラム中、所定周波数以上と未満とでそれぞれ複
    数のピーク値を検出して、上記所定周波数以上の周波数
    領域と上記所定周波数未満の周波数領域とで、それぞれ
    検出したピーク値を大きい順に並べ、それぞれ所定番目
    までの各所定個のピーク値に係る周波数の配列順番を決
    定し、 前記線画画像発生ステップは、 前記配列順番に対応して所定の線画画像を発生すること
    を特徴とするオーディオ処理・画像発生方法。
16. 【請求項１６】請求項９−１５のいずれか１項に記載の
    オーディオ処理・画像発生方法において、 前記画像および前記線画画像は、３次元線画画像である
    ことを特徴とするオーディオ処理・画像発生方法。
17. 【請求項１７】オーディオ信号を解析するオーディオ信
    号解析ステップと、 オーディオ信号解析結果に基づき、線画画像を発生する
    線画画像発生ステップとを有し、 前記線画画像は、表示画面上、画面の左側から右側に延
    びる略直線状の線画画像中に、前記オーディオ信号解析
    結果に応じた非直線の線画画像が含まれた画像であるこ
    とを特徴とするプログラムが格納された記録媒体。
18. 【請求項１８】請求項１７記載の記録媒体において、 前記非直線の線画画像は、複数の操作部を有する操作装
    置中、特定の操作部の操作入力タイミングを操作者に知
    らせる画像であることを特徴とする記録媒体。
19. 【請求項１９】オーディオ信号を記録した記録媒体また
    は通信回線を介して供給されるオーディオ信号を解析す
    るオーディオ信号解析ステップと、 オーディオ信号解析結果に基づき、画像を発生する画像
    発生ステップとを有し、 前記画像は、複数の操作部を有する操作装置中、特定の
    操作部の操作入力タイミングを操作者に知らせる画像で
    あることを特徴とするプログラムが格納された記録媒
    体。
20. 【請求項２０】請求項１８または１９記載の記録媒体に
    おいて、 前記操作入力タイミングは、前記オーディオ信号に基づ
    く音楽にあったタイミングであることを特徴とする記録
    媒体。
21. 【請求項２１】オーディオ信号を解析するオーディオ信
    号解析ステップと、 オーディオ信号解析結果に基づき、線画画像を発生する
    線画画像発生ステップとを有し、 前記オーディオ信号解析ステップは、 一定時間分のオーディオ信号における音の振幅のピーク
    値を大きい方から順番に所定個抽出し、 前記線画画像発生ステップは、 抽出した前記所定個に対応して所定の線画画像を発生す
    ることを特徴とするプログラムが格納された記録媒体。
22. 【請求項２２】オーディオ信号を解析するオーディオ信
    号解析ステップと、 オーディオ信号解析結果に基づき、線画画像を発生する
    線画画像発生ステップとを有し、 前記オーディオ信号解析ステップは、 一定時間分のオーディオ信号における音の振幅のピーク
    値を大きい方から順番に所定個抽出し、抽出した所定個
    のピーク値の隣り合うピーク間の正の傾きと負の傾きか
    らなる傾きの組み合わせを決定し、 前記線画画像発生ステップは、 前記正負の傾きの組み合わせに対応して所定の線画画像
    を発生することを特徴とするプログラムが格納された記
    録媒体。
23. 【請求項２３】オーディオ信号を解析するオーディオ信
    号解析ステップと、 オーディオ信号解析結果に基づき、線画画像を発生する
    線画画像発生ステップとを有し、 前記オーディオ信号解析ステップは、 一定時間分のオーディオ信号に対して高速フーリエ変換
    を施して周波数スペクトラムを検出し、検出した周波数
    スペクトラム中、所定周波数以上と未満とでそれぞれ複
    数のピーク値を検出して、上記所定周波数以上の周波数
    領域と上記所定周波数未満の周波数領域とで、それぞれ
    検出したピーク値を大きい順に並べ、それぞれ所定番目
    までの各所定個のピーク値に係る周波数の配列順番を決
    定し、 前記線画画像発生ステップは、 前記配列順番に対応して所定の線画画像を発生すること
    を特徴とするプログラムが格納された記録媒体。
24. 【請求項２４】請求項１７−２３のいずれか１項に記載
    の記録媒体において、 前記画像および前記線画画像は、３次元線画画像である
    ことを特徴とする記録媒体。