JP2002535794A - 対話型エンターテイメントシステムおよび方法 - Google Patents

対話型エンターテイメントシステムおよび方法

Info

Publication number
JP2002535794A
JP2002535794A JP2000596441A JP2000596441A JP2002535794A JP 2002535794 A JP2002535794 A JP 2002535794A JP 2000596441 A JP2000596441 A JP 2000596441A JP 2000596441 A JP2000596441 A JP 2000596441A JP 2002535794 A JP2002535794 A JP 2002535794A
Authority
JP
Japan
Prior art keywords
page
physical object
audiovisual
physical
interactive
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2000596441A
Other languages
English (en)
Inventor
シュミット，クリストファー，エッチ．
ジョードン，アダム，シー．
ピアノ，フィリップ，ピー．
セサロッティ，ウィリアム，エー．
パパドポーロス，デスピーナ
ペトラヴィック，ロビン，ジー．
ライチュリ，デビッド，ダブリュ．
ウィーチャフター，ジェニー，ダナ
Original Assignee
レゴ エー／エス
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by レゴ エー／エス filed Critical レゴ エー／エス
Publication of JP2002535794A publication Critical patent/JP2002535794A/ja
Pending legal-status Critical Current

Links

Classifications

    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/214—Input arrangements for video game devices characterised by their sensors, purposes or types for locating contacts on a surface, e.g. floor mats or touch pads
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/40—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment
    • A63F13/42—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle
    • A63F13/424—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle involving acoustic input signals, e.g. by using the results of pitch or rhythm extraction or voice recognition
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/40—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment
    • A63F13/42—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle
    • A63F13/428—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle involving motion or position input signals, e.g. signals representing the rotation of an input controller or a player's arm motions sensed by accelerometers or gyroscopes
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/50—Controlling the output signals based on the game progress
    • A63F13/54—Controlling the output signals based on the game progress involving acoustic signals, e.g. for simulating revolutions per minute [RPM] dependent engine sounds in a driving game or reverberation against a virtual wall
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/60—Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor
    • A63F13/65—Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor automatically by game devices or servers from real world data, e.g. measurement in live racing competition
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F3/00—Board games; Raffle games
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L13/00—Speech synthesis; Text to speech systems
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/213—Input arrangements for video game devices characterised by their sensors, purposes or types comprising photodetecting means, e.g. cameras, photodiodes or infrared cells
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/90—Constructional details or arrangements of video game devices not provided for in groups A63F13/20 or A63F13/25, e.g. housing, wiring, connections or cabinets
    • A63F13/98—Accessories, i.e. detachable arrangements optional for the use of the video game device, e.g. grip supports of game controllers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Health & Medical Sciences (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Computational Linguistics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

(57)【要約】 対話型エンターテイメントシステムを開示する。このシステムには、エンターテイメントデバイスを表すベース（１０４）と、ベースから分離された物理センサオブジェクト（１０６）と、ベースに対する相対的なセンサオブジェクトの存在、位置、および識別を検出するように配置された検出器（１０２）と、ベースによって表されるエンターテイメントデバイスに関係するオーディオビジュアルセグメントを出力するように構成された対話型オーディオビジュアルプログラム（１１２）が含まれる。物理センサオブジェクトの検出によって、対話型オーディオビジュアルプログラムが、ベースに対する相対的なセンサオブジェクトの検出された位置に少なくとも部分的に基づき、センサオブジェクトによって検出可能と見なされるベース上の不可視の情報を含むオーディオビジュアルセグメントを出力する。

Description

【発明の詳細な説明】
【０００１】 （発明の背景） 本発明は、全般的には、物理システムとのコンピュータ対話に関し、具体的に
は、物理的な書籍との対話に関する。本発明は、他の種類のエンターテイメント
システムにも適用可能である。
【０００２】 一般に、通常の書籍は、登場人物および出来事の特定の組を有する物語を読者
に提供するテキストの束である。人が書籍を読む時に、読者は、登場人物の外見
と、彼らが異なる出来事に反応するさまを想像することができる。通常の書籍に
は、物語からの登場人物および出来事の視覚的な図を読者に与える絵も含めるこ
とができる。
【０００３】 読者は、通常は、通常の書籍を最初から最後まで読み、物語の出来事が、テキ
ストの記述によって配置される所定の順序で順次展開される。言い換えると、物
語の筋からの逸脱はなく、書籍の物語またはテキストは固定されたままになる。
要するに、通常の書籍は、対話的ではなく、物語を提示する方法に関して読者が
入力することを許容しない。
【０００４】 最近、一部の、限られた対話能力を提供する書籍が、設計された。たとえば、
一部の児童書に、書籍に組み込まれたボタンを押すことによって選択し、再生す
ることができるサウンドファイルが含まれる。これらのサウンドは、通常は、物
語に対応する。たとえば、農家の内庭の動物の声を、農家に関する物語と共に提
供することができる。
【０００５】 従来の書籍は、限られた対話性を提供するが、改良された対話性を提供するた
めに書籍とインターフェースする改良された機構が望ましい。そのような機構に
よって、ユーザが、物語の方向を選択できるか、物語に追加される出来事を選択
できるようになることが好ましい。
【０００６】 （発明の要約） したがって、本発明は、書籍または他の種類の物理的なエンターテイメントデ
バイスと複雑な形でインターフェースするシステムおよび装置を提供する。エン
ターテイメントデバイスには、書籍またはゲームボードまたはゲームプラットホ
ームなどの物理的なベースに配置するかそれに関連付けることができる物理オブ
ジェクトが含まれる。ユーザは、ベースの上で物理オブジェクトを動かすか、物
理オブジェクトをベースに追加し、除去することができる。ユーザが、物理オブ
ジェクトと対話する（たとえば、ベースに関してオブジェクトを動かすか、書籍
のページをめくる）時に、対応するオーディオビジュアルプログラムが実行され
て、物理エンターテイメントデバイス内で提示されるものに追加される１つまた
は複数のオーディオビジュアルセグメントが表示または再生される。
【０００７】 本発明の一実施形態では、対話型エンターテイメントシステムが開示される。
上記システムは、エンターテイメントデバイスを表すベースと、上記ベースから
分離された物理センサオブジェクトと、上記ベースに対する相対的な上記センサ
オブジェクトの存在、位置、および識別を検出するように配置された検出器と、
上記ベースによって表される上記エンターテイメントデバイスに関係するオーデ
ィオビジュアルセグメントを出力するように構成された対話型オーディオビジュ
アルプログラムとを含む。上記物理センサオブジェクトの検出が、上記対話型オ
ーディオビジュアルプログラムに、上記ベースに対する相対的な上記センサオブ
ジェクトの上記検出された位置に少なくとも部分的に基づき、上記センサオブジ
ェクトによって検出可能と見なされる上記ベース上の不可視の情報を含むオーデ
ィオビジュアルセグメントを出力させる。
【０００８】 好ましい実施形態では、上記センサオブジェクトが、それ自体は上記オーディ
オビジュアルセグメントに表示されない。もう１つの好ましい実施形態では、上
記エンターテイメントデバイスが、ゲーム、玩具、書籍、または物語のいずれか
である。代替案では、上記センサオブジェクトが、その機能を表す物理的形態を
有する。上記オーディオビジュアルプログラムによって出力される上記オーディ
オビジュアルセグメントが、上記センサオブジェクトの上記検出された位置に配
置された上記ベースの部分の拡張された図を含むか、上記センサオブジェクトの
上記検出された位置に配置された上記ベースの部分に関係するオーディオセグメ
ントを含むか、その両方であることが好ましい。
【０００９】 代替実施形態では、エンターテイメントシステムが、エンターテイメントデバ
イスを表すベースと、上記対話型エンターテイメントシステム内の登場人物を表
す物理登場人物オブジェクトと、上記ベースに対する相対的な上記登場人物オブ
ジェクトの存在、位置、および識別を検出するように配置された検出器と、上記
登場人物オブジェクトの検出された状態に基づいて上記物理登場人物オブジェク
トのジェスチャ動きを認識するように配置されたジェスチャリコグナイザとを含
む。上記エンターテイメントシステムは、さらに、上記ベースによって表される
上記エンターテイメントデバイスに関係するオーディオビジュアルセグメントを
出力するように構成された対話型オーディオビジュアルプログラムを含む。上記
ジェスチャリコグナイザによる選択されたジェスチャの認識が、上記対話型オー
ディオビジュアルプログラムに、上記検出されたジェスチャに少なくとも部分的
に基づくオーディオビジュアルセグメントを出力させる。
【００１０】 もう１つの実施形態では、対話型エンターテイメントシステムが、ゲーム、玩
具、または書籍からなるグループから選択されたエンターテイメントデバイスを
表すベースと、複数の物理オブジェクトとを含む。物理オブジェクトは、環境オ
ブジェクト、登場人物オブジェクト、およびセンサオブジェクトを含む。上記エ
ンターテイメントシステムは、上記ベースに対する相対的な上記物理オブジェク
トの存在、位置、および識別を検出するように配置された検出器と、上記ベース
に対する相対的な上記物理オブジェクトの上記検出された位置に少なくとも部分
的に基づく、上記ベースによって表される上記エンターテイメントデバイスに関
係するオーディオビジュアルセグメントを出力するように構成された対話型オー
ディオビジュアルプログラムとも含む。選択されたセンサオブジェクトの検出が
、上記対話型オーディオビジュアルプログラムに、上記ベース上で不可視である
が上記センサオブジェクトによって検出可能とみなされる情報を含むオーディオ
ビジュアルセグメントを出力させ、登場人物オブジェクトの検出が、上記対話型
オーディオビジュアルプログラムに、出力されるオーディオビジュアルセグメン
ト内に上記検出された登場人物を含めさせ、環境オブジェクトの検出が、上記対
話型オーディオビジュアルプログラムに、出力されるオーディオビジュアルセグ
メント内に上記検出された環境オブジェクトを含めさせる。
【００１１】 代替実施形態では、複数の領域を有する書籍システムとインターフェースする
方法が開示される。上記書籍システムは、データを抽出するためにスキャンされ
る。この実施形態では、上記抽出されたデータが、上記書籍システムの一部であ
る物理オブジェクトの位置および識別子を含む。上記物理オブジェクトに最も近
い領域が、上記抽出されたデータに基づいて識別される。オーディオビジュアル
プログラムが、上記物理オブジェクトの識別子および上記識別された領域に関す
る上記物理オブジェクトの位置の判定に少なくとも部分的に基づいて実行される
。
【００１２】 本発明の装置態様では、書籍システムと対話するコンピュータシステムが開示
される。上記コンピュータシステムは、上記書籍システムから抽出されたデータ
を受け取るように配置されたデータ入力デバイスを含む。上記抽出されたデータ
が、少なくとも、上記書籍システムの一部である選択された物理オブジェクトの
位置および識別を含む。上記コンピュータシステムは、上記抽出されたデータに
基づいて、上記選択された物理オブジェクトに最も近い領域を識別するように配
置されたデータインタープリタと、上記選択された物理オブジェクトの上記位置
および識別子と、上記最も近い領域および関連する識別子との判定に少なくとも
部分的に基づく対話型ビジュアルイメージを出力するように構成された表示デバ
イスとも含む。
【００１３】 もう１つの態様では、複数の領域を有する書籍システムとインターフェースす
るプログラム命令を含むコンピュータ可読媒体が開示される。上記コンピュータ
可読媒体は、データを抽出するために上記書籍システムをスキャンするコンピュ
ータコードを含む。上記抽出されたデータが、上記書籍システムの一部である物
理オブジェクトの位置および識別子を含む。上記コンピュータ可読媒体は、上記
抽出されたデータに基づいて、上記物理オブジェクトに最も近い領域を識別する
コンピュータコードと、上記物理オブジェクトの上記識別子および上記識別され
た領域に関する上記物理オブジェクトの位置の判定に少なくとも部分的に基づく
オーディオビジュアルプログラムを実行するコンピュータコードと、上記コンピ
ュータ可読コードを保管するコンピュータ可読媒体とを含む。
【００１４】 装置態様で、書籍システムが開示される。上記書籍システムは、各ページが１
つまたは複数の領域を有する複数のページと、上記ページの上で移動可能な物理
オブジェクトと、コンピュータシステムと結合することができる位置感知デバイ
スとを含む。上記位置感知デバイスは、上記ページの位置、上記物理オブジェク
トの識別、および上記物理オブジェクトの位置を検出するように上記コンピュー
タシステムによって構成可能である。上記コンピュータシステムが、上記ページ
および物理オブジェクトの上記位置および上記物理オブジェクトの識別を検出す
るように上記位置感知デバイスを構成する命令を用いてプログラムもされる。上
記コンピュータシステムが、上記物理オブジェクトに最も近い領域を判定し、上
記ページの位置と、上記物理オブジェクトの識別および位置と、上記最も近い領
域とに基づいてオーディオビジュアルプログラムを生成する命令を用いてプログ
ラムもされる。好ましい実施形態では、上記位置感知デバイスが、電磁感知機構
の形である。
【００１５】 もう１つの実施形態では、複数のページ、第１物理オブジェクト、および第２
物理オブジェクトを有する書籍システムとインターフェースする方法が開示され
る。各物理オブジェクトを、複数のページの１つの近くに配置することができる
。上記書籍システムは、データを抽出するためにスキャンされ、上記抽出された
データが、上記第１物理オブジェクトが上記ページの１つの近くに配置される場
合に、少なくとも第１の選択された物理オブジェクトの第１位置および第１識別
子を含み、上記抽出されたデータが、上記第２物理オブジェクトが上記ページの
１つの近くに配置される場合に、上記第２物理オブジェクトの第２位置および第
２識別子を含む。上記第１の選択された物理オブジェクトに最も近い第１領域が
、上記第１物理オブジェクトが上記ページの１つの近くに配置される場合に、上
記抽出されたデータに基づいて識別される。上記第２物理オブジェクトに最も近
い第２領域が、上記第２物理オブジェクトが上記ページの１つの近くに配置され
る場合に、上記抽出されたデータに基づいて識別される。オーディオビジュアル
プログラムが、上記第１物理オブジェクトが上記ページの１つの近くに配置され
る場合に、上記第１物理オブジェクトの上記第１位置および第１識別子と上記第
１領域の識別子とに少なくとも部分的に基づいて実行され、オーディオビジュア
ルプログラムが、上記第２物理オブジェクトが上記ページの１つの近くに配置さ
れる場合に、上記第２物理オブジェクトの上記第２位置および第２識別子と上記
第２領域の識別子とに少なくとも部分的に基づいて実行される。
【００１６】 代替実施形態では、複数のページ、第１物理オブジェクト、および第２物理オ
ブジェクトを有する書籍システムとインターフェースするプログラム命令を含む
コンピュータ可読媒体が開示される。各物理オブジェクトを、複数のページの１
つの近くに配置することができ、上記コンピュータ可読媒体が、（ｉ）データを
抽出するために上記書籍システムをスキャンするコンピュータコードであって、
上記抽出されたデータが、上記第１物理オブジェクトが上記ページの１つの近く
に配置される場合に、少なくとも第１の選択された物理オブジェクトの第１位置
および第１識別子を含み、上記抽出されたデータが、上記第２物理オブジェクト
が上記ページの１つの近くに配置される場合に、上記第２物理オブジェクトの第
２位置および第２識別子を含む、コンピュータコードと、（ｉｉ）上記第１物理
オブジェクトが上記ページの１つの近くに配置される場合に、上記抽出されたデ
ータに基づいて上記第１の選択された物理オブジェクトに最も近い第１領域を識
別するコンピュータコードと、（ｉｉｉ）上記第２物理オブジェクトが上記ペー
ジの１つの近くに配置される場合に、上記抽出されたデータに基づいて上記第２
物理オブジェクトに最も近い第２領域を識別するコンピュータコードと、（ｉｖ
）上記第１物理オブジェクトが上記ページの１つの近くに配置される場合に、上
記第１物理オブジェクトの上記第１位置および第１識別子と上記第１領域の識別
子とに少なくとも部分的に基づいてオーディオビジュアルプログラムを実行する
コンピュータコードと、（ｖ）上記第２物理オブジェクトが上記ページの１つの
近くに配置される場合に、上記第２物理オブジェクトの上記第２位置および第２
識別子と上記第２領域の識別子とに少なくとも部分的に基づいてオーディオビジ
ュアルプログラムを実行するコンピュータコードと、（ｖｉ）上記コンピュータ
可読コードを保管するコンピュータ可読媒体とを含む。
【００１７】 （具体的な実施形態の詳細な説明） これから本発明の具体的な実施形態を詳細に参照する。これらの具体的な実施
形態の例を、添付図面に図示する。本発明を、これらの具体的な実施形態に関し
て説明するが、本発明を説明される実施形態に制限することが意図されていない
ことを理解されたい。逆に、請求項によって定義される本発明の趣旨および範囲
の中に含めることができる代替形態、修正形態、および同等物を含めることが意
図されている。以下の説明では、本発明の完全な理解を提供するために、多数の
具体的な詳細を示す。本発明は、これらの具体的な詳細の一部またはすべてなし
に実践することができる。他の場合には、本発明を不要に不明瞭にしないために
、周知の処理動作は詳細に説明しない。
【００１８】 一般に、本発明の実施形態の１つに、複雑な形で書籍とインターフェースする
方法および装置が含まれる。読者が書籍のページをめくる時に、たとえば、ペー
ジ位置が、検出され、対応するオーディオビジュアルプログラムが、コンピュー
タシステム上で実行される。すなわち、ビジュアルイメージが表示されるか、サ
ウンドが再生されるか、その両方が行われる。オーディオビジュアルプログラム
は、物理書籍のテキストに関係し、読書経験に追加される。
【００１９】 書籍システムに、物理書籍と共に使用することができ、オーディオビジュアル
プログラムの操作または変更を可能にするツールも含めることができる。例とし
て、特定のツール（たとえば拡大ツール）が、書籍の特定のページの特定の部分
（たとえば絵）に置かれる時に、対応するオーディオビジュアルプログラム（た
とえば絵の一部の拡大図）を表示することができる。
【００２０】 言い換えると、ユーザが、ツールを使用するかページをめくることによって書
籍と対話する時に、ユーザに、コンピュータ上で対応するオーディオビジュアル
対話が提供され、その対話によって、書籍の経験が大幅に強化される。要するに
、書籍システムには、ページまたはツールの動きを検出する機構が含まれ、物理
書籍のページのテキストおよびイメージによって表される物語に加えて、出来事
または登場人物が、物語のオーディオビジュアル表現に挿入される。
【００２１】 図１に、本発明の一実施形態による対話型書籍システム１００を示す。検出シ
ステムに、物理書籍ユニット１０３、コンピュータシステム１１０、および物理
書籍ユニット１０３とコンピュータシステム１１０の間をインターフェースする
入出力ボード１０８が含まれる。図からわかるように、物理書籍ユニット１０３
には、アンテナ１０２を有するプリント回路（ＰＣ）ボード１０１、複数のペー
ジ１０４を有する物理書籍、および１つまたは複数のツール１０６が含まれる。
ツール１０６の一部に、ボタンなどの対話デバイス１０７も含めることができる
。書籍ユニット１０３に、スイッチまたはボタンなどの固定された対話デバイス
１０９（すなわち、このデバイスは固定された静止位置を有する）も含めること
ができる。
【００２２】 コンピュータシステム１１０には、とりわけ、ドライバ１１４、アプリケーシ
ョンプログラム１１２、ディスプレイ１１６、およびスピーカ１１８が含まれる
。プロセッサおよびメモリユニットなどの、コンピュータシステムの複数の周知
のコンポーネントは、本発明を不明瞭にしないために、図１に含まれず、説明さ
れない。
【００２３】 コンピュータシステム１１０は、物理書籍ユニット１０３とは別のコンポーネ
ントであるものとして図示されているが、もちろん、コンピュータシステム１１
０を物理書籍ユニット１０３と統合することができる。さらに、テレビジョンシ
ステムまたはセットトップボックスなどの、他のタイプのインターフェースを使
用することができることを理解されたい。また、入出力ボード１０８を、物理書
籍ユニット１０３と統合することができる。
【００２４】 対話型書籍システム１００に、書籍ユニット１０３に関連するさまざまなツー
ル（たとえば１０６）およびページ（たとえば１０４）の存在、位置、および識
別を検出する適当な機構を含めることができる。たとえば、検出機構は、何ペー
ジが書籍の右側にめくられた（たとえばページ１０４ａ）か、および何ページが
書籍の左側にめくられた（たとえばページ１０４ｂ）かを検出することができる
。検出機構は、どのツールが書籍ユニットのページの上に置かれているか、およ
びページのどの部分にツールが置かれているかを識別できるようにすることもで
きる。
【００２５】 書籍ユニット１０３のページおよびツールを検出し、識別するために、少なく
ともいくつかのツールおよびページに、検出可能なマーカが含まれる。マーカが
、書籍ユニット１０３内に置かれるかそこで動かされる（たとえば、ツールをペ
ージ上に置くことによるか、ページをめくることによって）時に、マーカの位置
を、検出機構によって感知することができる。マーカによって、ツールまたはペ
ージも識別されることが好ましい。すなわち、検出機構は、異なるツールおよび
ページの異なるマーカの間で区別することができる。
【００２６】 図示の実施形態では、書籍ユニットに、書籍のツールおよびページを検出し、
検出されたデータをコンピュータに入力するために、電磁検出システムが含まれ
る。適当な電磁検出システムを実施することができる。もちろん、光学センサま
たは電子センサなどの他の検出システムを使用できることを諒解されたい。
【００２７】 図示の電磁検出システムでは、書籍ユニット１０３に、共振器が特定の共振周
波数を有する励起信号によって活動化された時にアンテナ１０２によって検出可
能な複数の共振器回路（図示せず）が含まれる。共振器回路は、書籍ユニット１
０３のツールおよびページの検出を容易にする、適当な形で配置することができ
る。
【００２８】 一実施形態では、ツール１０６およびページ１０４のそれぞれに、特定の共振
周波数で共振する単純な共振器回路（たとえば、キャパシタと直列のコイル）が
含まれる。１つまたは複数の共振器回路を活動化する周波数を有する励起信号が
、アンテナ１０２で放射される。共振器が励起信号の周波数で共振する時に、共
振信号が、共振器によってアンテナ１０２上で誘導される。要するに、アンテナ
１０２の励起信号が、活動化された共振器およびそれに対応する、アンテナに対
する相対位置によって影響される。
【００２９】 一実施形態では、励起信号の変更を分析して、どの共振器が共振しているかと
、それに対応する位置を判定することができる。励起信号は、共振信号を独立に
分析できるように停止されることが好ましい。すなわち、アンテナの励起信号が
停止される時に、活動化された共振器が、「リンギング」信号を作り続け、この
信号が、アンテナ１０２上で誘導され続け、したがって、励起信号によって干渉
されずにアンテナ１０２上で明瞭に検出できるようになる。
【００３０】 アンテナ１０２は、さまざまな共振器回路の位置を感知するのに適する形とす
ることができる。一実施形態では、アンテナが、ＰＣボード１０１に埋め込まれ
るループの形である。アンテナ１０２は、共振回路およびその位置をアンテナ１
０２によって感知できるように配置される。言い換えると、アンテナ１０２内に
誘導される共振信号は、アンテナ１０２に関する活動化された共振器の位置に依
存する。要するに、共振器の位置ならびに関連するツールまたはページの位置を
、アンテナ１０２内に誘導される共振信号を分析することによって、アンテナ１
０２に対して相対的に判定することができる。
【００３１】 書籍システムに、任意の数および種類のツールを含めることができる。ツール
は、書籍ユニット１０３の一部と対話するのに使用することができるオブジェク
トとして定義される。ツールは、視覚センサまたは聴覚センサを表すことができ
る。すなわち、ツールが書籍ユニットの選択された位置の上で動かされる時に、
選択された位置に関係する追加のイメージまたはサウンドもしくはその両方が、
オーディオビジュアルプログラムを介して示される。たとえば、ツールを使用し
て、ページのあるグラフィック部分を拡大することができ、その拡大図は、オー
ディオビジュアルプログラムによって生成される。もう１つの例として、ツール
を、書籍ユニットの諸部分に関係するサウンドを示すリスニングデバイスとして
使用することができる。ツールのほかに、書籍システムに、複数の状態を有する
オブジェクトとして定義される対話デバイスも含めることができる。たとえば、
対話デバイスは、ボタン、スイッチ、またはノブの形とすることができる。
【００３２】 ツールおよび対話デバイスは、書籍ユニット１０３内で固定されるか、移動可
能とすることができる。対話デバイスは、特定のツールに関連付けることができ
、また、書籍ユニット１０３内の独立のオブジェクトとすることができる。各ツ
ール、ページ、および対話デバイスを、別個の周波数で共振する共振器を有する
ものとして構成することができる。もちろん、対話デバイスがツールに関連する
場合には、この対が単一の共振器を有することができる。
【００３３】 この実施形態では、ツールおよび／または対話デバイスの位置を、アンテナ１
０２を介して異なる周波数を有する励起信号を送信することによって、別々に検
出することができる。選択された周波数を有する特定の励起信号によって、対応
するツールまたは対話デバイスの共振器が活動化され、これによって、別個の共
振信号がアンテナ１０２内で作られる。したがって、各オブジェクトを、その特
定の共振周波数によって識別することができる。
【００３４】 代替案では、ツールの共振器回路が、同一の共振周波数で共振することができ
るが、共振器が、ツール自体の中で変化する「ｚ」位置に配置される。各ツール
は、共振器の関連するｚ位置によって一意に識別される。同一の周波数を有する
共振器を配置し、識別する、この実施形態ならびに複数の他の実施形態が、米国
特許出願第０９／１４４９５１号明細書、表題「Ｄｅｔｅｃｔｉｎｇ Ｐｈｙｓ
ｉｃａｌ Ｏｂｊｅｃｔ Ｓｔａｔｅｓ Ｕｓｉｎｇ ＥｌｅｃｔｒｏＭａｇｎ
ｅｔｉｃ Ｓｅｎｓｏｒｓ」、出願人ベスコビ（Ｍａｒｃｏｓ Ｒ． Ｖｅｓｃ
ｏｖｉ）他、１９９８年９月１日出願に記載されており、この特許出願書は、参
照によってその全体を本明細書に組み込まれる。
【００３５】 適当な機構を実施して、共振信号または検出された信号を、コンピュータシス
テムへの入力に適当な信号に変換することができる。図からわかるように、検出
された信号は、入出力ボード１０８を介し、ドライバ１１４を介して、アプリケ
ーションプログラム１１２に送られる。入出力ボード１０８は、検出された信号
をディジタル信号（たとえば２進パルス波）に変換するように配置される。アプ
リケーションソフトウェア１１２は、検出された信号を分析して、書籍ユニット
１０３のさまざまなオブジェクトの位置および識別を判定し、対応するオーディ
オビジュアルプログラムを生成する。ドライバ１１４は、アプリケーションソフ
トウェア１１２と入出力ボード１０８の間の通信を可能にするように配置される
。
【００３６】 一般に、位置データは、検出された信号に基づいて判定され、位置データは、
オーディオビジュアルプログラムの生成またはトリガのために処理され、使用さ
れる。位置データに基づくオーディオビジュアルプログラムを生成する方法の例
が、米国特許出願第０９／０１８０２３号明細書、１９９８年２月出願、表題「
Ｃｏｍｐｕｔｅｒ Ｍｅｔｈｏｄ ａｎｄ Ａｐｐａｒａｔｕｓ ｆｏｒ Ｉｎ
ｔｅｒａｃｔｉｎｇ ｗｉｔｈ ａ Ｐｈｙｓｉｃａｌ Ｓｙｓｔｅｍ」、出願
人ピアノ（Ｐｉｅｒｎｏｔ）他に記載されており、この特許出願書は、参照によ
ってその全体を本明細書に組み込まれる。
【００３７】 具体的に言うと、検出された信号に、ツール、対話デバイス、および／または
ページなどの書籍ユニット１０３の１つまたは複数の物理オブジェクトの共振器
回路に関する位置データが含まれる。すなわち、１つまたは複数の物理オブジェ
クトの位置を、検出された信号を分析することによって、突き止めることができ
る。一実施形態では、位置データに、６自由度の位置状態すなわち、ｘ位置、ｙ
位置、ｚ位置、回転角、チルト、およびヨーが含まれる。６自由度の位置データ
を関知する電磁感知システムの１例が、国際ＰＣＴ特許出願第ＰＣＴ／ＧＢ９６
／０２８９６号明細書、１９９７年５月２９日公告、出願人デイムズ（Ｄａｍｅ
ｓ）他に記載されており、この特許出願書は、参照によってその全体を本明細書
に組み込まれる。もちろん、位置データに、この６自由度の位置状態のサブセッ
トを含めることができる。
【００３８】 複数の物理オブジェクトに関する位置情報を検出する複数の検出機構を、これ
から図２Ａないし２Ｆに関して説明する。図からわかるように、各物理オブジェ
クトは、書籍のページの形であり、位置情報に、ページがめくられたか否か、ペ
ージが現在めくられつつあるか否か、またはページの正確な位置（たとえば書籍
のとびらに対する相対的な角度）に関する情報を含めることができる。もちろん
、以下の機構を、些細な修正を加えて、ツール位置および／または対話デバイス
位置の検出に適用することができる。
【００３９】 図２Ａは、本発明の一実施形態による、電磁検出を使用するページ検出機構の
第１例の線図である。図からわかるように、複数のページ１０４が、ＰＣボード
１０１に埋め込まれたアンテナ１０２の上に位置決めされている。もちろん、ア
ンテナ１０２は、ＰＣボード１０１なしで単独とすることができる。
【００４０】 各ページ１０４は、特定の共振周波数を有する埋め込まれた共振器２０２を有
する。各共振器２０２は、ページ位置（たとえば、物理書籍内のどのページが見
られているか）を正確に判定できるように、関連するページの適当な位置に位置
決めすることができる。図示の実施形態では、各共振器２０２が、ページがめく
られたか否かに応じて、アンテナ１０２の異なる位置の上に位置決めされる（各
共振器の軸２０４を見られたい）。
【００４１】 図からわかるように、ページ１０４ａの共振器２０２ａが、アンテナの左部分
の上に位置決めされている時には、ページ１０４ａが開かれ、めくられていない
。逆に、ページ１０４ａの共振器２０２ａが、アンテナの右部分の上に位置決め
されている時には、ページ１０４ａがめくられ、新しいページ（すなわちページ
１０４ｂ）が表示されている。さらに、ページ１０４ａの共振器２０２ａが、ア
ンテナの左部分と右部分の間に位置決めされている時には、ページ１０４ａがめ
くられつつある（たとえば、書籍の左側から右側へ動かされつつあるか、その逆
）。
【００４２】 図２Ａの実施形態では、各共振器２０２が、アンテナ１０２を介して送信され
る励起信号の特定の周波数で共振する。たとえば、ページ１０４ａの共振器２０
２ａを、第１周波数で送信することによって活動化することができ、ページ１０
４ｂの共振器２０２ｂを、第２の異なる周波数で送信することによって活動化す
ることができる。励起信号が非活動化された時に、共振器２０２の１つの共振信
号を、アンテナ１０２によって検出することができる。
【００４３】 複数のページが同一の向きに向けられる（たとえば、ページ１０４ａ、１０４
ｂ、および１０４ｃが、すべて書籍の左側にめくられている）時には、これらの
ページの共振器２０２が、互いに重なり合う。しかし、より多数の共振器が重な
り合うにつれて、これらの共振器が互いに干渉する傾向を有し、個々の共振器か
ら検出される信号を分析することが困難になる可能性がある。したがって、各共
振器２０２が、アンテナ１０２の異なる位置の上に位置決めされることが好まし
い。各軸２０４によって示されるように、各共振器２０２は、アンテナ１０２の
異なる部分の上に位置決めされる。
【００４４】 図２Ｂは、本発明の一実施形態による、電磁検出を使用するページ検出機構の
第２例の線図である。図からわかるように、ページ１０４が、埋め込まれた共振
器２１０を有するベース２０６の上に位置決めされている。共振器２１０および
ベース２０６は、アンテナ１０２の上に位置決めされる。各ページには、関連す
るコイル２０８（たとえば、キャパシタまたは共振器なし）が含まれる。
【００４５】 ページがめくられる時に、コイル２０８のいくつかが、共振器２１０に隣接し
て位置決めされ、検出される信号が、隣接するコイル２０８によって影響される
。言い換えると、共振器２１０の共振信号は、何個のコイル２０８が共振器２１
０からある距離以内に位置決めされるかに依存する。各コイル２０８は、共振器
２１０に隣接して位置決めされる（すなわち、ページが書籍の左側にめくられる
）か、共振器２１０の付近に位置決めされる（すなわち、ページがめくられつつ
ある）か、共振器２１０から離れて位置決めされる（すなわち、ページが書籍の
右側にめくられる）可能性がある。
【００４６】 図からわかるように、共振器２１０は、書籍の左部分の中に配置される。図か
らわかるように、ページ１０４ａないし１０４ｃは、書籍の左側にめくられ、し
たがって、コイル２０８ａないし２０８ｃは、共振器２１０の付近に配置される
。対照的に、ページ１０４ｄないし１０４ｆは、書籍の右側にめくられ、したが
って、コイル２０８ｄないし２０８ｆは、共振器２１０から離れて配置される。
この配置では、ページ１０４ａないし１０４ｃのコイルと共振器２１０の間に相
互インダクタンスがあり、この相互インダクタンスによって、共振器信号の振幅
が減る。この減少の量を分析して、何個のコイルならびにページが、共振器２１
０の上に存在するかを判定することができる。
【００４７】 代替実施形態では、コイルを、導電材料のストリップに置換することができる
。各ページからの導電材料の各ストリップによって、検出される信号を定量化可
能な形で変更することができる。したがって、検出される信号を分析して、何個
の導電材料のストリップが信号に影響しているかを判定でき、これによって、何
ページがめくられているかを判定することができる。
【００４８】 図２Ｃは、本発明の一実施形態による、電磁検出を使用するページ検出機構の
第３例の線図である。図からわかるように、各ページが、関連するコイル２１１
を有する。コイル２１１は、共振キャパシタ２１２と共に、一緒に直列に結合さ
れて、共振器を形成する。ページがめくられる時に、関連するコイルもめくられ
、コイルが、逆方向に巻かれている状態になる。
【００４９】 コイルの向きに応じて、各コイルは、共振信号の振幅を減らすか増やす。たと
えば、書籍の右側にめくられた各ページ（図示のように、ページ１０４ｄないし
１０４ｆ）のように、めくられたページのコイル（コイル２１１ｄないし２１１
ｆ）は、検出される信号の振幅を減らすことができる。この例では、めくられず
、書籍の左側に残っている各ページ（図示のように、ページ１０４ａないし１０
４ｃ）について、各関連するコイル（コイル２１１ａないし２１１ｃ）が、検出
される信号の振幅に寄与し続ける。したがって、検出される信号を分析して、何
個のコイルが信号に寄与しているかを判定でき、これによって、何ページがめく
られたか、または何ページがめくられていないかを判定することができる。
【００５０】 ページ検出を、電磁検出技法の実施に関して説明してきたが、もちろん、ペー
ジの検出に適する他のタイプの感知技法を使用することができる。たとえば、各
ページが、２つの点の間のキャパシタンス値に寄与することができる。言い換え
ると、導電材料のストリップを各ページ上で構成し、書籍のページがめくられる
時に、２点間のキャパシタンス値が増えるか減るようにすることができる。
【００５１】 図２Ｄは、本発明の一実施形態による、キャパシタンス値検出を使用するペー
ジ検出機構の第１例の線図である。図からわかるように、第１点２１４ａおよび
第２点２１４ｂが、ベース２０６上に配置される。これらの２つの点２１４の間
のキャパシタンス値は、何ページが点２１４の上および間に位置決めされるかに
よって影響される。図からわかるように、各ページ１０４は、２つの点２１４の
上に位置決めすることができる関連する導電ストリップ２１６を有する。
【００５２】 図示の実施形態では、点２１４が、書籍の右部分に配置される。したがって、
ページが書籍の右側にめくられる時に、そのページの関連する導電ストリップ２
１６が、２つの点２１４の間で測定されるキャパシタンス値に寄与する。図から
わかるように、ページ１０４ｄ、１０４ｅ、および１０４ｆの導電ストリップ２
１６ｄ、２１６ｅ、および２１６ｆが、キャパシタンス値に寄与する。というの
は、これらのページが、２つの点２１４に上に位置決めされるからである。
【００５３】 導電ストリップ２１６は、２つの点２１４の間のキャパシタンス値に影響する
適当な位置に位置決めすることができる。図２Ｄの実施形態では、ストリップ２
１６が、対応するページが２つの点２１４の上に位置決めされた時に、２つの点
２１４の間に延びる。ストリップ２１６は、２つの点２１４と重なり合うか、２
つの点２１４の間の区域より大きい区域を覆うこともできる。その代わりに、ス
トリップ２１６が、２つの点２１４の間の区域より小さい区域を覆うことができ
る。
【００５４】 図２Ｅは、本発明の一実施形態による、キャパシタンス値検出を使用するペー
ジ検出機構の第２例の線図である。図からわかるように、各ページ１０４は、関
連する導電ストリップ２１８を有し、これらのストリップを、互いに入り組ませ
ることができる。すなわち、ストリップ２１８を、点２２０ａおよび２２０ｂの
間の異なる区域の上に位置決めすることができる。前の例と同様に、各ストリッ
プ２１８は、点２２０ａおよび２２０ｂの間で測定されるキャパシタンス値に影
響する。キャパシタンス値が、何ページが点２２０の上に位置決めされるかに依
存するので、何ページが書籍の片側（すなわち、２つの側定点２２０を含む側）
にめくられているかを判定することができる。
【００５５】 任意の個数の検出技術を実施して、ページ位置を検出することができる。図２
Ｆは、本発明の一実施形態による、抵抗値検出を使用するページ検出機構の線図
である。一般に、各ページは、複数の接点対の１つ（たとえば２２２ｃ）をショ
ートさせる、関連する導電ストリップまたはワイヤ２２４を有する。
【００５６】 図からわかるように、接点対２２２は、書籍の右端に沿って位置決めされる。
各ページが書籍の右側にめくられる時に、めくられたページの関連する導電スト
リップが、接点の対２２２の間に接触し、短絡を生じる。たとえば、ページ１０
４ｆが書籍の右側にめくられる時に、ページ１０４ｆの導電ストリップ２２４ｆ
が、接点対２２２ｆに接触する。同様に、ページ１０４ｃが右にめくられる時に
、導電ストリップ２２４ｃが、接点対２２２ｃをショートさせる。
【００５７】 ページめくりは、接点対２２２の各対の間の抵抗値を測定することによって判
定することができる。抵抗値が相対的に大きい場合には、対応するページがめく
られていない。抵抗値が０である場合には、対応するページがめくられている。
【００５８】 導電ストリップ２２４は、各ページ上で、２つの接点対２２２をショートさせ
るのに適する形で配置することができる。図２Ｆに示されているように、導電ス
トリップ２２４は、対応するページが接点対２２２の真上に位置決めされた時に
接点の対２２２の間に静止するように形成される。代替案では、導電ストリップ
またはワイヤに、ページがめくられた時に導電性の穴の対の中に挿入されるプラ
グを含めることができる。この実施形態では、２つの点の間で導電経路が形成さ
れることを保証する機構が提供される。プラグがないと、導電ストリップが、た
とえばページにしわがよった場合に、２つの接点に対して正しく位置合せされな
い可能性がある。
【００５９】 代替実施形態では、書籍システムに、磁気感知デバイスを含めることができ、
各ページに、あるページ位置で磁気感知デバイスによって感知できる磁気タブを
含めることができる。たとえば、各ページが、異なる位置に位置決めされた磁気
タブを有することができる。磁気感知デバイスは、付近にある磁気タブによって
影響される信号を生成する。したがって、磁気感知デバイスの信号を分析するこ
とによって、あるページが磁気感知デバイスの付近に位置決めされているか否か
を判定することができる。
【００６０】 もう１つの例として、光検出器を、書籍のベース内に配置することができる。
たとえば、光検出器を、ベースの片側の外側の縁の下に配置することができる。
各ページは、ページがめくられたかどうかに応じて、対応する光検出器がそのペ
ージによって覆われるか覆われなくなるようにするのに適する形状に構成される
。図２Ｆの実施形態に類似して、ページは、対応する光検出器（すなわち、各接
点対２２２の代わりに）をそれぞれが覆うか覆わないタブ（すなわち、各導電ス
トリップ２２４の代わりに）を有することができる。
【００６１】 上で説明したページ検出技法のどれでも、本発明の書籍システム内に組み込む
ことができる。さらに、他の検出機構を実施して、他の移動可能な物理オブジェ
クトを検出することができる。たとえば、書籍システムに、書籍システムのペー
ジの上に配置し、動かすことができる、任意の個数の物理オブジェクトを含める
ことができる。
【００６２】 図３は、本発明の一実施形態による、複数の物理オブジェクトを有する書籍シ
ステム１０３のディジタル写真である。図からわかるように、書籍１０４が、ベ
ース１０１の上にある。書籍システム１０３には、複数の移動可能な物理オブジ
ェクトまたはツール（たとえば１０６ａないし１０６ｅ）ならびに固定された物
理オブジェクト１０６ｆも含まれる。これらのツールは、物理書籍のあるページ
の特定の区域内に配置することができる。
【００６３】 ツールを使用して、たとえば物語の筋に組み込まれるタスクを達成することが
できる。一実施形態では、ツールを使用して、スパイの身元に関する手がかりを
得る。したがって、スパイの身元を判定するための使用を助ける複数のツールを
、図４Ａないし８Ｂに関して説明する。しかし、異なるツールを、異なる物語の
内容を有する書籍と共に使用することができる。例として、翻訳ツールの組を、
スペイン語の教科書と共に提供することができる。
【００６４】 図４Ａの図示の実施形態では、ユーザが、特定のページ１０４ｂの特定のテキ
スト部分７０２ａの上でデコーディングデバイス１０６ｂを動かすことができる
。図４Ｂに示されているように、デコードされたメッセージ７０６が、オーディ
オビジュアルディスプレイウィンドウ７０４内に表示される。この例では、ユー
ザに、次に行うべきことに関する指示が与えられる。具体的に言うと、ユーザは
、次のページに進み、オーディオテープ読取ツールを使用して、音声の手がかり
を得るように指示される。図４Ｃに示されているように、第２のデコーディング
ツール１０６ａが、複数のテープストリップ表現（たとえば７０８ａないし７０
８ｊ）の１つの上に動かされる。
【００６５】 一実施形態では、ユーザが、サウンドデコーディングツール１０６ａを選択さ
れたテープの上に動かす時に、オーディオサンプルが再生されて、スパイの身元
に関する、ユーザのための手がかりが示される。サウンドは、ユーザがテープス
トリップ７０８に沿って左から右に、右から左に、またはその組合せで動かす時
に再生することができる。この実施形態では、オーディオセグメントが、ツール
１０６ａが左から右に動かされる時に順方向で再生され、同一のオーディオセグ
メントが、ツール１０６ａが右から左に動かされる時に逆方向で再生される。
【００６６】 要するに、オーディオビジュアルプログラムに、サウンドデコーディングツー
ル１０６ａのテープ読取ジェスチャなどのジェスチャを認識する技法を含めるこ
とができる。このジェスチャならびに他のジェスチャを認識するのに適するどの
ような技法でも実施することができる。たとえば、サウンドデコーディングツー
ル１０６ａが、テープストリップ７０８内で動かされる時に、サウンドファイル
（たとえばｗａｖｅファイル）へのインデックスを、ストリップ７０８に沿った
ツール１０６ａの位置に基づいて計算する。すなわち、ツール１０６ａが、スト
リップ７０８の左端に位置決めされる場合には、インデックスは、サウンドファ
イルの先頭を参照する。ツール１０６ａが、ストリップ７０８の中央へ動かされ
る時に、インデックスも、サウンドファイルの中央からサウンドファイルの終り
へ動かされる（サウンドも再生される）。
【００６７】 特定のページの特定の部分の上に特定のツールを動かすことによってトリガさ
れる隠された手がかりをユーザが検索できるようにする、他のツールを提供する
ことができる。図５Ａに示されているように、拡大デバイス１０６ｃを、ページ
１０４ｅのイメージ７１０ａの特定の部分の上に置くことができる。図５Ｂに示
されているように、拡大鏡デバイス１０６ｃが、ピラミッドのイメージ７１０ａ
の上に置かれた時に、オーディオビジュアルディスプレイ７０４内に拡大された
図７１０ｂが表示される。
【００６８】 オーディオビジュアルディスプレイ７０４に、実際に物理書籍に示されている
イメージ（すなわち７１０ａ）が含まれるだけではなく、追加の拡大されたイメ
ージ７１０ｂも示されている。したがって、提供されるツールを使用することに
よって、ユーザは、物理書籍内で提供されるテキストおよびイメージのほかに、
豊富なオーディオビジュアル材料へのアクセスを得る。
【００６９】 同様に、モーフィングツール（図示せず）を提供することができる。モーフィ
ングツールが、物理書籍ページ内の特定のイメージの上に置かれた時に、その特
定のイメージが、オーディオビジュアルプログラムによって表示され、別のイメ
ージにモーフィングされる。例として、ユーザが、１２歳の人物の写真の上にモ
ーフィングツールを置いた時に、その若い人物のイメージを表示し、５０歳の同
一人物などの高齢の人物にモーフィングすることができる。
【００７０】 追加のビジュアルイメージを表示するほかに、ユーザがページの特定の部分の
上で特定のツールを動かす時に、サウンドを再生することもできる（たとえばコ
ンピュータのスピーカを介して）。図６Ａに示されているように、リスニングデ
バイス１０６ｄが、ページ１０４ｆの建物の特定の窓の上に置かれている。建物
の窓を介して聞くことができる適当なサウンドが、オーディオビジュアルプログ
ラム７０４内で再生される。図６Ｂに示されているように、ボイス信号７１２を
、オーディオビジュアルプログラム７０４内で表現し、表示することができる。
さらに、人物の音声が、たとえばコンピュータのスピーカを介して再生される。
図示の実施形態では、音声によって、スパイの身元を判定するために、重要な手
がかりを説明するか、ユーザを助ける他の手がかりを見つける場所を示すことが
できる。
【００７１】 図示の実施形態では、書籍の特定のページに示される、あるイメージオブジェ
クトをユーザが選択できるようにするツールも提供される。図７Ａに示されてい
るように、選択ツール１０６ｃが、ページ１０４ｇおよび１０４ｈの写真の中に
示された人のグループの中の特定の人物を選択するのに使用される。対応するオ
ーディオビジュアルディスプレイを、選択された人物に基づいて生成することが
できる。ミステリの文脈では、オーディオビジュアルプログラムによって、選択
された人物がスパイであるかどうかを示すことができる。図７Ｂに示されている
ように、オーディオビジュアルプログラム７０４によって、選択された人物７１
４が、スパイでないことが示される。
【００７２】 ツールは、書籍のページとは別に供給されるビジュアルイメージの形とするこ
ともできる。これらの別のイメージは、書籍のあるページに置くことができる。
図８Ａに示されているように、異なる顔を有する複数のカード（たとえば１０６
ｅおよび１０６ｇ）が提供される。この実施形態では、ユーザが、特定のカード
または人物１０６ｇを選択し、それをページ１０４ｉの中央に置く。
【００７３】 理論的に、この機能を用いて、ユーザが物語の筋にビジュアルイメージを追加
することができる。この特定の例では、ユーザが、スパイとして識別した人物を
有するカードを選択する。その後、ユーザがスパイを正しく識別したかどうかを
示すオーディオビジュアルプログラムが生成される。図８Ｂに示されているよう
に、オーディオビジュアルディスプレイ７０４によって、ユーザがスパイ７１６
を正しく識別したことが示される。
【００７４】 上で説明したように、ユーザが、書籍のページの上でツールを動かすか、対話
デバイスの状態を変更するか、ページをめくる時に、対応するオーディオビジュ
アルプログラムが生成される。書籍システム内のさまざまな物理オブジェクトの
位置に対応するオーディオビジュアルプログラムを生成するのに適するどのよう
な機構でも実施することができる。言い換えると、物理書籍に関するインターフ
ェースするソフトウェアに、物理書籍システムとのユーザの対話に対応する適当
なオーディオビジュアル表示および／またはサウンドを生成するという目的を達
成する、適当な動作を含めることができる。
【００７５】 図９は、本発明の一実施形態による、図１の書籍システムなどの書籍システム
とインターフェースする処理３００を示す流れ図である。当初、動作３０２で、
書籍システムを提供する。動作３０４で、書籍システムの諸部分をスキャンして
、データを抽出する。抽出されるデータには、書籍システムの物理オブジェクト
（たとえば、ツール、ページ、および対話デバイス）に関する情報が含まれる。
たとえば、抽出されるデータに、各物理オブジェクトの位置および向きが含まれ
る。また、抽出されるデータに、各物理オブジェクトに関連する識別子を含める
ことができる。
【００７６】 電磁感知技術を含む書籍システムでは、アンテナで所定の周波数で励起信号を
開始することによって、データが抽出される。その後、励起信号を停止し、書籍
システム内の１つまたは複数の共振器からの検出された信号が、アンテナ上に存
在するかどうかを判定する。検出される信号に、書籍システムの応答する共振器
に関係する位置情報を含めることができる。所定の周波数は、応答する共振器の
識別に対応するものとすることができる。異なる所定の周波数を有する一連の励
起信号をアンテナ上で開始して、異なる共振周波数を有する複数の物理オブジェ
クトの存在、位置、および識別を検出することができる。
【００７７】 書籍の諸部分からデータを抽出した後に、動作３０６で、抽出されたデータを
解釈する。たとえば、抽出されたデータを分析して、書籍ユニット内のさまざま
な物理オブジェクトの相対位置および識別を判定することができる。抽出された
データを分析して、書籍ユニットの検出された物理オブジェクトおよびさまざま
な領域の相対位置および識別を判定することもできる。動作３０６は、図１０に
関してさらに詳細に説明する。
【００７８】 データを解釈した後に、動作３０８で、抽出されたデータおよび前に抽出され
記録されたデータに基づいて、オーディオビジュアルプログラムを実行する。た
とえば、特定のページの領域の相対位置および前の物理オブジェクトの位置が、
前に記録されており、これによってアクセスされて、新しいオーディオビジュア
ルプログラムが生成される場合がある。動作３０８は、図１１に関してさらに詳
細に説明する。
【００７９】 オーディオビジュアルプログラムには、単に１つのビジュアルフレームを含め
ることができ、また、ビデオからのフレームのシーケンスの１フレームを含める
ことができる。たとえば、オーディオビジュアルプログラムを実行する動作で、
連続的なオーディオビジュアルシーケンス（たとえばＱｕｉｃｋＴｉｍｅムービ
ー）を開始するか、単にムービー内の特定の点で継続することができる。もう１
つの例として、オーディオビジュアルプログラムが１つのフレームだけを有する
ことができる。もう１つの例として、オーディオビジュアルプログラムに、対話
型ゲームを含めることができ、このゲームで、プレイヤが、書籍および物理オブ
ジェクトに関するある作業を実行するように指示されるものとすることができる
。
【００８０】 オーディオビジュアルプログラムを開始または継続した後に、動作３１０で、
抽出されたデータの情報を記録する。抽出されたデータを記録した後に、動作３
１２で、書籍の終りに達したかどうかを判定する。これは、適当な形で達成する
ことができる。たとえば、書籍を閉じた時に、これを検出し、書籍の終りとして
解釈することができる。書籍の終りに達していない場合には、この処理は、動作
３０４に戻り、ここで、書籍システムの諸部分をもう一度スキャンして、データ
を抽出する。書籍システムの諸部分をもう一度スキャンした後に、動作３０４な
いし３１２を繰り返し、前に記録されたデータを使用することができる。書籍の
終りに達した時に、処理３００は、もう一度開始される（すなわち、書籍が開か
れる時）まで終了する。
【００８１】 図１０は、本発明の一実施形態による、抽出されたデータを解釈する図９の動
作３０６を示す流れ図である。当初、動作４０２で、存在するすべての物理オブ
ジェクトの位置を判定する。物理オブジェクトを書籍のページに一時に１つ置く
ことができるように、または、複数の物理オブジェクトを書籍ページに同時に置
くことができるように、書籍システムを設計することができる。動作４０４で、
すべての物理オブジェクトの識別子を判定する。たとえば、物理オブジェクトが
拡大デバイスの形であるかどうかを判定することができる。
【００８２】 その後、動作４０６で、いずれかの物理オブジェクトが特定のページの領域ま
たは「ホットスポット」に関連するかどうかを判定する。言い換えると、各ペー
ジのある区域を、対話ゾーンとして定義することができる。すなわち、物理オブ
ジェクトがホットゾーン内に置かれる時に、対応するオーディオビジュアルプロ
グラムが生成される。代替案では、ページ全体を、対話ゾーンとして定義するこ
とができる。動作４０８で、物理オブジェクトに関連するホットスポットを識別
する。たとえば、物理オブジェクトに関連するページの番号および部分を識別し
て、その特定の物理オブジェクトに関してどのタイプの対話が行われるかを判定
することができる。具体的な例として、特定のページの部分を、拡大ツールがそ
の上に置かれた時に拡大される（すなわち、オーディオビジュアルプログラムに
よって）ものとして識別することができる。
【００８３】 動作４１０で、すべての対話デバイスの状態を判定する。対話デバイスは、物
理オブジェクトの異なる状態を示すのに適する形とすることができる。たとえば
、物理オブジェクトに、押された状態または離された状態とすることができるボ
タンを含めることができる。その場合には、動作４１０で、ボタンが押されてい
るかどうかを判定する。その後、処理は、図９の動作３０８に戻り、ここで、抽
出されたデータの解釈に基づくオーディオビジュアルプログラムが実行される。
【００８４】 動作４０２ないし４１０を、特定のアプリケーションに適当な任意の順序で実
行できることが、当業者には十分に理解されるに違いない。たとえば、動作４０
２を、動作４０４の後に実行することができる。さらに、特定のアプリケーショ
ンの特定の必要に応じて、抽出されたデータからの他の情報を解釈するか、解釈
しないことができる。たとえば、書籍システムに対話デバイスが含まれない場合
には、動作４１０は不要である。もう１つの例として、図９の動作３０８で実行
するオーディオビジュアルプログラムを選択するのを助けるために、書籍自体の
識別を判定する動作を含めることができる。抽出されたデータを解釈した後に、
図９の動作３０８を実行する。
【００８５】 図１１は、本発明の一実施形態による、オーディオビジュアルプログラムを実
行する図９の動作３０８を示す流れ図である。当初、動作５０２で、ホットスポ
ット領域に関連する物理オブジェクトがあるかどうかを判定する。ホットスポッ
トは、特定のページ上の特定の部分またはページ全体として定義される。ホット
スポット領域は、移動可能なオブジェクトを置くことができる領域または、固定
された押しボタンなどの固定された対話デバイスが配置される領域として定義す
ることができる。ホットスポット領域に関連する物理オブジェクトがない場合に
は、この処理は、図９の動作３１０に戻り、抽出されたデータを記録する。
【００８６】 ホットスポットに関連する物理オブジェクトがある場合には、動作５０４で、
物理オブジェクトを選択する。物理オブジェクトは、適当な形で選択することが
できる。たとえば、ページに最初に置かれた物理オブジェクトを、最初に選択す
ることができる。その後、動作５０６で、対応するオーディオビジュアルプログ
ラムを実行する。オーディオビジュアルプログラムは、選択された物理オブジェ
クト、物理オブジェクト識別子、関連する対話デバイスの状態、および関連する
ホットスポット識別子に基づく。言い換えると、オーディオビジュアルプログラ
ムは、どの物理オブジェクトが選択されたかと、そのような物理オブジェクトが
ホットスポット領域に関してどこに位置決めされているかに依存する。
【００８７】 図１１には示されていないが、オーディオビジュアルプログラムは、物理オブ
ジェクトが存在するか否かに無関係に、ページが現在めくられつつあるか否かに
も基づくものとすることができる。一実施形態では、ページがめくられつつある
と判定される場合に、隙間のオーディオビジュアルセグメントが生成される。具
体的な例として、ジャングルのシーンを有する第１ページが、砂漠のシーンを有
する第２ページにめくられる場合に、隙間のオーディオビジュアルセグメントに
、登場人物が飛行機を介してジャングルを去り、その飛行機でジャングルから砂
漠に飛行し、飛行機で砂漠に着陸するのを示すビデオクリップを含めることがで
きる。
【００８８】 オーディオビジュアルプログラムが自然に進行した後に、動作５０８で、選択
すべき物理オブジェクトがまだあるかどうかを判定する。選択すべき物理オブジ
ェクトがまだある場合には、動作５０４でそのオブジェクトを選択する。その後
、動作５０６でもう１つのオーディオビジュアルプログラムを実行する。しかし
、選択すべき物理オブジェクトがもうない場合には、この処理は、図９の動作３
１０に戻り、動作３００の次の実行のために、抽出されたデータを記録する。
【００８９】 本発明を、書籍との対話に適用可能であるものとして説明してきたが、もちろ
ん、説明された特徴の多くを、ボードゲームまたは玩具などの他のタイプのエン
ターテイメントデバイスに適用することができる。たとえば、説明されたツール
の一部を、他のタイプのエンターテイメントシステム内で使用することができる
。図１２、図１３Ａ、および図１３Ｂに、本発明の代替実施形態のディジタル写
真が含まれる。
【００９０】 図１２に示されているように、ゲームシステム１２００に、遊戯面またはベー
ス１２０１上に位置決めすることができる複数の物理オブジェクト（たとえば、
１２０６ａ、１２０４ａ、および１２０２ａ）が含まれる。ベース１２０１は、
特定のエンターテイメントデバイスに適する任意の形状および／または配置とす
ることができる。図示の実施形態では、ベース１２０１が、平らな部分と高い部
分（たとえば橋１２０３）を含むボードゲームである。ベース１２０１の表面パ
ターンは、適当な遊戯面を表すことができる。図示の実施形態では、ベース１２
０１が、裏庭区域を表す。
【００９１】 ゲームシステム１２００に、本発明の説明されたツールのいずれかの形の物理
オブジェクトを含めることができる。さらに、ゲームシステムに、他の適当なタ
イプの物理オブジェクトを含めることができる。図示の実施形態では、物理オブ
ジェクトを、３つの一般的なタイプすなわち、登場人物オブジェクト、環境オブ
ジェクト、およびセンサオブジェクトに分類することができる。登場人物オブジ
ェクトは、ゲーム内の登場人物を表す物理オブジェクトである。たとえば、登場
人物オブジェクトは、人、動物、またはすべての生きているオブジェクトを表す
ことができる。一般に、登場人物は、ゲームの進行中に他のゲームオブジェクト
と対話する。したがって、オーディオビジュアルプログラムに、検出された登場
人物オブジェクトの位置に部分的に基づいて他の項目と対話する検出された登場
人物を示すセグメントが含まれる。
【００９２】 環境オブジェクトは、一般に、副項目または背景項目もしくはゲームの環境態
様を表す。言い換えると、オーディオビジュアルプログラムを、環境オブジェク
ト位置の検出された位置にも基づくものとすることができるが、環境オブジェク
トは、主に、ゲームの環境に影響し、このゲームの環境は、通常は、ゲームの登
場人物およびゲームの登場人物のお互いとのおよび／またはそれを囲む環境との
対話により多く基づく。たとえば、環境オブジェクトを、オーディオビジュアル
セグメント内で、通常は主な焦点である登場人物オブジェクトに関して補助的な
オブジェクトとして表すことができる。もう１つの例として、環境オブジェクト
が、オーディオビジュアルセグメントの条件またはパラメータに影響する場合が
ある。環境オブジェクトの複数の例が、米国特許出願第０９／０１８０２３号明
細書、１９９８年２月２日出願、表題「Ｃｏｍｐｕｔｅｒ Ｍｅｔｈｏｄ ａｎ
ｄ Ａｐｐａｒａｔｕｓ ｆｏｒ Ｉｎｔｅｒａｃｔｉｎｇ ｗｉｔｈ ａ Ｐ
ｈｙｓｉｃａｌ Ｓｙｓｔｅｍ」、出願人ピアノ（Ｐｉｅｒｎｏｔ）他にさらに
記載されており、この特許出願書は、参照によってその全体を本明細書に組み込
まれる。
【００９３】 センサオブジェクトは、一般に、検出された時に、オーディオビジュアルプロ
グラムに、物理的なゲームシステム内で知覚されない（たとえば、ベースパター
ンの一部として表示されない）１つまたは複数のオーディオビジュアルセグメン
ト内のイメージおよび／またはサウンドを生成される物理オブジェクトである。
たとえば、上で説明したように、視覚的または聴覚的な手がかりを、オーディオ
ビジュアルプログラムを介して提示することができる。もう１つの例として、オ
ーディオビジュアルセグメントに、ベース上のパターンに関係するイメージまた
はサウンドを含めることができる。一実施形態では、オーディオビジュアルセグ
メントによって、使用されるセンサオブジェクトによって表される感知デバイス
のタイプによって検出された可能性があるオブジェクトが表示される。たとえば
、センサオブジェクトが拡大鏡を表す時に、オーディオビジュアルセグメントに
、センサオブジェクトの下に置かれたベースの部分の拡大図が含まれる。
【００９４】 図１２に示された実施形態では、ゲームシステム１２００に、少女の裏庭の形
であるゲームのベース１２０１の上で動く少女の形の登場人物オブジェクト１２
０２ａが含まれる。登場人物オブジェクトは、人、動物、神話の生き物、または
あらゆる種類の生きているオブジェクトなどの適当な形をとることができる。ゲ
ームシステム１２００には、裏庭１２０１に「埋められた」オブジェクトを明ら
かにする（すなわち、オーディオビジュアルプログラムを介して）のに使用され
る「魔法の水晶」の形のセンサオブジェクト１２０４ａも含まれる。ゲームシス
テム１２００には、見晴らし台１２１０、木１２０６ａ、隠れ場所１２０８ａ、
切り株１２１２、および泉１２１４の形の複数の環境オブジェクトも含まれる。
【００９５】 一部の環境オブジェクトの動きを、制限することができる。たとえば、切り株
１２１２は、ｘ、ｙ、およびｚ位置において制約されるが、さまざまなゲームオ
プション（たとえば難しさのレベル）を選択するために回転することができる。
これらのゲームオプションは、１つまたは複数のオーディオビジュアルセグメン
トの一部に影響するか、すべてのオーディオビジュアルセグメントにグローバル
に影響することができる。一部の環境オブジェクトを、移動可能にし、ベース上
の任意の場所に位置決めすることができる（たとえば木１２０６ａ）。一実施形
態では、オーディオビジュアルプログラムが、登場人物オブジェクト１２０２ａ
の近くに位置決めされない限り、環境オブジェクトの存在を無視する（たとえば
、オブジェクトが、オーディオビジュアルセグメント内に提示されない）。
【００９６】 図１３Ａは、本発明の一実施形態による、図１２の登場人物オブジェクト１２
０２ａと、環境オブジェクト１２０６ａ（木）および１２０８ａ（隠れ場所）と
、感知オブジェクト１２０４ａ（魔法の水晶）に基づくオーディオビジュアルプ
ログラムからのディスプレイ出力１３００を示すスクリーンショットである。オ
ーディオビジュアルセグメント１３００に示されているように、物理登場人物オ
ブジェクト１２０２ａに対応する登場人物１２０２ｂが表示される。物理登場人
物１２０２ａから所定の距離の中に位置決めされた環境オブジェクトも、表示さ
れる。図からわかるように、木１２０６ｂおよび隠れ場所１２０８ｂは、登場人
物１２０２ｂに対して相対的に表示される。
【００９７】 さらに、センサオブジェクト１２０４ａの位置に基づいて、拡張された図１２
０４ｂが表示される。図示の実施形態では、センサオブジェクトが、ベース１２
０１の下に配置された地下のオブジェクト（図ではモグラ１２０４ｂ）を検出す
ると見なされる「魔法の水晶」の形である。言い換えると、ユーザが、ベースの
ある区域を横切って「魔法の水晶」１２０４ａを動かすことによって、「魔法の
水晶」１２０４ａを使用してベース１２０１の下のオブジェクトを検出したかの
ように見える。センサオブジェクト１２０４ａが、ベース１２０１を横切って動
かされる時に、地下のすべてのオブジェクトを含む、ベース区域の地下の図が、
オーディオビジュアルセグメント内でシミュレートされ、表示される。要するに
、物理ゲームベース１２０１内でのセンサオブジェクト１２０４ａを介するオブ
ジェクト検出が、オーディオビジュアルプログラムによってシミュレートされる
。
【００９８】 本発明に、物理オブジェクトのいずれかを使用して行われるジェスチャを識別
するジェスチャリコグナイザを含めることもできる。言い換えると、物理オブジ
ェクトによる特定の動きのシーケンスを検出でき、これを使用して、適当なオー
ディオビジュアルセグメントを生成することができる。例として、ユーザが、ベ
ース１２０１から登場人物オブジェクト１２０２ａを持ち上げることによって、
「なわとび」ジェスチャを開始することができる。この登場人物は、回転するな
わを含むオーディオビジュアルセグメント内で提示される。表示される登場人物
のジャンプする動きは、物理登場人物のジャンプするジェスチャに対応する。言
い換えると、表示される登場人物の動きが、物理登場人物の動きと同期化される
。
【００９９】 オーディオビジュアルセグメントに、登場人物オブジェクトの動きに基づく他
の特徴を含めることもできる。たとえば、物理登場人物（および表示される登場
人物）が、自分のジャンプと表示されるとびなわの回転との同期化に失敗する場
合に、表示される登場人物が、なわの上でつまづくか、なわで頭を打っているも
のとして示される。
【０１００】 図１３Ｂは、本発明の一実施形態による、図１２の登場人物オブジェクト１２
０２ａによって実行される「なわとび」ジェスチャに基くオーディオビジュアル
プログラムからのディスプレイ出力１３０１を示すスクリーンショットである。
図示の実施形態では、「なわとび」ジェスチャを、物理登場人物１２０２ａをベ
ース１２０１から持ち上げることによって開始することができる。図１３Ｂに示
されているように、物理登場人物１２０２ａに対応する、表示される登場人物１
２０２ｃは、なわとびの動作にかかわっているものとして示される。２つの追加
の表示される登場人物１３０２ａおよび１３０２ｂが、とびなわ１３０４を持ち
、回し、主登場人物１２０２ｃが、この登場人物のジャンプがなわの回転運動と
同期しているか否かに応じて、ジャンプするか、なわの上でつまずくか、なわが
登場人物１２０２ｃの上体にあたる。
【０１０１】 図１４は、本発明の一実施形態による、図１２の登場人物オブジェクトの「な
わとび」ジェスチャを分析する処理１４００を示す流れ図である。当初、動作１
４０２で、物理登場人物オブジェクトの現在位置（たとえば図１２の１２０２ａ
）を得る。その後、動作１４０４で、オーディオビジュアルプログラムが、得ら
れた位置に基づいて登場人物（たとえば図１３Ａの１２０２ｂ）を表示する。そ
の後、動作１４０６で、物理登場人物（たとえば１２０２ａ）の位置が変化した
かどうかを判定する。この判定ステップは、登場人物の位置が変化するまで繰り
返される。
【０１０２】 登場人物の位置が変化したと判定される時に、動作１４１０で、登場人物の動
きが「なわとび」ジェスチャを示すかどうかを判定する。適当なタイプの動きに
よってジェスチャを示すことができる。たとえば、登場人物をｚ方向で上下に繰
り返して動かして、「なわとび」ジェスチャを示す。その後、検出されたジェス
チャに基づいて、新しいオーディオビジュアルセグメントを活動化することがで
きる。図示の例では、「なわとび」ジェスチャが開始される場合に、登場人物（
たとえば図１３Ｂの１２０２ｃ）が、登場人物の位置に基づいてなわとびをする
ものとして表示される（たとえば図１３Ｂを参照されたい）。
【０１０３】 動作１４１４で、動きが検出されるまで、物理登場人物の位置をもう一度繰り
返して検査する。物理登場人物（たとえば１２０２ａ）が新しい位置に移動（た
とえばそのｚ位置を変更）した後に、物理登場人物の動きが、表示されるとびな
わの回転運動と同期しているかどうかを判定する。すなわち、物理オブジェクト
が、表示される飛び縄（たとえば１３０４）の上で正しくジャンプしているかど
うかを判定する。一実施形態では、物理登場人物のｚ位置を、表示されるとびな
わのｚ位置と比較して、表示される登場人物がなわを飛び越えた（またはなわが
登場人物の頭の上を通った）かどうかを判定する。この判定動作は、物理登場人
物が表示されるとびなわのタイミングと同期しなくなるまで繰り返される。その
後、動作１４１８で、物理登場人物のタイミングがずれたことに関する適当なオ
ーディオビジュアルセグメントを表示する。たとえば、表示される登場人物が、
表示されるなわの上でつまずいて表示される。
【０１０４】 前述の発明は、理解の明瞭さのためにある程度詳細に説明されたが、請求項の
範囲内で変更および修正を実践できることを諒解されたい。たとえば、各ページ
およびオブジェクトが対応するマーカ（たとえば共振器）を有するものとして説
明したが、もちろん、ページまたはツールの一部が、オーディオビジュアルプロ
グラムの生成に関係しない場合に、これらにマーカが含まれない場合がある。
【０１０５】 さらに、ツールタイプの特定の組だけを説明したが、もちろん、エンターテイ
メントシステムに、他のツールタイプを含めることができる。たとえば、このシ
ステムに、人または動物の図など、他の物理オブジェクトの上で動かすことがで
きるｘ線ツールを含めることができる。ユーザが、図の一部の上でｘ線ツールを
動かす時に、オーディオビジュアルプログラムによって、図の部分のｘ線図また
は内部図が表示される。上で図１２ないし１４のゲームシステムに関して説明し
たように、ｘ線ツールも、ゲーム面の下に隠されていると見なされるオブジェク
ト（たとえば埋められたオブジェクト）を明らかにするのに使用することができ
る。同様に、ツールが、聴診器機能を有することができ、この場合、聴診器が図
の上で動かされる時に、心臓の鼓動または他のサウンドを聞くことができる。も
う１つの例として、エンターテイメントシステムに、やはり物理ゲームシステム
内の隠されたオブジェクトを明らかにするのに使用することができる懐中電灯ツ
ールも含めることができる。一実施形態では、懐中電灯ツールが表面の上で動か
される時に、オーディオビジュアルセグメントに、表面またはゲームベースの他
の前に隠されたオブジェクトを含めることができる照らされた部分が含まれる。
最後の例として、ツールが、金属検出器として機能することができる。
【０１０６】 また、上で説明した隙間の機能を、ページめくりのほかに、他のタイプの物理
オブジェクトの動きに適用することができる。たとえば、ヘリコプタの形の物理
オブジェクトが、第１位置の基地を去り、第２位置の基地に戻る時に、ヘリコプ
タが第１区域から離陸し、空中を飛び、第２区域に着陸するのを示す適当な隙間
のオーディオビジュアルセグメントを生成することができる。隙間のセグメント
が、ヘリコプタオブジェクトが飛行する時間の長さに基づくものとすることもで
きる。たとえば、ヘリコプタが、比較的長い時間の間基地から離れる場合に、隙
間のセグメントで、長距離（たとえばある国から別の国へ）を移動するヘリコプ
タを示すことができる。
【０１０７】 ジェスチャ機能も、説明した書籍システムならびに図１２ないし１３に示した
実施形態の中で実施することができる。たとえば、特定のツールのジェスチャを
認識するように書籍システムを構成することができる。具体的な例として、穴掘
りツールを使用して、選択されたページ部分で「ひっかく」動きを行うことがで
きる。対応するオーディオビジュアルセグメントを生成して、前に隠されたオブ
ジェクトを明らかにする。すなわち、隠されたオブジェクトが、隠されたオブジ
ェクトの上で「ひっかく」ジェスチャを行うことに応答して、オーディオビジュ
アルプログラムを介して掘り出される。
【０１０８】 さらに、本発明のエンターテイメントシステムに、物理オブジェクトの動きに
基づいて異なるスケーリングのオーディオビジュアルセグメントを提供する機構
を含めることができる。すなわち、物理オブジェクトが、ゲームの異なる領域の
中である距離だけ動かされる時に、各セグメントがこの距離を異なるスケールで
表す異なるオーディオビジュアルセグメントを表示することができる。具体的な
例では、物理オブジェクトが、ゲームの第１領域内である距離だけ動かされる時
に、オーディオビジュアルセグメントによって、第１スケール（たとえばズーム
アウトした表示）でその距離が表現される。対照的に、物理オブジェクトが、第
２領域内で同一の距離だけ動かされる時に、オーディオビジュアルセグメントに
よって、その距離が第２スケール（たとえばズームインした表示）で表現される
。
【０１０９】 したがって、これらの実施形態は、例示的であり、制限的ではないものとみな
されなければならず、本発明は、本明細書に示した詳細に制限されないが、請求
項の範囲および同等物の中で変更することができる。
【図面の簡単な説明】
【図１】 本発明の一実施形態による書籍システムの平面図である。
【図２Ａ】 本発明の一実施形態による、電磁検出を使用するページ検出機構の第１例の線
図である。
【図２Ｂ】 本発明の一実施形態による、電磁検出を使用するページ検出機構の第２例の線
図である。
【図２Ｃ】 本発明の一実施形態による、電磁検出を使用するページ検出機構の第３例の線
図である。
【図２Ｄ】 本発明の一実施形態による、キャパシタンス値検出を使用するページ検出機構
の第１例の線図である。
【図２Ｅ】 本発明の一実施形態による、キャパシタンス値検出を使用するページ検出機構
の第２例の線図である。
【図２Ｆ】 本発明の一実施形態による、抵抗値検出を使用するページ検出機構の線図であ
る。
【図３】 本発明の一実施形態による、複数の物理オブジェクトを有する書籍のディジタ
ル写真である。
【図４Ａ】 本発明の一実施形態による、デコーディングデバイスを書籍のページの上に位
置決めされた書籍システムのディジタル写真である。
【図４Ｂ】 本発明の一実施形態による、図４Ａのデコーディングデバイスの位置に基づく
オーディオビジュアルプログラムによって生成されるスクリーンショットである
。
【図４Ｃ】 本発明の一実施形態による、第２のデコーディングデバイスを書籍のページの
上に位置決めされた書籍システムのディジタル写真である。
【図５Ａ】 本発明の一実施形態による、拡大デバイスを書籍のページの上に位置決めされ
た書籍システムのディジタル写真である。
【図５Ｂ】 本発明の一実施形態による、図５Ａの拡大デバイスの位置に基づくオーディオ
ビジュアルプログラムによって生成されるスクリーンショットである。
【図６Ａ】 本発明の一実施形態による、リスニングデバイスを書籍のページの上に位置決
めされた書籍システムのディジタル写真である。
【図６Ｂ】 本発明の一実施形態による、図６Ａのリスニングデバイスの位置に基づくオー
ディオビジュアルプログラムによって生成されるスクリーンショットである。
【図７Ａ】 本発明の一実施形態による、選択デバイスを書籍のページの上に位置決めされ
た書籍システムのディジタル写真である。
【図７Ｂ】 本発明の一実施形態による、図７Ａの選択デバイスの位置に基づくオーディオ
ビジュアルプログラムによって生成されるスクリーンショットである。
【図８Ａ】 本発明の一実施形態による、イメージカードを書籍のページの上に位置決めさ
れた書籍システムのディジタル写真である。
【図８Ｂ】 本発明の一実施形態による、図８Ａのイメージカードの位置に基づくオーディ
オビジュアルプログラムによって生成されるスクリーンショットである。
【図９】 本発明の一実施形態による、図１の書籍システムなどの書籍システムとインタ
ーフェースする処理を示す流れ図である。
【図１０】 本発明の一実施形態による、抽出されたデータを解釈する図９の動作を示す流
れ図である。
【図１１】 本発明の一実施形態による、オーディオビジュアルプログラムを実行する図９
の動作を示す流れ図である。
【図１２】 本発明の一実施形態による、環境オブジェクト、登場人物オブジェクト、およ
びセンサオブジェクトをベースの上に位置決めされたゲームシステムのディジタ
ル写真である。
【図１３Ａ】 本発明の一実施形態による、図１２の登場人物オブジェクト、環境オブジェク
ト、および感知オブジェクトに基づくオーディオビジュアルプログラムからのデ
ィスプレイ出力を示すスクリーンショットである。
【図１３Ｂ】 本発明の一実施形態による、図１２の登場人物オブジェクトを介するジェスチ
ャに基くオーディオビジュアルプログラムからのディスプレイ出力を示すスクリ
ーンショットである。
【図１４】 本発明の一実施形態による、図１２の登場人物オブジェクトのジェスチャを分
析する処理を示す流れ図である。
───────────────────────────────────────────────────── フロントページの続き (51)Int.Cl.7 識別記号 ＦＩ テーマコート゛(参考） Ｇ０６Ｆ 17/30 ３６０ Ｇ０６Ｆ 17/30 ３６０Ｚ Ｇ１０Ｌ 13/00 Ｇ１０Ｌ 3/00 Ｒ (81)指定国 ＥＰ(ＡＴ，ＢＥ，ＣＨ，ＣＹ， ＤＥ，ＤＫ，ＥＳ，ＦＩ，ＦＲ，ＧＢ，ＧＲ，ＩＥ，Ｉ Ｔ，ＬＵ，ＭＣ，ＮＬ，ＰＴ，ＳＥ)，ＯＡ(ＢＦ，ＢＪ ，ＣＦ，ＣＧ，ＣＩ，ＣＭ，ＧＡ，ＧＮ，ＧＷ，ＭＬ， ＭＲ，ＮＥ，ＳＮ，ＴＤ，ＴＧ)，ＡＰ(ＧＨ，ＧＭ，Ｋ Ｅ，ＬＳ，ＭＷ，ＳＤ，ＳＬ，ＳＺ，ＴＺ，ＵＧ，ＺＷ )，ＥＡ(ＡＭ，ＡＺ，ＢＹ，ＫＧ，ＫＺ，ＭＤ，ＲＵ， ＴＪ，ＴＭ)，ＡＥ，ＡＬ，ＡＭ，ＡＴ，ＡＵ，ＡＺ， ＢＡ，ＢＢ，ＢＧ，ＢＲ，ＢＹ，ＣＡ，ＣＨ，ＣＮ，Ｃ Ｒ，ＣＵ，ＣＺ，ＤＥ，ＤＫ，ＤＭ，ＥＥ，ＥＳ，ＦＩ ，ＧＢ，ＧＤ，ＧＥ，ＧＨ，ＧＭ，ＨＲ，ＨＵ，ＩＤ， ＩＬ，ＩＮ，ＩＳ，ＪＰ，ＫＥ，ＫＧ，ＫＰ，ＫＲ，Ｋ Ｚ，ＬＣ，ＬＫ，ＬＲ，ＬＳ，ＬＴ，ＬＵ，ＬＶ，ＭＡ ，ＭＤ，ＭＧ，ＭＫ，ＭＮ，ＭＷ，ＭＸ，ＮＯ，ＮＺ， ＰＬ，ＰＴ，ＲＯ，ＲＵ，ＳＤ，ＳＥ，ＳＧ，ＳＩ，Ｓ Ｋ，ＳＬ，ＴＪ，ＴＭ，ＴＲ，ＴＴ，ＴＺ，ＵＡ，ＵＧ ，ＵＺ，ＶＮ，ＹＵ，ＺＡ，ＺＷ (72)発明者 ピアノ，フィリップ，ピー． アメリカ合衆国 94306 カリフォルニア， パロ アルト，カレッジ アヴェニュー ナンバー８ 360 (72)発明者 セサロッティ，ウィリアム，エー． アメリカ合衆国 94114 カリフォルニア， サンフランシスコ，ツウェンティフォース ストリート ナンバー５ 3730 (72)発明者 パパドポーロス，デスピーナ アメリカ合衆国 10012 ニューヨーク， ニューヨーク，グリーン ストリート 80 (72)発明者 ペトラヴィック，ロビン，ジー． アメリカ合衆国 94110 カリフォルニア， サンフランシスコ，ドロレス ストリート 1063 (72)発明者 ライチュリ，デビッド，ダブリュ． アメリカ合衆国 94306 カリフォルニア， パロ アルト，コロラド アヴェニュー 675 (72)発明者 ウィーチャフター，ジェニー，ダナ アメリカ合衆国 94043 カリフォルニア， マウンテン ヴュー，モンテベロ アヴェ ニュー ナンバー11 202 Ｆターム(参考） 2C001 AA11 BA06 BC05 BC09 CA01 CA08 CA09 CB01 CC02 CC08 5B075 KK07 ND06 ND16 PP10 PP28 PQ02 PQ04 PQ13 UU11 UU40 5D045 AB30 5E501 AA02 AA17 AC16 AC34 BA05 BA17 CA02 CC20 EB18 FA15 FA32 FA43 FB33 FB43

Claims (88)

    【特許請求の範囲】
  1. 【請求項１】 対話型エンターテイメントシステムであって、 エンターテイメントデバイスを表すベース（１０４）と、 上記ベースから分離された物理センサオブジェクト（１０６）と、 上記ベースに対する相対的な上記センサオブジェクトの存在、位置、および識
    別を検出するように配置された検出器（１０２）と、 上記ベースによって表される上記エンターテイメントデバイスに関係するオー
    ディオビジュアルセグメントを出力するように構成された対話型オーディオビジ
    ュアルプログラム（１１２、３０４、３０６、３０８）であって、上記物理セン
    サオブジェクトの検出が、上記対話型オーディオビジュアルプログラムに、上記
    ベースに対する相対的な上記センサオブジェクトの上記検出された位置に少なく
    とも部分的に基づき、上記センサオブジェクトによって検出可能と見なされる上
    記ベース上の不可視の情報を含むオーディオビジュアルセグメントを出力させる
    、対話型オーディオビジュアルプログラムと を含む対話型エンターテイメントシステム。
  2. 【請求項２】 上記センサオブジェクトが、それ自体は上記オーディオビジ
    ュアルセグメントに表示されない、請求項１に記載の対話型エンターテイメント
    システム。
  3. 【請求項３】 上記エンターテイメントデバイスが、ゲーム、玩具、書籍、
    および物語を含むグループから選択される、請求項１または２に記載の対話型エ
    ンターテイメントシステム。
  4. 【請求項４】 上記センサオブジェクトが、その機能を表す物理的形態を有
    する、請求項１ないし３のいずれかに記載の対話型エンターテイメントシステム
    。
  5. 【請求項５】 上記オーディオビジュアルプログラムによって出力される上
    記オーディオビジュアルセグメントが、上記センサオブジェクトの上記検出され
    た位置に配置された上記ベースの部分の拡張された図を含む、請求項１ないし４
    のいずれかに記載の対話型エンターテイメントシステム。
  6. 【請求項６】 上記拡張された図が、上記センサオブジェクトの上記検出さ
    れた位置に配置された上記ベース部分の拡大図である、請求項５に記載の対話型
    エンターテイメントシステム。
  7. 【請求項７】 上記拡張された図が、上記センサオブジェクトの上記検出さ
    れた位置に配置された上記ベース部分のｘ線図である、請求項５に記載の対話型
    エンターテイメントシステム。
  8. 【請求項８】 上記拡張された図が、上記センサオブジェクトの上記検出さ
    れた位置に配置された上記ベース部分の照らされた図である、請求項５に記載の
    対話型エンターテイメントシステム。
  9. 【請求項９】 上記拡張された図が、上記センサオブジェクトの上記検出さ
    れた位置に配置された上記ベース部分のデコードされた図である、請求項５に記
    載の対話型エンターテイメントシステム。
  10. 【請求項１０】 上記拡張された図が、上記センサオブジェクトの少なくと
    も一部のイメージである、請求項５ないし９のいずれかに記載の対話型エンター
    テイメントシステム。
  11. 【請求項１１】 上記オーディオビジュアルプログラムによって出力される
    上記オーディオビジュアルセグメントが、上記センサオブジェクトの上記検出さ
    れた位置に配置された上記ベースの部分に関係するオーディオセグメントを含む
    、請求項１ないし１１のいずれかに記載の対話型エンターテイメントシステム。
  12. 【請求項１２】 上記ベース部分が、オーディオテープの表現を含み、上記
    オーディオセグメントが、上記オーディオテープから作られるサウンドを表す、
    請求項１１に記載の対話型エンターテイメントシステム。
  13. 【請求項１３】 上記ベース部分が、可聴のオブジェクトまたは人を隠すこ
    とができる構造の表現を含み、上記オーディオセグメントが、上記可聴のオブジ
    ェクトまたは人から作られるサウンドを表す、請求項１１に記載の対話型エンタ
    ーテイメントシステム。
  14. 【請求項１４】 上記オーディオビジュアルセグメントが、上記物理センサ
    オブジェクトの第１位置に基づく開始シーンと、上記第１位置と異なる上記物理
    センサオブジェクトの第２位置に基づく終了シーンとを有するビデオクリップを
    含む、請求項１ないし１３のいずれかに記載の対話型エンターテイメントシステ
    ム。
  15. 【請求項１５】 対話型エンターテイメントシステムであって、 エンターテイメントデバイスを表すベースと、 上記対話型エンターテイメントシステム内の登場人物を表す物理登場人物オブ
    ジェクトと、 上記ベースに対する相対的な上記登場人物オブジェクトの存在、位置、および
    識別を検出するように配置された検出器と、 上記登場人物オブジェクトの検出された状態に基づいて上記物理登場人物オブ
    ジェクトのジェスチャ動きを認識するように配置されたジェスチャリコグナイザ
    と、 上記ベースによって表される上記エンターテイメントデバイスに関係するオー
    ディオビジュアルセグメントを出力するように構成された対話型オーディオビジ
    ュアルプログラムであって、上記ジェスチャリコグナイザによる選択されたジェ
    スチャの認識が、上記対話型オーディオビジュアルプログラムに、上記検出され
    たジェスチャに少なくとも部分的に基づくオーディオビジュアルセグメントを出
    力させる、対話型オーディオビジュアルプログラムと を含む対話型エンターテイメントシステム。
  16. 【請求項１６】 上記オーディオビジュアルセグメントが、上記登場人物オ
    ブジェクトの第１位置に基づく開始シーンと、上記第１位置と異なる上記登場人
    物オブジェクトの第２位置に基づく終了シーンとを有するビデオクリップを含む
    、請求項１５に記載の対話型エンターテイメントシステム。
  17. 【請求項１７】 上記オーディオビジュアルセグメントが、上記ベースによ
    って表される上記エンターテイメントデバイスに関係し、上記ジェスチャリコグ
    ナイザによる選択されたジェスチャの認識が、上記対話型オーディオビジュアル
    プログラムに、上記検出されたジェスチャに関連する動作を実行する上記登場人
    物オブジェクトによって表される登場人物を含むオーディオビジュアルセグメン
    トを出力させる、請求項１５または１６に記載の対話型エンターテイメントシス
    テム。
  18. 【請求項１８】 対話型エンターテイメントシステムであって、 ゲーム、玩具、および書籍からなるグループから選択されたエンターテイメン
    トデバイスを表すベースと、 環境オブジェクト、登場人物オブジェクト、およびセンサオブジェクトを含む
    、複数の物理オブジェクトと、 上記ベースに対する相対的な上記物理オブジェクトの存在、位置、および識別
    を検出するように配置された検出器と、 上記ベースに対する相対的な上記物理オブジェクトの上記検出された位置に少
    なくとも部分的に基づく、上記ベースによって表される上記エンターテイメント
    デバイスに関係するオーディオビジュアルセグメントを出力するように構成され
    た対話型オーディオビジュアルプログラムと を含み、選択されたセンサオブジェクトの検出が、上記対話型オーディオビジ
    ュアルプログラムに、上記ベース上で不可視であるが上記センサオブジェクトに
    よって検出可能とみなされる情報を含むオーディオビジュアルセグメントを出力
    させ、登場人物オブジェクトの検出が、上記対話型オーディオビジュアルプログ
    ラムに、出力されるオーディオビジュアルセグメント内に上記検出された登場人
    物を含めさせ、環境オブジェクトの検出が、上記対話型オーディオビジュアルプ
    ログラムに、出力されるオーディオビジュアルセグメント内に上記検出された環
    境オブジェクトを含めさせる 対話型エンターテイメントシステム。
  19. 【請求項１９】 上記センサオブジェクトが、それ自体は上記オーディオビ
    ジュアルセグメントに表示されない、請求項１８に記載の対話型エンターテイメ
    ントシステム。
  20. 【請求項２０】 上記ベースが、複数のページを有する書籍である、請求項
    １８または１９に記載の対話型エンターテイメントシステム。
  21. 【請求項２１】 上記ベースが、ゲームボードである、請求項１８または１
    ９に記載の対話型エンターテイメントシステム。
  22. 【請求項２２】 複数の領域を有する書籍システムとインターフェースする
    方法であって、 データを抽出するために上記書籍システムをスキャンすることであって、上記
    抽出されたデータが、上記書籍システムの一部である物理オブジェクトの位置お
    よび識別子を含む、スキャンすることと、 上記抽出されたデータに基づいて、上記物理オブジェクトに最も近い領域を識
    別することと、 上記物理オブジェクトの識別子および上記識別された領域に関する上記物理オ
    ブジェクトの位置の判定に少なくとも部分的に基づくオーディオビジュアルプロ
    グラムを実行することと を含む方法。
  23. 【請求項２３】 上記抽出されたデータが、上記書籍システムの一部である
    対話デバイスの位置および識別子も含み、上記方法が、さらに、上記抽出された
    データに基づいて上記対話デバイスの状態を識別することを含み、上記オーディ
    オビジュアルプログラムが、上記対話デバイスの上記識別された状態にも基づく
    、請求項２２に記載の方法。
  24. 【請求項２４】 上記対話デバイスが、上記物理オブジェクトに関連する、
    請求項２３に記載の方法。
  25. 【請求項２５】 上記抽出されたデータが、上記書籍システムの一部である
    対話デバイスの位置および識別子も含み、上記方法がさらに、 上記抽出されたデータに基づいて上記対話デバイスの状態を識別することと、 上記対話デバイスの上記識別された状態に基づいてオーディオビジュアルプロ
    グラムを実行することと を含む、請求項２２ないし２４のいずれかに記載の方法。
  26. 【請求項２６】 上記書籍システムが、複数のページを含み、上記物理オブ
    ジェクトが、選択されたページのうちで上記識別された領域の近くにある部分に
    配置することができるツールの形である、２２ないし２５のいずれかに記載の方
    法。
  27. 【請求項２７】 上記物理オブジェクトが、拡大デバイスであり、上記拡大
    デバイスが、上記ページのうちで上記識別された領域の近くにある上記部分に配
    置される時に、実行される上記オーディオビジュアルプログラムが、上記ページ
    のうちで上記識別された領域の近くにある上記部分の拡大図を含む、請求項２６
    に記載の方法。
  28. 【請求項２８】 上記物理オブジェクトが、ｘ線デバイスであり、上記ｘ線
    デバイスが、上記ページのうちで上記識別された領域の近くにある上記部分に配
    置される時に、実行される上記オーディオビジュアルプログラムが、上記ページ
    のうちで上記識別された領域の近くにある上記部分のｘ線図を含む、請求項２６
    に記載の方法。
  29. 【請求項２９】 上記物理オブジェクトが、デコーディングデバイスであり
    、上記デコーディングデバイスが、上記ページのうちで上記識別された領域の近
    くにある上記部分に配置される時に、実行される上記オーディオビジュアルプロ
    グラムが、上記ページのうちで上記識別された領域の近くにある上記部分内で示
    されていないテキスト、聴覚オブジェクト、または視覚オブジェクトを含む、請
    求項２６に記載の方法。
  30. 【請求項３０】 上記物理オブジェクトが、リスニングデバイスであり、上
    記リスニングデバイスが、上記ページのうちで上記識別された領域の近くにある
    上記部分に配置される時に、実行される上記オーディオビジュアルプログラムが
    、１つまたは複数のサウンドを生成する、請求項２６に記載の方法。
  31. 【請求項３１】 上記物理オブジェクトが、選択デバイスであり、上記選択
    デバイスが、上記ページのうちで上記識別された領域の近くにある上記部分に配
    置される時に、上記オーディオビジュアルプログラムが、上記ページの上記部分
    を表示することと、上記ページの上記部分に基づく応答とを含む、請求項２６に
    記載の方法。
  32. 【請求項３２】 上記物理オブジェクトが、関連するイメージであり、上記
    物理オブジェクトが、上記ページのうちで上記識別された領域の近くにある上記
    部分に配置される時に、上記オーディオビジュアルプログラムが、上記物理オブ
    ジェクトに関連する上記イメージを表示することを含む、請求項２６に記載の方
    法。
  33. 【請求項３３】 上記オーディオビジュアルプログラムが、上記物理オブジ
    ェクトに関連する上記イメージに加えて、第２イメージを表示することも含む、
    請求項３２に記載の方法。
  34. 【請求項３４】 上記オーディオビジュアルプログラムが、上記物理オブジ
    ェクトに関連する上記イメージの第２イメージへのモーフィングも含む、請求項
    ３２に記載の方法。
  35. 【請求項３５】 上記物理オブジェクトが、モーフィングデバイスであり、
    上記モーフィングデバイスが、上記ページのうちで上記識別された領域の近くに
    ある上記部分に配置される時に、上記オーディオビジュアルプログラムが、上記
    ページの上記部分の、上記ページのうちで上記識別された領域の近くにある上記
    部分に含まれないイメージへのモーフィングを含む、請求項２６に記載の方法。
  36. 【請求項３６】 上記オーディオビジュアルプログラムが、上記物理オブジ
    ェクトの第１位置に基づく開始シーンと、上記第１位置と異なる上記物理オブジ
    ェクトの第２位置に基づく終了シーンとを有するビデオクリップを表示する、請
    求項２２ないし３５のいずれかに記載の対話型エンターテイメントシステム。
  37. 【請求項３７】 書籍システムと対話するコンピュータシステムであって、 上記書籍システムから抽出されたデータを受け取るように配置されたデータ入
    力デバイスであって、上記抽出されたデータが、少なくとも、上記書籍システム
    の一部である選択された物理オブジェクトの位置および識別を含む、データ入力
    デバイスと、 上記抽出されたデータに基づいて、上記選択された物理オブジェクトに最も近
    い領域を識別するように配置されたデータインタープリタと、 上記選択された物理オブジェクトの上記位置および識別子と、上記最も近い領
    域および関連する識別子との判定に少なくとも部分的に基づく対話型ビジュアル
    イメージを出力するように構成された表示デバイスと を含むコンピュータシステム。
  38. 【請求項３８】 上記抽出されたデータが、上記書籍システムの一部である
    対話デバイスの位置および識別子も含み、上記データインタープリタが、上記抽
    出されたデータに基づいて上記対話デバイスの状態を識別するようにも配置され
    、上記表示デバイスが、さらに、上記対話デバイスの上記識別された状態に基づ
    いてオーディオビジュアルプログラムを実行するように構成される、請求項３７
    に記載のコンピュータシステム。
  39. 【請求項３９】 上記書籍システムが、複数のページを含み、上記物理オブ
    ジェクトが、選択されたページのうちで上記識別された領域の近くにある部分に
    配置することができるツールの形である、請求項３７または３８に記載のコンピ
    ュータシステム。
  40. 【請求項４０】 上記物理オブジェクトが、拡大デバイスであり、上記拡大
    デバイスが、上記ページのうちで上記識別された領域の近くにある上記部分に配
    置される時に、実行される上記オーディオビジュアルプログラムが、上記ページ
    のうちで上記識別された領域の近くにある上記部分の拡大図を含む、請求項３９
    に記載のコンピュータシステム。
  41. 【請求項４１】 上記物理オブジェクトが、デコーディングデバイスであり
    、上記デコーディングデバイスが、上記ページのうちで上記識別された領域の近
    くにある上記部分に配置される時に、実行される上記オーディオビジュアルプロ
    グラムが、上記ページのうちで上記識別された領域の近くにある上記部分内で示
    されていないテキスト、聴覚オブジェクト、または視覚オブジェクトを含む、請
    求項３９に記載のコンピュータシステム。
  42. 【請求項４２】 上記物理オブジェクトが、ｘ線デバイスであり、上記ｘ線
    デバイスが、上記ページのうちで上記識別された領域の近くにある上記部分に配
    置される時に、実行される上記オーディオビジュアルプログラムが、上記ページ
    部分自体の中に表示されない上記ページ部分のｘ線図を含む、請求項３９に記載
    のコンピュータシステム。
  43. 【請求項４３】 上記物理オブジェクトが、リスニングデバイスであり、上
    記リスニングデバイスが、上記ページのうちで上記識別された領域の近くにある
    上記部分に配置される時に、実行される上記オーディオビジュアルプログラムが
    、オーディオファイルの再生を含む、請求項３９に記載のコンピュータシステム
    。
  44. 【請求項４４】 上記物理オブジェクトが、選択デバイスであり、上記選択
    デバイスが、上記ページのうちで上記識別された領域の近くにある上記部分に配
    置される時に、上記オーディオビジュアルプログラムが、上記ページの上記部分
    を表示することと、上記ページの上記部分に基づく応答とを含む、請求項３９に
    記載のコンピュータシステム。
  45. 【請求項４５】 上記物理オブジェクトが、関連するイメージであり、上記
    物理オブジェクトが、上記ページのうちで上記識別された領域の近くにある上記
    部分に配置される時に、上記オーディオビジュアルプログラムが、上記物理オブ
    ジェクトに関連する上記イメージを表示することを含む、請求項３９に記載のコ
    ンピュータシステム。
  46. 【請求項４６】 上記物理オブジェクトが、モーフィングデバイスであり、
    上記モーフィングデバイスが、上記ページのうちで上記識別された領域の近くに
    ある上記部分に配置される時に、上記オーディオビジュアルプログラムが、上記
    ページの上記部分の、上記ページのうちで上記識別された領域の近くにある上記
    部分に含まれないイメージへのモーフィングを含む、請求項３９に記載のコンピ
    ュータシステム。
  47. 【請求項４７】 複数の領域を有する書籍システムとインターフェースする
    プログラム命令を含むコンピュータ可読媒体であって、 データを抽出するために上記書籍システムをスキャンするコンピュータコード
    であって、上記抽出されたデータが、上記書籍システムの一部である物理オブジ
    ェクトの位置および識別子を含む、コンピュータコードと、 上記抽出されたデータに基づいて、上記物理オブジェクトに最も近い領域を識
    別するコンピュータコードと、 上記物理オブジェクトの上記識別子および上記識別された領域に関する上記物
    理オブジェクトの位置の判定に少なくとも部分的に基づくオーディオビジュアル
    プログラムを実行するコンピュータコードと、 上記コンピュータ可読コードを保管するコンピュータ可読媒体と を含むコンピュータ可読媒体。
  48. 【請求項４８】 上記抽出されたデータが、上記書籍システムの一部である
    対話デバイスの位置および識別子も含み、上記コンピュータ可読媒体が、さらに
    、 上記抽出されたデータに基づいて上記対話デバイスの状態を識別するコンピュ
    ータコードと、 上記対話デバイスの上記識別された状態に基づいてオーディオビジュアルプロ
    グラムを実行するコンピュータコードと を含む、請求項４７に記載のコンピュータ可読媒体。
  49. 【請求項４９】 上記書籍システムが、複数のページを含み、上記物理オブ
    ジェクトが、選択されたページのうちで上記識別された領域の近くにある部分に
    配置することができるツールの形である、請求項４７または４８に記載のコンピ
    ュータ可読媒体。
  50. 【請求項５０】 上記物理オブジェクトが、拡大デバイスであり、上記拡大
    デバイスが、上記ページのうちで上記識別された領域の近くにある上記部分に配
    置される時に、実行される上記オーディオビジュアルプログラムが、上記ページ
    のうちで上記識別された領域の近くにある上記部分の拡大図を含む、請求項４９
    に記載のコンピュータ可読媒体。
  51. 【請求項５１】 上記物理オブジェクトが、デコーディングデバイスであり
    、上記デコーディングデバイスが、上記ページのうちで上記識別された領域の近
    くにある上記部分に配置される時に、実行される上記オーディオビジュアルプロ
    グラムが、上記ページのうちで上記識別された領域の近くにある上記部分内で示
    されていないテキスト、聴覚オブジェクト、または視覚オブジェクトを含む、請
    求項４９に記載のコンピュータ可読媒体。
  52. 【請求項５２】 上記物理オブジェクトが、リスニングデバイスであり、上
    記リスニングデバイスが、上記ページのうちで上記識別された領域の近くにある
    上記部分に配置される時に、実行される上記オーディオビジュアルプログラムが
    、オーディオファイルの再生を含む、請求項４９に記載のコンピュータ可読媒体
    。
  53. 【請求項５３】 上記物理オブジェクトが、選択デバイスであり、上記選択
    デバイスが、上記ページのうちで上記識別された領域の近くにある上記部分に配
    置される時に、上記オーディオビジュアルプログラムが、上記ページの上記部分
    を表示することと、上記ページの上記部分に基づく応答とを含む、請求項４９に
    記載のコンピュータ可読媒体。
  54. 【請求項５４】 上記物理オブジェクトが、関連するイメージであり、上記
    物理オブジェクトが、上記ページのうちで上記識別された領域の近くにある上記
    部分に配置される時に、上記オーディオビジュアルプログラムが、上記物理オブ
    ジェクトに関連する上記イメージを表示することを含む、請求項４９に記載のコ
    ンピュータ可読媒体。
  55. 【請求項５５】 上記物理オブジェクトが、モーフィングデバイスであり、
    上記モーフィングデバイスが、上記ページのうちで上記識別された領域の近くに
    ある上記部分に配置される時に、上記オーディオビジュアルプログラムが、上記
    ページの上記部分の、上記ページのうちで上記識別された領域の近くにある上記
    部分に含まれないイメージへのモーフィングを含む、請求項４９に記載のコンピ
    ュータ可読媒体。
  56. 【請求項５６】 書籍システムであって、 各ページが１つまたは複数の領域を有する複数のページと、 上記ページの上で移動可能な物理オブジェクトと、 コンピュータシステムと結合することができる位置感知デバイスであって、上
    記ページの位置、上記物理オブジェクトの識別、および上記物理オブジェクトの
    位置を検出するように上記コンピュータシステムによって構成可能である、位置
    感知デバイスと を含み、上記コンピュータシステムが、上記ページおよび物理オブジェクトの
    上記位置および上記物理オブジェクトの識別を検出するように上記位置感知デバ
    イスを構成する命令を用いてプログラムもされ、上記コンピュータシステムが、
    上記物理オブジェクトに最も近い領域を判定し、上記ページの位置と、上記物理
    オブジェクトの識別および位置と、上記最も近い領域とに基づいてオーディオビ
    ジュアルプログラムを生成する命令を用いてプログラムもされる 書籍システム。
  57. 【請求項５７】 上記位置感知デバイスが、電磁感知機構の形である、請求
    項５６に記載の書籍システム。
  58. 【請求項５８】 各ページおよび上記物理オブジェクトが、関連する共振器
    回路を有し、上記位置感知デバイスが、上記共振器回路の位置および識別を検出
    できるように、上記関連する共振器回路の少なくとも１つを活動化するために、
    それを介して所定の周波数を有する励起信号を送信することができるアンテナを
    含む、請求項５７に記載の書籍システム。
  59. 【請求項５９】 各ページに関連する各共振器回路が、異なる周波数値に応
    答する、請求項５８に記載の方法。
  60. 【請求項６０】 各ページに関連する上記共振器回路の少なくともいくつか
    が、上記アンテナの異なる部分の上に位置決めされる、請求項５９に記載の方法
    。
  61. 【請求項６１】 上記ページが、第１共振器回路を形成し、上記物理オブジ
    ェクトが、第２共振器回路を有し、上記位置感知デバイスが、上記共振器回路の
    位置および識別を検出できるように、上記共振器回路の少なくとも１つを活動化
    するために、それを介して所定の周波数を有する励起信号を送信することができ
    るアンテナを含む、請求項５７に記載の書籍システム。
  62. 【請求項６２】 各ページが、別のページの別のコイルに直列に結合される
    関連するコイルを有し、上記ページの上記コイルが、上記ページのうちの選択さ
    れた１つがめくられる時に上記関連するコイルが逆方向になるように、共振器キ
    ャパシタに直列に結合される、請求項６１に記載の書籍システム。
  63. 【請求項６３】 さらに、ベース共振器を含み、各ページが、関連するコイ
    ルを有し、各コイルが、上記ベース共振器の上に位置決めされることができ、上
    記位置感知デバイスが、上記ベース共振器に関する上記ページの上記位置を判定
    できるように、上記ベース共振器の近くに配置される関連するページのコイルに
    よって影響される検出された信号を上記ベース共振器に生成させるために、所定
    の周波数を有する励起信号をそれを介して送信することができるアンテナを含む
    、請求項５７に記載の書籍システム。
  64. 【請求項６４】 さらに、ベース共振器を含み、各ページが、関連する導電
    ストリップを有し、各導電ストリップが、上記ベース共振器の上に位置決めされ
    ることができ、上記位置感知デバイスが、上記ベース共振器に関する上記ページ
    の上記位置を判定できるように、上記ベース共振器の近くに位置決めされる関連
    するページの１つまたは複数の導電ストリップによって影響される検出された信
    号を上記ベース共振器に生成させるために、所定の周波数を有する励起信号をそ
    れを介して送信することができるアンテナを含む、請求項５７に記載の書籍シス
    テム。
  65. 【請求項６５】 上記位置感知デバイスが、上記ページの上記位置を判定す
    るために２つの接点の間のキャパシタンスを測定するキャパシタンス測定デバイ
    スを含む、請求項５６に記載の方法。
  66. 【請求項６６】 各ページが、上記測定されるキャパシタンスに影響するた
    めに、少なくとも上記２つの接点の上および間にある区域を覆うように位置決め
    されることができる導電ストリップを含む、請求項６５に記載の方法。
  67. 【請求項６７】 各導電ストリップが、上記測定されるキャパシタンスに影
    響するために、上記２つの接点の上および間にある区域全体を覆うように位置決
    めされることができる、請求項６６に記載の方法。
  68. 【請求項６８】 上記位置感知デバイスが、上記ページの上記位置を判定す
    るために複数の接点対の間の抵抗を測定する抵抗測定デバイスを含む、請求項５
    ６に記載の方法。
  69. 【請求項６９】 各ページが、関連する接点対の間でショートが形成される
    ように、上記接点対の関連する１つの間に配置されることができる導電ストリッ
    プを含む、請求項６８に記載の方法。
  70. 【請求項７０】 各導電ストリップが、２つのプラグを含み、上記関連する
    接点対が、上記２つのプラグを受ける２つのレセプタクルを含む、請求項６８に
    記載の方法。
  71. 【請求項７１】 各導電ストリップが、２つのレセプタクルを含み、上記関
    連する接点対が、上記２つのレセプタクルに挿入される２つのプラグを含む、請
    求項６８に記載の方法。
  72. 【請求項７２】 上記位置感知デバイスが、それぞれがページに関連する複
    数の光検出器デバイスを含み、各ページが、上記ページの上記位置を判定できる
    ように上記ページを上記関連する光検出器デバイスを覆うように位置決めできる
    ように形状を定められる、請求項５６に記載の方法。
  73. 【請求項７３】 上記位置感知デバイスが、磁気測定デバイスを含み、各ペ
    ージが、上記ページが所定の向きにめくられる時に上記磁気測定デバイスの近く
    に位置決めされることができる関連する磁気タブを含む、請求項５６に記載の方
    法。
  74. 【請求項７４】 上記位置感知デバイスが、ｘ、ｙ、およびｚ位置を検出す
    ることができる、５６ないし７３のいずれかに記載の方法。
  75. 【請求項７５】 上記位置感知デバイスが、回転角度位置の検出も可能であ
    る、請求項７４に記載の方法。
  76. 【請求項７６】 上記ページの上に移動可能な第２物理オブジェクト をさらに含み、上記コンピュータシステムが、上記第２物理オブジェクトの位
    置および識別を検出するように上記位置感知デバイスを構成し、上記第２物理オ
    ブジェクトに最も近い領域を判定し、上記ページの位置と、上記第２物理オブジ
    ェクトの識別および位置と、上記第２物理オブジェクトに最も近い上記領域とに
    基づいて第２オーディオビジュアルプログラムを生成する命令を用いてプログラ
    ムもされる ５６ないし７５のいずれかに記載の書籍システム。
  77. 【請求項７７】 複数のページ、第１物理オブジェクト、および第２物理オ
    ブジェクトを有する書籍システムとインターフェースする方法であって、各物理
    オブジェクトを、複数のページの１つの近くに配置することができ、 データを抽出するために上記書籍システムをスキャンすることであって、上記
    抽出されたデータが、上記第１物理オブジェクトが上記ページの１つの近くに配
    置される場合に、少なくとも第１の選択された物理オブジェクトの第１位置およ
    び第１識別子を含み、上記抽出されたデータが、上記第２物理オブジェクトが上
    記ページの１つの近くに配置される場合に、上記第２物理オブジェクトの第２位
    置および第２識別子を含む、スキャンすることと、 上記第１物理オブジェクトが上記ページの１つの近くに配置される場合に、上
    記抽出されたデータに基づいて上記第１の選択された物理オブジェクトに最も近
    い第１領域を識別することと、 上記第２物理オブジェクトが上記ページの１つの近くに配置される場合に、上
    記抽出されたデータに基づいて上記第２物理オブジェクトに最も近い第２領域を
    識別することと、 上記第１物理オブジェクトが上記ページの１つの近くに配置される場合に、上
    記第１物理オブジェクトの上記第１位置および第１識別子と上記第１領域の識別
    子とに少なくとも部分的に基づいてオーディオビジュアルプログラムを実行する
    ことと、 上記第２物理オブジェクトが上記ページの１つの近くに配置される場合に、上
    記第２物理オブジェクトの上記第２位置および第２識別子と上記第２領域の識別
    子とに少なくとも部分的に基づいてオーディオビジュアルプログラムを実行する
    ことと を含む方法。
  78. 【請求項７８】 上記抽出されたデータに、上記書籍システムの一部である
    対話デバイスの位置および識別子も含まれ、上記方法がさらに、 上記抽出されたデータに基づいて上記対話デバイスの状態を識別することと、 上記対話デバイスの上記識別された状態に少なくとも部分的に基づいてオーデ
    ィオビジュアルプログラムを実行することと を含む、請求項７７に記載の方法。
  79. 【請求項７９】 上記第１物理オブジェクトが、選択されたページのうちで
    上記識別された第１領域の近くの部分に配置することができるツールの形である
    、請求項７７または７８に記載の方法。
  80. 【請求項８０】 上記第１物理オブジェクトが、拡大デバイスであり、上記
    拡大デバイスが、上記ページのうちで上記識別された第１領域の近くにある上記
    部分に配置される時に、実行される上記オーディオビジュアルプログラムが、上
    記ページのうちで上記識別された第１領域の近くにある上記部分の拡大図を含む
    、請求項７９に記載の方法。
  81. 【請求項８１】 上記第１物理オブジェクトが、ｘ線デバイスであり、上記
    ｘ線デバイスが、上記ページのうちで上記識別された第１領域の近くにある上記
    部分に配置される時に、実行される上記オーディオビジュアルプログラムが、上
    記ページのうちで上記識別された第１領域の近くにある上記部分のｘ線図を含む
    、請求項７９に記載の方法。
  82. 【請求項８２】 上記第１物理オブジェクトが、デコーディングデバイスで
    あり、上記デコーディングデバイスが、上記ページのうちで上記識別された第１
    領域の近くにある上記部分に配置される時に、実行される上記オーディオビジュ
    アルプログラムが、上記ページのうちで上記識別された第１領域の近くにある上
    記部分内で示されていないテキスト、聴覚オブジェクト、または視覚オブジェク
    トを含む、請求７９に記載の方法。
  83. 【請求項８３】 上記第１物理オブジェクトが、リスニングデバイスであり
    、上記リスニングデバイスが、上記ページのうちで上記識別された第１領域の近
    くにある上記部分に配置される時に、実行される上記オーディオビジュアルプロ
    グラムが、オーディオファイルの再生を含む、請求項７９に記載の方法。
  84. 【請求項８４】 上記第１物理オブジェクトが、選択デバイスであり、上記
    選択デバイスが、上記ページのうちで上記識別された第１領域の近くにある上記
    部分に配置される時に、上記オーディオビジュアルプログラムが、上記ページの
    上記部分を表示することと、上記ページの上記部分に基づく応答とを含む、請求
    項７９に記載の方法。
  85. 【請求項８５】 上記第１物理オブジェクトが、関連するイメージであり、
    上記物理オブジェクトが、上記ページのうちで上記識別された第１領域の近くに
    ある上記部分に配置される時に、上記オーディオビジュアルプログラムが、上記
    物理オブジェクトに関連する上記イメージを表示することを含む、請求項７９に
    記載のコンピュータシステム。
  86. 【請求項８６】 上記第１物理オブジェクトが、モーフィングデバイスであ
    り、上記モーフィングデバイスが、上記ページのうちで上記識別された第１領域
    の近くにある上記部分に配置される時に、上記オーディオビジュアルプログラム
    が、上記ページの上記部分の、上記ページのうちで上記識別された第１領域の近
    くにある上記部分に含まれないイメージへのモーフィングを含む、請求項７９に
    記載の方法。
  87. 【請求項８７】 複数のページ、第１物理オブジェクト、および第２物理オ
    ブジェクトを有する書籍システムとインターフェースするプログラム命令を含む
    コンピュータ可読媒体であって、各物理オブジェクトを、複数のページの１つの
    近くに配置することができ、 データを抽出するために上記書籍システムをスキャンするコンピュータコード
    であって、上記抽出されたデータが、上記第１物理オブジェクトが上記ページの
    １つの近くに配置される場合に、少なくとも第１の選択された物理オブジェクト
    の第１位置および第１識別子を含み、上記抽出されたデータが、上記第２物理オ
    ブジェクトが上記ページの１つの近くに配置される場合に、上記第２物理オブジ
    ェクトの第２位置および第２識別子を含む、コンピュータコードと、 上記第１物理オブジェクトが上記ページの１つの近くに配置される場合に、上
    記抽出されたデータに基づいて上記第１の選択された物理オブジェクトに最も近
    い第１領域を識別するコンピュータコードと、 上記第２物理オブジェクトが上記ページの１つの近くに配置される場合に、上
    記抽出されたデータに基づいて上記第２物理オブジェクトに最も近い第２領域を
    識別するコンピュータコードと、 上記第１物理オブジェクトが上記ページの１つの近くに配置される場合に、上
    記第１物理オブジェクトの上記第１位置および第１識別子と上記第１領域の識別
    子とに少なくとも部分的に基づいてオーディオビジュアルプログラムを実行する
    コンピュータコードと、 上記第２物理オブジェクトが上記ページの１つの近くに配置される場合に、上
    記第２物理オブジェクトの上記第２位置および第２識別子と上記第２領域の識別
    子とに少なくとも部分的に基づいてオーディオビジュアルプログラムを実行する
    コンピュータコードと、 上記コンピュータ可読コードを保管するコンピュータ可読媒体と を含むコンピュータ可読媒体。
  88. 【請求項８８】 上記物理オブジェクトによる上記物理オブジェクトのジェ
    スチャ動きを識別し、解釈するジェスチャリコグナイザをさらに含む、請求項３
    ７に記載のコンピュータシステム。
JP2000596441A 1999-02-01 2000-01-31 対話型エンターテイメントシステムおよび方法 Pending JP2002535794A (ja)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US11838499P 1999-02-01 1999-02-01
US60/118,384 1999-02-01
US30664799A 1999-05-06 1999-05-06
US09/306,647 1999-05-06
PCT/US2000/002342 WO2000045250A2 (en) 1999-02-01 2000-01-31 Interactive entertainment systems and methods

Publications (1)

Publication Number Publication Date
JP2002535794A true JP2002535794A (ja) 2002-10-22

Family

ID=26816293

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2000596441A Pending JP2002535794A (ja) 1999-02-01 2000-01-31 対話型エンターテイメントシステムおよび方法

Country Status (9)

Country Link
EP (1) EP1159668A2 (ja)
JP (1) JP2002535794A (ja)
KR (1) KR20020003364A (ja)
CN (1) CN1342275A (ja)
AU (1) AU2746600A (ja)
CA (1) CA2360940A1 (ja)
NO (1) NO20013633L (ja)
PL (1) PL349814A1 (ja)
WO (1) WO2000045250A2 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2020074197A (ja) * 2017-09-05 2020-05-14 株式会社バンダイ 情報提供システムおよび情報提供プログラム
JPWO2021186938A1 (ja) * 2020-03-18 2021-09-23

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2009018988A2 (de) * 2007-08-03 2009-02-12 Ident Technology Ag Spielzeug, insbesondere in der art einer puppe oder stofftieres
US8545283B2 (en) 2008-02-20 2013-10-01 Ident Technology Ag Interactive doll or stuffed animal
DE102010004813A1 (de) * 2010-01-15 2011-07-21 Schubert, Peter, 01159 Wiedergabegerät für ein Druckerzeugnis
EP2600950A4 (en) * 2010-08-04 2013-12-18 Pure Imagination Llc INTERACTIVE PLAYING BOARD SYSTEM WITH CAPACITIVE MEASUREMENT AND IDENTIFICATION OF PLAY PARTS
TWI512547B (zh) * 2011-12-20 2015-12-11 Univ Nat Chiao Tung 互動式系統及互動式裝置
US10363486B2 (en) 2013-06-10 2019-07-30 Pixel Press Technology, LLC Smart video game board system and methods
WO2016162403A1 (en) * 2015-04-08 2016-10-13 Lego A/S Game system
CN112675555B (zh) * 2018-01-08 2022-09-27 克兹二世怡人合资有限公司 具有电容式触摸交互性的儿童玩具

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR2607400A1 (fr) * 1986-11-27 1988-06-03 Chacun Patrick Perfectionnement aux jeux de societe
NZ291950A (en) * 1994-07-28 1998-06-26 Super Dimension Inc Computerised game board: location of toy figure sensed to actuate audio/visual display sequence

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2020074197A (ja) * 2017-09-05 2020-05-14 株式会社バンダイ 情報提供システムおよび情報提供プログラム
JPWO2021186938A1 (ja) * 2020-03-18 2021-09-23
WO2021186938A1 (ja) * 2020-03-18 2021-09-23 Ｎｅｃソリューションイノベータ株式会社 判定装置、判定方法、記録媒体
JP7311205B2 (ja) 2020-03-18 2023-07-19 Ｎｅｃソリューションイノベータ株式会社 判定装置、判定方法、記録媒体

Also Published As

Publication number Publication date
KR20020003364A (ko) 2002-01-12
WO2000045250A3 (en) 2000-12-28
NO20013633D0 (no) 2001-07-24
WO2000045250A2 (en) 2000-08-03
AU2746600A (en) 2000-08-18
NO20013633L (no) 2001-09-12
PL349814A1 (en) 2002-09-09
CA2360940A1 (en) 2000-08-03
EP1159668A2 (en) 2001-12-05
CN1342275A (zh) 2002-03-27

Similar Documents

Publication Publication Date Title
US9349218B2 (en) Method and apparatus for controlling augmented reality
JP6044079B2 (ja) 情報処理装置、情報処理方法及びプログラム
EP1672470B1 (en) Information processing apparatus and method
US9821225B2 (en) Game machine, control method used in same, and non-transitory computer readable storage medium
KR102028139B1 (ko) 증강현실 기반의 영상 표시방법
JP2002535794A (ja) 対話型エンターテイメントシステムおよび方法
WO2018142756A1 (ja) 情報処理装置及び情報処理方法
JP4671192B2 (ja) 画像処理装置および画像処理方法
CN109985382A (zh) 剧情节点的脚本执行方法、装置、设备及存储介质
CN111359209B (zh) 视频播放方法、装置和终端
CN103065345A (zh) 阅读器单元、服务器单元、显示控制方法及数字漫画编辑方法
WO2022001600A1 (zh) 信息解析方法及装置、设备、存储介质
CN111640192A (zh) 场景图像处理方法、装置、ar设备以及存储介质
JP2004088740A (ja) 動画像再生装置、スケジュール・データ、動画像再生方法、及びプログラム
JP6730461B2 (ja) 情報処理システム及び情報処理装置
JP2010252008A (ja) 撮影装置、表示装置、再生装置、撮影方法、および表示方法
JP5733941B2 (ja) ゲーム装置およびゲームシステム
WO2022040574A1 (en) Integrating overlaid digital content into displayed data via graphics processing circuitry
CN108388836A (zh) 一种用于获取视频语义信息的方法与装置
JP7160707B2 (ja) 仮想キャラクタを含む画像を提供するための方法
US8556712B2 (en) System for presenting interactive content
Paelke et al. Vision-based interaction-a first glance at playing MR games in the real-world around us
Marczak et al. Audio visual analysis of player experience: feedback-based gameplay metrics
KR102671284B1 (ko) 댄스 서비스 시스템
WO2023170744A1 (ja) 画像処理装置、画像処理方法、および記録媒体