WO1999063758A1 - Instrument de mesure de position d'entree et systeme recreatif - Google Patents

Instrument de mesure de position d'entree et systeme recreatif Download PDF

Info

Publication number
WO1999063758A1
WO1999063758A1 PCT/JP1999/002894 JP9902894W WO9963758A1 WO 1999063758 A1 WO1999063758 A1 WO 1999063758A1 JP 9902894 W JP9902894 W JP 9902894W WO 9963758 A1 WO9963758 A1 WO 9963758A1
Authority
WO
WIPO (PCT)
Prior art keywords
infrared
image
input
unit
infrared signal
Prior art date
Application number
PCT/JP1999/002894
Other languages
English (en)
French (fr)
Inventor
Nobuo Sasaki
Akio Ohba
Original Assignee
Sony Computer Entertainment Inc.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Computer Entertainment Inc. filed Critical Sony Computer Entertainment Inc.
Priority to CA002299521A priority Critical patent/CA2299521A1/en
Priority to KR1020007001069A priority patent/KR100728456B1/ko
Priority to EP99922602A priority patent/EP1033882B1/en
Priority to BR9906470-7A priority patent/BR9906470A/pt
Priority to DE69941421T priority patent/DE69941421D1/de
Priority to AU39579/99A priority patent/AU3957999A/en
Publication of WO1999063758A1 publication Critical patent/WO1999063758A1/ja

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/23—Input arrangements for video game devices for interfacing with the game device, e.g. specific interfaces between game controller and console
    • A63F13/235—Input arrangements for video game devices for interfacing with the game device, e.g. specific interfaces between game controller and console using a wireless connection, e.g. infrared or piconet
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/213—Input arrangements for video game devices characterised by their sensors, purposes or types comprising photodetecting means, e.g. cameras, photodiodes or infrared cells
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/0304—Detection arrangements using opto-electronic means
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/10—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals
    • A63F2300/1025—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals details of the interface with the game device, e.g. USB version detection
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/10—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals
    • A63F2300/1087—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals comprising photodetecting means, e.g. a camera
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/40—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterised by details of platform network
    • A63F2300/403—Connection between platform and handheld device
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/60—Methods for processing data by generating or executing the game program
    • A63F2300/66—Methods for processing data by generating or executing the game program for rendering three dimensional images
    • A63F2300/6661—Methods for processing data by generating or executing the game program for rendering three dimensional images for changing the position of the virtual camera
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/60—Methods for processing data by generating or executing the game program
    • A63F2300/66—Methods for processing data by generating or executing the game program for rendering three dimensional images
    • A63F2300/6661—Methods for processing data by generating or executing the game program for rendering three dimensional images for changing the position of the virtual camera
    • A63F2300/6676—Methods for processing data by generating or executing the game program for rendering three dimensional images for changing the position of the virtual camera by dedicated player input
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/60—Methods for processing data by generating or executing the game program
    • A63F2300/69—Involving elements of the real world in the game world, e.g. measurement in live races, real video

Definitions

  • the present invention relates to an input position detecting device for detecting an input position from an input device provided with infrared transmitting / receiving means, a master device having a function of executing a program, and an interface device for connecting to the master device.
  • the present invention relates to an entertainment system including a slave unit having a base.
  • a player character or an object is displayed on a monitor device, such as a television receiver, connected to the game console, and an input operation device is provided. While jumping or moving the character or object using, for example, a role playing game, a racing game, etc. are advanced.
  • the game proceeds assuming that the player is looking at the monitor device from the front. For this reason, the player needs to be located in front of the monitor device.
  • the present invention has been made in view of the above circumstances, and has been made in consideration of an input device.
  • Input position detection device that can accurately and easily detect the input position, and the position of the slave unit are detected, and are generated by executing the program on a viewpoint centered on that position. It is intended to provide an entertainment system that can display images and allow a player to set an optimal viewpoint. Disclosure of the invention
  • an entertainment system is an input position detection device that detects an input position from an input device provided with an infrared transmission / reception unit.
  • An infrared transmission / reception unit for transmitting / receiving an infrared signal, and an imaging unit for capturing an image in a predetermined direction, wherein the imaging unit and the infrared transmission / reception unit are arranged adjacent to each other in a predetermined direction, and Based on the difference between the captured image containing the infrared signal for position detection from the infrared transmitting / receiving means of the input device in or near the predetermined direction and the image immediately before that that does not contain the infrared signal for position detection. Then, the input position of the input device in the predetermined direction or in the vicinity thereof is detected.
  • an entertainment system has a master unit having a function of executing a program, and a child unit having an interface for connecting to the master unit and infrared transmitting / receiving means.
  • the master unit includes: an infrared transmitting / receiving unit that transmits / receives an infrared signal to / from the infrared transmitting / receiving unit of the slave unit; and an imaging unit that captures an image in a predetermined direction. Infrared transmission / reception of the slave unit located adjacent to the predetermined direction and taken by the imaging unit and located in or near the predetermined direction.
  • the input position of the child device in the predetermined direction or in the vicinity thereof is determined. To detect.
  • the master unit connects display means for displaying an image generated by executing the program, and arranges the infrared transmitting / receiving means and the imaging means in the vicinity of the display means.
  • the slave has a unique identification number, and the identification number information is included in infrared rays emitted toward the master.
  • the slave unit has a unique identification number, and when the identification number is transmitted from the master unit to the slave unit by an infrared signal, the identification number is the same as the unique identification number. Determine if they are equal.
  • the slave unit includes a plurality of the infrared transmitting means.
  • FIG. 1 is a block diagram showing a configuration of a video game device which is an embodiment of an input position detection device and an entertainment system according to the present invention.
  • FIG. 2 is a block diagram showing a detailed configuration of a main part of the video game device.
  • FIG. 3 is a flowchart for explaining the operation of the video game device.
  • FIG. 4 is a diagram for explaining a calculation algorithm of an image address calculator constituting the video game device.
  • FIG. 5 is a block diagram showing a configuration of a modified example of the video game device.
  • FIG. 6 is a view for explaining the operation of the modification shown in FIG. 5 above. It is a flowchart.
  • FIG. 7 is a diagram for explaining an operation in a video game device provided with two portable game terminals.
  • This embodiment relates to a video game device including a game machine main body having a function of executing a program and a portable game terminal having an interface for wirelessly connecting to the game machine main body.
  • the body has a function as an input position detection device that detects an input position from a portable game terminal.
  • the video game device 1 includes a game machine body 2 and a portable game terminal 3.
  • the game machine main body 2 connects an infrared input / output device 4, a CCD camera 5 serving as an image capturing means, and a monitor device 6 such as a television receiver.
  • the mobile game terminal 3 is gripped by the operator 7.
  • the portable game terminal 3 is provided with an infrared input / output unit 8, and transmits an infrared signal according to the operation of the operator 7 to the infrared input / output device 4.
  • the infrared input / output device 4 connected to the monitor device 6 and the CCD camera 5 are arranged adjacently to the operator 7 holding the portable game terminal 3. Then, the game machine main unit 2 displays the input image by the CCD camera 5 immediately before the operator 7 emits an infrared signal from the infrared input / output unit 8 of the portable game terminal 3 toward the infrared input / output device 4. Then, the position of the mobile game terminal 3 is detected based on the difference between the input image at the time when the infrared light is emitted. Mobile game terminal 3 is unique The identification number information is included in an infrared ray emitted toward the game machine main body 2.
  • the game machine body 2 includes an A / D converter 10 for converting a captured image from the CCD camera 5 into a digital signal, and an infrared ray for position detection from the infrared input / output device 4.
  • Switch 11 which switches when the data is supplied, two frame buffers 12 and 13, a readout circuit 14, a comparator 15, and an image address calculator 16 It comprises.
  • the operation of the video game apparatus 1 will be described below using the flowchart of FIG. First, it is assumed that the operator 7 presses the infrared light emitting button of the portable game terminal 3 in step S1. Then, the portable game terminal 3 emits an infrared signal including its own identification number from the infrared input / output unit 8 in step S3.
  • the infrared input / output device 4 connected to the game machine body 2 detects the infrared signal from the infrared input / output unit 8 in step S3. Then, based on the identification number included in the infrared signal detected in step S4, it is determined that the signal is from the portable game terminal 3, and the captured image from the CCD camera 5 is digitally converted by the A / D converter 10. After converting to an image signal, one frame is stored in frame buffer 12.
  • step S5 when the portable game terminal 3 emits an infrared signal for position detection for at least one frame time, in step S6, the game machine body 2 CCD-scans the image during emission of the infrared signal for position detection. An image is captured by the camera 5, and one frame is stored in the frame memory 13 via the A / D converter 10 and the switch 11.
  • step S7 the image address calculator 16 reads the digital images from the frame buffers 12 and 13 through the readout circuit 14 via the readout circuit 14.
  • the image signal is read out, compared by the comparator 15 to obtain the difference, and the position of the light emitting point is obtained by image processing.
  • the image input from the CCD camera 5 is held in advance in the frame buffer 12 for one frame, and when an infrared signal for position detection is detected, the infrared data stored in the frame buffer 12 is stored.
  • the position of the portable game terminal 3 can be determined. To detect.
  • the identification number of the mobile game terminal 3 is included in the infrared signal, it is possible to recognize which position has which mobile game terminal.
  • the image address calculator 16 estimates the real space coordinates from the image coordinates of the CCD camera using an algorithm that can be described with reference to FIG. 4 below.
  • the center of the screen of the monitor device (television) 6 is set as the origin
  • the Tz axis is set in the direction perpendicular to the screen toward the TV 6
  • the ⁇ axis is set in the right hand direction
  • the Ty axis is set in the upward direction. This is explained using the TV coordinate system.
  • the screen direction of the television 6 and the line of sight of the CCD camera 5 are parallel, and the CCD camera 5 is located directly above the origin of the television coordinate system.
  • the center of the lens of the CCD camera 5 is defined as the origin
  • the front side of the screen perpendicular to the CCD camera 5 is defined as the Cz axis
  • the right-hand direction is defined as the Cx axis
  • the upward direction is defined as the Cy axis.
  • the distance between the origin of the CCD camera coordinate system and the origin of the TV coordinate system is d.
  • the application of the input position detecting device and the entertainment system according to the present invention is not limited only to the video game device 1, but is a game machine as a master machine as shown in FIG.
  • the main body 2 may be applied to the video game device 20 that transmits the identification number of the portable game terminal 3 whose position is desired to be known by an infrared signal.
  • the video game device 20 operates according to a flowchart shown in FIG. That is, in step S11, the game machine main body 21 transmits the identification number and the light emission command of the portable game terminal 3 whose position is desired to be known by an infrared signal, and receives the infrared signal in step S12. The mobile game terminal 3 decodes the signal by its own CPU and checks whether the queried identification number is equal to its own identification number.
  • step S12 if the identification signal is included in the inquiry signal by infrared light, the portable game terminal 3 emits the infrared signal including the identification number as a response signal in step S13. You You.
  • the infrared input / output device 4 connected to the game machine main body 2 in step S14 detects the infrared signal.
  • step S15 based on the identification number included in the infrared signal detected in step S15, it is determined that the signal is from the portable game terminal 3, and the captured image from the CCD camera 5 is digitized by the A / D converter 10. After converting to an image signal, save one frame in frame buffer 12.
  • step S17 the game console body 2 displays the image during emission of the infrared signal for position detection.
  • An image is captured by the CCD camera 5, and one frame is stored in the frame notifier 13 via the A / D converter 10 and the switching unit 11.
  • step S18 the image address calculator 16 reads the digital image signal from the frame amplifiers 12 and 13 via the readout circuit 14 and the comparator 15 Then, the position of the light-emitting point is determined by image processing.
  • the image input from the CCD camera 5 is held in advance in the frame buffer 12 for one frame, and when an infrared signal for position detection is detected, it is stored in the frame buffer 12.
  • the position of the portable game terminal 3 is detected by calculating the difference between the input image of the CCD camera before the infrared emission and the input image of the CCD camera 5 after the infrared emission stored in the frame buffer 13 I do.
  • the two-dimensional position can be detected. Further, if the two light emitting elements are located at a distance from each other, the distance from the CCD camera 5 can be estimated and the rotation angle around the screen can be detected. Also, three or more flashes If the element is located at a distance, the three-dimensional position and orientation of the mobile game terminal can be estimated. If necessary, the light-emitting elements can be identified by shifting the timing at which each light-emitting element emits light so that it is included in another frame.
  • the video game devices 1 and 20 detect the position of the game player using the input position detection result of the portable game terminal 3 calculated by the image address calculator 16 and center the position on the detected position.
  • the image generated by executing the program is displayed on the viewpoint.
  • an optimal viewpoint can be set when, for example, players A and B (21 and 22) play a battle.
  • the screen 23 A of the operator A 21 and the screen 23 B of the operator B 22 on the screen of the television 6 give each operator an optimal viewpoint.
  • the input position detected by the present invention by directing the gaze direction of the character to the position of the portable game terminal, a real gaze can be expressed.
  • the movement can be input by supplementing the movement of the mobile game terminal, it can be used instead of, for example, a keyboard or a joystick.
  • the position of the input device serving as the portable game terminal can be changed.
  • by inserting an identification number into the infrared signal it is possible to specify which input device is present at the same time as the position.
  • the position can be accurately measured with simple processing.
  • a filer that passes infrared rays can be installed in front of the CCD camera to enable higher S / N measurement.
  • an input position detecting device capable of accurately and easily detecting an input position from an input device, and a position of a slave unit are detected, and a program is provided on a viewpoint centered on the position.
  • O can provide an entertainment system that can display the image generated by executing

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Position Input By Displaying (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Length Measuring Devices By Optical Means (AREA)
  • Optical Communication System (AREA)
  • Image Analysis (AREA)
  • User Interface Of Digital Computer (AREA)

Description

明細 入力位置検出装置及びェン夕ティ ンメ ン ト システム 技 分野
本発明は、 赤外線の送受信手段を備えた入力装置からの入力位 置を検出する入力位置検出装置及びプログラムの実行機能を有す る親機と、 この親機に接続するためのイ ン夕フ ェースを備える子 機とを有して成るェン夕ティ ンメ ン ト システムに関する。 背景技術
エンタテイ ンメ ン ト システムの具体例である ビデオゲーム装置 では、 ゲーム機本体に接続した、 例えばテ レ ビジ ョ ン受像機のよ うなモニタ装置上にプレイヤキャラクタや、 オブジェク トを表示 させ、 入力操作装置を使ってそのキャラクタやオブジェク トをジ ヤ ンプ、 移動等させながら、 例えばロールプレイ ングゲームや、 レーシングゲーム等を進めてい く 。
通常、 プレイヤが正面からモニタ装置を見ているこ とを前提と して、 ゲームを進めてい く 。 このため、 プレイヤはモニタ装置の 正面に位置することが必要となる。
ところで、 モニタ装置を置いている室内の状況によっては、 モ 二夕装置の正面にプレイヤが位置することが困難な場合がある。
また、 二人でそれぞれ入力操作装置を用いて例えば、 対戦型の ゲームを行う場合には、 二人ともモニタ装置の正面に位置するの は困難である。
本発明は、 上記実情に鑑みてなされたものであ り、 入力装置に よる入力位置を正確に、 かつ簡単に検出するこ とができる入力位 置検出装置、 及び子機の位置を検出し、 その位置を中心とした視 点上に、 プログラムの実行によ り生成した画像を表示させること ができ、 プレイヤに最適な視点を設定させることができるェン夕 ティ ンメ ン トシステムの提供を目的とする。 発明の開示
本発明に係るエンタテイ ンメ ン トシステムは、 上記課題を解決 するために、 赤外線の送受信手段を備えた入力装置からの入力位 置を検出する入力位置検出装置において、 上記入力装置の赤外線 送受信手段に対して赤外線信号を送受信する赤外線送受信手段と、 所定方向の画像を撮像する撮像手段とを備え、 所定方向に向けて 上記撮像手段と上記赤外線送受信手段とを隣接して配置し、 上記 撮像手段が撮像した、 上記所定方向又はその近傍にある上記入力 装置の赤外線送受信手段からの位置検出用の赤外線信号を含んだ 画像と、 その直前の位置検出用の赤外線信号を含まない画像との 差分に基づいて、 上記入力装置の上記所定方向又はその近傍上の 入力位置を検出する。
また、 本発明に係るエンタテイ ンメ ン トシステムは、 上記課題 を解決するために、 プログラムの実行機能を有する親機と、 この 親機に接続するためのイ ンタフェースと赤外線の送受信手段を備 えた子機とを有して成るエンタテイ ンメ ン トシステムにおいて、 上記親機は、 上記子機の赤外線送受信手段に対して赤外線信号を 送受信する赤外線送受信手段と、 所定方向の画像を撮像する撮像 手段とを所定方向に向けて隣接して配置し、 上記撮像手段が撮像 した、 上記所定方向又はその近傍にある上記子機の赤外線送受信 手段からの位置検出用の赤外線信号を含んだ画像と、 その直前の 位置検出用の赤外線信号を含まない画像との差分に基づいて、 上 記子機の上記所定方向又はその近傍上の入力位置を検出する。
ここで、 上記親機はプログラムの実行によ り生成した画像を表 示する表示手段を接続し、 上記赤外線送受信手段と、 上記撮像手 段とをこの表示手段の近傍に配置する。
また、 上記子機は固有の識別番号を有しており、 上記親機に向 けて発光する赤外線の中に該識別番号情報を含ませている。また、 上記子機は固有の識別番号を有しており、 上記親機から上記子機 に向けて識別番号が赤外線信号によ り送られてきたときには、 上 記識別番号が固有の識別番号と等しいか否かを判定する。 また、 上記子機は上記赤外線送信手段を複数個備えている。 図面の簡単な説明
第 1 図は、 本発明に係る入力位置検出装置及びェン夕ティ ンメ ン ト システムの実施の形態となる ビデオゲーム装置の構成を示す ブロ ッ ク図である。
第 2図は、 上記ビデオゲーム装置の要部の詳細な構成を示すブ ロ ック図である。
第 3図は、 上記ビデオゲーム装置の動作を説明するためのフロ —チヤ一 トである。
第 4図は、 上記ビデオゲーム装置を構成する画像ア ドレス計算 機の計算アルゴ リ ズムを説明するための図である。
第 5図は、 上記ビデオゲーム装置の変形例の構成を示すブロ ッ ク図である。
第 6図は、 上記第 5図に示した変形例の動作を説明するための フローチャー トである。
第 7 図は、 携帯ゲーム端末を 2個備えたビデオゲーム装置での 動作を説明するための図である。 発明を実施するための最良の形態
以下、 本発明に係る入力位置検出装置及びエンタテイ ンメ ン ト システムの実施の形態について図面を参照しながら説明する。 こ の実施の形態は、プログラムの実行機能を有するゲーム機本体と、 このゲーム機本体に無線接続するためのイ ン夕フェースを備える 携帯ゲーム端末とからなる ビデオゲーム装置であ り、 ゲーム機本 体は携帯ゲーム端末からの入力位置を検出する入力位置検出装置 と しての機能を備えている。
第 1 図に示すように、 このビデオゲーム装置 1 は、 ゲーム機本 体 2 と携帯ゲーム端末 3 とから成る。 ゲーム機本体 2 は赤外線入 出力装置 4 と、 画像撮像手段となる C C Dカメ ラ 5 と、 テレ ビジ ヨ ン受像機のようなモニタ装置 6 とを接続している。
携帯ゲーム端末 3は、 操作者 7 によって把持される。 携帯ゲー ム端末 3 には、 赤外線入出力部 8 が備えられ、 操作者 7の操作に 応じた赤外線信号を赤外線入出力装置 4に送信する。
ここで、 モニタ装置 6 に接続される赤外線入出力装置 4 と、 C C Dカメ ラ 5は、 携帯ゲーム端末 3 を把持する操作者 7の方向に 向けて隣接して配置される。 そ して、 ゲーム機本体 2は、 操作者 7 が携帯ゲーム端末 3の赤外線入出力部 8から赤外線信号を赤外 線入出力装置 4 に向けて発光する直前の C C Dカメ ラ 5 による入 力画像と、 赤外線が発光した時点の入力画像との差分に基づいて 携帯ゲーム端末 3の位置を検出する。 携帯ゲーム端末 3は、 固有 の識別番号を有しており、 ゲーム機本体 2 に向けて発光する赤外 線の中にこの識別番号情報を含ませている。
ゲーム機本体 2は、 第 2 図に示すよう に、 C C Dカメ ラ 5から の撮像画像をディ ジタル信号に変換する A / D変換器 1 0 と、 赤 外線入出力装置 4から位置検出用の赤外線が供給されたときに切 り替わる切り替え器 1 1 と、 二つのフ レームバ ッ フ ァ 1 2及び 1 3 と、 読み出し回路 1 4 と、 比較器 1 5 と、 画像ア ド レス計算器 1 6 とを備えて成る。
次に、 第 3図のフ ローチャー ト を用いてビデオゲーム装置 1 の 動作を以下に説明する。 先ず、 操作者 7がステ ッ プ S 1 で携帯ゲ —ム端末 3の赤外線発光ボタ ンを押したとする。 する と、 携帯ゲ ーム端末 3は、 ステ ッ プ S 3で自分の識別番号を含んだ赤外線信 号を赤外線入出力部 8から発光する。
ゲーム機本体 2に接続された赤外線入出力装置 4はステ ッ プ S 3で上記赤外線入出力部 8 からの赤外線信号を検知する。そして、 ステ ッ プ S 4で検知した赤外線信号に含まれる識別番号から、 携 帯ゲーム端末 3からの信号と判断し、 C C Dカメ ラ 5 からの撮像 画像を A / D変換器 1 0でディ ジタル画像信号に変換した後、 フ レームバッ フ ァ 1 2 に 1 フ レーム分保存する。
ステ ッ プ S 5 で携帯ゲーム端末 3が位置検出用の赤外線信号を、 1 フ レーム時間以上発光する と、 ステップ S 6でゲーム機本体 2 は上記位置検出用の赤外線信号発光中の画像を C C Dカメラ 5 に よ り撮像し、 A / D変換器 1 0、 切り替え器 1 1 を介してフ レー ムノ ヅ フ ァ 1 3 に 1 フ レーム保存する。
最後にステ ヅ プ S 7 で画像ア ド レス計算器 1 6 は、 フ レームバ ッ フ ァ 1 2及び 1 3から読み出し回路 1 4 を介してディ ジタル画 像信号を読み出し、 比較器 1 5で比較して差分をとつてから、 発 光点の位置を画像処理によ り求める。
すなわち、 C C Dカメ ラ 5からの画像入力を予めフ レームバッ ファ 1 2に 1 フ レーム分保持しておき、 位置検出用の赤外線信号 が検出されたら、 フ レームバッ フ ァ 1 2に保存されている赤外線 発光前の C C Dカメ ラの入力画像と、 フ レームバッ フ ァ 1 3に保 存される赤外線発光後の C C Dカメ ラ 5の入力画像の差分をと る ことによ り、 携帯ゲーム端末 3の位置を検出する。
また、 赤外線信号の中には、 携帯ゲーム端末 3の識別番号が含 まれているので、 どの位置にどの携帯ゲーム端末があるかを認識 可能になる。
画像ア ド レス計算器 1 6では、 以下の第 4図を用いて説明でき るアルゴ リ ズムによって、 C C Dカメ ラの画像座標から実空間座 標を推定している。 こ こでは、 モニタ装置 （テレ ビ） 6の画面中 心を原点と し、 テ レ ビ 6に向かって画面の垂直手前方向を T z軸、 右手方向を Τχ軸、上方向を Ty軸と したテ レ ビ座標系を用いて説 明する。
テレ ビ 6の画面方向と C C Dカメラ 5の視線方向は平行であ り、 テレ ビ座標系原点の真上に C C Dカメ ラ 5があると仮定する。 C C Dカメ ラ 5のレンズ中央を原点と し、 C C Dカメ ラ 5に向かつ て画面の垂直手前方向を C z軸、 右手方向を Cx軸、 上方向を Cy 軸とする。 また、 C C Dカメ ラ座標系原点とテレ ビ座標系原点の 距離を dとする。
C C Dカメ ラ 1台の場合は、 携帯ゲーム端末 3の 2次元的な位 置しか分からないので、 自由度を限定するためにテレ ビから距離 aだけ離れた平面上に携帯ゲーム端末 3は存在すると仮定する。 一般的に、 レ ンズの歪みを無視すればカメ ラ 5の z軸に垂直な 平面上の位置は、 C C D上に線形にマッ ピングされる。 これによ り、 携帯ゲーム機が上記平面内を移動する場合には、 テレ ビ 6の 座標系と C C Dカメ ラ 5の座標系は線形にマッ ピングされる。 第 4図の場合、 y座標に関して dの平行移動のみを行えばよい。 このため、 画像ア ドレス計算器 1 6は、 T z = C z、 T y = C y + d、 T x = C x と計算できる。 したがって、 ビデオゲーム装置 1 で は、 携帯ゲーム端末 3 を把持しているプレーヤの位置を検出でき る。 そ して、 その位置を中心と した視点上に、 プログラムの実行 によ り生成した画像を表示させることができ、 プレイヤに最適な 視点を与えるこ とができる。
なお、 本発明に係る入力位置検出装置及びエンタテイ ンメ ン ト システムは、 上記ビデオゲーム装置 1 にのみ適用が限定されるも のではな く、 第 5図に示すような、 親機であるゲーム機本体 2が、 位置を知り たい携帯ゲーム端末 3の識別番号を赤外線信号によ り 送信して く るビデオゲーム装置 2 0に適用してもよい。
このビデオゲーム装置 2 0 は、 第 6図に示すフローチャー トに したがって動作する。 すなわち、 ステップ S 1 1 でゲーム機本体 2 1 が、 位置を知りたい携帯ゲーム端末 3の識別番号と発光命令 を赤外線信号によ り送信する と、 ステップ S 1 2で上記赤外線信 号を受信した携帯ゲーム端末 3は自 らの C P Uによ り信号を解読 し、 問い合わせられている識別番号が自分の識別番号と等しいか 否かを調べる。
このステップ S 1 2で赤外線による問い合わせ信号に対して自 分の識別番号が含まれていれば携帯ゲーム端末 3はステップ S 1 3で自分の識別番号を含んだ赤外線信号を返答信号と して発光す る。
する と、 ステップ S 1 4でゲーム機本体 2に接続された赤外線 入出力装置 4は上記赤外線信号を検出する。
そして、 ステップ S 1 5で検知した赤外線信号に含まれる識別 番号から、 携帯ゲーム端末 3からの信号と判断し、 C C Dカメ ラ 5からの撮像画像を A/D変換器 1 0でディ ジ夕ル画像信号に変 換した後、 フ レームバッ フ ァ 1 2に 1 フ レーム分保存する。
ステ ップ S 1 6で携帯ゲーム端末 3が位置検出用の赤外線信号 を、 1 フ レーム時間以上発光すると、 ステップ S 1 7でゲーム機 本体 2は上記位置検出用の赤外線信号発光中の画像を C C Dカメ ラ 5によ り撮像し、 A/D変換器 1 0、 切り替え器 1 1 を介して フ レームノ ッ フ ァ 1 3に 1 フ レーム保存する。
最後にステ ッ プ S 1 8で画像ア ド レス計算器 1 6は、 フ レーム ノヽ"ッ フ ァ 1 2及び 1 3から読み出し回路 1 4を介してディ ジタル 画像信号を読み出し、 比較器 1 5で比較して差分をとつてから、 発光点の位置を画像処理によ り求める。
すなわち、 C C Dカメ ラ 5からの画像入力を予めフ レームバッ フ ァ 1 2に 1 フ レーム分保持しておき、 位置検出用の赤外線信号 が検出されたら、 フ レームバヅ フ ァ 1 2に保存されている赤外線 発光前の C C Dカメ ラの入力画像と、 フ レームバッファ 1 3に保 存される赤外線発光後の C C Dカメラ 5の入力画像の差分をと る ことによ り、 携帯ゲーム端末 3の位置を検出する。
こ こで、 携帯ゲーム端末 3についている発光素子 8がーつであ れば 2次元位置の検出が可能である。 また、 二つの発光素子が離 れた位置についていれば、 C C Dカメ ラ 5からの距離の推定や、 画面まわ りの回転角度が検出可能となる。 また、 3つ以上の発光 素子が離れた位置についていれば、 携帯ゲーム端末の 3次元的な 位置と姿勢の推定が可能になる。 も し、 必要であれば、 それぞれ の発光素子の光るタイ ミ ングを別フ レームに含まれるようにずら すこ とで、 発光素子の同定も可能である。
そして、 上記ビデオゲーム装置 1及び 2 0では、 画像ア ド レス 計算器 1 6 によって計算した携帯ゲーム端末 3の入力位置検出結 果を用いてゲームプレイヤの位置を検知し、 その位置を中心と し た視点上に、プログラムの実行によ り生成した画像を表示させる。 通常のゲームは、 プレイヤが真正面からテレ ビ 6の画面を見て いるこ とを前提にしている。 プレイヤの位置を中心と した視点に 変換するこ とによ り、 大画面でプレイする場合に最適な視点を設 定するこ とができる。
また、 第 7図に示すように、 操作者 A及び B ( 2 1及び 2 2 ) で対戦プレイ をすす場合等にも最適な視点を設定することができ る。 第 7図において、 テレ ビ 6の画面上で操作者 A 2 1 の画面 2 3 Aと、 操作者 B 2 2の画面 2 3 Bは、 それぞれの操作者に最適 な視点を与えている。
また、本発明によって検出できた入力位置を用いるこ とによ り、 登場人物の視線の向きを携帯ゲーム端末の位置へ向けるこ とによ り 、 リ アルな視線を表現できる。 また、 携帯ゲーム端末の動きを 補足することによ り、 動きの入力が可能となるので、 例えばキ一 ノ ツ ド、 ジョイスティ ヅクの代わ り に使用可能となる。
このように、 上記実施の形態となるビデオゲーム装置 1及び 2 0や、 さ らにそれらを用いた、 携帯ゲーム端末が複数個あるシス テムによれば、 携帯ゲーム端末となる入力装置の位置で、 操作者 の位置を知り、 様々なフ ィ ー ドノ ックを行う こ とができる。 また、 赤外線信号に識別番号を入れるこ とで、 位置と同時にど の入力装置がそこにあるかを特定するこ とができる。
さ らに、 画像の差分を取ることによ り、 簡単な処理で正確に位 置を計測できる。 必要があれば、 赤外線を通るフ ィ ル夕を C C D カメ ラの前に取り付ければ、 さ らに高い S / Nで計測が可能にな る。
本発明によれば、 入力装置からの入力位置を正確に、 かつ簡単 に検出するこ とができる入力位置検出装置、 及び子機の位置を検 出し、 その位置を中心と した視点上に、 プログラムの実行によ り 生成した画像を表示させることができ、 プレイヤに最適な視点を 設定させるこ とができるエンタテイ ンメ ン ト システムを提供でき る o

Claims

請求の範囲
1 . 赤外線の送受信手段を備えた入力装置による入力位置を検 出する入力位置検出装置において、
上記入力装置の赤外線送受信手段に対して赤外線信号を送受信 する赤外線送受信手段と、
所定方向の画像を撮像する撮像手段とを備え、
所定方向に向けて上記撮像手段と上記赤外線送受信手段とを隣 接して配置し、 上記撮像手段が撮像した、 上記所定方向又はその 近傍にある上記入力装置の赤外線送受信手段からの位置検出用の 赤外線信号を含んだ画像と、 その直前の位置検出用の赤外線信号 を含まない画像との差分に基づいて、 上記入力装置の上記所定方 向又はその近傍上の入力位置を検出することを特徴とする入力位 置検出装置。
2 . プログラムの実行機能を有する親機と、 この親機に接続す るためのイ ンタフェースと赤外線の送受信手段を備えた子機とを 有して成るェンタティ ンメ ン ト システムにおいて、
上記親機は、
上記子機の赤外線送受信手段に対して赤外線信号を送受信する 赤外線送受信手段と、
所定方向の画像を撮像する撮像手段とを所定方向に向けて隣接 して配置し、
上記撮像手段が撮像した、 上記所定方向又はその近傍にある上 記子機の赤外線送受信手段からの位置検出用の赤外線信号を含ん だ画像と、 その直前の位置検出用の赤外線信号を含まない画像と の差分に基づいて、 上記子機の上記所定方向又はその近傍上の入 力位置を検出するこ とを特徴とするェン夕ティ ンメ ン ト システム。
3 . 上記親機はプログラムの実行によ り生成した画像を表示す る表示手段を接続し、 上記赤外線送受信手段と、 上記撮像手段と をこの表示手段の近傍に配置することを特徴とする請求項 2記載 のェン夕ティ ンメ ン ト システム。
4 . 上記子機は固有の識別番号を有しており、 上記親機に向け て発光する赤外線の中に該識別番号情報を含ませているこ とを特 徴とする請求の範囲 2記載のェン夕ティ ンメ ン ト システム。
5 . 上記子機は固有の識別番号を有しており、 上記親機から上 記子機に向けて識別番号が赤外線信号によ り送られてきたときに は、 上記識別番号が固有の識別番号と等しいか否かを判定するこ とを特徴とする請求の範囲 2記載のェン夕ティ ンメ ン トシステム。
6 . 上記子機は上記赤外線送信手段を複数個備えているこ とを 特徴とする請求の範囲 2記載のェン夕ティ ンメ ン ト システム。
7 . 上記複数個の赤外線送信手段は、 各発光素子の発光夕イ ミ ングをずらすようにしたこ とを特徴とする請求の範囲 6記載のェ ン夕ティ ンメ ン トシステム。
8 . 上記子機の赤外線送受信手段による赤外線信号の受信にて 上記直前の位置の検出用赤外線信号を含まない画像を得ると共に 上記子機の赤外線送受信手段による一定時間の赤外線信号の受信 にて位置検出用の赤外線信号を含む画像を得るこ とを特徴とする 請求の範囲 2記載のェン夕ティ ンメ ン トシステム。
9 . C C Dカメラからの撮像画像をディ ジタル信号に変換する A / D変換器と、 赤外線入出力装置からの位置検出用の赤外線が 供給されたとき A / D変換器の出力を 2個のフ レームバッフ ァの いずれかに入力する切り替え器と、 上記 2個フ レームバッ ファの 内容を比較する比較器と、 この比較器の差分出力によ り上記 C C Dカメ ラの画像座標から実空間座標を推定する画像ァ ド レス計算 器と、 を有するエンタテイ ンメ ン トシステム。
1 0. 上記 C C Dカメ ラの画像座標から実空間座標への推定は 上記画像座標に対するモニタ装置の座標への変換によって行う こ とを特徴とする請求の範囲 9記載のェン夕ティ ンメ ン ト システム。
PCT/JP1999/002894 1998-06-01 1999-05-31 Instrument de mesure de position d'entree et systeme recreatif WO1999063758A1 (fr)

Priority Applications (6)

Application Number Priority Date Filing Date Title
CA002299521A CA2299521A1 (en) 1998-06-01 1999-05-31 Input position measuring instrument and entertainment system
KR1020007001069A KR100728456B1 (ko) 1998-06-01 1999-05-31 입력 위치 검출장치 및 엔터테인먼트 시스템
EP99922602A EP1033882B1 (en) 1998-06-01 1999-05-31 Entertainment system with input position measuring device
BR9906470-7A BR9906470A (pt) 1998-06-01 1999-05-31 Dispositivo de detecção da posição de entrada e sistema de entretenimento com a utilização do mesmo
DE69941421T DE69941421D1 (de) 1998-06-01 1999-05-31 Unterhaltungssystem mit eingabepositionsmessgerät
AU39579/99A AU3957999A (en) 1998-06-01 1999-05-31 Input position measuring instrument and entertainment system

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP10/151526 1998-06-01
JP15152698A JP3841132B2 (ja) 1998-06-01 1998-06-01 入力位置検出装置及びエンタテインメントシステム

Publications (1)

Publication Number Publication Date
WO1999063758A1 true WO1999063758A1 (fr) 1999-12-09

Family

ID=15520452

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP1999/002894 WO1999063758A1 (fr) 1998-06-01 1999-05-31 Instrument de mesure de position d'entree et systeme recreatif

Country Status (13)

Country Link
US (1) US6498860B1 (ja)
EP (2) EP1033882B1 (ja)
JP (1) JP3841132B2 (ja)
KR (1) KR100728456B1 (ja)
CN (1) CN1272285A (ja)
AU (1) AU3957999A (ja)
BR (1) BR9906470A (ja)
CA (1) CA2299521A1 (ja)
DE (1) DE69941421D1 (ja)
RU (1) RU2000104517A (ja)
TW (1) TW378159B (ja)
WO (1) WO1999063758A1 (ja)
ZA (1) ZA993668B (ja)

Families Citing this family (85)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6813251B1 (en) * 1999-07-27 2004-11-02 Intel Corporation Split Transaction protocol for a bus system
US7147558B2 (en) * 2000-03-22 2006-12-12 Wms Gaming Inc. System and method for dispensing gaming machine credits in multiple different media of monetary exchange
GB0121536D0 (en) * 2001-09-06 2001-10-24 4D Technology Systems Ltd Controlling electronic device
US7203911B2 (en) * 2002-05-13 2007-04-10 Microsoft Corporation Altering a display on a viewing device based upon a user proximity to the viewing device
US7161579B2 (en) 2002-07-18 2007-01-09 Sony Computer Entertainment Inc. Hand-held computer interactive device
US8947347B2 (en) 2003-08-27 2015-02-03 Sony Computer Entertainment Inc. Controlling actions in a video game unit
US7646372B2 (en) * 2003-09-15 2010-01-12 Sony Computer Entertainment Inc. Methods and systems for enabling direction detection when interfacing with a computer program
US8797260B2 (en) 2002-07-27 2014-08-05 Sony Computer Entertainment Inc. Inertially trackable hand-held controller
US7623115B2 (en) 2002-07-27 2009-11-24 Sony Computer Entertainment Inc. Method and apparatus for light input device
US7850526B2 (en) 2002-07-27 2010-12-14 Sony Computer Entertainment America Inc. System for tracking user manipulations within an environment
US8233642B2 (en) 2003-08-27 2012-07-31 Sony Computer Entertainment Inc. Methods and apparatuses for capturing an audio signal based on a location of the signal
US10086282B2 (en) 2002-07-27 2018-10-02 Sony Interactive Entertainment Inc. Tracking device for use in obtaining information for controlling game program execution
US9474968B2 (en) 2002-07-27 2016-10-25 Sony Interactive Entertainment America Llc Method and system for applying gearing effects to visual tracking
US9393487B2 (en) 2002-07-27 2016-07-19 Sony Interactive Entertainment Inc. Method for mapping movements of a hand-held controller to game commands
US7627139B2 (en) * 2002-07-27 2009-12-01 Sony Computer Entertainment Inc. Computer image and audio processing of intensity and input devices for interfacing with a computer program
US8686939B2 (en) 2002-07-27 2014-04-01 Sony Computer Entertainment Inc. System, method, and apparatus for three-dimensional input control
US9174119B2 (en) 2002-07-27 2015-11-03 Sony Computer Entertainement America, LLC Controller for providing inputs to control execution of a program when inputs are combined
US7918733B2 (en) 2002-07-27 2011-04-05 Sony Computer Entertainment America Inc. Multi-input game control mixer
US8570378B2 (en) 2002-07-27 2013-10-29 Sony Computer Entertainment Inc. Method and apparatus for tracking three-dimensional movements of an object using a depth sensing camera
US8313380B2 (en) 2002-07-27 2012-11-20 Sony Computer Entertainment America Llc Scheme for translating movements of a hand-held controller into inputs for a system
US8139793B2 (en) 2003-08-27 2012-03-20 Sony Computer Entertainment Inc. Methods and apparatus for capturing audio signals based on a visual image
US7854655B2 (en) 2002-07-27 2010-12-21 Sony Computer Entertainment America Inc. Obtaining input for controlling execution of a game program
US8019121B2 (en) * 2002-07-27 2011-09-13 Sony Computer Entertainment Inc. Method and system for processing intensity from input devices for interfacing with a computer program
US7803050B2 (en) 2002-07-27 2010-09-28 Sony Computer Entertainment Inc. Tracking device with sound emitter for use in obtaining information for controlling game program execution
US7760248B2 (en) 2002-07-27 2010-07-20 Sony Computer Entertainment Inc. Selective sound source listening in conjunction with computer interactive processing
US8160269B2 (en) 2003-08-27 2012-04-17 Sony Computer Entertainment Inc. Methods and apparatuses for adjusting a listening area for capturing sounds
US9682319B2 (en) 2002-07-31 2017-06-20 Sony Interactive Entertainment Inc. Combiner method for altering game gearing
FR2848870B1 (fr) * 2002-12-18 2008-11-28 Sylvius Systeme de jeu a commande perfectionnee de deplacement d'objets virtuels affiches
US9177387B2 (en) 2003-02-11 2015-11-03 Sony Computer Entertainment Inc. Method and apparatus for real time motion capture
US8072470B2 (en) 2003-05-29 2011-12-06 Sony Computer Entertainment Inc. System and method for providing a real-time three-dimensional interactive environment
US9573056B2 (en) 2005-10-26 2017-02-21 Sony Interactive Entertainment Inc. Expandable control device via hardware attachment
US7874917B2 (en) 2003-09-15 2011-01-25 Sony Computer Entertainment Inc. Methods and systems for enabling depth and direction detection when interfacing with a computer program
US8323106B2 (en) 2008-05-30 2012-12-04 Sony Computer Entertainment America Llc Determination of controller three-dimensional location using image analysis and ultrasonic communication
US10279254B2 (en) 2005-10-26 2019-05-07 Sony Interactive Entertainment Inc. Controller having visually trackable object for interfacing with a gaming system
US8287373B2 (en) * 2008-12-05 2012-10-16 Sony Computer Entertainment Inc. Control device for communicating visual information
US7663689B2 (en) * 2004-01-16 2010-02-16 Sony Computer Entertainment Inc. Method and apparatus for optimizing capture device settings through depth information
JP4511246B2 (ja) * 2004-05-28 2010-07-28 株式会社国際電気通信基礎技術研究所 光学識別情報取得装置
US8547401B2 (en) 2004-08-19 2013-10-01 Sony Computer Entertainment Inc. Portable augmented reality device and method
US7864159B2 (en) * 2005-01-12 2011-01-04 Thinkoptics, Inc. Handheld vision based absolute pointing system
EP1878013B1 (en) * 2005-05-05 2010-12-15 Sony Computer Entertainment Inc. Video game control with joystick
WO2007078021A1 (en) * 2006-01-05 2007-07-12 Pointchips Co., Ltd. Appartus for remote pointing using image sensor and method of the same
JP3989511B1 (ja) * 2006-03-29 2007-10-10 株式会社コナミデジタルエンタテインメント ゲーム装置、ゲーム制御方法、ならびに、プログラム
JP4443531B2 (ja) * 2006-04-11 2010-03-31 株式会社ソニー・コンピュータエンタテインメント エンタテインメントシステムおよび処理装置
US9364755B1 (en) 2006-05-08 2016-06-14 Nintendo Co., Ltd. Methods and apparatus for using illumination marks for spatial pointing
JP5051822B2 (ja) * 2006-08-02 2012-10-17 任天堂株式会社 汎用遠隔制御機能を備えたゲーム装置
USRE48417E1 (en) 2006-09-28 2021-02-02 Sony Interactive Entertainment Inc. Object direction using video input combined with tilt angle information
US8781151B2 (en) 2006-09-28 2014-07-15 Sony Computer Entertainment Inc. Object detection using video input combined with tilt angle information
US8310656B2 (en) 2006-09-28 2012-11-13 Sony Computer Entertainment America Llc Mapping movements of a hand-held controller to the two-dimensional image plane of a display screen
US7880739B2 (en) * 2006-10-11 2011-02-01 International Business Machines Corporation Virtual window with simulated parallax and field of view change
CN101376058B (zh) * 2007-08-28 2011-11-02 凌阳多媒体股份有限公司 具有悬空定位功能的坐标定位系统及方法
TW200923719A (en) * 2007-11-19 2009-06-01 Asustek Comp Inc Input apparatus and optical mouse for computer and operation method thereof
US8542907B2 (en) 2007-12-17 2013-09-24 Sony Computer Entertainment America Llc Dynamic three-dimensional object mapping for user-defined control device
KR101335346B1 (ko) 2008-02-27 2013-12-05 소니 컴퓨터 엔터테인먼트 유럽 리미티드 장면의 심도 데이터를 포착하고, 컴퓨터 액션을 적용하기 위한 방법들
US8368753B2 (en) * 2008-03-17 2013-02-05 Sony Computer Entertainment America Llc Controller with an integrated depth camera
US9285459B2 (en) * 2008-05-09 2016-03-15 Analog Devices, Inc. Method of locating an object in 3D
US20090279107A1 (en) * 2008-05-09 2009-11-12 Analog Devices, Inc. Optical distance measurement by triangulation of an active transponder
US9746544B2 (en) * 2008-12-03 2017-08-29 Analog Devices, Inc. Position measurement systems using position sensitive detectors
US8527657B2 (en) 2009-03-20 2013-09-03 Sony Computer Entertainment America Llc Methods and systems for dynamically adjusting update rates in multi-player network gaming
US8342963B2 (en) 2009-04-10 2013-01-01 Sony Computer Entertainment America Inc. Methods and systems for enabling control of artificial intelligence game characters
US8393964B2 (en) * 2009-05-08 2013-03-12 Sony Computer Entertainment America Llc Base station for position location
US8142288B2 (en) * 2009-05-08 2012-03-27 Sony Computer Entertainment America Llc Base station movement detection and compensation
EP2434945B1 (en) * 2009-05-27 2018-12-19 Analog Devices, Inc. Multiuse optical sensor
US8672763B2 (en) 2009-11-20 2014-03-18 Sony Computer Entertainment Inc. Controller for interfacing with a computing program using position, orientation, or motion
US8913009B2 (en) 2010-02-03 2014-12-16 Nintendo Co., Ltd. Spatially-correlated multi-display human-machine interface
US8339364B2 (en) 2010-02-03 2012-12-25 Nintendo Co., Ltd. Spatially-correlated multi-display human-machine interface
CA2746481C (en) 2010-02-03 2017-06-13 Nintendo Co., Ltd. Game system, controller device, and game process method
US8814686B2 (en) 2010-02-03 2014-08-26 Nintendo Co., Ltd. Display device, game system, and game method
EP2353677A3 (en) * 2010-02-03 2014-01-22 Nintendo Co., Ltd. Game system, image output device, and image display method
WO2011096976A1 (en) * 2010-02-05 2011-08-11 Sony Computer Entertainment Inc. Controller for interfacing with a computing program using position, orientation, or motion
JP2011224240A (ja) * 2010-04-22 2011-11-10 Nintendo Co Ltd 入力装置および情報処理システム
JP6243586B2 (ja) 2010-08-06 2017-12-06 任天堂株式会社 ゲームシステム、ゲーム装置、ゲームプログラム、および、ゲーム処理方法
US10150033B2 (en) 2010-08-20 2018-12-11 Nintendo Co., Ltd. Position calculation system, position calculation device, storage medium storing position calculation program, and position calculation method
JP6184658B2 (ja) 2010-08-20 2017-08-23 任天堂株式会社 ゲームシステム、ゲーム装置、ゲームプログラム、および、ゲーム処理方法
JP5840386B2 (ja) 2010-08-30 2016-01-06 任天堂株式会社 ゲームシステム、ゲーム装置、ゲームプログラム、および、ゲーム処理方法
JP5840385B2 (ja) 2010-08-30 2016-01-06 任天堂株式会社 ゲームシステム、ゲーム装置、ゲームプログラム、および、ゲーム処理方法
KR101492310B1 (ko) 2010-11-01 2015-02-11 닌텐도가부시키가이샤 조작 장치 및 정보 처리 장치
GB2487200A (en) * 2011-01-12 2012-07-18 Canon Kk Video encoding and decoding with improved error resilience
JP5689014B2 (ja) 2011-04-07 2015-03-25 任天堂株式会社 入力システム、情報処理装置、情報処理プログラム、および３次元位置算出方法
US9702690B2 (en) 2011-12-19 2017-07-11 Analog Devices, Inc. Lens-less optical position measuring sensor
US9269217B2 (en) 2012-03-14 2016-02-23 Bally Gaming, Inc. Infrared displays for human interfaces viewable by camera
BR112015002839B1 (pt) 2012-10-15 2021-11-30 Sony Computer Entertainment Inc Dispositivo operacional
RU2647695C2 (ru) 2012-10-15 2018-03-16 Сони Компьютер Энтертейнмент Инк. Устройство управления
RU2573245C2 (ru) * 2013-04-24 2016-01-20 Общество С Ограниченной Ответственностью "Лаборатория Эландис" Способ бесконтактного управления с помощью поляризационного маркера и комплекс его реализующий
US20210023468A1 (en) * 2019-07-24 2021-01-28 Jon Burton Communication methods between physical robotic devices and enhancements in physical robotic device and action figure interactions
US11674797B2 (en) 2020-03-22 2023-06-13 Analog Devices, Inc. Self-aligned light angle sensor using thin metal silicide anodes

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH02304680A (ja) * 1989-05-19 1990-12-18 Toshiba Corp 画像処理装置
JPH04148806A (ja) * 1990-10-12 1992-05-21 Konica Corp カメラの被写体位置検出装置
US5388059A (en) 1992-12-30 1995-02-07 University Of Maryland Computer vision system for accurate monitoring of object pose
JPH07296197A (ja) * 1994-04-22 1995-11-10 Casio Comput Co Ltd 画像処理装置
US5564698A (en) 1995-06-30 1996-10-15 Fox Sports Productions, Inc. Electromagnetic transmitting hockey puck

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5759044A (en) * 1990-02-22 1998-06-02 Redmond Productions Methods and apparatus for generating and processing synthetic and absolute real time environments
JPH0628452A (ja) * 1991-08-07 1994-02-04 Nec Home Electron Ltd ３次元画像処理装置
DE4225074C1 (de) * 1992-07-29 1994-02-03 Nsm Ag Vorrichtung zur Steuerung des Verschlusses einer von einer Lichtquelle mit Licht beaufschlagten CCD-Kamera
US5411270A (en) * 1992-11-20 1995-05-02 Sega Of America, Inc. Split-screen video game with character playfield position exchange
US5354063A (en) * 1992-12-04 1994-10-11 Virtual Golf, Inc. Double position golf simulator
JP2552427B2 (ja) * 1993-12-28 1996-11-13 コナミ株式会社 テレビ遊戯システム
US5881178A (en) * 1994-05-20 1999-03-09 Image Resource Technologies, Inc. Apparatus and method for accelerating the processing of data matrices
WO1996015837A1 (en) * 1994-11-21 1996-05-30 Compaq Computer Corporation Interactive play with a computer
JPH0937357A (ja) * 1995-07-15 1997-02-07 Nec Corp 位置検出機能付リモコンシステム
US5786804A (en) * 1995-10-06 1998-07-28 Hewlett-Packard Company Method and system for tracking attitude
US5793630A (en) * 1996-06-14 1998-08-11 Xerox Corporation High precision spatially defined data transfer system
JPH1079881A (ja) * 1996-09-04 1998-03-24 Sharp Corp 撮像装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH02304680A (ja) * 1989-05-19 1990-12-18 Toshiba Corp 画像処理装置
JPH04148806A (ja) * 1990-10-12 1992-05-21 Konica Corp カメラの被写体位置検出装置
US5388059A (en) 1992-12-30 1995-02-07 University Of Maryland Computer vision system for accurate monitoring of object pose
JPH07296197A (ja) * 1994-04-22 1995-11-10 Casio Comput Co Ltd 画像処理装置
US5564698A (en) 1995-06-30 1996-10-15 Fox Sports Productions, Inc. Electromagnetic transmitting hockey puck

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP1033882A4

Also Published As

Publication number Publication date
US6498860B1 (en) 2002-12-24
DE69941421D1 (de) 2009-10-29
CN1272285A (zh) 2000-11-01
RU2000104517A (ru) 2002-04-10
KR20010022484A (ko) 2001-03-15
TW378159B (en) 2000-01-01
KR100728456B1 (ko) 2007-06-13
EP1033882A1 (en) 2000-09-06
EP2103333A1 (en) 2009-09-23
AU3957999A (en) 1999-12-20
EP1033882A4 (en) 2008-09-17
CA2299521A1 (en) 1999-12-09
ZA993668B (en) 1999-12-02
JP3841132B2 (ja) 2006-11-01
JPH11346360A (ja) 1999-12-14
EP1033882B1 (en) 2009-09-16
BR9906470A (pt) 2000-09-26

Similar Documents

Publication Publication Date Title
WO1999063758A1 (fr) Instrument de mesure de position d'entree et systeme recreatif
US8403754B2 (en) Interactive game apparatus and game controller used in the same
JP4798705B2 (ja) 位置算出装置、位置算出プログラム、ゲーム装置、およびゲームプログラム
US8639471B2 (en) Wireless position sensing in three dimensions using ultrasound
JP2007075213A (ja) 情報処理プログラム
JP2007061489A (ja) 情報処理システムおよびプログラム
JP2007236697A (ja) 画像処理装置および画像処理プログラム
JP4861855B2 (ja) 指示位置演算システム、指示体及びゲームシステム
JP2007301038A (ja) ゲームプログラム、ゲーム装置、およびゲームシステム
JP2007075354A (ja) ゲームプログラム
JP2007263648A (ja) 傾き算出装置、傾き算出プログラム、ゲーム装置およびゲームプログラム
JP2007061271A (ja) ゲームシステムおよびゲームプログラム
US20070118820A1 (en) Equipment control apparatus, remote controller, equipment, equipment control method, and equipment control program product
JP2007213144A (ja) 対象選択プログラムおよび対象選択装置
US8147330B2 (en) Game apparatus and storage medium having game program stored thereon
JP5259965B2 (ja) 情報処理プログラム、および、情報処理装置
US8657682B2 (en) Motion sensing controller and game apparatus having same
EP3165266B1 (en) Information processing system, information processing apparatus, information processing method, information processing program, and hand-held information processing apparatus
JP4083155B2 (ja) 入力位置検出装置及びエンタテインメントシステム
US20110069007A1 (en) Pointing device
JP5735866B2 (ja) 情報処理システムおよびプログラム
JP5116159B2 (ja) 情報処理システム、情報処理方法、および情報処理プログラム
JPH04253220A (ja) 座標検出装置
NZ501435A (en) Video game, position of wireless game controller detected by CCD camera adjacent to display
MXPA99011086A (en) Detection device of the input position and entertainment system which employs the same

Legal Events

Date Code Title Description
WWE Wipo information: entry into national phase

Ref document number: 99800855.9

Country of ref document: CN

AK Designated states

Kind code of ref document: A1

Designated state(s): AU BR CA CN ID IL KR PL RU SG VN

AL Designated countries for regional patents

Kind code of ref document: A1

Designated state(s): AT BE CH CY DE DK ES FI FR GB GR IE IT LU MC NL PT SE

WWE Wipo information: entry into national phase

Ref document number: 1999922602

Country of ref document: EP

WWE Wipo information: entry into national phase

Ref document number: 39579/99

Country of ref document: AU

WWE Wipo information: entry into national phase

Ref document number: 1020007001069

Country of ref document: KR

ENP Entry into the national phase

Ref document number: 2299521

Country of ref document: CA

Ref document number: 2299521

Country of ref document: CA

Kind code of ref document: A

121 Ep: the epo has been informed by wipo that ep was designated in this application
WWP Wipo information: published in national office

Ref document number: 1999922602

Country of ref document: EP

WWP Wipo information: published in national office

Ref document number: 1020007001069

Country of ref document: KR