JP2003275464A - Portable game device - Google Patents

Portable game device

Info

Publication number
JP2003275464A
JP2003275464A JP2002081634A JP2002081634A JP2003275464A JP 2003275464 A JP2003275464 A JP 2003275464A JP 2002081634 A JP2002081634 A JP 2002081634A JP 2002081634 A JP2002081634 A JP 2002081634A JP 2003275464 A JP2003275464 A JP 2003275464A
Authority
JP
Japan
Prior art keywords
game
development
motion vector
unit
image sensor
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2002081634A
Other languages
Japanese (ja)
Inventor
Masahiro Takeda
昌弘 竹田
Yasushi Kage
裕史 鹿毛
Takaaki Sakaguchi
隆明 坂口
Kenichi Tanaka
健一 田中
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mitsubishi Electric Corp
Original Assignee
Mitsubishi Electric Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mitsubishi Electric Corp filed Critical Mitsubishi Electric Corp
Priority to JP2002081634A priority Critical patent/JP2003275464A/en
Publication of JP2003275464A publication Critical patent/JP2003275464A/en
Pending legal-status Critical Current

Links

Abstract

<P>PROBLEM TO BE SOLVED: To provide an inexpensive portable game device which can be enjoyed in response to actions of a human body by using, for example, a miniature camera. <P>SOLUTION: The portable game device is provided with an image sensor part having a solid image pickup element attached to a part of the human body or held by the human body and retrieving picked up image data, a movement vector calculating part acquiring projection value data from temporally continuous pieces of image data acquired by the image sensor part and calculating a movement vector, and a game processing part executing a game program by using the calculated movement vector as input. <P>COPYRIGHT: (C)2003,JPO

Description

【発明の詳細な説明】Detailed Description of the Invention

【0001】[0001]

【発明の属する技術分野】この発明は人体の動きを利用
してゲームの操作を行う携帯型ゲーム装置に関するもの
である。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a portable game device for operating a game by utilizing the movement of a human body.

【0002】[0002]

【従来の技術】従来、携帯型ゲームとして、特開平11
−188182号公報「釣りシミュレーションゲーム装
置」に示されるものがある。これは、グリップに擬似的
なリール部分を備え、そこに組み込まれた加速度センサ
を用いてプレーヤの釣り竿操作の動きを検知し、また釣
れたときの釣り竿にかかる負荷を、ジャイロスコープを
用いて発生させ体感させる技術である。また、市販され
ている業務用のゲーム装置の中に、据え置き型のカメラ
にユーザが正対した形でユーザの動きを、画像を用いて
検知するものがある。
2. Description of the Related Art Conventionally, as a portable game, Japanese Patent Laid-Open No.
No. 188182, “Fishing simulation game device”. This is because the grip is equipped with a pseudo reel part, the movement of the fishing rod operation of the player is detected using the acceleration sensor incorporated in the grip, and the load on the fishing rod when fishing is generated using the gyroscope. It is a technology that allows people to experience it. Further, some commercially available commercial game devices detect an image of a user's movement in a manner in which the user faces a stationary camera.

【0003】[0003]

【発明が解決しようとする課題】従来の携帯型ゲーム装
置は以上のように構成されているので、前者の釣りシミ
ュレーションゲーム装置では、携帯端末を利用してゲー
ム装置を構成しようとした場合、新たにセンサなどを組
み込んだりしなければならず、部品点数が多くなりコス
ト増となり、またサイズが大きくなるなどの問題があっ
た。また、後者のように画像データを用いて動きを検知
する方法は、装置自体が大掛かりになり、携帯端末には
適用できないという問題があった。昨今の携帯端末には
画像データを取り込む小型カメラが付けられたものが出
始めており、したがって、このような小型カメラを利用
した安価な携帯型ゲーム装置を実現することが課題とな
っていた。
Since the conventional portable game device is constructed as described above, in the former fishing simulation game device, when a portable device is used to construct the game device, Since it is necessary to incorporate a sensor or the like into the device, the number of parts increases, the cost increases, and the size increases. Further, the latter method of detecting a motion using image data has a problem in that the device itself becomes large-scale and cannot be applied to a mobile terminal. Recently, some portable terminals are equipped with a small camera for capturing image data, and therefore, it has been a problem to realize an inexpensive portable game device using such a small camera.

【0004】この発明は上記のような課題を解決するた
めになされたもので、小型カメラを人体の一部に装着ま
たは人体で保持させ、人体の動きを画像データから算出
することでゲームを実現する携帯型ゲーム装置を得るこ
とを目的とする。
The present invention has been made to solve the above problems, and a game is realized by mounting a small camera on a part of the human body or holding it by the human body and calculating the movement of the human body from image data. It is an object of the present invention to provide a portable game device that operates.

【0005】[0005]

【課題を解決しようとする手段】この発明に係る携帯型
ゲーム装置は、人体の一部に装着または人体で保持さ
れ、撮像した画像データを取り出す固体撮像素子を有す
る画像センサ部と、画像センサ部から得られる時間的に
連続する画像データから射影値データを取得して動きベ
クトルを算出する動きベクトル算出部と、算出された動
きベクトルを入力としてゲームプログラムを実行するゲ
ーム処理部とを備えたものである。
SUMMARY OF THE INVENTION A portable game device according to the present invention includes an image sensor unit having a solid-state image sensor mounted on or held by a part of a human body and for extracting image data of an image, and an image sensor unit. A motion vector calculation unit that acquires projection value data from temporally continuous image data obtained from the motion vector calculation unit, and a game processing unit that executes the game program using the calculated motion vector as an input. Is.

【0006】この発明に係る携帯型ゲーム装置は、画像
センサ部を携帯端末が保有する小型カメラとし、動きベ
クトル算出部とゲーム処理部が携帯端末に内蔵されるよ
うにしたものである。
In the portable game device according to the present invention, the image sensor unit is a small camera owned by the portable terminal, and the motion vector calculation unit and the game processing unit are built in the portable terminal.

【0007】この発明に係る携帯型ゲーム装置は、ゲー
ム処理部がゲーム展開上の判定を行った判定結果に基づ
いてゲームの展開を文字や画像で表示する画面表示部を
備えたものである。
The portable game device according to the present invention is provided with a screen display unit for displaying the development of the game in characters or images based on the result of the determination made by the game processing unit on the development of the game.

【0008】この発明に係る携帯型ゲーム装置は、ゲー
ム処理部がゲーム展開上の判定を行った判定結果に基づ
いてゲームの展開を音で知らせる音出力部を備えたもの
である。
The portable game device according to the present invention is provided with a sound output unit for notifying the development of the game by a sound based on the result of the determination made by the game processing unit on the development of the game.

【0009】この発明に係る携帯型ゲーム装置は、ゲー
ム処理部がゲーム展開上の判定を行った判定結果に基づ
いてゲームの展開を光の点灯や点滅で知らせる光表示部
を備えたものである。
The portable game device according to the present invention is provided with an optical display unit for notifying the development of the game by turning on or off the light of the game based on the result of the determination made by the game processing unit on the development of the game. .

【0010】この発明に係る携帯型ゲーム装置は、ゲー
ム処理部がゲーム展開上の判定を行った判定結果に基づ
いて人体に振動を伝えるバイブレータ部を備えたもので
ある。
The portable game device according to the present invention is provided with a vibrator portion for transmitting vibration to the human body based on the result of the determination made by the game processing portion on the development of the game.

【0011】[0011]

【発明の実施の形態】以下、この発明の実施の一形態を
説明する。 実施の形態1.図1はこの発明の実施の形態1による携
帯型ゲーム装置の構成を示すブロック図である。10は
ユーザに携帯されるかもしくはその人体の一部に装着さ
れ、撮像した画像データを取り出す固体撮像素子を有す
る画像センサ部で、携帯電話に設けられているような小
型カメラと同様に小型のものである。11は画像センサ
部10から得られる時間的に連続する画像データから射
影値データを取得して動きベクトルを算出する動きベク
トル算出部である。12は算出された動きベクトルを入
力としてゲームプログラムを実行するゲーム処理部であ
る。13はゲーム処理部12からの制御信号によって振
動を行い、その振動をユーザの人体に伝えるバイブレー
タ部である。ここで、動きベクトル算出部11とゲーム
処理部12の処理は、一般的には1個のマイクロプロセ
ッサが受け持つことになる。
BEST MODE FOR CARRYING OUT THE INVENTION An embodiment of the present invention will be described below. Embodiment 1. 1 is a block diagram showing a configuration of a portable game device according to Embodiment 1 of the present invention. Reference numeral 10 denotes an image sensor unit that is carried by a user or is attached to a part of the human body and has a solid-state image sensor that takes out image data of a captured image, and has a small size similar to a small camera provided in a mobile phone. It is a thing. Reference numeral 11 is a motion vector calculation unit that acquires projection value data from temporally continuous image data obtained from the image sensor unit 10 and calculates a motion vector. A game processing unit 12 executes the game program by using the calculated motion vector as an input. Reference numeral 13 is a vibrator unit that vibrates according to a control signal from the game processing unit 12 and transmits the vibration to the human body of the user. Here, the processing of the motion vector calculation unit 11 and the game processing unit 12 is generally handled by one microprocessor.

【0012】次に動きベクトルを算出する動作について
説明する。図3は実施の形態1に係る動作手順を示すフ
ローチャートで、動きベクトルを算出する前半の処理A
とゲームを実行する後半の処理Bに分けて示す。前半の
処理Aにおいて、ユーザが画像センサ部10を携帯する
か、もしくはその人体の一部に装着してゲーム上の動き
を行う時、画像センサ部10から時間的に連続する画像
データが動きベクトル算出部11に出力される(ステッ
プST301)。この時、画像センサ部10が撮像する
対象は、ユーザ自身である必用は無く、一般的な自然画
像で構わない。この時間的に連続する前後の2枚の画像
を基に、動きベクトル算出部11は、例えば図4に示す
ように、それぞれの画像上の水平、鉛直の2方向の射影
値(画素加算値)データを求める(ステップST30
2)。次に、動きベクトル算出部11において、時間的
に連続する2枚の原画像から得られた射影値データに関
して、2方向それぞれにおいて、その差分を計算する
(ステップST303)。このときの水平方向射影デー
タの時間差分を求める方法を図5に示す。図5(a)
に、ある物体について、前時刻にAに位置したものが、
現時刻にBに移動した状態が示される。図5(b)は、
X軸方向の射影値がA’(0,0,0,0,2,2,
1,1,0,0)、B’(0,0,0,0,0,0,
2,2,1,1)であることを示している。この場合、
水平方向射影データの時間差分Cは図5(c)のように
表され、B’−A’=C(0,0,0,0,−2,−
2,1,1,1,1)として求められる。
Next, the operation of calculating the motion vector will be described. FIG. 3 is a flowchart showing the operation procedure according to the first embodiment, and the first half of processing A for calculating a motion vector is performed.
And the process B of the latter half of executing the game. In the process A of the first half, when the user carries the image sensor unit 10 or wears the image sensor unit 10 on a part of his or her body to perform a motion in the game, the image sensor unit 10 outputs temporally continuous image data as a motion vector. It is output to the calculation unit 11 (step ST301). At this time, the target imaged by the image sensor unit 10 does not need to be the user himself, but may be a general natural image. Based on the two images that are temporally consecutive before and after, the motion vector calculation unit 11, for example, as shown in FIG. 4, the projection value (pixel addition value) in each of the horizontal and vertical directions on each image. Obtain data (step ST30
2). Next, the motion vector calculation unit 11 calculates the difference between the projection value data obtained from two temporally consecutive original images in each of the two directions (step ST303). FIG. 5 shows a method of obtaining the time difference of the horizontal projection data at this time. Figure 5 (a)
Then, for an object, what was located at A at the previous time,
The state of moving to B at the current time is shown. FIG. 5 (b) shows
The projection value in the X-axis direction is A '(0,0,0,0,2,2,2
1,1,0,0), B '(0,0,0,0,0,0,
2, 2, 1, 1). in this case,
The time difference C of the horizontal projection data is represented as shown in FIG. 5C, and B'-A '= C (0,0,0,0, -2,-
2,1,1,1,1).

【0013】次に、動きベクトル算出部11は、得られ
た時間的差分を用いて各水平・鉛直方向それぞれの動き
ベクトルを算出する。図6は水平方向の動きベクトルの
求め方を示す説明図である。水平方向の各ピクセル位置
単位での射影値の変化と画像の明暗の変化から各ピクセ
ル位置単位での動きベクトルを計算し、そのベクトルの
和の平均を水平方向の動きベクトルとする。同様に鉛直
方向の動きベクトルを求め、両ベクトルを合成し、全体
の動きベクトルを決定する(ステップST304)。
Next, the motion vector calculation unit 11 calculates each motion vector in each horizontal / vertical direction by using the obtained temporal difference. FIG. 6 is an explanatory diagram showing how to obtain a horizontal motion vector. A motion vector in each pixel position unit is calculated from the change in the projection value in each pixel position unit in the horizontal direction and the change in the brightness of the image, and the average of the sum of the vectors is taken as the horizontal motion vector. Similarly, a vertical motion vector is obtained, and both vectors are combined to determine the overall motion vector (step ST304).

【0014】上記動きベクトル計算において、画像セン
サに画像処理機能を持たせたチップを使用すれば、一層
の処理の高速化と小型化を計ることが可能である。この
ような画像センサの例として、雑誌「Nature, “Artific
ial Retinas−Fast, Versatile Image Processors”」
(vol.372,No.6502,pp197-198,1994)または特開平8−
242265号公報に記載されている人工網膜LSIが
ある。この素子は、入力画像から直接、列射影と行射影
を出力するものである。したがって、このような素子を
画像センサ部10と動きベクトル算出部11の一部とし
て用いることにより、動きベクトル計算を高速化でき、
かつ画像入力以降の処理に必要なマイクロプロセッサの
機能として簡略化されたものを使用でき、システム全体
のコストダウンに結びつく。
In the above motion vector calculation, if the image sensor is provided with a chip having an image processing function, the processing speed can be further increased and the size can be further reduced. As an example of such an image sensor, a magazine “Nature,“ Artificial
ial Retinas-Fast, Versatile Image Processors ””
(Vol.372, No.6502, pp197-198,1994) or JP-A-8-
There is an artificial retina LSI described in Japanese Patent No. 242265. This element outputs column projections and row projections directly from the input image. Therefore, by using such an element as part of the image sensor unit 10 and the motion vector calculation unit 11, the motion vector calculation can be speeded up,
In addition, a simplified function of the microprocessor necessary for processing after image input can be used, which leads to cost reduction of the entire system.

【0015】次に、図1で説明した携帯ゲーム装置の適
用例として携帯型釣りゲーム装置を挙げ、算出された動
きベクトルがゲームの中でいかに利用されるかについて
説明する。図2は携帯型釣りゲーム装置の外観構成を示
す説明図である。図において、21は竿状のスティッ
ク、22はスティック21に固定されたゲーム装置、2
4は文字や画像を表示する画面表示部、25はユーザで
ある。ゲーム装置22には、画像センサ部10が画像デ
ータを取り出すように取り付けられ、また画像センサ部
10、動きベクトル算出部11、ゲーム処理部12およ
びバイブレータ部13が内蔵されている。ユーザ25は
ゲーム装置22が取り付けられたスティック21を手で
保持し、実際の釣りで行う動作を擬似的に行う。その動
作としては、竿を振ってポイント(針を落とす場所)に
針を投げ入れる動作、針に魚を引っ掛ける「アワセ」動
作、針にかかった魚を巻き上げる動作などがある。ゲー
ム装置22は、ユーザ25のこれらの動作時に画像セン
サ部10で撮像したそれぞれの画像データを処理して動
きベクトルを算出して認識し、その動きベクトルに基づ
いて以下に述べるようなゲームの進行を行う。
Next, a portable fishing game device will be described as an application example of the portable game device described with reference to FIG. 1, and how the calculated motion vector is used in the game will be described. FIG. 2 is an explanatory diagram showing an external configuration of the portable fishing game device. In the figure, 21 is a rod-shaped stick, 22 is a game device fixed to the stick 21, 2
Reference numeral 4 is a screen display unit for displaying characters and images, and 25 is a user. The image sensor unit 10 is attached to the game device 22 so as to take out image data, and the image sensor unit 10, the motion vector calculation unit 11, the game processing unit 12, and the vibrator unit 13 are incorporated. The user 25 holds the stick 21 to which the game device 22 is attached with his / her hand, and simulates an operation performed in actual fishing. The actions include swinging the rod and throwing the needle to the point (where the needle is dropped), the "awase" action in which the fish is hooked on the needle, and the action of rolling up the fish on the needle. The game device 22 processes each image data imaged by the image sensor unit 10 during these operations of the user 25 to calculate and recognize a motion vector, and based on the motion vector, progress of a game as described below. I do.

【0016】図3の後半の処理Bは、ゲーム処理部12
がゲーム装置22に組み込まれたゲームプログラムを実
行する部分を表している。ゲーム処理部12は、電源投
入またはゲームモードにすると、初期化される(ステッ
プST305)。前半の処理Aで算出された動きベクト
ルが入力される(ステップST306)。入力された動
きベクトルから動き判定が行われる(ステップST30
7)。この動き判定は、投げ入れ判定(ステップST3
08)、魚が針に引っかかる状態を指す「アタリ」動作
判定(ステップST309)および引き上げ判定(ステ
ップST310)のルーチンからなり、これらの各ルー
チンによってユーザの各動きが判定される。そして最終
的に、魚が釣れたかどうか、釣れた魚の種類・大きさな
どの釣果判定が行われ(ステップST311)、ゲーム
の得点が決定される。
The process B in the latter half of FIG.
Represents a portion for executing a game program incorporated in the game device 22. The game processing unit 12 is initialized when the power is turned on or the game mode is set (step ST305). The motion vector calculated in the processing A in the first half is input (step ST306). Motion determination is performed from the input motion vector (step ST30).
7). This motion determination is a throw-in determination (step ST3
08), a routine for "atari" motion determination (step ST309) and pulling determination (step ST310) indicating a state where the fish is caught by the needle, and each of these routines determines each movement of the user. Finally, whether or not a fish has been caught, the type and size of the caught fish, and the like are determined (step ST311), and the score of the game is determined.

【0017】後半の処理Bの各ステップについて詳述す
る。先ず投げ入れ判定(ステップST308)では、竿
を振って針をポイントに投げ入れる動作に対して、検知
した投げ入れ動作の方向、大きさによって釣り場の何処
のポイントに針が落ちるかが決定される。また、竿を振
ったという動作に対して、針がポイントに着水するまで
の間にゲーム処理部12からの制御信号を受けたバイブ
レータ部13が振動することで、実際に竿を振ったよう
に擬似的にユーザ25に実感させる。決定されたポイン
トによって、釣れる魚の種類、大きさなど、ゲームの難
易度を決定する要素が変化する。どのポイントに針が落
ちるかは、図7に例示する参照テーブルによって決定さ
れる。この参照テーブルは、例えば、ポイントAは、水
深が深い為に大きな魚が多いとか、またポイントBは、
障害物があり、魚が釣りにくいなどの条件の変化を与
え、ゲームの難易度や結果を左右させるものである。
Each step of the latter process B will be described in detail. First, in the throwing-in determination (step ST308), with respect to the action of swinging the rod and throwing the needle to the point, the point of the fishing spot where the needle falls depends on the detected direction and size of the throwing-in action. In addition, in response to the motion of shaking the rod, the vibrator unit 13 that receives the control signal from the game processing unit 12 vibrates until the needle reaches the point, so that the rod is actually shaken. The user 25 is made to feel it in a pseudo manner. Depending on the determined points, the factors that determine the difficulty level of the game, such as the type and size of fish that can be caught, change. The point at which the needle falls is determined by the look-up table illustrated in FIG. In this reference table, for example, point A says that there are many large fish because the water depth is deep, and point B indicates that
There are obstacles and changes in conditions such as difficulty in catching fish, which affect the difficulty and results of the game.

【0018】針が落ちたポイントが参照テーブルによっ
て決定された後、処理は「アタリ」動作判定(ステップ
ST309)に移る。ここでは、ユーザが釣りを行う時
の魚を曳き寄せるために、釣り竿を細かく上下させる
「アワセ」動作、すなわち魚が針に食いつこうとする状
態で魚を針に引っ掛ける動作を動きベクトルから検知す
る。その動作の処理の流れを図8で説明する。ユーザが
「アワセ」動作をするにあたって発生する動きベクトル
が入力されると(ステップST81)、その動きベクト
ルの大きさVが所定の値a以上であるかの条件判定がな
される(ステップST82)。条件に適えば、魚が針に
引っかかったと判定される(ステップST83)。ま
た、ステップST83では、魚が針に引っかかったこと
に対して、バイブレータ部13を振動させることによっ
て、実際に魚が掛かったような感覚を生じさせる。魚が
引っ掛かるまではこの条件判定を行い、魚が引っ掛かっ
た後、処理は引き上げ判定(ステップST310)に移
る。
After the point at which the needle has fallen is determined by the reference table, the process proceeds to "atari" motion determination (step ST309). Here, in order to pull the fish when the user is fishing, the movement of the "awase" that raises and lowers the fishing rod finely, that is, the action of catching the fish on the needle when the fish tries to eat the needle is detected from the motion vector. To do. The process flow of the operation will be described with reference to FIG. When the motion vector generated when the user performs the “awase” motion is input (step ST81), it is determined whether or not the magnitude V of the motion vector is equal to or larger than a predetermined value a (step ST82). If the conditions are met, it is determined that the fish has caught the needle (step ST83). Further, in step ST83, when the fish is caught by the needle, the vibrator portion 13 is vibrated to generate a feeling that the fish is actually caught. This condition determination is performed until the fish is caught, and after the fish is caught, the process proceeds to the pulling determination (step ST310).

【0019】次に、引き上げ判定(ステップST31
0)において、ユーザが釣りを行う時に針に掛かった魚
を手元まで引き寄せるために行う引き上げ動作を動きベ
クトルから検知する。その動作処理の流れを図9で説明
する。ユーザが引き上げる動作を行う動きベクトルを画
像データから検知し、入力される(ステップST9
1)。その動きベクトルの大きさVが、一定の大きさb
以上になるかを判定する(ステップST92)。条件に
合った場合、糸が切れずに魚を引き上げ続ける。糸が切
れることなく、手繰り・引き上げ動作が連続的に行わ
れ、その引き上げ動作量の和、すなわち操作を行って糸
を巻き上げた量ΣVがある一定量Lを超えるかを判定す
る(ステップST93)。一定量Lを超えた場合、糸の
巻き上げを完了したこととし、ユーザは魚を釣り上げる
ことができる(ステップST94)。釣り上げることが
できた場合に、処理は次の釣果判定(図3、ステップS
T311)に移る。釣果判定(ステップST311)で
は、ステップST308の投げ入れ判定で決定された投
げ入れスポットなどの情報から、針にかかった魚の種
類、大きさなどを決定し画面表示部24に表示する。
Next, the pull-up determination (step ST31
In 0), the pulling operation performed for pulling the fish caught on the needle to the user's hand when fishing is detected from the motion vector. The flow of the operation processing will be described with reference to FIG. A motion vector for the user to pull up is detected from the image data and input (step ST9).
1). The magnitude V of the motion vector is constant b
It is determined whether or not the above (step ST92). If the conditions are met, keep pulling the fish without breaking the thread. The yarn is not broken, and the hand pulling / pulling operation is continuously performed, and it is determined whether the sum of the pulling operation amounts, that is, the amount ΣV of winding the thread by the operation exceeds a certain amount L (step ST93). . When the amount exceeds a certain amount L, it is determined that the winding of the thread has been completed, and the user can fish the fish (step ST94). If the fish can be caught, the process proceeds to the next determination of fishing result (FIG. 3, step S).
Move to T311). In the fishing result determination (step ST311), the type and size of the fish caught on the needle is determined from the information such as the throwing-in spot determined in the throwing-in determination in step ST308 and displayed on the screen display unit 24.

【0020】以上のように、この実施の形態1によれ
ば、人体の一部に装着または人体で保持される画像セン
サ部10を有し、画像センサ部10から得られる画像の
変化から人体の移動や動作によって生じる動きを動きベ
クトル算出部11により算出し、算出された動きベクト
ルを入力としてゲーム処理部12でゲームプログラムを
実行し、ゲーム処理部12がゲーム展開上の判定を行っ
た判定結果に基づいてバイブレータ部13を振動させて
人体に伝えるようにしたので、画像処理によって検出し
たユーザの動きからゲームの進行を行うことができ、そ
の進行に伴って様々なアクションから生ずる衝撃などの
情報を、バイブレータ部13を振動させることによって
発生させ、ゲーム展開を直感的に把握するトリガとして
体感できる効果が得られる。また、この実施の形態1で
は、携帯型ゲーム装置は文字や画像を表示する画面表示
部を備えており、ユーザにゲーム進行を文字や画像で知
らせることで、ゲームの展開をユーザに分かりやすく知
らせる効果が得られる。
As described above, according to the first embodiment, the image sensor unit 10 that is attached to or held by a part of the human body is provided, and the change of the image obtained from the image sensor unit 10 causes the change of the human body. The motion vector calculation unit 11 calculates the motion caused by the movement or motion, the game processing unit 12 executes the game program using the calculated motion vector as an input, and the game processing unit 12 makes a judgment on the game development. Since the vibrator unit 13 is vibrated and transmitted to the human body based on the above, it is possible to proceed with the game from the movement of the user detected by the image processing, and information such as shocks caused by various actions accompanying the progress. Is generated by vibrating the vibrator unit 13, and an effect that can be felt as a trigger for intuitively grasping the game development is obtained. It is. Further, in the first embodiment, the portable game device is provided with a screen display unit for displaying characters and images. By notifying the user of the progress of the game with characters and images, the user can easily understand the development of the game. The effect is obtained.

【0021】この発明の携帯型ゲーム装置は、この実施
の形態1に記載された釣りゲームに限らず、画像センサ
部10を取り付けた指揮棒を振ってその動きの速さを認
識し、リズムを早くもしくは遅くしたりすることで音楽
の変化を楽しんだり、あるいは指定のリズムを作り出し
て得点を競い合う音楽ゲームに適用できる。また、画像
センサ部10を取り付けたゴルフクラブを振って、ゴル
フボールを飛ばす動作を認識し、その動きの大きさや方
向によって、ボールの飛ぶ距離、方向を決定してゲーム
の進行を行うゴルフゲームなどにも適用できる。さら
に、画像センサ部10を携帯電話のような携帯端末が保
有する小型カメラで兼用し、ゲーム処理部を携帯端末に
内蔵することで、携帯端末を携帯型ゲーム装置として利
用できる効果が得られる。
The hand-held game apparatus of the present invention is not limited to the fishing game described in the first embodiment, and the baton to which the image sensor unit 10 is attached is swung to recognize the speed of the movement, and the rhythm is detected. It can be applied to music games where you can enjoy the change of music by making it faster or slower, or create a specified rhythm to compete for points. Also, a golf game in which a golf club attached with the image sensor unit 10 is shaken to recognize the action of flying a golf ball, and the flight distance and direction of the ball are determined according to the magnitude and direction of the action to progress the game, etc. Can also be applied to. Furthermore, by using the image sensor unit 10 as a small camera owned by a mobile terminal such as a mobile phone and incorporating the game processing unit in the mobile terminal, the mobile terminal can be used as a portable game device.

【0022】実施の形態2.実施の形態1では、携帯型
ゲーム装置が文字や画像を表示する画面表示部24を備
えているが、ゲームの展開を音でユーザに知らせること
のできる音出力部を備えるようにしてもよい。このこと
により、携帯型ゲーム装置がユーザから見えない体勢に
あっても、ゲーム展開を効果音などで分かりやすく知ら
せることができ、ゲームの進行を高める効果が得られ
る。
Embodiment 2. In the first embodiment, the portable game device includes the screen display unit 24 that displays characters and images, but may include a sound output unit that can notify the user of the development of the game by sound. As a result, even when the portable game device is in a position invisible to the user, it is possible to inform the user of the game development in an easy-to-understand manner by means of sound effects, etc., and an effect of enhancing the progress of the game can be obtained.

【0023】実施の形態3.また、ゲームの展開を光で
ユーザに知らせることのできる光表示部を備えるように
してもよい。このことにより、ユーザの目が携帯型ゲー
ム装置から離れている場合でもゲームの展開をユーザに
光で分かりやすく知らせることで、有効にゲームを進め
ることができる効果が得られる。
Embodiment 3. In addition, an optical display unit that can notify the user of the development of the game by light may be provided. As a result, even if the user's eyes are away from the portable game device, the user can be notified of the development of the game with light so that the game can be effectively advanced.

【0024】[0024]

【発明の効果】以上のように、この発明によれば、人体
の一部に装着または人体で保持され、撮像した画像デー
タを取り出す固体撮像素子を有する画像センサ部と、画
像センサ部から得られる時間的に連続する画像データか
ら射影値データを取得して動きベクトルを算出する動き
ベクトル算出部と、算出された動きベクトルを入力とし
てゲームプログラムを実行するゲーム処理部とを備える
ように構成したので、ユーザに装置もしくは保持した画
像センサ部から得られた画像データを用いてユーザの動
きを検知することで、大掛かりな設備を作ることなく低
コストで携帯型ゲーム装置を実現することができる効果
がある。
As described above, according to the present invention, an image sensor unit having a solid-state image sensor mounted on a part of the human body or held by the human body and taking out imaged image data can be obtained from the image sensor unit. Since it is configured to include a motion vector calculation unit that acquires projection value data from temporally continuous image data and calculates a motion vector, and a game processing unit that executes a game program using the calculated motion vector as an input. By detecting the movement of the user by using the image data obtained from the device or the image sensor unit held by the user, it is possible to realize a portable game device at low cost without making large-scale equipment. is there.

【0025】この発明によれば、画像センサ部を携帯端
末が保有する小型カメラとし、動きベクトル算出部とゲ
ーム処理部が携帯端末に内蔵されるように構成したの
で、携帯電話のような携帯端末を人体の動きを利用した
携帯型ゲーム装置として兼用できる効果がある。
According to the present invention, the image sensor unit is a small camera owned by the mobile terminal, and the motion vector calculation unit and the game processing unit are built in the mobile terminal. Therefore, the mobile terminal such as a mobile phone. There is an effect that can also be used as a portable game device using the movement of the human body.

【0026】この発明によれば、ゲーム処理部がゲーム
展開上の判定を行った判定結果に基づいてゲームの展開
を画面に文字や画像で表示する画面表示部を備えるよう
に構成したので、ゲームの展開をユーザに分かりやすく
知らせることができる効果がある。
According to the present invention, the game processing unit is configured to include the screen display unit for displaying the game development on the screen as characters or images based on the determination result of the game development determination. This has the effect of notifying the user of the expansion of the intelligibly.

【0027】この発明によれば、ゲーム処理部がゲーム
展開上の判定を行った判定結果に基づいてゲームの展開
を音で知らせる音出力部を備えるように構成したので、
ゲーム装置をユーザが見えない体勢にあっても、ゲーム
の展開を分かりやすく知らせることができる効果があ
る。
According to the present invention, the game processing section is provided with the sound output section for notifying the development of the game by the sound based on the result of the determination on the development of the game.
Even if the game device is in a position where the user cannot see it, there is an effect that the development of the game can be informed easily.

【0028】この発明によれば、ゲーム処理部がゲーム
展開上の判定を行った判定結果に基づいてゲームの展開
を光の点灯や点滅で知らせる光表示部を備えるように構
成したので、ユーザの目がゲーム装置から離れている場
合でもゲームの展開を分かりやすく知らせることができ
る効果がある。
According to the present invention, the game processing section is provided with the optical display section for notifying the development of the game by turning on or off the light of the game based on the result of the determination on the game development. Even when the eyes are away from the game device, it is possible to inform the development of the game in an easy-to-understand manner.

【0029】この発明によれば、ゲーム処理部がゲーム
展開上の判定を行った判定結果に基づいて人体に振動を
伝えるバイブレータ部を備えるように構成したので、ゲ
ーム内で生じる動作の衝撃などを発生させ、ゲーム展開
を直感的に把握する上の重要なトリガとしてユーザに体
感させる効果がある。
According to the present invention, the game processing section is provided with the vibrator section for transmitting the vibration to the human body based on the result of the judgment on the game development. It has an effect of causing the user to experience it as an important trigger for intuitively grasping the game development.

【図面の簡単な説明】[Brief description of drawings]

【図1】 この発明の実施の形態1による携帯型ゲーム
装置の構成を示すブロック図である。
FIG. 1 is a block diagram showing a configuration of a portable game device according to a first embodiment of the present invention.

【図2】 この発明の実施の形態1に係る携帯型釣りゲ
ーム装置の外観構成を示す説明図である。
FIG. 2 is an explanatory diagram showing an external configuration of a portable fishing game device according to Embodiment 1 of the present invention.

【図3】 この発明の実施の形態1に係る携帯型ゲーム
装置の動作手順を示すフローチャートである。
FIG. 3 is a flowchart showing an operation procedure of the portable game device according to the first embodiment of the present invention.

【図4】 この発明の実施の形態1に係る画像データか
ら得られる射影値データを示す説明図である。
FIG. 4 is an explanatory diagram showing projection value data obtained from image data according to the first embodiment of the present invention.

【図5】 この発明の実施の形態1に係る射影値データ
の差分算出の方法を示す説明図である。
FIG. 5 is an explanatory diagram showing a method of calculating a difference between projection value data according to the first embodiment of the present invention.

【図6】 この発明の実施の形態1に係る動きベクトル
の算出方法を示す説明図である。
FIG. 6 is an explanatory diagram showing a motion vector calculating method according to the first embodiment of the present invention.

【図7】 この発明の実施の形態1に係る針の投げ入れ
位置を決定するための参照テーブルを示す説明図であ
る。
FIG. 7 is an explanatory diagram showing a reference table for determining the throwing-in position of the needle according to the first embodiment of the present invention.

【図8】 この発明の実施の形態1に係る「アワセ」動
作から「あたり」を判定する手順を示すフローチャート
である。
FIG. 8 is a flowchart showing a procedure for determining a “hit” from an “awase” operation according to the first embodiment of the present invention.

【図9】 この発明の実施の形態1に係る魚を引き上げ
る動作を判定する手順を示すフローチャートである。
FIG. 9 is a flowchart showing a procedure for determining a fish-pulling operation according to the first embodiment of the present invention.

【符号の説明】[Explanation of symbols]

10 画像センサ部、11 動きベクトル算出部、12
ゲーム処理部、13バイブレータ部、21 スティッ
ク、22 携帯型釣りゲーム装置、24 画面表示部、
25 ユーザ。
10 image sensor unit, 11 motion vector calculation unit, 12
Game processing unit, 13 vibrator unit, 21 stick, 22 portable fishing game device, 24 screen display unit,
25 users.

───────────────────────────────────────────────────── フロントページの続き (72)発明者 坂口 隆明 東京都千代田区丸の内二丁目2番3号 三 菱電機株式会社内 (72)発明者 田中 健一 東京都千代田区丸の内二丁目2番3号 三 菱電機株式会社内 Fターム(参考) 2C001 AA03 BA05 BA06 BA07 BC05 BC06 BC09 CA09 CC01 CC06 CC08 CC09    ─────────────────────────────────────────────────── ─── Continued front page    (72) Inventor Takaaki Sakaguchi             2-3 2-3 Marunouchi, Chiyoda-ku, Tokyo             Inside Ryo Electric Co., Ltd. (72) Inventor Kenichi Tanaka             2-3 2-3 Marunouchi, Chiyoda-ku, Tokyo             Inside Ryo Electric Co., Ltd. F term (reference) 2C001 AA03 BA05 BA06 BA07 BC05                       BC06 BC09 CA09 CC01 CC06                       CC08 CC09

Claims (6)

【特許請求の範囲】[Claims] 【請求項1】 人体の一部に装着または人体で保持さ
れ、撮像した画像データを取り出す固体撮像素子を有す
る画像センサ部と、前記画像センサ部から得られる時間
的に連続する画像データから射影値データを取得して動
きベクトルを算出する動きベクトル算出部と、算出され
た動きベクトルを入力としてゲームプログラムを実行す
るゲーム処理部とを備えたことを特徴とする携帯型ゲー
ム装置。
1. A projection value based on an image sensor unit that is attached to or held by a part of a human body and has a solid-state image sensor for taking imaged image data, and temporally continuous image data obtained from the image sensor unit. A portable game device comprising: a motion vector calculation unit that acquires data and calculates a motion vector; and a game processing unit that executes a game program by using the calculated motion vector as an input.
【請求項2】 画像センサ部を携帯端末が保有する小型
カメラとし、動きベクトル算出部とゲーム処理部が前記
携帯端末に内蔵されるようにしたことを特徴とする請求
項1記載の携帯型ゲーム装置。
2. The portable game according to claim 1, wherein the image sensor unit is a small camera owned by the mobile terminal, and the motion vector calculation unit and the game processing unit are built in the mobile terminal. apparatus.
【請求項3】 ゲーム処理部がゲーム展開上の判定を行
った判定結果に基づいてゲームの展開を文字や画像で表
示する画面表示部を備えたことを特徴とする請求項1ま
たは請求項2記載の携帯型ゲーム装置。
3. The screen display unit for displaying the development of the game in characters or images based on the determination result obtained by the game processing unit in determining the development of the game. The portable game device described.
【請求項4】 ゲーム処理部がゲーム展開上の判定を行
った判定結果に基づいてゲームの展開を音で知らせる音
出力部を備えたことを特徴とする請求項1から請求項3
のうちのいずれか1項記載の携帯型ゲーム装置。
4. The sound output unit for notifying the development of the game by a sound based on the determination result obtained by the game processing unit performing the determination on the development of the game.
The portable game device according to claim 1.
【請求項5】 ゲーム処理部がゲーム展開上の判定を行
った判定結果に基づいてゲームの展開を光の点灯や点滅
で知らせる光表示部を備えたことを特徴とする請求項1
から請求項4のうちのいずれか1記載の携帯型ゲーム装
置。
5. The light display unit for notifying the development of the game by turning on or off the light of the game on the basis of the result of the determination made by the game processing unit on the development of the game.
5. The portable game device according to claim 4.
【請求項6】 ゲーム処理部がゲーム展開上の判定を行
った判定結果に基づいて人体に振動を伝えるバイブレー
タ部を備えたことを特徴とする請求項1から請求項5の
うちのいずれか1記載の携帯型ゲーム装置。
6. The vibrator according to claim 1, further comprising a vibrator for transmitting a vibration to a human body based on a result of the determination made by the game processing unit on the development of the game. The portable game device described.
JP2002081634A 2002-03-22 2002-03-22 Portable game device Pending JP2003275464A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2002081634A JP2003275464A (en) 2002-03-22 2002-03-22 Portable game device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2002081634A JP2003275464A (en) 2002-03-22 2002-03-22 Portable game device

Publications (1)

Publication Number Publication Date
JP2003275464A true JP2003275464A (en) 2003-09-30

Family

ID=29206603

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2002081634A Pending JP2003275464A (en) 2002-03-22 2002-03-22 Portable game device

Country Status (1)

Country Link
JP (1) JP2003275464A (en)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009536058A (en) * 2006-05-05 2009-10-08 ソニー コンピュータ エンタテインメント ヨーロッパ リミテッド Display device and method
EP2949371A1 (en) 2014-05-30 2015-12-02 Kazutoshi Obana Information processing system, information processing apparatus, information processing program, and information processing method
EP2965793A1 (en) 2014-07-09 2016-01-13 Kazutoshi Obana Vibration generation system, vibration generation apparatus, vibration signal generation program, and vibration generation method
US9606626B2 (en) 2014-06-10 2017-03-28 Nintendo Co., Ltd. Vibration generation system, storage medium having stored therein vibration generation program, and vibration generation method
US9906856B2 (en) 2014-12-26 2018-02-27 Nintendo Co., Ltd. Hand-held information processing apparatus
US10471346B2 (en) 2017-06-02 2019-11-12 Nintendo Co., Ltd. Information processing system, non-transitory storage medium having stored therein information processing program, information processing apparatus, and information processing method
US10596459B2 (en) 2017-06-05 2020-03-24 Nintendo Co., Ltd. Systems, methods, and/or computer readable storage medium having program, for localized haptic feedback based on position of virtual object
US10661163B2 (en) 2017-06-02 2020-05-26 Nintendo Co., Ltd. Video game with haptic signal that is disabled based on losing contact with a surface

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009536058A (en) * 2006-05-05 2009-10-08 ソニー コンピュータ エンタテインメント ヨーロッパ リミテッド Display device and method
EP2949371A1 (en) 2014-05-30 2015-12-02 Kazutoshi Obana Information processing system, information processing apparatus, information processing program, and information processing method
US10796540B2 (en) 2014-05-30 2020-10-06 Nintendo Co., Ltd. Information processing system, information processing apparatus, storage medium having stored therein information processing program, and information processing method
US9606626B2 (en) 2014-06-10 2017-03-28 Nintendo Co., Ltd. Vibration generation system, storage medium having stored therein vibration generation program, and vibration generation method
US10062247B2 (en) 2014-06-10 2018-08-28 Nintendo Co., Ltd. Vibration generation system, storage medium having stored therein vibration generation program, and vibration generation method
EP2965793A1 (en) 2014-07-09 2016-01-13 Kazutoshi Obana Vibration generation system, vibration generation apparatus, vibration signal generation program, and vibration generation method
US10319199B2 (en) 2014-07-09 2019-06-11 Nintendo Co., Ltd. Vibration generation system, vibration generation apparatus, storage medium having stored therein vibration signal generation program, and vibration generation method
US9906856B2 (en) 2014-12-26 2018-02-27 Nintendo Co., Ltd. Hand-held information processing apparatus
US10471346B2 (en) 2017-06-02 2019-11-12 Nintendo Co., Ltd. Information processing system, non-transitory storage medium having stored therein information processing program, information processing apparatus, and information processing method
US10661163B2 (en) 2017-06-02 2020-05-26 Nintendo Co., Ltd. Video game with haptic signal that is disabled based on losing contact with a surface
US10596459B2 (en) 2017-06-05 2020-03-24 Nintendo Co., Ltd. Systems, methods, and/or computer readable storage medium having program, for localized haptic feedback based on position of virtual object

Similar Documents

Publication Publication Date Title
US11484794B2 (en) Game device, control method, and non-transitory computer-readable medium
JP5131809B2 (en) GAME DEVICE AND GAME PROGRAM
JP3470071B2 (en) Fishing game equipment
US8317580B2 (en) Video game with latency compensation for delay caused by frame buffering
JP5177735B2 (en) GAME PROGRAM AND GAME DEVICE
WO1998039074A1 (en) Fishing game device
US20110172017A1 (en) Game machine, game program, and game machine control method
JP2008136694A (en) Program, information storage medium and game apparatus
JP2008228941A (en) Game device, progress control method and program
JP2006072667A (en) Image processor, game device, and image processing method
US11583759B2 (en) Information processing system, storage medium storing information processing program, information processing apparatus, and information processing method
JPWO2007077851A1 (en) Production method and operation
US10639545B2 (en) Game system, game program, information processing device, and information processing method
JP2003275464A (en) Portable game device
WO2020090223A1 (en) Information processing device, information processing method, and recording medium
JP3866474B2 (en) GAME DEVICE AND INFORMATION STORAGE MEDIUM
JP2002263229A (en) Game device recording game motion and game motion recording method
JP6651091B2 (en) Game system and computer program used therefor
JP6571701B2 (en) EXPERIENCE DEVICE AND METHOD
JP2001224732A (en) Game machine and information storage medium
JP5652046B2 (en) VIDEO GAME DEVICE, VIDEO GAME CONTROL METHOD, CONTROL PROGRAM, AND RECORDING MEDIUM
JP2001224731A (en) Game machine and information storage medium
JP7425813B2 (en) Information processing program, information processing device, information processing method, and information processing system
JP2019170964A (en) Program and game device
JP2012065833A (en) Game device, game control method, and program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20041116

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20051025

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20051226

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20060307

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20060627