JP2003240542A - Revolution detecting device and signal processing system - Google Patents

Revolution detecting device and signal processing system

Info

Publication number
JP2003240542A
JP2003240542A JP2002042331A JP2002042331A JP2003240542A JP 2003240542 A JP2003240542 A JP 2003240542A JP 2002042331 A JP2002042331 A JP 2002042331A JP 2002042331 A JP2002042331 A JP 2002042331A JP 2003240542 A JP2003240542 A JP 2003240542A
Authority
JP
Japan
Prior art keywords
rotation
sensor
detected
axis
movable mounting
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2002042331A
Other languages
Japanese (ja)
Other versions
JP3940896B2 (en
Inventor
Yuji Yamada
裕司 山田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Priority to JP2002042331A priority Critical patent/JP3940896B2/en
Publication of JP2003240542A publication Critical patent/JP2003240542A/en
Application granted granted Critical
Publication of JP3940896B2 publication Critical patent/JP3940896B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Classifications

    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/10Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals
    • A63F2300/105Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals using inertial sensors, e.g. accelerometers, gyroscopes

Abstract

<P>PROBLEM TO BE SOLVED: To accurately detect a revolution of an object to be detected around a plurality of axes normal to each other by disposing only one sensor that detects the revolution around one axis. <P>SOLUTION: A movable mounting section 24 is formed on one of holding pieces 22 of a sensor mounting body 20 by which a controller (an object to be detected) 51 is sandwiched, and a revolution detecting sensor 10 such as an angular velocity sensor or the like is pivotally mounted on the movable mounting section 24. When the revolution detecting sensor 10 is vertically raised, the revolution of the controller 51 around the X-axis can be detected with a maximum accuracy. When the revolution detecting sensor 10 is inclined through 90°, the revolution of the controller 51 around the Z-axis can be detected with the maximum accuracy. The detection is also realized by making up a revolution detecting device with the movable mounting section 24 and the revolution detecting sensor 10 without disposing the sensor mounting body 20 that holds the object to be detected, and by mounting the movable mounting section 24 on a headphone or a head mountable display by using adhesive or a double- sided adhesive tape. <P>COPYRIGHT: (C)2003,JPO

Description

【発明の詳細な説明】Detailed Description of the Invention

【0001】[0001]

【発明の属する技術分野】この発明は、テレビゲーム機
のコントローラ、音声再生用ヘッドホンまたは頭部装着
型ディスプレイなどの被検出物の回転、すなわち角速度
(回転角速度)、回転角度(回転変位)または角加速度
(回転角加速度)を検出する装置、および回転検出装置
を用いた信号処理システムに関する。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to rotation of an object to be detected such as a controller of a video game machine, headphone for voice reproduction or head-mounted display, that is, angular velocity (rotational angular velocity), rotation angle (rotational displacement) or angle. The present invention relates to a device for detecting acceleration (rotational angular acceleration) and a signal processing system using the rotation detection device.

【0002】[0002]

【従来の技術】被検出物の回転を検出して信号処理を制
御することは、様々な分野で考えられている。
2. Description of the Related Art Detection of rotation of an object to be detected to control signal processing has been considered in various fields.

【0003】例えば、テレビゲーム機では、従来は、ゲ
ームプレーヤが、ゲーム機のコントローラ(操作入力
部)に設けられたボタンを手で操作して、ゲーム上の対
象物を操作することが一般的であったが、最近は、ゲー
ムの臨場感や仮想現実感を増大させるために、様々なコ
ントローラが用いられている。
For example, in a video game machine, conventionally, a game player generally operates a target object in a game by manually operating a button provided on a controller (operation input section) of the game machine. However, recently, various controllers are used in order to increase the realism and virtual reality of the game.

【0004】その一つとして、例えば、コントローラ内
にコントローラの回転を検出するセンサを組み込むこと
によって、ゲーム機本体においてコントローラの回転を
検出し、ゲームプレーヤがコントローラを車のハンドル
のように左右に回転させたとき、ゲーム上で車の移動方
向を制御し、またはコントローラを上下に回転させたと
き、ゲーム上でゴルフショットの飛距離を制御するな
ど、ゲーム内容をインタラクティブに制御することが考
えられる。
As one of them, for example, by incorporating a sensor for detecting the rotation of the controller in the controller, the rotation of the controller is detected in the main body of the game machine, and the game player rotates the controller left and right like a steering wheel of a car. It is conceivable to interactively control the game contents, such as controlling the moving direction of the car in the game, or controlling the moving distance of the golf shot in the game when the controller is rotated up and down.

【0005】また、音声を再生する装置で、リスナがヘ
ッドホンによって音声を聴取する場合、音源の音声信号
による音像がリスナの頭の中に定位して、音が頭の中か
ら聞こえ、ゲーム機などのように映像および音声を再生
する装置では、映像中の音源と実際に聞こえてくる音像
位置が一致しなくなって、きわめて不自然な音場再生ま
たは音像定位となる。
Further, in a device which reproduces sound, when the listener listens to the sound through headphones, a sound image due to the sound signal of the sound source is localized in the listener's head, and the sound is heard from the inside of the head. In a device that reproduces video and audio as described above, the sound source in the video and the sound image position actually heard do not match, resulting in extremely unnatural sound field reproduction or sound image localization.

【0006】そこで、ヘッドホンによって音声を聴取す
る場合に、図11に示すように、あらかじめ、仮想音源
5の位置からリスナ3の左右の耳3L,3Rに至る伝達
関数HL,HRを測定または計算しておき、音源のデジ
タル音声信号を、この伝達関数HL,HRを時間軸上に
変換したインパルス応答を畳み込むデジタルフィルタに
よってフィルタリングした後、アナログ音声信号に変換
して、ヘッドホン1の左右の音響変換器1L,1Rに供
給することによって、リスナ頭外の仮想音源5の位置、
例えば表示される映像中の音源の位置に、音像を定位さ
せることが考えられている。
Therefore, when listening to a voice through headphones, as shown in FIG. 11, transfer functions HL and HR from the position of the virtual sound source 5 to the left and right ears 3L and 3R of the listener 3 are measured or calculated in advance. The digital audio signal of the sound source is filtered by a digital filter that convolves the impulse response obtained by converting the transfer functions HL and HR on the time axis, and then converted into an analog audio signal to produce the left and right acoustic transducers of the headphones 1. By supplying 1L and 1R, the position of the virtual sound source 5 outside the listener's head,
For example, it has been considered to localize the sound image at the position of the sound source in the displayed video.

【0007】さらに、この場合、ヘッドホン1のヘッド
バンド1aなどに角速度センサ9を取り付けて、リスナ
頭部が矢印Axで示すように左右に回転したとき、角速
度センサ9の出力の角速度検出信号を積分して、リスナ
頭部の回転角度を検出し、仮想音源5の方位を基準方位
としたときのリスナ頭部の方位を検出して、その検出結
果に応じて上記の伝達関数HL,HRを補正するように
音声信号をリアルタイムで処理することによって、リス
ナ3がいずれの方向に向いても、リスナ頭外の仮想音源
5の位置、例えば表示される映像中の音源の位置に、音
像を定位させることが考えられる。
Further, in this case, when the angular velocity sensor 9 is attached to the headband 1a of the headphone 1 and the listener's head rotates left and right as shown by the arrow Ax, the angular velocity detection signal output from the angular velocity sensor 9 is integrated. Then, the rotation angle of the listener's head is detected, the orientation of the listener's head when the orientation of the virtual sound source 5 is used as the reference orientation, and the transfer functions HL, HR are corrected according to the detection result. As described above, by processing the audio signal in real time, the sound image is localized at the position of the virtual sound source 5 outside the listener's head, for example, the position of the sound source in the displayed image, regardless of the direction of the listener 3. It is possible.

【0008】[0008]

【発明が解決しようとする課題】しかしながら、上述し
たように、ゲーム機の図10に示すようなコントローラ
51に回転検出センサを組み込んで、コントローラ51
の回転を検出する場合、XYZ3次元空間において、回
転検出センサの被検出軸に沿う軸の周り、例えばX軸の
周り(X軸に垂直なX平面内)の、矢印Axで示す方向
の回転を検出することはできるが、これに垂直な他の軸
の周り、例えばY軸の回り(Y軸に垂直なY平面内)お
よびZ軸の周り(Z軸に垂直なZ平面内)の、矢印Ay
およびAzで示す方向の回転を検出することはできな
い。
However, as described above, the rotation detecting sensor is incorporated in the controller 51 of the game machine as shown in FIG.
When detecting the rotation of, the rotation in the direction indicated by the arrow Ax around the axis along the detected axis of the rotation detection sensor, for example, around the X axis (in the X plane perpendicular to the X axis) in the XYZ three-dimensional space. Arrows about other axes that can be detected but are perpendicular to it, eg around the Y axis (in the Y plane perpendicular to the Y axis) and around the Z axis (in the Z plane perpendicular to the Z axis). Ay
It is not possible to detect rotation in the directions indicated by and Az.

【0009】そのため、上述したように、一方でコント
ローラ51を左右に回転させてゲーム上で車の移動方向
を制御し、他方でコントローラ51を上下に回転させて
ゲーム上でゴルフショットの飛距離を制御する、という
ような、複数方向の回転を検出してゲーム内容を制御す
ることはできない。
Therefore, as described above, the controller 51 is rotated left and right to control the moving direction of the car in the game, and the controller 51 is rotated up and down to increase the flight distance of the golf shot in the game. It is not possible to control the game contents by detecting rotations in a plurality of directions such as controlling.

【0010】もっとも、2つまたは3つの回転検出セン
サを、それぞれの被検出軸を互いに直交させるように配
置すれば、X,Y,Z軸中の2つまたは3つの軸の周り
の回転を検出することができる。しかし、そうすると、
回転検出装置が大型化するとともに、回転検出装置のコ
ストアップを来たす。
However, if the two or three rotation detecting sensors are arranged so that the respective detected axes are orthogonal to each other, the rotation around the two or three axes in the X, Y and Z axes can be detected. can do. But then
The rotation detecting device becomes larger and the cost of the rotation detecting device increases.

【0011】図11に示したように、ヘッドホン1に角
速度センサ9を取り付けて、リスナ頭部の回転を検出
し、その検出結果に応じて音声信号を処理する場合に
も、ヘッドホン1の装着状態(傾き)や角速度センサ9
の取付状態(傾き)などによっては、リスナ頭部の回転
を精度よく検出することができない。
As shown in FIG. 11, when the angular velocity sensor 9 is attached to the headphone 1 to detect the rotation of the listener's head and the audio signal is processed according to the detection result, the wearing state of the headphone 1 is also checked. (Tilt) and angular velocity sensor 9
The rotation of the listener's head cannot be accurately detected depending on the mounting state (tilt) of the.

【0012】そこで、この発明は、一つの軸の周りの回
転を検出するセンサを一つ設けるだけで、直交する複数
の軸の周りの被検出物の回転を精度よく検出することが
でき、回転検出装置の小型化および低コスト化を実現す
ることができるようにしたものである。
Therefore, according to the present invention, the rotation of an object to be detected around a plurality of orthogonal axes can be accurately detected by providing only one sensor for detecting the rotation around one axis. The detection device can be downsized and the cost can be reduced.

【0013】[0013]

【課題を解決するための手段】この発明の回転検出装置
は、被検出物の回転を検出する回転検出センサと、この
回転検出センサの被検出軸を所定角度範囲内で傾斜させ
ることができるように、この回転検出センサを支持した
可動取付部と、を備えるものとする。
According to the rotation detecting device of the present invention, the rotation detecting sensor for detecting the rotation of the object to be detected and the detected shaft of the rotation detecting sensor can be tilted within a predetermined angle range. And a movable mounting portion supporting the rotation detecting sensor.

【0014】この場合、可動取付部は、被検出物を挟持
するセンサ取付体に、一体に設けられたもの、または回
動可能に取り付けられたものとし、あるいは、被検出物
に、一体に設けられたもの、または回動可能に取り付け
られたものとすることができる。
In this case, the movable mounting portion is provided integrally with or rotatably attached to the sensor mounting body that holds the object to be detected, or is integrally provided to the object to be detected. It can be mounted or rotatably mounted.

【0015】上記のように構成した、この発明の回転検
出装置では、センサの被検出軸をXYZ3次元空間にお
いてX軸方向にしたときには、X軸の周りの被検出物の
回転を最大精度で検出することができ、センサを可動取
付部に対して回動させてセンサの被検出軸をY軸方向ま
たはZ軸方向にしたときには、Y軸またはZ軸の周りの
被検出物の回転を最大精度で検出することができる。
In the rotation detecting device of the present invention configured as described above, when the detected axis of the sensor is set to the X-axis direction in the XYZ three-dimensional space, the rotation of the detected object around the X-axis is detected with maximum accuracy. When the sensor is rotated with respect to the movable mounting portion so that the detection axis of the sensor is in the Y-axis direction or the Z-axis direction, the rotation of the detection object around the Y-axis or the Z-axis has the maximum accuracy. Can be detected with.

【0016】[0016]

【発明の実施の形態】〔回転検出装置の実施形態:図1
〜図9〕図1(A)(B)は、この発明の回転検出装置
の第1の例を示し、(B)は可動取付部の部分における
断面図である。
DESCRIPTION OF THE PREFERRED EMBODIMENTS [Embodiment of Rotation Detection Device: FIG. 1
9] FIGS. 1 (A) and 1 (B) show a first example of the rotation detecting device of the present invention, and FIG. 9 (B) is a sectional view of a movable mounting portion.

【0017】この例の回転検出装置では、後述するゲー
ム機のコントローラ、音声再生用ヘッドホン、頭部装着
型ディスプレイなどの、被検出物を挟持するセンサ取付
体20に、可動取付部24が一体に形成され、その可動
取付部24に回転検出センサ10が回動可能に取り付け
られる。
In the rotation detecting device of this example, the movable mounting portion 24 is integrally formed with the sensor mounting body 20 for sandwiching an object to be detected, such as a controller of a game machine, a headphone for voice reproduction, and a head mounted display which will be described later. The rotation detection sensor 10 is rotatably attached to the movable attachment portion 24.

【0018】センサ取付体20は、それぞれ先端部の内
面に歯形21aおよび22aが形成された一対の挟持片
21および22が軸23によって一体化され、図では省
略したバネによって挟持片21,22間に被検出物を挟
持するクリップ状のものとされる。
In the sensor mounting body 20, a pair of holding pieces 21 and 22 each having toothed portions 21a and 22a formed on the inner surfaces of the tip ends are integrated by a shaft 23, and a spring (not shown) is provided between the holding pieces 21 and 22. It has a clip shape for holding the object to be detected.

【0019】可動取付部24は、半球状のものとして一
方の挟持片22に一体に形成され、その中央部に、挟持
片21,22の長手方向に延長する溝部25が形成され
る。
The movable mounting portion 24 is formed in a hemispherical shape integrally with one holding piece 22, and a groove portion 25 extending in the longitudinal direction of the holding pieces 21 and 22 is formed at the center thereof.

【0020】回転検出センサ10は、一端側に軸部12
および軸先端部13が形成され、その軸先端部13が可
動取付部24の溝部25に挿入されて、軸26によって
可動取付部24に回動可能に取り付けられる。ただし、
軸先端部13は、容易に揺動しないように可動取付部2
4に挟持される。
The rotation detecting sensor 10 has a shaft portion 12 on one end side.
The shaft tip portion 13 is formed, and the shaft tip portion 13 is inserted into the groove portion 25 of the movable mounting portion 24 and is rotatably attached to the movable mounting portion 24 by the shaft 26. However,
The shaft tip portion 13 has a movable mounting portion 2 so as not to swing easily.
It is sandwiched by 4.

【0021】回転検出センサ10は、被検出軸11とし
て示す軸の周りの回転を検出するものであり、例えば、
圧電振動ジャイロなどの角速度センサである。回転検出
センサ10には、出力の検出信号を取り出すコード19
が接続される。
The rotation detecting sensor 10 detects the rotation around the axis shown as the detected shaft 11, for example,
An angular velocity sensor such as a piezoelectric vibration gyro. The rotation detection sensor 10 has a code 19 for extracting an output detection signal.
Are connected.

【0022】以上のような回転検出装置で、センサ取付
体20によって被検出物を挟持した状態で、図示するよ
うに回転検出センサ10をセンサ取付体20に対して垂
直に立てたときには、図1(B)の上下方向の軸の周り
の被検出物の回転を最大精度で検出することができる。
In the rotation detecting device as described above, when the rotation detecting sensor 10 is erected vertically with respect to the sensor mounting body 20 as shown in the drawing with the object to be detected sandwiched by the sensor mounting body 20, as shown in FIG. The rotation of the object to be detected around the vertical axis of (B) can be detected with maximum accuracy.

【0023】この状態から、回転検出センサ10を可動
取付部24の溝部25に沿って、矢印14または15で
示すように前方側または後方側に90°傾倒させると、
図1(B)の左右方向の軸の周りの被検出物の回転を最
大精度で検出することができる。
From this state, when the rotation detecting sensor 10 is tilted by 90 ° to the front side or the rear side along the groove 25 of the movable mounting portion 24 as shown by the arrow 14 or 15,
The rotation of the object to be detected around the horizontal axis in FIG. 1B can be detected with maximum accuracy.

【0024】図2は、図1の例の回転検出装置をテレビ
ゲーム機のコントローラに用いた場合を示す。この例で
は、センサ取付体20でコントローラ51の中央部を挟
むように、回転検出装置をコントローラ51に取り付け
る。
FIG. 2 shows a case where the rotation detecting device of the example of FIG. 1 is used for a controller of a video game machine. In this example, the rotation detection device is attached to the controller 51 such that the central portion of the controller 51 is sandwiched between the sensor attachments 20.

【0025】この例では、図示するように回転検出セン
サ10を垂直に立てたときには、X軸の周りのコントロ
ーラ51の回転を最大精度で検出することができ、矢印
14または15で示すように回転検出センサ10を前方
側または後方側に90°傾倒させたときには、Z軸の周
りのコントローラ51の回転を最大精度で検出すること
ができる。
In this example, when the rotation detection sensor 10 is set upright as shown in the drawing, the rotation of the controller 51 around the X axis can be detected with the maximum accuracy, and the rotation can be detected as indicated by the arrow 14 or 15. When the detection sensor 10 is tilted forward or backward by 90 °, the rotation of the controller 51 around the Z axis can be detected with maximum accuracy.

【0026】また、可動取付部24の溝部25を挟持片
21,22の長手方向に直角の方向に延長させて形成し
て、回転検出センサ10を90°傾倒させると、あるい
は、図示するように可動取付部24の溝部25を挟持片
21,22の長手方向に延長させて形成して、コントロ
ーラ51の形状によって可能であれば、回転検出装置を
図示する方向に対して直角の方向からコントローラ51
に取り付けて、回転検出センサ10を90°傾倒させる
と、Y軸の周りのコントローラ51の回転を最大精度で
検出することができる。
If the groove 25 of the movable mounting portion 24 is formed to extend in a direction perpendicular to the longitudinal direction of the sandwiching pieces 21 and 22, and the rotation detecting sensor 10 is tilted 90 °, or as shown in the figure. If the groove portion 25 of the movable mounting portion 24 is formed to extend in the longitudinal direction of the sandwiching pieces 21 and 22, and if the shape of the controller 51 allows it, the rotation detecting device is changed from the direction perpendicular to the illustrated direction to the controller 51.
When the rotation detection sensor 10 is tilted by 90 °, the rotation of the controller 51 around the Y axis can be detected with maximum accuracy.

【0027】図3に、この発明の回転検出装置の第2の
例を示す。この例では、図1および図2に示したような
センサ取付体20を設けず、回転検出装置を可動取付部
24および回転検出センサ10によって構成し、接着剤
や両面接着テープなどによって、可動取付部24をヘッ
ドホン1のヘッドバンド1aに取り付ける。
FIG. 3 shows a second example of the rotation detecting device of the present invention. In this example, the sensor mounting body 20 as shown in FIGS. 1 and 2 is not provided, and the rotation detecting device is configured by the movable mounting portion 24 and the rotation detecting sensor 10, and is movable mounted by an adhesive or a double-sided adhesive tape. The part 24 is attached to the headband 1 a of the headphone 1.

【0028】この例では、図示するように回転検出セン
サ10を垂直に立てたときには、X軸の周りのヘッドホ
ン1(リスナ頭部)の回転を最大精度で検出することが
でき、矢印14または15で示すように回転検出センサ
10を前方側または後方側に、図4に示すように90°
傾倒させたときには、Z軸の周りのヘッドホン1(リス
ナ頭部)の回転を最大精度で検出することができる。
In this example, when the rotation detecting sensor 10 is set upright as shown in the drawing, the rotation of the headphones 1 (listener head) around the X axis can be detected with maximum accuracy, and the arrow 14 or 15 can be detected. As shown in FIG. 4, the rotation detection sensor 10 is moved to the front side or the rear side, and as shown in FIG.
When tilted, the rotation of the headphones 1 (listener head) around the Z axis can be detected with maximum accuracy.

【0029】また、溝部25の延長方向をヘッドバンド
1aの左右方向にして可動取付部24をヘッドバンド1
aに取れ付けて、回転検出センサ10を90°傾倒させ
ると、Y軸の周りのヘッドホン1(リスナ頭部)の回転
を最大精度で検出することができる。
The movable mounting portion 24 is attached to the headband 1 by extending the groove portion 25 in the left-right direction of the headband 1a.
When the rotation detection sensor 10 is tilted by 90 ° after being attached to a, the rotation of the headphones 1 (listener head) around the Y axis can be detected with maximum accuracy.

【0030】図1および図2に示した例の、クリップ状
のセンサ取付体20を備える回転検出装置を、そのセン
サ取付体20でヘッドバンド1aを挟むようにヘッドホ
ン1に取り付けて、ヘッドホン1(リスナ頭部)の回転
を検出することもできる。
The rotation detecting device having the clip-shaped sensor mounting body 20 of the example shown in FIGS. 1 and 2 is mounted on the headphone 1 so that the headband 1a is sandwiched between the sensor mounting body 20 and the headphone 1 ( The rotation of the listener's head) can also be detected.

【0031】また、図5に示すように、ヘッドホン1
が、いわゆるストリートタイプのものである場合には、
図示するように、図3および図4に示した例の、可動取
付部24および回転検出センサ10からなる回転検出装
置を、ヘッドホン1のネックバンド1cに取り付けて、
あるいは、図1および図2に示した例の、クリップ状の
センサ取付体20を備える回転検出装置を、そのセンサ
取付体20でネックバンド1cを挟むようにヘッドホン
1に取り付けて、ヘッドホン1(リスナ頭部)の回転を
検出することができる。
Also, as shown in FIG.
Is a so-called street type,
As shown in the drawing, the rotation detecting device including the movable mounting portion 24 and the rotation detecting sensor 10 of the example shown in FIGS. 3 and 4 is attached to the neckband 1c of the headphone 1,
Alternatively, the rotation detecting device including the clip-shaped sensor mounting body 20 of the example shown in FIGS. 1 and 2 is mounted on the headphone 1 so that the neck band 1c is sandwiched between the sensor mounting body 20 and the headphone 1 (listener). The rotation of the head can be detected.

【0032】さらに、図6に示すように、図3および図
4に示した例の、可動取付部24および回転検出センサ
10からなる回転検出装置を、頭部装着型ディスプレイ
30に取り付けて、頭部装着型ディスプレイ30(使用
者頭部)の回転を検出することができる。
Further, as shown in FIG. 6, the rotation detecting device including the movable mounting portion 24 and the rotation detecting sensor 10 of the example shown in FIGS. The rotation of the component-mounted display 30 (the user's head) can be detected.

【0033】頭部装着型ディスプレイ30は、使用者4
の眼前に位置する本体部31と、これを使用者4の耳に
掛けるアーム部32Lおよび32Rとからなり、本体部
31に液晶パネルなどの映像表示部35Lおよび35R
が設けられるもので、例えば、その本体部31の中央部
に回転検出装置を取り付ける。
The head-mounted display 30 is used by the user 4
Body portion 31 located in front of the eyes of the user, and arm portions 32L and 32R for hanging the body portion 31 on the user's 4 ear.
Is provided, and for example, the rotation detecting device is attached to the central portion of the main body 31 thereof.

【0034】これによって、後述するように、使用者4
は、頭部装着型ディスプレイ30を装着した状態で、矢
印Axで示すように左右の方向に向いても、正面の固定
された位置に映像が表示されているように映像を見るこ
とができる。
As a result, the user 4
With the head-mounted display 30, the image can be viewed as if the image is displayed at a fixed position on the front even when facing the left and right directions as indicated by the arrow Ax.

【0035】図1および図2に示した例の、クリップ状
のセンサ取付体20を備える回転検出装置を、そのセン
サ取付体20で本体部31あるいはアーム部32Lまた
は32Rを挟むように頭部装着型ディスプレイ30に取
り付けて、頭部装着型ディスプレイ30(使用者頭部)
の回転を検出することもできる。
The rotation detecting device having the clip-shaped sensor mounting body 20 of the example shown in FIGS. 1 and 2 is mounted on the head so that the body 31 or the arm 32L or 32R is sandwiched by the sensor mounting 20. Head mounted display 30 (user's head)
It is also possible to detect the rotation of.

【0036】図3および図4に示した例のように、回転
検出装置を可動取付部24および回転検出センサ10に
よって構成する場合、図7に示すように、可動取付部2
4を軸27によって、ヘッドバンド1aや図5に示した
ネックバンド1cなどの被検出物に回動可能に取り付け
るように構成することもでき、これによれば、回転検出
センサ10を任意の回動位置で傾倒させることができ
る。
When the rotation detecting device is constituted by the movable mounting portion 24 and the rotation detecting sensor 10 as in the example shown in FIGS. 3 and 4, the movable mounting portion 2 is arranged as shown in FIG.
4 can be rotatably attached to an object to be detected such as the headband 1a or the neckband 1c shown in FIG. 5 by the shaft 27. According to this, the rotation detection sensor 10 can be rotated at any time. Can be tilted in the moving position.

【0037】図1および図2に示した例のように、回転
検出装置をクリップ状のセンサ取付体20を備えるもの
として構成する場合にも、可動取付部24を、挟持片2
2に一体に形成しないで、挟持片22に回動可能に取り
付けてもよい。
Even when the rotation detecting device is configured to have the clip-shaped sensor mounting body 20 as in the example shown in FIGS. 1 and 2, the movable mounting portion 24 is fixed to the holding piece 2.
Instead of being integrally formed with the second member 2, it may be rotatably attached to the holding piece 22.

【0038】また、図8(A)に示すように、可動取付
部24の溝部25を十字状に形成して、回転検出センサ
10を4方向の位置で傾倒させることができるように構
成し、あるいは、同図(B)に示すように、回転検出セ
ンサ10の軸先端部13を球状に形成し、可動取付部2
4の溝部25を半球面状に形成して、回転検出センサ1
0を任意の回動位置で傾倒させることができるように構
成することもできる。
Further, as shown in FIG. 8A, the groove 25 of the movable mounting portion 24 is formed in a cross shape so that the rotation detecting sensor 10 can be tilted at four positions. Alternatively, as shown in FIG. 1B, the shaft tip portion 13 of the rotation detection sensor 10 is formed in a spherical shape, and the movable mounting portion 2 is provided.
The groove 25 of No. 4 is formed in a hemispherical shape, and the rotation detecting sensor 1
The zero can be tilted at any rotation position.

【0039】この場合、回転検出センサ10を90°傾
倒させることができなくても、図2〜図4に示したよう
なY軸およびZ軸の周りの被検出物の回転を精度よく検
出することができる。
In this case, even if the rotation detecting sensor 10 cannot be tilted by 90 °, the rotation of the object to be detected around the Y axis and the Z axis as shown in FIGS. 2 to 4 can be accurately detected. be able to.

【0040】以上のように、この発明によれば、一つの
軸の周りの回転を検出するセンサを一つ設けるだけで、
直交する複数の軸の周りの被検出物の回転を精度よく検
出することができ、回転検出装置の小型化および低コス
ト化を実現することができる。
As described above, according to the present invention, by providing only one sensor for detecting the rotation around one axis,
The rotation of the object to be detected around a plurality of orthogonal axes can be accurately detected, and the rotation detection device can be downsized and reduced in cost.

【0041】〔信号処理システムの実施形態:図9〕図
9は、この発明の回転検出装置を用いた信号処理システ
ムの一例を示し、ゲームシステムにおいて、リスナ(ゲ
ームプレーヤ)がヘッドホンによって音声を聴取する場
合に、図11で示したように、リスナがいずれの方向に
向いても、リスナ頭外の表示される映像中の音源の位置
に音像を定位させるものである。
[Embodiment of Signal Processing System: FIG. 9] FIG. 9 shows an example of a signal processing system using the rotation detection device of the present invention. In the game system, a listener (game player) listens to sound through headphones. In this case, as shown in FIG. 11, the sound image is localized at the position of the sound source in the displayed image outside the listener's head regardless of the direction of the listener.

【0042】そのため、図9のシステムでは、ヘッドホ
ン1に、図3および図4に示したような、可動取付部2
4および回転検出センサ10からなる回転検出装置を取
り付け、または図1および図2に示したような、クリッ
プ状のセンサ取付体20を備える回転検出装置を取り付
ける。この場合の回転検出センサ10は、圧電振動ジャ
イロなどの角速度センサ9である。
Therefore, in the system of FIG. 9, the headphone 1 is provided with the movable mounting portion 2 as shown in FIGS. 3 and 4.
4 and the rotation detection sensor 10 are attached, or the rotation detection device including the clip-shaped sensor attachment body 20 as shown in FIGS. 1 and 2 is attached. The rotation detection sensor 10 in this case is an angular velocity sensor 9 such as a piezoelectric vibration gyro.

【0043】ゲームシステムとしては、ゲーム機本体4
0、コントローラ51、DVDなどのゲーム記録媒体5
3、およびモニタ用のテレビ受信機80を備える。テレ
ビ受信機80は、ディスプレイ81を備え、その左右に
スピーカ82および83を備える。
As the game system, the game machine body 4
0, controller 51, game recording medium 5 such as DVD
3 and a television receiver 80 for monitoring. The television receiver 80 includes a display 81 and speakers 82 and 83 on the left and right of the display 81.

【0044】ゲーム機本体40は、システム全体を制御
するCPU41を備え、そのバス42には、メインメモ
リ43、描画エンジンを備える描画処理部44、ゲーム
画像が展開されるVRAM45、このVRAM45を制
御してテレビ受信機80に映像信号を送出する表示制御
部46、コントローラ51からの操作入力信号をバス4
2に取り込むインタフェース47、およびゲーム記録媒
体53からのゲーム内容の映像信号および音声信号をバ
ス42に取り込むインタフェース48が接続される。
The game machine body 40 has a CPU 41 for controlling the entire system, and a bus 42 for controlling the main memory 43, a drawing processing section 44 having a drawing engine, a VRAM 45 for expanding a game image, and the VRAM 45. The operation input signal from the display control unit 46 and the controller 51, which sends a video signal to the television receiver 80 by the bus 4
2 is connected to the interface 47, and an interface 48 for capturing the video signal and the audio signal of the game content from the game recording medium 53 to the bus 42 is connected.

【0045】さらに、ゲーム機本体40では、バス42
に得られた音源のデジタル音声信号を、DSP(Dig
ital Signal Processor)によっ
て構成された音声処理部61において、デジタルフィル
タ63および64によって、図11で示したように、音
像を定位させる位置からリスナ3の左耳3Lおよび右耳
3Rに至る伝達関数HLおよびHRを時間軸上に変換し
たインパルス応答を畳み込むようにフィルタリングした
後、D/Aコンバータ65および66によってアナログ
音声信号に変換し、その変換後の音声信号を、音声増幅
回路67および68によって増幅して、ヘッドホン1の
左右の音響変換器1Lおよび1Rに供給する。
Further, in the game machine body 40, the bus 42
The digital audio signal of the sound source obtained in
As shown in FIG. 11, in the audio processing unit 61 configured by the digital signal processor, the transfer functions HL from the position where the sound image is localized to the left ear 3L and the right ear 3R of the listener 3 are set by the digital filters 63 and 64. And HR are filtered so as to convolve the impulse response converted on the time axis, converted into analog audio signals by D / A converters 65 and 66, and the converted audio signals are amplified by audio amplification circuits 67 and 68. Then, the sound is supplied to the left and right acoustic transducers 1L and 1R of the headphone 1.

【0046】さらに、このシステムでは、角速度センサ
9の出力の角速度検出信号を、ゲーム機本体40に取り
込んで、A/Dコンバータ79によってデジタル検出信
号に変換し、その変換後の検出信号を、検出処理部71
において、ローパスフィルタ72によってフィルタリン
グして、検出信号中のノイズ成分を除去し、さらに積分
回路73によって積分して、リスナ頭部の回転角度を検
出し、音像を定位させる位置の方位を基準方位としたと
きのリスナ頭部の方位を検出して、その検出結果に応じ
て上記の伝達関数HLおよびHRを補正するように、音
声処理部61において音源のデジタル音声信号をリアル
タイムで処理する。
Further, in this system, the angular velocity detection signal output from the angular velocity sensor 9 is taken into the game machine main body 40, converted into a digital detection signal by the A / D converter 79, and the converted detection signal is detected. Processing unit 71
In, the low-pass filter 72 filters to remove the noise component in the detection signal, and the integration circuit 73 further integrates it to detect the rotation angle of the listener's head, and the orientation of the position at which the sound image is localized is set as the reference orientation. The azimuth of the listener's head at that time is detected, and the digital audio signal of the sound source is processed in real time in the audio processing unit 61 so as to correct the transfer functions HL and HR according to the detection result.

【0047】これによって、リスナがいずれの方向に向
いても、リスナ頭外の表示される映像中の音源の位置に
音像を定位させることができる。
As a result, no matter which direction the listener faces, the sound image can be localized at the position of the sound source in the displayed image outside the listener's head.

【0048】音源のデジタル音声信号がステレオ音声信
号である場合には、音声処理部61において、左チャネ
ルの第1および第2のデジタルフィルタによって、左チ
ャネルの音声信号を、その音像を定位させる位置からリ
スナの左耳および右耳に至る伝達関数HLLおよびHL
Rを時間軸上に変換したインパルス応答を畳み込むよう
にフィルタリングし、右チャネルの第1および第2のデ
ジタルフィルタによって、右チャネルの音声信号を、そ
の音像を定位させる位置からリスナの左耳および右耳に
至る伝達関数HRLおよびHRRを時間軸上に変換した
インパルス応答を畳み込むようにフィルタリングした
後、左右のチャネルの第1のデジタルフィルタの出力の
音声信号を加算し、左右のチャネルの第2のデジタルフ
ィルタの出力の音声信号を加算する。
When the digital audio signal of the sound source is a stereo audio signal, the audio processing unit 61 uses the first and second digital filters of the left channel to position the sound image of the audio signal of the left channel. To Listener left and right ear transfer functions HLL and HL
The impulse response obtained by converting R on the time axis is filtered so as to be convoluted, and the first and second digital filters of the right channel cause the right channel audio signal to be located from the position where the sound image is localized to the left and right ears of the listener. After filtering so as to convolve the impulse response obtained by converting the transfer functions HRL and HRR reaching the ear on the time axis, the audio signals of the outputs of the first digital filters of the left and right channels are added, and the second and left channels of the left and right channels are added. Add the audio signals at the output of the digital filter.

【0049】さらに、このシステムでは、上記のように
ゲーム機本体40の検出処理部71でプレーヤ頭部の回
転を検出することによって、プレーヤ頭部の動きをゲー
ム内容に反映させることもできる。
Further, in this system, the movement of the player's head can be reflected in the game contents by detecting the rotation of the player's head in the detection processing section 71 of the game machine body 40 as described above.

【0050】例えば、図3に示したように回転検出セン
サ10を垂直に立てた場合には、プレーヤが頭部をX軸
の周りに回転させたとき、その動きに応じてゲームの映
像内容を変え、図4に示したように回転検出センサ10
を傾倒させた場合には、プレーヤがゲーム上の飛来物を
避けるように頭部や上体を左右に傾けたとき(Z軸の周
りに回転させたとき)、その動きに応じて飛来物のコー
スを変更する、などの映像処理を行うことができる。
For example, when the rotation detecting sensor 10 is set upright as shown in FIG. 3, when the player rotates his / her head around the X axis, the image contents of the game are displayed in accordance with the movement. Instead, as shown in FIG. 4, the rotation detection sensor 10
When the player tilts the head or upper body to the left or right to avoid flying objects in the game (rotating around the Z axis), the flying objects are moved according to the movement. Video processing such as changing courses can be performed.

【0051】図6に示したように、頭部装着型ディスプ
レイ30に回転検出装置を取り付ける場合には、2系統
のデジタル映像信号を、それぞれ、画像メモリに書き込
み、画像メモリから読み出して、アナログ映像信号に変
換して、映像表示部35Lおよび35Rに供給するとと
もに、回転検出センサ10からの検出信号によって、映
像信号の画像メモリへの書き込み、および画像メモリか
らの読み出しを制御して、映像表示部35Lおよび35
Rに表示される映像を、それぞれの表示画面上で左右方
向に移動させることによって、使用者4は、頭部装着型
ディスプレイ30を装着した状態で、左右の方向に向い
ても、正面の固定された位置に映像が表示されているよ
うに映像を見ることができる。
As shown in FIG. 6, when the rotation detecting device is attached to the head-mounted display 30, two systems of digital video signals are written in the image memory and read out from the image memory to obtain an analog image. The signal is converted into a signal and supplied to the video display units 35L and 35R, and the detection signal from the rotation detection sensor 10 controls writing and reading of the video signal to and from the image memory to control the video display unit. 35L and 35
By moving the images displayed on R in the left-right direction on the respective display screens, the user 4 can fix the front face even when facing the left-right direction with the head-mounted display 30 attached. The image can be viewed as if it was displayed at the specified position.

【0052】また、図2に示したようにコントローラ5
1に回転検出装置を取り付ける場合には、図9に示した
ようなゲーム機本体40において、回転検出センサ10
の出力によってコントローラ51の回転を検出すること
によって、ゲームプレーヤがコントローラ51を車のハ
ンドルのように左右に回転させたとき、ゲーム上で車の
移動方向を制御し、コントローラ51を上下に回転させ
たとき、ゲーム上でゴルフショットの飛距離を制御する
など、ゲーム内容をインタラクティブに制御することが
できる。
Further, as shown in FIG.
When the rotation detecting device is attached to the rotation detecting device 1, the rotation detecting sensor 10 in the game machine main body 40 as shown in FIG.
By detecting the rotation of the controller 51 by the output of the controller 51, when the game player rotates the controller 51 left and right like a steering wheel of a car, the direction of movement of the car is controlled in the game and the controller 51 is rotated up and down. At this time, the game content can be interactively controlled such as controlling the flight distance of the golf shot in the game.

【0053】[0053]

【発明の効果】上述したように、この発明によれば、一
つの軸の周りの回転を検出するセンサを一つ設けるだけ
で、直交する複数の軸の周りの被検出物の回転を精度よ
く検出することができ、回転検出装置の小型化および低
コスト化を実現することができる。
As described above, according to the present invention, it is possible to accurately rotate a detected object around a plurality of orthogonal axes by providing only one sensor for detecting the rotation around one axis. The rotation detection device can be detected, and the rotation detection device can be downsized and reduced in cost.

【0054】したがって、ヘッドホンによって音声を聴
取する場合に、リスナがいずれの方向に向いても、リス
ナ頭外の所定位置に音像を定位させることができる音声
再生システム、使用者がいずれの方向に向いても、正面
の固定された位置に映像が表示されているように映像を
見ることができる頭部装着型ディスプレイシステム、ま
たはゲームプレーヤの動きに応じてゲーム内容を変更制
御することができるゲームシステムなどを、低コストで
確実に実現することができる。
Therefore, when listening to the sound through the headphones, no matter which direction the listener is facing, a sound reproducing system capable of localizing a sound image at a predetermined position outside the listener's head, and which direction the user faces In addition, a head-mounted display system capable of viewing an image as if the image is being displayed at a fixed position on the front, or a game system capable of changing and controlling the game content according to the movement of a game player And the like can be reliably realized at low cost.

【図面の簡単な説明】[Brief description of drawings]

【図1】この発明の回転検出装置の第1の例を示す図で
ある。
FIG. 1 is a diagram showing a first example of a rotation detection device of the present invention.

【図2】図1の回転検出装置の使用例を示す図である。FIG. 2 is a diagram showing an example of use of the rotation detection device of FIG.

【図3】この発明の回転検出装置の第2の例を示す図で
ある。
FIG. 3 is a diagram showing a second example of the rotation detection device of the present invention.

【図4】図3の回転検出装置の使用例を示す図である。FIG. 4 is a diagram showing an example of use of the rotation detection device of FIG.

【図5】図3の回転検出装置の他の使用例を示す図であ
る。
FIG. 5 is a diagram showing another example of use of the rotation detection device of FIG.

【図6】図3の回転検出装置の他の使用例を示す図であ
る。
FIG. 6 is a diagram showing another example of use of the rotation detection device of FIG.

【図7】この発明の回転検出装置の他の例を示す図であ
る。
FIG. 7 is a diagram showing another example of the rotation detection device of the present invention.

【図8】この発明の回転検出装置の他の例を示す図であ
る。
FIG. 8 is a diagram showing another example of the rotation detection device of the present invention.

【図9】この発明の回転検出装置を用いた信号処理シス
テムの一例を示す図である。
FIG. 9 is a diagram showing an example of a signal processing system using the rotation detection device of the present invention.

【図10】ゲーム機のコントローラの操作の説明に供す
る図である。
FIG. 10 is a diagram for explaining the operation of the controller of the game machine.

【図11】ヘッドホンにより音声を聴取する場合の音像
定位の説明に供する図である。
FIG. 11 is a diagram for explaining sound image localization in the case of listening to sound with headphones.

【符号の説明】[Explanation of symbols]

主要部については図中に全て記述したので、ここでは省
略する。
Since the main parts are all described in the figure, they are omitted here.

───────────────────────────────────────────────────── フロントページの続き Fターム(参考) 2C001 AA09 BA02 BC01 CA01 CA06 CB01 CB04 CB06 CC02 2F069 AA83 BB40 DD20 DD27 GG11 GG41 MM04 5B087 AA07 BC12 BC13 BC19 BC26 BC31 DD03 5D062 AA74 AA75    ─────────────────────────────────────────────────── ─── Continued front page    F term (reference) 2C001 AA09 BA02 BC01 CA01 CA06                       CB01 CB04 CB06 CC02                 2F069 AA83 BB40 DD20 DD27 GG11                       GG41 MM04                 5B087 AA07 BC12 BC13 BC19 BC26                       BC31 DD03                 5D062 AA74 AA75

Claims (7)

【特許請求の範囲】[Claims] 【請求項1】被検出物の回転を検出する回転検出センサ
と、 この回転検出センサの被検出軸を所定角度範囲内で傾斜
させることができるように、この回転検出センサを支持
した可動取付部と、 を備える回転検出装置。
1. A rotation detecting sensor for detecting rotation of an object to be detected, and a movable mounting portion supporting the rotation detecting sensor so that a shaft to be detected of the rotation detecting sensor can be tilted within a predetermined angle range. And a rotation detection device including.
【請求項2】請求項1の回転検出装置において、 前記可動取付部が、被検出物を挟持するセンサ取付体に
一体に設けられた回転検出装置。
2. The rotation detecting device according to claim 1, wherein the movable mounting portion is provided integrally with a sensor mounting body that holds an object to be detected.
【請求項3】請求項1の回転検出装置において、 前記可動取付部が、被検出物を挟持するセンサ取付体に
回動可能に取り付けられた回転検出装置。
3. The rotation detection device according to claim 1, wherein the movable attachment portion is rotatably attached to a sensor attachment body that holds an object to be detected.
【請求項4】請求項1の回転検出装置において、 前記可動取付部が、被検出物に一体に設けられた回転検
出装置。
4. The rotation detecting device according to claim 1, wherein the movable mounting portion is provided integrally with the object to be detected.
【請求項5】請求項1の回転検出装置において、 前記可動取付部が、被検出物に回動可能に取り付けられ
た回転検出装置。
5. The rotation detecting device according to claim 1, wherein the movable attachment portion is rotatably attached to an object to be detected.
【請求項6】請求項1〜5のいずれかの回転検出装置に
おいて、 前記回転検出センサが角速度センサである回転検出装
置。
6. The rotation detecting device according to claim 1, wherein the rotation detecting sensor is an angular velocity sensor.
【請求項7】請求項1〜6のいずれかの回転検出装置
と、 この回転検出装置の前記回転検出センサの出力検出信号
に応じて信号処理を制御する信号処理装置と、 を備える信号処理システム。
7. A signal processing system comprising: the rotation detection device according to claim 1; and a signal processing device that controls signal processing in accordance with an output detection signal of the rotation detection sensor of the rotation detection device. .
JP2002042331A 2002-02-19 2002-02-19 Rotation detection device, controller device, headphone device, and signal processing system Expired - Fee Related JP3940896B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2002042331A JP3940896B2 (en) 2002-02-19 2002-02-19 Rotation detection device, controller device, headphone device, and signal processing system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2002042331A JP3940896B2 (en) 2002-02-19 2002-02-19 Rotation detection device, controller device, headphone device, and signal processing system

Publications (2)

Publication Number Publication Date
JP2003240542A true JP2003240542A (en) 2003-08-27
JP3940896B2 JP3940896B2 (en) 2007-07-04

Family

ID=27782479

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2002042331A Expired - Fee Related JP3940896B2 (en) 2002-02-19 2002-02-19 Rotation detection device, controller device, headphone device, and signal processing system

Country Status (1)

Country Link
JP (1) JP3940896B2 (en)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2006088221A1 (en) * 2005-02-17 2006-08-24 Ssd Company Limited Game apparatus and controller
JP2010115450A (en) * 2008-11-14 2010-05-27 Sony Computer Entertainment Inc Operation device
US8330716B2 (en) 2008-12-18 2012-12-11 Seiko Epson Corporation Input device and data processing system
US8614670B2 (en) 2008-12-18 2013-12-24 Seiko Epson Corporation Input device and data processing system
WO2016032124A1 (en) * 2014-08-26 2016-03-03 Samsung Electronics Co., Ltd. Rotary device and electronic device having the same

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2006088221A1 (en) * 2005-02-17 2006-08-24 Ssd Company Limited Game apparatus and controller
JP2010115450A (en) * 2008-11-14 2010-05-27 Sony Computer Entertainment Inc Operation device
US8330716B2 (en) 2008-12-18 2012-12-11 Seiko Epson Corporation Input device and data processing system
US8614670B2 (en) 2008-12-18 2013-12-24 Seiko Epson Corporation Input device and data processing system
WO2016032124A1 (en) * 2014-08-26 2016-03-03 Samsung Electronics Co., Ltd. Rotary device and electronic device having the same
US9684335B2 (en) 2014-08-26 2017-06-20 Samsung Electronics Co., Ltd. Rotary device and electronic device having the same

Also Published As

Publication number Publication date
JP3940896B2 (en) 2007-07-04

Similar Documents

Publication Publication Date Title
US8472653B2 (en) Sound processing apparatus, sound image localized position adjustment method, video processing apparatus, and video processing method
JP3687099B2 (en) Video signal and audio signal playback device
JP3796776B2 (en) Video / audio playback device
CN102318374B (en) Head tracking, system and an audio reproduction system
JP2004085476A (en) Head tracking method and device
EP2700907B1 (en) Acoustic Navigation Method
US7817806B2 (en) Sound pickup method and apparatus, sound pickup and reproduction method, and sound reproduction apparatus
US8644531B2 (en) Information processing system and information processing method
KR102230645B1 (en) Virtual reality, augmented reality and mixed reality systems with spatialized audio
US20180220253A1 (en) Differential headtracking apparatus
US20120207308A1 (en) Interactive sound playback device
JPH089490A (en) Reproducing device for audio acompanied with video
JP4737804B2 (en) Audio signal processing apparatus and signal processing apparatus
WO2004021699A1 (en) Head mount image display system device and image processing method thereof
JPH08191419A (en) Head mount display system
JPH08107600A (en) Sound image localization device
JP2003240542A (en) Revolution detecting device and signal processing system
JP3918911B2 (en) Rotation angle detection device, audio playback device, and head-mounted display device
JP2550832B2 (en) Virtual reality generator
JP3433513B2 (en) Headphone device with rotation angle detection function
WO2023058162A1 (en) Audio augmented reality object playback device and audio augmented reality object playback method
JP2893779B2 (en) Headphone equipment
CN112558302B (en) Intelligent glasses for determining glasses posture and signal processing method thereof
JPH089498A (en) Stereo sound reproducing device
US20230012555A1 (en) Sound output control device, sound output system, sound output control method, and computer-readable storage medium

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20041222

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20061108

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20070109

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20070307

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20070320

LAPS Cancellation because of no payment of annual fees