JPH11232488A - Three-dimensional virtual space system - Google Patents
Three-dimensional virtual space systemInfo
- Publication number
- JPH11232488A JPH11232488A JP10034385A JP3438598A JPH11232488A JP H11232488 A JPH11232488 A JP H11232488A JP 10034385 A JP10034385 A JP 10034385A JP 3438598 A JP3438598 A JP 3438598A JP H11232488 A JPH11232488 A JP H11232488A
- Authority
- JP
- Japan
- Prior art keywords
- virtual space
- sound
- character
- information
- background sound
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Abstract
Description
【０００１】[0001]
【発明の属する技術分野】本発明は、仮想的に作られた
３次元の空間内で、例えば、３次元画像や音を提供する
３次元仮想空間システムに関するものである。BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a three-dimensional virtual space system for providing, for example, three-dimensional images and sounds in a virtual three-dimensional space.
【０００２】[0002]
【従来の技術】従来より、計算機上で実現した３次元仮
想空間の中で、使用者に対して文字情報等を提示する様
々な方式が提案されてきた。例えば、特開平９−１６８
１０は、３次元仮想空間における文字情報の表示方式を
開示しており、また、例えば、特開平８−１０６４３５
は、３次元仮想空間における音声信号の供給方式を提案
するものである。2. Description of the Related Art Conventionally, various methods have been proposed for presenting character information and the like to a user in a three-dimensional virtual space realized on a computer. For example, JP-A-9-168
Reference 10 discloses a method for displaying character information in a three-dimensional virtual space.
Proposes a method for supplying an audio signal in a three-dimensional virtual space.
【０００３】これらの従来技術の内、特開平９−１６８
１０に係るコンピュータシステムは、メモリ内に、ユー
ザに提示すべき文字をテクスチャとして貼り付けるため
の文字用物体を含む物体データを保持し、このメモリと
データのやり取りをするＣＰＵ内には、ユーザの視線を
決定する視線決定部、上記メモリ内の文字用の板状物体
を、この視線決定部で決定された視線ベクトルに基づい
て移動し、物体データを更新する座標変換部、テクスチ
ャを物体データに貼り付けるための貼り付け部、そし
て、３次元画像を生成するレンダリング部が設けられて
いる。このＣＰＵには、ユーザからの指示を受ける入力
装置と、ユーザへ画像を表示するための出力装置が接続
されている。[0003] Of these prior arts, Japanese Patent Application Laid-Open No. 9-168
The computer system according to No. 10 holds, in a memory, object data including a character object for pasting a character to be presented to a user as a texture, and a CPU that exchanges data with the memory stores a user's data. A line-of-sight determination unit that determines the line of sight, a plate-shaped object for characters in the memory is moved based on the line-of-sight vector determined by the line-of-sight determination unit, a coordinate conversion unit that updates the object data, and the texture is converted to object data. A pasting unit for pasting and a rendering unit for generating a three-dimensional image are provided. The CPU is connected to an input device for receiving an instruction from the user and an output device for displaying an image to the user.
【０００４】このような構成を有する、特開平９−１６
８１０に係るコンピュータシステムでは、ユーザの視線
方向に対応させて、文字が貼り付けられた３次元の板状
物体の方向を変更することで、３次元仮想空間内の文字
情報の視認性を高めている。[0004] Japanese Patent Application Laid-Open No. 9-16 / 1994 having such a configuration.
In the computer system according to 810, the visibility of the character information in the three-dimensional virtual space is improved by changing the direction of the three-dimensional plate-like object on which the character is pasted, in accordance with the direction of the user's line of sight. I have.
【０００５】一方、特開平８−１０６４３５に係るサイ
バースペースシステムは、３次元の仮想現実空間内の物
体、その物体を説明する音声情報、その音声情報を再生
するために用いる、文字を伴うアイコンを備えており、
ユーザが希望する物体に関してのみ、そのアイコンを選
択することで、その物体に関連する音声情報の再生を行
うことができる。On the other hand, a cyberspace system according to Japanese Patent Application Laid-Open No. 8-106435 discloses an object in a three-dimensional virtual reality space, audio information describing the object, and an icon with characters used for reproducing the audio information. Equipped,
By selecting the icon only for the object desired by the user, audio information related to the object can be reproduced.
【０００６】[0006]
【発明が解決しようとする課題】しかしながら、上記特
開平９−１６８１０に開示された方法では、３次元仮想
空間内に文字情報を置く場合、２次元の文字を貼り付け
るための３次元の板状物体を必要とすると同時に、テク
スチャを変化させることができない。また、３次元仮想
空間内の音と文字を関連付けることができない、という
問題がある。However, according to the method disclosed in Japanese Patent Application Laid-Open No. 9-16810, when character information is placed in a three-dimensional virtual space, a three-dimensional plate for attaching two-dimensional characters is used. The texture cannot be changed while the object is needed. In addition, there is a problem that characters in the three-dimensional virtual space cannot be associated with characters.
【０００７】また、特開平８−１０６４３５に係るシス
テムでは、ユーザに提供されるのは、音の再生に限られ
るため、３次元空間内の音を他の形態、例えば視覚的に
表現することが難しい。Further, in the system according to Japanese Patent Application Laid-Open No. 8-106435, the user is provided only with sound reproduction, so that the sound in the three-dimensional space can be expressed in another form, for example, visually. difficult.
【０００８】すなわち、上記従来の３次元仮想空間に係
るシステムには、３次元仮想空間内に設定された音を、 （１）文字情報として表示できない （２）再生するか、視覚化するかの選択ができない （３）その音量に対応した３次元文字として表示できな
い （４）３次元文字として表示する際、各文字をそれぞれ
の音量に対応した大きさで表示できない （５）３次元文字として表示する際、音源から文字がせ
り出してくるように表現できない （６）その音の長さに対応して変形することができない （７）その音の区分に対応する色や字体で表示できない （８）その音の種類に基づいて、ユーザが設定した文字
列や字体で、３次元仮想空間内に表示できない という問題がある。[0008] That is, in the system related to the conventional three-dimensional virtual space, the sound set in the three-dimensional virtual space can be (1) cannot be displayed as character information, (2) whether to reproduce or visualize the sound. Cannot be selected (3) Cannot be displayed as three-dimensional characters corresponding to the volume (4) When displayed as three-dimensional characters, each character cannot be displayed in a size corresponding to the respective volume (5) Displayed as three-dimensional characters (6) cannot be deformed according to the length of the sound (7) cannot be displayed in a color or font corresponding to the classification of the sound (8) There is a problem that character strings and fonts set by the user cannot be displayed in the three-dimensional virtual space based on the type of the sound.
【０００９】本発明は、上述の課題に鑑みてなされたも
ので、その目的とするところは、３次元仮想空間内にお
いて、音の再生と、それに対応させて、３次元の文字列
を表示すると同時に、音の各種属性を３次元の文字に反
映させる３次元仮想空間システムを提供することであ
る。また、本発明の目的とするところは、特に聴覚に障
害を持つ人に、容易に背景音情報を伝達することができ
る３次元仮想空間システムを提供することである。SUMMARY OF THE INVENTION The present invention has been made in view of the above-mentioned problems, and an object of the present invention is to reproduce a sound and display a three-dimensional character string in correspondence with the sound in a three-dimensional virtual space. At the same time, it is an object of the present invention to provide a three-dimensional virtual space system that reflects various attributes of sound on three-dimensional characters. It is another object of the present invention to provide a three-dimensional virtual space system that can easily transmit background sound information to a person who has a hearing impairment.
【００１０】[0010]
【課題を解決するための手段】上記の目的を達成するた
め、第１の発明は、仮想的に作られた３次元の仮想空間
に３次元画像を提供する３次元仮想空間システムにおい
て、上記仮想空間に提供する背景音の属性として音源位
置情報、音データ、文字情報を格納する手段と、上記音
源位置情報と音データに基づいて、上記仮想空間の音源
位置に上記背景音を再生する手段と、上記音源位置情報
と文字情報に基づいて、この文字情報を３次元の文字列
として視覚化処理する処理手段と、上記視覚化された文
字列を、上記仮想空間内の音源位置に可視表示する表示
手段とを備える３次元仮想空間システムを提供する。According to a first aspect of the present invention, there is provided a three-dimensional virtual space system for providing a three-dimensional image to a virtually created three-dimensional virtual space. Means for storing sound source position information, sound data, and character information as attributes of the background sound to be provided to the space; and means for reproducing the background sound at a sound source position in the virtual space based on the sound source position information and the sound data. Processing means for visualizing the character information as a three-dimensional character string based on the sound source position information and the character information; and visually displaying the visualized character string at the sound source position in the virtual space. A three-dimensional virtual space system including a display unit.
【００１１】第２の発明に係る３次元仮想空間システム
は、第１の発明においてさらに、上記背景音の再生、あ
るいは上記文字列の可視表示のいずれかを選択する手段
を備える。A three-dimensional virtual space system according to a second aspect of the present invention further comprises a means for selecting either the reproduction of the background sound or the visual display of the character string in the first aspect.
【００１２】第３の発明に係る３次元仮想空間システム
は、第１の発明において、上記背景音の属性には、さら
にその背景音の音量情報が含まれ、上記処理手段は、上
記視覚化処理の際、この音量情報に基づいて上記文字列
の拡大あるいは縮小を行う。また、第４の発明は、この
第３の発明において、上記音量情報が上記文字列の各文
字に対応しており、上記処理手段は、上記視覚化処理の
際、この対応に基づいて上記各文字の拡大あるいは縮小
を行う３次元仮想空間システムを提供する。In a three-dimensional virtual space system according to a third aspect, in the first aspect, the attribute of the background sound further includes volume information of the background sound, and the processing means performs the visualization processing. At this time, the character string is enlarged or reduced based on the volume information. In a fourth aspect based on the third aspect, the volume information corresponds to each character of the character string, and the processing means performs the above-mentioned processing based on the correspondence at the time of the visualization processing. A three-dimensional virtual space system for enlarging or reducing characters is provided.
【００１３】第５の発明に係る３次元仮想空間システム
は、第１の発明において、上記処理手段が、上記視覚化
処理の際、上記文字列に所定の視覚効果を奏するための
表示効果情報を生成し、上記表示手段は、この表示効果
情報に従って、上記仮想空間内の音源位置から所定位置
まで、上記文字列を連続的に徐々に拡大して表示する。[0013] In a three-dimensional virtual space system according to a fifth aspect, in the first aspect, the processing means may include display effect information for providing a predetermined visual effect to the character string during the visualization process. In accordance with the display effect information, the display means continuously and gradually expands and displays the character string from a sound source position in the virtual space to a predetermined position.
【００１４】また、第６の発明に係る３次元仮想空間シ
ステムは、この第５の発明において、上記背景音の属性
には、その背景音の音長情報が含まれ、上記処理手段
は、この音長情報に基づいて上記表示効果情報を生成
し、また、上記表示手段は、上記文字列が、この表示効
果情報の示す音長に合致した奥行きを有するように表示
する。Further, in the three-dimensional virtual space system according to a sixth aspect, in the fifth aspect, the attribute of the background sound includes information on a duration of the background sound. The display effect information is generated based on the sound length information, and the display means displays the character string so as to have a depth matching the sound length indicated by the display effect information.
【００１５】第７の発明に係る３次元仮想空間システム
は、第１の発明において、上記背景音の属性にはさら
に、その背景音の区分が含まれ、上記処理手段は、この
区分に基づいて上記文字列の各文字の色および字体が変
化するよう、この文字列を視覚化する。In a three-dimensional virtual space system according to a seventh aspect, in the first aspect, the attribute of the background sound further includes a category of the background sound, and the processing means performs processing based on the category. This character string is visualized so that the color and font of each character in the character string change.
【００１６】そして、第８の発明に係る３次元仮想空間
システムは、第１の発明において、上記背景音の属性に
は、その背景音の種類が含まれ、上記処理手段は、この
種類に対応した背景音文字に上記視覚化処理を施す。好
ましくは、この背景音文字は、所定のデータべースに登
録されており、上記処理手段は、このデータベースより
選択された文字列および字体を用いて前記視覚化処理を
行う。According to an eighth aspect of the present invention, in the three-dimensional virtual space system according to the first aspect, the attribute of the background sound includes a type of the background sound, and the processing means corresponds to the type. The above visualization processing is performed on the background sound character. Preferably, the background sound character is registered in a predetermined database, and the processing means performs the visualization process using a character string and a font selected from the database.
【００１７】[0017]
【発明の実施の形態】以下、添付図面を参照して、本発
明に係る実施の形態を詳細に説明する。 実施の形態１．図１は、本発明の実施の形態１に係る３
次元仮想空間システムの構成を示すブロック図である。
同図に示す３次元仮想空間システム１００において、ア
プリケーション部１は、情報の表示を行う仮想空間表示
装置２と、音の再生を行う音再生装置３とからなり、３
次元仮想空間内の情報を利用者に提供する。Embodiments of the present invention will be described below in detail with reference to the accompanying drawings. Embodiment 1 FIG. FIG. 1 is a diagram showing a third embodiment according to the first embodiment of the present invention.
It is a block diagram showing composition of a three-dimensional virtual space system.
In a three-dimensional virtual space system 100 shown in FIG. 1, an application unit 1 includes a virtual space display device 2 for displaying information and a sound reproduction device 3 for reproducing sound.
Provide information in the three-dimensional virtual space to the user.
【００１８】また、仮想空間管理部４は、３次元仮想空
間のデータをアプリケーション部１へ提供するもので、
３次元仮想空間データの管理および保持を行う３次元仮
想空間データ管理装置５と、３次元仮想空間データ管理
装置５内にある背景音属性データ６に基づいて、アプリ
ケーション部１へ伝達する背景音情報を管理する背景音
管理装置７とからなる。なお、３次元仮想空間データ管
理装置５内の背景音属性データ６は、３次元仮想空間内
で再生等が行われる背景音の属性を記述した属性データ
である。The virtual space management unit 4 provides data of a three-dimensional virtual space to the application unit 1.
The three-dimensional virtual space data management device 5 for managing and holding the three-dimensional virtual space data, and the background sound information to be transmitted to the application unit 1 based on the background sound attribute data 6 in the three-dimensional virtual space data management device 5 And a background sound management device 7 for managing the background sound. The background sound attribute data 6 in the three-dimensional virtual space data management device 5 is attribute data that describes the attribute of the background sound to be reproduced in the three-dimensional virtual space.
【００１９】また、図２は、図１の３次元仮想空間デー
タ管理装置５内の背景音属性データ６に記述される属性
の一例を示しており、その属性として、ここでは、背景
音名称、音源位置、音データ、そして、文字情報が記述
されている。FIG. 2 shows an example of attributes described in the background sound attribute data 6 in the three-dimensional virtual space data management device 5 in FIG. 1. The attributes include a background sound name, The sound source position, sound data, and character information are described.
【００２０】以下、本実施の形態に係る３次元仮想空間
システムにおける処理動作について説明する。図３は、
本実施の形態に係る３次元仮想空間システムの処理動作
を示すフローチャートである。同図に示すステップＳ１
０１では、図１の背景音管理装置７が、３次元仮想空間
データ管理装置５から、図２に示す属性を有する背景音
属性データ６を獲得し、そこに記述された背景音の音デ
ータの所在（ここでは、背景音名称「Ｂｏｍｂ」と音デ
ータ「ｂｏｍｂ．ｄａｔａ」）、音源位置（ここでは、
３次元座標「−５０，２００，１５０」）を背景音情報
として、アプリケーション部１内の音再生装置３へ伝達
する。Hereinafter, the processing operation in the three-dimensional virtual space system according to the present embodiment will be described. FIG.
5 is a flowchart illustrating a processing operation of the three-dimensional virtual space system according to the present embodiment. Step S1 shown in FIG.
At 01, the background sound management device 7 of FIG. 1 acquires the background sound attribute data 6 having the attribute shown in FIG. 2 from the three-dimensional virtual space data management device 5, and obtains the sound data of the background sound described therein. The location (here, the background sound name “Bomb” and the sound data “bomb.data”), the sound source position (here,
The three-dimensional coordinates “−50, 200, 150”) are transmitted to the sound reproducing device 3 in the application unit 1 as background sound information.
【００２１】背景音管理装置７は、さらに、この背景音
属性データ６に記述された文字情報「ｂｏｍｂ！」を獲
得し（ステップＳ１０２）、上記の音源位置「−５０，
２００，１５０」に基づいて、その位置に上記の文字情
報を３次元の文字列として表示するための情報を生成す
る（ステップＳ１０３）。そして、背景音管理装置７
は、ステップＳ１０３で生成した情報を、アプリケーシ
ョン部１内の仮想空間表示装置２へ送る（ステップＳ１
０４）。The background sound management device 7 further obtains the character information "bomb!" Described in the background sound attribute data 6 (step S102), and obtains the sound source position "-50,
Based on “200, 150”, information for displaying the character information at that position as a three-dimensional character string is generated (step S103). And the background sound management device 7
Sends the information generated in step S103 to the virtual space display device 2 in the application unit 1 (step S1).
04).
【００２２】以上の処理が行われると、ステップＳ１０
５で、音再生装置３は、背景音管理装置７より伝達され
た背景音情報をもとに、所定の３次元空間位置において
音の再生を行う。同時に仮想空間表示装置２は、同じく
背景音管理装置７より伝達された表示情報から、上記の
音源位置に３次元の文字列を表示する。When the above processing is performed, step S10
At 5, the sound reproduction device 3 reproduces sound at a predetermined three-dimensional space position based on the background sound information transmitted from the background sound management device 7. At the same time, the virtual space display device 2 also displays a three-dimensional character string at the sound source position based on the display information transmitted from the background sound management device 7.
【００２３】図４は、本実施の形態に係る仮想空間表示
装置２に表示される仮想空間の表示例である。同図に示
す画像４１には、図２の属性に従う背景音情報、例え
ば、文字情報が文字列４２として表示されている。FIG. 4 is a display example of a virtual space displayed on the virtual space display device 2 according to the present embodiment. In the image 41 shown in the figure, background sound information according to the attribute of FIG. 2, for example, character information is displayed as a character string 42.
【００２４】以上説明したように、本実施の形態によれ
ば、３次元仮想空間システムに、背景音を３次元文字と
して視覚化するための文字情報を背景音属性データとし
て備えるとともに、この情報に基づいて必要な情報を生
成する背景音管理機構を備えることで、３次元仮想空間
内において、背景音を、音として再生するだけでなく、
３次元文字情報として可視表示でき、特に聴覚に障害を
持つ人に容易に背景音情報を伝達することが可能とな
る。As described above, according to the present embodiment, the three-dimensional virtual space system is provided with the character information for visualizing the background sound as the three-dimensional character as the background sound attribute data, and the information is included in the information. By providing a background sound management mechanism that generates necessary information based on the background sound in the three-dimensional virtual space,
It can be visually displayed as three-dimensional character information, and particularly, background sound information can be easily transmitted to a person with hearing impairment.
【００２５】実施の形態２．図５は、本発明の実施の形
態２に係る３次元仮想空間システムの構成を示すブロッ
ク図である。なお、同図において、図１に示す上記実施
の形態１に係る３次元仮想空間システム１００の構成要
素と同じ構成要素には同じ符号を付し、ここでは、それ
らの説明を省略する。Embodiment 2 FIG. 5 is a block diagram showing a configuration of a three-dimensional virtual space system according to Embodiment 2 of the present invention. In the figure, the same components as those of the three-dimensional virtual space system 100 according to the first embodiment shown in FIG. 1 are denoted by the same reference numerals, and the description thereof is omitted here.
【００２６】図５に示す３次元仮想空間システム２００
において、仮想空間管理部４の背景音管理装置７内に
は、背景音情報の伝達先を仮想空間表示装置２にする
か、あるいは音再生装置３にするかを選択するための再
生・視覚化選択装置８が設けられている。また、３次元
仮想空間データ管理装置５に格納される背景音属性デー
タ６は、背景音の位置情報（音源位置）、音データ、文
字情報を含んでいる。A three-dimensional virtual space system 200 shown in FIG.
In the background sound management device 7 of the virtual space management unit 4, the reproduction / visualization for selecting whether to transmit the background sound information to the virtual space display device 2 or the sound reproduction device 3 A selection device 8 is provided. The background sound attribute data 6 stored in the three-dimensional virtual space data management device 5 includes background sound position information (sound source position), sound data, and character information.
【００２７】図６は、本実施の形態に係る３次元仮想空
間システムの処理動作を示すフローチャートである。同
図のステップＳ２０１では、アプリケーション部１よ
り、再生・視覚化選択装置８に対して視覚化の指定があ
るか否かを判定する。ここで、視覚化の指定があると判
定された場合、背景音管理装置７は、３次元仮想空間デ
ータ管理装置５の背景音属性データ６内に指定された文
字情報を獲得するが（ステップＳ２０２）、それを音再
生装置３には伝達しない。FIG. 6 is a flowchart showing the processing operation of the three-dimensional virtual space system according to the present embodiment. In step S201 of the figure, the application unit 1 determines whether or not the reproduction / visualization selection device 8 has been designated for visualization. If it is determined that the visualization is designated, the background sound management device 7 acquires the character information specified in the background sound attribute data 6 of the three-dimensional virtual space data management device 5 (step S202). ), And does not transmit it to the sound reproducing device 3.
【００２８】すなわち、背景音管理装置７は、ステップ
Ｓ２０３で、背景音属性データ６に記述された上記の音
源位置と文字情報に基づいて、３次元の文字表示に必要
な情報を生成する。ここで生成された、３次元の文字表
示に必要な情報は、仮想空間表示装置２に伝達される
（ステップＳ２０４）。そして、仮想空間表示装置２
は、ステップＳ２０７で、上記の情報に基づく３次元の
文字表示を行う。That is, in step S203, the background sound management device 7 generates information necessary for three-dimensional character display based on the sound source position and character information described in the background sound attribute data 6. The information generated for the three-dimensional character display generated here is transmitted to the virtual space display device 2 (step S204). And the virtual space display device 2
Performs three-dimensional character display based on the above information in step S207.
【００２９】一方、ステップＳ２０１において、アプリ
ケーション部１より、再生・視覚化選択装置８に対して
視覚化が指定されていないと判定された場合、つまり、
音再生が指定されている場合には、背景音管理装置７
は、背景音属性データ６に記述された音データの所在と
音源の位置情報を音再生装置３に伝達し（ステップＳ２
０５）、仮想空間表示装置２へは何も伝達しない。そし
て、ステップＳ２０６では、音再生装置３が、これらの
情報に基づく音再生を行う。On the other hand, if it is determined in step S201 that the application unit 1 has not specified the visualization for the reproduction / visualization selection device 8, that is,
If sound reproduction is specified, the background sound management device 7
Transmits the location of the sound data and the position information of the sound source described in the background sound attribute data 6 to the sound reproducing device 3 (step S2).
05), nothing is transmitted to the virtual space display device 2. Then, in step S206, the sound reproducing device 3 performs sound reproduction based on these pieces of information.
【００３０】以上説明したように、本実施の形態によれ
ば、３次元仮想空間システムに、背景音の再生、あるい
は表示（可視化）のいずれかを選択するための再生・視
覚化選択機構を備え、それをアプリケーション部より指
定できるようにすることで、３次元仮想空間内におい
て、使用者が、背景音を再生するか、あるいは、それを
視覚的に表示するかを任意に選択することが可能とな
る。As described above, according to the present embodiment, the three-dimensional virtual space system is provided with a reproduction / visualization selection mechanism for selecting either reproduction of the background sound or display (visualization). The user can arbitrarily select whether to play the background sound or visually display it in the three-dimensional virtual space by allowing it to be specified from the application section. Becomes
【００３１】実施の形態３．図７は、本発明の実施の形
態３に係る３次元仮想空間システムの構成を示すブロッ
ク図である。なお、同図において、図１に示す上記実施
の形態１に係る３次元仮想空間システム１００の構成要
素と同じ構成要素には同じ符号を付し、ここでは、それ
らの説明を省略する。Embodiment 3 FIG. 7 is a block diagram showing a configuration of a three-dimensional virtual space system according to Embodiment 3 of the present invention. In the figure, the same components as those of the three-dimensional virtual space system 100 according to the first embodiment shown in FIG. 1 are denoted by the same reference numerals, and the description thereof is omitted here.
【００３２】図７に示す３次元仮想空間システム３００
において、仮想空間管理部４の背景音管理装置７内に３
次元文字拡大・縮小装置９が配され、これにより、背景
音属性データ６に記述された音量に基づいて、３次元の
文字を拡大／縮小するための情報を生成する。A three-dimensional virtual space system 300 shown in FIG.
In the background sound management device 7 of the virtual space management unit 4,
A three-dimensional character enlarging / reducing device 9 is provided, thereby generating information for enlarging / reducing a three-dimensional character based on the volume described in the background sound attribute data 6.
【００３３】また、図８は、図７の３次元仮想空間デー
タ管理装置５内の背景音属性データ６に記述される属性
の一例を示しており、その属性として、背景音名称、音
源位置、音データ、文字情報、そして、音量が記述され
ている。FIG. 8 shows an example of attributes described in the background sound attribute data 6 in the three-dimensional virtual space data management device 5 shown in FIG. 7, and the attributes include background sound name, sound source position, Sound data, character information, and volume are described.
【００３４】そこで、以下、本実施の形態に係る３次元
仮想空間システムの処理動作を説明する。図９は、本実
施の形態に係る３次元仮想空間システムの処理動作を示
すフローチャートである。同図のステップＳ３０１で、
図７の背景音管理装置７は、３次元仮想空間データ管理
装置５から、図８に示す属性を有する背景音属性データ
６を獲得し、音データの所在と音源位置、つまり、背景
音情報としての背景音名称「Ｂｏｍｂ」、音データ「ｂ
ｏｍｂ．ｄａｔａ」、音源位置「−５０，２００，１５
０」を、アプリケーション部１内の音再生装置３に伝達
する（ステップＳ３０２）。Accordingly, the processing operation of the three-dimensional virtual space system according to the present embodiment will be described below. FIG. 9 is a flowchart showing a processing operation of the three-dimensional virtual space system according to the present embodiment. In step S301 of FIG.
The background sound management device 7 in FIG. 7 acquires the background sound attribute data 6 having the attributes shown in FIG. 8 from the three-dimensional virtual space data management device 5, and determines the location of the sound data and the sound source position, that is, as background sound information. Background sound name “Bomb” and sound data “b”
omb. data ", sound source position" -50, 200, 15
"0" is transmitted to the sound reproducing device 3 in the application unit 1 (step S302).
【００３５】次に、背景音管理装置７は、背景音属性デ
ータ６に記述された音源位置「−５０，２００，１５
０」、音量（ここでは「１」）、文字情報「Ｂｏｍｂ
！」を３次元文字拡大・縮小装置９へ伝達する（ステッ
プＳ３０３）。３次元文字拡大・縮小装置９は、これら
の情報を受けて、仮想空間表示装置２が、この音量を反
映した大きさの３次元文字を表示するために必要とする
情報を生成する（ステップＳ３０４）。そして、ここで
生成された情報は、背景音管理装置７から仮想空間表示
装置２へ伝えられる（ステップＳ３０５）。Next, the background sound management device 7 generates the sound source position “-50, 200, 15” described in the background sound attribute data 6.
0 ”, volume (here,“ 1 ”), character information“ Bomb
! Is transmitted to the three-dimensional character enlarging / reducing device 9 (step S303). The three-dimensional character enlarging / reducing device 9 receives the information and generates information necessary for the virtual space display device 2 to display a three-dimensional character having a size reflecting the volume (step S304). ). Then, the information generated here is transmitted from the background sound management device 7 to the virtual space display device 2 (step S305).
【００３６】これらの処理の後、ステップＳ３０６で
は、音再生装置３が、背景音管理装置７より伝達された
背景音情報をもとに、所定の３次元空間位置において背
景音の再生を行い、仮想空間表示装置２は、伝えられた
情報から、その音量を反映させた大きさを持つ３次元文
字を音源位置に可視表示する。After these processes, in step S306, the sound reproduction device 3 reproduces the background sound at a predetermined three-dimensional spatial position based on the background sound information transmitted from the background sound management device 7, From the transmitted information, the virtual space display device 2 visually displays a three-dimensional character having a size reflecting the volume at the sound source position.
【００３７】図１０は、図９に示す処理の結果、仮想空
間表示装置２に表示される画像の例を示す。同図の
（ａ）の画像には、背景音属性データ６に記述された音
量「１」に対応する大きさの文字１０１が表示され、
（ｂ）の画像には、音量「１」に対応する文字よりも大
きい、音量「５」に対応する大きさの文字１０２が表示
されている。FIG. 10 shows an example of an image displayed on the virtual space display device 2 as a result of the processing shown in FIG. In the image of FIG. 7A, a character 101 having a size corresponding to the volume “1” described in the background sound attribute data 6 is displayed.
In the image of (b), a character 102 larger than the character corresponding to the volume “1” and having a size corresponding to the volume “5” is displayed.
【００３８】以上説明したように、本実施の形態によれ
ば、３次元仮想空間システムにおいて背景音を３次元文
字として視覚化する際、背景音属性データ内に、音量に
対応して文字を拡大／縮小するための音量情報を配する
とともに、この情報に基づいて、３次元文字を拡大／縮
小する３次元文字拡大・縮小機構を備えることで、３次
元仮想空間内で、設定された音に対して、その音量に対
応した大きさの３次元文字を表示することが可能とな
る。As described above, according to this embodiment, when the background sound is visualized as a three-dimensional character in the three-dimensional virtual space system, the character is enlarged in the background sound attribute data in accordance with the volume. In addition to arranging volume information for reduction / reduction and providing a three-dimensional character enlargement / reduction mechanism for enlarging / reducing a three-dimensional character based on this information, the set sound can be set in the three-dimensional virtual space. On the other hand, it is possible to display a three-dimensional character having a size corresponding to the volume.
【００３９】実施の形態４．図１１は、本発明の実施の
形態４に係る３次元仮想空間システムの構成を示すブロ
ック図である。なお、同図において、図７に示す上記実
施の形態３に係る３次元仮想空間システム３００の構成
要素と同じ構成要素には同じ符号を付し、ここでは、そ
れらの説明を省略する。Embodiment 4 FIG. 11 is a block diagram showing a configuration of a three-dimensional virtual space system according to Embodiment 4 of the present invention. In the same figure, the same components as those of the three-dimensional virtual space system 300 according to the third embodiment shown in FIG. 7 are denoted by the same reference numerals, and the description thereof is omitted here.
【００４０】図１１において、３次元仮想空間システム
４００は、その背景音管理装置７の３次元文字拡大・縮
小装置９内に文字別音量適用装置１０を備え、この装置
によって、３次元仮想空間データ管理装置５内の背景音
属性データ６に記述された文字別音量に基づいて、３次
元の各文字を拡大／縮小するための情報を生成する。Referring to FIG. 11, a three-dimensional virtual space system 400 includes a character-based volume application device 10 in a three-dimensional character enlargement / reduction device 9 of a background sound management device 7. Based on the volume of each character described in the background sound attribute data 6 in the management device 5, information for enlarging / reducing each three-dimensional character is generated.
【００４１】また、図１２は、図１１の背景音属性デー
タ６に記述される属性の一例を示している。同図に示す
ように、本実施の形態では、背景音の属性として、背景
音属性データ６に、背景音名称、音源位置、音データ、
文字情報、そして、文字別音量が記述される。FIG. 12 shows an example of the attribute described in the background sound attribute data 6 of FIG. As shown in the figure, in the present embodiment, as background sound attributes, background sound name, sound source position, sound data,
Character information and volume for each character are described.
【００４２】以下、本実施の形態に係る３次元仮想空間
システムの処理動作を説明する。図１３は、本実施の形
態に係る３次元仮想空間システムの処理動作を示すフロ
ーチャートである。同図のステップＳ４０１では、背景
音管理装置７が、３次元仮想空間データ管理装置５か
ら、図８に示す属性を有する背景音属性データ６を獲得
し、その内、音データの所在と音源位置「−５０，２０
０，１５０」を背景音情報として音再生装置３に伝える
（ステップＳ４０２）。Hereinafter, the processing operation of the three-dimensional virtual space system according to the present embodiment will be described. FIG. 13 is a flowchart showing a processing operation of the three-dimensional virtual space system according to the present embodiment. In step S401 of the figure, the background sound management device 7 acquires the background sound attribute data 6 having the attributes shown in FIG. 8 from the three-dimensional virtual space data management device 5, and includes the location of the sound data and the sound source position. "-50, 20
"0, 150" as background sound information to the sound reproducing device 3 (step S402).
【００４３】次に、背景音管理装置７は、背景音属性デ
ータ６に記述された文字別音量（ここでは「２１１１
２」）、音源位置「−５０，２００，１５０」、文字情
報「Ｂｏｍｂ！」を、３次元文字拡大・縮小装置９へ伝
達する（ステップＳ４０３）。そして、３次元文字拡大
・縮小装置９が、伝達された属性を文字別音量適用装置
１０へ送ると、文字別音量適用装置１０は、仮想空間表
示装置２が、上記の文字別音量を反映した大きさの３次
元文字を表示するのに必要とする情報を生成する（ステ
ップＳ４０４）。Next, the background sound management device 7 outputs the volume for each character described in the background sound attribute data 6 (here, “2111”).
2), the sound source position “−50, 200, 150” and the character information “Bomb!” Are transmitted to the three-dimensional character enlarging / reducing device 9 (step S403). Then, when the three-dimensional character enlargement / reduction device 9 sends the transmitted attribute to the character volume application device 10, the character volume application device 10 causes the virtual space display device 2 to reflect the character volume described above. Information required to display a three-dimensional character having a size is generated (step S404).
【００４４】文字別音量適用装置１０で生成された情報
は、３次元文字拡大・縮小装置９に返され、３次元文字
拡大・縮小装置９は、その文字別音量を反映した各文字
情報を一つの情報にまとめる（ステップＳ４０５）。こ
こでまとめられた情報は、ステップＳ４０６で、背景音
管理装置７から仮想空間表示装置２へ伝えられる。The information generated by the character-by-character volume application device 10 is returned to the three-dimensional character enlarging / reducing device 9, and the three-dimensional character enlarging / reducing device 9 stores each character information reflecting the character-by-character volume. (Step S405). The information summarized here is transmitted from the background sound management device 7 to the virtual space display device 2 in step S406.
【００４５】仮想空間表示装置２は、伝えられた情報を
もとに、文字別の音量を反映させた大きさを持つ３次元
文字を音源位置に可視表示する。また、音再生装置３
は、上記の背景音情報をもとに、所定の３次元空間位置
において音の再生を行う（ステップＳ４０７）。The virtual space display device 2 visually displays a three-dimensional character having a size reflecting the volume of each character at the sound source position based on the transmitted information. In addition, the sound reproducing device 3
Performs sound reproduction at a predetermined three-dimensional space position based on the background sound information (step S407).
【００４６】図１４は、図１３に示す処理が行われたと
きに、仮想空間表示装置２に表示される画像の例を示し
ている。同図の（ａ）の画像には、背景音属性データ６
に記述された文字別音量「１１１１１」に対応する、各
々の文字の大きさが等しい文字列１４１が表示され、
（ｂ）の画像には、文字別音量「５３３３５」に対応し
て、その両端の文字が、それらの中間に位置する文字よ
りも大きくなっている表示文字列１４２が示されてい
る。FIG. 14 shows an example of an image displayed on the virtual space display device 2 when the processing shown in FIG. 13 is performed. The image shown in FIG.
Are displayed, the character strings 141 having the same character size are displayed, corresponding to the character-specific volume “11111” described in.
The image (b) shows a display character string 142 in which the characters at both ends are larger than the characters located between them, corresponding to the character-by-character volume “53335”.
【００４７】以上説明したように、本実施の形態によれ
ば、３次元仮想空間システムにおいて、背景音を３次元
文字として視覚化する際、背景音属性データ内に文字別
音量情報を配して、各文字毎に、音量に対応させてその
大きさを拡大／縮小し、また、この情報に基づいて、３
次元の各文字を拡大／縮小するための文字別音量適用機
構を備えることで、３次元仮想空間内で、設定された音
に対して、文字列の各文字を、それぞれの音量に対応し
た大きさで３次元表示することが可能となる。As described above, according to the present embodiment, when visualizing a background sound as a three-dimensional character in a three-dimensional virtual space system, volume information for each character is arranged in the background sound attribute data. The size of each character is scaled up or down in correspondence with the volume, and based on this information, 3
By providing a character-by-character volume application mechanism for enlarging / reducing each character in a dimension, each character in a character string is converted into a volume corresponding to the volume for a set sound in a three-dimensional virtual space. Thus, three-dimensional display can be performed.
【００４８】実施の形態５．図１５は、本発明の実施の
形態５に係る３次元仮想空間システムの構成を示すブロ
ック図である。なお、同図において、図１に示す上記実
施の形態１に係る３次元仮想空間システム１００の構成
要素と同一構成要素には同一符号を付し、ここでは、そ
れらの説明を省略する。Embodiment 5 FIG. FIG. 15 is a block diagram showing a configuration of a three-dimensional virtual space system according to Embodiment 5 of the present invention. In the figure, the same components as those of the three-dimensional virtual space system 100 according to the first embodiment shown in FIG. 1 are denoted by the same reference numerals, and description thereof is omitted here.
【００４９】図１５に示す３次元仮想空間システム５０
０には、仮想空間管理部４の背景音管理装置７内に表示
効果適用装置１１が配されている。この表示効果適用装
置１１は、背景音属性データ６に記述された文字を、３
次元の文字として表示するのに必要な情報を生成する。
ここでは、後述するように、３次元文字が音源位置から
特定の距離だけ離れた地点まで、連続して徐々に大きく
なるよう表示されるよう、その情報が生成される。A three-dimensional virtual space system 50 shown in FIG.
At 0, a display effect application device 11 is arranged in the background sound management device 7 of the virtual space management unit 4. The display effect applying device 11 converts the characters described in the background sound attribute data 6 into three characters.
Generates the information needed to display as dimensional characters.
Here, as will be described later, the information is generated so that the three-dimensional characters are displayed so as to be continuously enlarged gradually to a point separated by a specific distance from the sound source position.
【００５０】図１６は、図１５の３次元仮想空間データ
管理装置５内の背景音属性データ６に記述される属性の
一例を示しており、ここには、その属性として、背景音
名称、音源位置、音データ、そして、文字情報が記述さ
れている。FIG. 16 shows an example of the attributes described in the background sound attribute data 6 in the three-dimensional virtual space data management device 5 of FIG. The position, sound data, and character information are described.
【００５１】以下、本実施の形態に係る３次元仮想空間
システムの動作を簡単に説明する。背景音管理装置７
は、３次元仮想空間データ管理装置５から、上記の背景
音属性データ６を獲得し、その中から、音データの所在
と音源位置を音再生装置３に伝達する。また同時に、背
景音管理装置７は、背景音属性データ６に記述された音
源位置、文字情報を表示効果適用装置１１に伝える。Hereinafter, the operation of the three-dimensional virtual space system according to the present embodiment will be briefly described. Background sound management device 7
Acquires the background sound attribute data 6 from the three-dimensional virtual space data management device 5 and transmits the location of the sound data and the sound source position to the sound reproduction device 3 from among them. At the same time, the background sound management device 7 transmits the sound source position and character information described in the background sound attribute data 6 to the display effect application device 11.
【００５２】表示効果適用装置１１は、これらの情報を
受けて、３次元文字が、音源の位置から特定の距離離れ
た地点まで、その大きさが連続して徐々に大きくなるよ
う表示されるために必要な情報を生成する。そして、背
景音管理装置７は、表示効果適用装置１１が生成した情
報を、３次元文字情報とともに仮想空間表示装置２へ伝
える。The display effect application device 11 receives the information and displays the three-dimensional character such that its size is continuously increased gradually from the position of the sound source to a point separated by a specific distance. Generate necessary information for Then, the background sound management device 7 transmits the information generated by the display effect application device 11 to the virtual space display device 2 together with the three-dimensional character information.
【００５３】その結果、音再生装置３は、背景音管理装
置７より伝達された背景音情報をもとに、所定の３次元
空間位置において音の再生を行い、仮想空間表示装置２
は、同じく背景音管理装置７より伝達された表示情報か
ら、上記の音源位置に３次元文字を表示する。As a result, the sound reproduction device 3 reproduces sound at a predetermined three-dimensional space position based on the background sound information transmitted from the background sound management device 7, and
Displays a three-dimensional character at the sound source position from the display information transmitted from the background sound management device 7.
【００５４】図１７に、本実施の形態に係る仮想空間表
示装置２に表示される画像の一例を示す。同図に示すよ
うに、ここでは、３次元文字（ここでは「Ｉ」）１７１
が、音源位置から特定の距離だけ離れた地点まで、連続
して徐々に大きくなるよう表示される。FIG. 17 shows an example of an image displayed on the virtual space display device 2 according to the present embodiment. As shown in the figure, here, a three-dimensional character (here, “I”) 171
Are displayed so as to increase continuously and continuously until a point separated by a specific distance from the sound source position.
【００５５】以上説明したように、本実施の形態によれ
ば、３次元仮想空間システムにおいて、背景音を３次元
文字として視覚化する際、その３次元文字が、音源位置
から特定の距離だけ離れた地点まで、徐々に連続して大
きくなるような表示効果を奏する表示効果適用機構を備
えることで、３次元仮想空間内で、例えば、３次元文字
が音源からせり出して来るような可視表示が可能とな
る。As described above, according to the present embodiment, when visualizing a background sound as a three-dimensional character in the three-dimensional virtual space system, the three-dimensional character is separated from the sound source position by a specific distance. A display effect applying mechanism that produces a display effect that gradually increases to the point where it has been displayed, enables a visual display in which a three-dimensional character protrudes from the sound source, for example, in a three-dimensional virtual space. Becomes
【００５６】実施の形態６．図１８は、本発明の実施の
形態６に係る３次元仮想空間システムの構成を示すブロ
ック図である。なお、同図において、図１５に示す上記
実施の形態５に係る３次元仮想空間システム５００の構
成要素と同一構成要素には同一符号を付し、ここでは、
それらの説明を省略する。Embodiment 6 FIG. FIG. 18 is a block diagram showing a configuration of a three-dimensional virtual space system according to Embodiment 6 of the present invention. Note that, in the figure, the same components as those of the three-dimensional virtual space system 500 according to the fifth embodiment shown in FIG.
A description thereof will be omitted.
【００５７】図１８に示す３次元仮想空間システム６０
０において、背景音管理装置７の表示効果適用装置１１
内には、３次元仮想空間データ管理装置５内の背景音属
性データ６に記述された音長（これについては、後述す
る）を、３次元文字の表示効果に適用するための音長適
用装置１２が設けられている。A three-dimensional virtual space system 60 shown in FIG.
0, the display effect application device 11 of the background sound management device 7
Inside, a sound length application device for applying a sound length (described later) described in the background sound attribute data 6 in the three-dimensional virtual space data management device 5 to a display effect of a three-dimensional character. 12 are provided.
【００５８】図１９は、図１８の３次元仮想空間データ
管理装置５内の背景音属性データ６に記述される属性の
一例を示す。ここには、その属性として、背景音名称、
音源位置、音データ、文字情報、そして、音長が記述さ
れている。FIG. 19 shows an example of attributes described in the background sound attribute data 6 in the three-dimensional virtual space data management device 5 of FIG. Here, as its attributes, the background sound name,
The sound source position, sound data, character information, and sound length are described.
【００５９】以下、本実施の形態に係る３次元仮想空間
システムの処理動作を説明する。図２０は、本実施の形
態に係る３次元仮想空間システムの処理動作を示すフロ
ーチャートである。同図のステップＳ６０１で、背景音
管理装置７は、３次元仮想空間データ管理装置５より背
景音属性データ６を獲得し、ステップＳ６０２で、背景
音情報としての音データの所在と音源位置を音再生装置
３に伝達する。さらに、背景音管理装置７は、背景音属
性データ６に記述された音源位置、文字情報、および音
長を表示効果適用装置１１に伝える（ステップＳ６０
３）。Hereinafter, the processing operation of the three-dimensional virtual space system according to the present embodiment will be described. FIG. 20 is a flowchart showing a processing operation of the three-dimensional virtual space system according to the present embodiment. In step S601, the background sound management device 7 acquires the background sound attribute data 6 from the three-dimensional virtual space data management device 5, and in step S602, determines the location of the sound data as background sound information and the sound source position. The information is transmitted to the playback device 3. Further, the background sound management device 7 notifies the display effect application device 11 of the sound source position, character information, and sound length described in the background sound attribute data 6 (step S60).
3).
【００６０】表示効果適用装置１１は、上記の情報をも
とに、３次元文字が、音源の位置から特定の距離だけ離
れた地点まで、その大きさが連続して徐々に大きくなる
ように表示するのに必要となる情報を生成する。そし
て、表示効果適用装置１１は、この生成した情報と音長
を、音長適用装置１２に送る（ステップＳ６０４）。The display effect applying device 11 displays the three-dimensional character based on the above information so that the size of the three-dimensional character continuously increases to a point separated by a specific distance from the position of the sound source. Generate the information needed to do Then, the display effect applying device 11 sends the generated information and the sound length to the sound length applying device 12 (Step S604).
【００６１】音長適用装置１２は、受け取った情報と音
長をもとに、３次元文字の奥行きを、この音長に合わせ
て伸縮し、表示するために必要な情報を生成する（ステ
ップＳ６０５）。そして、背景音管理装置７は、３次元
文字情報とともに、表示効果適用装置１１および音長適
用装置１２が生成した情報を、アプリケーション部１の
仮想空間表示装置２へ伝達する（ステップＳ６０６）。Based on the received information and the sound length, the sound length applying device 12 expands and contracts the depth of the three-dimensional character according to the sound length, and generates information necessary for display (step S605). ). Then, the background sound management device 7 transmits the information generated by the display effect application device 11 and the sound length application device 12 to the virtual space display device 2 of the application unit 1 together with the three-dimensional character information (step S606).
【００６２】以上の処理の結果、音再生装置３は、上記
の背景音情報をもとに、所定の３次元空間位置において
音の再生を行う。また、仮想空間表示装置２は、上記の
音長に合わせて伸縮した３次元文字を音源位置に可視表
示する（ステップＳ６０７）。As a result of the above processing, the sound reproducing device 3 reproduces sound at a predetermined three-dimensional space position based on the background sound information. Further, the virtual space display device 2 visually displays the three-dimensional characters expanded and contracted in accordance with the above-mentioned sound length at the sound source position (step S607).
【００６３】図２１は、上記の処理の結果を受けて、仮
想空間表示装置２が表示する画像の例を示す。同図の
（ａ）の画像には、背景音属性データ６に記述された音
長「５」に対応する長さの文字が表示され、（ｂ）の画
像には、それよりも長い、音長「１５」に対応する長さ
の文字が表示される。FIG. 21 shows an example of an image displayed by the virtual space display device 2 in response to the result of the above processing. In the image of FIG. 7A, characters having a length corresponding to the sound length “5” described in the background sound attribute data 6 are displayed, and in the image of FIG. A character having a length corresponding to the length “15” is displayed.
【００６４】以上説明したように、本実施の形態によれ
ば、音長情報に基づいて表示効果を奏する情報を生成
し、この情報の示す音長に合致した奥行きを有するよう
に文字列を表示することで、３次元仮想空間内で、音を
その音の長さに対応して変形させて、可視表示すること
が可能となる。As described above, according to the present embodiment, information having a display effect is generated based on the sound duration information, and the character string is displayed so as to have a depth matching the sound duration indicated by the information. By doing so, in the three-dimensional virtual space, the sound can be deformed in accordance with the length of the sound and can be visually displayed.
【００６５】実施の形態７．図２２は、本発明の実施の
形態７に係る３次元仮想空間システムの構成を示すブロ
ック図である。なお、同図において、図１に示す上記実
施の形態１に係る３次元仮想空間システム１００の構成
要素と同一構成要素には同一符号を付し、ここでは、そ
れらの説明を省略する。Embodiment 7 FIG. FIG. 22 is a block diagram showing a configuration of a three-dimensional virtual space system according to Embodiment 7 of the present invention. In the figure, the same components as those of the three-dimensional virtual space system 100 according to the first embodiment shown in FIG. 1 are denoted by the same reference numerals, and description thereof is omitted here.
【００６６】図２２に示す３次元仮想空間システム７０
０において、背景音管理装置７は、音区分適用装置１３
を有し、その内部には、音区分データ１４が配されてい
る。この音区分適用装置１３は、背景音属性データ６に
記述された、後述する音区分に基づいて、３次元文字の
色や字体を変化させる装置であり、音区分データ１４
は、音区分と、文字の色や字体との対応を記述したデー
タである。The three-dimensional virtual space system 70 shown in FIG.
0, the background sound management device 7
, In which the sound classification data 14 is arranged. This sound classification application device 13 is a device that changes the color and font of a three-dimensional character based on sound classifications described in the background sound attribute data 6 and described later.
Is data describing the correspondence between the sound classification and the character color or font.
【００６７】図２３は、図２２の３次元仮想空間データ
管理装置５内の背景音属性データ６に記述される属性の
一例を示す。ここには、その属性として、背景音名称、
音源位置、音データ、文字情報、そして、音区分が記述
されている。FIG. 23 shows an example of attributes described in the background sound attribute data 6 in the three-dimensional virtual space data management device 5 of FIG. Here, as its attributes, the background sound name,
The sound source position, sound data, character information, and sound classification are described.
【００６８】以下、本実施の形態に係る３次元仮想空間
システムの処理動作を説明する。図２４は、本実施の形
態に係る３次元仮想空間システムの処理動作を示すフロ
ーチャートである。同図のステップＳ７０１では、背景
音管理装置７が、３次元仮想空間データ管理装置５内の
背景音属性データ６を獲得し、ステップＳ７０２で、音
データの所在と音源位置を、背景音情報として音再生装
置３へ伝達する。Hereinafter, the processing operation of the three-dimensional virtual space system according to the present embodiment will be described. FIG. 24 is a flowchart showing a processing operation of the three-dimensional virtual space system according to the present embodiment. In step S701 of the figure, the background sound management device 7 acquires the background sound attribute data 6 in the three-dimensional virtual space data management device 5, and in step S702, the location of the sound data and the sound source position are used as background sound information. The sound is transmitted to the sound reproducing device 3.
【００６９】背景音管理装置７は、上記の情報をもと
に、３次元文字を表示するために必要な情報を生成し
（ステップＳ７０３）、その後、背景音属性データ６に
記述された音区分を、音区分適用装置１３に送る（ステ
ップＳ７０４）。この音区分適用装置１３は、送られて
きた音区分に従って、音区分データ１４より、適用する
文字色と字体を選択する。そして、音区分適用装置１３
は、これら選択した色と字体で３次元文字を表示するの
に必要な情報を生成する（ステップＳ７０５）。The background sound management device 7 generates information necessary for displaying a three-dimensional character based on the above information (step S 703). Thereafter, the sound classification described in the background sound attribute data 6 is performed. Is sent to the sound classification application device 13 (step S704). The sound classification application device 13 selects a character color and a font to be applied from the sound classification data 14 according to the transmitted sound classification. And the sound classification application device 13
Generates information necessary for displaying a three-dimensional character in the selected color and font (step S705).
【００７０】次に、背景音管理装置７は、音区分適用装
置１３が生成した情報を、３次元文字情報とともに仮想
空間表示装置２へ送る（ステップＳ７０６）。以上の処
理の結果、音再生装置３は、上記の背景音情報をもとに
３次元空間位置において音再生を行い、仮想空間表示装
置２は、上記の生成情報と３次元文字情報に基づく３次
元文字を音源位置に可視表示する（ステップＳ７０
７）。Next, the background sound management device 7 sends the information generated by the sound classification application device 13 to the virtual space display device 2 together with the three-dimensional character information (step S706). As a result of the above processing, the sound reproducing device 3 reproduces the sound at the three-dimensional space position based on the background sound information, and the virtual space display device 2 performs the sound reproduction based on the generated information and the three-dimensional character information. The two-dimensional characters are visually displayed at the sound source position (step S70).
7).
【００７１】図２５は、上記の処理の結果、仮想空間表
示装置２によって表示される画像の例を示す。同図の
（ａ）の画像において、背景音属性データ６に記述され
た音データや音区分等に対応した文字２５１が、所定の
位置に表示され、また、（ｂ）の画像には、他の音区分
等に対応する文字２５２が表示される。FIG. 25 shows an example of an image displayed by the virtual space display device 2 as a result of the above processing. In the image shown in FIG. 7A, a character 251 corresponding to the sound data and the sound division described in the background sound attribute data 6 is displayed at a predetermined position, and the image shown in FIG. A character 252 corresponding to the sound classification or the like is displayed.
【００７２】以上説明したように、本実施の形態によれ
ば、３次元仮想空間システムで背景音を３次元文字とし
て視覚化する際、背景音属性データ内に格納された、そ
の背景音の属する区分に基づいて、３次元文字の色や字
体を変更し、この情報に基づいて必要な情報の生成や変
形を行う音区分適用機構を備えることで、３次元仮想空
間内において、その音の区分に対応する色や字体で３次
元文字を可視表示することが可能となる。As described above, according to this embodiment, when a background sound is visualized as a three-dimensional character in the three-dimensional virtual space system, the background sound belongs to the background sound attribute data. By providing a sound classification application mechanism that changes the color or font of a three-dimensional character based on the classification and generates or transforms necessary information based on this information, the classification of the sound in the three-dimensional virtual space is achieved. It is possible to visually display three-dimensional characters in colors and fonts corresponding to.
【００７３】実施の形態８．図２６は、本発明の実施の
形態８に係る３次元仮想空間システムの構成を示すブロ
ック図である。なお、同図において、図１に示す上記実
施の形態１に係る３次元仮想空間システム１００の構成
要素と同一構成要素には同一符号を付し、ここでは、そ
れらの説明を省略する。Embodiment 8 FIG. FIG. 26 is a block diagram showing a configuration of a three-dimensional virtual space system according to Embodiment 8 of the present invention. In the figure, the same components as those of the three-dimensional virtual space system 100 according to the first embodiment shown in FIG. 1 are denoted by the same reference numerals, and description thereof is omitted here.
【００７４】図２６に示す３次元仮想空間システム８０
０において、背景音管理装置７は、背景音属性データ６
に記述された、後述する背景音種類に対応して表示する
文字列を選択する背景音文字選択装置１５と、背景音種
類に対応して使用する背景音文字を保持する背景音デー
タベース１６を備える。また、アプリケーション部１
は、仮想空間表示装置２と音再生装置３に加えて、この
アプリケーション部１が背景音管理装置７に登録する背
景音文字データを有する。The three-dimensional virtual space system 80 shown in FIG.
0, the background sound management device 7 sets the background sound attribute data 6
And a background sound character selection device 15 for selecting a character string to be displayed corresponding to the background sound type described below, and a background sound database 16 for storing background sound characters to be used corresponding to the background sound type. . Application section 1
Has background sound character data that the application unit 1 registers in the background sound management device 7 in addition to the virtual space display device 2 and the sound reproduction device 3.
【００７５】図２７は、背景音属性データ６に記述され
る属性の一例を示し、ここでは、その属性として、背景
音名称、音源位置、音データ、文字情報、そして、背景
音種類が記述されている。また、図２８は、背景音文字
データ１７として、背景音文字データベース１６に保持
されるデータの一例を示す。FIG. 27 shows an example of attributes described in the background sound attribute data 6. Here, the background sound name, sound source position, sound data, character information, and background sound type are described as the attributes. ing. FIG. 28 shows an example of data held in the background sound character database 16 as the background sound character data 17.
【００７６】なお、アプリケーション部１には、背景音
文字の種類に対応して、所望の表示を行うための文字列
や字体を背景音文字データ１７として保持し、それを背
景音文字データベース１６に登録しておく。The application section 1 stores a character string or font for performing a desired display as background sound character data 17 corresponding to the type of background sound character, and stores it in the background sound character database 16. Register.
【００７７】以下、本実施の形態に係る３次元仮想空間
システムにおける処理動作について説明する。図２９
は、本実施の形態に係る３次元仮想空間システムの処理
動作を示すフローチャートである。同図に示すステップ
Ｓ８０１では、背景音管理装置７が、３次元仮想空間デ
ータ管理装置５の背景音属性データ６を獲得し、ステッ
プＳ８０２で、そのデータの内、音データの所在と音源
位置を、背景音情報として音再生装置３に伝達する。The processing operation in the three-dimensional virtual space system according to the present embodiment will be described below. FIG.
5 is a flowchart showing a processing operation of the three-dimensional virtual space system according to the present embodiment. In step S801 shown in the figure, the background sound management device 7 acquires the background sound attribute data 6 of the three-dimensional virtual space data management device 5, and in step S802, the location of the sound data and the sound source position in the data are determined. Is transmitted to the sound reproducing device 3 as background sound information.
【００７８】背景音管理装置７は、文字情報と音源情報
をもとに、３次元文字を表示するために必要な情報を生
成し（ステップＳ８０３）、背景音属性データ６に記述
された背景音種類を背景音文字選択装置１５に伝達する
（ステップＳ８０４）。この伝達を受けた背景音文字選
択装置１５は、背景音文字データベース１６より、指定
された背景音種類に相当するデータを検索する（ステッ
プＳ８０５）。The background sound management device 7 generates information necessary for displaying a three-dimensional character based on the character information and the sound source information (step S 803), and generates the background sound described in the background sound attribute data 6. The type is transmitted to the background sound character selection device 15 (step S804). The background sound character selection device 15 that has received this transmission searches the background sound character database 16 for data corresponding to the specified background sound type (step S805).
【００７９】上記のステップＳ８０５の検索で、相当す
るデータが見つからないと判定された場合は（ステップ
Ｓ８０６で「ｎｏ」）、背景音管理装置７によって生成
された３次元文字情報が、そのまま背景音管理装置７に
伝えられ、それが、仮想空間表示装置２に送られる（ス
テップＳ８０８）。If it is determined that the corresponding data is not found in the search in step S805 (“no” in step S806), the three-dimensional character information generated by the background sound management device 7 The information is transmitted to the management device 7 and transmitted to the virtual space display device 2 (step S808).
【００８０】しかし、相当するデータが背景音文字デー
タベース１６から見つかった場合には（ステップＳ８０
６で「ｙｅｓ」）、背景音管理装置７は、その見つかっ
た文字列と字体を獲得し、これら文字列と字体を用い
て、３次元文字の可視表示に必要な情報を生成する（ス
テップＳ８０７）。その後、背景音管理装置７は、生成
された３次元文字情報を仮想空間表示装置２に伝える
（ステップＳ８０８）。However, if the corresponding data is found from the background sound character database 16 (step S80)
6, "yes"), the background sound management device 7 acquires the found character string and font, and uses the character string and font to generate information necessary for visible display of a three-dimensional character (step S807). ). After that, the background sound management device 7 transmits the generated three-dimensional character information to the virtual space display device 2 (Step S808).
【００８１】以上の処理が行われると、ステップＳ８０
９で、音再生装置３は、背景音管理装置７より伝達され
た背景音情報をもとに、所定の３次元空間位置において
音再生を行う。同時に仮想空間表示装置２は、背景音管
理装置７によって生成された３次元文字情報に基づく表
示を行うか、あるいは、背景音管理装置７が上記データ
ベースより検索した文字列と字体を用いて作成し、伝達
した表示情報をもとに、上記の音源位置に３次元文字を
可視表示する。When the above processing is performed, step S80
At 9, the sound reproduction device 3 reproduces sound at a predetermined three-dimensional spatial position based on the background sound information transmitted from the background sound management device 7. At the same time, the virtual space display device 2 performs display based on the three-dimensional character information generated by the background sound management device 7, or creates a display using the character strings and fonts searched by the background sound management device 7 from the database. Based on the transmitted display information, a three-dimensional character is visually displayed at the sound source position.
【００８２】図３０は、本実施の形態に係る仮想空間表
示装置２に表示される画像の一例を示す。同図に示すよ
うに、本実施の形態では、図２７の背景音属性データの
記述に基づいて、図２８に示す背景音文字データの示す
文字が表示される。具体的には、背景音属性データとし
て記述された背景音種類に対応する背景音文字データに
従って、同一画面中に、２種類の３次元文字３０１，３
０２が、それぞれ指定された音源位置に表示される。FIG. 30 shows an example of an image displayed on the virtual space display device 2 according to the present embodiment. As shown in FIG. 28, in the present embodiment, the characters indicated by the background sound character data shown in FIG. 28 are displayed based on the description of the background sound attribute data shown in FIG. Specifically, according to the background sound character data corresponding to the background sound type described as the background sound attribute data, two types of three-dimensional characters 301 and 3 are displayed on the same screen.
02 are displayed at the designated sound source positions.
【００８３】以上説明したように、本実施の形態によれ
ば、３次元仮想空間システムで背景音を３次元文字とし
て視覚化する際、その背景音を一意に示す情報に基づい
て、アプリケーションより指定された文字を３次元文字
として表示する目的で、背景音属性データ中に音の種類
情報を配し、この情報に基づいて必要な情報を生成する
背景音文字選択機構を備えることで、３次元仮想空間内
に、その音の種類に基づいて、使用者により設定された
文字列、字体で３次元文字を可視表示することが可能と
なる。As described above, according to the present embodiment, when a background sound is visualized as a three-dimensional character in a three-dimensional virtual space system, the background sound is specified by an application based on information uniquely indicating the background sound. In order to display the selected character as a three-dimensional character, sound type information is arranged in the background sound attribute data, and a background sound character selection mechanism for generating necessary information based on this information is provided. In the virtual space, it becomes possible to visually display a three-dimensional character in a character string and font set by the user based on the type of the sound.
【００８４】[0084]
【発明の効果】以上説明したように、第１の発明によれ
ば、仮想空間に提供する背景音の属性として音源位置情
報、音データ、文字情報を格納する手段と、音源位置情
報と音データに基づいて、この仮想空間の音源位置に上
記背景音を再生する手段と、上記音源位置情報と文字情
報に基づいて、この文字情報を３次元の文字列として視
覚化処理する処理手段と、上記視覚化された文字列を、
上記仮想空間内の音源位置に可視表示する表示手段とを
備えることで、３次元仮想空間内において、背景音を音
として再生するだけでなく、その音源位置に３次元の文
字列として可視的に表示でき、特に聴覚に障害を持つ人
に容易に背景音情報を伝達することが可能となる。As described above, according to the first aspect, means for storing sound source position information, sound data, and character information as attributes of a background sound provided in a virtual space, sound source position information and sound data Means for reproducing the background sound at the sound source position in the virtual space based on the sound source position; processing means for visualizing the character information as a three-dimensional character string based on the sound source position information and character information; The visualized string
Display means for visually displaying the sound source position in the virtual space, not only reproducing the background sound as sound in the three-dimensional virtual space, but also visually displaying the sound source position as a three-dimensional character string. The background sound information can be easily transmitted to a person with a hearing impairment, in particular.
【００８５】第２の発明によれば、背景音の再生、ある
いは上記文字列の可視表示のいずれかを選択する手段を
備えることで、使用者が３次元仮想空間内で、背景音を
再生するか、それを視覚的に表示するかの選択が可能と
なる。According to the second aspect of the present invention, the user can reproduce the background sound in the three-dimensional virtual space by providing the means for selecting either the reproduction of the background sound or the visual display of the character string. It is possible to select whether or not to display it visually.
【００８６】第３の発明によれば、背景音の属性に、そ
の背景音の音量情報を含め、上記処理手段が、上記視覚
化処理の際に、この音量情報に基づいて上記文字列の拡
大あるいは縮小を行うことで、３次元仮想空間内で、音
をその音量に対応した大きさの３次元文字として可視表
示することが可能となる。According to the third aspect, the attribute of the background sound includes the volume information of the background sound, and the processing means enlarges the character string based on the volume information at the time of the visualization processing. Alternatively, by performing the reduction, the sound can be visually displayed as a three-dimensional character having a size corresponding to the volume in the three-dimensional virtual space.
【００８７】また、第４の発明によれば、音量情報を上
記文字列の各文字に対応させ、上記処理手段が、上記視
覚化処理の際に、この対応に基づいて上記各文字の拡大
あるいは縮小を行うことで、３次元仮想空間内におい
て、音を３次元の文字列として表示する際、その文字列
の各文字を、それぞれの音量に対応した大きさで可視表
示することができる。According to the fourth aspect, the volume information is made to correspond to each character of the character string, and the processing means enlarges or expands each character based on the correspondence at the time of the visualization processing. By performing the reduction, when the sound is displayed as a three-dimensional character string in the three-dimensional virtual space, each character of the character string can be visually displayed at a size corresponding to each volume.
【００８８】第５の発明によれば、上記処理手段が、上
記視覚化処理の際に、上記文字列に所定の視覚効果を奏
するための表示効果情報を生成し、上記表示手段が、こ
の表示効果情報に従って、上記仮想空間内の音源位置か
ら所定位置まで、上記文字列を連続的に徐々に拡大して
表示することで、３次元仮想空間内において、音を３次
元文字として表示する際、その音源から文字が飛び出す
ように可視表現できる。According to the fifth aspect, the processing means generates display effect information for providing a predetermined visual effect to the character string during the visualization processing, and the display means displays the display effect information. According to the effect information, the character string is continuously and gradually enlarged from the sound source position in the virtual space to a predetermined position and displayed, so that the sound is displayed as a three-dimensional character in the three-dimensional virtual space. Visual representation can be made so that characters jump out of the sound source.
【００８９】第６の発明によれば、背景音の属性に、そ
の背景音の音長情報を含め、上記処理手段が、この音長
情報に基づいて上記表示効果情報を生成し、また、上記
表示手段が、この表示効果情報の示す音長に合致した奥
行きを有するように上記文字列を表示することで、３次
元仮想空間内で、音をその音の長さに対応して変形させ
て、可視表示することが可能となる。According to the sixth invention, the processing means generates the display effect information based on the sound duration information, including the sound duration information of the background sound in the attribute of the background sound. The display means displays the character string so as to have a depth corresponding to the sound length indicated by the display effect information, thereby deforming the sound in the three-dimensional virtual space in accordance with the sound length. , Can be displayed in a visible manner.
【００９０】第７の発明によれば、背景音の属性に、そ
の背景音の区分を含め、上記処理手段が、この区分に基
づいて上記文字列の各文字の色および字体が変化するよ
う、この文字列を視覚化することで、３次元仮想空間内
で、再生しようとする音の区分に対応する色や字体で、
３次元文字を可視表示することができる。According to the seventh aspect, the attribute of the background sound includes the division of the background sound, and the processing means changes the color and the font of each character of the character string based on the division. By visualizing this character string, in the three-dimensional virtual space, the color and font corresponding to the segment of the sound to be reproduced,
Three-dimensional characters can be displayed visually.
【００９１】そして、第８の発明によれば、背景音の属
性に、その背景音の種類を含め、上記処理手段が、この
種類に対応した背景音文字に上記視覚化処理を施すこと
で、３次元仮想空間内において、その音の種類に基づい
て、使用者が設定した文字列、字体で、３次元文字を可
視表示することが可能となる。また、この背景音文字
を、所定のデータべースに登録することで、上記処理手
段は、表示する文字列および字体をデータベースより容
易に選択できる。According to the eighth aspect, the processing means includes the type of the background sound in the attribute of the background sound, and the processing means performs the visualization process on the background sound character corresponding to the type. In the three-dimensional virtual space, it becomes possible to visually display the three-dimensional character with a character string and a font set by the user based on the type of the sound. By registering the background sound character in a predetermined database, the processing means can easily select a character string and a font to be displayed from a database.
【図１】 本発明の実施の形態１に係る３次元仮想空間
システムの構成を示すブロック図である。FIG. 1 is a block diagram showing a configuration of a three-dimensional virtual space system according to a first embodiment of the present invention.
【図２】 本発明の実施の形態１に係る背景音属性デー
タに記述される属性の一例を示す図である。FIG. 2 is a diagram showing an example of an attribute described in background sound attribute data according to the first embodiment of the present invention.
【図３】 本発明の実施の形態１に係る３次元仮想空間
システムの処理動作を示すフローチャートである。FIG. 3 is a flowchart showing a processing operation of the three-dimensional virtual space system according to the first embodiment of the present invention.
【図４】 本発明の実施の形態１に係る仮想空間の表示
例を示す図である。FIG. 4 is a diagram showing a display example of a virtual space according to the first embodiment of the present invention.
【図５】 本発明の実施の形態２に係る３次元仮想空間
システムの構成を示すブロック図である。FIG. 5 is a block diagram showing a configuration of a three-dimensional virtual space system according to Embodiment 2 of the present invention.
【図６】 本発明の実施の形態２に係る３次元仮想空間
システムの処理動作を示すフローチャートである。FIG. 6 is a flowchart showing a processing operation of the three-dimensional virtual space system according to the second embodiment of the present invention.
【図７】 本発明の実施の形態３に係る３次元仮想空間
システムの構成を示すブロック図である。FIG. 7 is a block diagram showing a configuration of a three-dimensional virtual space system according to a third embodiment of the present invention.
【図８】 本発明の実施の形態３に係る背景音属性デー
タに記述される属性の一例を示す図である。FIG. 8 is a diagram showing an example of an attribute described in background sound attribute data according to Embodiment 3 of the present invention.
【図９】 本発明の実施の形態３に係る３次元仮想空間
システムの処理動作を示すフローチャートである。FIG. 9 is a flowchart showing a processing operation of the three-dimensional virtual space system according to the third embodiment of the present invention.
【図１０】 本発明の実施の形態３に係る仮想空間の表
示例を示す図である。FIG. 10 is a diagram showing a display example of a virtual space according to Embodiment 3 of the present invention.
【図１１】 本発明の実施の形態４に係る３次元仮想空
間システムの構成を示すブロック図である。FIG. 11 is a block diagram showing a configuration of a three-dimensional virtual space system according to Embodiment 4 of the present invention.
【図１２】 本発明の実施の形態４に係る背景音属性デ
ータに記述される属性の一例を示す図である。FIG. 12 is a diagram showing an example of an attribute described in background sound attribute data according to Embodiment 4 of the present invention.
【図１３】 本発明の実施の形態４に係る３次元仮想空
間システムの処理動作を示すフローチャートである。FIG. 13 is a flowchart showing a processing operation of the three-dimensional virtual space system according to the fourth embodiment of the present invention.
【図１４】 本発明の実施の形態４に係る仮想空間の表
示例を示す図である。FIG. 14 is a diagram showing a display example of a virtual space according to Embodiment 4 of the present invention.
【図１５】 本発明の実施の形態５に係る３次元仮想空
間システムの構成を示すブロック図である。FIG. 15 is a block diagram showing a configuration of a three-dimensional virtual space system according to Embodiment 5 of the present invention.
【図１６】 本発明の実施の形態５に係る背景音属性デ
ータに記述される属性の一例を示す図である。FIG. 16 is a diagram showing an example of an attribute described in background sound attribute data according to Embodiment 5 of the present invention.
【図１７】 本発明の実施の形態５に係る仮想空間の表
示例を示す図である。FIG. 17 is a diagram showing a display example of a virtual space according to Embodiment 5 of the present invention.
【図１８】 本発明の実施の形態６に係る３次元仮想空
間システムの構成を示すブロック図である。FIG. 18 is a block diagram illustrating a configuration of a three-dimensional virtual space system according to Embodiment 6 of the present invention.
【図１９】 本発明の実施の形態６に係る背景音属性デ
ータの一例を示す図である。FIG. 19 is a diagram showing an example of background sound attribute data according to Embodiment 6 of the present invention.
【図２０】 本発明の実施の形態６に係る３次元仮想空
間システムの処理動作を示すフローチャートである。FIG. 20 is a flowchart showing a processing operation of the three-dimensional virtual space system according to the sixth embodiment of the present invention.
【図２１】 本発明の実施の形態６における仮想空間の
表示例を示す図である。FIG. 21 is a diagram illustrating a display example of a virtual space according to the sixth embodiment of the present invention.
【図２２】 本発明の実施の形態７に係る３次元仮想空
間システムの構成を示すブロック図である。FIG. 22 is a block diagram showing a configuration of a three-dimensional virtual space system according to Embodiment 7 of the present invention.
【図２３】 本発明の実施の形態７に係る背景音属性デ
ータに記述される属性を示す図である。FIG. 23 is a diagram showing attributes described in background sound attribute data according to Embodiment 7 of the present invention.
【図２４】 本発明の実施の形態７に係る３次元仮想空
間システムの処理動作を示すフローチャートである。FIG. 24 is a flowchart showing a processing operation of the three-dimensional virtual space system according to the seventh embodiment of the present invention.
【図２５】 本発明の実施の形態７に係る仮想空間の表
示例を示す図である。FIG. 25 is a diagram showing a display example of a virtual space according to the seventh embodiment of the present invention.
【図２６】 本発明の実施の形態８に係る３次元仮想空
間システムの構成をを示すブロック図である。FIG. 26 is a block diagram showing a configuration of a three-dimensional virtual space system according to Embodiment 8 of the present invention.
【図２７】 本発明の実施の形態８に係る背景音属性デ
ータに記述される属性を示す図である。FIG. 27 is a diagram showing attributes described in background sound attribute data according to Embodiment 8 of the present invention.
【図２８】 本発明の実施の形態８に係る背景音文字デ
ータベースに保持されるデータの一例を示す図である。FIG. 28 is a diagram showing an example of data held in a background sound character database according to Embodiment 8 of the present invention.
【図２９】 本発明の実施の形態８に係る３次元仮想空
間システムの処理動作を示すフローチャートである。FIG. 29 is a flowchart showing a processing operation of the three-dimensional virtual space system according to the eighth embodiment of the present invention.
【図３０】 本発明の実施の形態８に係る仮想空間の表
示例を示す図である。FIG. 30 is a diagram showing a display example of a virtual space according to the eighth embodiment of the present invention.
１…アプリケーション部、２…仮想空間表示装置、３…
音再生装置、４…仮想空間管理部、５…３次元仮想空間
データ管理装置、６…背景音属性データ、７…背景音管
理装置、８…再生・視覚化選択装置、９…３次元文字拡
大・縮小装置、１０…文字別音量適用装置、１１…表示
効果適用装置、１２…音長適用装置、１３…音区分適用
装置、１４…音区分データ、１５…背景音文字選択装
置、１６…背景音データベース、１７…背景音文字デー
タ、１００，２００，３００，４００．５００，６０
０，７００，８００…３次元仮想空間システムDESCRIPTION OF SYMBOLS 1 ... Application part, 2 ... Virtual space display device, 3 ...
Sound reproduction device, 4 virtual space management unit, 5 three-dimensional virtual space data management device, 6 background sound attribute data, 7 background sound management device, 8 reproduction / visualization selection device, 9 three-dimensional character enlargement · Reduction device, 10: Character volume application device, 11: Display effect application device, 12: Sound length application device, 13: Sound classification application device, 14: Sound classification data, 15: Background sound character selection device, 16: Background Sound database, 17 ... background sound character data, 100, 200, 300, 400.500, 60
0,700,800 ... 3D virtual space system
Claims (9)
次元画像を提供する３次元仮想空間システムにおいて、 前記仮想空間に提供する背景音の属性として音源位置情
報、音データ、文字情報を格納する手段と、 前記音源位置情報と音データに基づいて、前記仮想空間
の音源位置に前記背景音を再生する手段と、 前記音源位置情報と文字情報に基づいて、この文字情報
を３次元の文字列として視覚化処理する処理手段と、 前記視覚化された文字列を、前記仮想空間内の音源位置
に可視表示する表示手段とを備えることを特徴とする３
次元仮想空間システム。1. A three-dimensional virtual space created virtually.
In a three-dimensional virtual space system that provides a three-dimensional image, a unit that stores sound source position information, sound data, and character information as attributes of a background sound to be provided to the virtual space, based on the sound source position information and sound data, Means for reproducing the background sound at a sound source position in a virtual space; processing means for visualizing the character information as a three-dimensional character string based on the sound source position information and character information; and the visualized character Display means for visually displaying a row at a sound source position in the virtual space.
Dimensional virtual space system.
記文字列の可視表示のいずれかを選択する手段を備える
ことを特徴とする請求項１記載の３次元仮想空間システ
ム。2. The three-dimensional virtual space system according to claim 1, further comprising means for selecting one of reproduction of the background sound and visual display of the character string.
量情報が含まれ、前記処理手段は、前記視覚化処理の
際、この音量情報に基づいて前記文字列の拡大あるいは
縮小を行うことを特徴とする請求項１記載の３次元仮想
空間システム。3. The attribute of the background sound includes volume information of the background sound, and the processing unit enlarges or reduces the character string based on the volume information during the visualization process. The three-dimensional virtual space system according to claim 1, wherein:
応しており、前記処理手段は、前記視覚化処理の際、こ
の対応に基づいて前記各文字の拡大あるいは縮小を行う
ことを特徴とする請求項３記載の３次元仮想空間システ
ム。4. The sound volume information corresponds to each character of the character string, and the processing unit enlarges or reduces each character based on the correspondence at the time of the visualization processing. The three-dimensional virtual space system according to claim 3, wherein
前記文字列に所定の視覚効果を奏するための表示効果情
報を生成し、前記表示手段は、この表示効果情報に従っ
て、前記仮想空間内の音源位置から所定位置まで、前記
文字列を連続的に徐々に拡大して表示することを特徴と
する請求項１記載の３次元仮想空間システム。5. The processing means according to claim 1, wherein:
The display unit generates display effect information for providing a predetermined visual effect to the character string, and the display unit continuously and gradually displays the character string from a sound source position in the virtual space to a predetermined position according to the display effect information. The three-dimensional virtual space system according to claim 1, wherein the display is enlarged and displayed.
長情報が含まれ、前記処理手段は、この音長情報に基づ
いて前記表示効果情報を生成し、また、前記表示手段
は、前記文字列が、この表示効果情報の示す音長に合致
した奥行きを有するように表示することを特徴とする請
求項５記載の３次元仮想空間システム。6. The attribute of the background sound includes sound duration information of the background sound, the processing means generates the display effect information based on the sound duration information, and the display means 6. The three-dimensional virtual space system according to claim 5, wherein the character string is displayed so as to have a depth matching the sound length indicated by the display effect information.
分が含まれ、前記処理手段は、この区分に基づいて前記
文字列の各文字の色および字体が変化するよう、この文
字列を視覚化することを特徴とする請求項１記載の３次
元仮想空間システム。7. The attribute of the background sound includes a category of the background sound, and the processing unit performs processing on the character string such that a color and a font of each character of the character string change based on the category. The three-dimensional virtual space system according to claim 1, wherein:
類が含まれ、前記処理手段は、この種類に対応した背景
音文字に前記視覚化処理を施すことを特徴とする請求項
１記載の３次元仮想空間システム。8. The attribute of the background sound includes a type of the background sound, and the processing unit performs the visualization process on the background sound character corresponding to the type. 3. The three-dimensional virtual space system according to claim 1.
に登録されており、前記処理手段は、このデータベース
より選択された文字列および字体を用いて前記視覚化処
理を行うことを特徴とする請求項８記載の３次元仮想空
間システム。9. The method according to claim 8, wherein the background sound character is registered in a predetermined database, and the processing means performs the visualization process using a character string and a font selected from the database. The three-dimensional virtual space system according to claim 8, wherein
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP10034385A JPH11232488A (en) | 1998-02-17 | 1998-02-17 | Three-dimensional virtual space system |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP10034385A JPH11232488A (en) | 1998-02-17 | 1998-02-17 | Three-dimensional virtual space system |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JPH11232488A true JPH11232488A (en) | 1999-08-27 |
Family
ID=12412711
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP10034385A Pending JPH11232488A (en) | 1998-02-17 | 1998-02-17 | Three-dimensional virtual space system |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JPH11232488A (en) |
Cited By (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2004088595A1 (en) * | 2003-03-28 | 2004-10-14 | Olympus Corporation | Data authoring processing device |
| WO2005101897A1 (en) * | 2004-04-16 | 2005-10-27 | Smart Internet Technology Crc Pty Ltd | Apparatuses and methods for use in creating an audio scene |
| JP2006031665A (en) * | 2004-11-22 | 2006-02-02 | Junichi Ishihara | Sensory virtual reality space system |
| CN100356407C (en) * | 2003-03-28 | 2007-12-19 | 奥林巴斯株式会社 | Data authoring device |
| JP2010107909A (en) * | 2008-10-31 | 2010-05-13 | Sharp Corp | Display, and control method of the same |
| US11915641B2 (en) | 2021-12-15 | 2024-02-27 | Samsung Electronics Co., Ltd. | Display apparatus and controlling method thereof |
-
1998
- 1998-02-17 JP JP10034385A patent/JPH11232488A/en active Pending
Cited By (13)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7031495B2 (en) | 2003-03-28 | 2006-04-18 | Olympus Corporation | Data authoring device |
| WO2004088595A1 (en) * | 2003-03-28 | 2004-10-14 | Olympus Corporation | Data authoring processing device |
| CN100356407C (en) * | 2003-03-28 | 2007-12-19 | 奥林巴斯株式会社 | Data authoring device |
| AU2011200742B2 (en) * | 2004-04-16 | 2013-05-02 | Dolby Laboratories Licensing Corporation | Apparatuses and Methods for use in Creating an Audio Scene |
| JP2007533213A (en) * | 2004-04-16 | 2007-11-15 | スマート・インターネット・テクノロジー・シーアールシー・ピーティーワイ・リミテッド | Apparatus and method for use in generating an audio scene |
| JP4848362B2 (en) * | 2004-04-16 | 2011-12-28 | ドルビー ラボラトリーズ ライセンシング コーポレイション | Apparatus and method for use in generating an audio scene |
| KR101167058B1 (en) * | 2004-04-16 | 2012-07-30 | 스마트 인터넷 테크놀로지 씨알씨 피티와이 엘티디 | Apparatuse, method and computer-readable medium for use in creating an audio scene |
| WO2005101897A1 (en) * | 2004-04-16 | 2005-10-27 | Smart Internet Technology Crc Pty Ltd | Apparatuses and methods for use in creating an audio scene |
| AU2011200737B2 (en) * | 2004-04-16 | 2013-05-02 | Dolby Laboratories Licensing Corporation | Apparatuses and Methods for use in Creating an Audio Scene |
| US9319820B2 (en) | 2004-04-16 | 2016-04-19 | Dolby Laboratories Licensing Corporation | Apparatuses and methods for use in creating an audio scene for an avatar by utilizing weighted and unweighted audio streams attributed to plural objects |
| JP2006031665A (en) * | 2004-11-22 | 2006-02-02 | Junichi Ishihara | Sensory virtual reality space system |
| JP2010107909A (en) * | 2008-10-31 | 2010-05-13 | Sharp Corp | Display, and control method of the same |
| US11915641B2 (en) | 2021-12-15 | 2024-02-27 | Samsung Electronics Co., Ltd. | Display apparatus and controlling method thereof |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP2005149409A (en) | Image reproduction method and apparatus | |
| JP2005049668A (en) | Data converter, display device, data converting method, program and recording medium | |
| JPH11232488A (en) | Three-dimensional virtual space system | |
| JP2000322050A (en) | Image display device and image display method | |
| US20090141021A1 (en) | Method and system for providing experiential knowledge associated with spatial and temporal information | |
| JP4642431B2 (en) | Map display device, map display system, map display method and program | |
| JP2002062863A (en) | Method and device for displaying document, and recording medium in which document display program is recorded | |
| JP2004178085A (en) | Information display device, information display program, program recording medium and information display method | |
| JP2001184373A (en) | Method and system for generating drawing and computer readable recording medium stored with drawing generation program generating two-dimensional drawing from three-dimensional model data | |
| JP2609814B2 (en) | Method of displaying additional information on symbol and method of displaying additional information on symbol | |
| JP2001289663A (en) | Route guidance information provider and route guidance information providing method | |
| JPH0916315A (en) | Information retrieval system | |
| JP2004233711A (en) | Map data construction system | |
| JP2001033269A (en) | Three-dimensional road guidance image presenting method, three-dimensional guidance image presenting device and recording medium having three-dimensional guidance image presentation program recorded thereon | |
| JP5073608B2 (en) | Image output apparatus, image output method, and program | |
| JP3517119B2 (en) | Computer-aided design apparatus, computer-aided design method, and computer-readable recording medium recording computer-aided design program | |
| JPH04247572A (en) | Multimedia presentation method equipped with superimpose function | |
| JP2002312807A (en) | Image display device for game machine | |
| US20180290055A1 (en) | Rhythm game displaying method and terminal for performing the method | |
| JPH1139507A (en) | Stereoscopic image display device | |
| JP3038976B2 (en) | Caricature making device | |
| JPH11296463A (en) | Marking/redisplay method for home page using frame | |
| JP4143341B2 (en) | Image generation device | |
| JP2006201838A (en) | Image processor, program using the same device and image processing method | |
| JP2881735B1 (en) | 3D video data transfer method |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| RD01 | Notification of change of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7421 Effective date: 20040708 |