JP2001005477A - Acoustic browsing device and method therefor - Google Patents

Acoustic browsing device and method therefor

Info

Publication number
JP2001005477A
JP2001005477A JP11178628A JP17862899A JP2001005477A JP 2001005477 A JP2001005477 A JP 2001005477A JP 11178628 A JP11178628 A JP 11178628A JP 17862899 A JP17862899 A JP 17862899A JP 2001005477 A JP2001005477 A JP 2001005477A
Authority
JP
Japan
Prior art keywords
acoustic
data
sound
space
icon image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP11178628A
Other languages
Japanese (ja)
Other versions
JP3739967B2 (en
Inventor
Masao Masui
誠生 増井
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujitsu Ltd
Original Assignee
Fujitsu Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujitsu Ltd filed Critical Fujitsu Ltd
Priority to JP17862899A priority Critical patent/JP3739967B2/en
Publication of JP2001005477A publication Critical patent/JP2001005477A/en
Application granted granted Critical
Publication of JP3739967B2 publication Critical patent/JP3739967B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Landscapes

  • Processing Or Creating Images (AREA)
  • Electrophonic Musical Instruments (AREA)

Abstract

PROBLEM TO BE SOLVED: To easily reach a desired acoustic data by creating iconic images for displaying the acoustic data based on physical and sensitive acoustic featured values, and searching for the acoustic data not only by reproduction of the acoustic data but also by the iconic images. SOLUTION: Based on acoustic featured values, an acoustic space coordinate data creating part 12 creates coordinate data of acoustic data in an acoustic space to be displayed on a screen. And, to display the created acoustic space coordinate data on the screen, they are stored in an acoustic space coordinate data storage part 13, to be referred to when displayed. Next, iconic images to be displayed on the screen are created by an iconic image creating part 14 based on the acoustic featured values. And, the created iconic images for display are stored in an acoustic data storage part 11 as iconic images for displaying the acoustic data. The acoustic data are displayed on an acoustic data display part 15 while the three items of the acoustic data, the iconic images, and the acoustic space coordinate data are arranged.

Description

【発明の詳細な説明】DETAILED DESCRIPTION OF THE INVENTION

【0001】[0001]

【発明の属する技術分野】本発明は、表示装置上におい
て、音声や効果音、音楽等の大量の音響データから必要
とする音響データを取得するための音響ブラウジング装
置及び方法に関する。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a sound browsing apparatus and method for acquiring necessary sound data from a large amount of sound data such as voices, sound effects, and music on a display device.

【0002】[0002]

【従来の技術】従来から、多数の音響データの中から、
利用者の求める音響データを適切に選択し、聴覚によっ
て確認することができるシステムは存在しており、マル
チメディアのコンテンツ制作支援等の分野で活用されて
いる。
2. Description of the Related Art Conventionally, among many acoustic data,
There is a system that can appropriately select acoustic data desired by a user and confirm it by hearing, and is used in fields such as multimedia content production support.

【0003】しかし、近年の電子化技術の急速な進展に
よって、かかるシステムで取り扱うべき音響データの量
が飛躍的に増大しており、これら膨大な音響データの中
から利用者が真に欲する音響データを取捨選択すること
が困難となってきている。
[0003] However, with the rapid progress of computerization technology in recent years, the volume of audio data to be handled by such a system has been dramatically increased, and among these huge audio data, the audio data that the user truly wants is desired. It is becoming difficult to choose the right one.

【0004】かかる弊害を克服するべく、音響の空間配
置手法を活用して音響探索をすることができる音響ブラ
ウジング装置が考案されている。これは、まず短時間効
果音に対してSD(Semantic Differential Method)法
に基づく感性語評価実験を実施し、得られた評価値に対
して、因子分析による一般的手法及び自己組織化マップ
を応用した手法によって空間配置を試みているものであ
る。音響探索時には、空間音響再生を導入して、画面に
表示されている音響データアイコンを選択してクリック
することで、求める音響データを再生する。
[0004] In order to overcome such adverse effects, an acoustic browsing apparatus capable of performing an acoustic search by utilizing an acoustic spatial arrangement technique has been devised. This is done by first performing a sensitivity word evaluation experiment based on the SD (Semantic Differential Method) method for short-time sound effects, and applying a general method based on factor analysis and a self-organizing map to the obtained evaluation values. It is trying to arrange the space by the method. At the time of sound search, spatial sound reproduction is introduced, and the desired sound data is reproduced by selecting and clicking the sound data icon displayed on the screen.

【0005】[0005]

【発明が解決しようとする課題】しかし、上述した音響
ブラウジング装置においては、アイコンによって表示さ
れている音響データがどのような音響データであるかに
ついては、実際に再生してみなければ予想できず、ま
た、利用者の欲している音響データに近づきつつあるの
かないのかについての判断材料もない。したがって、利
用者が真に欲している音響データに到達するには、かな
りの熟練が必要となり、実務上活用することが困難にな
るおそれがあるという問題点があった。
However, in the above-described sound browsing apparatus, it is impossible to predict what kind of sound data the sound data displayed by the icon is without actually reproducing the sound data. Also, there is no judgment as to whether or not the sound data desired by the user is approaching. Therefore, there is a problem that considerable skill is required to reach the audio data that the user really wants, and it may be difficult to utilize the data in practical use.

【0006】本発明は、上記問題点を解決すべく、利用
者が欲している音響データがどのあたりに保存されてい
るか感覚的に判断することができ、かつ熟練を要するこ
となく、容易に欲する音響データに到達することができ
る音響ブラウジング装置及び方法を提供することを目的
とする。
According to the present invention, in order to solve the above-mentioned problems, it is possible to intuitively judge where sound data desired by a user is stored, and to easily obtain the sound data without skill. It is an object of the present invention to provide a sound browsing device and method capable of reaching sound data.

【0007】[0007]

【課題を解決するための手段】上記目的を達成するため
に本発明にかかる音響ブラウジング装置は、音響デー
タ、音響データの表示用アイコン画像、及び音響データ
の物理的な音響特徴量及び感性的な音響特徴量を保存す
る音響データ格納装置と、音響特徴量に基づいて音響空
間座標データを生成する音響空間座標データ生成装置
と、音響空間座標データを保存する音響空間座標データ
保存装置と、音響データ、アイコン画像及び音響空間座
標データに基づいて音響空間を用いて音響データの位置
を表示する音響データ表示装置と、音響空間上の座標を
指示する音響空間座標入力装置と、音響データを再生す
る音響データ再生装置とを含む音響ブラウジング装置で
あって、物理的な音響特徴量及び感性的な音響特徴量に
基づいて、音響データ表示装置に表示する音響データの
表示用アイコン画像を生成するアイコン生成装置をさら
に含み、音響データの再生による探索だけでなく、アイ
コン画像によっても、音響データを探索できることを特
徴とする。
In order to achieve the above object, an acoustic browsing apparatus according to the present invention comprises: acoustic data; an icon image for displaying acoustic data; An acoustic data storage device for storing acoustic feature data; an acoustic space coordinate data generating device for generating acoustic space coordinate data based on the acoustic feature data; an acoustic space coordinate data storage device for storing acoustic space coordinate data; , An acoustic data display device for displaying the position of acoustic data using an acoustic space based on an icon image and acoustic space coordinate data, an acoustic space coordinate input device for indicating coordinates in the acoustic space, and a sound for reproducing the acoustic data An audio browsing device including a data reproducing device, the audio browsing device based on physical and emotional acoustic features. Wherein the icon generator for generating a display icon image of the sound data to be displayed on the Display device further well search by the reproduction of the sound data, by icon image, characterized in that to explore the acoustic data.

【0008】かかる構成により、大量の音響データにつ
いて立体的に空間表示することで、音響データ相互間の
位置等を確認しながら求めるべき音響データを探索する
ことが可能となる。また、音響データの特徴量に即した
アイコン表示とすることで、再生することなく求めるべ
き音響データを探索することも可能となる。
With this configuration, a large amount of acoustic data is spatially displayed in a three-dimensional manner, so that it is possible to search for acoustic data to be obtained while confirming the position between acoustic data. In addition, by displaying the icon in accordance with the feature amount of the sound data, it is possible to search for the sound data to be obtained without reproducing.

【0009】また、本発明にかかる音響ブラウジング装
置は、音響空間において、音響空間座標入力装置で指示
された座標と音響データの座標位置との距離及び方向を
算出する立体音響再生処理装置をさらに含み、立体音響
再生処理装置は、音響空間座標入力装置で指示された座
標と音響データの座標位置との距離が一定のしきい値以
下の場合には、該当する複数の音響データを同時に混合
して再生することが好ましい。音響データを表示するア
イコンを選択することなく再生することができるため、
求めるべき音響データへ視覚的に近づくことができるか
らである。
Further, the acoustic browsing device according to the present invention further includes a stereophonic sound reproduction processing device for calculating a distance and a direction between the coordinates designated by the acoustic space coordinate input device and the coordinate position of the acoustic data in the acoustic space. When the distance between the coordinates specified by the acoustic space coordinate input device and the coordinate position of the acoustic data is equal to or less than a certain threshold, the three-dimensional acoustic reproduction processing device simultaneously mixes the corresponding plurality of acoustic data. Reproduction is preferred. Because you can play without selecting the icon that displays the sound data,
This is because it is possible to visually approach the sound data to be obtained.

【0010】また、本発明にかかる音響ブラウジング装
置は、複数の音響データについて、立体音響再生処理装
置が音響空間上で近い位置にある音響データは大きく、
離れた位置にある音響データは小さく再生し、かつ方向
に応じて音像定位させて再生することが好ましい。音響
空間上でのポインタ移動によって、動的に音響データを
探索するためである。
[0010] In the acoustic browsing apparatus according to the present invention, for a plurality of acoustic data, the acoustic data at which the three-dimensional acoustic reproduction processing apparatus is close to the acoustic space is large.
It is preferable that the acoustic data at a distant position be reproduced small and reproduced by localizing the sound image according to the direction. This is for dynamically searching for acoustic data by moving the pointer in the acoustic space.

【0011】また、本発明は、上記のような音響ブラウ
ジング装置の機能をコンピュータの処理ステップとして
実行するソフトウェアを特徴とするものであり、具体的
には、音響データ、音響データの表示用アイコン画像、
及び音響データの物理的な音響特徴量及び感性的な音響
特徴量を保存する工程と、音響特徴量に基づいて音響空
間座標データを生成する工程と、音響空間座標データを
保存する工程と、音響データ、アイコン画像及び音響空
間座標データに基づいて音響空間を用いて音響データの
位置を表示する工程と、音響空間上の座標を指示する工
程と、音響データを再生する工程とを含む音響ブラウジ
ング方法であって、物理的な音響特徴量及び感性的な音
響特徴量に基づいて、表示される音響データの表示用ア
イコン画像を生成する工程をさらに含み、音響データの
再生による探索だけでなく、アイコン画像によっても、
音響データを探索できる音響ブラウジング方法並びにそ
のような工程をプログラムとして記録したコンピュータ
読み取り可能な記録媒体であることを特徴とする。
The present invention is also characterized by software that executes the functions of the above-described sound browsing apparatus as processing steps of a computer. More specifically, the present invention relates to sound data and icon images for displaying sound data. ,
Storing a physical acoustic feature and a sensible acoustic feature of the acoustic data, generating acoustic space coordinate data based on the acoustic feature, storing acoustic space coordinate data, Acoustic browsing method including a step of displaying a position of acoustic data using an acoustic space based on data, an icon image, and acoustic space coordinate data, a step of designating coordinates in the acoustic space, and a step of reproducing the acoustic data It further comprises a step of generating a display icon image of the displayed sound data based on the physical sound feature and the sensible sound feature, and not only the search by reproducing the sound data, Depending on the image,
It is a sound browsing method capable of searching for sound data and a computer-readable recording medium that records such steps as a program.

【0012】かかる構成により、コンピュータ上へ当該
プログラムをロードさせ実行することで、大量の音響デ
ータについて立体的に空間表示することで、音響データ
相互間の位置等を確認しながら求めるべき音響データを
探索することができ、かつ、音響データの特徴量に即し
たアイコン表示とすることで、再生することなく求める
べき音響データを探索することもできる音響ブラウジン
グ装置を実現することが可能となる。
With this configuration, by loading and executing the program on a computer, a large amount of sound data is spatially displayed in a three-dimensional manner, so that the sound data to be obtained while confirming the position and the like between the sound data can be obtained. By making an icon display that can be searched and that matches the feature amount of the sound data, it is possible to realize a sound browsing device that can search for sound data to be obtained without reproducing.

【0013】[0013]

【発明の実施の形態】以下、本発明の実施の形態にかか
る音響ブラウジング装置について、図面を参照しながら
説明する。図1は本発明の実施の形態にかかる音響ブラ
ウジング装置の構成図である。図1において、11は音
響データ格納部を、12は音響空間座標データ生成部
を、13は音響空間座標データ格納部を、14はアイコ
ン画像生成部を、15は音響データ表示部を、16は音
響空間座標入力部を、17は立体音響再生処理部を、1
8は音響データ再生部を、それぞれ示す。
DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS An acoustic browsing apparatus according to an embodiment of the present invention will be described below with reference to the drawings. FIG. 1 is a configuration diagram of an acoustic browsing apparatus according to an embodiment of the present invention. In FIG. 1, 11 denotes an acoustic data storage unit, 12 denotes an acoustic space coordinate data generating unit, 13 denotes an acoustic space coordinate data storing unit, 14 denotes an icon image generating unit, 15 denotes an acoustic data display unit, and 16 denotes an acoustic data display unit. An acoustic space coordinate input unit, 17 is a stereophonic sound reproduction processing unit, and 1 is
Reference numeral 8 denotes an acoustic data reproducing unit.

【0014】図1において、音響データ格納部11に
は、音響データ自体と、当該音響データを画面に表示す
る際に使用するアイコン画像、及び当該音響データにつ
いての音響特徴量を一組として格納する。
In FIG. 1, a sound data storage unit 11 stores a set of sound data itself, an icon image used for displaying the sound data on a screen, and a sound feature amount of the sound data. .

【0015】音響特徴量とは、音響データに関する周波
数やスペクトル等の物理的な特徴量だけではなく、人が
音を聞いて感じる感性的な特徴量、例えば「快い」、
「迫力のある」、「かん高い」等の程度を示す特徴量も
意味する。
The acoustic feature is not only a physical feature such as a frequency and a spectrum related to acoustic data, but also a sensible feature which a person feels when hearing sound, for example, "pleasant".
A feature amount indicating a degree such as “powerful” or “high” is also meant.

【0016】音響特徴量に基づいて、音響空間座標デー
タ生成部12において、画面に表示すべき音響空間にお
ける当該音響データの座標データを生成する。すなわ
ち、音響空間において当該音響データがどの位置に表示
されるべきかを算出する。
On the basis of the acoustic features, the acoustic space coordinate data generating unit 12 generates coordinate data of the acoustic data in the acoustic space to be displayed on the screen. That is, the position at which the sound data should be displayed in the sound space is calculated.

【0017】具体的には、まず音響空間自体を作成しな
ければならない。音響空間を作成するためには、複数の
評価語を用いて評価尺度を構成する。例えば、感性語で
ある「大きい」、「美しい」、「澄んだ」等の評価語を
用いて、様々な音響についてどの程度の寄与率を有する
のかを評価する。ここで寄与率とは、相関行列から得ら
れる固有値の総和に対する各固有値の比率を意味し、寄
与率の評価自体は評価者自身の感性に基づいて評価され
る。したがって、寄与率が高いほど、当該評価語に近い
感性を有する音響であると判断できる。
Specifically, the acoustic space itself must be created first. In order to create an acoustic space, an evaluation scale is configured using a plurality of evaluation words. For example, using the evaluation words such as “loud”, “beautiful”, and “clear” which are sensibility words, the degree of contribution of various sounds is evaluated. Here, the contribution rate means the ratio of each eigenvalue to the sum of eigenvalues obtained from the correlation matrix, and the evaluation of the contribution rate itself is evaluated based on the evaluator's own sensitivity. Therefore, it can be determined that the higher the contribution ratio is, the more the sound has a sensitivity closer to the evaluation word.

【0018】ただ、このままでは、評価語の数が多いと
それだけ評価次元が高次となるので、表示を簡単にする
ために分析するための因子となりうる感性量を決定し
て、各評価語ごとの因子分析を行う。したがって、n個
の評価語を用いた音響データを数個の因子で構成される
空間上に写像させることが可能となる。
However, if the number of evaluation words is large, the evaluation dimension becomes higher as the number of evaluation words increases. Therefore, the amount of sensitivity which can be a factor for analysis to simplify the display is determined, and each evaluation word is determined. Perform factor analysis. Therefore, it is possible to map acoustic data using n evaluation words onto a space composed of several factors.

【0019】次に、各評価語についての因子分析を行っ
て、因子ごとの負荷量を算出することで、各因子を軸と
した音響空間上のどの位置に当該音響データが位置する
のか求めることができる。本実施の形態においては、因
子を3つとしていることから、三次元空間座標に表示す
ることが可能となる。
Next, by performing factor analysis on each evaluation word and calculating the load amount for each factor, it is possible to determine at which position in the acoustic space the respective acoustic data is located with each factor as an axis. Can be. In the present embodiment, since there are three factors, it is possible to display in three-dimensional space coordinates.

【0020】例えば、第1因子軸を右方向、第2因子軸
を上方向、第3因子軸を前方向とする右手基準系での配
置を考えると、因子軸の座標値を手がかりとして評価対
象となる音響データを探索することが可能となる。
For example, considering an arrangement in a right-handed reference system in which the first factor axis is in the right direction, the second factor axis is in the upward direction, and the third factor axis is in the forward direction, the evaluation target is obtained using the coordinate values of the factor axes as clues. Can be searched for.

【0021】なお、ここでは因子分析を用いた音響空間
作成について説明したが、特にこれに限定されるもので
はなく、例えば二次元空間として音響データ分布を表示
しておき、音響データの作成日付等のナビゲーション軸
を一つ加えることで擬似的に三次元空間を生成する方法
でも良い。
Here, the creation of the acoustic space using the factor analysis has been described. However, the present invention is not particularly limited to this. For example, the acoustic data distribution is displayed as a two-dimensional space, and the creation date of the acoustic data is displayed. Alternatively, a method of generating a pseudo three-dimensional space by adding one navigation axis may be used.

【0022】そして、音響空間座標データ生成部12で
生成された音響空間座標データは、画面に表示するべく
音響空間座標データ格納部13に格納され、音響データ
を画面に表示する際に参照される。また、音響データの
再生時においても、再生すべき音響データの選定及び再
生音量の大小を決定する際に参照される。なお、本実施
の形態においては音響空間座標データと音響データを別
々に格納しているが、別々に格納せずに同一のデータベ
ースに格納しても良い。
The acoustic space coordinate data generated by the acoustic space coordinate data generating unit 12 is stored in the acoustic space coordinate data storage unit 13 to be displayed on the screen, and is referred to when displaying the acoustic data on the screen. . Also at the time of reproducing the sound data, the sound data is referred to when selecting the sound data to be reproduced and determining the volume of the reproduction sound. In the present embodiment, the acoustic space coordinate data and the acoustic data are stored separately, but may be stored in the same database without separately storing them.

【0023】次に、画面に表示すべきアイコン画像は、
音響特徴量に基づいてアイコン画像生成部14において
自動生成される。具体的には、物理的な特徴量及び感性
的な特徴量が、アイコン画像によって感覚的に把握でき
るようなアイコン表示とする。
Next, the icon image to be displayed on the screen is
It is automatically generated by the icon image generation unit 14 based on the acoustic feature amount. Specifically, an icon is displayed so that the physical feature amount and the sensible feature amount can be intuitively grasped by the icon image.

【0024】本実施の形態においては、3×3の正方形
を基調としたアイコン画像の生成を示している。まず感
性的な特徴量に基づいてアイコン画像の背景配色を決定
する。すなわち、表示対象となる音響データを表す主要
な感性パラメータを3つ選択し、かかる感性パラメータ
について、評価者の感性に基づき、音の特性をイメージ
できる色を用いて、3色の配色パターンを決定する。そ
して、配色パターンの順序を変更することなく3段階に
表示する。
In the present embodiment, generation of an icon image based on a 3 × 3 square is shown. First, the background color of the icon image is determined based on the sensible feature amount. That is, three main kansei parameters representing the acoustic data to be displayed are selected, and three color arrangement patterns are determined for the kansei parameters based on the kansei of the evaluator using colors that can image the characteristics of the sound. I do. Then, the color arrangement patterns are displayed in three stages without changing the order.

【0025】例えば、ある音響データについて、代表す
る感性パラメータが「かん高い」、「迫力のある」、
「やかましい」の3つであったとすると、各々の感性パ
ラメータについて3色の配色パターンを決定する。例え
ば、「かん高い」という感性パラメータについては
「青」、「黄」、「赤紫」、「迫力のある」という感性
パラメータについては「赤」、「金」、「深緑」、「か
ん高い」という感性パラメータについては「赤」、
「黄」、「緑」というように一義的に配色を決定する。
For example, with respect to certain acoustic data, representative sensibility parameters are “high”, “powerful”,
If there are three “noisy”, three color arrangement patterns are determined for each sensitivity parameter. For example, the sensitivity parameter of "high" is "blue", "yellow", "reddish purple", and the sensitivity parameter of "powerful" is "red", "gold", "dark green", "high""Red" for the parameter,
The color scheme is uniquely determined, such as "yellow" or "green".

【0026】次に、物理的な特徴量に基づいて、音響デ
ータの振幅パターンを描画し、スペクトル分布に応じて
その描画位置を上下させて表示する。例えば、ある音響
データについて、その振幅パターンは「なめらかな減
衰」パターンであり、そのスペクトル分布は中域である
場合には、図2のような表示となる。これに感性的な特
徴量に基づいて決定された背景の配色パターンを重ね合
わせることで、図3のような表示アイコンが完成する。
Next, the amplitude pattern of the sound data is drawn based on the physical feature amount, and the drawing position is displayed up and down according to the spectrum distribution. For example, for certain acoustic data, if the amplitude pattern is a “smooth attenuation” pattern and its spectral distribution is in the middle range, the display is as shown in FIG. A display icon as shown in FIG. 3 is completed by superimposing a color scheme of the background determined based on the sensible feature amount.

【0027】かかる表示アイコンとすることで、以下の
メリットを享受することができる。すなわち、まず代表
される感性パラメータが類似している音響データについ
ては、音響空間上近い位置に配置されることになり、感
性が近似している音響データを連続して検索することが
可能となる。また、アイコンの背景色から実際に音響デ
ータを再生しなくても音響データの特徴が類推できるこ
とから、求めるべき音響データが音響空間上どの当たり
の位置に存在するのか見当をつけやすい。
By using such display icons, the following advantages can be enjoyed. That is, first, the sound data whose representative sensibility parameters are similar are arranged at a position close to the sound space, and it is possible to continuously search for the sound data having similar sensibility. . Further, since the characteristics of the sound data can be inferred from the background color of the icon without actually reproducing the sound data, it is easy to find a position in the sound space where the sound data to be obtained is located.

【0028】なお、アイコン画像生成部14で生成され
た表示用アイコン画像は音響データ格納部11において
当該音響データを表示するアイコン画像として格納され
る。
The display icon image generated by the icon image generation unit 14 is stored in the audio data storage unit 11 as an icon image for displaying the audio data.

【0029】音響データ、アイコン画像、音響空間座標
データの3つが整えば、当該音響データを音響データ表
示部15において表示することができる。音響データ表
示部では、例えば図4に示すような音響空間上にアイコ
ン画像生成部14において生成したアイコンを表示する
ことで、音響データの存在する位置を確認することがで
きるとともに、音響データを探索することができる。な
お、図4においては新たに生成されたアイコンを用いて
表示されていないが、実際には図4で楕円形状に表示さ
れているアイコンが図3のようなアイコンに置換されて
表示される。
When the three items of sound data, icon image, and sound space coordinate data are prepared, the sound data can be displayed on the sound data display unit 15. In the sound data display unit, for example, by displaying the icon generated by the icon image generation unit 14 on the sound space as shown in FIG. 4, the position where the sound data exists can be confirmed, and the sound data can be searched. can do. In FIG. 4, the icon is not displayed using the newly generated icon. However, the icon displayed in an elliptical shape in FIG. 4 is replaced with the icon shown in FIG. 3 and displayed.

【0030】利用者が音響データを再生する場合には、
従来は表示されている音響データのアイコンを選択し
て、一つ一つ再生していく必要があった。本実施の形態
においては、まず利用者は音響空間座標入力部16から
音響空間座標を指定する。入力にはキーボード等の入力
媒体による数値入力でも良いが、一般にはマウス等の入
力媒体によるポインタ入力が主流である。
When a user reproduces sound data,
Conventionally, it was necessary to select the displayed sound data icons and reproduce them one by one. In the present embodiment, the user first specifies acoustic space coordinates from the acoustic space coordinate input unit 16. The input may be a numerical input using an input medium such as a keyboard, but generally a pointer input using an input medium such as a mouse is mainstream.

【0031】音響空間座標入力部16から音響空間座標
が入力されたら、立体音響再生処理部17において、入
力された空間座標と音響データの有する音響空間座標と
を対比して、入力された空間座標と一定のしきい値以下
の距離にある音響データを再生し、かつその距離の大小
に応じて再生音量を上下させる。
When the acoustic space coordinates are inputted from the acoustic space coordinate input unit 16, the inputted spatial coordinates are compared in the stereophonic sound reproduction processing unit 17 by comparing the inputted spatial coordinates with the acoustic space coordinates of the acoustic data. And reproduces sound data at a distance equal to or less than a certain threshold value, and raises or lowers the reproduction volume according to the magnitude of the distance.

【0032】そして、音響データ再生部18において、
入力された音響空間座標に応じた音響データを再生する
ことが可能となる。この場合、マウス等を連続的に移動
させれば、再生すべき音響データも連続して変化する。
すなわち、再生される音響データの音量が変化したり、
同時に再生される音響データが増減したり、あるいは再
生される音響データが変更される。
Then, in the sound data reproducing unit 18,
It becomes possible to reproduce sound data corresponding to the input sound space coordinates. In this case, if the mouse or the like is continuously moved, the sound data to be reproduced also changes continuously.
That is, the volume of the reproduced sound data changes,
At the same time, the sound data to be reproduced is increased or decreased, or the sound data to be reproduced is changed.

【0033】なお、再生された合成音を新たな音響デー
タとして音響データ格納部11へ保存することも可能で
ある。この場合、利用者が選択して保存することもでき
るし、自動的に保存することもできる。
The reproduced synthesized sound can be stored in the acoustic data storage unit 11 as new acoustic data. In this case, the user can select and save, or can save automatically.

【0034】次に、本発明の実施例にかかる音響ブラウ
ジング装置について、図面を参照しながら説明する。図
5に本発明の実施例にかかる音響ブラウジング装置の構
成図を示す。図5において、51は音響データ格納装置
を、52は音響空間座標データ生成装置を、53は音響
空間座標データ格納装置を、54はアイコン生成装置
を、55はCRTを、56は入力装置を、57は立体音
響再生装置を、58は音響再生装置を、それぞれ示す。
Next, an acoustic browsing apparatus according to an embodiment of the present invention will be described with reference to the drawings. FIG. 5 shows a configuration diagram of the acoustic browsing apparatus according to the embodiment of the present invention. In FIG. 5, 51 is an acoustic data storage device, 52 is an acoustic space coordinate data generation device, 53 is an acoustic space coordinate data storage device, 54 is an icon generation device, 55 is a CRT, 56 is an input device, Reference numeral 57 denotes a three-dimensional sound reproduction device, and 58 denotes a sound reproduction device.

【0035】図5は、基本的に図1と同様の構成である
が、入力装置56にはキーボードやマウス等の入力媒体
を、音響再生装置58にはサウンドボードを経由したス
ピーカやヘッドホンを用いている。入力装置56によっ
て、CRT55に表示されている音響空間の視点移動操
作を行うことができ、リアルタイムで音響空間表示を変
化させることができる。
FIG. 5 is basically the same as that of FIG. 1, except that an input device 56 uses an input medium such as a keyboard and a mouse, and a sound reproducing device 58 uses speakers and headphones via a sound board. ing. With the input device 56, a viewpoint moving operation of the acoustic space displayed on the CRT 55 can be performed, and the acoustic space display can be changed in real time.

【0036】図5において、音響データ格納装置51に
は、音響データ自体と、当該音響データを画面に表示す
る際に使用するアイコン画像、及び当該音響データにつ
いての音響特徴量を一組として格納する。
In FIG. 5, the acoustic data storage device 51 stores the acoustic data itself, an icon image used when displaying the acoustic data on the screen, and an acoustic feature amount of the acoustic data as a set. .

【0037】音響特徴量に基づいて、音響空間座標デー
タ生成装置52において、画面に表示すべき音響空間に
おける当該音響データの座標データを生成する。すなわ
ち、音響空間において当該音響データがどの位置に表示
されるべきかを算出する。
Based on the acoustic features, the acoustic space coordinate data generating device 52 generates coordinate data of the acoustic data in the acoustic space to be displayed on the screen. That is, the position at which the sound data should be displayed in the sound space is calculated.

【0038】本実施例においては、音響空間を作成する
べく、感性語である「大きい」、「美しい」、「澄ん
だ」等の評価語を用いて、因子分析によって因子負荷量
を求めている。音響空間の軸となるべき第1、第2、第
3の因子をなるべく少数の評価変数によって説明できる
ように、換言すれば少数の評価変数がなるべく3つの因
子軸に重なるようにバリマックス回転を行う。本実施例
における評価値に対する因子分析の結果として、元々の
因子負荷量とバリマックス回転後の因子負荷量を(表
1)に示す。
In this embodiment, in order to create an acoustic space, factor loads are obtained by factor analysis using evaluation words such as "large", "beautiful", and "clear", which are sensitivity words. . The varimax rotation is performed so that the first, second, and third factors to be axes of the acoustic space can be described by as few evaluation variables as possible, in other words, so that a small number of evaluation variables overlap as many as three factor axes. Do. As a result of the factor analysis for the evaluation value in the present embodiment, the original factor loading and the factor loading after varimax rotation are shown in (Table 1).

【0039】[0039]

【表1】 [Table 1]

【0040】このように因子分析を行った上で、第1因
子軸を右方向、第2因子軸を上方向、第3因子軸を前方
向とする右手基準系での配置を考えると、因子軸の座標
値を手がかりとして評価対象となる音響データを探索す
ることが可能となる。
After performing the factor analysis in this way, considering the arrangement in a right-handed reference system in which the first factor axis is to the right, the second factor axis is to the upper direction, and the third factor axis is to the front, It is possible to search for acoustic data to be evaluated using the coordinate values of the axes as clues.

【0041】そして、音響空間座標データ生成装置52
で生成された音響空間座標データは、画面に表示するべ
く音響空間座標データ格納装置53に格納され、音響デ
ータを画面に表示する際に参照される。また、音響デー
タの再生時においても、再生すべき音響データの選定及
び再生音量の大小を決定する際に参照される。
The acoustic space coordinate data generating device 52
Are stored in the acoustic space coordinate data storage device 53 to be displayed on the screen, and are referred to when displaying the acoustic data on the screen. Also at the time of reproducing the sound data, the sound data is referred to when selecting the sound data to be reproduced and determining the volume of the reproduction sound.

【0042】次に、画面に表示すべきアイコン画像は、
音響特徴量に基づいてアイコン生成装置54において自
動生成される。具体的には、物理的な特徴量及び感性的
な特徴量が、アイコン画像によって感覚的に把握できる
ようなアイコン表示とする。
Next, the icon image to be displayed on the screen is
The icon is automatically generated by the icon generation device 54 based on the acoustic feature amount. Specifically, an icon is displayed so that the physical feature amount and the sensible feature amount can be intuitively grasped by the icon image.

【0043】本実施例においても、3×3の正方形を基
調としたアイコン画像を生成し、各音響データごとに図
3に示すようなアイコン画像を一義的に生成する。
Also in this embodiment, an icon image based on a 3 × 3 square is generated, and an icon image as shown in FIG. 3 is uniquely generated for each sound data.

【0044】かかる表示アイコンとすることで、代表さ
れる感性パラメータが類似している音響データについて
は、音響空間上近い位置に配置されることになり、感性
が一致している音響データを連続して検索することが可
能となる。また、アイコンの背景色から実際に音響デー
タを再生しなくても音響データの特徴が類推できること
から、求めるべき音響データが音響空間上どの当たりの
位置に存在するのか見当をつけやすい。
With such a display icon, sound data having similar sensibility parameters are arranged at a position close to the sound space, and sound data having the same sensibility are continuously displayed. Search. Further, since the characteristics of the sound data can be inferred from the background color of the icon without actually reproducing the sound data, it is easy to find a position in the sound space where the sound data to be obtained is located.

【0045】なお、アイコン生成装置54で生成された
表示用アイコン画像は音響データ格納装置51において
当該音響データを音響空間上で表示する際に使用するア
イコン画像として格納される。
The display icon image generated by the icon generation device 54 is stored in the audio data storage device 51 as an icon image used when displaying the audio data in the audio space.

【0046】音響データ、アイコン画像、音響空間座標
データの3つが整えば、当該音響データをCRT55に
おいて表示することができる。CRT55では、例えば
図4に示すような音響空間上にアイコン生成装置54に
おいて生成したアイコン画像を用いて表示することで、
音響データの存在する位置を確認することができるとと
もに、音響データを探索することができる。なお、図4
においては新たに生成されたアイコンを用いて表示され
ていないが、実際には図4で楕円形状に表示されている
アイコンが図3のようなアイコンに置換されて表示され
る。
When the three items of sound data, icon image and sound space coordinate data are prepared, the sound data can be displayed on the CRT 55. In the CRT 55, for example, by using an icon image generated by the icon generation device 54 in an acoustic space as shown in FIG.
It is possible to confirm the position where the sound data exists, and to search for the sound data. FIG.
Is not displayed using the newly generated icon, but the icon displayed in an elliptical shape in FIG. 4 is actually replaced with an icon as shown in FIG. 3 and displayed.

【0047】利用者は、まず入力装置56から再生した
い音響空間座標を指定する。入力にはキーボード等の入
力媒体による数値入力でも良いが、一般にはマウス等の
入力媒体によるポインタ入力が主流である。
The user first specifies the acoustic space coordinates to be reproduced from the input device 56. The input may be a numerical input using an input medium such as a keyboard, but generally a pointer input using an input medium such as a mouse is mainstream.

【0048】入力装置56から音響空間座標が入力され
たら、立体音響再生処理装置57において、入力された
空間座標と音響データの有する音響空間座標とを対比し
て、入力された空間座標と一定のしきい値以下の距離に
ある音響データを再生し、かつその距離の大小に応じて
再生音量を上下させる。
When the sound space coordinates are input from the input device 56, the three-dimensional sound reproduction processing device 57 compares the input space coordinates with the sound space coordinates of the sound data so that the input space coordinates are fixed. The sound data at a distance equal to or less than the threshold value is reproduced, and the reproduction volume is increased or decreased according to the magnitude of the distance.

【0049】そして、音響データ再生装置58におい
て、入力された音響空間座標に応じた音響データを再生
することが可能となる。具体的には、サウンドボード等
が設置されており、接続されたスピーカやヘッドホンを
通じて再生された音響データを聞くことができる。な
お、マウス等を連続的に移動させれば、再生すべき音響
データも連続して変化する。すなわち、再生される音響
データの音量が変化したり、同時に再生される音響デー
タが増減したり、あるいは再生される音響データが変更
される。
The sound data reproducing device 58 can reproduce sound data corresponding to the input sound space coordinates. Specifically, a sound board or the like is provided, and the user can listen to the reproduced sound data through the connected speakers or headphones. If the mouse or the like is continuously moved, the sound data to be reproduced also changes continuously. That is, the volume of the reproduced audio data changes, the amount of the reproduced audio data increases / decreases, or the reproduced audio data changes.

【0050】以上のように本実施の形態によれば、大量
の音響データについて立体的に空間表示することで、音
響データ相互間の位置等を確認しながら求めるべき音響
データを探索することが可能となる。また、音響データ
の特徴量に即したアイコン表示とすることで、再生する
ことなく求めるべき音響データを探索することも可能と
なる。
As described above, according to the present embodiment, it is possible to search for the sound data to be obtained while confirming the position between the sound data by spatially displaying a large amount of sound data in a three-dimensional manner. Becomes In addition, by displaying the icon in accordance with the feature amount of the sound data, it is possible to search for the sound data to be obtained without reproducing.

【0051】本実施の形態にかかる音響ブラウジング装
置は応用範囲が広範であり、様々な分野においてその適
用実施例が考えられる。主たる適用例としては以下の実
施例が考えられる。
The acoustic browsing apparatus according to the present embodiment has a wide range of application, and examples of application in various fields are conceivable. The following embodiments can be considered as main application examples.

【0052】まず、音響データの編集ツールとしての使
用が考えられる。これは、数値化が困難である人間の感
性を音響データ編集において反映させるものであり、編
集対象となる音響データに対して、各々の因子軸の値を
スライダ操作やマウスによる操作等によって変化させな
がら、利用者の感性に合致した音響データへと編集して
いくことが可能となる。
First, use as an audio data editing tool is conceivable. This reflects the human sensibility, which is difficult to quantify, in the audio data editing, and changes the value of each factor axis for the audio data to be edited by slider operation, mouse operation, etc. However, it is possible to edit sound data that matches the user's sensitivity.

【0053】また、音響データを混合して新たな音響素
材を生成する用途に用いることもできる。これは、特定
の音響データを他の音響データと重ね合わせることによ
って、音響データをなめらかに変化させながら再生する
ことを可能とする。
The present invention can also be used for generating a new sound material by mixing sound data. This makes it possible to reproduce the sound data while smoothly changing the sound data by overlapping the specific sound data with other sound data.

【0054】さらに、音響空間の設計支援ツールとして
活用することも可能である。例えば、ホールや演奏会場
の設計において、音響の吸収素材や反射素材の使用比率
や使用位置によって、音響データがどのように変化して
聞こえるのか容易にシミュレーションを行うことが期待
できる。
Further, it can be used as a design support tool for an acoustic space. For example, in the design of a hall or a performance hall, it is expected that a simulation can be easily performed on how sound data changes and sounds depending on the use ratio and use position of a sound absorbing material or a reflecting material.

【0055】次に、本発明の実施の形態にかかる音響ブ
ラウジング装置を実現するプログラムの処理の流れにつ
いて説明する。図6に本発明の実施の形態にかかる音響
ブラウジング装置を実現するプログラムの処理の流れ図
を示す。
Next, a description will be given of a flow of processing of a program for realizing the acoustic browsing apparatus according to the embodiment of the present invention. FIG. 6 shows a flowchart of processing of a program for realizing the acoustic browsing apparatus according to the embodiment of the present invention.

【0056】図6において、まず音響空間を生成するべ
く、既存の各音響データについて、その感性的又は物理
的な音響特徴量を確定する(ステップS601)。そし
て、音響空間座標データを生成・保存すると共に(ステ
ップS602)、音響特徴量に基づいた表示用のアイコ
ン画像を生成する(ステップS603)。そして、画面
上に音響空間を表示すると共に、各音響データについて
もアイコン画像によってその位置を表示する(ステップ
S604)。
In FIG. 6, first, in order to generate an acoustic space, sensible or physical acoustic features are determined for each existing acoustic data (step S601). Then, acoustic space coordinate data is generated and stored (step S602), and an icon image for display is generated based on the acoustic feature amount (step S603). Then, the sound space is displayed on the screen, and the position of each sound data is displayed by an icon image (step S604).

【0057】次に、音響空間座標をマウス等から入力す
る(ステップS605)。入力した音響空間座標の近傍
に音響データが存在する場合には(ステップS606:
Yes)該当する音響データが複数個存在するか否か判
断する(ステップS607)。
Next, the acoustic space coordinates are input from a mouse or the like (step S605). If acoustic data exists near the input acoustic space coordinates (step S606:
Yes) It is determined whether or not there are a plurality of corresponding sound data (step S607).

【0058】該当する音響データが複数個存在する場合
には(ステップS607:Yes)、再生すべき音響デ
ータを特定すると共に、入力座標と該当する音響データ
との距離と方向に応じた再生音量と定位を確定する(ス
テップS608)。そして、音響データをスピーカ等を
通じて再生する(ステップS609)。
When there are a plurality of corresponding sound data (step S607: Yes), the sound data to be reproduced is specified, and the reproduction sound volume corresponding to the distance and direction between the input coordinates and the corresponding sound data is determined. The localization is determined (step S608). Then, the sound data is reproduced through a speaker or the like (step S609).

【0059】本発明の実施の形態にかかる音響ブラウジ
ング装置を実現するプログラムを記憶した記録媒体は、
図7に示す記録媒体の例に示すように、CD−ROM7
2−1やフロッピーディスク72−2等の可搬型記録媒
体72だけでなく、通信回線の先に備えられた他の記憶
装置71や、コンピュータ73のハードディスクやRA
M等の記録媒体74のいずれでも良く、プログラム実行
時には、プログラムはローディングされ、主メモリ上で
実行される。
A recording medium storing a program for realizing the acoustic browsing apparatus according to the embodiment of the present invention is:
As shown in the example of the recording medium shown in FIG.
Not only a portable recording medium 72 such as a 2-1 and a floppy disk 72-2, but also another storage device 71 provided at the end of a communication line, and a hard disk or RA of a computer 73
Any of the recording media 74 such as M may be used. When the program is executed, the program is loaded and executed on the main memory.

【0060】また、本発明の実施の形態にかかる音響ブ
ラウジング装置により生成された音響データの空間座標
等を記録した記録媒体も、図7に示す記録媒体の例に示
すように、CD−ROM72−1やフロッピーディスク
72−2等の可搬型記録媒体72だけでなく、通信回線
の先に備えられた他の記憶装置71や、コンピュータ7
3のハードディスクやRAM等の記録媒体74のいずれ
でも良く、例えば本発明にかかる音響ブラウジング装置
を利用する際にコンピュータ73により読み取られる。
A recording medium that records the spatial coordinates of the acoustic data generated by the acoustic browsing apparatus according to the embodiment of the present invention is also a CD-ROM 72-, as shown in the example of the recording medium shown in FIG. 1 or a floppy disk 72-2, as well as another storage device 71 provided at the end of the communication line,
3 may be any of the recording media 74 such as a hard disk and a RAM.

【0061】[0061]

【発明の効果】以上のように本発明にかかる音響ブラウ
ジング装置によれば、大量の音響データについて立体的
に空間表示することで、音響データ相互間の位置等を確
認しながら求めるべき音響データを探索することが可能
となる。また、音響データの特徴量に即したアイコン表
示とすることで、再生することなく求めるべき音響デー
タを探索することも可能となる。
As described above, according to the sound browsing apparatus according to the present invention, a large amount of sound data is spatially displayed three-dimensionally, so that the sound data to be obtained while confirming the position and the like between the sound data can be obtained. It becomes possible to search. In addition, by displaying the icon in accordance with the feature amount of the sound data, it is possible to search for the sound data to be obtained without reproducing.

【図面の簡単な説明】[Brief description of the drawings]

【図1】 本発明の実施の形態にかかる音響ブラウジン
グ装置の構成図
FIG. 1 is a configuration diagram of an acoustic browsing apparatus according to an embodiment of the present invention.

【図2】 本発明の実施の形態にかかる音響ブラウジン
グ装置における表示アイコンの説明図
FIG. 2 is an explanatory diagram of display icons in the acoustic browsing device according to the embodiment of the present invention.

【図3】 本発明の実施の形態にかかる音響ブラウジン
グ装置における表示アイコンの説明図
FIG. 3 is an explanatory diagram of display icons in the acoustic browsing device according to the embodiment of the present invention.

【図4】 本発明の実施の形態にかかる音響ブラウジン
グ装置における音響空間表示の例示図
FIG. 4 is an exemplary view showing an acoustic space display in the acoustic browsing apparatus according to the embodiment of the present invention;

【図5】 本発明の実施例にかかる音響ブラウジング装
置の構成図
FIG. 5 is a configuration diagram of an acoustic browsing apparatus according to an embodiment of the present invention.

【図6】 本発明の実施の形態にかかる音響ブラウジン
グ装置における処理の流れ図
FIG. 6 is a flowchart of processing in the acoustic browsing apparatus according to the embodiment of the present invention.

【図7】 記録媒体の例示図FIG. 7 is an exemplary diagram of a recording medium.

【符号の説明】[Explanation of symbols]

11 音響データ格納部 12 音響空間座標データ生成部 13 音響空間座標データ格納部 14 アイコン画像生成部 15 音響データ表示部 16 音響空間座標入力部 17 立体音響再生処理部 18 音響データ再生部 51 音響データ格納装置 52 音響空間座標データ生成装置 53 音響空間座標データ格納装置 54 アイコン生成装置 55 CRT 56 入力装置 57 立体音響処理装置 58 音響再生装置 71 回線先の記憶装置 72 CD−ROMやフロッピーディスク等の可搬型記
録媒体 72−1 CD−ROM 72−2 フロッピーディスク 73 コンピュータ 74 コンピュータ上のRAM/ハードディスク等の記
録媒体
DESCRIPTION OF SYMBOLS 11 Acoustic data storage unit 12 Acoustic space coordinate data generation unit 13 Acoustic space coordinate data storage unit 14 Icon image generation unit 15 Acoustic data display unit 16 Acoustic space coordinate input unit 17 Stereophonic sound reproduction processing unit 18 Acoustic data reproduction unit 51 Acoustic data storage Device 52 Acoustic space coordinate data generation device 53 Acoustic space coordinate data storage device 54 Icon generation device 55 CRT 56 Input device 57 Stereophonic sound processing device 58 Sound reproduction device 71 Line storage device 72 Portable type such as CD-ROM or floppy disk Recording medium 72-1 CD-ROM 72-2 Floppy disk 73 Computer 74 Recording medium such as RAM / hard disk on computer

───────────────────────────────────────────────────── フロントページの続き Fターム(参考) 5D045 AA01 AB01 AB12 5D378 KK15 KK50 TT12 TT16 TT23 TT35 XX43 9A001 BB01 BB03 BB04 DD13 FF03 GG05 HH15 HH16 HH17 HH18 HH28 HH29 HH30 HH31 HH32 JJ19 JJ50 KK31 KK37 KK43 ──────────────────────────────────────────────────続 き Continued on the front page F-term (reference)

Claims (5)

【特許請求の範囲】[Claims] 【請求項1】 音響データ、前記音響データの表示用ア
イコン画像、及び前記音響データの物理的な音響特徴量
及び感性的な音響特徴量を保存する音響データ格納装置
と、 前記音響特徴量に基づいて音響空間座標データを生成す
る音響空間座標データ生成装置と、 前記音響空間座標データを保存する音響空間座標データ
保存装置と、 前記音響データ、前記アイコン画像及び前記音響空間座
標データに基づいて音響空間を用いて音響データの位置
を表示する音響データ表示装置と、 音響空間上の座標を指示する音響空間座標入力装置と、 前記音響データを再生する音響データ再生装置とを含む
音響ブラウジング装置であって、 前記物理的な音響特徴量及び前記感性的な音響特徴量に
基づいて、前記音響データ表示装置に表示する前記音響
データの表示用アイコン画像を生成するアイコン生成装
置をさらに含み、 前記音響データの再生による探索だけでなく、前記アイ
コン画像によっても、音響データを探索できることを特
徴とした音響ブラウジング装置。
1. An acoustic data storage device for storing acoustic data, an icon image for displaying the acoustic data, and a physical acoustic feature and a sensible acoustic feature of the acoustic data, based on the acoustic feature. An acoustic space coordinate data generating device for generating acoustic space coordinate data, an acoustic space coordinate data storage device for storing the acoustic space coordinate data, and an acoustic space based on the acoustic data, the icon image, and the acoustic space coordinate data. An acoustic browsing apparatus including: an acoustic data display device that displays a position of acoustic data using the audio data; an acoustic space coordinate input device that indicates coordinates in an acoustic space; and an acoustic data reproducing device that reproduces the acoustic data. The sound data to be displayed on the sound data display device based on the physical sound feature and the sensible sound feature. An acoustic browsing apparatus further comprising: an icon generation device that generates an icon image for displaying the data, wherein the audio data can be searched not only by the reproduction of the audio data but also by the icon image.
【請求項2】 前記音響空間において、前記音響空間座
標入力装置で指示された座標と前記音響データの座標位
置との距離及び方向を算出する立体音響再生処理装置を
さらに含み、 前記立体音響再生処理装置は、前記音響空間座標入力装
置で指示された座標と前記音響データの座標位置との距
離が一定のしきい値以下の場合には、該当する複数の前
記音響データを同時に混合して再生する請求項1記載の
音響ブラウジング装置。
2. The stereophonic sound reproduction processing apparatus further comprising: a stereophonic sound reproduction processing device that calculates a distance and a direction between coordinates designated by the sound space coordinate input device and a coordinate position of the sound data in the acoustic space. When the distance between the coordinates specified by the acoustic space coordinate input device and the coordinate position of the acoustic data is equal to or smaller than a certain threshold, the apparatus simultaneously reproduces the corresponding plurality of acoustic data. The acoustic browsing device according to claim 1.
【請求項3】 複数の前記音響データについて、前記立
体音響再生処理装置が前記音響空間上で近い位置にある
前記音響データは大きく、離れた位置にある前記音響デ
ータは小さく再生し、かつ方向に応じて音像定位させて
再生する請求項2記載の音響ブラウジング装置。
3. The sound data in which the three-dimensional sound reproduction processing device is close to the sound space in the sound space is large, and the sound data in a distant position is small, and the sound data is small in the direction. 3. The acoustic browsing device according to claim 2, wherein the sound browsing is performed by localizing the sound image accordingly.
【請求項4】 音響データ、前記音響データの表示用ア
イコン画像、及び前記音響データの物理的な音響特徴量
及び感性的な音響特徴量を保存する工程と、 前記音響特徴量に基づいて音響空間座標データを生成す
る工程と、 前記音響空間座標データを保存する工程と、 前記音響データ、前記アイコン画像及び前記音響空間座
標データに基づいて音響空間を用いて音響データの位置
を表示する工程と、 音響空間上の座標を指示する工程と、 前記音響データを再生する工程とを含む音響ブラウジン
グ方法であって、 前記物理的な音響特徴量及び前記感性的な音響特徴量に
基づいて、表示される前記音響データの表示用アイコン
画像を生成する工程をさらに含み、 前記音響データの再生による探索だけでなく、前記アイ
コン画像によっても、音響データを探索できることを特
徴とする音響ブラウジング方法。
4. A step of storing acoustic data, an icon image for displaying the acoustic data, and physical and emotional acoustic features of the acoustic data, and an acoustic space based on the acoustic features. Generating coordinate data, storing the acoustic space coordinate data, displaying the position of the acoustic data using an acoustic space based on the acoustic data, the icon image and the acoustic space coordinate data, A sound browsing method including a step of designating coordinates in a sound space, and a step of reproducing the sound data, wherein the sound browsing is performed based on the physical sound characteristics and the sensible sound characteristics. The method further includes the step of generating an icon image for display of the sound data. Acoustic browsing method characterized in that data can be searched for.
【請求項5】 音響データ、前記音響データの表示用ア
イコン画像、及び前記音響データの物理的な音響特徴量
及び感性的な音響特徴量を保存するステップと、 前記音響特徴量に基づいて音響空間座標データを生成す
るステップと、 前記音響空間座標データを保存するステップと、 前記音響データ、前記アイコン画像及び前記音響空間座
標データに基づいて音響空間を用いて音響データの位置
を表示するステップと、 音響空間上の座標を指示するステップと、 前記音響データを再生するステップとを含む音響ブラウ
ジング装置を実現するコンピュータに実行させるプログ
ラムを記録したコンピュータ読み取り可能な記録媒体で
あって、 前記物理的な音響特徴量及び前記感性的な音響特徴量に
基づいて、表示される前記音響データの表示用アイコン
画像を動的に生成するステップをさらに含み、 前記音響データの再生による探索だけでなく、前記アイ
コン画像によっても、音響データを探索できることを特
徴とするコンピュータに実行させるプログラムを記録し
たコンピュータ読み取り可能な記録媒体。
5. A step of storing acoustic data, an icon image for displaying the acoustic data, and physical and emotional acoustic features of the acoustic data, and an acoustic space based on the acoustic features. Generating coordinate data, storing the acoustic space coordinate data, displaying the position of the acoustic data using an acoustic space based on the acoustic data, the icon image and the acoustic space coordinate data, A computer-readable recording medium that records a program to be executed by a computer that realizes an acoustic browsing apparatus, including a step of designating coordinates in an acoustic space, and a step of reproducing the acoustic data. A display interface for the sound data to be displayed based on the characteristic amount and the sensible acoustic characteristic amount. The method further comprises dynamically generating an icon image. The computer-readable recording medium stores a program to be executed by a computer, wherein the computer is capable of searching for sound data not only by the reproduction of the sound data but also by the icon image. Recording medium.
JP17862899A 1999-06-24 1999-06-24 Acoustic browsing apparatus and method Expired - Fee Related JP3739967B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP17862899A JP3739967B2 (en) 1999-06-24 1999-06-24 Acoustic browsing apparatus and method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP17862899A JP3739967B2 (en) 1999-06-24 1999-06-24 Acoustic browsing apparatus and method

Publications (2)

Publication Number Publication Date
JP2001005477A true JP2001005477A (en) 2001-01-12
JP3739967B2 JP3739967B2 (en) 2006-01-25

Family

ID=16051792

Family Applications (1)

Application Number Title Priority Date Filing Date
JP17862899A Expired - Fee Related JP3739967B2 (en) 1999-06-24 1999-06-24 Acoustic browsing apparatus and method

Country Status (1)

Country Link
JP (1) JP3739967B2 (en)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2377543A (en) * 2001-06-22 2003-01-15 Hewlett Packard Co Portable audio/video output device having data storage and selective pictorial display
JPWO2006095599A1 (en) * 2005-03-08 2008-08-14 パイオニア株式会社 Information processing apparatus and information processing method, etc.
WO2008149547A1 (en) * 2007-06-06 2008-12-11 Panasonic Corporation Voice tone editing device and voice tone editing method
WO2011148570A1 (en) * 2010-05-28 2011-12-01 パナソニック株式会社 Auditory display device and method
CN103632662A (en) * 2012-08-20 2014-03-12 株式会社东芝 Prosody editing apparatus, method and program

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS6419427A (en) * 1987-07-15 1989-01-23 Hitachi Ltd Voice input computer graphics processor
JPH0793367A (en) * 1993-09-28 1995-04-07 Atsushi Matsushita System and device for speech information retrieval
JPH08179791A (en) * 1994-12-21 1996-07-12 Nippon Telegr & Teleph Corp <Ntt> Sound visualizing method and device
JPH08298635A (en) * 1995-04-26 1996-11-12 Nippon Telegr & Teleph Corp <Ntt> Method for selecting and compositing sound channel and device for executing the method
JPH0934909A (en) * 1995-07-24 1997-02-07 Sharp Corp Information retrieval device

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS6419427A (en) * 1987-07-15 1989-01-23 Hitachi Ltd Voice input computer graphics processor
JPH0793367A (en) * 1993-09-28 1995-04-07 Atsushi Matsushita System and device for speech information retrieval
JPH08179791A (en) * 1994-12-21 1996-07-12 Nippon Telegr & Teleph Corp <Ntt> Sound visualizing method and device
JPH08298635A (en) * 1995-04-26 1996-11-12 Nippon Telegr & Teleph Corp <Ntt> Method for selecting and compositing sound channel and device for executing the method
JPH0934909A (en) * 1995-07-24 1997-02-07 Sharp Corp Information retrieval device

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2377543A (en) * 2001-06-22 2003-01-15 Hewlett Packard Co Portable audio/video output device having data storage and selective pictorial display
GB2378309A (en) * 2001-06-22 2003-02-05 Hewlett Packard Co Portable audio/video player with selection by icon
JPWO2006095599A1 (en) * 2005-03-08 2008-08-14 パイオニア株式会社 Information processing apparatus and information processing method, etc.
WO2008149547A1 (en) * 2007-06-06 2008-12-11 Panasonic Corporation Voice tone editing device and voice tone editing method
US8155964B2 (en) 2007-06-06 2012-04-10 Panasonic Corporation Voice quality edit device and voice quality edit method
WO2011148570A1 (en) * 2010-05-28 2011-12-01 パナソニック株式会社 Auditory display device and method
US8989396B2 (en) 2010-05-28 2015-03-24 Panasonic Intellectual Property Management Co., Ltd. Auditory display apparatus and auditory display method
CN103632662A (en) * 2012-08-20 2014-03-12 株式会社东芝 Prosody editing apparatus, method and program
US9601106B2 (en) 2012-08-20 2017-03-21 Kabushiki Kaisha Toshiba Prosody editing apparatus and method

Also Published As

Publication number Publication date
JP3739967B2 (en) 2006-01-25

Similar Documents

Publication Publication Date Title
CN107396278B (en) For creating and rendering the non-state medium and equipment of audio reproduction data
US5812688A (en) Method and apparatus for using visual images to mix sound
US9972297B2 (en) Sound processing device, sound data selecting method and sound data selecting program
CN107193447A (en) Playlist is configured and preview
EP2159719B1 (en) Method for graphically displaying pieces of music
US20110041059A1 (en) Interactive Multimedia Content Playback System
JP4561766B2 (en) Sound data search support device, sound data playback device, program
JP2007199775A (en) Display device, display method, display program
US20150309703A1 (en) Music creation systems and methods
JP2008250857A (en) Information processor, method, and program
JP3212287B2 (en) Object cross-section display device and method, and program recording medium
US20240073639A1 (en) Information processing apparatus and method, and program
JP2003044046A (en) Device and method for processing information and recording medium
JP3739967B2 (en) Acoustic browsing apparatus and method
CN109716794A (en) Information processing unit, information processing method and program
US20080215763A1 (en) Graphical user interface, process, program, storage medium and computer system for arranging music
JP3770293B2 (en) Visual display method of performance state and recording medium recorded with visual display program of performance state
US7880748B1 (en) Audio view using 3-dimensional plot
JP3603599B2 (en) Method for visual display of performance system and computer-readable recording medium on which visual display program for performance system is recorded
Pachet et al. A mixed 2D/3D interface for music spatialization
Schröder et al. Through the hourglass: A faithful audiovisual reconstruction of the old montreux casino
CN114520950A (en) Audio output method and device, electronic equipment and readable storage medium
JP2014235335A (en) Game program
JP2001265812A (en) Device and method for 3d browsing of video
JP2009265714A (en) Image display method, image display program, and musical piece reproduction device

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20050630

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20050713

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20050912

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20051101

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20051104

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20081111

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20091111

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20101111

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20101111

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111111

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111111

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121111

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121111

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20131111

Year of fee payment: 8

LAPS Cancellation because of no payment of annual fees