JP7248913B2 - 音声情報生成プログラム、音声再生プログラム、および音声再生装置 - Google Patents
音声情報生成プログラム、音声再生プログラム、および音声再生装置 Download PDFInfo
- Publication number
- JP7248913B2 JP7248913B2 JP2020137506A JP2020137506A JP7248913B2 JP 7248913 B2 JP7248913 B2 JP 7248913B2 JP 2020137506 A JP2020137506 A JP 2020137506A JP 2020137506 A JP2020137506 A JP 2020137506A JP 7248913 B2 JP7248913 B2 JP 7248913B2
- Authority
- JP
- Japan
- Prior art keywords
- unit
- search data
- audio
- sound
- program
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Stereophonic System (AREA)
- Circuit For Audible Band Transducer (AREA)
Description
画像で示された空間における音圧と粒子速度を、シミュレーションによって、前記空間の複数箇所について算出し、前記粒子速度と前記音圧の組の複数から、時系列の複数のベクトルを求める算出部と、
前記算出部が求めたベクトルの数を減らす圧縮処理を行う第1圧縮部と、
して機能させることを特徴とする音声情報生成プログラムである。
与えられた再生情報にしたがって音声を再生する再生部と、
前記再生情報を、画像で示された空間における位置によって探索するための探索データを保持する探索データ保持部と、
前記位置と前記探索データに基づいて前記再生情報を探索して前記再生部に与える探索部と、
して機能させ、
前記再生情報は、前記空間における音圧と粒子速度の組に基づいて生成されたベクトルであり、
前記音圧と前記粒子速度の組は、予め求められたものであり、
前記探索データは、時間軸において圧縮された前記ベクトルに基づいて生成されたものである
ことを特徴とする音声再生プログラムである。
前記音声再生プログラムを実行する制御部と、
を備えたことを特徴とする音声再生装置である。
[実施形態1]
《概要》
このゲームプログラムによるゲームでは、ユーザの操作を受けて、プレイヤキャラクタを仮想ゲーム空間(以下、単に仮想空間という)で活動させたり、プレイヤキャラクタ同士でグループを編成して様々なアクションを行わせたりする。以下の説明では、仮想空間は三次元である。
〈ハードウェアの構成〉
音声情報生成装置10は、3次元的な音の再生を行うための情報を生成する装置である。音声情報生成装置10は、例えば、パーソナルコンピュータに所定のソフトウェアをインストールすることによって構成できる。音声情報生成装置10には、音声情報生成プログラムがインストールされる。
音声情報生成装置10の制御部86は、そのCPUが音声情報生成プログラムを実行することによって、算出部861、第1圧縮部862、探索データ生成部863、第2圧縮部864、およびドロネー図生成部865として機能する。
(1)算出部861が求めたインテンシティベクトルIの数を減らす圧縮処理。
(2)圧縮処理で得たデータ(後述の方向ベクトルV)を球面調和関数で表す処理。
(2)類似する探索データを間引く処理
近傍の探索データのグループ化を行うために、まず、第2圧縮部864は、何れかひとつの探索データ(ここでは着目データという)を選択する。着目データと、着目データの近傍にある探索データとをグループ化する。
図5は、音声情報生成装置10の動作例を示すフローチャートである。図5は、探索データと、ドロネー図情報の生成手順を示している。
〈ハードウェアの構成〉
ゲーム装置5は、ユーザの操作に基づいて所定のゲームを実行する。図6は、ゲーム装置5の構成を示すブロック図である。ゲーム装置5には、ディスプレイ61、スピーカ62およびコントローラ63が外部接続または内蔵される。
ゲーム装置5における制御部56は、そのCPUがゲームプログラムを実行することによって、探索データ保持部561、および再生部562として機能する。このゲームプログラムには、音声情報生成装置10が生成した、探索データとドロネー図情報とが組み込まれている。
図8は、ゲーム装置5の動作例を示すフローチャートである。図8に示すように、再生部562は、プレイヤキャラクタPCの現在の位置を特定する(ステップS21)。次に、再生部562は、プレイヤキャラクタPCを囲む、ドロネー図の三角形を探索する。再生部562は、この探索において、探索データ保持部561が備える探索データを用いる。
本実施形態では、シミュレーションで得たデータが時間圧縮される。これにより、本実施形態では、音声の再生に必要なデータ容量を抑えつつ音場を再現できる。
探索テータには、球面調和関数を示す係数群Cに代えて、方向ベクトルVを用いてもよい。この場合には、ドロネー図を用いた情報の合成法も実施形態1とは異なる。
実施形態2では、時間圧縮の他の例を説明する。本実施形態では、第1圧縮部862の構成が、実施形態1と異なっている。図9に、実施形態2における、時間圧縮処理の概念を説明する図を示す。
仮想ゲーム空間は、3次元には限定されない。仮想ゲーム空間は、2次元でもよい。
10 音声情報生成装置
55 記憶部
56 制御部
561 探索データ保持部
562 再生部
861 算出部
862 第1圧縮部
863 探索データ生成部
864 第2圧縮部
Claims (10)
- コンピュータを、
画像で示された空間における音圧と粒子速度を、シミュレーションによって、前記空間の複数箇所について算出し、前記粒子速度と前記音圧の組の複数から、時系列の複数のベクトルを求める算出部と、
前記算出部が求めたベクトルの数を減らす圧縮処理を行う第1圧縮部と、
して機能させることを特徴とする音声情報生成プログラム。 - 請求項1において、
前記第1圧縮部は、前記算出部が求めたベクトルの一部または全部を、時間軸上で複数の時間領域に区分し、前記時間領域毎に前記圧縮処理を行う
ことを特徴とする音声情報生成プログラム。 - 請求項2において、
前記第1圧縮部は、前記音圧と閾値との比較結果に基づいて、前記区分を行う
ことを特徴とする音声情報生成プログラム。 - 請求項2または請求項3において、
前記第1圧縮部は、各時間領域における所定数のベクトルについて、前記音圧の合計値、および音の伝播方向を示す角度の平均値を算出し、算出した合計値および平均値を用いて、前記時間領域に対応する1つまたは複数のベクトルを生成する
ことを特徴とする音声情報生成プログラム。 - 請求項1において、
前記第1圧縮部は、音の伝播方向毎に前記音圧の合算値を求めることによって、前記伝播方向に対応するベクトルを生成する
ことを特徴とする音声情報生成プログラム。 - 請求項1から請求項5の何れかにおいて、
前記第1圧縮部は、時系列で並んだ所定数のベクトルを用いて、球面調和関数を生成する
ことを特徴とする音声情報生成プログラム。 - 請求項1から請求項6の何れかにおいて、
前記コンピュータを、
前記画像における位置によって前記第1圧縮部が生成したデータを探索するための探索データを生成する探索データ生成部として機能させる
ことを特徴とする音声情報生成プログラム。 - 請求項7において、
前記コンピュータを、
前記探索データを、前記画像における位置を基準にグループ化し、前記グループ内において互いに類似する探索データを間引く第2圧縮部として機能させる
ことを特徴とする音声情報生成プログラム。 - コンピュータを、
与えられた再生情報にしたがって音声を再生する再生部と、
画像で示された空間における位置によって前記再生情報を探索するための探索データを保持する探索データ保持部と、
前記位置と前記探索データに基づいて前記再生情報を探索して前記再生部に与える探索部と、
して機能させ、
前記再生情報は、前記空間における音圧と粒子速度の組に基づいて生成されたベクトルであり、
前記音圧と前記粒子速度の組は、予め求められたものであり、
前記探索データは、時間軸において圧縮された前記ベクトルに基づいて生成されたものである
ことを特徴とする音声再生プログラム。 - 請求項9の音声再生プログラムを記憶した記憶部と、
前記音声再生プログラムを実行する制御部と、
を備えたことを特徴とする音声再生装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020137506A JP7248913B2 (ja) | 2020-08-17 | 2020-08-17 | 音声情報生成プログラム、音声再生プログラム、および音声再生装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020137506A JP7248913B2 (ja) | 2020-08-17 | 2020-08-17 | 音声情報生成プログラム、音声再生プログラム、および音声再生装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2022033546A JP2022033546A (ja) | 2022-03-02 |
JP7248913B2 true JP7248913B2 (ja) | 2023-03-30 |
Family
ID=80375281
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020137506A Active JP7248913B2 (ja) | 2020-08-17 | 2020-08-17 | 音声情報生成プログラム、音声再生プログラム、および音声再生装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7248913B2 (ja) |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002159097A (ja) | 2000-11-22 | 2002-05-31 | Univ Tokyo | 音場シミュレーション装置および音場シミュレーション方法 |
US20180027350A1 (en) | 2015-04-08 | 2018-01-25 | Huawei Technologies Co., Ltd. | Apparatus and method for driving an array of loudspeakers |
-
2020
- 2020-08-17 JP JP2020137506A patent/JP7248913B2/ja active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002159097A (ja) | 2000-11-22 | 2002-05-31 | Univ Tokyo | 音場シミュレーション装置および音場シミュレーション方法 |
US20180027350A1 (en) | 2015-04-08 | 2018-01-25 | Huawei Technologies Co., Ltd. | Apparatus and method for driving an array of loudspeakers |
Also Published As
Publication number | Publication date |
---|---|
JP2022033546A (ja) | 2022-03-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Raghuvanshi et al. | Parametric directional coding for precomputed sound propagation | |
Tsingos et al. | Perceptual audio rendering of complex virtual environments | |
WO2017047309A1 (ja) | 耳形状解析方法、耳形状解析装置および耳形状モデル生成方法 | |
CN112669417B (zh) | 虚拟形象的生成方法、装置、存储介质及电子设备 | |
WO2018019181A1 (zh) | 确定音频延迟的方法及设备 | |
CN113299312B (zh) | 一种图像生成方法、装置、设备以及存储介质 | |
US10911885B1 (en) | Augmented reality virtual audio source enhancement | |
CN111986295A (zh) | 舞蹈合成方法、装置及电子设备 | |
JP2023059937A (ja) | データインタラクション方法、装置、電子機器、記憶媒体、および、プログラム | |
Ehret et al. | Evaluating the influence of phoneme-dependent dynamic speaker directivity of embodied conversational agents' speech | |
JP3617839B2 (ja) | ゲームサウンド制御プログラム、ゲームサウンド制御方法およびゲーム装置 | |
EP3699751A1 (en) | Virtual scene | |
JP7248913B2 (ja) | 音声情報生成プログラム、音声再生プログラム、および音声再生装置 | |
CN113035164A (zh) | 歌声生成方法和装置、电子设备及存储介质 | |
Noufi et al. | Reconstructing the dynamic directivity of unconstrained speech | |
JP6614241B2 (ja) | 耳形状解析装置、情報処理装置、耳形状解析方法、および情報処理方法 | |
CN109302668B (zh) | 基于非中心点的声场重建方法、设备、存储介质及装置 | |
JP6882785B2 (ja) | 空間音響生成装置、空間音響生成システム、空間音響生成方法、および、空間音響生成プログラム | |
Garg et al. | Visually-Guided Audio Spatialization in Video with Geometry-Aware Multi-task Learning | |
JP7458127B2 (ja) | 処理システム、音響システム及びプログラム | |
CN114051105B (zh) | 多媒体数据处理方法、装置、电子设备及存储介质 | |
Martin et al. | 3D audiovisual rendering and real-time interactive control of expressivity in a talking head | |
JP2012150278A (ja) | 仮想空間のビジュアル変化に対応した音響効果の自動生成システム | |
CN109348398B (zh) | 基于非中心点的声场重建方法、设备、存储介质及装置 | |
JP2022182625A (ja) | 音響可聴化装置及び音響可聴化プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A625 | Written request for application examination (by other person) |
Free format text: JAPANESE INTERMEDIATE CODE: A625 Effective date: 20220118 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20221128 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20221206 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230202 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230214 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230227 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7248913 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |