JP7088408B2 - オーディオ信号処理装置、オーディオ信号処理システムおよびオーディオ信号処理方法 - Google Patents
オーディオ信号処理装置、オーディオ信号処理システムおよびオーディオ信号処理方法 Download PDFInfo
- Publication number
- JP7088408B2 JP7088408B2 JP2021508876A JP2021508876A JP7088408B2 JP 7088408 B2 JP7088408 B2 JP 7088408B2 JP 2021508876 A JP2021508876 A JP 2021508876A JP 2021508876 A JP2021508876 A JP 2021508876A JP 7088408 B2 JP7088408 B2 JP 7088408B2
- Authority
- JP
- Japan
- Prior art keywords
- sound source
- audio signal
- signal processing
- information
- sound
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S7/00—Indicating arrangements; Control arrangements, e.g. balance control
- H04S7/30—Control circuits for electronic adaptation of the sound field
- H04S7/302—Electronic adaptation of stereophonic sound system to listener position or orientation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
- G06F3/0354—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
- G06F3/03549—Trackballs
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/0304—Detection arrangements using opto-electronic means
- G06F3/0312—Detection arrangements using opto-electronic means for tracking the rotation of a spherical or circular member, e.g. optical rotary encoders used in mice or trackballs using a tracking ball or in mouse scroll wheels
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S3/00—Systems employing more than two channels, e.g. quadraphonic
- H04S3/008—Systems employing more than two channels, e.g. quadraphonic in which the audio signals are in digital form, i.e. employing more than two discrete digital channels
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S2400/00—Details of stereophonic systems covered by H04S but not provided for in its groups
- H04S2400/11—Positioning of individual sound objects, e.g. moving airplane, within a sound field
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S2400/00—Details of stereophonic systems covered by H04S but not provided for in its groups
- H04S2400/13—Aspects of volume control, not necessarily automatic, in stereophonic sound systems
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S2420/00—Techniques used stereophonic systems covered by H04S but not provided for in its groups
- H04S2420/01—Enhancing the perception of the sound image or of the spatial distribution using head related transfer functions [HRTF's] or equivalents thereof, e.g. interaural time difference [ITD] or interaural level difference [ILD]
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- General Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- Stereophonic System (AREA)
Description
絶対値モードは、第1モードに対応する。絶対値モードは、第1スティック300、第2スティック310、または第3スティック350(以下、スティック操作子と称する。)の位置と、音源の位置を1対1に対応させるモードである。
相対値モードは、第1モードの変形例である。相対値モードは、スティック操作子の原点からの移動量に応じて音源の位置を変化し、変化後の位置を保持するモードである。音源位置制御部172および移動情報受付部173は、利用者から相対値モード指定操作(例えば押しボタン302の長押し操作など)を受け付けた場合に、相対値モードに移行する。音源位置制御部172は、スティック操作子の原点の位置からの移動量に応じて、音源の位置を積算しながら変更する。例えば、移動情報受付部173がZ軸回りに右90度の回転操作を受け付けた場合、音源位置制御部172は、音源の位置を右90度回転させる。また、音源位置制御部172は、上記積算により、例えばユーザがスティック操作子を90度回転した位置でそのまま3秒間保持したとすると、音源の位置を右270度回転させる。音源位置制御部172は、スティック操作子の位置が原点に戻っても、音源の位置をそのまま保持する。なお、この例では、説明を簡単にするために、スティック操作子を90度回転して3秒間保持すると、音源位置制御部172は、音源の位置を270度回転させた。ただし、音源位置制御部172は、90度回転するまでの間にも移動量を積算しているため、実際には、音源の位置を270度以上回転させる。
自動継続モードは、第2モードに対応する。自動継続モードは、スティック操作子の移動に応じて移動させた音源の位置をそのまま継続するモードである。また、自動継続モードでは、スティック操作子の原点からの移動量に応じて音源の移動速度を変更する。
O1,O2,O3,O4…音源
S1…球面
SP1,SP2,SP3,SP4,SP5,SP6,SP7,SP8…スピーカ
1…オーディオ信号処理装置
2…PC
3…トラックボール
11…音信号入力部
12…デコーダ
13…信号処理部
14…定位処理部
15…D/Aコンバータ
16…AMP
17…CPU
18…フラッシュメモリ
19…RAM
20…I/F
21…表示器
100…オーディオ信号処理システム
171…位置情報取得部
172…音源位置制御部
173…移動情報受付部
201…USBI/F
Claims (26)
- 音信号を入力する音信号入力部と、
前記音信号の音源の位置情報を取得する位置情報取得部と、
回転情報を含む移動情報の入力を受け付ける移動情報受付部と、
前記回転情報に基づいて、前記音源の位置情報を、所定軸を中心として回転移動させ、かつ、前記所定軸を中心として回転移動させた後の前記音源の位置情報に基づいて、前記音源の音像定位位置を変更する、音源位置制御部と、
前記音源位置制御部で変更した前記音像定位位置に前記音源の音像が定位するように、前記音信号に対して定位処理を行なう定位処理部と、
を備えたことを特徴とするオーディオ信号処理装置。 - 前記移動情報受付部は、3次元の移動情報の入力を受け付け、
前記音源位置制御部は、前記音源の位置を前記3次元の移動情報に基づいて移動させる、
請求項1に記載のオーディオ信号処理装置。 - 前記音源位置制御部は、前記音源の位置を所定の球面上に配置して、該球面に沿って回転させる、
請求項1又は請求項2に記載のオーディオ信号処理装置。 - 前記音源位置制御部は、複数の音源の位置を移動させ、前記音像定位位置を変更する、
請求項1乃至請求項3のいずれか1項に記載のオーディオ信号処理装置。 - 前記移動情報受付部は、前記音源のうち移動対象とする音源の指定入力を受け付け、
前記音源位置制御部は、前記指定入力に基づいて、対象の音源を移動させ、前記音像定位位置を変更する、
請求項1乃至請求項4のいずれか1項に記載のオーディオ信号処理装置。 - 前記音源の位置を表示器に表示する表示処理部と、を備えた、
請求項1乃至請求項5のいずれか1項に記載のオーディオ信号処理装置。 - 前記音源位置制御部は、前記移動情報の分解能と前記位置情報の分解能が異なる場合に、前記移動情報の値を前記位置情報の分解能に変換して、前記音源の音像定位位置を変更する、
請求項1乃至請求項6のいずれか1項に記載のオーディオ信号処理装置。 - 前記音源位置制御部は、前記移動情報を直交座標に変換して、前記音源の音像定位位置を変更する、
請求項1乃至請求項7のいずれか1項に記載のオーディオ信号処理装置。 - 前記音源位置制御部は、前記移動情報に基づいて前記音源の位置を移動した後、前記音源の移動を停止させる第1モードを実行する、
請求項1乃至請求項8のいずれか1項に記載のオーディオ信号処理装置。 - 前記音源位置制御部は、前記移動情報に基づいて前記音源の位置を移動した後、前記音源の移動を継続させる第2モードを実行する、
請求項1乃至請求項9のいずれか1項に記載のオーディオ信号処理装置。 - 前記音源位置制御部は、前記第2モードにおいて、前記移動情報の最大値に基づいて前記音源の位置の移動速度を制御し、前記移動情報が所定の値になった場合に前記最大値をリセットする、
請求項10に記載のオーディオ信号処理装置。 - 請求項1乃至請求項11のいずれか1項に記載のオーディオ信号処理装置と、
利用者から移動操作を受け付けて、該移動操作に応じた前記移動情報を、前記移動情報受付部に対して入力する、操作受付装置と、
を備えたオーディオ信号処理システム。 - 前記操作受付装置は、トラックボールを含む、
請求項12に記載のオーディオ信号処理システム。 - 音信号を入力し、
前記音信号の音源の位置情報を取得し、
回転情報を含む移動情報の入力を受け付け、
前記回転情報に基づいて、前記音源の位置情報を、所定軸を中心として回転移動させ、かつ、前記所定軸を中心として回転移動させた後の前記音源の位置情報に基づいて、前記音源の音像定位位置を変更し、
変更した前記音像定位位置に前記音源の音像が定位するように、前記音信号に対して定位処理を行なう、
ことを特徴とするオーディオ信号処理方法。 - 前記移動情報の入力を受け付けることにおいて、3次元の移動情報の入力を受け付け、
前記音像定位位置を変更することにおいて、前記音源の位置を前記3次元の移動情報に基づいて移動させる、
請求項14に記載のオーディオ信号処理方法。 - 前記移動情報の入力を受け付けることにおいて、前記音源の位置を所定の球面上に配置して、該球面に沿って回転させる、
請求項14又は請求項15に記載のオーディオ信号処理方法。 - 前記移動情報の入力を受け付けることにおいて、複数の音源の位置を移動させ、前記音像定位位置を変更する、
請求項14乃至請求項16のいずれか1項に記載のオーディオ信号処理方法。 - 前記移動情報の入力を受け付けることにおいて、前記音源のうち移動対象とする音源の指定入力を受け付け、
前記移動情報の入力を受け付けることにおいて、前記指定入力に基づいて、対象の音源を移動させ、前記音像定位位置を変更する、
請求項14乃至請求項17のいずれか1項に記載のオーディオ信号処理方法。 - 前記音源の位置を表示器に表示する、
請求項14乃至請求項18のいずれか1項に記載のオーディオ信号処理方法。 - 前記音源の音像定位位置を変更することにおいて、前記移動情報の分解能と前記位置情報の分解能が異なる場合に、前記移動情報の値を前記位置情報の分解能に変換する、
請求項14乃至請求項19のいずれか1項に記載のオーディオ信号処理方法。 - 前記音源の音像定位位置を変更することにおいて、前記移動情報を直交座標に変換して、前記音源の音像定位位置を変更する、
請求項14乃至請求項20のいずれか1項に記載のオーディオ信号処理方法。 - 前記音源の音像定位位置を変更することにおいて、前記移動情報に基づいて前記音源の位置を移動した後、前記音源の位置の移動を停止させる第1モードを実行する、
請求項14乃至請求項21のいずれか1項に記載のオーディオ信号処理方法。 - 前記音源の音像定位位置を変更することにおいて、前記移動情報に基づいて前記音源の位置を移動した後、前記音源の移動を継続させる第2モードを実行する、
請求項14乃至請求項22のいずれか1項に記載のオーディオ信号処理方法。 - 前記第2モードにおいて、前記移動情報の最大値に基づいて前記音源の位置の移動速度を制御し、前記移動情報が所定の値になった場合に前記最大値をリセットする、
請求項23に記載のオーディオ信号処理方法。 - 利用者から移動操作を操作受付装置で受け付けて、該移動操作に応じた前記移動情報を入力する、
請求項14乃至請求項24のいずれか1項に記載のオーディオ信号処理方法。 - 前記操作受付装置は、トラックボールを含む、
請求項25に記載のオーディオ信号処理方法。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019055841 | 2019-03-25 | ||
JP2019055841 | 2019-03-25 | ||
PCT/JP2020/008617 WO2020195568A1 (ja) | 2019-03-25 | 2020-03-02 | オーディオ信号処理装置、オーディオ信号処理システムおよびオーディオ信号処理方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2020195568A1 JPWO2020195568A1 (ja) | 2021-10-21 |
JP7088408B2 true JP7088408B2 (ja) | 2022-06-21 |
Family
ID=72608601
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021508876A Active JP7088408B2 (ja) | 2019-03-25 | 2020-03-02 | オーディオ信号処理装置、オーディオ信号処理システムおよびオーディオ信号処理方法 |
Country Status (3)
Country | Link |
---|---|
US (1) | US20220030374A1 (ja) |
JP (1) | JP7088408B2 (ja) |
WO (1) | WO2020195568A1 (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117044242A (zh) * | 2021-03-29 | 2023-11-10 | 索尼集团公司 | 信息处理装置、信息处理系统、信息处理方法和程序 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005101738A (ja) | 2003-09-22 | 2005-04-14 | Yamaha Corp | 音像定位設定装置及びそのプログラム |
JP2007329746A (ja) | 2006-06-08 | 2007-12-20 | Nippon Hoso Kyokai <Nhk> | 3次元音響パンニング装置 |
JP2014107764A (ja) | 2012-11-28 | 2014-06-09 | Yamaha Corp | 位置情報取得装置、およびオーディオシステム |
JP2016134767A (ja) | 2015-01-20 | 2016-07-25 | ヤマハ株式会社 | オーディオ信号処理装置 |
JP2018152669A (ja) | 2017-03-10 | 2018-09-27 | ヤマハ株式会社 | 情報処理装置および情報処理方法 |
JP2018186471A (ja) | 2017-04-27 | 2018-11-22 | ティアック株式会社 | 目標位置設定装置及び音像定位装置 |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH11331995A (ja) * | 1998-05-08 | 1999-11-30 | Alpine Electronics Inc | 音像制御装置 |
US7116788B1 (en) * | 2002-01-17 | 2006-10-03 | Conexant Systems, Inc. | Efficient head related transfer function filter generation |
WO2007083739A1 (ja) * | 2006-01-19 | 2007-07-26 | Nippon Hoso Kyokai | 3次元音響パンニング装置 |
US9420394B2 (en) * | 2011-02-16 | 2016-08-16 | Apple Inc. | Panning presets |
US20210048976A1 (en) * | 2018-04-24 | 2021-02-18 | Sony Corporation | Display control apparatus, display control method, and program |
-
2020
- 2020-03-02 WO PCT/JP2020/008617 patent/WO2020195568A1/ja active Application Filing
- 2020-03-02 JP JP2021508876A patent/JP7088408B2/ja active Active
-
2021
- 2021-09-22 US US17/448,466 patent/US20220030374A1/en active Pending
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005101738A (ja) | 2003-09-22 | 2005-04-14 | Yamaha Corp | 音像定位設定装置及びそのプログラム |
JP2007329746A (ja) | 2006-06-08 | 2007-12-20 | Nippon Hoso Kyokai <Nhk> | 3次元音響パンニング装置 |
JP2014107764A (ja) | 2012-11-28 | 2014-06-09 | Yamaha Corp | 位置情報取得装置、およびオーディオシステム |
JP2016134767A (ja) | 2015-01-20 | 2016-07-25 | ヤマハ株式会社 | オーディオ信号処理装置 |
JP2018152669A (ja) | 2017-03-10 | 2018-09-27 | ヤマハ株式会社 | 情報処理装置および情報処理方法 |
JP2018186471A (ja) | 2017-04-27 | 2018-11-22 | ティアック株式会社 | 目標位置設定装置及び音像定位装置 |
Also Published As
Publication number | Publication date |
---|---|
US20220030374A1 (en) | 2022-01-27 |
WO2020195568A1 (ja) | 2020-10-01 |
JPWO2020195568A1 (ja) | 2021-10-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR102419065B1 (ko) | 혼합 현실 디바이스에서의 가상 및 실제 객체 레코딩 | |
KR101659954B1 (ko) | 라우드스피커 위치들의 추정 | |
JP5866199B2 (ja) | 3dポインタマッピング | |
US6069594A (en) | Computer input device with multiple switches using single line | |
US20100007518A1 (en) | Input apparatus using motions and user manipulations and input method applied to such input apparatus | |
US20040095317A1 (en) | Method and apparatus of universal remote pointing control for home entertainment system and computer | |
WO2014077374A1 (ja) | オーディオ信号処理装置、位置情報取得装置、およびオーディオ信号処理システム | |
US20120208639A1 (en) | Remote control with motion sensitive devices | |
WO2006128093A2 (en) | Remote input device | |
JP7088408B2 (ja) | オーディオ信号処理装置、オーディオ信号処理システムおよびオーディオ信号処理方法 | |
JP2013008365A (ja) | 運動感知型機器を用いる遠隔制御 | |
EP3037936B1 (en) | Image projection apparatus, and system employing interactive input-output capability | |
CN111886881B (zh) | 信号处理装置、声道设置方法、记录介质以及扬声器系统 | |
JP6255703B2 (ja) | オーディオ信号処理装置及びオーディオ信号処理システム | |
US6404415B1 (en) | Control mechanism and method for controlling parameter values and for controlling a position of a cursor of a portable computer display | |
JP6201431B2 (ja) | 端末装置のプログラム及びオーディオ信号処理システム | |
KR20210019424A (ko) | 정보 처리 장치, 정보 처리 방법 | |
JP5326659B2 (ja) | 画像入力装置及び画像表示システム | |
JP2000047812A (ja) | 入力装置 | |
JPH1091328A (ja) | コマンド入力装置 | |
JPH0381172B2 (ja) | ||
JPH07299776A (ja) | マニプレータ制御装置 | |
CN112256130A (zh) | 生成控制指令的方法和装置 | |
JP2005122238A (ja) | 入力インターフェース、及び入力インターフェース方法 | |
JPH06241883A (ja) | 3次元情報入力装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210217 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210217 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20211026 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20211222 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220510 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220523 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 7088408 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |