JP7457893B2 - 制御装置、制御装置の処理方法、および、プログラム - Google Patents
制御装置、制御装置の処理方法、および、プログラム Download PDFInfo
- Publication number
- JP7457893B2 JP7457893B2 JP2022517626A JP2022517626A JP7457893B2 JP 7457893 B2 JP7457893 B2 JP 7457893B2 JP 2022517626 A JP2022517626 A JP 2022517626A JP 2022517626 A JP2022517626 A JP 2022517626A JP 7457893 B2 JP7457893 B2 JP 7457893B2
- Authority
- JP
- Japan
- Prior art keywords
- speakers
- cursor
- control device
- user
- image data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000003672 processing method Methods 0.000 title claims description 13
- 238000006243 chemical reaction Methods 0.000 claims description 69
- 238000000034 method Methods 0.000 claims description 59
- 230000008569 process Effects 0.000 claims description 41
- 238000010586 diagram Methods 0.000 description 27
- 238000012545 processing Methods 0.000 description 14
- 230000004048 modification Effects 0.000 description 6
- 238000012986 modification Methods 0.000 description 6
- 230000006870 function Effects 0.000 description 4
- 239000013598 vector Substances 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 3
- 230000009466 transformation Effects 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 230000007423 decrease Effects 0.000 description 2
- 238000005259 measurement Methods 0.000 description 2
- 238000007792 addition Methods 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 238000004091 panning Methods 0.000 description 1
- 238000000053 physical method Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 230000005236 sound signal Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S7/00—Indicating arrangements; Control arrangements, e.g. balance control
- H04S7/30—Control circuits for electronic adaptation of the sound field
- H04S7/301—Automatic calibration of stereophonic sound system, e.g. with test microphone
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
- G09G5/08—Cursor circuits
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
- G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
- G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
- G09G5/37—Details of the operation on graphic patterns
- G09G5/377—Details of the operation on graphic patterns for mixing or overlaying two or more graphic patterns
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/74—Projection arrangements for image reproduction, e.g. using eidophor
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R3/00—Circuits for transducers, loudspeakers or microphones
- H04R3/12—Circuits for transducers, loudspeakers or microphones for distributing signals to two or more loudspeakers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S7/00—Indicating arrangements; Control arrangements, e.g. balance control
- H04S7/30—Control circuits for electronic adaptation of the sound field
- H04S7/302—Electronic adaptation of stereophonic sound system to listener position or orientation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R5/00—Stereophonic arrangements
- H04R5/04—Circuit arrangements, e.g. for selective connection of amplifier inputs/outputs to loudspeakers, for loudspeaker detection, or for adaptation of settings to personal preferences or hearing impairments
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S2420/00—Techniques used stereophonic systems covered by H04S but not provided for in its groups
- H04S2420/11—Application of ambisonics in stereophonic audio systems
Description
本実施の形態において、音響の提示に用いる複数のスピーカに関する位置の情報をより容易に取得する制御装置などについて説明する。具体的には、本実施の形態の制御装置は、音響の提示に用いる複数のスピーカの位置の情報をより容易に取得する制御装置である。なお、「位置の情報」を、単に「位置」ということもある。
+cos(θi)・cos(φi)・X
+sin(θi)・cos(φi)・Y
+sin(φi)・Z (式1)
ここで、Cは、Wと、X、YおよびZとの比率を定める定数である。W、X、YおよびZは、Bフォーマット信号の各成分を示している。なお、W、X、YおよびZは、Bフォーマット信号の各成分から、座標軸の回転処理、又は、ズーム処理などのBフォーマット領域上の信号処理が施されたものであってもよい。また、θi及びφiは、それぞれ、図4に示されるように、視聴位置の前方を基準とした場合の方位角、および、仰角である。
本変形例において、音響の提示に用いる複数のスピーカに関する位置の情報をより容易に取得する制御装置などについて説明する。具体的には、本実施の形態の制御装置は、配置されている複数のスピーカによって構成される仮想スピーカの位置をより容易に取得する制御装置である。
これにより、ゲインg1、g2、g3がそれぞれ適切に設定された物理スピーカS1、S2、S3により、物理スピーカS1、S2、S3が形成する凸包内の任意の位置に仮想スピーカVが仮想的に構成される。なお、仮想スピーカが音を出力するときに、物理スピーカS1、S2、S3も音を出力することができる。この場合、物理スピーカS1、S2、S3それぞれは、当該スピーカが出力すべき音と仮想スピーカに寄与する音とを合成した音を出力する。
10 制御装置
11 記憶部
12 生成部
13 表示制御部
14 受付部
15 特定部
16 音制御部
20 表示装置
31、32、33、34、35、36、37、38、67、S1、S2、S3、Si スピーカ
51、66、66A、71 カーソル
52 調整画像
61、62、63、64、65 画像
B 破線
M マイク
U ユーザ
V 仮想スピーカ
Claims (8)
- 空間内に配置される複数のスピーカによってユーザに提示する音響を制御する制御装置であって、
表示面に表示するための画像データを取得し、前記表示面の形状を示す形状情報を用いた変換処理を用いて、取得した前記画像データから表示用画像データを生成する生成部と、前記生成部が生成した前記表示用画像データを用いて、前記表示面に表示用画像を表示させる表示制御部と、
表示された前記表示用画像にカーソルを重畳表示させ、前記カーソルを視認した前記ユーザから、前記表示用画像上での前記複数のスピーカに関する位置の指定を受ける受付部と、
前記変換処理に係る変換前の前記画像データと変換後の前記表示用画像データとの対応関係を参照することで、前記ユーザによる前記位置の指定から前記空間内での前記カーソルの位置を算出し、算出した前記カーソルの位置を、前記複数のスピーカに関する位置として特定する特定部とを備え、
前記受付部は、前記位置の指定として、
前記ユーザによる操作に基づいて前記カーソルが前記複数のスピーカそれぞれに重ねられたときの前記カーソルの位置を取得することによって、前記複数のスピーカの位置の指定を受け、
前記特定部は、
前記複数のスピーカに関する位置として、前記複数のスピーカの位置を特定し、
前記制御装置は、さらに、
前記特定部が特定した前記複数のスピーカの位置に基づいて、前記複数のスピーカによって前記ユーザに音響を提示する場合における、前記複数のスピーカそれぞれに供給される駆動音源信号を算出し、前記複数のスピーカの出力を制御する第一音制御部を備える、
制御装置。 - 前記受付部は、前記複数のスピーカのうちの対象スピーカの音響パラメータの指定を受けるための調整画像を前記表示用画像に重畳表示させ、前記調整画像を視認したユーザから、前記対象スピーカの前記音響パラメータの指定を受け、
前記第一音制御部は、前記対象スピーカに供給される前記駆動音源信号に対して、前記指
定にかかる前記音響パラメータを適用してから、前記対象スピーカの出力を制御する、
請求項1に記載の制御装置。 - 空間内に配置される複数のスピーカによってユーザに提示する音響を制御する制御装置であって、
表示面に表示するための画像データを取得し、前記表示面の形状を示す形状情報を用いた変換処理を用いて、取得した前記画像データから表示用画像データを生成する生成部と、前記生成部が生成した前記表示用画像データを用いて、前記表示面に表示用画像を表示させる表示制御部と、
表示された前記表示用画像にカーソルを重畳表示させ、前記カーソルを視認した前記ユーザから、前記表示用画像上での前記複数のスピーカに関する位置の指定を受ける受付部と、
前記変換処理に係る変換前の前記画像データと変換後の前記表示用画像データとの対応関係を参照することで、前記ユーザによる前記位置の指定から前記空間内での前記カーソルの位置を算出し、算出した前記カーソルの位置を、前記複数のスピーカに関する位置として特定する特定部とを備え、
前記受付部は、前記位置の指定として、前記ユーザによる操作に基づいて、前記複数のスピーカによって仮想的に構成される1以上の仮想スピーカそれぞれの位置に、前記カーソルが重ねられたときの前記カーソルの位置を取得することによって、前記1以上の仮想スピーカの位置の指定を受け、
前記特定部は、
前記受付部が受けた前記1以上の仮想スピーカの位置の指定に基づいて、前記空間内での前記1以上の仮想スピーカの位置を算出し、前記複数のスピーカに関する位置として、前記1以上の仮想スピーカの位置を特定し、
前記制御装置は、さらに、
前記特定部が特定した前記1以上の仮想スピーカの位置に基づいて、前記複数のスピーカおよび前記1以上の仮想スピーカによって前記ユーザに音響を提示する場合における、前記複数のスピーカそれぞれに供給される駆動音源信号を算出し、前記複数のスピーカの出力を制御する第二音制御部を備える、
制御装置。 - 前記受付部は、前記位置の指定として、
前記ユーザによる操作に基づいて、前記複数のスピーカのうち、前記1以上の仮想スピーカに含まれる一の仮想スピーカを仮想的に構成する複数の指定スピーカそれぞれの位置に、前記カーソルが重ねられたときの前記カーソルの位置を取得することによって、前記複数の指定スピーカの位置の指定を受け、
前記第二音制御部は、
前記受付部が指定を受けた前記複数の指定スピーカを用いて前記1以上の仮想スピーカを仮想的に構成するように、前記複数のスピーカそれぞれに供給される駆動音源信号を算出する、
請求項3に記載の制御装置。 - 前記複数のスピーカに関する位置は、前記ユーザの視聴位置から見た場合の前記複数のスピーカの方位角および仰角を含む、
請求項1~4のいずれか1項に記載の制御装置。 - さらに、前記複数のスピーカを備える、
請求項1~5のいずれか1項に記載の制御装置。 - 空間内に配置される複数のスピーカによってユーザに提示する音響を制御する制御装置
の処理方法であって、
表示面に表示するための画像データを取得し、前記表示面の形状を示す形状情報を用いた変換処理を用いて、取得した前記画像データから表示用画像データを生成する生成ステップと、
前記生成ステップで生成した前記表示用画像データを用いて、前記表示面に表示用画像を表示させる表示制御ステップと、
表示された前記表示用画像にカーソルを重畳表示させ、前記カーソルを視認した前記ユーザから、前記表示用画像上での前記複数のスピーカに関する位置の指定を受ける受付ステップと、
前記変換処理に係る変換前の前記画像データと変換後の前記表示用画像データとのの対応関係を参照することで、前記ユーザによる前記位置の指定から前記空間内での前記カーソルの位置を算出し、算出した前記カーソルの位置を、前記複数のスピーカに関する位置として特定する特定ステップとを含み、
前記受付ステップは、前記位置の指定として、
前記ユーザによる操作に基づいて前記カーソルが前記複数のスピーカそれぞれに重ねられたときの前記カーソルの位置を取得することによって、前記複数のスピーカの位置の指定を受け、
前記特定ステップは、
前記複数のスピーカに関する位置として、前記複数のスピーカの位置を特定し、
前記制御装置の処理方法は、さらに、
前記特定ステップが特定した前記複数のスピーカの位置に基いて、前記複数のスピーカそれぞれに供給される駆動音源信号を算出し、前記複数のスピーカにより出力させる第一音制御ステップと、を含む、
制御装置の処理方法。 - 請求項7に記載の制御装置の処理方法をコンピュータに実行させるためのプログラム。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020078890 | 2020-04-28 | ||
JP2020078890 | 2020-04-28 | ||
PCT/JP2021/015526 WO2021220821A1 (ja) | 2020-04-28 | 2021-04-15 | 制御装置、制御装置の処理方法、および、プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2021220821A1 JPWO2021220821A1 (ja) | 2021-11-04 |
JP7457893B2 true JP7457893B2 (ja) | 2024-03-29 |
Family
ID=78332384
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022517626A Active JP7457893B2 (ja) | 2020-04-28 | 2021-04-15 | 制御装置、制御装置の処理方法、および、プログラム |
Country Status (3)
Country | Link |
---|---|
US (1) | US20230037195A1 (ja) |
JP (1) | JP7457893B2 (ja) |
WO (1) | WO2021220821A1 (ja) |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008276102A (ja) | 2007-05-07 | 2008-11-13 | Ohira Giken:Kk | 映像投影システム |
WO2017110882A1 (ja) | 2015-12-21 | 2017-06-29 | シャープ株式会社 | スピーカの配置位置提示装置 |
-
2021
- 2021-04-15 JP JP2022517626A patent/JP7457893B2/ja active Active
- 2021-04-15 WO PCT/JP2021/015526 patent/WO2021220821A1/ja active Application Filing
-
2022
- 2022-10-17 US US17/967,471 patent/US20230037195A1/en active Pending
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008276102A (ja) | 2007-05-07 | 2008-11-13 | Ohira Giken:Kk | 映像投影システム |
WO2017110882A1 (ja) | 2015-12-21 | 2017-06-29 | シャープ株式会社 | スピーカの配置位置提示装置 |
Also Published As
Publication number | Publication date |
---|---|
US20230037195A1 (en) | 2023-02-02 |
JPWO2021220821A1 (ja) | 2021-11-04 |
WO2021220821A1 (ja) | 2021-11-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11082662B2 (en) | Enhanced audiovisual multiuser communication | |
JP5611463B2 (ja) | 携帯用通信装置および有向音声出力を使用する通信の円滑化 | |
US11055057B2 (en) | Apparatus and associated methods in the field of virtual reality | |
US8571192B2 (en) | Method and apparatus for improved matching of auditory space to visual space in video teleconferencing applications using window-based displays | |
US20150189457A1 (en) | Interactive positioning of perceived audio sources in a transformed reproduced sound field including modified reproductions of multiple sound fields | |
US10681276B2 (en) | Virtual reality video processing to compensate for movement of a camera during capture | |
US20150189455A1 (en) | Transformation of multiple sound fields to generate a transformed reproduced sound field including modified reproductions of the multiple sound fields | |
JP7271695B2 (ja) | ハイブリッドスピーカ及びコンバータ | |
US11122384B2 (en) | Devices and methods for binaural spatial processing and projection of audio signals | |
US20180150275A1 (en) | Augmented Reality Mixing for Distributed Audio Capture | |
US10848890B2 (en) | Binaural audio signal processing method and apparatus for determining rendering method according to position of listener and object | |
JP2022116221A (ja) | 空間オーディオに関する方法、装置およびコンピュータプログラム | |
TW201507493A (zh) | 聲音處理裝置及方法、以及程式 | |
JP4498280B2 (ja) | 再生位置を決定するための装置及び方法 | |
US10887720B2 (en) | Emphasis for audio spatialization | |
JP7457893B2 (ja) | 制御装置、制御装置の処理方法、および、プログラム | |
JP7231412B2 (ja) | 情報処理装置および情報処理方法 | |
JP6431225B1 (ja) | 音響処理装置、映像音響処理装置、映像音響配信サーバおよびそれらのプログラム | |
JP2018157314A (ja) | 情報処理システム、情報処理方法及びプログラム | |
JP2020167471A (ja) | 情報処理装置、情報処理方法、及びプログラム | |
US11706562B2 (en) | Transducer steering and configuration systems and methods using a local positioning system | |
US20240089688A1 (en) | Processing of audio data | |
JP5779140B2 (ja) | 映像生成システム及び映像生成方法 | |
WO2023164173A1 (en) | Real-time sound field synthesis by modifying produced audio streams |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220830 |
|
RD01 | Notification of change of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7421 Effective date: 20221024 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230926 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20231027 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20231205 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20240122 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240206 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240219 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 7457893 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |