JP2018152846A - 音響記録装置、音響システム、音響記録方法、プログラムおよびデータ構造 - Google Patents
音響記録装置、音響システム、音響記録方法、プログラムおよびデータ構造 Download PDFInfo
- Publication number
- JP2018152846A JP2018152846A JP2018030769A JP2018030769A JP2018152846A JP 2018152846 A JP2018152846 A JP 2018152846A JP 2018030769 A JP2018030769 A JP 2018030769A JP 2018030769 A JP2018030769 A JP 2018030769A JP 2018152846 A JP2018152846 A JP 2018152846A
- Authority
- JP
- Japan
- Prior art keywords
- acoustic
- sound
- data
- image
- recording
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R3/00—Circuits for transducers, loudspeakers or microphones
- H04R3/005—Circuits for transducers, loudspeakers or microphones for combining the signals of two or more microphones
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R1/00—Details of transducers, loudspeakers or microphones
- H04R1/20—Arrangements for obtaining desired frequency or directional characteristics
- H04R1/32—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only
- H04R1/40—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers
- H04R1/406—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers microphones
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S7/00—Indicating arrangements; Control arrangements, e.g. balance control
- H04S7/30—Control circuits for electronic adaptation of the sound field
- H04S7/302—Electronic adaptation of stereophonic sound system to listener position or orientation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S2400/00—Details of stereophonic systems covered by H04S but not provided for in its groups
- H04S2400/15—Aspects of sound capture and related signal processing for recording or reproduction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S2420/00—Techniques used stereophonic systems covered by H04S but not provided for in its groups
- H04S2420/11—Application of ambisonics in stereophonic audio systems
Landscapes
- Health & Medical Sciences (AREA)
- Otolaryngology (AREA)
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Acoustics & Sound (AREA)
- Signal Processing (AREA)
- General Health & Medical Sciences (AREA)
- Studio Devices (AREA)
- Stereophonic System (AREA)
- Television Signal Processing For Recording (AREA)
Abstract
Description
Claims (16)
- 音響記録装置であって、
音を収音する複数の収音手段と、
前記音響記録装置の姿勢を計測する計測手段と、
該姿勢が計測された時点に対応する、前記複数の収音手段各々で収音された音に基づく音響情報とを関連付けて記録する記録手段と
を含む、音響記録装置。 - 前記音響情報は、前記複数の収音手段各々で収音された複数の音響信号から得られる収音手段毎の音響データ、または、前記複数の収音手段各々で収音された複数の音響信号からエンコードされた立体音響データである、請求項1に記載の音響記録装置。
- 前記音響記録装置は、
当該音響記録装置の所定時点の姿勢に基づいて、該所定時点に対応する音響情報に対し射影変換を施す音響変換手段
をさらに含む、請求項1または2に記載の音響記録装置。 - 前記音響記録装置は、
光学系を有する撮像手段
をさらに含み、前記撮像手段により前記光学系を通して撮像された画像信号に基づく画像情報をさらに前記姿勢に関連付けて記録する、請求項3に記載の音響記録装置。 - 前記姿勢に基づいて、所定時点に対応する画像情報に対し射影変換を施す画像変換手段と、
天頂補正および水平面の回転補正のいずれか一方または両方を実施するか否かの選択を受け付ける選択手段と
をさらに含み、前記音響変換手段による射影変換および前記画像変換手段による射影変換は、前記選択手段により天頂補正および水平面の回転補正のいずれか一方または両方を実施する旨の選択が受け付けられた場合に有効化される、請求項4に記載の音響記録装置。 - 前記記録手段により所定時点に関連付けて記録される画像情報は、1以上のフレームを含むフレーム集合の単位の画像情報であり、前記姿勢は、前記フレーム集合に対応する時間区間に計測された姿勢であり、前記姿勢に関連付けて記録される音響情報は、前記フレーム集合に対応する時間区間に収音された音に基づく音響情報であり、前記姿勢は、基準方向に対する傾斜角、または基準方向に対する傾斜角および所定の正面方向に対する水平面での回転角度の形で記録される、請求項4または5に記載の音響記録装置。
- 前記光学系は、広角光学系である請求項4〜6のいずれか1項に記載の音響記録装置。
- 音響記録装置を含む音響システムであって、
音を収音する複数の収音手段と、
前記音響記録装置の姿勢を計測する計測手段と、
前記姿勢が計測された所定時点に対応する、前記複数の収音手段各々で収音された音に基づく音響情報とを関連付けて記録する記録手段と
を含む、音響システム。 - 前記音響記録装置の所定時点の姿勢に基づいて、該所定時点に対応する音響情報に対し射影変換を施す音響変換手段
をさらに含む、請求項8に記載の音響システム。 - 前記複数の収音手段各々で収音された収音手段毎の音響信号から得られる収音手段毎の音響データに基づいてエンコードを行い、立体音響データを生成するエンコード手段と、
前記立体音響データに基づいてデコードを行い、スピーカ駆動信号を生成するデコード手段と
をさらに含む、請求項8または9に記載の音響システム。 - 前記記録手段により記録される音響情報は、前記複数の収音手段各々で収音された複数の音響信号から得られる収音手段毎の音響データ、または、前記複数の収音手段各々で収音された複数の音響信号からエンコードされた立体音響データである、請求項10に記載の音響システム。
- 前記音響記録装置が備える光学系を通して撮像する撮像手段をさらに含み、前記記録手段は、前記撮像手段により前記光学系を通して撮像された画像信号に基づく画像情報をさらに、前記姿勢に関連付けて記録し、前記音響システムは、
当該音響記録装置の所定時点の姿勢に基づいて、該所定時点に対応する画像情報に対し射影変換を施す画像変換手段と
天頂補正および水平面の回転補正のいずれか一方または両方を実施するか否かの選択を受け付ける選択手段と
をさらに含み、音響変換手段による射影変換および前記画像変換手段による射影変換は、前記選択手段により天頂補正および水平面の回転補正のいずれか一方または両方を実施する旨の選択が受け付けられた場合に同時に有効化される、請求項11に記載の音響システム。 - 音響記録装置が実行する音響記録方法であって、前記音響記録装置が、
複数の収音手段により音を収音するステップと、
前記音響記録装置の姿勢を計測手段により計測するステップと、
該姿勢が計測された時点に対応する、前記複数の収音手段各々で収音された音に基づく音響情報とを関連付けて記録するステップと
を実行する、音響記録方法。 - 前記記録するステップは、
前記複数の収音手段各々で収音された複数の音響信号から得られる収音手段毎の音響データを前記音響情報として記録するステップを含むか、または、
前記複数の収音手段各々で収音された複数の音響信号に基づいてエンコードを行い、立体音響データを生成するステップと、前記立体音響データを前記音響情報として記録するステップとを含む、請求項13に記載の音響記録方法。 - 音響記録装置を実現するためのプログラムであって、コンピュータまたはプログラマブルデバイスを、
複数の収音手段により音が収音された音響信号に基づく音響情報を取得する音響取得手段、
計測手段により計測された前記音響記録装置の姿勢を取得する姿勢取得手段、および
該姿勢が計測された時点に対応する、前記複数の収音手段各々で収音された音に基づく音響情報とを関連付けて記録する記録手段
として機能させるためのプログラム。 - コンピュータにより座標系が変換される音声付き動画データを生成するためのデータを格納するデータ構造であって、
撮像手段により撮像された動画形式の画像のデータである画像データと、収音手段により収音された音響のデータである音響データと、前記音響が収音された際の前記収音手段の基準方向に対する姿勢のデータである姿勢データと、を有し、前記画像データのフレームと、前記音響データの前記フレームに対応する音響情報と、前記姿勢データの前記フレームに対応する姿勢とが関連付けられる、データ構造。
Priority Applications (6)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CA3054890A CA3054890A1 (en) | 2017-03-14 | 2018-03-14 | Sound recording apparatus, sound system, sound recording method, and carrier means |
CN201880017543.0A CN110463226B (zh) | 2017-03-14 | 2018-03-14 | 声音记录设备,声音系统,声音记录方法和载体装置 |
PCT/JP2018/009889 WO2018168902A1 (en) | 2017-03-14 | 2018-03-14 | Sound recording apparatus, sound system, sound recording method, and carrier means |
US16/490,825 US11490199B2 (en) | 2017-03-14 | 2018-03-14 | Sound recording apparatus, sound system, sound recording method, and carrier means |
EP18715142.8A EP3596940A1 (en) | 2017-03-14 | 2018-03-14 | Sound recording apparatus, sound system, sound recording method, and carrier means |
JP2022199878A JP2023027280A (ja) | 2017-03-14 | 2022-12-15 | 音響装置、撮像装置、音響システム、方法およびプログラム |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017048769 | 2017-03-14 | ||
JP2017048769 | 2017-03-14 |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022199878A Division JP2023027280A (ja) | 2017-03-14 | 2022-12-15 | 音響装置、撮像装置、音響システム、方法およびプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2018152846A true JP2018152846A (ja) | 2018-09-27 |
JP7196399B2 JP7196399B2 (ja) | 2022-12-27 |
Family
ID=63681930
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018030769A Active JP7196399B2 (ja) | 2017-03-14 | 2018-02-23 | 音響装置、音響システム、方法およびプログラム |
Country Status (4)
Country | Link |
---|---|
US (1) | US11490199B2 (ja) |
EP (1) | EP3596940A1 (ja) |
JP (1) | JP7196399B2 (ja) |
CA (1) | CA3054890A1 (ja) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2018182528A (ja) * | 2017-04-13 | 2018-11-15 | 株式会社ザクティ | 全天球カメラ及び音声処理方法 |
JP2020057987A (ja) * | 2018-10-04 | 2020-04-09 | 株式会社ズーム | アンビソニックスのためのマイクロホン、a/bフォーマット変換ソフトウェア、レコーダー、再生ソフトウェア |
JP2020061691A (ja) * | 2018-10-11 | 2020-04-16 | 楽天株式会社 | カメラアッセンブリ |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2020053774A (ja) * | 2018-09-25 | 2020-04-02 | 株式会社リコー | 撮像装置および画像記録方法 |
US10966017B2 (en) | 2019-01-04 | 2021-03-30 | Gopro, Inc. | Microphone pattern based on selected image of dual lens image capture device |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20120162362A1 (en) * | 2010-12-22 | 2012-06-28 | Microsoft Corporation | Mapping sound spatialization fields to panoramic video |
JP5843033B1 (ja) * | 2014-05-15 | 2016-01-13 | 株式会社リコー | 撮像システム、撮像装置、プログラムおよびシステム |
WO2016093063A1 (ja) * | 2014-12-08 | 2016-06-16 | 株式会社リコー | 画像管理システム、画像管理方法、及びプログラム |
JP2016163181A (ja) * | 2015-03-02 | 2016-09-05 | キヤノン株式会社 | 信号処理装置及び信号処理方法 |
Family Cites Families (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS5843033B2 (ja) | 1978-11-17 | 1983-09-24 | 株式会社リコー | インク粒子の偏向制御装置 |
JPS5846549B2 (ja) | 1981-12-09 | 1983-10-17 | 株式会社 武蔵野化学研究所 | 電解法 |
RU2420027C2 (ru) * | 2006-09-25 | 2011-05-27 | Долби Лэборетериз Лайсенсинг Корпорейшн | Улучшенное пространственное разрешение звукового поля для систем многоканального воспроизведения аудио посредством получения сигналов с угловыми членами высокого порядка |
US20100223552A1 (en) * | 2009-03-02 | 2010-09-02 | Metcalf Randall B | Playback Device For Generating Sound Events |
US8525868B2 (en) | 2011-01-13 | 2013-09-03 | Qualcomm Incorporated | Variable beamforming with a mobile platform |
JP2013171089A (ja) | 2012-02-17 | 2013-09-02 | Toshiba Corp | 音声補正装置、方法、及びプログラム |
US20140006471A1 (en) | 2012-06-27 | 2014-01-02 | Horia Margarit | Dynamic asynchronous modular feed-forward architecture, system, and method |
US9179232B2 (en) * | 2012-09-17 | 2015-11-03 | Nokia Technologies Oy | Method and apparatus for associating audio objects with content and geo-location |
JP5777185B1 (ja) | 2014-05-16 | 2015-09-09 | 株式会社ユニモト | 全周動画配信システム、全周動画配信方法、通信端末装置およびそれらの制御方法と制御プログラム |
JP6398457B2 (ja) | 2014-08-14 | 2018-10-03 | 株式会社リコー | 撮影装置、撮影方法、およびプログラム |
CN105898185A (zh) | 2014-11-19 | 2016-08-24 | 杜比实验室特许公司 | 调节视频会议系统中的空间一致性 |
US9712936B2 (en) | 2015-02-03 | 2017-07-18 | Qualcomm Incorporated | Coding higher-order ambisonic audio data with motion stabilization |
JP5846549B1 (ja) | 2015-02-06 | 2016-01-20 | 株式会社リコー | 画像処理システム、画像処理方法、プログラム、撮像システム、画像生成装置、画像生成方法およびプログラム |
US9621795B1 (en) * | 2016-01-08 | 2017-04-11 | Microsoft Technology Licensing, Llc | Active speaker location detection |
-
2018
- 2018-02-23 JP JP2018030769A patent/JP7196399B2/ja active Active
- 2018-03-14 US US16/490,825 patent/US11490199B2/en active Active
- 2018-03-14 CA CA3054890A patent/CA3054890A1/en not_active Abandoned
- 2018-03-14 EP EP18715142.8A patent/EP3596940A1/en active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20120162362A1 (en) * | 2010-12-22 | 2012-06-28 | Microsoft Corporation | Mapping sound spatialization fields to panoramic video |
JP5843033B1 (ja) * | 2014-05-15 | 2016-01-13 | 株式会社リコー | 撮像システム、撮像装置、プログラムおよびシステム |
WO2016093063A1 (ja) * | 2014-12-08 | 2016-06-16 | 株式会社リコー | 画像管理システム、画像管理方法、及びプログラム |
JP2016163181A (ja) * | 2015-03-02 | 2016-09-05 | キヤノン株式会社 | 信号処理装置及び信号処理方法 |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2018182528A (ja) * | 2017-04-13 | 2018-11-15 | 株式会社ザクティ | 全天球カメラ及び音声処理方法 |
JP2020057987A (ja) * | 2018-10-04 | 2020-04-09 | 株式会社ズーム | アンビソニックスのためのマイクロホン、a/bフォーマット変換ソフトウェア、レコーダー、再生ソフトウェア |
JP2020061691A (ja) * | 2018-10-11 | 2020-04-16 | 楽天株式会社 | カメラアッセンブリ |
US10951794B2 (en) | 2018-10-11 | 2021-03-16 | Rakuten, Inc. | Camera assembly |
Also Published As
Publication number | Publication date |
---|---|
EP3596940A1 (en) | 2020-01-22 |
CA3054890A1 (en) | 2018-09-20 |
US20200015007A1 (en) | 2020-01-09 |
JP7196399B2 (ja) | 2022-12-27 |
US11490199B2 (en) | 2022-11-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7196399B2 (ja) | 音響装置、音響システム、方法およびプログラム | |
JP5920507B1 (ja) | 画像処理システム、画像処理方法およびプログラム | |
JP7226484B2 (ja) | 撮像システム、撮像装置、動画表示装置、画像処理装置、方法およびプログラム。 | |
KR101888470B1 (ko) | 촬상 시스템, 촬상 장치, 컴퓨터 프로그램 및 시스템 | |
JP2023027280A (ja) | 音響装置、撮像装置、音響システム、方法およびプログラム | |
EP3952276A1 (en) | Image processing device, image processing method, and program | |
KR20120053006A (ko) | 개선된 오디오/비디오 방법들 및 시스템들 | |
KR20200087816A (ko) | 화상 처리 장치, 화상 처리 시스템, 화상 처리 방법 및 기록 매체 | |
JP6256513B2 (ja) | 撮像システム、撮像装置、方法およびプログラム | |
JP7306089B2 (ja) | 画像処理システム、撮像システム、画像処理装置、撮像装置およびプログラム | |
US11228708B2 (en) | Image pickup apparatus and image pickup system | |
JP2012151708A (ja) | 撮像装置 | |
JP2019140667A (ja) | 情報処理装置、情報処理システム、データ生成方法およびプログラム | |
JP2019169762A (ja) | 情報処理装置 | |
JP2020078065A (ja) | 撮像装置、情報処理装置、補正量設定方法およびプログラム | |
US20210289137A1 (en) | Image pickup control device, image pickup device, and image pickup control method | |
JP2020123934A (ja) | データ編集処理装置、アプリケーション、及び撮影装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20201118 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220111 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220314 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220412 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20220531 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220803 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220830 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20221028 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20221115 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20221128 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 7196399 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |