JP7384222B2 - 情報処理装置、制御方法及びプログラム - Google Patents
情報処理装置、制御方法及びプログラム Download PDFInfo
- Publication number
- JP7384222B2 JP7384222B2 JP2021565548A JP2021565548A JP7384222B2 JP 7384222 B2 JP7384222 B2 JP 7384222B2 JP 2021565548 A JP2021565548 A JP 2021565548A JP 2021565548 A JP2021565548 A JP 2021565548A JP 7384222 B2 JP7384222 B2 JP 7384222B2
- Authority
- JP
- Japan
- Prior art keywords
- information
- sound image
- image localization
- position information
- terminal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000010365 information processing Effects 0.000 title claims description 96
- 238000000034 method Methods 0.000 title claims description 26
- 230000004807 localization Effects 0.000 claims description 415
- 238000004891 communication Methods 0.000 claims description 256
- 230000008859 change Effects 0.000 claims description 79
- 238000012545 processing Methods 0.000 description 25
- 238000013459 approach Methods 0.000 description 23
- 238000003384 imaging method Methods 0.000 description 22
- 238000010586 diagram Methods 0.000 description 19
- 239000003550 marker Substances 0.000 description 12
- 230000008569 process Effects 0.000 description 12
- 230000015654 memory Effects 0.000 description 11
- 210000005069 ears Anatomy 0.000 description 7
- 238000005516 engineering process Methods 0.000 description 7
- 230000006870 function Effects 0.000 description 6
- 230000035807 sensation Effects 0.000 description 3
- 239000004065 semiconductor Substances 0.000 description 2
- 230000005236 sound signal Effects 0.000 description 2
- 230000001133 acceleration Effects 0.000 description 1
- 230000003190 augmentative effect Effects 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000000877 morphologic effect Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S7/00—Indicating arrangements; Control arrangements, e.g. balance control
- H04S7/30—Control circuits for electronic adaptation of the sound field
- H04S7/302—Electronic adaptation of stereophonic sound system to listener position or orientation
- H04S7/303—Tracking of listener position or orientation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S7/00—Indicating arrangements; Control arrangements, e.g. balance control
- H04S7/30—Control circuits for electronic adaptation of the sound field
- H04S7/302—Electronic adaptation of stereophonic sound system to listener position or orientation
- H04S7/303—Tracking of listener position or orientation
- H04S7/304—For headphones
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S3/00—Systems employing more than two channels, e.g. quadraphonic
- H04S3/008—Systems employing more than two channels, e.g. quadraphonic in which the audio signals are in digital form, i.e. employing more than two discrete digital channels
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R2460/00—Details of hearing devices, i.e. of ear- or headphones covered by H04R1/10 or H04R5/033 but not provided for in any of their subgroups, or of hearing aids covered by H04R25/00 but not provided for in any of its subgroups
- H04R2460/07—Use of position data from wide-area or local-area positioning systems in hearing devices, e.g. program or information selection
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S2400/00—Details of stereophonic systems covered by H04S but not provided for in its groups
- H04S2400/11—Positioning of individual sound objects, e.g. moving airplane, within a sound field
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- Stereophonic System (AREA)
Description
通信端末の端末位置情報を取得する取得部と、
所定領域と、前記通信端末に出力する音声コンテンツの音像定位位置情報とを対応付けて保持する保持部と、
前記端末位置情報が前記所定領域に含まれる場合、前記音像定位位置情報と前記端末位置情報とに基づいて、音像定位用情報を生成する生成部と、
前記音像定位用情報を出力する出力部と、を備える。
通信端末の端末位置情報を取得することと、
所定領域と、前記通信端末に出力する音声コンテンツの音像定位位置情報とを対応付けて保持することと、
前記端末位置情報が前記所定領域に含まれる場合、前記音像定位位置情報と前記端末位置情報とに基づいて、音像定位用情報を生成することと、
前記音像定位用情報を出力することと、を含む制御方法である。
通信端末の端末位置情報を取得することと、
所定領域と、前記通信端末に出力する音声コンテンツの音像定位位置情報とを対応付けて保持することと、
前記端末位置情報が前記所定領域に含まれる場合、前記音像定位位置情報と前記端末位置情報とに基づいて、音像定位用情報を生成することと、
前記音像定位用情報を出力することと、をコンピュータに実行させる制御プログラムである。
図1を用いて、実施の形態1にかかる情報処理装置1の構成例について説明する。図1は、実施の形態1にかかる情報処理装置の構成例を示す図である。情報処理装置1は、取得部2と、保持部3と、生成部4と、出力部5とを備える。
保持部3は、所定領域と、通信端末に出力する音声コンテンツの音像定位位置情報とを対応付けて保持する。
生成部4は、端末位置情報が所定領域に含まれるか否かを判定する(ステップS2)。生成部4は、端末位置情報と、上記テーブルにおいて所定領域を特定する位置情報とを比較して、端末位置情報が所定領域に含まれるか否かを判定する。
出力部5は、音像定位用情報を、情報処理装置1が備える制御部、及び通信端末の少なくとも一方に出力する(ステップS4)。
続いて、実施の形態2について説明する。実施の形態2は、実施の形態1を具体的にした実施の形態である。まず、実施の形態2の具体的な構成例を説明する前に、実施の形態2の概要を説明する。
近年、AR技術を用いたサービスが検討されている。AR技術を用いたサービスとして、例えば、アニメのキャラクタ、ドラマの俳優等、仮想的なキャラクタと仮想的に同伴しているかのようなサービスが検討されている。このようなサービスでは、ユーザが、仮想的なキャラクタを仮想的に同伴していることを体感できるように、当該キャラクタがいる仮想位置から上記キャラクタが話しかけることも検討されている。上記キャラクタは、仮想的なキャラクタであるため、当該サービスは現実世界を拡張するARサービスといえ、音響ARサービスと称されてもよい。なお、仮想的なキャラクタは、例えば、店舗、看板、草履等の仮想の物体であってもよい。
次に、図4を用いて、情報処理システム100の構成例について説明する。図4は、実施の形態2にかかる情報処理システムの構成例を示す図である。情報処理システム100は、通信端末40及び50と、サーバ装置60とを備える。
次に、通信端末40の構成例について説明する。通信端末40は、方向情報取得部41と、出力部42とを備える。なお、通信端末40は、左ユニット40Lと、右ユニット40Rとを含むため、左ユニット40L及び右ユニット40Rの両方が、方向情報取得部41、及び出力部42を有する構成であってもよい。
次に、サーバ装置60の構成例について説明する。サーバ装置60は、端末情報取得部61と、記憶部62と、生成部63と、出力部64と、制御部65とを備える。
エリア情報には、対象エリアに設定されたエリアに関する情報が設定される。エリア情報には、音像定位位置を変更する対象エリアを特定する情報が設定され、緯度、経度、範囲及び大きさを含むことができる。
次に、図6を用いて、実施の形態2にかかるサーバ装置60の動作例を説明する。図6は、実施の形態2にかかるサーバ装置の動作例を示すフローチャートである。サーバ装置60は、端末位置情報を取得するたびに、図6の動作例を実行する。なお、記憶部62は、音像定位関連テーブルT1を予め記憶しており、音像定位関連テーブルT1には、n(nは自然数)個の対象エリアが設定され、図6において、変数iは、エリア番号であることとして説明する。
生成部63は、端末位置情報がエリアiに含まれているか否かを判定する(ステップS12)。生成部63は、端末位置情報と、音像定位関連テーブルT1の対象エリアがエリアiである行(レコード)のエリア情報とを比較して、端末位置情報がエリアiのエリア情報に含まれるか否かを判定する。
制御部65は、音声コンテンツを補正し、補正された音声コンテンツを通信端末40の出力部42に送信する(ステップS15)。
続いて、実施の形態3について説明する。実施の形態3は、実施の形態2の変形例である。実施の形態2では、サーバ装置60が、音声コンテンツに対する音像定位処理を実行していたが、実施の形態3では、通信端末が、音声コンテンツに対する音像定位処理を実行する。なお、実施の形態3は、実施の形態2と同様の構成及び動作を含むため、同様の構成及び動作については適宜説明を割愛する。
図7を用いて、実施の形態3にかかる情報処理システム200について説明する。図7は、実施の形態3にかかる情報処理システムの構成例を示す図である。情報処理システム200は、通信端末40と、通信端末70と、サーバ装置80とを備える。情報処理システム200は、実施の形態2にかかる通信端末50が通信端末70に置き換わり、サーバ装置60がサーバ装置80に置き換わった構成である。通信端末40の構成例及び動作例については、実施の形態2と同様であるため、適宜説明を割愛する。
次に、通信端末70の構成例について説明する。通信端末70は、端末位置情報取得部51と、制御部71とを備える。通信端末70は、実施の形態2にかかる通信端末50の構成に、制御部71が追加された構成である。端末位置情報取得部51の構成は、実施の形態2と同様であるため、適宜説明を割愛する。なお、本実施の形態では、通信端末70が制御部71を備える構成として説明するが、通信端末40が制御部71を備え、通信端末70が制御部71を備えない構成としてもよい。
次に、サーバ装置80の構成例について説明する。サーバ装置80は、端末情報取得部61と、記憶部62と、生成部63と、出力部81とを備える。サーバ装置80は、実施の形態2にかかる制御部65を備えず、出力部64が出力部81に置き換わった構成である。端末情報取得部61、記憶部62、及び生成部63の構成は、実施の形態2と同様であるため、適宜説明を割愛する。
次に、実施の形態3にかかる情報処理システム200の動作例について説明する。情報処理システム200の動作例については、図6に示した動作例と基本的に同様であるため、図6を参照して説明を行う。
出力部81は、音像定位用情報を制御部71に出力(送信)する(ステップS14)。出力部81は、生成部63が生成した音像定位用情報を制御部71に送信する。出力部81は、音像定位関連テーブルT1の対象エリアがエリアiである行(レコード)の音声コンテンツ情報に対応する音声コンテンツを記憶部62から取得する。出力部81は、音像定位関連テーブルT1の対象エリアがエリアiである行(レコード)の音声コンテンツ情報が、生成コンテンツ(生成される音声コンテンツ)である場合、音声コンテンツを生成する。出力部81は、取得又は生成した音声コンテンツを制御部71に送信する。
続いて、実施の形態4について説明する。実施の形態4は、実施の形態2及び3の改良例である。そのため、実施の形態4の説明を、実施の形態3を用いて、実施の形態3との差分を説明する。実施の形態4は、実施の形態3にかかるサーバ装置80がサーバ装置90に置き換わった構成である。なお、実施の形態4にかかる情報処理システム、通信端末40及び70の構成例は、実施の形態3と基本的に同様である。そのため、情報処理システムの構成例、通信端末40及び70の構成例については説明を適宜割愛する。
通信端末40の構成例については、実施の形態3と基本的に同様であるが、方向情報取得部41は、取得した方向情報をサーバ装置60にも送信する。
図8を用いて、サーバ装置90の構成例について説明する。図8は、実施の形態4にかかるサーバ装置の構成例を示す図である。サーバ装置90は、端末情報取得部91と、記憶部62と、生成部92と、出力部81とを備える。記憶部62及び出力部81は、実施の形態3と同様であるため説明を割愛する。
生成部92は、実施の形態3の構成に加えて、音像定位位置情報の調整を行う。具体的には、生成部92は、音像定位関連テーブルT1のエリア情報と、端末位置情報とに基づいて、エリア情報に端末位置情報が含まれるかを判定する。生成部92は、エリア情報に端末位置情報が含まれる場合、音像定位関連テーブルT1の当該エリア情報に対応付けられた変更前位置及び変更情報に基づいて、変更後の音像定位位置を決定し、決定された音像定位置を音像定位位置情報として保持する。なお、生成部92は、音像定位位置情報を端末位置情報が含まれるエリア情報(対象エリア)と対応付けて、記憶部62に記憶する。
次に、図6及び図9を用いて、実施の形態4にかかる情報処理システムの動作例について説明する。まず、実施の形態4にかかる情報処理システムは、図6で示した動作例を実行するが、図6のステップS13の詳細動作が異なる。図9を用いて、図6のステップS13の詳細動作を説明する。図9は、実施の形態4における音像定位用情報の生成処理の詳細動作を説明するフローチャートである。図9に示す動作は、生成部92が実行する動作である。
生成部92は、変更後の音像定位位置の調整が必要であるか否かを判定する(ステップS133)。
実施の形態4にかかる生成部92が、通信端末40を所有するユーザに出力される音声コンテンツに関連する関連情報に基づいて、音像定位位置情報を調整するように変形を施してもよい。
続いて、実施の形態5について説明する。実施の形態5は、上述した実施の形態2~4の改良例である。実施の形態2~4では、サーバ装置は、ユーザに音声コンテンツを出力する構成であったが、本実施の形態では、ユーザに表示情報も出力する。以降の説明では、実施の形態3を用いて、実施の形態3との差分内容を説明する。
図10を用いて、実施の形態5にかかる情報処理システム300の構成例について説明する。図10は、実施の形態5にかかる情報処理システムの構成例を示す図である。情報処理システム300は、実施の形態3にかかる通信端末70及びサーバ装置80が、それぞれ通信端末110及びサーバ装置120に置き換わった構成である。なお、通信端末40の構成例については、実施の形態3と同様であるため、説明を適宜割愛する。
次に、通信端末110の構成例を説明する。通信端末110は、実施の形態3における通信端末70の構成に、撮像部112及び表示部113が追加され、端末位置情報取得部51が端末位置情報取得部111に置き換わった構成である。なお、制御部71の構成については、実施の形態3と同様であるため、説明を適宜割愛する。
次に、サーバ装置120の構成例について説明する。サーバ装置120は、端末情報取得部121と、記憶部122と、生成部123と、出力部124とを備える。端末情報取得部121、記憶部122、生成部123、及び出力部124は、実施の形態3にかかる端末情報取得部61、記憶部62、生成部63、及び出力部81がそれぞれ置き換わった構成である。
次に、図12を用いて、実施の形態5にかかる情報処理システム300の動作例を説明する。図12は、実施の形態5にかかる情報処理システムの動作例を示すフローチャートである。図12は、実施の形態3にかかる情報処理システムの動作例に、ステップS31~S34が追加されたフローチャートである。ステップS11~S15については、実施の形態3と同様であるため、説明を適宜割愛して説明する。
一方、ステップS32において、撮像画像に、変更後の音像定位位置が含まれない場合(ステップS32のNO)、ステップS33及びS34を実行せず、変数iをインクリメントする。
上述した実施の形態5では、サーバ装置120は、通信端末110の方向情報に基づいて、撮像画像に、変更後の音像定位位置が含まれるか否かを判定するが、ARマーカーを用いて、撮像画像に、変更後の音像定位位置が含まれるか否かを判定してもよい。この場合、ARマーカーは、変更後の音像定位位置に対応する位置に配置される。生成部123は、撮像画像にARマーカーが含まれている場合、撮像画像に、変更後の音像定位位置が含まれると判定する。そして、生成部123は、ARマーカーが配置されている位置に基づく所定の位置に対応する撮像画像中の座標に、上記変更後の音像定位位置に対応付けられた映像AR情報を関連付けて表示情報を生成する。所定の位置は、ARマーカーが配置されている位置と同じであってもよく、ユーザに注目させたい位置であってもよく、任意に設定することができる。
<1>上述した実施の形態では、生成部が音像定位位置情報を生成するものとして説明したが、生成部は、予め保持された音像定位位置情報の中から、対応する音像定位位置情報を選択する処理に替えてもよい。例えば、ユーザの移動方向が限定的である場合などでは、必要とする音像定位位置情報も限られてくる。そのため、保持部又は記憶部が、予め用いられる可能性のある音像定位位置情報を保持する。そして、生成部が、端末位置情報に基づいて、対応する音像定位位置情報を選択する処理を行う。このようにすれば、情報処理装置又はサーバ装置の処理負荷を軽減することもできる。
(付記1)
通信端末の端末位置情報を取得する取得部と、
所定領域と、前記通信端末に出力する音声コンテンツの音像定位位置情報とを対応付けて保持する保持部と、
前記端末位置情報が前記所定領域に含まれる場合、前記音像定位位置情報と前記端末位置情報とに基づいて、音像定位用情報を生成する生成部と、
前記音像定位用情報を出力する出力部と、を備える情報処理装置。
(付記2)
前記生成部は、前記端末位置情報と、前記音像定位位置情報との距離に応じて前記音像定位位置情報を調整する、付記1に記載の情報処理装置。
(付記3)
前記生成部は、前記端末位置情報と、目標物の位置情報とに基づいて、前記通信端末が前記目標物から遠ざかる方向に移動している場合、前記端末位置情報を基準とする前記目標物の方向に前記音像定位位置情報を調整する、付記1又は2に記載の情報処理装置。
(付記4)
前記取得部は、前記通信端末の方向情報を取得し、
前記生成部は、前記端末位置情報と目標物の位置情報とが所定距離となり、前記方向情報が示す方向が、前記端末位置情報を基準とする前記目標物の方向を示す目標物方向である場合、前記目標物方向に前記音像定位位置情報が設定されないように前記音像定位位置情報を調整する、付記1~3のいずれか1項に記載の情報処理装置。
(付記5)
前記生成部は、前記方向情報が変化し、前記方向情報が示す方向が、前記目標物方向にとなるタイミングで、前記前記音像定位位置情報を調整する、付記4に記載の情報処理装置。
(付記6)
前記生成部は、前記位置情報が所定時間変化しないタイミングで、前記音像定位位置情報を調整する、付記4又は5に記載の情報処理装置。
(付記7)
前記端末位置情報は、高度情報を含み、
前記生成部は、前記高度情報の変化に応じて前記音像定位位置情報を調整する、付記1~6のいずれか1項に記載の情報処理装置。
(付記8)
前記生成部は、前記音声コンテンツの長さに応じて前記音像定位位置情報を調整する、付記1~7のいずれか1項に記載の情報処理装置。
(付記9)
前記音声コンテンツは、仮想物体に関連する音声コンテンツを含み、
前記生成部は、前記仮想物体に関連する音声コンテンツが前記通信端末に出力される場合、前記通信端末を所有するユーザと、前記仮想物体との親密度に応じて前記音像定位位置情報を調整する、付記1~8のいずれか1項に記載の情報処理装置。
(付記10)
前記取得部は、前記通信端末が撮像した撮像画像を取得し、
前記生成部は、前記撮像画像に前記音像定位位置情報に対応する位置が含まれる場合、前記音声コンテンツに関連する表示情報を生成し、
前記出力部は、前記表示情報を前記通信端末に出力する、付記1~9のいずれか1項に記載の情報処理装置。
(付記11)
通信端末の端末位置情報を取得することと、
所定領域と、前記通信端末に出力する音声コンテンツの音像定位位置情報とを対応付けて保持することと、
前記端末位置情報が前記所定領域に含まれる場合、前記音像定位位置情報と前記端末位置情報とに基づいて、音像定位用情報を生成することと、
前記音像定位用情報を出力することと、を含む制御方法。
(付記12)
通信端末の端末位置情報を取得することと、
所定領域と、前記通信端末に出力する音声コンテンツの音像定位位置情報とを対応付けて保持することと、
前記端末位置情報が前記所定領域に含まれる場合、前記音像定位位置情報と前記端末位置情報とに基づいて、音像定位用情報を生成することと、
前記音像定位用情報を出力することと、をコンピュータに実行させる制御プログラム。
2 取得部
3 保持部
4、63、92、123 生成部
5、42、64、81、124 出力部
40、50、70、110 通信端末
41 方向情報取得部
51、111 端末位置情報取得部
60、80、90、120 サーバ装置
61、91、121 端末情報取得部
62、122 記憶部
65、71 制御部
100、200、300 情報処理システム
112 撮像部
113 表示部
Claims (20)
- 通信端末の端末位置情報を取得する取得手段と、
所定領域と、前記通信端末に出力する音声コンテンツの音像定位位置情報とを対応付けて保持する保持手段と、
前記端末位置情報が前記所定領域に含まれる場合、前記音像定位位置情報と前記端末位置情報とに基づいて、音像定位用情報を生成する生成手段と、
前記音像定位用情報を出力する出力手段と、を備え、
前記取得手段は、前記通信端末の方向情報を取得し、
前記生成手段は、前記端末位置情報と目標物の位置情報とが所定距離となり、前記方向情報が示す方向が、前記端末位置情報を基準とする前記目標物の方向を示す目標物方向である場合、前記目標物方向に前記音像定位位置情報が設定されないように前記音像定位位置情報を調整する、情報処理装置。 - 前記生成手段は、前記端末位置情報と、前記音像定位位置情報との距離に応じて前記音像定位位置情報を調整する、請求項1に記載の情報処理装置。
- 前記生成手段は、前記端末位置情報と、目標物の位置情報とに基づいて、前記通信端末が前記目標物から遠ざかる方向に移動している場合、前記端末位置情報を基準とする前記目標物の方向に前記音像定位位置情報を調整する、請求項1又は2に記載の情報処理装置。
- 前記生成手段は、前記方向情報が変化し、前記方向情報が示す方向が、前記目標物方向にとなるタイミングで、前記音像定位位置情報を調整する、請求項1~3のいずれか1項に記載の情報処理装置。
- 前記生成手段は、前記位置情報が所定時間変化しないタイミングで、前記音像定位位置情報を調整する、請求項1~4のいずれか1項に記載の情報処理装置。
- 前記端末位置情報は、高度情報を含み、
前記生成手段は、前記高度情報の変化に応じて前記音像定位位置情報を調整する、請求項1~5のいずれか1項に記載の情報処理装置。 - 前記生成手段は、前記音声コンテンツの長さに応じて前記音像定位位置情報を調整する、請求項1~6のいずれか1項に記載の情報処理装置。
- 前記音声コンテンツは、仮想物体に関連する音声コンテンツを含み、
前記生成手段は、前記仮想物体に関連する音声コンテンツが前記通信端末に出力される場合、前記通信端末を所有するユーザと、前記仮想物体との親密度に応じて前記音像定位位置情報を調整する、請求項1~7のいずれか1項に記載の情報処理装置。 - 前記取得手段は、前記通信端末が撮像した撮像画像を取得し、
前記生成手段は、前記撮像画像に前記音像定位位置情報に対応する位置が含まれる場合、前記音声コンテンツに関連する表示情報を生成し、
前記出力手段は、前記表示情報を前記通信端末に出力する、請求項1~8のいずれか1項に記載の情報処理装置。 - 通信端末の端末位置情報を取得する取得手段と、
所定領域と、前記通信端末に出力する音声コンテンツの音像定位位置情報とを対応付けて保持する保持手段と、
前記端末位置情報が前記所定領域に含まれる場合、前記音像定位位置情報と前記端末位置情報とに基づいて、音像定位用情報を生成する生成手段と、
前記音像定位用情報を出力する出力手段と、を備え、
前記生成手段は、前記音声コンテンツの長さに応じて前記音像定位位置情報を調整する、情報処理装置。 - 通信端末の端末位置情報を取得する取得手段と、
所定領域と、前記通信端末に出力する音声コンテンツの音像定位位置情報とを対応付けて保持する保持手段と、
前記端末位置情報が前記所定領域に含まれる場合、前記音像定位位置情報と前記端末位置情報とに基づいて、音像定位用情報を生成する生成手段と、
前記音像定位用情報を出力する出力手段と、を備え、
前記音声コンテンツは、仮想物体に関連する音声コンテンツを含み、
前記生成手段は、前記仮想物体に関連する音声コンテンツが前記通信端末に出力される場合、前記通信端末を所有するユーザと、前記仮想物体との親密度に応じて前記音像定位位置情報を調整する、情報処理装置。 - 通信端末の端末位置情報を取得する取得手段と、
所定領域と、前記通信端末に出力する音声コンテンツの音像定位位置情報とを対応付けて保持する保持手段と、
前記端末位置情報が前記所定領域に含まれる場合、前記音像定位位置情報と前記端末位置情報とに基づいて、音像定位用情報を生成する生成手段と、
前記音像定位用情報を出力する出力手段と、を備え、
前記取得手段は、前記通信端末が撮像した撮像画像を取得し、
前記生成手段は、前記撮像画像に前記音像定位位置情報に対応する位置が含まれる場合、前記音声コンテンツに関連する表示情報を生成し、
前記出力手段は、前記表示情報を前記通信端末に出力する、情報処理装置。 - 通信端末の端末位置情報を取得することと、
所定領域と、前記通信端末に出力する音声コンテンツの音像定位位置情報とを対応付けて保持することと、
前記端末位置情報が前記所定領域に含まれる場合、前記音像定位位置情報と前記端末位置情報とに基づいて、音像定位用情報を生成することと、
前記音像定位用情報を出力することと、を含み、
前記通信端末の方向情報を取得することと、
前記端末位置情報と目標物の位置情報とが所定距離となり、前記方向情報が示す方向が、前記端末位置情報を基準とする前記目標物の方向を示す目標物方向である場合、前記目標物方向に前記音像定位位置情報が設定されないように前記音像定位位置情報を調整することと、をさらに含む制御方法。 - 通信端末の端末位置情報を取得することと、
所定領域と、前記通信端末に出力する音声コンテンツの音像定位位置情報とを対応付けて保持することと、
前記端末位置情報が前記所定領域に含まれる場合、前記音像定位位置情報と前記端末位置情報とに基づいて、音像定位用情報を生成することと、
前記音像定位用情報を出力することと、を含み、
前記音声コンテンツの長さに応じて前記音像定位位置情報を調整することをさらに含む、制御方法。 - 通信端末の端末位置情報を取得することと、
所定領域と、前記通信端末に出力する音声コンテンツの音像定位位置情報とを対応付けて保持することと、
前記端末位置情報が前記所定領域に含まれる場合、前記音像定位位置情報と前記端末位置情報とに基づいて、音像定位用情報を生成することと、
前記音像定位用情報を出力することと、を含み、
前記音声コンテンツは、仮想物体に関連する音声コンテンツを含み、
前記仮想物体に関連する音声コンテンツが前記通信端末に出力される場合、前記通信端末を所有するユーザと、前記仮想物体との親密度に応じて前記音像定位位置情報を調整することをさらに含む、制御方法。 - 通信端末の端末位置情報を取得することと、
所定領域と、前記通信端末に出力する音声コンテンツの音像定位位置情報とを対応付けて保持することと、
前記端末位置情報が前記所定領域に含まれる場合、前記音像定位位置情報と前記端末位置情報とに基づいて、音像定位用情報を生成することと、
前記音像定位用情報を出力することと、を含み、
前記通信端末が撮像した撮像画像を取得することと、
前記撮像画像に前記音像定位位置情報に対応する位置が含まれる場合、前記音声コンテンツに関連する表示情報を生成することと、
前記表示情報を前記通信端末に出力することと、をさらに含む制御方法。 - 通信端末の端末位置情報を取得することと、
所定領域と、前記通信端末に出力する音声コンテンツの音像定位位置情報とを対応付けて保持することと、
前記端末位置情報が前記所定領域に含まれる場合、前記音像定位位置情報と前記端末位置情報とに基づいて、音像定位用情報を生成することと、
前記音像定位用情報を出力することと、をコンピュータに実行させ、
前記通信端末の方向情報を取得することと、
前記端末位置情報と目標物の位置情報とが所定距離となり、前記方向情報が示す方向が、前記端末位置情報を基準とする前記目標物の方向を示す目標物方向である場合、前記目標物方向に前記音像定位位置情報が設定されないように前記音像定位位置情報を調整することと、をさらにコンピュータに実行させる制御プログラム。 - 通信端末の端末位置情報を取得することと、
所定領域と、前記通信端末に出力する音声コンテンツの音像定位位置情報とを対応付けて保持することと、
前記端末位置情報が前記所定領域に含まれる場合、前記音像定位位置情報と前記端末位置情報とに基づいて、音像定位用情報を生成することと、
前記音像定位用情報を出力することと、をコンピュータに実行させ、
前記音声コンテンツの長さに応じて前記音像定位位置情報を調整することをさらにコンピュータに実行させる制御プログラム。 - 通信端末の端末位置情報を取得することと、
所定領域と、前記通信端末に出力する音声コンテンツの音像定位位置情報とを対応付けて保持することと、
前記端末位置情報が前記所定領域に含まれる場合、前記音像定位位置情報と前記端末位置情報とに基づいて、音像定位用情報を生成することと、
前記音像定位用情報を出力することと、をコンピュータに実行させ、
前記音声コンテンツは、仮想物体に関連する音声コンテンツを含み、
前記仮想物体に関連する音声コンテンツが前記通信端末に出力される場合、前記通信端末を所有するユーザと、前記仮想物体との親密度に応じて前記音像定位位置情報を調整することをさらにコンピュータに実行させる制御プログラム。 - 通信端末の端末位置情報を取得することと、
所定領域と、前記通信端末に出力する音声コンテンツの音像定位位置情報とを対応付けて保持することと、
前記端末位置情報が前記所定領域に含まれる場合、前記音像定位位置情報と前記端末位置情報とに基づいて、音像定位用情報を生成することと、
前記音像定位用情報を出力することと、をコンピュータに実行させ、
前記通信端末が撮像した撮像画像を取得することと、
前記撮像画像に前記音像定位位置情報に対応する位置が含まれる場合、前記音声コンテンツに関連する表示情報を生成することと、
前記表示情報を前記通信端末に出力することと、をさらにコンピュータに実行させる制御プログラム。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019229636 | 2019-12-19 | ||
JP2019229636 | 2019-12-19 | ||
PCT/JP2020/046283 WO2021125081A1 (ja) | 2019-12-19 | 2020-12-11 | 情報処理装置、制御方法及び非一時的なコンピュータ可読媒体 |
Publications (3)
Publication Number | Publication Date |
---|---|
JPWO2021125081A1 JPWO2021125081A1 (ja) | 2021-06-24 |
JPWO2021125081A5 JPWO2021125081A5 (ja) | 2022-08-09 |
JP7384222B2 true JP7384222B2 (ja) | 2023-11-21 |
Family
ID=76478780
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021565548A Active JP7384222B2 (ja) | 2019-12-19 | 2020-12-11 | 情報処理装置、制御方法及びプログラム |
Country Status (3)
Country | Link |
---|---|
US (1) | US20230007428A1 (ja) |
JP (1) | JP7384222B2 (ja) |
WO (1) | WO2021125081A1 (ja) |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2017103598A (ja) | 2015-12-01 | 2017-06-08 | ソニー株式会社 | 情報処理装置、情報処理方法、およびプログラム |
WO2019026597A1 (ja) | 2017-07-31 | 2019-02-07 | ソニー株式会社 | 情報処理装置、情報処理方法、並びにプログラム |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8718930B2 (en) * | 2012-08-24 | 2014-05-06 | Sony Corporation | Acoustic navigation method |
-
2020
- 2020-12-11 WO PCT/JP2020/046283 patent/WO2021125081A1/ja active Application Filing
- 2020-12-11 JP JP2021565548A patent/JP7384222B2/ja active Active
- 2020-12-11 US US17/782,911 patent/US20230007428A1/en active Pending
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2017103598A (ja) | 2015-12-01 | 2017-06-08 | ソニー株式会社 | 情報処理装置、情報処理方法、およびプログラム |
WO2019026597A1 (ja) | 2017-07-31 | 2019-02-07 | ソニー株式会社 | 情報処理装置、情報処理方法、並びにプログラム |
Non-Patent Citations (1)
Title |
---|
日本電気株式会社,「NEC、独自の音響定位技術を用いた空間演出プラットフォームの提供を開始」,NECプレスリリース [online] [video],日本電気株式会社,2019年11月21日,<URL:https://jpn.nec.com/press/201911/20191121_01.html>,動画(特に1:50~2:04),[令和5年7月11日検索] |
Also Published As
Publication number | Publication date |
---|---|
US20230007428A1 (en) | 2023-01-05 |
WO2021125081A1 (ja) | 2021-06-24 |
JPWO2021125081A1 (ja) | 2021-06-24 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11068227B2 (en) | Information processing device and information processing method for indicating a position outside a display region | |
US10880670B2 (en) | Systems and methods for determining estimated head orientation and position with ear pieces | |
CN108141696B (zh) | 用于空间音频调节的系统和方法 | |
KR102197544B1 (ko) | 공간화 오디오를 가진 혼합 현실 시스템 | |
US10257637B2 (en) | Shoulder-mounted robotic speakers | |
US9774978B2 (en) | Position determination apparatus, audio apparatus, position determination method, and program | |
JP7100824B2 (ja) | データ処理装置、データ処理方法及びプログラム | |
JP2016201817A (ja) | 情報処理システム、その制御方法、及びプログラム、並びに情報処理装置、その制御方法、及びプログラム | |
US10674259B2 (en) | Virtual microphone | |
CN116601514A (zh) | 用于使用声信标来确定设备的位置和取向的方法和系统 | |
JP7384222B2 (ja) | 情報処理装置、制御方法及びプログラム | |
WO2020026548A1 (ja) | 情報処理装置及び情報処理方法、並びに音響システム | |
JP7428189B2 (ja) | 情報処理装置、制御方法及び制御プログラム | |
US10820132B2 (en) | Voice providing device and voice providing method | |
US10638249B2 (en) | Reproducing apparatus | |
WO2022070337A1 (ja) | 情報処理装置、ユーザ端末、制御方法、非一時的なコンピュータ可読媒体、及び情報処理システム | |
US20230370798A1 (en) | Information processing device, control method, non-transitory computer-readable medium, and information processing system | |
US20230101693A1 (en) | Sound processing apparatus, sound processing system, sound processing method, and non-transitory computer readable medium storing program | |
WO2014060598A2 (en) | Sensing systems, associated methods and apparatus |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220610 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220610 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230718 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230915 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20231010 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20231023 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 7384222 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |