JP6990042B2 - 音声提供装置及び音声提供方法 - Google Patents
音声提供装置及び音声提供方法 Download PDFInfo
- Publication number
- JP6990042B2 JP6990042B2 JP2017096272A JP2017096272A JP6990042B2 JP 6990042 B2 JP6990042 B2 JP 6990042B2 JP 2017096272 A JP2017096272 A JP 2017096272A JP 2017096272 A JP2017096272 A JP 2017096272A JP 6990042 B2 JP6990042 B2 JP 6990042B2
- Authority
- JP
- Japan
- Prior art keywords
- user
- sound
- area
- sound collection
- providing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 9
- 238000004891 communication Methods 0.000 description 14
- 238000010586 diagram Methods 0.000 description 10
- 230000004048 modification Effects 0.000 description 10
- 238000012986 modification Methods 0.000 description 10
- 238000001514 detection method Methods 0.000 description 8
- 230000007423 decrease Effects 0.000 description 3
- 230000000694 effects Effects 0.000 description 3
- 230000006870 function Effects 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 239000000203 mixture Substances 0.000 description 2
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 230000001934 delay Effects 0.000 description 1
- 230000008451 emotion Effects 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
- 239000011435 rock Substances 0.000 description 1
Images
Landscapes
- Information Transfer Between Computers (AREA)
- Reverberation, Karaoke And Other Acoustics (AREA)
Description
次に、図6を参照して本実施形態の動作を説明する。まずユーザは、或る方向に対してユーザ端末200をかざして、その方向に存在するエリアで収音された音声を聴くことを指示する操作を行う。ここで、或る方向とは、例えばユーザから直接見えるコンサート会場などのエリアが存在する方向であってもよいし、また、ユーザからはエリアの具体的な外観や様子が直接見えない方向であるがなんとなくユーザ自身の気が向いた方向であってもよい。ユーザ端末200の検出部201はこの操作を受け付けると(ステップS11)、ユーザの位置とユーザが向いている方向とを検出する(ステップS12)。前述したように、ここでいうユーザの位置はユーザ端末200の位置であり、ユーザが向いている方向はユーザ端末200が向いているとき方向である。そして、通知部202は、ユーザの位置及びユーザが向いている方向を示すデータをサーバ装置100に通知する(ステップS13)。
上述した実施形態は次のような変形が可能である。また、以下の変形例を互いに組み合わせて実施してもよい。
[変形例1]
提供部103は、エリアの位置及びユーザの位置の間の距離を算出し、その距離に応じた基準パラメータを、ユーザの位置を基準とした方向と収音データに関連付けられたエリアの位置との一致度に応じて増減させることで、パラメータを決めればよい。従って実施形態で説明した例以外に、提供部103は、図7において、ユーザの向いている方向を示す半直線Dを中心とした所定の角度の範囲(半直線D1及び半直線D2に挟まれた範囲)と、各エリアとが重なる領域の大きさに基づいて収音データの音量を制御するようにしてもよい。例えば、提供部103は、収音データに含まれる音量パラメータについて、上記の重なる領域が大きいと音量を大きくし、重なる領域が小さいと音量を小さくするという設定を行う。ここでいう、重なる領域の大きさは、その重なる領域の面積の絶対値であってもよいし、そのエリア全体の面積を分母として重なる領域の面積を分子とした分数の値であってもよい。
さらに、提供部103は、収音データの音量のみならず、収音データの音色やエフェクトなど、要するにエリア及びユーザの位置関係に基づいて、収音データにおける音響的なパラメータを変化させる音響処理を施すようにしてもよい。例えば提供部103は、エリア及びユーザ間の距離に応じてイコライザで低音域を低減させたり(例えば距離が遠いと低い音の成分のみ小さくするなど)とか、エリア及びユーザ間の距離に応じてディレイやリバーブといったエフェクトの強度を異ならせる(例えば距離が遠いとリバーブの強度を高くするなど)ようにしてもよい。
以上のように、提供部103は、収音データに関連付けられた位置とユーザの位置及び方向との関係に応じてその収音データの放音処理を行うためのパラメータをユーザ端末200に提供する。
サーバ装置100の第2取得部102は、ユーザ端末200に提供される収音データに関する条件を取得し、提供部103は、第2取得部102により取得された条件が満たされる収音データをユーザ端末200に提供するようにしてもよい。ここでいう条件とは、例えば以下のようなものである。
ここにおいても、ユーザとエリアとの位置関係に応じて音響処理を施したのと同様に、提供部103は、ユーザの属性と音声のジャンルとの関連度に応じた音響処理を施した音声をユーザに提供するようにしてもよい。つまり、例えばユーザの属性と音声のジャンルとの関連度に応じてイコライザで低音域を低減させたり(例えば関連度が小さいと低い音の成分のみ小さくするなど)とか、ユーザの属性と音声のジャンルとの関連度に応じてディレイやリバーブといったエフェクトの強度を異ならせる(例えば関連度が小さいとリバーブの強度を高くするなど)ようにしてもよい。
提供部103は、収音データの一部の音声によって表される内容を隠蔽した状態でユーザ端末200に提供するようにしてもよい。例えば公共の場所において収音された音声には個人情報やプライバシーに関する情報が含まれることがあるので、例えば収音時の音声を加工したり、収音された音声に別の音声を重畳することで、収音された音声によって表される内容を隠蔽するようにしてもよい。
実施形態においては、個々のユーザが使用するユーザ端末200に収音データを送信することでそのユーザに音声を提供していたが、例えば各エリア内又はその近傍に設置されたスピーカ等の放音装置によってユーザに音声を提供してもよい。具体的には、第2取得部102は、例えば各所に配置された撮像装置と画像処理装置とで実現される。画像処理装置は、撮像装置によって撮像されたユーザの画像を解析し、その画像処理装置自身とユーザとの位置関係からユーザの位置を推定し、さらに、ユーザの顔の向きを画像認識により推定して、ユーザが該当するエリアのほうを向いているか否かを判断する。提供部103は、各エリア又はその近傍に設置されたスピーカ等の放音装置によって実現され、ユーザが該当するエリアのほうを向いていると判断されると音声を放音する。この場合、提供部103を実現する放音装置として指向性スピーカ等を用いることで、主に対象とするユーザに対してのみ音声を提供することが望ましい。
これにより、本発明に係る音声提供装置が商業店舗の店頭に設置され、店外のユーザがその商業店舗の方を見たときにそのユーザに対して商業店舗において収音された音声を放音することが可能となる。ユーザは、自身が向いた方向に存在する商業店舗において収音された、その商業店舗に特徴的な音声を聴くことによって、その商業店舗の特徴を把握することができるし、商業店舗の運営者は集客効果を期待することができる。
提供部103は、ユーザ端末200に提供する収音データを選択するときに1つの収音データを選択するのではなく、複数のエリアに対応する複数の収音データを選択してもよい。例えば図7の例の場合、エリアAR004,AR005,AR006,AR007,AR009のうち、ユーザからの距離が閾値(L1とする)以下のエリアであるエリアAR005,AR006,AR007,AR009に対応する収音データを全て選択してもよい。この場合、例えば、ユーザの位置と各エリアとの位置との間の距離に応じてそれぞれの音声の音量を制御してもよい。例えば、提供部103は、収音データに含まれる音量パラメータについて、エリアの位置及びユーザの位置の間の距離が大きいと音量を小さくし、エリアの位置及びユーザの位置の間の距離が小さいと音量を大きくするという設定を行う。
提供部103は、ユーザの向いている方向が変化すると、その変化に応じて連続的に収音データを変えながら提供するようにしてもよい。例えばユーザが首を回して自身が向いている方向を変えると、それぞれの方向に存在するエリアに応じた収音データの収音データが連続的に変化しながら聞こえるようになる。また、ユーザの向いている方向の変化率に応じて収音データを提供するようにしてもよい。これにより、例えば、本発明に係る収音データ提供装置が商業店舗の店頭に設置され、店外のユーザがその商業店舗の方を見たあとにそのほかの商業店舗を見るなどユーザの向いている方向が変わったタイミングや、歩き始めて向く方向が変化したユーザに対して収音データを提供するようにしてもよい。
また、提供部103は、ユーザの位置が変化すると、その位置に応じて連続的に収音データを変えながら提供するようにしてもよい。例えばユーザが移動すると、その移動中のユーザの位置変化に応じた収音データが連続的に変化しながら聞こえるようになる。また、ユーザの向いている位置の変化率に応じて収音データを提供するようにしてもよい。
つまり、提供部103は、ユーザの位置又は方向の変化に応じて収音データを変化させて提供するようにしてもよい。
本発明における収音データは、ユーザに提供されるタイミングにおいてリアルタイムに収音された音を示すものに限らず、ユーザに提供されるタイミングよりも前に収音された音を示すものであってもよい。また、収音された音そのものではなく、収音された音に対してなんらかの音響処理が施されたデータ、つまり収音された音を用いて生成されたデータも、本発明における収音データという用語の意味に含まれる。
提供部103は、収音データに加えて、その収音データが収音されたエリアに関する音声以外のデータ(例えばエリアに関する情報を記述したテキストデータやそのエリアに関連する画像を表す画像データ)を提供してもよい。
上記実施形態の説明に用いた図5のブロック図は機能単位のブロックを示している。これらの各機能ブロックは、ハードウェア及び/又はソフトウェアの任意の組み合わせによって実現される。また、各機能ブロックの実現手段は特に限定されない。すなわち、各機能ブロックは、物理的及び/又は論理的に結合した1つの装置により実現されてもよいし、物理的及び/又は論理的に分離した2つ以上の装置を直接的及び/又は間接的に(例えば、有線及び/又は無線)で接続し、これら複数の装置により実現されてもよい。従って、本発明に係る音声提供装置は、実施形態で説明したようにそれぞれの機能の全てを一体に備えた装置によっても実現可能であるし、それぞれの装置の機能を、さらに複数の装置に分散して実装したシステムであってもよい。また、上記実施形態で説明した処理の手順は、矛盾の無い限り、順序を入れ替えてもよい。実施形態で説明した方法については、例示的な順序で各ステップの要素を提示しており、提示した特定の順序に限定されない。
Claims (2)
- 収音位置に関連付けられた収音データを取得する第1取得手段と、
ユーザの位置と当該ユーザが向いている方向とを取得する第2取得手段と、
前記第1取得手段によって取得された収音データと、当該収音データに関連付けられた位置と前記第2取得手段によって取得された位置及び方向との関係に応じて当該収音データの放音処理を行うためのパラメータとを提供する提供手段であって、前記収音データの音声によって表される内容の一部を隠蔽した状態で提供する提供手段と
を備えることを特徴とする収音データ提供装置。 - 収音位置に関連付けられた収音データを取得する第1取得ステップと、
ユーザの位置と当該ユーザが向いている方向とを取得する第2取得ステップと、
前記第1取得ステップによって取得された収音データと、当該収音データに関連付けられた位置と前記第2取得ステップによって取得された位置及び方向との関係に応じて当該収音データの放音処理を行うためのパラメータとを提供する提供ステップであって、前記収音データの音声によって表される内容の一部を隠蔽した状態で提供する提供ステップと
を備えることを特徴とする収音データ提供方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017096272A JP6990042B2 (ja) | 2017-05-15 | 2017-05-15 | 音声提供装置及び音声提供方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017096272A JP6990042B2 (ja) | 2017-05-15 | 2017-05-15 | 音声提供装置及び音声提供方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2018194601A JP2018194601A (ja) | 2018-12-06 |
JP6990042B2 true JP6990042B2 (ja) | 2022-01-12 |
Family
ID=64570593
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017096272A Active JP6990042B2 (ja) | 2017-05-15 | 2017-05-15 | 音声提供装置及び音声提供方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6990042B2 (ja) |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005086707A (ja) | 2003-09-10 | 2005-03-31 | Yamaha Corp | 遠隔地の様子を伝達する通信装置およびプログラム |
JP2014016694A (ja) | 2012-07-06 | 2014-01-30 | Sony Corp | サーバ、クライアント端末、およびプログラム |
-
2017
- 2017-05-15 JP JP2017096272A patent/JP6990042B2/ja active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005086707A (ja) | 2003-09-10 | 2005-03-31 | Yamaha Corp | 遠隔地の様子を伝達する通信装置およびプログラム |
JP2014016694A (ja) | 2012-07-06 | 2014-01-30 | Sony Corp | サーバ、クライアント端末、およびプログラム |
Also Published As
Publication number | Publication date |
---|---|
JP2018194601A (ja) | 2018-12-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN105163241B (zh) | 音频播放方法及装置、电子设备 | |
CN105244048B (zh) | 音频播放控制方法和装置 | |
CN105117102B (zh) | 音频界面显示方法和装置 | |
CN109640125B (zh) | 视频内容处理方法、装置、服务器及存储介质 | |
CN105828201B (zh) | 视频处理方法及装置 | |
US20200186912A1 (en) | Audio headset device | |
CN103918284B (zh) | 语音控制装置、语音控制方法和程序 | |
CN108141696A (zh) | 用于空间音频调节的系统和方法 | |
KR20170100007A (ko) | 청취 로그 및 음악 라이브러리를 생성하기 위한 시스템 및 방법 | |
CN103207728A (zh) | 提供增强现实的方法和支持该方法的终端 | |
CN111050203A (zh) | 一种视频处理方法、装置、视频处理设备及存储介质 | |
CN109729372A (zh) | 直播间切换方法、装置、终端、服务器及存储介质 | |
CN104166688A (zh) | 信息定向推送方法及装置 | |
WO2018180024A1 (ja) | 情報処理装置、情報処理方法、およびプログラム | |
EP2916241A1 (en) | Causation of rendering of song audio information | |
CN107994879A (zh) | 响度控制方法及装置 | |
JP2023519422A (ja) | オーディオ処理方法、装置、可読媒体及び電子機器 | |
WO2022017006A1 (zh) | 视频处理方法、装置、终端设备及计算机可读存储介质 | |
EP3989083A1 (en) | Information processing system, information processing method, and recording medium | |
CN106128440A (zh) | 一种歌词显示处理方法、装置、终端设备及系统 | |
CN106020766A (zh) | 音乐播放的方法及装置 | |
JP6990042B2 (ja) | 音声提供装置及び音声提供方法 | |
US20160133243A1 (en) | Musical performance system, musical performance method and musical performance program | |
US11134356B2 (en) | Speech providing device, speech reproducing device, speech providing method, and speech reproducing method | |
CN105930522A (zh) | 智能推荐音乐的方法、系统和装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20171005 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200403 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20210128 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210302 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210419 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210928 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20211019 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20211109 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20211203 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6990042 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313117 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |