JP2021157245A - コンテンツ出力制御装置、コンテンツ出力システム、コンテンツ出力制御方法およびプログラム - Google Patents
コンテンツ出力制御装置、コンテンツ出力システム、コンテンツ出力制御方法およびプログラム Download PDFInfo
- Publication number
- JP2021157245A JP2021157245A JP2020054196A JP2020054196A JP2021157245A JP 2021157245 A JP2021157245 A JP 2021157245A JP 2020054196 A JP2020054196 A JP 2020054196A JP 2020054196 A JP2020054196 A JP 2020054196A JP 2021157245 A JP2021157245 A JP 2021157245A
- Authority
- JP
- Japan
- Prior art keywords
- ambient sound
- content
- user
- unit
- sound
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims description 30
- 238000001514 detection method Methods 0.000 claims abstract description 33
- 230000002093 peripheral effect Effects 0.000 claims description 28
- 238000010586 diagram Methods 0.000 description 6
- 210000003128 head Anatomy 0.000 description 5
- 230000000694 effects Effects 0.000 description 4
- 230000010365 information processing Effects 0.000 description 3
- 230000011514 reflex Effects 0.000 description 3
- 230000001133 acceleration Effects 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 210000001747 pupil Anatomy 0.000 description 2
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 description 1
- 238000012790 confirmation Methods 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 210000000887 face Anatomy 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Images
Landscapes
- User Interface Of Digital Computer (AREA)
Abstract
Description
<コンテンツ出力システム>
図1は、第一実施形態に係るコンテンツ出力システム1を示す概略図である。図2は、第一実施形態に係るコンテンツ出力システム1を示すブロック図である。コンテンツ出力システム1は、音声出力装置としてのヘッドホン10と、例えば、電子書籍端末、スマートフォン、タブレット端末、携帯用音楽再生装置、および、携帯用ゲーム機など、映像および音声で構成されるコンテンツの再生や表示等を行う電子機器30とを含む。言い換えると、コンテンツ出力システム1は、音声出力装置としてのヘッドホン10と電子機器30との組み合わせである。コンテンツ出力システム1は、ユーザの視線方向に応じて、ヘッドホン10から音声を出力したり、周辺の音声のノイズをキャンセルしたりする。
ヘッドホン10は、例えばオーバーヘッド式で、ユーザの頭に装着する。ヘッドホン10は、電子機器30のコンテンツ出力制御装置40から出力される音声データに基づいて、表示画面36に表示したコンテンツに関する音声を出力する。ヘッドホン10は、コンテンツ出力制御装置40から出力される制御信号に基づいて、周辺のノイズをキャンセル可能である。ヘッドホン10は、電子機器30と有線または無線でデータを送受信可能に接続されている。ヘッドホン10は、左音声出力部11と右音声出力部12とコンテンツ入力部31と左マイクロフォン14と右マイクロフォン15とコンテンツ出力制御装置40とを有する。
電子機器30は、コンテンツ入力部31と、表示部32と、視線センサ33と、コンテンツ出力制御装置40とを有する。
コンテンツ出力制御装置40は、ヘッドホン10から音声を出力したり、周辺のノイズをキャンセルしたりする。コンテンツ出力制御装置40は、ユーザの視線方向に応じて、周辺音を低減した音声を出力したり、周辺音を低減した状態よりは周辺音が聞こえやすい状態としたりする。コンテンツ出力制御装置40は、例えば、CPU(Central Processing Unit)または映像処理用プロセッサなどで構成された演算処理装置(制御部)である。コンテンツ出力制御装置40は、図示しない記憶部に記憶されているプログラムをメモリにロードして、プログラムに含まれる命令を実行する。コンテンツ出力制御装置40は、映像取得部41と表示制御部42と視線検出部43と注視判断部44と音声処理部50と内部メモリである記憶部とが含まれる。音声処理部50は、音声取得部51と周辺音取得部52と周辺音低減処理部54と音声出力制御部53とを有する。コンテンツ出力制御装置40は、一または複数の装置で構成されていてもよい。
上述したように、本実施形態は、ヘッドホン10を装着しているユーザが表示画面36を注視している場合、周辺音を低減し、ユーザが表示画面36を注視していない場合、周辺音を低減した状態よりは周辺音が聞こえやすくできる。本実施形態によれば、ユーザが表示画面36を注視することを中断して、ユーザが周辺に注意を向けたと推定される状態となった場合に、周辺音がノイズキャンセルされた状態より、適切に周辺音を確認できる。このようにして、本実施形態によれば、ユーザが周辺音を聞きたいときに、ユーザが操作をしなくても、適切に周辺音を確認できる。
図5、図6を参照しながら、本実施形態に係るコンテンツ出力システム1Aについて説明する。図5は、第二実施形態に係るコンテンツ出力システム1Aのブロック図である。図6は、第二実施形態に係るコンテンツ出力システム1Aにおける処理の流れの一例を示すフローチャートである。コンテンツ出力システム1Aは、基本的な構成は第一実施形態のコンテンツ出力システム1と同様である。以下の説明においては、コンテンツ出力システム1と同様の構成要素には、同一の符号または対応する符号を付し、その詳細な説明は省略する。本実施形態では、電子機器30Aは、撮影部33Aと、コンテンツ出力制御装置40Aの顔検出部48Aとを有する点と、音声出力制御部53Aにおける処理とが、第一実施形態と異なる。
上述したように、本実施形態は、ユーザが表示画面36を注視して、かつ、ユーザの顔の向きが表示画面36に対して対向する場合、周辺音を低減して、ユーザが表示画面36を注視していないで、かつ、ユーザの顔の向きが表示画面36に対して対向する向きではない場合、周辺音を低減した状態よりは周辺音が聞こえやすくできる。本実施形態によれば、ユーザが顔の向きを表示画面36に対向しない向きにして、ユーザが周辺に注意を向けたと状態されるときに、適切に周辺音を確認できる。
図7、図8を参照しながら、本実施形態に係るコンテンツ出力システム1Bについて説明する。図7は、第三実施形態に係るコンテンツ出力システム1Bのブロック図である。図8は、第三実施形態に係るコンテンツ出力システム1Bにおける処理の流れの一例を示すフローチャートである。コンテンツ出力システム1Bは、基本的な構成は図5に示す第二実施形態のコンテンツ出力システム1Aと同様である。本実施形態では、電子機器30Bは、GNSS(Global Navigation Satellite System)受信部34Bとコンテンツ出力制御装置40Bの位置情報算出部49Bと判断部50Bとを有する点と音声出力制御部53Bにおける処理とが、第一実施形態と異なる。
上述したように、本実施形態は、ヘッドホン10を装着したユーザが交通機関を利用している場合であって、ユーザが表示画面36を注視している場合には、周辺音を低減し、ユーザが表示画面36を注視していない場合には、周辺音を低減した状態よりは周辺音が聞こえやすくできる。本実施形態によれば、ヘッドホン10を装着したユーザが交通機関の利用中に、アナウンスなどを聞くために顔の向きを表示画面36と対向する向きから変えた場合などに、アナウンスなどの周辺音を聞きやすくできる。本実施形態によれば、不用意にノイズキャンセルがOFFされることを抑制できる。
10 ヘッドホン(音声出力装置)
11 左音声出力部
12 右音声出力部
14 左マイクロフォン
15 右マイクロフォン
30 電子機器
31 コンテンツ入力部
33 視線センサ
40 コンテンツ出力制御装置
43 視線検出部
44 注視判断部
50 音声処理部
51 音声取得部
52 周辺音取得部
54 周辺音低減処理部
53 音声出力制御部
Claims (8)
- 周辺音を取得する周辺音取得部と、
前記周辺音取得部が取得した周辺音に基づき、ユーザに対して音声を出力する音声出力部が出力する音声に対して周辺音を低減する処理を行う周辺音低減処理部と、
前記ユーザの視線方向を検出する視線検出部と、
前記視線検出部の検出結果に基づき、前記ユーザがコンテンツを表示した表示画面を注視しているか否かを判断する注視判断部と、
前記注視判断部が、前記ユーザがコンテンツを表示した表示画面を注視していると判断した場合は、前記周辺音低減処理部による周辺音を低減した音声を出力し、前記ユーザがコンテンツを表示した表示画面を注視していないと判断した場合は、前記周辺音低減処理部による周辺音を低減した状態よりは周辺音が聞こえやすい状態とする音声出力制御部と、
を備える、コンテンツ出力制御装置。 - 前記ユーザの顔を認識し、認識した顔の向きを検出する顔検出部、をさらに備え、
前記音声出力制御部は、前記ユーザがコンテンツを表示した表示画面を注視していると判断したことに加えて、前記顔検出部が検出した顔の向きが、前記表示画面に対して対向する向きである場合に、前記周辺音低減処理部による周辺音を低減した音声を出力し、前記ユーザがコンテンツを表示した表示画面を注視していないと判断したことに加えて、前記顔検出部が検出した顔の向きが、前記表示画面に対して対向する向きではない場合に、前記周辺音低減処理部による周辺音を低減した状態よりは周辺音が聞こえやすい状態とする、
請求項1に記載のコンテンツ出力制御装置。 - 前記音声出力制御部は、前記周辺音低減処理部による周辺音を低減した状態よりは周辺音が聞こえやすい状態として、前記周辺音低減処理部による周辺音低減処理を行わない、
請求項1または2に記載のコンテンツ出力制御装置。 - 前記音声出力制御部は、前記周辺音低減処理部による周辺音を低減した状態よりは周辺音が聞こえやすい状態として、前記周辺音低減処理部による周辺音低減処理を行なわず、前記周辺音取得部が取得した周辺音を出力する、
請求項1または2に記載のコンテンツ出力制御装置。 - 前記ユーザが交通機関を利用していることを判断する判断部、をさらに備え、
前記音声出力制御部は、前記ユーザが交通機関を利用している場合に、前記ユーザがコンテンツを表示した表示画面を注視していると判断した場合は、前記周辺音低減処理部による周辺音を低減した音声を出力し、前記ユーザがコンテンツを表示した表示画面を注視していないと判断した場合は、前記周辺音低減処理部による周辺音を低減した状態よりは周辺音が聞こえやすい状態とする、
請求項1から4のいずれか1項に記載のコンテンツ出力制御装置。 - 請求項1から5のいずれか一項に記載のコンテンツ出力制御装置と、
周辺音を収音する収音部と、
音声を出力する音声出力部と、
を備える、コンテンツ出力システム。 - 周辺音を取得するステップと、
音声出力装置を利用しているユーザの視線方向を検出するステップと、
視線方向の検出結果に基づき、前記ユーザがコンテンツを表示した表示画面を注視しているか否かを判断するステップと、
前記ユーザがコンテンツを表示した表示画面を注視していると判断した場合は、取得した周辺音に基づき周辺音を低減した音声を出力し、前記ユーザがコンテンツを表示した表示画面を注視していないと判断した場合は、周辺音を低減した状態よりは周辺音が聞こえやすい状態とするステップと、
を含む、コンテンツ出力制御装置が実行するコンテンツ出力制御方法。 - 周辺音を取得するステップと、
音声出力装置を利用しているユーザの視線方向を検出するステップと、
視線方向の検出結果に基づき、前記ユーザがコンテンツを表示した表示画面を注視しているか否かを判断するステップと、
前記ユーザがコンテンツを表示した表示画面を注視していると判断した場合は、取得した周辺音に基づき周辺音を低減した音声を出力し、前記ユーザがコンテンツを表示した表示画面を注視していないと判断した場合は、周辺音を低減した状態よりは周辺音が聞こえやすい状態とするステップと、
を含む、コンピュータが実行するプログラム。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020054196A JP7447602B2 (ja) | 2020-03-25 | 2020-03-25 | コンテンツ出力制御装置、コンテンツ出力システム、コンテンツ出力制御方法およびプログラム |
CN202080093491.2A CN114981756A (zh) | 2020-03-25 | 2020-11-20 | 声音输出控制装置、声音输出系统、声音输出控制方法以及程序 |
PCT/JP2020/043489 WO2021192410A1 (ja) | 2020-03-25 | 2020-11-20 | 音声出力制御装置、音声出力システム、音声出力制御方法およびプログラム |
US17/946,162 US20230012555A1 (en) | 2020-03-25 | 2022-09-16 | Sound output control device, sound output system, sound output control method, and computer-readable storage medium |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020054196A JP7447602B2 (ja) | 2020-03-25 | 2020-03-25 | コンテンツ出力制御装置、コンテンツ出力システム、コンテンツ出力制御方法およびプログラム |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2021157245A true JP2021157245A (ja) | 2021-10-07 |
JP2021157245A5 JP2021157245A5 (ja) | 2022-09-13 |
JP7447602B2 JP7447602B2 (ja) | 2024-03-12 |
Family
ID=77917796
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020054196A Active JP7447602B2 (ja) | 2020-03-25 | 2020-03-25 | コンテンツ出力制御装置、コンテンツ出力システム、コンテンツ出力制御方法およびプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7447602B2 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2023048018A1 (ja) | 2021-09-27 | 2023-03-30 | 株式会社Jvcケンウッド | 表示装置、表示装置の制御方法およびプログラム |
Family Cites Families (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001018717A (ja) | 1999-07-06 | 2001-01-23 | Matsushita Electric Ind Co Ltd | 運転車両周辺監視装置 |
JP2011203654A (ja) | 2010-03-26 | 2011-10-13 | Sony Corp | 音声再生装置、音声再生方法およびプログラム |
WO2012102130A1 (ja) | 2011-01-27 | 2012-08-02 | 株式会社ニコン | 撮像装置、プログラム、記録媒体およびノイズ低減方法 |
JP2014178339A (ja) | 2011-06-03 | 2014-09-25 | Nec Corp | 音声処理システム、発話者の音声取得方法、音声処理装置およびその制御方法と制御プログラム |
JP5987538B2 (ja) | 2012-08-03 | 2016-09-07 | 株式会社リコー | 制御装置、プログラムおよび制御システム |
JP2017069687A (ja) | 2015-09-29 | 2017-04-06 | ソニー株式会社 | 情報処理装置及び情報処理方法並びにプログラム |
JP6973400B2 (ja) | 2016-09-27 | 2021-11-24 | ソニーグループ株式会社 | 情報処理装置、情報処理方法、及びプログラム |
US20210294414A1 (en) | 2018-08-09 | 2021-09-23 | Sony Corporation | Information processing apparatus, information processing method, and program |
JP7367680B2 (ja) | 2018-08-27 | 2023-10-24 | 日本精機株式会社 | 表示装置 |
-
2020
- 2020-03-25 JP JP2020054196A patent/JP7447602B2/ja active Active
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2023048018A1 (ja) | 2021-09-27 | 2023-03-30 | 株式会社Jvcケンウッド | 表示装置、表示装置の制御方法およびプログラム |
Also Published As
Publication number | Publication date |
---|---|
JP7447602B2 (ja) | 2024-03-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6743691B2 (ja) | 表示制御装置、表示制御方法およびコンピュータプログラム | |
US9445639B1 (en) | Embedding intelligent electronics within a motorcyle helmet | |
EP2839675B1 (en) | Auto detection of headphone orientation | |
US20180270571A1 (en) | Techniques for amplifying sound based on directions of interest | |
JP6284331B2 (ja) | 会話支援装置、会話支援方法及び会話支援プログラム | |
KR20220005564A (ko) | 복수의 헤드셋들 간의 오디오 공간화 및 강화 | |
US10542357B2 (en) | Earset, earset system, and earset control method | |
US11087775B2 (en) | Device and method of noise suppression based on noise source positions | |
KR20150134666A (ko) | 글래스 타입 단말기 및 이의 제어방법 | |
US9774978B2 (en) | Position determination apparatus, audio apparatus, position determination method, and program | |
KR20160001178A (ko) | 글래스 타입 단말기 및 이의 제어방법 | |
CN110708630B (zh) | 控制耳机的方法、装置、设备及存储介质 | |
US20170083282A1 (en) | Information processing device, control method, and program | |
CN108848405B (zh) | 图像处理方法和装置 | |
CN116134838A (zh) | 使用个性化声音简档的音频系统 | |
JP7447602B2 (ja) | コンテンツ出力制御装置、コンテンツ出力システム、コンテンツ出力制御方法およびプログラム | |
ES2795016T3 (es) | Procedimiento de asistencia en el seguimiento de una conversación para una persona con problemas de audición | |
US11037519B2 (en) | Display device having display based on detection value, program, and method of controlling device | |
JP7424156B2 (ja) | コンテンツ出力制御装置、コンテンツ出力システム、コンテンツ出力制御方法およびプログラム | |
ES2692828T3 (es) | Procedimiento de asistencia en el seguimiento de una conversación para una persona con problemas de audición | |
JP2020154569A (ja) | 表示装置、表示制御方法、及び表示システム | |
WO2021192410A1 (ja) | 音声出力制御装置、音声出力システム、音声出力制御方法およびプログラム | |
JP6891879B2 (ja) | 情報処理装置、情報処理方法、およびプログラム | |
JP6766403B2 (ja) | 頭部装着型表示装置、頭部装着型表示装置の制御方法、コンピュータープログラム | |
CN114115515A (zh) | 用于帮助用户的方法和头戴式单元 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220905 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20230131 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20231219 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20240112 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240130 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240212 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7447602 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |