JP7068875B2 - 音出力装置の制御装置、制御方法、プログラム及び車両 - Google Patents

音出力装置の制御装置、制御方法、プログラム及び車両 Download PDF

Info

Publication number
JP7068875B2
JP7068875B2 JP2018051148A JP2018051148A JP7068875B2 JP 7068875 B2 JP7068875 B2 JP 7068875B2 JP 2018051148 A JP2018051148 A JP 2018051148A JP 2018051148 A JP2018051148 A JP 2018051148A JP 7068875 B2 JP7068875 B2 JP 7068875B2
Authority
JP
Japan
Prior art keywords
voice
sound
generated
control device
sound output
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2018051148A
Other languages
English (en)
Other versions
JP2019164228A (ja
Inventor
直生 柴田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Honda Motor Co Ltd
Original Assignee
Honda Motor Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Honda Motor Co Ltd filed Critical Honda Motor Co Ltd
Priority to JP2018051148A priority Critical patent/JP7068875B2/ja
Priority to CN201910139754.8A priority patent/CN110286872A/zh
Priority to US16/287,216 priority patent/US10812924B2/en
Publication of JP2019164228A publication Critical patent/JP2019164228A/ja
Application granted granted Critical
Publication of JP7068875B2 publication Critical patent/JP7068875B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S7/00Indicating arrangements; Control arrangements, e.g. balance control
    • H04S7/30Control circuits for electronic adaptation of the sound field
    • H04S7/302Electronic adaptation of stereophonic sound system to listener position or orientation
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • G06F3/162Interface to dedicated audio devices, e.g. audio drivers, interface to CODECs
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • G06F3/165Management of the audio stream, e.g. setting of volume, audio stream path
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • G06F3/167Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L13/00Speech synthesis; Text to speech systems
    • G10L13/02Methods for producing synthetic speech; Speech synthesisers
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L17/00Speaker identification or verification
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S7/00Indicating arrangements; Control arrangements, e.g. balance control
    • H04S7/30Control circuits for electronic adaptation of the sound field
    • H04S7/307Frequency adjustment, e.g. tone control
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2499/00Aspects covered by H04R or H04S not otherwise provided for in their subgroups
    • H04R2499/10General applications
    • H04R2499/13Acoustic transducers and sound field adaptation in vehicles
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S2400/00Details of stereophonic systems covered by H04S but not provided for in its groups
    • H04S2400/13Aspects of volume control, not necessarily automatic, in stereophonic sound systems

Description

本発明は、音出力装置の制御装置、制御方法、プログラム及び車両に関する。
車両において様々な音声情報が運転者に通知される。運転者が車内で同乗者と会話していたり、ラジオやテレビ等の音声コンテンツを楽しんでいたりする間に音声情報が提供されると、運転者がその音声情報を聞き逃してしまう可能性がある。特許文献1には、音声情報の優先度が低い場合に、会話の終了を待ってから音声情報を提供することが記載されている。
特開2017-067852号公報
自動運転時の交代要求のような緊急度が高い音声情報は、運転者が他の音声を聞いている場合であっても即座に提供する必要がある。緊急の音声情報の提供は自動車の車室内だけではなく、会議室のような他の空間内でも行われる。本発明は、他の音声の発生中に、聞き取りやすいように音声情報を提供するための技術を提供することを目的とする。
上記課題に鑑みて、音出力装置を制御する制御装置であって、空間内で発生中の音声の態様を特定する第1特定手段と、出力対象の音声情報の聴者の前記空間内の位置を特定する第2特定手段と、前記空間内で音声が発生中に、前記特定された態様とは異なる態様で音声情報を出力するように前記音出力装置を制御する制御手段と、を備え、前記制御手段は、前記聴者の位置で、上下と左右と前後との少なくとも何れかにおいて前記発生中の音声とは反対側から伝わるように音声情報を出力するように前記音出力装置を制御することを特徴とする制御装置が提供される。
上記手段により、他の音声の発生中に、聞き取りやすいように音声情報を提供できる。
実施形態に係る車両の構成例を説明するブロック図。 実施形態に係る車室の構成例を説明する模式図。 実施形態に係る制御方法の一例を説明するフローチャート。 実施形態に係る音声情報の伝達方向を説明する模式図。
添付の図面を参照しつつ本発明の実施形態について以下に説明する。様々な実施形態を通じて同様の要素には同一の参照符号を付し、重複する説明を省略する。また、各実施形態は適宜変更、組み合わせが可能である。
車両1は、車両1を制御する車両用制御装置2(以下、単に制御装置2と呼ぶ)を含む。制御装置2は車内ネットワークにより通信可能に接続された複数のECU20~29を含む。各ECUは、CPUに代表されるプロセッサ、半導体メモリ等のメモリ、外部デバイスとのインタフェース等を含む。メモリにはプロセッサが実行するプログラムやプロセッサが処理に使用するデータ等が格納される。各ECUはプロセッサ、メモリおよびインタフェース等を複数備えていてもよい。例えば、ECU20は、プロセッサ20aとメモリ20bとを備える。メモリ20bに格納されたプログラムが含む命令をプロセッサ20aが実行することによって、ECU20による処理が実行される。これに代えて、ECU20は、ECU20による処理を実行するためのASIC等の専用の集積回路を備えてもよい。他のECUについても同様である。
以下、各ECU20~29が担当する機能等について説明する。なお、ECUの数や、担当する機能については適宜設計可能であり、本実施形態よりも細分化したり、統合したりすることが可能である。
ECU20は、車両1の自動運転に関わる制御を実行する。自動運転においては、車両1の操舵と、加減速の少なくともいずれか一方を自動制御する。後述する制御例では、操舵と加減速の双方を自動制御する。
ECU21は、電動パワーステアリング装置3を制御する。電動パワーステアリング装置3は、ステアリングホイール31に対する運転者の運転操作(操舵操作)に応じて前輪を操舵する機構を含む。また、電動パワーステアリング装置3は操舵操作をアシストしたり、前輪を自動操舵したりするための駆動力を発揮するモータや、操舵角を検知するセンサ等を含む。車両1の運転状態が自動運転の場合、ECU21は、ECU20からの指示に対応して電動パワーステアリング装置3を自動制御し、車両1の進行方向を制御する。
ECU22および23は、車両の周囲状況を検知する検知ユニット41~43の制御および検知結果の情報処理を行う。検知ユニット41は、車両1の前方を撮影するカメラであり(以下、カメラ41と表記する場合がある。)、本実施形態の場合、車両1のルーフ前部でフロントウィンドウの車室内側に取り付けられる。カメラ41が撮影した画像の解析により、物標の輪郭抽出や、道路上の車線の区画線(白線等)を抽出可能である。
検知ユニット42は、ライダ(Light Detection and Ranging)であり(以下、ライダ42と表記する場合がある)、車両1の周囲の物標を検知したり、物標との距離を測距したりする。本実施形態の場合、ライダ42は5つ設けられており、車両1の前部の各隅部に1つずつ、後部中央に1つ、後部各側方に1つずつ設けられている。検知ユニット43は、ミリ波レーダであり(以下、レーダ43と表記する場合がある)、車両1の周囲の物標を検知したり、物標との距離を測距したりする。本実施形態の場合、レーダ43は5つ設けられており、車両1の前部中央に1つ、前部各隅部に1つずつ、後部各隅部に一つずつ設けられている。
ECU22は、一方のカメラ41と、各ライダ42の制御および検知結果の情報処理を行う。ECU23は、他方のカメラ42と、各レーダ43の制御および検知結果の情報処理を行う。車両の周囲状況を検知する装置を二組備えたことで、検知結果の信頼性を向上でき、また、カメラ、ライダ、レーダといった種類の異なる検知ユニットを備えたことで、車両の周辺環境の解析を多面的に行うことができる。
ECU24は、ジャイロセンサ5、GPSセンサ24b、通信装置24cの制御および検知結果あるいは通信結果の情報処理を行う。ジャイロセンサ5は車両1の回転運動を検知する。ジャイロセンサ5の検知結果や、車輪即等により車両1の進路を判定することができる。GPSセンサ24bは、車両1の現在位置を検知する。通信装置24cは、地図情報や交通情報を提供するサーバと無線通信を行い、これらの情報を取得する。ECU24は、メモリに構築された地図情報のデータベース24aにアクセス可能であり、ECU24は現在地から目的地へのルート探索等を行う。ECU24、地図データベース24a、GPSセンサ24bは、いわゆるナビゲーション装置を構成している。
ECU25は、車車間通信用の通信装置25aを備える。通信装置25aは、周辺の他車両と無線通信を行い、車両間での情報交換を行う。
ECU26は、パワープラント6を制御する。パワープラント6は車両1の駆動輪を回転させる駆動力を出力する機構であり、例えば、エンジンと変速機とを含む。ECU26は、例えば、アクセルペダル7Aに設けた操作検知センサ7aにより検知した運転者の運転操作(アクセル操作あるいは加速操作)に対応してエンジンの出力を制御したり、車速センサ7cが検知した車速等の情報に基づいて変速機の変速段を切り替えたりする。車両1の運転状態が自動運転の場合、ECU26は、ECU20からの指示に対応してパワープラント6を自動制御し、車両1の加減速を制御する。
ECU27は、方向指示器8(ウィンカ)を含む灯火器(ヘッドライト、テールライト等)を制御する。図1の例の場合、方向指示器8は車両1の前部、ドアミラーおよび後部に設けられている。
ECU28は、入出力装置9の制御を行う。入出力装置9は運転者に対する情報の出力と、運転者からの情報の入力の受け付けを行う。音出力装置91は運転者に対して音声により情報を報知する。表示装置92は運転者に対して画像の表示により情報を報知する。表示装置92は例えば運転席表面に配置され、インストルメントパネル等を構成する。なお、ここでは、音声と表示を例示したが振動や光により情報を報知してもよい。また、音声、表示、振動または光のうちの複数を組み合わせて情報を報知してもよい。更に、報知すべき情報のレベル(例えば緊急度)に応じて、組み合わせを異ならせたり、報知態様を異ならせたりしてもよい。入力装置93は運転者が操作可能な位置に配置され、車両1に対する指示を行うスイッチ群であるが、音入力装置も含まれてもよい。ECU28は、ECU20の走行制御に関する案内を実施可能である。案内の詳細については後述する。入力装置93は、ECU20による走行制御の動作を制御するために用いられるスイッチを含んでもよい。入力装置93は、運転者の視線方向を検出するためのカメラを含んでもよい。
ECU29は、ブレーキ装置10やパーキングブレーキ(不図示)を制御する。ブレーキ装置10は例えばディスクブレーキ装置であり、車両1の各車輪に設けられ、車輪の回転に抵抗を加えることで車両1を減速あるいは停止させる。ECU29は、例えば、ブレーキペダル7Bに設けた操作検知センサ7bにより検知した運転者の運転操作(ブレーキ操作)に対応してブレーキ装置10の作動を制御する。車両1の運転状態が自動運転の場合、ECU29は、ECU20からの指示に対応してブレーキ装置10を自動制御し、車両1の減速および停止を制御する。ブレーキ装置10やパーキングブレーキは車両1の停止状態を維持するために作動することもできる。また、パワープラント6の変速機がパーキングロック機構を備える場合、これを車両1の停止状態を維持するために作動することもできる。
図2を参照して、車両1の車室200の構成について更に説明する。図2は、車室200の平面図である。車室200は車両1が有する空間である。図面上側が車両1の前方であり、図面右側が車両1の右方である。車室200には、4つのシート201a~201dが取り付けられている。4つのシート201a~201dを区別する必要がない場合に、これらを総称してシート201と呼ぶ。車両1は右ハンドル車であるとする。そのため、シート201aは運転者用のシートである。
車室200には、6つの音出力装置202a~202fが搭載されている。6つの音出力装置202a~202fを区別する必要がない場合に、これらを総称して音出力装置202と呼ぶ。音出力装置202aは、車室200の前方中央に取り付けられている。音出力装置202bは、車室200の前方右側に取り付けられている。音出力装置202cは、車室200の前方左側に取り付けられている。音出力装置202dは、車室200の後方中央に取り付けられている。音出力装置202eは、車室200の後方右側に取り付けられている。音出力装置202fは、車室200の後方左側に取り付けられている。音出力装置202a~202fは、図1の音出力装置91に対応する。音出力装置202は、例えばアンプとスピーカとの組み合わせによって構成される。ECU28は、音出力装置202a~202fを制御することによって、音楽や、音声情報などのオーディオデータを車室200の内部に出力する。また、ECU28は、音出力装置202a~202fの音量を調整することによって、乗員(例えば、運転者や同乗者)への音声の向きを制御できる。
車室200には、4つの音入力装置203a~203dが搭載されている。4つの音入力装置203a~203dを区別する必要がない場合に、これらを総称して音入力装置203と呼ぶ。音入力装置203aは、車室200の前方右側に取り付けられている。音入力装置203bは、車室200の前方左側に取り付けられている。音入力装置203cは、車室200の後方右側に取り付けられている。音入力装置203dは、車室200の後方左側に取り付けられている。音入力装置203a~203dは、図1の入力装置93に対応する。音入力装置203は、例えばマイクによって構成される。ECU28は、音入力装置203a~203dを制御することによって、車室200で発生している音を収集する。また、ECU28は、音入力装置203a~203dのそれぞれが取得した音の音量を特定することによって、車室200で発生している音の向きを特定できる。
車室200には、カメラ204が搭載されている。カメラ204は、車室200の前方中央に取り付けられている。カメラ204は図1の入力装置93に対応する。ECU28は、カメラ204の画像を解析することによって、乗員の状態(例えば、口を開いている、目を閉じている、位置、顔の向きなど)を取得できる。車室200が備える音出力装置202、音入力装置203及びカメラ204の台数は上述の例に限られない。
続いて、図3を参照して、ECU28が音出力装置202を制御して音声情報を出力する方法の一例について説明する。図3の方法は、例えばECU28のプロセッサがECU28に格納されたプログラムの命令を実行することによって処理される。これに代えて、専用のハードウェア(例えば、回路)が各ステップを実行してもよい。
ステップS301で、ECU28は他のECU(例えば、ECU21)から出力対象の音声情報を取得する。音声情報は、経路案内や自動運転に関する通知などの運転者へ向けた情報や、周囲の観光スポットの案内などの乗員全員に向けた情報を含む。ECU28は、音声情報とともに、その優先度を取得する。一例では、音声情報は、高い・低いの2種類の優先度を有する。例えば、経路案内や運転交代要求のような情報は高い優先度を有し、観光案内のような情報は低い優先度を有する。各情報の優先度は事前に設定され、ECU28に格納されている。
ステップS302で、ECU28は、出力対象の音声情報の優先度が閾値以上であるか否かを判定する。条件を満たす場合(ステップS302でYES)にECU28は処理をステップS303へ進め、条件を満たさない場合(ステップS302でNO)にECU28は処理をステップS306へ進める。優先度が2通りの場合に、高い優先度は閾値以上であり、低い優先度は閾値未満である。
ステップS303で、ECU28は、車室200で発生中の音声の音量が閾値以上であるか否かを判定する。条件を満たす場合(ステップS303でYES)にECU28は処理をステップS304へ進め、条件を満たさない場合(ステップS303でNO)にECU28は処理をステップS306へ進める。車室200で音声が発生していない場合に、音量はゼロ、すなわち閾値未満となる。車室200で発生中の音声は、車室200に存在する人間が発生中の音声と、車室200に存在する音出力装置が発生中の音声とを含む。車室200に存在する人間は例えば乗員(運転者又は同乗者)であり、その音声は例えば話し声や歌声である。音出力装置が発生中の音声は、例えば音入力装置203から出力中の音声(例えば、ラジオやテレビ、DVDなどからの音声)や、車室200に持ち込まれた音入力装置(スマートフォンや音楽プレーヤ、ロボットなど)からの音声である。ECU28は、音入力装置203を用いて音声の音量を取得可能である。車室200で発生中の音声が音出力装置202から出力中の音声の場合に、ECU28は、音入力装置203を用いずに音量を取得可能である。
ステップS304で、ECU28は、車室200で発生中の音声の態様を特定する。音声の態様は、音声の基本周波数と、音声の伝達方向とを含む。まず、ECU28は、音入力装置203を用いて車室200で発生している音声を取得する。続いて、ECU28は、この音声を分析することによって、音声の基本周波数と、音声の伝達方向との少なくとも何れかを取得する。
ステップS305で、ECU28は、車室200で音声が発生中に、特定された態様とは異なる態様で音声情報を出力するように音出力装置202を制御する。例えば、ECU28は、特定された音声の基本周波数とは異なる周波数で音声情報を出力する。例えば、ECU28は、発生中の音声の発声者の性別を特定し、その発声者とは異なる性別の声で音声情報を出力するように音出力装置202を制御する。具体的に、ECU28は、発生中の音声の発声者が女性だったら男性の声で音声情報を出力する。
基本周波数の相違に代えて又はこれとともに、ECU28は、特定された音声の伝達方向とは異なる伝達方向となるように音声情報を出力してもよい。例えば、ECU28は、出力対象の音声情報の聴者(例えば、運転者)の車室200での位置を特定し、この聴者の位置で、上下と左右と前後との少なくとも何れかにおいて発生中の音声とは反対側から伝わるように音声情報を出力するように音出力装置202を制御する。音声情報の聴者は、音声情報の内容によって異なる。運転者向けの情報もあれば、同乗者向けの情報もあり、乗員全員に向けた情報もある。ECU28は、カメラ204の画像に基づいて、音声情報の聴者の位置を特定できる。
ステップS306で、ECU28は、デフォルトの態様で音声情報を出力する。車室200で音声が発生中の場合に、ECU28は発生中の音声の終了を待ってから音声情報を出力してもよい。
図4を参照して、音声の伝達方向について説明する。図4(a)では、シート201aに運転者401が着席しているとする。音出力装置202aからラジオの音声が発生中であり、矢印405に沿って運転者401に伝達するとする。この場合に、ECU28は、運転者401の頭部の正中冠状面403又は正中矢状面404に対して矢印405とは反対側から音声情報が伝達するように、音出力装置202を選択する。ECU28は、音出力装置202d~eの何れかから音声情報を出力することによって、運転者401の頭部の正中冠状面403に対して矢印405とは反対側から音声情報を伝達できる。すなわち、ECU28は、前後方向において反対側から音声情報を伝達できる。ECU28は、音出力装置202bから音声情報を出力することによって、運転者401の頭部の正中矢状面404に対して矢印405とは反対側から音声情報を伝達できる。すなわち、ECU28は、左右方向において反対側から音声情報を伝達できる。
反対側から音声情報を出力できる音出力装置202が複数ある場合に、ECU28は、車室200の前方にある音出力装置から音声情報を出力してもよい。前方から音声情報を出力することによって、車両システムからの音声情報であることを聴者が把握できるからである。例えば、ECU28は、音声情報を音出力装置202bから出力する。この音声情報は、矢印406に沿って運転者401に伝達する。矢印405と矢印406とは正中矢状面404に対して互いに反対側にある。
図4(b)の例では、シート201dに着席する同乗者402からの音声が矢印407の伝達方向で運転者に伝達する。この場合に、ECU28は、矢印408に沿って音声情報を伝達するように、音出力装置202bから音声情報を出力する。矢印405と矢印406とは正中矢状面404に対して互いに反対側にあり、正中冠状面403に対しても互いに反対側にある。
図4(c)の例では、音出力装置202cからの音声が矢印409の伝達方向で運転者に伝達する。この場合に、ECU28は、矢印410に沿って音声情報を伝達するように、音出力装置202bから音声情報を出力する。矢印409と矢印410とは正中矢状面404に対して互いに反対側にある。
図4(d)の例では、シート201bに着席する同乗者402からの音声が矢印411の伝達方向で運転者に伝達する。この場合に、ECU28は、矢印412に沿って音声情報を伝達するように、音出力装置202bから音声情報を出力する。矢印411と矢印412とは正中矢状面404に対して互いに反対側にある。
図4(e)の例では、シート201dに着席する同乗者402からの音声が矢印413の伝達方向で運転者に伝達するとともに、音出力装置202aからの音声が矢印414の伝達方向で運転者に伝達する。この場合に、ECU28は、矢印415に沿って音声情報を伝達するように、音出力装置202bから音声情報を出力する。矢印413と矢印415とは正中矢状面404に対して互いに反対側にある。また、矢印414と矢印415とは正中矢状面404に対して互いに反対側にある。
図4(f)の例では、シート201dに着席する同乗者402からの音声が矢印416の伝達方向で運転者に伝達する。運転者401は、同乗者402の方向を向いている。運転者401の向きはカメラ204の画像を分析することによって特定できる。この場合に、ECU28は、矢印417に沿って音声情報を伝達するように、音出力装置202bから音声情報を出力する。矢印416と矢印417とは正中冠状面403に対して互いに反対側にある。
上述の例では、出力対象の音声情報の聴者が1人(運転者)である場合について説明した。出力対象の音声情報の聴者が複数の場合に、ECU28は、複数の聴者のそれぞれについて、音声情報の伝達方向を特定してもよい。そして、ECU28は、特定された伝達方向で各聴者に音声情報が伝達されるように音出力装置202の指向性を制御する。
上述の実施形態は、車両1の車室200で音声情報を出力する場合を扱った。これに代えて、他の空間で音声情報を出力してもよい。例えば、会議室のような部屋において、会議の参加者に音声情報が提供されてもよい。その場合に、音出力装置202、音入力装置203及びカメラ204が部屋に設置される。
<実施形態のまとめ>
<構成1>
音出力装置(202)を制御する制御装置(28)であって、
空間(200)内で発生中の音声の態様を特定する特定手段(S304)と、
前記空間内で音声が発生中に、前記特定された態様とは異なる態様で音声情報を出力するように前記音出力装置を制御する制御手段(S305)と、
を備えることを特徴とする制御装置。
この構成によれば、他の音声の発生中に、聞き取りやすいように音声情報を提供できる。
<構成2>
前記音声の態様は、音声の基本周波数を含むことを特徴とする構成1に記載の制御装置。
この構成によれば、発生中の音声とは異なる音程で音声情報を提供できる。
<構成3>
前記特定手段は、前記発生中の音声の発声者の性別を特定し、
前記制御手段は、前記発声者とは異なる性別の声で音声情報を出力するように前記音出力装置を制御する
ことを特徴とする構成1又は2に記載の制御装置。
この構成によれば、発生中の音声とは別の性別で音声情報を提供できる。
<構成4>
前記音声の態様は、音声の伝達方向を含むことを特徴とする構成1乃至3の何れか1項に記載の制御装置。
この構成によれば、発生中の音声とは別の方向から音声情報を提供できる。
<構成5>
出力対象の音声情報の聴者の前記空間内の位置を特定する特定手段(204)を更に備え、
前記制御手段は、前記聴者の位置で、上下と左右と前後との少なくとも何れかにおいて前記発生中の音声とは反対側から伝わるように音声情報を出力するように前記音出力装置を制御する
ことを特徴とする構成1乃至4の何れか1項に記載の制御装置。
この構成によれば、発生中の音声とは別の方向から音声情報を提供できる。
<構成6>
前記発生中の音声は、前記空間内に存在する人間(402)が発生中の音声を含むことを特徴とする構成1乃至5の何れか1項に記載の制御装置。
この構成によれば、人間が発生中の音声と区別できるように音声情報を提供できる。
<構成7>
前記発生中の音声は、前記空間内に存在する音出力装置が発生中の音声を含むことを特徴とする構成1乃至6の何れか1項に記載の制御装置。
この構成によれば、音出力装置が発生中の音声と区別できるように音声情報を提供できる。
<構成8>
前記制御装置は、
出力対象の音声情報の優先度が閾値以上であるか否かを判定し(S302)、
前記優先度が閾値以上の場合に、前記特定された態様とは異なる態様で音声情報を出力するように前記音出力装置を制御する
ことを特徴とする構成1乃至7の何れか1項に記載の制御装置。
この構成によれば、優先度が高い音声情報を聞き取りやすいように提供できる。
<構成9>
前記制御装置は、
前記発生中の音声の音量が閾値以上であるか否かを判定し(S303)、
前記音量が閾値以上の場合に、前記特定された態様とは異なる態様で音声情報を出力するように前記音出力装置を制御する
ことを特徴とする構成1乃至8の何れか1項に記載の制御装置。
この構成によれば、発生中の音声の音量が大きい場合でも、聞き取りやすいように音声情報を提供できる。
<構成10>
前記空間は車両(1)の車室(200)であることを特徴とする構成1乃至9の何れか1項に記載の制御装置。
この構成によれば、車室において、他の音声の発生中に、聞き取りやすいように音声情報を提供できる。
<構成11>
構成1乃至10の何れか1項に記載の制御装置を備えることを特徴とする車両(1)。
この構成によれば、他の音声の発生中に、聞き取りやすいように音声情報を提供できる。
<構成12>
音出力装置(202)を制御する方法であって、
空間内で発生中の音声の態様を特定する工程(S304)と、
前記空間内で音声が発生中に、前記特定された態様とは異なる態様で音声情報を出力するように前記音出力装置を制御する工程(S305)と、
を有することを特徴とする方法。
この構成によれば、他の音声の発生中に、聞き取りやすいように音声情報を提供できる。
<構成13>
構成1乃至10の何れか1項に記載の制御装置の各手段としてコンピュータを機能させるためのプログラム。
この構成によれば、他の音声の発生中に、聞き取りやすいように音声情報を提供できる。
1 車両、2 制御装置、20~29 ECU、91 音出力装置

Claims (12)

  1. 音出力装置を制御する制御装置であって、
    空間内で発生中の音声の態様を特定する第1特定手段と、
    出力対象の音声情報の聴者の前記空間内の位置を特定する第2特定手段と、
    前記空間内で音声が発生中に、前記特定された態様とは異なる態様で音声情報を出力するように前記音出力装置を制御する制御手段と、
    を備え
    前記制御手段は、前記聴者の位置で、上下と左右と前後との少なくとも何れかにおいて前記発生中の音声とは反対側から伝わるように音声情報を出力するように前記音出力装置を制御することを特徴とする制御装置。
  2. 前記音声の態様は、音声の基本周波数を含むことを特徴とする請求項1に記載の制御装置。
  3. 前記第1特定手段は、前記発生中の音声の発声者の性別を特定し、
    前記制御手段は、前記発声者とは異なる性別の声で音声情報を出力するように前記音出力装置を制御する
    ことを特徴とする請求項1又は2に記載の制御装置。
  4. 前記音声の態様は、音声の伝達方向を含むことを特徴とする請求項1乃至3の何れか1項に記載の制御装置。
  5. 前記発生中の音声は、前記空間内に存在する人間が発生中の音声を含むことを特徴とする請求項1乃至の何れか1項に記載の制御装置。
  6. 前記発生中の音声は、前記空間内に存在する音出力装置が発生中の音声を含むことを特徴とする請求項1乃至の何れか1項に記載の制御装置。
  7. 前記制御装置は、
    出力対象の音声情報の優先度が閾値以上であるか否かを判定し、
    前記優先度が閾値以上の場合に、前記特定された態様とは異なる態様で音声情報を出力するように前記音出力装置を制御する
    ことを特徴とする請求項1乃至の何れか1項に記載の制御装置。
  8. 前記制御装置は、
    前記発生中の音声の音量が閾値以上であるか否かを判定し、
    前記音量が閾値以上の場合に、前記特定された態様とは異なる態様で音声情報を出力するように前記音出力装置を制御する
    ことを特徴とする請求項1乃至の何れか1項に記載の制御装置。
  9. 前記空間は車両の車室であることを特徴とする請求項1乃至の何れか1項に記載の制御装置。
  10. 請求項1乃至の何れか1項に記載の制御装置を備えることを特徴とする車両。
  11. 音出力装置を制御する方法であって、
    制御装置の第1特定手段が、空間内で発生中の音声の態様を特定する工程と、
    前記制御装置の第2特定手段が、出力対象の音声情報の聴者の前記空間内の位置を特定する工程と、
    前記制御装置の制御手段が、前記空間内で音声が発生中に、前記特定された態様とは異なる態様で音声情報を出力するように前記音出力装置を制御する工程と、
    を有し、
    前記音出力装置を制御する工程において、前記制御手段は、前記聴者の位置で、上下と左右と前後との少なくとも何れかにおいて前記発生中の音声とは反対側から伝わるように音声情報を出力するように前記音出力装置を制御することを特徴とする方法。
  12. 請求項1乃至の何れか1項に記載の制御装置の各手段としてコンピュータを機能させるためのプログラム。
JP2018051148A 2018-03-19 2018-03-19 音出力装置の制御装置、制御方法、プログラム及び車両 Active JP7068875B2 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2018051148A JP7068875B2 (ja) 2018-03-19 2018-03-19 音出力装置の制御装置、制御方法、プログラム及び車両
CN201910139754.8A CN110286872A (zh) 2018-03-19 2019-02-26 声音输出装置的控制装置、控制方法以及车辆
US16/287,216 US10812924B2 (en) 2018-03-19 2019-02-27 Control apparatus configured to control sound output apparatus, method for controlling sound output apparatus, and vehicle

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2018051148A JP7068875B2 (ja) 2018-03-19 2018-03-19 音出力装置の制御装置、制御方法、プログラム及び車両

Publications (2)

Publication Number Publication Date
JP2019164228A JP2019164228A (ja) 2019-09-26
JP7068875B2 true JP7068875B2 (ja) 2022-05-17

Family

ID=67904566

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018051148A Active JP7068875B2 (ja) 2018-03-19 2018-03-19 音出力装置の制御装置、制御方法、プログラム及び車両

Country Status (3)

Country Link
US (1) US10812924B2 (ja)
JP (1) JP7068875B2 (ja)
CN (1) CN110286872A (ja)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000065592A (ja) 1998-08-20 2000-03-03 Alpine Electronics Inc 車載オーディオ装置
JP2002268666A (ja) 2001-03-14 2002-09-20 Ricoh Co Ltd 音声合成装置
JP2003233387A (ja) 2002-02-07 2003-08-22 Nissan Motor Co Ltd 音声報知装置
JP2008096483A (ja) 2006-10-06 2008-04-24 Matsushita Electric Ind Co Ltd 音響出力制御装置、音響出力制御方法
WO2009139022A1 (ja) 2008-05-15 2009-11-19 パイオニア株式会社 音声出力装置およびプログラム

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3598598B2 (ja) * 1995-07-31 2004-12-08 ヤマハ株式会社 カラオケ装置
CN1811341A (zh) * 2005-01-27 2006-08-02 乐金电子(惠州)有限公司 车载导航装置及其工作方法
US8140255B2 (en) * 2008-01-17 2012-03-20 Mitsubishi Electric Corporation On-vehicle guidance apparatus
JP2010128099A (ja) * 2008-11-26 2010-06-10 Toyota Infotechnology Center Co Ltd 車載用音声情報提供システム
DE112009005429T5 (de) * 2009-12-11 2012-10-31 Mitsubishi Electric Corporation SoundausgabevorrIchtung für ein elektrisches Fahrzeug
EP2807817A4 (en) * 2012-01-24 2015-12-09 Secure Couture Llc SYSTEM USING A COMBINATION FOR INCLUDING INFORMATION WITHIN A COMMUNICATION CHANNEL EXCEEDING A MOBILE TELEPHONY FUNCTION DEVICE
KR101977090B1 (ko) * 2015-07-22 2019-05-10 엘지전자 주식회사 차량 제어 장치 및 이를 구비한 차량의 제어방법
JP6558180B2 (ja) 2015-09-28 2019-08-14 株式会社デンソー 情報提供装置及び情報提供制御プログラム
US9620140B1 (en) * 2016-01-12 2017-04-11 Raytheon Company Voice pitch modification to increase command and control operator situational awareness
US10235984B2 (en) * 2017-04-24 2019-03-19 Pilot, Inc. Karaoke device

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000065592A (ja) 1998-08-20 2000-03-03 Alpine Electronics Inc 車載オーディオ装置
JP2002268666A (ja) 2001-03-14 2002-09-20 Ricoh Co Ltd 音声合成装置
JP2003233387A (ja) 2002-02-07 2003-08-22 Nissan Motor Co Ltd 音声報知装置
JP2008096483A (ja) 2006-10-06 2008-04-24 Matsushita Electric Ind Co Ltd 音響出力制御装置、音響出力制御方法
WO2009139022A1 (ja) 2008-05-15 2009-11-19 パイオニア株式会社 音声出力装置およびプログラム

Also Published As

Publication number Publication date
US10812924B2 (en) 2020-10-20
JP2019164228A (ja) 2019-09-26
US20190289415A1 (en) 2019-09-19
CN110286872A (zh) 2019-09-27

Similar Documents

Publication Publication Date Title
US10137907B2 (en) Startup suggestion device and startup suggestion method
US9902398B2 (en) Driving control device
JP7055043B2 (ja) 車両用制御装置及び車両
JP2020091790A (ja) 自動運転システム
JP2020165832A (ja) 経路設定装置、経路設定方法及びプログラム
JP2020164056A (ja) 制御装置、制御方法及びプログラム
US20200326702A1 (en) Vehicle remote instruction system
JP7053560B2 (ja) 駐車支援システムおよびその制御方法
CN111731295B (zh) 行驶控制装置、行驶控制方法以及存储程序的存储介质
CN112486160A (zh) 车辆远程指示系统
JP2019038356A (ja) 車両制御装置
JPWO2019073578A1 (ja) 車両並びにその制御装置及び制御方法
CN112977611B (zh) 行驶辅助系统及其控制方法
JP2018154245A (ja) 運転支援装置、運転支援方法及びプログラム
JP2018151909A (ja) 運転切り替え判定装置、運転切り替え判定方法及び運転切り替え判定のためのプログラム
US11489954B2 (en) Vehicular electronic device and operation method thereof
JP6603781B2 (ja) 運転支援装置
KR102331882B1 (ko) 음성 인식 기반의 차량 제어 방법 및 장치
JP7068875B2 (ja) 音出力装置の制御装置、制御方法、プログラム及び車両
WO2016157814A1 (ja) 起動提案装置及び起動提案方法
WO2020202379A1 (ja) 表示制御装置、表示制御方法及びプログラム
JP2020166605A (ja) 制御装置、制御方法及びプログラム
JP7256867B2 (ja) 制御装置、制御方法及びプログラム
JP6990221B2 (ja) 車両並びにその制御装置及び制御方法
JP2022186227A (ja) 情報処理サーバ、情報処理サーバの処理方法、プログラム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20201130

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20210103

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210125

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20210914

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20211001

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20211126

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220415

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220502

R150 Certificate of patent or registration of utility model

Ref document number: 7068875

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150