JP2020080510A - Communication system - Google Patents

Communication system Download PDF

Info

Publication number
JP2020080510A
JP2020080510A JP2018213711A JP2018213711A JP2020080510A JP 2020080510 A JP2020080510 A JP 2020080510A JP 2018213711 A JP2018213711 A JP 2018213711A JP 2018213711 A JP2018213711 A JP 2018213711A JP 2020080510 A JP2020080510 A JP 2020080510A
Authority
JP
Japan
Prior art keywords
passenger
passengers
conversation
communication system
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2018213711A
Other languages
Japanese (ja)
Inventor
信光 平野
Nobumitsu Hirano
信光 平野
義規 加藤
Yoshinori Kato
義規 加藤
堅次 武渕
Kenji Takebuchi
堅次 武渕
藤原 宗
So Fujiwara
宗 藤原
明 瀬志本
Akira Seshimoto
明 瀬志本
万哲 小林
Mantetsu Kobayashi
万哲 小林
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
New Japan Radio Co Ltd
Original Assignee
New Japan Radio Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by New Japan Radio Co Ltd filed Critical New Japan Radio Co Ltd
Priority to JP2018213711A priority Critical patent/JP2020080510A/en
Publication of JP2020080510A publication Critical patent/JP2020080510A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
  • Interconnected Communication Systems, Intercoms, And Interphones (AREA)

Abstract

To provide a communication system allowing passengers to easily talk with each other.SOLUTION: A communication system 10 includes: a sound collection device 20 for collecting sounds uttered by a plurality of passengers by distinguishing for each passenger; a plurality of speakers 40 provided in a one-to-one correspondence with the passengers; a path switching unit 54 for switching a path for giving a sound signal uttered by each of the passengers to the speakers 40; a command determination unit 58 for receiving a conversation start command for setting a first passenger and a second passenger of the passengers in a conversation-enabled state; and a path control unit 60 for controlling the path switching unit 54 so that a first sound signal representing a sound uttered by the first passenger is output from a second speaker of the speakers 40 corresponding to the second passenger and a second sound signal representing a sound uttered by the second passenger is output from the first speaker of the speakers 40 corresponding to the first passenger, when the conversation start command is received.SELECTED DRAWING: Figure 3

Description

本発明は、コミュニケーションシステムに関する。   The present invention relates to communication systems.

車両内において、運転者の音声をスピーカから出力して搭乗者に聞かせるシステムが知られている。例えば、特許文献1には、運転者の音声を特定の乗員の近傍に設置されているスピーカから出力させる音声出力システムが記載されている。   In a vehicle, there is known a system in which a driver's voice is output from a speaker and heard by a passenger. For example, Patent Document 1 describes a voice output system that outputs a driver's voice from a speaker installed near a specific occupant.

特開2017−094928号公報JP, 2017-094928, A

ところで、走行中の車両内の空間は、密閉されており、様々な騒音が発生している。このため、走行中の車両では、搭乗者同士の会話が聞き取りづらく、大声になりやすい。従って、走行中の車両内では、搭乗者同士での会話が困難となる場合がある。   By the way, the space inside the vehicle during traveling is hermetically sealed, and various noises are generated. For this reason, in a running vehicle, it is difficult to hear conversations between passengers, and it tends to be loud. Therefore, it may be difficult for passengers to have a conversation with each other in the moving vehicle.

本発明は、移動体内において搭乗者同士に容易に会話をさせることができるコミュニケーションシステムを提供することを目的とする。   An object of the present invention is to provide a communication system that allows passengers to easily talk with each other in a moving body.

上述した課題を解決し、目的を達成するために、本発明に係るコミュニケーションシステムは、移動体の内部における複数の座席に座っている複数の搭乗者が発声した音声を、搭乗者毎に区別して集音する集音装置と、前記複数の搭乗者に一対一に対応して設けられた複数のスピーカと、前記複数の搭乗者のそれぞれが発声した音声を表す複数の音声信号を、前記複数のスピーカに与える経路を切り替える経路切替部と、前記複数の搭乗者のうちの第1搭乗者と第2搭乗者とを会話可能状態とする会話開始命令を受け付ける命令判定部と、前記会話開始命令を受け付けた場合、前記第1搭乗者が発声した音声を表す第1音声信号を、前記複数のスピーカのうちの前記第2搭乗者に対応する第2スピーカから出力させ、且つ、前記第2搭乗者が発声した音声を表す第2音声信号を、前記複数のスピーカのうちの前記第1搭乗者に対応する第1スピーカから出力させるように、前記経路切替部を制御する経路制御部と、を備える。   In order to solve the above-mentioned problems and achieve the object, the communication system according to the present invention distinguishes voices uttered by a plurality of passengers sitting in a plurality of seats inside a moving body for each passenger. A sound collecting device that collects sound, a plurality of speakers provided in a one-to-one correspondence with the plurality of passengers, and a plurality of audio signals representing voices uttered by the plurality of passengers, respectively. A route switching unit that switches a route given to the speaker, a command determination unit that receives a conversation start command that makes the first passenger and the second passenger among the plurality of passengers in a conversation-enabled state, and the conversation start command. When accepted, the first voice signal representing the voice uttered by the first passenger is output from the second speaker of the plurality of speakers, which corresponds to the second passenger, and the second passenger is output. A route control unit that controls the route switching unit so as to output a second audio signal representing a voice uttered by the user from a first speaker of the plurality of speakers that corresponds to the first passenger. ..

本発明によれば、移動体内において搭乗者同士に容易に会話をさせることができる。   According to the present invention, passengers can easily have a conversation in a moving body.

図1は、側面側から見た車両12および車両12に適用されたコミュニケーションシステム10を示す図である。FIG. 1 is a diagram showing a vehicle 12 and a communication system 10 applied to the vehicle 12 when viewed from the side. 図2は、上面側から見た車両12および車両12に適用されたコミュニケーションシステム10を示す図である。FIG. 2 is a diagram showing the vehicle 12 and the communication system 10 applied to the vehicle 12 as viewed from the top side. 図3は、第1実施形態に係るコミュニケーションシステム10の構成を示す図である。FIG. 3 is a diagram showing the configuration of the communication system 10 according to the first embodiment. 図4は、第1実施形態に係るコミュニケーションシステム10における会話開始時の処理の流れを示すフローチャートである。FIG. 4 is a flowchart showing the flow of processing at the start of conversation in the communication system 10 according to the first embodiment. 図5は、第1実施形態に係るコミュニケーションシステム10における会話可能状態での処理の流れを示すフローチャートである。FIG. 5 is a flowchart showing the flow of processing in the conversation enabled state in the communication system 10 according to the first embodiment. 図6は、第2実施形態に係るコミュニケーションシステム10の構成を示す図である。FIG. 6 is a diagram showing the configuration of the communication system 10 according to the second embodiment. 図7は、第2実施形態に係るコミュニケーションシステム10における会話可能状態での処理の流れを示すフローチャートである。FIG. 7 is a flowchart showing the flow of processing in the conversation enabled state in the communication system 10 according to the second embodiment. 図8は、第3実施形態に係るコミュニケーションシステム10の構成を示す図である。FIG. 8 is a diagram showing the configuration of the communication system 10 according to the third embodiment. 図9は、表示部80に表示される画像の第1例を示す図である。FIG. 9 is a diagram showing a first example of an image displayed on the display unit 80. 図10は、表示部80に表示される画像の第2例を示す図である。FIG. 10 is a diagram showing a second example of the image displayed on the display unit 80. 図11は、第4実施形態に係るコミュニケーションシステム10の構成を示す図である。FIG. 11 is a diagram showing the configuration of the communication system 10 according to the fourth embodiment.

以下、添付図面を参照しながら、実施形態に係るコミュニケーションシステム10を詳細に説明する。   Hereinafter, the communication system 10 according to the embodiment will be described in detail with reference to the accompanying drawings.

(第1実施形態)
図1および図2は、車両12、および、車両12に適用されたコミュニケーションシステム10を示す図である。
(First embodiment)
1 and 2 are diagrams showing a vehicle 12 and a communication system 10 applied to the vehicle 12.

第1実施形態に係るコミュニケーションシステム10は、車両12内における搭乗者同士の会話を支援する。なお、コミュニケーションシステム10は、複数の搭乗者が搭乗することが可能であれば、車両12以外の移動体に適用されてもよい。例えば、コミュニケーションシステム10は、航空機または船舶等に適用されてもよい。   The communication system 10 according to the first embodiment supports conversation between passengers in the vehicle 12. Note that the communication system 10 may be applied to a moving body other than the vehicle 12 as long as a plurality of passengers can board. For example, the communication system 10 may be applied to an aircraft, a ship, or the like.

コミュニケーションシステム10は、集音装置20と、処理装置30と、複数のスピーカ40とを備える。   The communication system 10 includes a sound collecting device 20, a processing device 30, and a plurality of speakers 40.

集音装置20は、車両12の内部における複数の座席14に座っている複数の搭乗者が発声した音声を、搭乗者毎に区別して集音する。例えば、集音装置20は、複数の座席14に一対一に対応して設けられた複数のマイクロフォン22を有してもよい。この場合、マイクロフォン22は、対応する座席14の近傍に設けられ、対応する座席14に座っている搭乗者が発声した音声を集音する。   The sound collecting device 20 collects sounds uttered by a plurality of passengers sitting in a plurality of seats 14 inside the vehicle 12 for each passenger. For example, the sound collection device 20 may have a plurality of microphones 22 provided in one-to-one correspondence with the plurality of seats 14. In this case, the microphone 22 is provided in the vicinity of the corresponding seat 14 and collects the voice uttered by the passenger sitting in the corresponding seat 14.

また、例えば、集音装置20は、2つの座席14の中間位置に設けられ、これら2つの座席14に座っている二人の搭乗者が発声した音声を区別して集音する1つのマイクロフォン22を有してもよい。この場合、マイクロフォン22は、ビームフォーミング技術により指向性を持って音声を集音する。図1および図2の例においては、マイクロフォン22は、天井における2つの座席14の中間位置に設けられている。   Further, for example, the sound collection device 20 is provided at an intermediate position between the two seats 14 and includes a single microphone 22 that collects sounds by distinguishing sounds produced by two passengers sitting in these two seats 14. You may have. In this case, the microphone 22 collects voice with directivity by the beamforming technique. In the example of FIGS. 1 and 2, the microphone 22 is provided at an intermediate position between the two seats 14 on the ceiling.

処理装置30は、アナログ回路やデジタル回路を含む。処理装置30は、車両12の内部に設けられる。処理装置30は、集音装置20により集音された音声を表す音声信号を取得する。処理装置30は、取得した音声信号に対して信号処理および情報処理等を実行し、複数の搭乗者のそれぞれが発声した音声を個別に表す複数の音声信号を生成する。そして、処理装置30は、複数のスピーカ40の何れかに対して、何れかの搭乗者の音声を表す音声信号を出力する。   The processing device 30 includes an analog circuit and a digital circuit. The processing device 30 is provided inside the vehicle 12. The processing device 30 acquires a voice signal representing the voice collected by the sound collection device 20. The processing device 30 performs signal processing, information processing, and the like on the acquired audio signal to generate a plurality of audio signals that individually represent the sounds uttered by the plurality of passengers. Then, the processing device 30 outputs a voice signal representing the voice of any passenger to any of the plurality of speakers 40.

複数のスピーカ40は、複数の搭乗者に一対一に対応して設けられる。スピーカ40は、処理装置30から音声信号を取得し、取得した音声信号に応じた音声を出力する。スピーカ40は、対応する搭乗者に対して音声を聴かせることができるが、他の搭乗者には音声が届かないような位置に設けられる。図1および図2の例においては、スピーカ40は、対応する搭乗者の近傍における車両12の内側面に設けられている。スピーカ40は、対応する搭乗者が座る座席14のヘッドレストに設けられてもよい。   The plurality of speakers 40 are provided in a one-to-one correspondence with a plurality of passengers. The speaker 40 acquires an audio signal from the processing device 30 and outputs an audio according to the acquired audio signal. The speaker 40 is provided at a position where the corresponding passenger can hear the sound, but the sound cannot reach the other passengers. In the example of FIGS. 1 and 2, the speaker 40 is provided on the inner side surface of the vehicle 12 near the corresponding passenger. The speaker 40 may be provided in the headrest of the seat 14 in which the corresponding passenger sits.

図3は、第1実施形態に係るコミュニケーションシステム10の構成を示す図である。処理装置30は、音声処理部52と、経路切替部54と、複数の出力処理部56と、命令判定部58と、経路制御部60とを有する。   FIG. 3 is a diagram showing the configuration of the communication system 10 according to the first embodiment. The processing device 30 includes a voice processing unit 52, a route switching unit 54, a plurality of output processing units 56, a command determination unit 58, and a route control unit 60.

音声処理部52は、集音装置20により集音された音声信号を取得する。音声処理部52は、取得した音声信号に対してノイズ除去等の処理を実行し、複数の搭乗者のそれぞれが発声した音声を個別に表す複数の音声信号を生成する。音声処理部52は、複数の音声信号を経路切替部54および命令判定部58に送る。   The voice processing unit 52 acquires the voice signal collected by the sound collector 20. The voice processing unit 52 performs processing such as noise removal on the obtained voice signal, and generates a plurality of voice signals that individually represent the voice uttered by each of the plurality of passengers. The voice processing unit 52 sends a plurality of voice signals to the route switching unit 54 and the command determination unit 58.

経路切替部54は、経路制御部60の制御に応じて、複数の搭乗者のそれぞれが発声した音声を個別に表す複数の音声信号を複数のスピーカ40に与える経路を切り替える。例えば、経路切替部54は、複数の音声信号のそれぞれを、複数のスピーカ40の何れにも与えることが可能なクロスポイントスイッチである。   Under the control of the route control unit 60, the route switching unit 54 switches the route for providing the plurality of speakers 40 with a plurality of audio signals that individually represent the sounds uttered by the plurality of passengers. For example, the path switching unit 54 is a cross point switch that can apply each of the plurality of audio signals to any of the plurality of speakers 40.

複数の出力処理部56は、複数のスピーカ40に一対一に対応して設けられる。出力処理部56は、対応するスピーカ40に与える音声信号を経路切替部54から取得する。出力処理部56は、取得した音声信号に対して信号処理をして対応するスピーカ40に与えることにより、対応するスピーカ40から音声を出力させる。   The plurality of output processing units 56 are provided in a one-to-one correspondence with the plurality of speakers 40. The output processing unit 56 acquires the audio signal to be given to the corresponding speaker 40 from the path switching unit 54. The output processing unit 56 outputs the sound from the corresponding speaker 40 by performing signal processing on the acquired sound signal and giving it to the corresponding speaker 40.

命令判定部58は、複数の搭乗者のうちの第1搭乗者と第2搭乗者とを会話可能状態とする会話開始命令を受け付ける。第1搭乗者は、複数の搭乗者のうちの会話開始命令において指定された任意の一人の搭乗者である。また、第2搭乗者は、複数の搭乗者のうちの会話開始命令において指定された第1搭乗者以外の任意の一人の搭乗者である。第1搭乗者および第2搭乗者は、車両12における何れの座席14に座っていてもよい。   The command determination unit 58 receives a conversation start command that sets the first passenger and the second passenger of the plurality of passengers in a conversation-enabled state. The first passenger is any one of the passengers designated by the conversation start command among the plurality of passengers. The second passenger is any one of the plurality of passengers other than the first passenger designated in the conversation start command. The first occupant and the second occupant may be seated on any seats 14 in the vehicle 12.

さらに、命令判定部58は、第1搭乗者と第2搭乗者とが会話可能状態において、会話可能状態を終了する会話終了命令を受け付ける。   Further, the command determination unit 58 receives a conversation end command for ending the conversation-enabled state in the conversation-enabled state between the first passenger and the second passenger.

本実施形態において、命令判定部58は、複数の音声信号のそれぞれを音声認識することにより、会話開始命令および会話終了命令等の各命令を受け付ける。命令判定部58は、例えば、第1搭乗者が発声した音声信号に含まれている「第2搭乗者と会話を開始します」というキーワードを、第1搭乗者と第2搭乗者とを会話可能状態とする会話開始命令として受け付ける。また、命令判定部58は、例えば、第1搭乗者と第2搭乗者とが会話可能状態において、第1搭乗者または第2搭乗者が発声した音声信号に含まれている「会話を終了します」というキーワードを、会話終了命令として受け付ける。なお、会話開始命令および会話終了命令は、このようなキーワードに限らずどのような用語であってもよい。また、命令判定部58は、ボタン等の操作により会話開始命令および会話終了命令を受け付けてもよい。   In the present embodiment, the command determination unit 58 accepts commands such as a conversation start command and a conversation end command by recognizing each of the plurality of audio signals. The command determination unit 58, for example, uses the keyword “start a conversation with the second passenger” included in the voice signal uttered by the first passenger to talk between the first passenger and the second passenger. Accepted as a conversation start command to enable the conversation. In addition, the command determination unit 58, for example, in the state where the first passenger and the second passenger can talk with each other, the command judgment unit 58 includes “End conversation” included in the voice signal uttered by the first passenger or the second passenger The keyword "masu" is accepted as a conversation end command. The conversation start command and the conversation end command are not limited to such keywords and may be any term. The command determination unit 58 may also accept a conversation start command and a conversation end command by operating a button or the like.

経路制御部60は、命令判定部58が受け付けた命令に応じて、経路切替部54を制御する。より具体的には、経路制御部60は、第1搭乗者と第2搭乗者とを会話可能状態とする会話開始命令を受け付けた場合、第1搭乗者が発声した音声を表す第1音声信号を、複数のスピーカ40のうちの第2搭乗者に対応する第2スピーカ40−2から出力させ、且つ、第2搭乗者が発声した音声を表す第2音声信号を、複数のスピーカ40のうちの第1搭乗者に対応する第1スピーカ40−1から出力させるように、経路切替部54を制御する。   The route control unit 60 controls the route switching unit 54 according to the command received by the command determination unit 58. More specifically, when the route control unit 60 receives a conversation start command that makes the first passenger and the second passenger have a conversation enabled state, the first voice signal representing the voice uttered by the first passenger. Is output from the second speaker 40-2 corresponding to the second occupant of the plurality of speakers 40, and a second audio signal representing the voice uttered by the second occupant is output from the plurality of speakers 40. The path switching unit 54 is controlled so as to output from the first speaker 40-1 corresponding to the first passenger.

ここで、第1スピーカ40−1は、第1搭乗者が聞くことができるが、他の搭乗者が聞くことができない音声を出力する。第2スピーカ40−2は、第2搭乗者が聞くことができるが、他の搭乗者が聞くことができない音声を出力する。従って、経路制御部60は、第1搭乗者および第2搭乗者に、他の搭乗者に音声を聴かれない状態で会話をさせることができる。   Here, the first speaker 40-1 outputs a sound that can be heard by the first passenger but cannot be heard by other passengers. The second speaker 40-2 outputs a sound that can be heard by the second passenger but cannot be heard by other passengers. Therefore, the route control unit 60 can cause the first passenger and the second passenger to have a conversation in a state where other passengers cannot hear the voice.

また、経路制御部60は、第1搭乗者と第2搭乗者との会話可能状態を終了する会話終了命令を受け付けた場合、第1音声信号の第2スピーカ40−2からの出力を停止させ、且つ、第2音声信号の第1スピーカ40−1からの出力を停止させるように、経路切替部54を制御する。これにより、経路制御部60は、第1搭乗者と第2搭乗者との会話を終了させることができる。   Further, when the route control unit 60 receives a conversation end command for ending the conversation-enabled state between the first passenger and the second passenger, the route controller 60 stops the output of the first audio signal from the second speaker 40-2. In addition, the path switching unit 54 is controlled so as to stop the output of the second audio signal from the first speaker 40-1. Thereby, the route control unit 60 can end the conversation between the first passenger and the second passenger.

なお、命令判定部58は、第1搭乗者と第2搭乗者とが会話可能状態において、複数の搭乗者のうち、第1搭乗者および第2搭乗者とは異なる第3搭乗者と第4搭乗者とを会話可能状態とする会話開始命令を受け付けることもできる。命令判定部58が第3搭乗者と第4搭乗者とを会話可能状態とする会話開始命令を受け付けた場合、経路制御部60は、第3搭乗者が発声した音声を表す第3音声信号を第4搭乗者に対応する第4スピーカ40−4から出力させ、且つ、第4搭乗者が発声した音声を表す第4音声信号を第3搭乗者に対応する第3スピーカ40−3から出力させるように、経路切替部54を制御する。   It should be noted that the command determination unit 58, when the first passenger and the second passenger can communicate with each other, the third passenger and the fourth passenger, which are different from the first passenger and the second passenger, among the plurality of passengers. It is also possible to accept a conversation start command that sets the passenger in a conversation-enabled state. When the command determination unit 58 receives a conversation start command that allows the third passenger and the fourth passenger to talk with each other, the route control unit 60 outputs a third voice signal representing the voice uttered by the third passenger. The fourth speaker 40-4 corresponding to the fourth passenger outputs the fourth voice signal representing the voice uttered by the fourth passenger from the third speaker 40-3 corresponding to the third passenger. Thus, the route switching unit 54 is controlled.

この場合、経路制御部60は、第1音声信号を第2スピーカ40−2から出力され且つ第2音声信号を第1スピーカ40−1から出力させることと並行して、第3音声信号を第4スピーカ40−4から出力され且つ第4音声信号を第3スピーカ40−3から出力させるように、経路切替部54を制御する。これにより、経路制御部60は、第1搭乗者と第2搭乗者とが会話をしている最中に、第3搭乗者と第4搭乗者とに会話をさせることができる。   In this case, the path control unit 60 outputs the first audio signal from the second speaker 40-2 and outputs the second audio signal from the first speaker 40-1 in parallel with the third audio signal. The path switching unit 54 is controlled so that the fourth speaker 40-4 outputs the fourth audio signal from the third speaker 40-3. Accordingly, the route control unit 60 can cause the third passenger and the fourth passenger to have a conversation while the first passenger and the second passenger have a conversation.

図4は、第1実施形態に係るコミュニケーションシステム10における会話開始時の処理の流れを示すフローチャートである。コミュニケーションシステム10は、会話開始時において、図4に示す流れで処理を実行する。   FIG. 4 is a flowchart showing the flow of processing at the start of conversation in the communication system 10 according to the first embodiment. The communication system 10 executes the process according to the flow shown in FIG. 4 at the start of conversation.

まず、S11において、命令判定部58は、会話開始命令を受け付けたか否かを判定する。例えば、命令判定部58は、複数の音声信号のそれぞれを音声解析する。そして、命令判定部58は、何れかの搭乗者の音声信号に会話を開始することを意味する情報が含まれている場合、会話開始命令を受け付けたと判定する。例えば、命令判定部58は、何れかの搭乗者の音声信号に、会話の開始を示す予め登録されたキーワードが含まれていた場合に、会話開始命令を受け付けたと判定する。例えば、命令判定部58は、何れかの搭乗者の音声信号に、「会話を開始します」というキーワードが含まれていた場合、会話開始命令を受け付けた判定する。   First, in S11, the command determination unit 58 determines whether or not a conversation start command has been received. For example, the command determination unit 58 performs voice analysis on each of the plurality of voice signals. Then, the command determination unit 58 determines that the conversation start command has been accepted when the voice signal of any of the passengers includes information indicating that the conversation is started. For example, the command determination unit 58 determines that the conversation start command is accepted when the voice signal of any of the passengers includes a pre-registered keyword indicating the start of the conversation. For example, when the voice signal of any of the passengers includes the keyword "start a conversation", the command determination unit 58 determines that the conversation start command is accepted.

命令判定部58は、会話開始命令を受け付けていない場合(S11のNo)、処理をS11で待機する。命令判定部58は、会話開始命令を受け付けた場合(S11のYes)、処理をS12に進める。   When the conversation start command is not received (No in S11), the command determination unit 58 waits for the process in S11. When the command determination unit 58 receives the conversation start command (Yes in S11), the process proceeds to S12.

S12において、命令判定部58は、対象の二人の搭乗者を特定する。例えば、命令判定部58は、会話の開始を示すキーワードを発声した搭乗者を、対象の二人の搭乗者のうちの一方として特定する。また、例えば、命令判定部58は、キーワードとともに音声信号に含まれていた名称に基づき、対象の二人の搭乗者のうちの他方の搭乗者を特定する。   In S12, the command determination unit 58 identifies the two target passengers. For example, the command determination unit 58 identifies the passenger who has uttered the keyword indicating the start of the conversation as one of the two target passengers. In addition, for example, the command determination unit 58 identifies the other passenger of the two target passengers based on the name included in the voice signal together with the keyword.

例えば、命令判定部58は、助手席に座っている搭乗者が、「第3列の右側席の搭乗者と会話を開始します」といった音声信号を発声した場合、対象の二人の搭乗者として、助手席の搭乗者および第3列の右側席の搭乗者を特定する。また、座席名称と搭乗者の固有名称とを予め対応付けて記憶している場合、命令判定部58は、音声信号に含まれている固有名称に基づき、対象の二人の搭乗者のうち他方の搭乗者を特定してもよい。   For example, when the passenger sitting in the passenger seat utters an audio signal such as "Start conversation with passengers in the right seat in the third row", the command determination unit 58 determines that the two passengers are the target passengers. As, the passenger in the passenger seat and the passenger in the right seat in the third row are identified. When the seat name and the unique name of the passenger are stored in advance in association with each other, the command determination unit 58 determines the other of the two passengers of interest based on the unique name included in the audio signal. Passengers may be specified.

なお、命令判定部58は、このような方法に限らず、どのような方法で対象の二人の搭乗者を特定してもよい。命令判定部58は、S12の処理を終えると、処理をS13に進める。   The command determination unit 58 is not limited to such a method, and may specify the two target passengers by any method. After finishing the process of S12, the instruction determination unit 58 advances the process to S13.

S13において、経路制御部60は、特定した対象の二人の搭乗者を会話可能状態とするように、経路切替部54を制御する。より具体的には、経路制御部60は、特定した対象の二人の搭乗者のうちの一方の搭乗者の音声信号を、特定した二人の搭乗者のうちの他方の搭乗者に対応するスピーカ40から出力させ、且つ、他方の搭乗者の音声信号を一方の搭乗者に対応するスピーカ40から出力させるように、経路切替部54を制御する。これにより、経路制御部60は、対象の二人の搭乗者に会話を開始させることができる。経路制御部60は、S13の処理を終えると、処理をS11に戻す。   In S13, the route control unit 60 controls the route switching unit 54 so that the two identified passengers are in the conversation enabled state. More specifically, the route control unit 60 corresponds the audio signal of one passenger of the two specified passengers to the other passenger of the specified two passengers. The route switching unit 54 is controlled so that the speaker 40 outputs the voice signal of the other passenger and the speaker 40 corresponding to the one passenger outputs the audio signal. Accordingly, the route control unit 60 can cause the two target passengers to start a conversation. After finishing the process of S13, the route control unit 60 returns the process to S11.

図5は、第1実施形態に係るコミュニケーションシステム10における会話可能状態での処理の流れを示すフローチャートである。第1実施形態に係るコミュニケーションシステム10は、会話可能状態となっている搭乗者の組毎に、図5に示す処理を実行する。   FIG. 5 is a flowchart showing the flow of processing in the conversation enabled state in the communication system 10 according to the first embodiment. The communication system 10 according to the first embodiment executes the process shown in FIG. 5 for each group of passengers in the conversation enabled state.

まず、S21において、命令判定部58は、会話終了命令を受け付けたか否かを判定する。例えば、命令判定部58は、対象の二人の搭乗者の音声信号のそれぞれを音声解析する。そして、命令判定部58は、対象の二人の搭乗者の音声信号に会話を終了することを意味する情報が含まれている場合、会話終了命令を受け付けたと判定する。例えば、命令判定部58は、対象の二人の搭乗者の音声信号に会話の終了を示す予め登録されたキーワードが含まれている場合、会話終了命令を受け付けたと判定する。例えば、命令判定部58は、対象の二人の搭乗者のうちの何れか一方の音声信号に、「会話を終了します」というキーワードが含まれていた場合、会話終了命令を受け付けたと判定する。   First, in S21, the command determination unit 58 determines whether or not a conversation end command has been received. For example, the command determination unit 58 performs voice analysis on each of the voice signals of the two target passengers. Then, the command determination unit 58 determines that the conversation end command is accepted when the voice signals of the two target passengers include information indicating that the conversation is ended. For example, the command determination unit 58 determines that the conversation end command has been received when the voice signals of the two target passengers include a pre-registered keyword indicating the end of the conversation. For example, when the voice signal of either one of the two target passengers includes the keyword “end the conversation”, the instruction determination unit 58 determines that the conversation end instruction is accepted. ..

命令判定部58は、会話終了命令を受け付けていない場合(S21のNo)、処理をS21で待機する。命令判定部58は、会話終了命令を受け付けた場合(S21のYes)、処理をS22に進める。   When the conversation end command is not received (No in S21), the command determination unit 58 waits for the process in S21. When the command determining unit 58 receives the conversation end command (Yes in S21), the process proceeds to S22.

S22において、経路制御部60は、会話可能状態を終了するように、経路切替部54を制御する。より具体的には、経路制御部60は、会話可能状態となっている二人の搭乗者のうちの一方の搭乗者の音声信号を、他方の搭乗者に対応するスピーカ40から出力させることを停止し、且つ、他方の搭乗者の音声信号を一方の搭乗者に対応するスピーカ40から出力させること停止するように、経路切替部54を制御する。これにより、経路制御部60は、二人の搭乗者の会話を終了させることができる。経路制御部60は、S22の処理を終えると、本フローを終了する。   In S22, the route control unit 60 controls the route switching unit 54 to end the conversation-enabled state. More specifically, the route control unit 60 outputs the voice signal of one of the two passengers in the conversation-enabled state from the speaker 40 corresponding to the other passenger. The route switching unit 54 is controlled so as to stop and stop outputting the voice signal of the other passenger from the speaker 40 corresponding to the one passenger. Accordingly, the route control unit 60 can end the conversation between the two passengers. The route control unit 60 ends the present flow after finishing the process of S22.

以上のように、本実施形態に係るコミュニケーションシステム10は、車両12の内部において、第1搭乗者の音声信号を第2搭乗者に対応する第2スピーカ40−2から出力し、第2搭乗者の音声信号を第1搭乗者に対応する第1スピーカ40−1から出力する。これにより、本実施形態に係るコミュニケーションシステム10によれば、多くの雑音が含まれていても、第1搭乗者と第2搭乗者とに容易に会話をさせることができる。   As described above, the communication system 10 according to the present embodiment outputs the audio signal of the first passenger from the second speaker 40-2 corresponding to the second passenger inside the vehicle 12 and the second passenger. Is output from the first speaker 40-1 corresponding to the first passenger. As a result, according to the communication system 10 according to the present embodiment, the first passenger and the second passenger can easily have a conversation even if a lot of noise is included.

(第2実施形態)
第2実施形態に係るコミュニケーションシステム10は、第1実施形態と略同一の機能および構成を有する。第2実施形態は、既に説明した構成要素と略同一の機能および構成を有する構成要素については同一の符号を付け、相違点を除き詳細な説明を省略する。第3実施形態以降においても同様である。
(Second embodiment)
The communication system 10 according to the second embodiment has substantially the same function and configuration as the first embodiment. In the second embodiment, components having substantially the same functions and configurations as those already described are designated by the same reference numerals, and detailed description will be omitted except for differences. The same applies to the third and subsequent embodiments.

図6は、第2実施形態に係るコミュニケーションシステム10の構成を示す図である。第2実施形態に係る処理装置30は、複数の合成部70をさらに有する。   FIG. 6 is a diagram showing the configuration of the communication system 10 according to the second embodiment. The processing device 30 according to the second embodiment further includes a plurality of combining units 70.

第2実施形態において、経路切替部54は、複数のスピーカ40のそれぞれに対応して、1または2以上の音声信号を出力する。例えば、経路切替部54は、第1搭乗者に対応する第1スピーカ40−1に対応して、2以上の音声信号を同時に出力することができる。   In the second embodiment, the path switching unit 54 outputs one or more audio signals corresponding to each of the plurality of speakers 40. For example, the route switching unit 54 can simultaneously output two or more audio signals corresponding to the first speaker 40-1 corresponding to the first passenger.

複数の合成部70は、複数のスピーカ40に一対一に対応して設けられる。合成部70は、対応するスピーカ40に対して与えられる1または2以上の音声信号を、経路切替部54から取得する。   The plurality of synthesis units 70 are provided in a one-to-one correspondence with the plurality of speakers 40. The synthesizing unit 70 acquires one or more audio signals given to the corresponding speaker 40 from the route switching unit 54.

合成部70は、対応するスピーカ40に対応して1つの音声信号が出力された場合には、その音声信号をそのまま対応する出力処理部56に与える。合成部70は、対応するスピーカ40に対応して2以上の音声信号が同時に出力された場合には、2以上の音声信号を合成して1つの音声信号として出力処理部56に与える。   When one audio signal is output corresponding to the corresponding speaker 40, the synthesizing unit 70 gives the audio signal as it is to the corresponding output processing unit 56. When two or more audio signals are simultaneously output corresponding to the corresponding speaker 40, the synthesizing unit 70 synthesizes the two or more audio signals and gives them to the output processing unit 56 as one audio signal.

出力処理部56は、対応する合成部70から音声信号を取得する。出力処理部56は、取得した音声信号に対して信号処理をして、対応するスピーカ40に与えることにより、対応するスピーカ40から音声を出力させる。   The output processing unit 56 acquires the audio signal from the corresponding synthesis unit 70. The output processing unit 56 performs signal processing on the acquired audio signal and supplies the processed audio signal to the corresponding speaker 40 to output the audio from the corresponding speaker 40.

命令判定部58は、N人(2以上の整数)の搭乗者を会話可能状態とする会話開始命令を受け付ける。経路制御部60は、命令判定部58が会話開始命令を受け付けた場合、対象のN人の搭乗者のそれぞれが発生した音声を表す音声信号を、N人の搭乗者のうちの本人を除く他の全ての搭乗者に対応するスピーカ40から出力させるように、経路切替部54を制御する。これにより、経路制御部60は、N人の搭乗者に会話をさせることができる。   The command determination unit 58 accepts a conversation start command that puts N passengers (an integer of 2 or more) into a conversation-enabled state. When the command determination unit 58 receives the conversation start command, the route control unit 60 excludes the voice signal representing the voice generated by each of the N target passengers from the N passengers other than the person himself/herself. The route switching unit 54 is controlled so that the speakers 40 corresponding to all the passengers are output. Accordingly, the route control unit 60 can cause N passengers to have a conversation.

また、命令判定部58は、N人の搭乗者が会話可能状態において、N人の搭乗者の会話可能状態を終了する会話終了命令を受け付ける。経路制御部60は、会話終了命令を受け付けた場合、N人の搭乗者の音声信号の出力を停止させるように、経路切替部54を制御する。これにより、N人の搭乗者のそれぞれは、他の搭乗者が発声した音声を聴くことができなくなる。これにより、経路制御部60は、N人の搭乗者による会話を終了させることができる。   In addition, the command determination unit 58 receives a conversation end command for ending the conversation-enabled state of the N passengers in the conversation-enabled state of the N passengers. When receiving the conversation end command, the route control unit 60 controls the route switching unit 54 so as to stop the output of the voice signals of the N passengers. As a result, each of the N passengers cannot hear the voice uttered by the other passengers. As a result, the route control unit 60 can end the conversation by the N passengers.

また、命令判定部58は、N人の搭乗者が会話可能状態である場合に、他の搭乗者を追加する追加命令を受け付ける。経路制御部60は、追加命令を受け付けた場合、追加命令で追加された他の搭乗者を含むN+1人の搭乗者のそれぞれが発生した音声を表す音声信号を、N+1人の搭乗者のうちの本人を除く他の全ての搭乗者に対応するスピーカ40から出力させるように、経路切替部54を制御する。これにより、経路制御部60は、会話可能状態に他の搭乗者を追加することができる。   In addition, the command determination unit 58 accepts an additional command to add another passenger when N passengers are in a conversation-enabled state. When the route control unit 60 receives the additional command, the route control unit 60 outputs an audio signal representing the voice generated by each of the N+1 passengers including the other passengers added by the additional command to the N+1 passengers out of the N+1 passengers. The route switching unit 54 is controlled so that the speakers 40 corresponding to all the passengers other than the person himself/herself output. Thereby, the route control unit 60 can add another passenger to the conversation enabled state.

例えば、命令判定部58は、第1搭乗者と第2搭乗者とが会話可能状態である場合に、複数の搭乗者のうちの第3搭乗者を追加する追加命令を受け付けることができる。経路制御部60は、このような追加命令を受け付けた場合、第2音声信号および第3搭乗者が発声した音声を表す第3音声信号を、第1スピーカ40−1から出力させるように、経路切替部54を制御する。さらに、経路制御部60は、第1音声信号および第3音声信号を、第2スピーカ40−2から出力させるように、経路切替部54を制御する。さらに、経路制御部60は、第1音声信号および第2音声信号を複数のスピーカ40のうちの第3搭乗者に対応する第3スピーカ40−3から出力させるように、経路切替部54を制御する。これにより、経路制御部60は、第1搭乗者と第2搭乗者との会話に、第3搭乗者を追加することができる。   For example, the command determination unit 58 can accept an additional command to add the third passenger of the plurality of passengers when the first passenger and the second passenger are in a conversation-enabled state. When the route control unit 60 receives such an additional command, the route control unit 60 outputs the second voice signal and the third voice signal representing the voice uttered by the third passenger from the first speaker 40-1. The switching unit 54 is controlled. Further, the route control unit 60 controls the route switching unit 54 so that the first audio signal and the third audio signal are output from the second speaker 40-2. Further, the route control unit 60 controls the route switching unit 54 so that the first audio signal and the second audio signal are output from the third speaker 40-3 of the plurality of speakers 40 corresponding to the third passenger. To do. Accordingly, the route control unit 60 can add the third passenger to the conversation between the first passenger and the second passenger.

なお、本実施形態において、命令判定部58は、音声信号を音声認識することにより追加命令を受け付ける。例えば、命令判定部58は、第3搭乗者が発声した音声信号に含まれている「第1搭乗者と第2搭乗者との会話に参加します」というキーワードを、第3搭乗者を追加する追加命令として受け付ける。なお、命令判定部58は、ボタン等の操作により追加命令を受け付けてもよい。   In the present embodiment, the command determination unit 58 accepts the additional command by recognizing the voice signal by voice. For example, the command determination unit 58 adds the keyword “I participate in the conversation between the first passenger and the second passenger” included in the audio signal uttered by the third passenger to the third passenger. Accept as an additional command. The instruction determination unit 58 may accept an additional instruction by operating a button or the like.

図7は、第2実施形態に係るコミュニケーションシステム10における会話可能状態での処理の流れを示すフローチャートである。第2実施形態に係るコミュニケーションシステム10は、会話可能状態となっている組毎に、図7に示す処理を実行する。   FIG. 7 is a flowchart showing the flow of processing in the conversation enabled state in the communication system 10 according to the second embodiment. The communication system 10 according to the second embodiment executes the process shown in FIG. 7 for each set in the conversation enabled state.

まず、S31において、命令判定部58は、会話終了命令を受け付けたか否かを判定する。例えば、命令判定部58は、対象のN人の搭乗者の音声信号のそれぞれを音声解析する。そして、命令判定部58は、対象のN人の搭乗者の音声信号に会話を終了することを意味する情報が含まれている場合、会話終了命令を受け付けたと判定する。例えば、命令判定部58は、対象のN人の搭乗者の音声信号に会話の終了を示す予め登録されたキーワードが含まれている場合、会話終了命令を受け付けたと判定する。   First, in S31, the command determination unit 58 determines whether or not a conversation end command has been received. For example, the command determination unit 58 performs voice analysis on each of the voice signals of the target N passengers. Then, the command determination unit 58 determines that the conversation end command has been received when the voice signals of the N passengers of interest include information indicating that the conversation is ended. For example, the command determination unit 58 determines that the conversation end command has been received when the voice signals of the target N passengers include a pre-registered keyword indicating the end of the conversation.

命令判定部58は、会話終了命令を受け付けた場合(S31のYes)、処理をS32に進める。S32において、経路制御部60は、会話可能状態を終了するように、経路切替部54を制御する。より具体的には、経路制御部60は、会話可能状態となっているN人の搭乗者のそれぞれに対応するスピーカ40からの音声信号の出力を停止するように、経路切替部54を制御する。これにより、経路制御部60は、N人の搭乗者の会話を終了させることができる。経路制御部60は、S32の処理を終えると、本フローを終了する。   When the command determination unit 58 receives the conversation end command (Yes in S31), the process proceeds to S32. In S32, the route control unit 60 controls the route switching unit 54 to end the conversation-enabled state. More specifically, the route control unit 60 controls the route switching unit 54 so as to stop the output of the audio signal from the speaker 40 corresponding to each of the N passengers in the conversation enabled state. .. Thereby, the route control unit 60 can end the conversation of the N passengers. After finishing the process of S32, the route control unit 60 ends this flow.

命令判定部58は、会話終了命令を受け付けていない場合(S31のNo)、処理をS33に進める。S33において、命令判定部58は、追加命令を受け付けたか否かを判定する。例えば、命令判定部58は、複数の音声信号のそれぞれを解析する。そして、命令判定部58は、何れかの搭乗者の音声信号に、会話中のN人の搭乗者以外の搭乗者を会話に追加することを意味する情報が含まれている場合、追加命令を受け付けたと判定する。例えば、命令判定部58は、何れかの搭乗者の音声信号に、新たな搭乗者を追加することを示す予め登録されたキーワードが含まれていた場合に、追加命令を受け付けたと判定する。例えば、命令判定部58は、何れかの搭乗者の音声信号に、「会話に新たな搭乗者を追加します」というキーワードが含まれていた場合、追加命令を受け付けた判定する。   When the conversation end command is not received (No in S31), the command determination unit 58 advances the process to S33. In S33, the instruction determination unit 58 determines whether or not the additional instruction has been accepted. For example, the command determination unit 58 analyzes each of the plurality of audio signals. Then, when the voice signal of any of the passengers includes information indicating that passengers other than the N passengers in the conversation are added to the conversation, the command determination unit 58 issues an additional command. Judged as accepted. For example, the command determination unit 58 determines that the addition command is accepted when the voice signal of any of the passengers includes a pre-registered keyword indicating that a new passenger is added. For example, when the voice signal of any passenger includes the keyword “add a new passenger to the conversation”, the command determination unit 58 determines that the additional command is accepted.

命令判定部58は、追加命令を受け付けていない場合(S33のNo)、処理をS31に戻し、S31からの処理を繰り返す。命令判定部58は、追加命令を受け付けた場合(S33のYes)、処理をS34に進める。   If the additional instruction is not received (No in S33), the instruction determining unit 58 returns the processing to S31 and repeats the processing from S31. When the instruction determining unit 58 receives the additional instruction (Yes in S33), the processing proceeds to S34.

S34において、命令判定部58は、追加する搭乗者を特定する。例えば、命令判定部58は、会話可能状態となっているN人の搭乗者以外の搭乗者の音声信号に、追加を示すキーワードが含まれていた場合、そのキーワードを発声した搭乗者を、追加する搭乗者として特定する。また、例えば、命令判定部58は、会話可能状態となっているN人の搭乗者の何れかの音声信号に、追加を示すキーワードが含まれていた場合、その音声信号に含まれる名称等に基づき、追加する搭乗者を特定する。例えば、命令判定部58は、会話可能状態となっているN人の搭乗者の何れかが、「第3列右側席の搭乗者を追加します」というキーワードを発声した場合、第3列右側席の搭乗者を、追加する搭乗者として特定する。   In S34, the command determination unit 58 identifies the passenger to be added. For example, when the voice signals of passengers other than the N passengers in the conversation enabled state include a keyword indicating addition, the command determination unit 58 adds the passenger who has uttered the keyword. Specify as a passenger to In addition, for example, when the voice signal of any of the N passengers in the conversation enabled state includes a keyword indicating addition, the command determination unit 58 adds the keyword included in the voice signal to the name or the like. Based on this, the passengers to be added are specified. For example, if any of the N passengers who are in the conversation-enabled state utters the keyword “add a passenger in the right seat in the third row”, the command determination unit 58 determines the right side in the third row. Identify the passenger in the seat as the passenger to be added.

なお、命令判定部58は、このような方法に限らず、どのような方法で追加する搭乗者を特定してもよい。命令判定部58は、S34の処理を終えると、処理をS35に進める。   The command determination unit 58 is not limited to such a method, and may use any method to specify the passenger to be added. After finishing the process of S34, the instruction determination unit 58 advances the process to S35.

S35において、経路制御部60は、N人の搭乗者と追加する搭乗者とを会話可能状態とするように、経路切替部54を制御する。より具体的には、経路制御部60は、追加命令で追加された他の搭乗者を含むN+1人の搭乗者のそれぞれが発生した音声を表す音声信号を、N+1人の搭乗者のうちの本人を除く他の全ての搭乗者に対応するスピーカ40から出力させるように、経路切替部54を制御する。そして、経路制御部60は、S35の処理を終了すると、処理をS31に戻す。   In S35, the route control unit 60 controls the route switching unit 54 so that the N passengers and the passengers to be added can talk. More specifically, the route control unit 60 outputs an audio signal representing the voice generated by each of N+1 passengers including other passengers added by the addition command to the person among the N+1 passengers. The route switching unit 54 is controlled so as to output from the speakers 40 corresponding to all passengers other than. Then, when the process of S35 ends, the route control unit 60 returns the process to S31.

このように本実施形態に係るコミュニケーションシステム10は、車両12の内部において、N人の搭乗者の音声信号のそれぞれを本人以外の搭乗者に対応するスピーカ40から出力する。これにより、本実施形態に係るコミュニケーションシステム10によれば、多くの雑音が含まれていても、N人の搭乗者に容易に会話をさせることができる。さらに、本実施形態に係るコミュニケーションシステム10は、N人の搭乗者による会話可能状態に、新たな搭乗者を追加することができる。   As described above, the communication system 10 according to the present embodiment outputs the respective voice signals of N passengers from the speaker 40 corresponding to passengers other than the passenger inside the vehicle 12. As a result, according to the communication system 10 according to the present embodiment, it is possible to easily make N passengers have a conversation even if a lot of noise is included. Furthermore, the communication system 10 according to the present embodiment can add a new passenger to the state where N passengers can talk.

(第3実施形態)
図8は、第3実施形態に係るコミュニケーションシステム10の構成を示す図である。第3実施形態に係るコミュニケーションシステム10は、複数の表示部80をさらに備える。
(Third Embodiment)
FIG. 8 is a diagram showing the configuration of the communication system 10 according to the third embodiment. The communication system 10 according to the third embodiment further includes a plurality of display units 80.

複数の表示部80は、複数の搭乗者に一対一に対応して設けられる。表示部80は、処理装置30から画像信号を取得し、取得した画像信号に応じた画像を表示する。表示部80は、対応する搭乗者に対して画像を提供することができるが、他の搭乗者には画像が見えづらい位置に設けられる。   The plurality of display units 80 are provided in a one-to-one correspondence with a plurality of passengers. The display unit 80 acquires an image signal from the processing device 30 and displays an image according to the acquired image signal. The display unit 80 can provide an image to the corresponding passenger, but is provided at a position where the image is difficult for other passengers to see.

第3実施形態において、処理装置30は、複数の表示制御部82をさらに有する。複数の表示制御部82は、複数の表示部80に一対一に対応して設けられる。表示制御部82は、対応する表示部80に対して出力される情報を経路制御部60から取得する。表示制御部82は、経路制御部60から受け取った情報を含む画像を表す画像信号を生成する。表示制御部82は、生成した画像信号を対応する表示部80に与えることにより、経路制御部60から与えられた情報を、対応する表示部80に表示させる。   In the third embodiment, the processing device 30 further includes a plurality of display control units 82. The plurality of display control units 82 are provided in a one-to-one correspondence with the plurality of display units 80. The display control unit 82 acquires the information output to the corresponding display unit 80 from the route control unit 60. The display control unit 82 generates an image signal representing an image including the information received from the route control unit 60. The display control unit 82 supplies the generated image signal to the corresponding display unit 80 to display the information given from the route control unit 60 on the corresponding display unit 80.

図9は、表示部80に表示される画像の第1例を示す図である。例えば、経路制御部60は、何れかのN人の搭乗者が会話可能状態である場合、N人の搭乗者のそれぞれに対応する表示部80に、N人の搭乗者のうちの本人以外の搭乗者に関する情報を表示させる。   FIG. 9 is a diagram showing a first example of an image displayed on the display unit 80. For example, when any of the N passengers is in a conversation-enabled state, the route control unit 60 displays on the display unit 80 corresponding to each of the N passengers other than the N passengers. Display information about passengers.

例えば、第1搭乗者と第2搭乗者とが会話可能状態である場合、経路制御部60は、複数の表示部80のうち第1搭乗者に対応する第1表示部80−1に第2搭乗者と会話中であることを示す情報を表示させ、複数の表示部80のうち第2搭乗者に対応する第2表示部80−2に第1搭乗者と会話中であることを示す情報を表示させる。例えば、助手席の搭乗者と第3列右側席の搭乗者とが会話可能状態である場合、経路制御部60は、第3列右側席の搭乗者に対応する表示部80に、図9に示すような情報を表示する。   For example, when the first passenger and the second passenger are in a conversation-enabled state, the route control unit 60 displays the second display on the first display unit 80-1 corresponding to the first passenger among the plurality of display units 80. Information indicating that a conversation with the passenger is displayed, and information indicating that the second passenger 80-2 corresponding to the second passenger among the plurality of display units 80 is in the conversation with the first passenger Is displayed. For example, when the passenger in the passenger seat and the passenger in the right seat in the third row are in a conversation-enabled state, the route control unit 60 displays the display unit 80 corresponding to the passenger in the right seat in the third row in FIG. Display information as shown.

このように本実施形態に係るコミュニケーションシステム10によれば、会話可能状態となっている複数の搭乗者に、何れの搭乗者と会話しているのかを知らせることができる。   As described above, according to the communication system 10 according to the present embodiment, it is possible to notify a plurality of passengers in a conversation-enabled state which passengers they are talking to.

図10は、表示部80に表示される画像の第2例を示す図である。例えば、経路制御部60は、会話可能状態となっている搭乗者の組を示す情報を、複数の表示部80の少なくとも一つに表示させてもよい。   FIG. 10 is a diagram showing a second example of the image displayed on the display unit 80. For example, the route control unit 60 may cause at least one of the plurality of display units 80 to display information indicating the set of passengers in the conversation enabled state.

例えば、第1搭乗者と第2搭乗者とが会話可能状態である場合、経路制御部60は、第1搭乗者および第2搭乗者以外の搭乗者に対応する表示部80に、第1搭乗者と第2搭乗者とが会話中であることを示す情報を表示させてもよい。例えば、経路制御部60は、助手席の搭乗者と第3列右側席の搭乗者とが会話可能状態であり、且つ、第2列左側席の搭乗者と第3列左側席の搭乗者とが会話可能状態である場合、経路制御部60は、図10に示すような情報を、会話可能状態となっていない全ての搭乗者に対応する表示部80に表示させる。また、経路制御部60は、このような情報を、車両12内の複数の表示部80のうちの特定の表示部80に表示させてもよい。   For example, when the first passenger and the second passenger are in a conversation-enabled state, the route control unit 60 causes the display unit 80 corresponding to the passengers other than the first passenger and the second passenger to make the first boarding. Information indicating that the passenger and the second passenger are in a conversation may be displayed. For example, the route control unit 60 allows the passenger in the passenger seat and the passenger in the right seat in the third row to have a conversation with each other, and the passenger in the left seat in the second row and the passenger in the left seat in the third row. Is in the conversation-enabled state, the route control unit 60 causes the display unit 80 corresponding to all passengers who are not in the conversation-enabled state to display information as shown in FIG. In addition, the route control unit 60 may display such information on a specific display unit 80 of the plurality of display units 80 in the vehicle 12.

このように本実施形態に係るコミュニケーションシステム10によれば、何れの搭乗者の組が会話可能となっているのかを、会話可能状態となっていない搭乗者等に知らせることができる。   As described above, according to the communication system 10 according to the present embodiment, it is possible to notify a passenger or the like who is not in the conversation-enabled state which group of passengers is capable of the conversation.

(第4実施形態)
図11は、第4実施形態に係るコミュニケーションシステム10の構成を示す図である。第4実施形態に係るコミュニケーションシステム10は、撮像装置88と、複数の表示部80とをさらに備える。
(Fourth Embodiment)
FIG. 11 is a diagram showing the configuration of the communication system 10 according to the fourth embodiment. The communication system 10 according to the fourth embodiment further includes an imaging device 88 and a plurality of display units 80.

撮像装置88は、複数の搭乗者を撮像する。撮像装置88は、複数の座席14に一対一に対応して設けられた複数のカメラ90を有してもよい。この場合、カメラ90は、対応する座席14の前方に設けられ、対応する座席14に座っている搭乗者を撮像する。また、撮像装置88は、複数の搭乗者を同時に撮像できる広角カメラであってもよい。例えば、広角カメラは、2つの座席14の中間位置に設けられ、これら2つの座席14に座っている二人の搭乗者を同時に撮像する。   The imaging device 88 images a plurality of passengers. The imaging device 88 may include a plurality of cameras 90 provided in a one-to-one correspondence with the plurality of seats 14. In this case, the camera 90 is provided in front of the corresponding seat 14 and images the occupant sitting in the corresponding seat 14. Further, the imaging device 88 may be a wide-angle camera capable of simultaneously imaging a plurality of passengers. For example, the wide-angle camera is provided at an intermediate position between the two seats 14 and simultaneously images two passengers sitting in the two seats 14.

第4実施形態において、処理装置30は、画像処理部92と、画像切替部94と、複数の表示制御部82をさらに有する。   In the fourth embodiment, the processing device 30 further includes an image processing unit 92, an image switching unit 94, and a plurality of display control units 82.

画像処理部92は、撮像装置88により撮像された画像信号を取得する。画像処理部92は、取得した画像信号に対して所定の処理を実行し、複数の搭乗者のそれぞれを個別に撮像した複数の画像信号を生成する。画像処理部92は、複数の画像信号を画像切替部94に送る。   The image processing unit 92 acquires the image signal imaged by the imaging device 88. The image processing unit 92 performs a predetermined process on the acquired image signal to generate a plurality of image signals obtained by individually capturing the plurality of passengers. The image processing unit 92 sends a plurality of image signals to the image switching unit 94.

画像切替部94は、経路制御部60の制御に応じて、複数の搭乗者の画像を表す複数の画像信号を複数の表示部80に与える経路を切り替える。例えば、画像切替部94は、複数の画像信号のそれぞれを、複数の表示部80の何れにも与えることが可能なクロスポイントスイッチである。   Under the control of the route control unit 60, the image switching unit 94 switches the route for providing the plurality of display units 80 with the plurality of image signals representing the images of the plurality of passengers. For example, the image switching unit 94 is a cross point switch that can apply each of the plurality of image signals to any of the plurality of display units 80.

複数の表示制御部82は、複数の表示部80に一対一に対応して設けられる。表示制御部82は、対応する表示部80に与える画像信号を画像切替部94から取得する。表示制御部82は、取得した画像信号に対して信号処理をして対応する表示部80に与えることにより、対応する表示部80に画像を表示させる。   The plurality of display control units 82 are provided in a one-to-one correspondence with the plurality of display units 80. The display control unit 82 acquires the image signal given to the corresponding display unit 80 from the image switching unit 94. The display control unit 82 causes the corresponding display unit 80 to display an image by performing signal processing on the acquired image signal and supplying the image signal to the corresponding display unit 80.

そして、本実施形態に係る経路制御部60は、第1搭乗者と第2搭乗者とを会話可能状態とした場合、複数の画像信号のうち第1搭乗者を撮像した第1画像信号を複数の表示部80のうち第2搭乗者に対応する第2表示部80−2に表示させ、且つ、複数の画像信号のうち第2搭乗者を撮像した第2画像信号を複数の表示部80のうち第1搭乗者に対応する第1表示部80−1に表示させるように、画像切替部94を制御する。これにより、会話中において、第1搭乗者は、第2搭乗者を視覚的に確認することができる。また、第2搭乗者は、第1搭乗者を視覚的に確認することができる。   Then, when the first passenger and the second passenger are in a conversation-enabled state, the route control unit 60 according to the present embodiment outputs a plurality of first image signals of the first passenger among the plurality of image signals. Of the display units 80, the second image unit 80-2 corresponding to the second passenger is displayed, and the second image signal of the second passenger captured from the plurality of image signals is displayed on the plurality of display units 80. The image switching unit 94 is controlled so that the image is displayed on the first display unit 80-1 corresponding to the first passenger. This allows the first passenger to visually confirm the second passenger during the conversation. Further, the second passenger can visually confirm the first passenger.

このように本実施形態に係るコミュニケーションシステム10によれば、会話可能状態となっている相手方の搭乗者の画像を表示して、会話の支援をすることができる。   As described above, according to the communication system 10 according to the present embodiment, it is possible to display the image of the passenger of the other party who is in the conversation-enabled state to support the conversation.

以上、本発明に係る実施形態について説明したが、本発明は、上述の実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上述の実施形態に開示されている複数の構成要素の適宜な組み合わせにより、種々の発明を形成できる。例えば、実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。また、上述の各実施形態および変形例は、任意に組み合わせることができる。   Although the embodiment according to the present invention has been described above, the present invention is not limited to the above-described embodiment as it is, and constituent elements can be modified and embodied at the stage of implementation without departing from the scope of the invention. Further, various inventions can be formed by appropriately combining a plurality of constituent elements disclosed in the above-described embodiments. For example, some components may be deleted from all the components shown in the embodiment. Further, the above-described respective embodiments and modified examples can be arbitrarily combined.

10 コミュニケーションシステム
12 車両
14 座席
20 集音装置
22 マイクロフォン
30 処理装置
40 スピーカ
52 音声処理部
54 経路切替部
56 出力処理部
58 命令判定部
60 経路制御部
70 合成部
80 表示部
82 表示制御部
88 撮像装置
90 カメラ
92 画像処理部
94 画像切替部
10 Communication System 12 Vehicle 14 Seat 20 Sound Collecting Device 22 Microphone 30 Processing Device 40 Speaker 52 Voice Processing Unit 54 Route Switching Unit 56 Output Processing Unit 58 Command Judgment Unit 60 Route Control Unit 70 Synthesis Unit 80 Display Unit 82 Display Control Unit 88 Imaging Device 90 Camera 92 Image processing unit 94 Image switching unit

Claims (7)

移動体の内部における複数の座席に座っている複数の搭乗者が発声した音声を、搭乗者毎に区別して集音する集音装置と、
前記複数の搭乗者に一対一に対応して設けられた複数のスピーカと、
前記複数の搭乗者のそれぞれが発声した音声を表す複数の音声信号を、前記複数のスピーカに与える経路を切り替える経路切替部と、
前記複数の搭乗者のうちの第1搭乗者と第2搭乗者とを会話可能状態とする会話開始命令を受け付ける命令判定部と、
前記会話開始命令を受け付けた場合、前記第1搭乗者が発声した音声を表す第1音声信号を、前記複数のスピーカのうちの前記第2搭乗者に対応する第2スピーカから出力させ、且つ、前記第2搭乗者が発声した音声を表す第2音声信号を、前記複数のスピーカのうちの前記第1搭乗者に対応する第1スピーカから出力させるように、前記経路切替部を制御する経路制御部と、
を備えるコミュニケーションシステム。
A sound collection device that collects the sounds uttered by a plurality of passengers sitting in a plurality of seats inside the moving body for each passenger.
A plurality of speakers provided in a one-to-one correspondence with the plurality of passengers,
A path switching unit that switches a path to which a plurality of audio signals representing the sounds uttered by each of the plurality of passengers are given to the plurality of speakers;
A command determination unit that receives a conversation start command that sets a first passenger and a second passenger of the plurality of passengers in a conversation-enabled state;
When the conversation start command is received, a first voice signal representing a voice uttered by the first passenger is output from a second speaker of the plurality of speakers, which corresponds to the second passenger, and Route control for controlling the route switching unit so that a second voice signal representing the voice uttered by the second passenger is output from a first speaker of the plurality of speakers, which corresponds to the first passenger. Department,
A communication system equipped with.
前記命令判定部は、前記会話可能状態を終了する会話終了命令を受け付け、
前記経路制御部は、前記会話終了命令を受け付けた場合、前記第1音声信号の前記第2スピーカからの出力を停止させ、且つ、前記第2音声信号の前記第1スピーカからの出力を停止させるように、前記経路切替部を制御する
請求項1に記載のコミュニケーションシステム。
The command determination unit receives a conversation end command for ending the conversation enabled state,
The path control unit stops the output of the first audio signal from the second speaker and the output of the second audio signal from the first speaker when receiving the conversation end command. The communication system according to claim 1, wherein the path switching unit is controlled as described above.
前記命令判定部は、前記第1搭乗者と前記第2搭乗者とが前記会話可能状態である場合に、前記複数の搭乗者のうちの第3搭乗者を追加する追加命令を受け付け、
前記経路制御部は、前記追加命令を受け付けた場合、
前記第2音声信号および前記第3搭乗者が発声した音声を表す第3音声信号を、前記第1スピーカから出力させ、
前記第1音声信号および前記第3音声信号を、前記第2スピーカから出力させ、且つ、
前記第1音声信号および前記第2音声信号を、前記複数のスピーカのうちの前記第3搭乗者に対応する第3スピーカから出力させるように、前記経路切替部を制御する
請求項1または2に記載のコミュニケーションシステム。
The command determination unit accepts an additional command to add a third passenger of the plurality of passengers when the first passenger and the second passenger are in the conversation enabled state,
When the route control unit receives the additional instruction,
Outputting a second voice signal and a third voice signal representing the voice uttered by the third passenger from the first speaker,
Outputting the first audio signal and the third audio signal from the second speaker, and
The route switching unit is controlled so that the first audio signal and the second audio signal are output from a third speaker of the plurality of speakers, which corresponds to the third passenger. Communication system described.
前記命令判定部は、前記複数の音声信号のそれぞれを音声認識することにより、前記会話開始命令を受け付ける
請求項1から3の何れか1項に記載のコミュニケーションシステム。
The communication system according to claim 1, wherein the command determination unit accepts the conversation start command by recognizing each of the plurality of voice signals by voice.
前記複数の搭乗者に一対一に対応して設けられた複数の表示部をさらに備え、
前記経路制御部は、前記複数の表示部のうち前記第1搭乗者に対応する第1表示部に前記第2搭乗者と会話中であることを示す情報を表示させ、前記複数の表示部のうち前記第2搭乗者に対応する第2表示部に前記第1搭乗者と会話中であることを示す情報を表示させる
請求項1に記載のコミュニケーションシステム。
Further comprising a plurality of display units provided in a one-to-one correspondence with the plurality of passengers,
The route control unit causes the first display unit, which corresponds to the first passenger, of the plurality of display units to display information indicating that the second passenger is in a conversation, The communication system according to claim 1, wherein information indicating that the user is in conversation with the first passenger is displayed on a second display unit corresponding to the second passenger.
前記経路制御部は、前記会話可能状態となっている搭乗者の組を示す情報を、前記複数の表示部の少なくとも1つに表示させる
請求項5に記載のコミュニケーションシステム。
The communication system according to claim 5, wherein the route control unit causes the information indicating the set of passengers in the conversation-enabled state to be displayed on at least one of the plurality of display units.
前記複数の搭乗者を撮像する撮像装置と、
前記複数の搭乗者に一対一に対応して設けられた複数の表示部と、
前記複数の搭乗者の画像を表す複数の画像信号を前記複数の表示部に与える経路を切り替える画像切替部と、
をさらに備え、
前記経路制御部は、前記複数の画像信号のうち前記第1搭乗者を撮像した第1画像信号を前記複数の表示部のうち前記第2搭乗者に対応する第2表示部に表示させ、且つ、前記複数の画像信号のうち前記第2搭乗者を撮像した第2画像信号を前記複数の表示部のうち前記第1搭乗者に対応する第1表示部に表示させるように、前記画像切替部を制御する
請求項1に記載のコミュニケーションシステム。
An imaging device for imaging the plurality of passengers;
A plurality of display units provided in a one-to-one correspondence with the plurality of passengers,
An image switching unit that switches a route that gives a plurality of image signals representing images of the plurality of passengers to the plurality of display units,
Further equipped with,
The route control unit displays a first image signal of the first occupant captured from the plurality of image signals on a second display unit corresponding to the second occupant of the plurality of display units, and The image switching unit is configured to display a second image signal of the plurality of image signals, which is obtained by capturing an image of the second passenger, on a first display unit corresponding to the first passenger of the plurality of display units. The communication system according to claim 1, wherein the communication system is controlled.
JP2018213711A 2018-11-14 2018-11-14 Communication system Pending JP2020080510A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2018213711A JP2020080510A (en) 2018-11-14 2018-11-14 Communication system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2018213711A JP2020080510A (en) 2018-11-14 2018-11-14 Communication system

Publications (1)

Publication Number Publication Date
JP2020080510A true JP2020080510A (en) 2020-05-28

Family

ID=70802023

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018213711A Pending JP2020080510A (en) 2018-11-14 2018-11-14 Communication system

Country Status (1)

Country Link
JP (1) JP2020080510A (en)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003121162A (en) * 2001-10-15 2003-04-23 Alpine Electronics Inc Communication apparatus among many parties
JP2008092322A (en) * 2006-10-03 2008-04-17 Matsushita Electric Ind Co Ltd Communication control equipment and integrated circuit
JP2008120262A (en) * 2006-11-13 2008-05-29 Mitsubishi Electric Corp On-vehicle calling device
JP2014170154A (en) * 2013-03-05 2014-09-18 Panasonic Corp In-vehicle conversation support device
JP2017094928A (en) * 2015-11-24 2017-06-01 アルパイン株式会社 Voice output device and voice output control method
JP2018036871A (en) * 2016-08-31 2018-03-08 沖電気工業株式会社 Information processing server, information processing system, terminal device, and program

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003121162A (en) * 2001-10-15 2003-04-23 Alpine Electronics Inc Communication apparatus among many parties
JP2008092322A (en) * 2006-10-03 2008-04-17 Matsushita Electric Ind Co Ltd Communication control equipment and integrated circuit
JP2008120262A (en) * 2006-11-13 2008-05-29 Mitsubishi Electric Corp On-vehicle calling device
JP2014170154A (en) * 2013-03-05 2014-09-18 Panasonic Corp In-vehicle conversation support device
JP2017094928A (en) * 2015-11-24 2017-06-01 アルパイン株式会社 Voice output device and voice output control method
JP2018036871A (en) * 2016-08-31 2018-03-08 沖電気工業株式会社 Information processing server, information processing system, terminal device, and program

Similar Documents

Publication Publication Date Title
US10264375B2 (en) Vehicle sound processing system
EP1850640B1 (en) Vehicle communication system
CN108141663B (en) Sound collecting device and control method of sound collecting device
JP6284331B2 (en) Conversation support device, conversation support method, and conversation support program
US9769568B2 (en) System and method for speech reinforcement
US20160127827A1 (en) Systems and methods for selecting audio filtering schemes
JP2017083600A (en) On-vehicle sound pickup device and sound pickup method
JP7049803B2 (en) In-vehicle device and audio output method
JP2017193207A (en) In-cabin conversation support device
US11061236B2 (en) Head-mounted display and control method thereof
JP2014170154A (en) In-vehicle conversation support device
JP5295115B2 (en) Hearing aid driving method and hearing aid
JP2016063439A (en) In-cabin conversation apparatus
JP2010023639A (en) In-cabin conversation assisting device
JP2004354930A (en) Speech recognition system
AU2007306366B2 (en) Method for operating a hearing aid, and hearing aid
JP2005161873A (en) In-cabin sound field control system
JP2020080510A (en) Communication system
JP7065964B2 (en) Sound field control device and sound field control method
JP2020134566A (en) Voice processing system, voice processing device and voice processing method
JP2018076035A (en) Conversation support device for vehicle
CN110010138B (en) Head-mounted display and control method thereof
JP7163876B2 (en) In-vehicle conversation support device
JP6775897B2 (en) In-car conversation support device
US20240121555A1 (en) Zoned Audio Duck For In Car Conversation

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210908

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20220812

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220830

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20230228