JP2021043852A - Information processing apparatus and method - Google Patents

Information processing apparatus and method Download PDF

Info

Publication number
JP2021043852A
JP2021043852A JP2019167061A JP2019167061A JP2021043852A JP 2021043852 A JP2021043852 A JP 2021043852A JP 2019167061 A JP2019167061 A JP 2019167061A JP 2019167061 A JP2019167061 A JP 2019167061A JP 2021043852 A JP2021043852 A JP 2021043852A
Authority
JP
Japan
Prior art keywords
occupant
output
communication information
agent
output frequency
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2019167061A
Other languages
Japanese (ja)
Other versions
JP7263187B2 (en
Inventor
草柳 佳紀
Yoshinori Kusayanagi
佳紀 草柳
拓良 柳
Hiroyoshi Yanagi
柳  拓良
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Renault SAS
Nissan Motor Co Ltd
Original Assignee
Renault SAS
Nissan Motor Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Renault SAS, Nissan Motor Co Ltd filed Critical Renault SAS
Priority to JP2019167061A priority Critical patent/JP7263187B2/en
Publication of JP2021043852A publication Critical patent/JP2021043852A/en
Application granted granted Critical
Publication of JP7263187B2 publication Critical patent/JP7263187B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

To provide an information processing apparatus and a method for communicating with a user at a proper frequency.SOLUTION: An information processing apparatus 1 which communicates with a user using an agent function includes: an output unit 11 which outputs communication information by the agent function; an output frequency control unit 12 which controls the frequency of outputting the communication information by the agent function; and a detection unit 13 which detects a predetermined state of the user after the agent function outputs the communication information. The output frequency control unit 12 controls the frequency of outputting the communication information by the agent function, in accordance with the predetermined state of the user detected by the detection unit 13.SELECTED DRAWING: Figure 1

Description

本発明は、情報処理装置及び方法に関するものである。 The present invention relates to an information processing device and a method.

従来のナビゲーション装置において、自車両が右左折などの案内点に近づくと、音声案内を出力して案内点を報知することが行われている。特許文献1には、たとえば、案内点の700m手前では「ポン」、400m手前では「ポンポン」、案内点では「ポーン」と出力するなど、案内点までの距離に応じて効果音の回数を変え、運転手に分かり易くする報知制御装置が開示されている。 In a conventional navigation device, when the own vehicle approaches a guide point such as turning left or right, voice guidance is output to notify the guide point. In Patent Document 1, for example, "pon" is output 700 m before the guide point, "ponpon" is output 400 m before the guide point, and "pawn" is output at the guide point, and the number of sound effects is changed according to the distance to the guide point. , A notification control device that makes it easy for the driver to understand is disclosed.

特開2005−315630号公報Japanese Unexamined Patent Publication No. 2005-315630

しかしながら、いわゆるエージェント機能として、ユーザに対して、経路や周辺スポット等の各種情報の案内や通知を行う場合、上記従来技術では、ユーザに案内点を画一的な方法で報知するのみであり、ユーザによっては、しつこい、くどい、煩わしいと感じることもある。 However, as a so-called agent function, when guiding or notifying the user of various information such as a route or a surrounding spot, the above-mentioned conventional technique only notifies the user of the guide point by a uniform method. Some users may find it persistent, annoying, and annoying.

本発明が解決しようとする課題は、ユーザに対して適切な頻度でコミュニケーションを行う情報処理装置及び方法を提供することである。 An object to be solved by the present invention is to provide an information processing device and a method for communicating with a user at an appropriate frequency.

本発明は、ユーザとのコミュニケーションを、エージェント機能を用いて行う情報処理装置において、エージェント機能によるコミュニケーション情報が出力された後の、前記ユーザの所定の状態に応じて、前記エージェント機能によるコミュニケーション情報の出力頻度を制御することによって上記課題を解決する。 According to the present invention, in an information processing device that communicates with a user by using the agent function, the communication information by the agent function can be obtained according to a predetermined state of the user after the communication information by the agent function is output. The above problem is solved by controlling the output frequency.

本発明によれば、エージェント機能によるコミュニケーション情報に対するユーザの状態をその後の出力頻度にフィードバックするので、ユーザに対して適切な頻度でコミュニケーションを行うことができる。さらには、ユーザがエージェントに好印象や親近感を抱き易くなるという効果を奏する。 According to the present invention, since the state of the user with respect to the communication information by the agent function is fed back to the subsequent output frequency, it is possible to communicate with the user at an appropriate frequency. Further, it has an effect that the user can easily have a good impression and a feeling of familiarity with the agent.

本発明に係る車両用情報処理装置の実施形態を示すブロック図である。It is a block diagram which shows the embodiment of the information processing apparatus for vehicles which concerns on this invention. 図1のエージェントの動作を示す正面図である。It is a front view which shows the operation of the agent of FIG. 図1のエージェントの設置場所の一例を示す車室内の図である。It is a figure of the vehicle interior which shows an example of the installation place of the agent of FIG. 図1の車両用情報処理装置にて実行される情報処理手順を示すフローチャート(その1)である。It is a flowchart (No. 1) which shows the information processing procedure executed by the information processing apparatus for vehicles of FIG. 図1の車両用情報処理装置にて実行される情報処理手順を示すフローチャート(その2)である。It is a flowchart (No. 2) which shows the information processing procedure executed by the information processing apparatus for vehicles of FIG. 図1の車両用情報処理装置にて実行される情報処理手順を示すフローチャート(その3)である。It is a flowchart (3) which shows the information processing procedure executed by the information processing apparatus for vehicles of FIG. 図1の車両用情報処理装置にて実行される他の情報処理手順を示すフローチャート(その1)である。It is a flowchart (the 1) which shows the other information processing procedure executed by the information processing apparatus for vehicles of FIG. 図1の車両用情報処理装置にて実行される他の情報処理手順を示すフローチャート(その2)である。FIG. 2 is a flowchart (No. 2) showing another information processing procedure executed by the vehicle information processing apparatus of FIG. 図1の車両用情報処理装置にて実行される他の情報処理手順を示すフローチャート(その3)である。FIG. 3 is a flowchart (No. 3) showing another information processing procedure executed by the vehicle information processing apparatus of FIG.

以下、本発明の実施形態を図面に基づいて説明する。図1は、本発明に係る車両用情報処理装置1の実施形態を示すブロック図、図2Aは、エージェント6の動作を示す正面図、図2Bは、エージェント6の設置場所の一例を示す車室内の図である。本実施形態の車両用情報処理装置1は、運転者及び同乗者(以下、これら運転者及び同乗者を車両の乗員又は単に乗員とも称する。)に対し、擬人化されたエージェント(以下、単にエージェント6ともいう。)によるエージェント機能、具体的にはエージェント6の動作・姿勢,エージェント6から出力される音声,エージェント6に表示される画像,エージェント6から出力される発光パターンといった媒体を介して、情報を提供し、又は乗員との間で会話する装置である。なお、ここではエージェント6が車両に備えられる例を示すが、これに限られない。エージェント6は、エージェント機能を搭載した電子機器であればよく、例えば、持ち運び可能なスピーカ型電子機器やディスプレイ付電子機器であってもよい。また、以下に説明するエージェント6の音声出力及び映像出力に関する機能をスマートフォン等の携帯電話に搭載してもよい。また、擬人化されたエージェントは一例であり、人間を模さずとも、所定のキャラクター、アバターやアイコンを表示させたエージェントであってもよい。エージェントは、物理的な個体として設けられてもよく、あるいは、エージェントとしての人間やキャラクター等の形を画像としてディスプレイ上に表示させてもよい。 Hereinafter, embodiments of the present invention will be described with reference to the drawings. FIG. 1 is a block diagram showing an embodiment of the vehicle information processing apparatus 1 according to the present invention, FIG. 2A is a front view showing the operation of the agent 6, and FIG. 2B is a vehicle interior showing an example of an installation location of the agent 6. It is a figure of. The vehicle information processing device 1 of the present embodiment is an agent (hereinafter, simply an agent) that is anthropomorphic to a driver and a passenger (hereinafter, these drivers and the passenger are also referred to as a vehicle occupant or simply an occupant). 6), specifically, the operation / posture of the agent 6, the sound output from the agent 6, the image displayed on the agent 6, and the light emission pattern output from the agent 6. A device that provides information or communicates with an occupant. Here, an example in which the agent 6 is provided in the vehicle is shown, but the present invention is not limited to this. The agent 6 may be an electronic device equipped with an agent function, and may be, for example, a portable speaker-type electronic device or an electronic device with a display. Further, the functions related to the audio output and the video output of the agent 6 described below may be installed in a mobile phone such as a smartphone. Further, the anthropomorphic agent is an example, and may be an agent displaying a predetermined character, avatar, or icon without imitating a human being. The agent may be provided as a physical individual, or the shape of a human being, a character, or the like as an agent may be displayed as an image on a display.

エージェント6は、図1,図2A及び図2Bに示すように、人間の顔を模した頭部61が、基台62に対して、図示しないアクチュエータにより出没可能に設けられている。エージェント6は、出力部11からの制御指令を受けたエージェント機能により、コミュニケーション情報を出力する場合には、図2Aの左図に示すように、頭部61が基台62から出現し、コミュニケーション情報の出力を終了すると、図2Aの右図に示すように、頭部61が基台62に没入する。頭部61を上昇させて基台62から出現させることを「登場」と称し、頭部61を下降させて基第62に没入させることを「退場」とも称する。 As shown in FIGS. 1, 2A and 2B, the agent 6 is provided with a head 61 that imitates a human face so as to appear and disappear with respect to the base 62 by an actuator (not shown). When the agent 6 outputs the communication information by the agent function receiving the control command from the output unit 11, the head 61 appears from the base 62 as shown in the left figure of FIG. 2A, and the communication information is output. When the output of is finished, the head 61 is immersed in the base 62 as shown in the right figure of FIG. 2A. Raising the head 61 to make it appear from the base 62 is called "appearance", and lowering the head 61 to immerse it in the base 62 is also called "exit".

本実施形態では、図2Bに示すように、三次元物体であるエージェント6を、車室内のダッシュボードの上面に設置され、回転軸Gの周りに頭部61が回転可能とされている。これにより、エージェント6は、頭部61の顔を乗員に向けた状態でコミュニケーション情報を出力したり、頭部61の顔を話題の対象となるオブジェクトに向けた状態でコミュニケーション情報を出力したりすることで、コミュニケーション情報による意思疎通を円滑にする。 In the present embodiment, as shown in FIG. 2B, the agent 6 which is a three-dimensional object is installed on the upper surface of the dashboard in the vehicle interior, and the head 61 can rotate around the rotation axis G. As a result, the agent 6 outputs the communication information with the face of the head 61 facing the occupant, or outputs the communication information with the face of the head 61 facing the object to be talked about. This facilitates communication through communication information.

エージェント6は、音声や効果音を出力するためのスピーカその他の音声出力部や、文字を含む画像を表示するディスプレイその他の表示部を含み、頭部61の動作とともに、音声、効果音、文字その他の画像を乗員に提供することでコミュニケーション情報を出力する。なお、顔の目などに発光体を設け、発光パターンによりコミュニケーション情報を出力するようにしてもよい。 The agent 6 includes a speaker and other sound output units for outputting voice and sound effects, and a display and other display units for displaying images including characters, and the agent 6 includes voice, sound effects, characters, and the like along with the operation of the head 61. Communication information is output by providing the image of. It should be noted that a light emitting body may be provided on the eyes of the face or the like, and communication information may be output according to the light emitting pattern.

なお、本実施形態では、エージェント6をロボットのような三次元物体に構成したが、本発明のエージェントはこれにのみ限定されず、ディスプレイに表示する二次元画像としてもよい。また、基第62に対して頭部61を出没させることでエージェント6の登場及び退場を表現したが、エージェントが登場する場合は目を開き、エージェントが退場する場合は目を閉じるようにしてもよい。 In the present embodiment, the agent 6 is configured as a three-dimensional object such as a robot, but the agent of the present invention is not limited to this, and may be a two-dimensional image to be displayed on a display. In addition, although the appearance and exit of the agent 6 was expressed by infesting the head 61 with respect to the base 62, the eyes were opened when the agent appeared, and the eyes were closed when the agent left. Good.

図1に戻り、本実施形態の車両用情報処理装置1は、各種処理を実行するためのプログラムが格納されたROMと、このROMに格納されたプログラムを実行することで、車両用情報処理装置1として機能する動作回路としてのCPUと、アクセス可能な記憶装置として機能するRAMとを備えたコンピュータで構成されている。そして、車両用情報処理装置1は、情報処理プログラムの実行により発揮される機能構成から見ると、図1に示すように、出力部11と、出力頻度制御部12と、検知部13と、利用実績検知部14と、識別データ入力部15と、車両情報取得部16と、を備える。 Returning to FIG. 1, the vehicle information processing device 1 of the present embodiment is a vehicle information processing device by executing a ROM in which a program for executing various processes is stored and a program stored in the ROM. It is composed of a computer including a CPU as an operating circuit that functions as 1 and a RAM that functions as an accessible storage device. The vehicle information processing device 1 is used by the output unit 11, the output frequency control unit 12, the detection unit 13, and the like, as shown in FIG. 1, when viewed from the functional configuration exhibited by the execution of the information processing program. It includes a performance detection unit 14, an identification data input unit 15, and a vehicle information acquisition unit 16.

出力部11は、エージェント6のスピーカその他の音声出力部、ディスプレイ、発光体その他の表示部に制御信号を出力し、エージェント6のエージェント機能により、コミュニケーション情報を出力する。出力部11は、出力すべきコミュニケーション情報を車両情報取得部16から入力する。たとえば、車室内の温度環境に関し、現在のエアコンの設定温度が25℃で、その乗員が定常的に設定するエアコンの設定温度が20℃である場合に、「エアコンの設定温度を下げますか?」といった提案を乗員に発話する。この場合、現在のエアコンの設定温度は、車両センサ類2に含まれるエアコンの設定温度センサにより検出し、その乗員が定常的に設定するエアコンの設定温度は、その乗員の利用実績が蓄積された外部サーバ4から抽出する。 The output unit 11 outputs a control signal to the speaker and other voice output units of the agent 6, a display, a light emitter, and other display units, and outputs communication information by the agent function of the agent 6. The output unit 11 inputs the communication information to be output from the vehicle information acquisition unit 16. For example, regarding the temperature environment inside the vehicle, if the current set temperature of the air conditioner is 25 ° C and the set temperature of the air conditioner that the occupant constantly sets is 20 ° C, "Do you want to lower the set temperature of the air conditioner?" ”Speak to the crew. In this case, the current set temperature of the air conditioner is detected by the set temperature sensor of the air conditioner included in the vehicle sensors 2, and the set temperature of the air conditioner constantly set by the occupant is accumulated in the usage record of the occupant. Extract from the external server 4.

出力部11により制御されるエージェント6は、音声、画像又は発光パターンのいずれかを媒体とするコミュニケーション情報を出力する。コミュニケーション情報は、例えば、(1)エージェントの存在を示す情報、(2)エージェント機能が所定状態にあることを知らせる情報、または、(3)ユーザが所望する情報を通知するための情報を含む。例えば、(1)エージェントの存在を示す情報は、エージェント自体が表現された画像や所定の動きを伴うエージェントが表現された画像などを含む。例えば、(2)エージェント機能が所定状態にあることを知らせる情報は、エージェントがユーザからの命令または質問を受付可能な状態にあることを示す画像、音声または発光パターンである。例えば、(3)ユーザが所望する情報を通知するための情報は、ユーザが所望すると推測されるPOIの情報や、ユーザが所望すると推測される車載機器に対する制御の実行可否を問合わせる情報などを含む。具体的には、コミュニケーション情報が音声を媒体とする場合には、当該コミュニケーション情報を、エージェント6に設けられたスピーカその他の音声出力部から聴覚的に出力し、コミュニケーション情報が画像を媒体とする場合には、当該コミュニケーション情報を、エージェント6に設けられたディスプレイその他の表示部から視覚的に出力し、コミュニケーション情報が発光パターンを媒体とする場合には、当該コミュニケーション情報を、エージェント6に設けられた目その他の発光部から視覚的に出力する。 The agent 6 controlled by the output unit 11 outputs communication information using any of voice, image, and light emission pattern as a medium. The communication information includes, for example, (1) information indicating the existence of an agent, (2) information notifying that the agent function is in a predetermined state, or (3) information for notifying information desired by the user. For example, (1) the information indicating the existence of the agent includes an image in which the agent itself is represented, an image in which the agent with a predetermined movement is represented, and the like. For example, (2) the information notifying that the agent function is in a predetermined state is an image, sound, or light emitting pattern indicating that the agent is in a state where it can accept a command or a question from a user. For example, (3) the information for notifying the information desired by the user includes information on POI presumed to be desired by the user, information inquiring whether or not control can be executed on the in-vehicle device presumed to be desired by the user, and the like. Including. Specifically, when the communication information uses voice as a medium, the communication information is audibly output from a speaker or other voice output unit provided in the agent 6, and the communication information uses an image as a medium. The communication information is visually output from a display or other display unit provided on the agent 6, and when the communication information uses a light emitting pattern as a medium, the communication information is provided on the agent 6. Visually output from the eyes and other light emitting parts.

出力頻度制御部12は、エージェント6のエージェント機能によるコミュニケーション情報の出力頻度を制御する。出力頻度とは、所定時間あたりにコミュニケーション情報を出力する回数であってもよく、コミュニケーション単位あたりにコミュニケーション情報を出力する回数であってもよい。たとえば、コミュニケーション情報が、ユーザが所望すると推測される車載機器に対する制御の実行可否を問合わせる情報の場合に、出力頻度が1のときは、「エアコンの設定温度を下げますか?」というコミュニケーション情報を1回だけ出力し、出力頻度が3のときは、この「エアコンの設定温度を下げますか?」というコミュニケーション情報を、間隔をおいて3回繰り返して出力することを意味する。本実施形態のエージェント6は、コミュニケーション情報を出力する際に基台62から頭部61を出現させ、コミュニケーション情報の出力を終了すると基第62に頭部61を没入させるので、出力頻度制御部12は、基台62に対する頭部61の出没回数を制御する。 The output frequency control unit 12 controls the output frequency of communication information by the agent function of the agent 6. The output frequency may be the number of times the communication information is output per predetermined time, or may be the number of times the communication information is output per communication unit. For example, when the communication information is information that inquires whether or not control can be executed for an in-vehicle device that is presumed to be desired by the user, and the output frequency is 1, the communication information "Do you want to lower the set temperature of the air conditioner?" Is output only once, and when the output frequency is 3, it means that this communication information "Do you want to lower the set temperature of the air conditioner?" Is output repeatedly three times at intervals. The agent 6 of the present embodiment causes the head 61 to appear from the base 62 when outputting the communication information, and immerses the head 61 in the base 62 when the output of the communication information is completed. Therefore, the output frequency control unit 12 Controls the number of appearances of the head 61 with respect to the base 62.

コミュニケーション情報の出力頻度は、乗員に対するコミュニケーション情報の伝達を確実に行うという観点からみると繰り返し行うことが望ましいが、乗員の個性によっては、繰り返し行われること、すなわち出力頻度が大きいことが却って煩わしく感じることもある。そのため、本実施形態の出力頻度制御部12においては、後述する検知部13により検知された乗員の所定の状態に応じて、エージェント6によるコミュニケーション情報の出力頻度を制御する。この制御の詳細は後述する。 It is desirable to repeat the output frequency of communication information from the viewpoint of reliably transmitting communication information to the occupants, but depending on the individuality of the occupants, it is rather annoying that the output frequency is high. Sometimes. Therefore, the output frequency control unit 12 of the present embodiment controls the output frequency of communication information by the agent 6 according to a predetermined state of the occupant detected by the detection unit 13 described later. The details of this control will be described later.

検知部13は、エージェント6のエージェント機能により、1つのコミュニケーション情報が出力された後の、乗員の所定の状態を検知し、これを出力頻度制御部12に出力する。たとえば、コミュニケーション情報がディスプレイなどの表示部に表示される視覚的な画像による場合、検知部13は、コミュニケーション情報が表示された表示部に対して、乗員の視線が向けられた状態を検知する。具体的には、検知部13は、コミュニケーション情報が表示された表示部に対して、乗員の視線が向けられるまでの時間を検知する。またはこれに代えて若しくはこれに加えて、検知部13は、コミュニケーション情報が表示された表示部に対して、視線が向けられた回数を検知する。 The detection unit 13 detects a predetermined state of the occupant after one communication information is output by the agent function of the agent 6, and outputs this to the output frequency control unit 12. For example, when the communication information is based on a visual image displayed on a display unit such as a display, the detection unit 13 detects a state in which the occupant's line of sight is directed to the display unit on which the communication information is displayed. Specifically, the detection unit 13 detects the time until the occupant's line of sight is directed to the display unit on which the communication information is displayed. Alternatively or in addition to this, the detection unit 13 detects the number of times the line of sight is directed to the display unit on which the communication information is displayed.

たとえば、エージェント6の頭部61が基台62から出現し、図示しないディスプレイに「エアコンの設定温度を下げますか?」といったコミュニケーション情報を表示した場合に、車両センサ類2に含まれる車内カメラにより乗員の視線を監視し、エージェント6の頭部61が基台62から出現してから乗員の視線がディスプレイに向かうまでの時間を計測する。または、同様に車両センサ類2に含まれる車内カメラにより乗員の視線を監視し、エージェント6の頭部61が基台62から出現してから乗員の視線がディスプレイに向けられた回数、すなわちチラッと見た回数を計測する。 For example, when the head 61 of the agent 6 appears from the base 62 and displays communication information such as "Do you want to lower the set temperature of the air conditioner?" On a display (not shown), the in-vehicle camera included in the vehicle sensors 2 is used. The line of sight of the occupant is monitored, and the time from the appearance of the head 61 of the agent 6 from the base 62 to the line of sight of the occupant toward the display is measured. Alternatively, similarly, the line of sight of the occupant is monitored by the in-vehicle camera included in the vehicle sensors 2, and the number of times the line of sight of the occupant is directed to the display after the head 61 of the agent 6 appears from the base 62, that is, a glance. Measure the number of times you have seen it.

エージェント6の頭部61が基台62から出現してから乗員の視線がディスプレイに向かうまでの時間が短いということは、その乗員はエージェント6を強く意識していると判断でき、逆にエージェント6の頭部61が基台62から出現してから乗員の視線がディスプレイに向かうまでの時間が長いということは、その乗員はエージェント6をあまり意識していないと判断できる。同様に、エージェント6の頭部61が基台62から出現してから乗員の視線がディスプレイに向けられた回数が多いということは、その乗員はエージェント6を強く意識していると判断でき、逆にエージェント6の頭部61が基台62から出現してから乗員の視線がディスプレイに向けられた回数が少ないということは、その乗員はエージェント6をあまり意識していないと判断できる。 The fact that the time from when the head 61 of the agent 6 appears from the base 62 until the line of sight of the occupant heads toward the display is short, it can be judged that the occupant is strongly aware of the agent 6, and conversely, the agent 6 It can be determined that the occupant is not very conscious of the agent 6 because it takes a long time for the occupant's line of sight to go to the display after the head 61 of the occupant appears from the base 62. Similarly, the fact that the number of times the occupant's line of sight is directed to the display after the head 61 of the agent 6 appears from the base 62 means that the occupant is strongly aware of the agent 6, and vice versa. It can be determined that the occupant is not very conscious of the agent 6 because the number of times the occupant's line of sight is directed to the display after the head 61 of the agent 6 appears from the base 62 is small.

乗員がエージェント6をあまり意識していないと判断できる場合は、その乗員にエージェント6の存在を気付かせる必要がある。このような状況では、出力頻度を大きくしても、乗員にとって、しつこい、煩わしいといった感覚より、むしろ気付かせてくれたことに感謝する方が、可能性が高いと推察される。逆に、乗員がエージェント6を強く意識していると判断できる場合は、その乗員はコミュニケーション情報を十分に知得しているものと推察されるので、出力頻度が大きいと、その乗員にとっては、しつこい、くどい、煩わしいといった感覚を覚える可能性が高い。 If it can be determined that the occupant is not very aware of the agent 6, it is necessary to make the occupant aware of the existence of the agent 6. In such a situation, even if the output frequency is increased, it is more likely that the occupants will be grateful for the awareness rather than the feeling of being persistent or annoying. On the contrary, if it can be determined that the occupant is strongly aware of the agent 6, it is presumed that the occupant is sufficiently aware of the communication information. It is likely that you will feel persistent, annoying, and annoying.

そのため、出力頻度制御部12は、エージェント6の頭部61が基台62から出現してから乗員の視線がディスプレイに向かうまでの時間が短かったり、エージェント6の頭部61が基台62から出現してから乗員の視線がディスプレイに向けられた回数が多かったりして、乗員がエージェント6を強く意識していると判断できる場合は、それまでの出力頻度を相対的に小さく制御する。逆に、エージェント6の頭部61が基台62から出現してから乗員の視線がディスプレイに向かうまでの時間が長かったり、エージェント6の頭部61が基台62から出現してから乗員の視線がディスプレイに向けられた回数が少なかったりして、乗員がエージェント6をあまり意識していないと判断できる場合は、それまでの出力頻度を相対的に大きく制御する。 Therefore, in the output frequency control unit 12, the time from the appearance of the head 61 of the agent 6 from the base 62 to the line of sight of the occupant toward the display is short, or the head 61 of the agent 6 appears from the base 62. After that, if it can be determined that the occupant is strongly aware of the agent 6 because the occupant's line of sight is directed to the display many times, the output frequency up to that point is controlled to be relatively small. On the contrary, it takes a long time from the appearance of the head 61 of the agent 6 from the base 62 to the line of sight of the occupant toward the display, or the line of sight of the occupant after the head 61 of the agent 6 appears from the base 62. If it can be determined that the occupant is not very aware of the agent 6 because the number of times the occupant is directed to the display is small, the output frequency up to that point is controlled relatively large.

検知部13は、エージェント6の頭部61が基台62から出現してコミュニケーション情報がスピーカなどの音声出力部から発せられる聴覚的な音声による場合、乗員による音声コマンドの入力が、コミュニケーション情報が出力されてから所定時間内に行われたか否かを検知する。たとえば、「エアコンの設定温度を下げますか?」というコミュニケーション情報を出力した場合に、この出力から所定時間(たとえば10秒)以内に、乗員が「はい、下げてください」といった音声コマンドが入力された場合には、その乗員はエージェント6を強く意識していると判断できる。これに対して、所定時間(10秒)を過ぎてから、乗員が「はい、下げてください」といった音声コマンドが入力された場合には、その乗員は、エアコンの設定温度を下げることには賛成するものの、エージェント6をあまり意識していなかったと判断できる。 When the head 61 of the agent 6 appears from the base 62 and the communication information is based on an auditory voice emitted from a voice output unit such as a speaker, the detection unit 13 inputs a voice command by the occupant and outputs the communication information. Detects whether or not it was performed within a predetermined time after it was done. For example, when the communication information "Do you want to lower the set temperature of the air conditioner?" Is output, the occupant inputs a voice command such as "Yes, please lower" within a predetermined time (for example, 10 seconds) from this output. In that case, it can be determined that the occupant is strongly aware of the agent 6. On the other hand, if the occupant inputs a voice command such as "Yes, please lower" after the specified time (10 seconds) has passed, the occupant agrees to lower the set temperature of the air conditioner. However, it can be determined that the agent 6 was not so conscious.

そのため、出力頻度制御部12は、エージェント6の頭部61が基台62から出現して音声によるコミュニケーション情報が出力されてから、所定時間以内に、乗員が音声コマンドを入力した場合のように、乗員がエージェント6を強く意識していると判断できるときは、それまでの出力頻度を相対的に小さく制御する。逆に、エージェント6の頭部61が基台62から出現して音声によるコミュニケーション情報が出力されてから、所定時間を経過した後に、乗員が音声コマンドを入力した場合のように、乗員がエージェント6をあまり意識していないと判断できるときは、それまでの出力頻度を相対的に大きく制御する。 Therefore, in the output frequency control unit 12, the occupant inputs a voice command within a predetermined time after the head 61 of the agent 6 appears from the base 62 and the communication information by voice is output. When it can be determined that the occupant is strongly aware of the agent 6, the output frequency up to that point is controlled to be relatively small. On the contrary, the occupant is the agent 6 as in the case where the occupant inputs a voice command after a predetermined time has elapsed after the head 61 of the agent 6 appears from the base 62 and the communication information by voice is output. When it can be judged that the output frequency is not so conscious, the output frequency up to that point is controlled relatively large.

利用実績検知部14は、乗員が当該車両用情報処理装置1を利用した実績を検知するものである。利用実績検知部14で検知されるものとしては、特に限定はされないが、識別データ入力部15に入力された識別データに基づいて乗員を特定し、その乗員が当該車両用情報処理装置1を利用した時間及び/又は頻度に応じた利用実績値を演算する。利用実績検知部14で演算された利用実績値は、出力頻度制御部12へ出力され、利用実績値の大小に応じて、コミュニケーション情報の出力頻度が制御される。具体的には、乗員の利用実績値が小さい場合には、利用実績値が大きい場合に比べて、その乗員の特性が充分に把握できていないことから、コミュニケーション情報の出力頻度を大きく制御する。この詳細は後述する。なお、必要に応じて利用実績検知部14を省略してもよい。 The usage record detection unit 14 detects the record of the occupant using the vehicle information processing device 1. What is detected by the usage record detection unit 14 is not particularly limited, but the occupant is specified based on the identification data input to the identification data input unit 15, and the occupant uses the vehicle information processing device 1. Calculate the actual usage value according to the time and / or frequency. The usage record value calculated by the usage record detection unit 14 is output to the output frequency control unit 12, and the output frequency of communication information is controlled according to the magnitude of the usage record value. Specifically, when the actual usage value of the occupant is small, the characteristics of the occupant cannot be sufficiently grasped as compared with the case where the actual usage value is large, so that the output frequency of the communication information is largely controlled. The details will be described later. The usage record detection unit 14 may be omitted if necessary.

識別データ入力部15は、本例の車両用情報処理装置1が適用される車両の乗員を識別するための識別データを入力するインターフェースである。そして、その乗員が、自分の識別データを記憶した端末装置(スマートフォンなどの携帯型コンピュータ)を携帯してその車両に乗ると、その乗員の識別データが、Bluetooth(登録商標)などの短距離無線通信網を介して自動的又は半自動的に読み取られたり、あるいは識別データ入力部15として設定された入力ボタン(不図示)を用いて乗員がマニュアル入力したりすることで、その乗員の識別データが入力される。また、その車両の無線キーにその乗員の識別データを記憶させ、その無線キーを用いて車両を解錠または始動した際に、その乗員の識別データを識別データ入力部15に、短距離無線通信網を介して自動的又は半自動的に読み取ってもよい。 The identification data input unit 15 is an interface for inputting identification data for identifying the occupant of the vehicle to which the vehicle information processing device 1 of this example is applied. Then, when the occupant carries a terminal device (portable computer such as a smartphone) that stores his / her identification data and gets on the vehicle, the occupant's identification data is transmitted to a short-range radio such as Bluetooth (registered trademark). The occupant's identification data can be automatically or semi-automatically read via the communication network, or manually input by the occupant using the input button (not shown) set as the identification data input unit 15. Entered. Further, the wireless key of the vehicle stores the identification data of the occupant, and when the vehicle is unlocked or started by using the wireless key, the identification data of the occupant is transmitted to the identification data input unit 15 for short-distance wireless communication. It may be read automatically or semi-automatically via a net.

車両センサ類2は、上述したエアコンなどの車載電装品の各種センサや車両の室内を撮像する室内カメラのほか、車両の周辺を撮像する車載撮像装置、車両の周辺の障害物を検出するレーダ装置、GPS受信機を含む自車位置検出装置、車両の操舵角を検出する舵角センサ、車両の加速・減速を検出する加減速センサなどが含まれる。車両センサ類2で検出した検出信号は、車両情報取得部16へ出力される。 The vehicle sensors 2 include various sensors for in-vehicle electrical components such as the above-mentioned air conditioner, an indoor camera that images the interior of the vehicle, an in-vehicle image pickup device that images the surroundings of the vehicle, and a radar device that detects obstacles in the vicinity of the vehicle. , Own vehicle position detection device including GPS receiver, steering angle sensor for detecting the steering angle of the vehicle, acceleration / deceleration sensor for detecting acceleration / deceleration of the vehicle, and the like. The detection signal detected by the vehicle sensors 2 is output to the vehicle information acquisition unit 16.

地図データベース3は、たとえば各種施設や特定の地点の位置情報を含む三次元高精度地図情報を格納し、車両情報取得部16からアクセス可能とされたメモリである。地図データベース3に格納された三次元高精度地図情報は、データ取得用車両を用いて実際の道路を走行した際に検出された道路形状に基づく三次元地図情報であり、地図情報とともに、カーブ路及びそのカーブの大きさ(たとえば曲率又は曲率半径)、道路の合流地点、分岐地点、料金所、車線数の減少位置、サービスエリア/パーキングエリアなどの詳細かつ高精度の位置情報が、三次元情報として関連付けられた地図情報である。 The map database 3 is a memory that stores, for example, three-dimensional high-precision map information including location information of various facilities and specific points, and is accessible from the vehicle information acquisition unit 16. The three-dimensional high-precision map information stored in the map database 3 is three-dimensional map information based on the road shape detected when driving on an actual road using a data acquisition vehicle, and is a curved road together with the map information. And detailed and highly accurate position information such as the size of the curve (for example, curvature or radius of curvature), road confluence, branch point, tollgate, lane reduction position, service area / parking area, etc. are three-dimensional information. The map information associated with.

車両情報取得部16は、エージェント6の機能を用いて乗員に出力すべきコミュニケーション情報を取得するものである。車両情報取得部16は、車両センサ類2及び地図データベース3のほか、外部のWEBサイトその他の外部サーバ4からの各種の情報を、インターネットなどの電気通信回線網5を介して収集し、コミュニケーション情報に供する。 The vehicle information acquisition unit 16 acquires communication information to be output to the occupant by using the function of the agent 6. The vehicle information acquisition unit 16 collects various information from the vehicle sensors 2 and the map database 3, the external WEB site, and other external servers 4 via the telecommunication network 5 such as the Internet, and communicate information. To serve.

次に、本実施形態の車両用情報処理装置1の情報処理手順を説明する。図3A〜図3Cは、図1の車両用情報処理装置1にて実行される情報処理手順を示すフローチャートである。まず、乗員が車両に乗ると、図3AのステップS1において、識別データ入力部15にその乗員の識別データが入力される。識別データ入力部15に入力されたその乗員識別データは、出力頻度制御部12と出力部11に出力される。この識別データとともに、利用実績検知部14から、その乗員の利用実績値を取得し、これを出力頻度制御部12へ出力する。 Next, the information processing procedure of the vehicle information processing device 1 of the present embodiment will be described. 3A to 3C are flowcharts showing an information processing procedure executed by the vehicle information processing device 1 of FIG. First, when the occupant gets on the vehicle, the identification data of the occupant is input to the identification data input unit 15 in step S1 of FIG. 3A. The occupant identification data input to the identification data input unit 15 is output to the output frequency control unit 12 and the output unit 11. Along with this identification data, the usage record value of the occupant is acquired from the usage record detection unit 14, and this is output to the output frequency control unit 12.

ステップS2において、車両センサ類2に含まれる室内カメラを用いて乗員の視線を監視する。ステップS3において、出力部11の制御信号により、エージェント6の頭部61が基台62から出現し、エージェント6が登場する。ステップS4において、出力部11は、車両情報取得部16から提供されるコミュニケーション情報を、エージェント6のディスプレイに表示する。 In step S2, the line of sight of the occupant is monitored by using the indoor camera included in the vehicle sensors 2. In step S3, the head 61 of the agent 6 appears from the base 62 by the control signal of the output unit 11, and the agent 6 appears. In step S4, the output unit 11 displays the communication information provided by the vehicle information acquisition unit 16 on the display of the agent 6.

図3BのステップS5において、出力頻度制御部12は、ステップS2にて監視している乗員の視線の動向を読み込み、ステップS3にてエージェント6が登場してステップS4にてコミュニケーション情報がディスプレイに表示されてから、乗員の視線が当該ディスプレイに向かうまでの時間を計測する。そして、出力頻度制御部12は、この計測した時間が、予め設定された所定時間内(たとえば3秒以内)である場合は、その乗員はエージェント6を強く意識していると判断し、ステップS6へ進む。逆に、ステップS5において、コミュニケーション情報がディスプレイに表示されてから、乗員の視線が当該ディスプレイに向かうまでの時間が、予め設定された所定時間(たとえば3秒)を超えた場合は、出力頻度制御部12は、その乗員はエージェント6をあまり意識していないと判断し、ステップS7へ進む。 In step S5 of FIG. 3B, the output frequency control unit 12 reads the movement of the line of sight of the occupant monitored in step S2, the agent 6 appears in step S3, and the communication information is displayed on the display in step S4. The time from when the occupant's line of sight is directed toward the display is measured. Then, when the measured time is within a preset predetermined time (for example, within 3 seconds), the output frequency control unit 12 determines that the occupant is strongly aware of the agent 6, and steps S6. Proceed to. On the contrary, in step S5, when the time from when the communication information is displayed on the display until the line of sight of the occupant heads toward the display exceeds a preset predetermined time (for example, 3 seconds), the output frequency control The unit 12 determines that the occupant is not very aware of the agent 6, and proceeds to step S7.

ステップS6において、その乗員はエージェント6を強く意識しているので、出力頻度制御部12は、エージェントを認識している状態のカウントをアップする。具体的には、出力頻度制御部12は、出力頻度の値をそれまでの値に対して相対的に小さくする。またステップS7において、その乗員はエージェント6をあまり意識していないので、出力頻度制御部12は、エージェントを認識していない状態のカウントをアップする。具体的には、出力頻度制御部12は、出力頻度の値をそれまでの値に対して相対的に大きくする。 In step S6, since the occupant is strongly aware of the agent 6, the output frequency control unit 12 increases the count of the state in which the agent is recognized. Specifically, the output frequency control unit 12 makes the output frequency value relatively smaller than the previous values. Further, in step S7, since the occupant is not so conscious of the agent 6, the output frequency control unit 12 increases the count in the state where the agent is not recognized. Specifically, the output frequency control unit 12 increases the output frequency value relative to the previous values.

ステップS8において、出力頻度制御部12は、エージェントを認識している状態の確率を演算する。エージェントを認識している状態の確率は、たとえば、エージェントを認識している状態のカウントAを、エージェントを認識している状態のカウントAとエージェントを認識していない状態のカウントBとの合計A+Bで除した率(A/(A+B))と定義する。 In step S8, the output frequency control unit 12 calculates the probability of the state of recognizing the agent. The probability of the state of recognizing the agent is, for example, the total A + B of the count A of the state of recognizing the agent, the count A of the state of recognizing the agent, and the count B of the state of not recognizing the agent. It is defined as the rate divided by (A / (A + B)).

たとえば、エージェントを認識している状態のカウントAの初期値を50、エージェントを認識していない状態のカウントBの初期値を50とすると、初期値におけるエージェントを認識している状態の確率Xは、X=50/(50+50)=0.5となる。そして、次のコミュニケーション情報の出力に対する乗員の反応が、エージェントを認識している状態であった場合に、初期値50を1ポイントカウントアップするものとすると、そのときのエージェントを認識している状態の確率X1は、X1=51/(51+50)=0.505となる。 For example, if the initial value of the count A in the state of recognizing the agent is 50 and the initial value of the count B in the state of not recognizing the agent is 50, the probability X of the state of recognizing the agent in the initial value is , X = 50 / (50 + 50) = 0.5. Then, when the reaction of the occupant to the output of the next communication information is in the state of recognizing the agent, assuming that the initial value 50 is counted up by 1 point, the state of recognizing the agent at that time. The probability X1 of is X1 = 51 / (51 + 50) = 0.505.

ステップS9において、出力頻度制御部12は、演算したエージェントを認識している状態の確率が、予め設定された所定値以上であるか否かを判定し、所定値以上である場合はステップS10へ進み、所定値未満である場合はステップS11へ進む。そして、ステップS10において、出力頻度制御部12は、コミュニケーション情報の出力頻度をそれまでの値に比べて相対的に小さくする。また、ステップS11において、出力頻度制御部12は、コミュニケーション情報の出力頻度をそれまでの値に比べて相対的に大きくする。 In step S9, the output frequency control unit 12 determines whether or not the probability of the state of recognizing the calculated agent is equal to or greater than a preset predetermined value, and if it is equal to or greater than the predetermined value, the process proceeds to step S10. If the value is less than the predetermined value, the process proceeds to step S11. Then, in step S10, the output frequency control unit 12 makes the output frequency of the communication information relatively smaller than the previous values. Further, in step S11, the output frequency control unit 12 increases the output frequency of the communication information relatively higher than the values up to that point.

図3CのステップS12において、出力頻度制御部12は、利用実績検知部14により検知されたその乗員の利用実績値が、予め設定された所定値以上であるか否かを判定し、所定値以上である場合はステップS13へ進み、所定値未満である場合はステップS14へ進む。そして、ステップS13において、出力頻度制御部12は、コミュニケーション情報の出力頻度をそれまでの値に比べて相対的に小さくする。また、ステップS14において、出力頻度制御部12は、コミュニケーション情報の出力頻度をそれまでの値に比べて相対的に大きくする。 In step S12 of FIG. 3C, the output frequency control unit 12 determines whether or not the usage record value of the occupant detected by the usage record detection unit 14 is equal to or higher than a preset predetermined value, and is equal to or higher than the predetermined value. If it is, the process proceeds to step S13, and if it is less than the predetermined value, the process proceeds to step S14. Then, in step S13, the output frequency control unit 12 makes the output frequency of the communication information relatively smaller than the previous values. Further, in step S14, the output frequency control unit 12 increases the output frequency of the communication information relatively higher than the values up to that point.

ステップS15において、出力部11は、エージェント6の頭部61を基台62に没入して退場させる。ステップS16において、エージェント6を用いたコミュニケーションの設定がOFFになったか否かを判定し、ONが継続している場合には図3AのステップS2へ戻り、OFFになった場合には、このルーチンを終了する。 In step S15, the output unit 11 immerses the head 61 of the agent 6 in the base 62 and leaves the base 62. In step S16, it is determined whether or not the setting of communication using the agent 6 has been turned off, and if it continues to be turned on, the process returns to step S2 in FIG. 3A, and if it is turned off, this routine is performed. To finish.

次に、本実施形態の車両用情報処理装置1の情報処理手順の他例を説明する。図4A〜図4Cは、図1の車両用情報処理装置1にて実行される情報処理手順を示すフローチャートである。本例は、エアコンの設定温度を変更する提案に関するコミュニケーション情報を出力する具体例を説明する。まず、乗員が車両に乗ると、図4AのステップS21において、識別データ入力部15にその乗員の識別データが入力される。識別データ入力部15に入力されたその乗員識別データは、出力頻度制御部12と出力部11に出力される。この識別データとともに、車両情報取得部16は、その乗員が以前に車両に乗った際のエアコンの設定温度の履歴情報を、外部サーバ4から取得し、これを出力頻度制御部12へ出力する。 Next, another example of the information processing procedure of the vehicle information processing device 1 of the present embodiment will be described. 4A to 4C are flowcharts showing an information processing procedure executed by the vehicle information processing device 1 of FIG. This example describes a specific example of outputting communication information regarding a proposal for changing the set temperature of an air conditioner. First, when the occupant gets on the vehicle, the identification data of the occupant is input to the identification data input unit 15 in step S21 of FIG. 4A. The occupant identification data input to the identification data input unit 15 is output to the output frequency control unit 12 and the output unit 11. Along with this identification data, the vehicle information acquisition unit 16 acquires the history information of the set temperature of the air conditioner when the occupant previously got on the vehicle from the external server 4 and outputs this to the output frequency control unit 12.

ステップS22において、車両センサ類2に含まれるエアコンの設定温度センサから、現在のエアコンの設定温度を検出する。ステップS23において、出力頻度制御部12は、現在の設定温度と、その乗員が定常的に設定する固有の設定温度とを比較し、予め設定された所定値以上の差が存在する場合はステップS24へ進み、所定値以上の差が存在しない場合は、このルーチンを終了する。ステップS24において、出力頻度制御部12は、乗員が、所定時間以内に、エアコンの設定温度を変更したか否かを判定し、変更した場合にはステップS25へ進み、変更しない場合は、このルーチンを終了する。 In step S22, the current set temperature of the air conditioner is detected from the set temperature sensor of the air conditioner included in the vehicle sensors 2. In step S23, the output frequency control unit 12 compares the current set temperature with the unique set temperature constantly set by the occupant, and if there is a difference of a predetermined value or more set in advance, step S24. If there is no difference greater than or equal to the specified value, the routine ends. In step S24, the output frequency control unit 12 determines whether or not the occupant has changed the set temperature of the air conditioner within a predetermined time, proceeds to step S25 if the temperature is changed, and if not, this routine. To finish.

ステップS25において、車両センサ類2に含まれるマイクロフォンと音声認識装置を用いて乗員の発話を監視する。図4BのステップS26において、出力部11の制御信号により、エージェント6の頭部61が基台62から出現し、エージェント6が登場する。ステップS27において、出力部11は、車両情報取得部16から提供される、エアコンの設定温度に関するコミュニケーション情報、たとえば「エアコンの設定温度を下げますか?」といった音声を、エージェント6のスピーカから出力する。 In step S25, the utterance of the occupant is monitored by using the microphone and the voice recognition device included in the vehicle sensors 2. In step S26 of FIG. 4B, the head 61 of the agent 6 appears from the base 62 and the agent 6 appears by the control signal of the output unit 11. In step S27, the output unit 11 outputs communication information regarding the set temperature of the air conditioner provided by the vehicle information acquisition unit 16, for example, a voice such as "Do you want to lower the set temperature of the air conditioner?" From the speaker of the agent 6. ..

ステップS28において、出力頻度制御部12は、ステップS25にて監視している乗員の発話を解析し、「はい、下げてください」といった乗員の承諾コマンドが入力されるか否かを判断する。これとともに、乗員の承諾コマンドが入力された場合には、「エアコンの設定温度を下げますか?」というコミュニケーション情報がスピーカから出力されてから、承諾コマンドが入力されるまでの時間を計測する。そして、ステップS28において、出力頻度制御部12は、予め設定された所定時間以内に乗員の承諾コマンドが入力されたか否かを判定し、入力された場合にはステップS29へ進み、入力されない場合はステップS32へ進む。 In step S28, the output frequency control unit 12 analyzes the utterance of the occupant monitored in step S25, and determines whether or not the occupant's consent command such as "Yes, please lower" is input. At the same time, when the occupant's consent command is input, the time from when the communication information "Do you want to lower the set temperature of the air conditioner?" Is output from the speaker until the consent command is input is measured. Then, in step S28, the output frequency control unit 12 determines whether or not the occupant's consent command has been input within a predetermined time set in advance, and if it is input, proceeds to step S29, and if it is not input, proceeds to step S29. The process proceeds to step S32.

ステップS29において、出力頻度制御部12は、エアコンの設定温度を下げる設定を行い、ステップS30において、コミュニケーション情報の出力頻度を相対的に小さくする。ステップS31において、出力部11は、エージェント6を退場させる。ステップS32において、出力頻度制御部12は、予め設定された所定時間を超えた後に、乗員の承諾コマンドが入力されたか否かを判定し、入力された場合にはステップS33へ進み、入力されない場合は、このルーチンを終了する。ステップS33において、出力頻度制御部12は、コミュニケーション情報の出力頻度を相対的に大きくする。 In step S29, the output frequency control unit 12 sets to lower the set temperature of the air conditioner, and in step S30, the output frequency of the communication information is relatively reduced. In step S31, the output unit 11 leaves the agent 6. In step S32, the output frequency control unit 12 determines whether or not the occupant's consent command has been input after the preset predetermined time has been exceeded, and if it is input, proceeds to step S33, and if it is not input. Ends this routine. In step S33, the output frequency control unit 12 relatively increases the output frequency of the communication information.

ステップS34において、エージェント6を用いたコミュニケーションの設定がOFFになったか否かを判定し、ONが継続している場合には図4AのステップS22へ戻り、OFFになった場合には、このルーチンを終了する。 In step S34, it is determined whether or not the setting of communication using the agent 6 is turned off, and if it continues to be turned on, the process returns to step S22 in FIG. 4A, and if it is turned off, this routine is performed. To finish.

以上のように、本実施形態の車両用情報処理装置1及び方法によれば、検知部13により検知された乗員の所定の状態に応じて、エージェント6によるコミュニケーション情報の出力頻度を制御するので、しつこさと丁寧さとがバランスされた出力頻度となる結果、乗員がエージェントに好印象や親近感を抱き易くなる。 As described above, according to the vehicle information processing device 1 and the method of the present embodiment, the frequency of output of communication information by the agent 6 is controlled according to a predetermined state of the occupant detected by the detection unit 13. As a result of the output frequency that balances persistence and politeness, it becomes easier for the occupants to have a good impression and familiarity with the agent.

また、本実施形態の車両用情報処理装置1及び方法によれば、エージェント6によるコミュニケーション情報を表示部から視覚的に出力する場合に、検知部13は、表示部に対して乗員の視線が向けられた状態を検知するので、乗員の所定の状態を検出し易くなる。 Further, according to the vehicle information processing device 1 and the method of the present embodiment, when the communication information by the agent 6 is visually output from the display unit, the detection unit 13 directs the line of sight of the occupant to the display unit. Since the detected state is detected, it becomes easy to detect a predetermined state of the occupant.

また、本実施形態の車両用情報処理装置1及び方法によれば、検知部13は、表示部に対して乗員の視線が向けられるまでの時間及び/又は視線が向けられた回数を検知するので、乗員の所定の状態を検出し易くなることに加え、定量的評価が可能となる。 Further, according to the vehicle information processing device 1 and the method of the present embodiment, the detection unit 13 detects the time until the occupant's line of sight is directed to the display unit and / or the number of times the line of sight is directed. In addition to facilitating the detection of a predetermined state of the occupant, quantitative evaluation becomes possible.

また、本実施形態の車両用情報処理装置1及び方法によれば、表示部に対して乗員の視線が向けられるまでの時間が短い場合に、表示部に対して乗員の視線が向けられるまでの時間が長い場合に比べて、出力頻度を小さく制御し、表示部に対して乗員の視線が向けられた回数が多い場合に、表示部に対して乗員の視線が向けられた回数が少ない場合に比べて、出力頻度を小さく制御する。これにより、乗員のエージェントの認識程度に応じた出力頻度に設定することができる。 Further, according to the vehicle information processing device 1 and the method of the present embodiment, when the time until the occupant's line of sight is directed to the display unit is short, the occupant's line of sight is directed to the display unit. When the output frequency is controlled to be smaller than when the time is long, when the number of times the occupant's line of sight is directed to the display unit is large, and when the number of times the occupant's line of sight is directed to the display unit is small. In comparison, the output frequency is controlled to be small. As a result, the output frequency can be set according to the degree of recognition of the occupant's agent.

また、本実施形態の車両用情報処理装置1及び方法によれば、検知部13は、乗員による音声コマンドの入力が所定時間内に行われたか否かを検知するので、乗員の所定の状態を検出し易くなる。 Further, according to the vehicle information processing device 1 and the method of the present embodiment, the detection unit 13 detects whether or not the input of the voice command by the occupant is performed within the predetermined time, so that the predetermined state of the occupant is determined. It becomes easier to detect.

また、本実施形態の車両用情報処理装置1及び方法によれば、乗員による音声コマンドの入力が所定時間内に行われた場合に、乗員による音声コマンドの入力が所定時間を超えて行われた場合に比べて、出力頻度を小さく制御する。これにより、乗員のエージェントの認識程度に応じた出力頻度に設定することができる。 Further, according to the vehicle information processing device 1 and the method of the present embodiment, when the occupant inputs the voice command within the predetermined time, the occupant inputs the voice command beyond the predetermined time. The output frequency is controlled to be smaller than in the case. As a result, the output frequency can be set according to the degree of recognition of the occupant's agent.

また、本実施形態の車両用情報処理装置1及び方法によれば、乗員が当該車両用情報処理装置を利用した実績を検知する利用実績検知部14をさらに備え、乗員の利用実績値に応じて、エージェント6によるコミュニケーション情報の出力頻度を制御するので、より一層、しつこさと丁寧さとがバランスされた出力頻度となる。 Further, according to the vehicle information processing device 1 and the method of the present embodiment, the usage record detection unit 14 for detecting the record of the occupant using the vehicle information processing device is further provided, and the usage record value of the occupant is increased. Since the output frequency of the communication information by the agent 6 is controlled, the output frequency is further balanced between persistence and politeness.

また、本実施形態の車両用情報処理装置1及び方法によれば、乗員の利用実績値が小さい場合に、利用実績値が大きい場合に比べて、出力頻度を大きく制御するので、乗員のエージェントの認識程度に応じた出力頻度に設定することができる。 Further, according to the vehicle information processing device 1 and the method of the present embodiment, when the actual usage value of the occupant is small, the output frequency is controlled to be larger than when the actual usage value is large. The output frequency can be set according to the degree of recognition.

1…車両用情報処理装置
11…出力部
12…出力頻度制御部
13…検知部
14…利用実績検知部
15…識別データ入力部
16…車両情報取得部
2…車両センサ類
3…地図データベース
4…外部サーバ
5…電気通信回線網
6…エージェント
61…頭部
62…基台
1 ... Vehicle information processing device 11 ... Output unit 12 ... Output frequency control unit 13 ... Detection unit 14 ... Usage record detection unit 15 ... Identification data input unit 16 ... Vehicle information acquisition unit 2 ... Vehicle sensors 3 ... Map database 4 ... External server 5 ... Telecommunications network 6 ... Agent 61 ... Head 62 ... Base

Claims (10)

ユーザとのコミュニケーションを、エージェント機能を用いて行う情報処理装置において、
前記エージェント機能によりコミュニケーション情報を出力する出力部と、
前記エージェント機能によるコミュニケーション情報の出力頻度を制御する出力頻度制御部と、
前記エージェント機能によるコミュニケーション情報が出力された後の、前記ユーザの所定の状態を検知する検知部と、を備え、
前記出力頻度制御部は、前記検知部により検知されたユーザの所定の状態に応じて、前記エージェント機能によるコミュニケーション情報の出力頻度を制御する情報処理装置。
In an information processing device that communicates with users using the agent function
An output unit that outputs communication information by the agent function,
An output frequency control unit that controls the output frequency of communication information by the agent function,
It is provided with a detection unit that detects a predetermined state of the user after the communication information by the agent function is output.
The output frequency control unit is an information processing device that controls the output frequency of communication information by the agent function according to a predetermined state of the user detected by the detection unit.
前記出力部は、前記エージェント機能によるコミュニケーション情報を表示部から視覚的に出力し、
前記検知部は、前記表示部に対して前記乗員の視線が向けられた状態を検知する請求項1に記載の車両用情報処理装置。
The output unit visually outputs communication information by the agent function from the display unit.
The vehicle information processing device according to claim 1, wherein the detection unit detects a state in which the line of sight of the occupant is directed toward the display unit.
前記検知部は、前記表示部に対して前記乗員の視線が向けられるまでの時間及び/又は視線が向けられた回数を検知する請求項2に記載の車両用情報処理装置。 The information processing device for a vehicle according to claim 2, wherein the detection unit detects the time until the line of sight of the occupant is directed to the display unit and / or the number of times the line of sight is directed to the display unit. 前記出力頻度制御部は、
前記表示部に対して前記乗員の視線が向けられるまでの時間が短い場合に、前記表示部に対して前記乗員の視線が向けられるまでの時間が長い場合に比べて、前記出力頻度を小さく制御し、
前記表示部に対して前記乗員の視線が向けられた回数が多い場合に、前記表示部に対して前記乗員の視線が向けられた回数が少ない場合に比べて、前記出力頻度を小さく制御する請求項3に記載の車両用情報処理装置。
The output frequency control unit
When the time until the line of sight of the occupant is directed to the display unit is short, the output frequency is controlled to be smaller than when the time until the line of sight of the occupant is directed to the display unit is long. And
A claim for controlling the output frequency to be smaller when the number of times the occupant's line of sight is directed to the display unit is large than when the number of times the occupant's line of sight is directed to the display unit is small. Item 3. The information processing device for a vehicle according to item 3.
前記検知部は、前記乗員による音声コマンドの入力が所定時間内に行われたか否かを検知する請求項1に記載の車両用情報処理装置。 The vehicle information processing device according to claim 1, wherein the detection unit detects whether or not the voice command is input by the occupant within a predetermined time. 前記出力頻度制御部は、
前記乗員による音声コマンドの入力が所定時間内に行われた場合に、前記乗員による音声コマンドの入力が所定時間を超えて行われた場合に比べて、前記出力頻度を小さく制御する請求項5に記載の車両用情報処理装置。
The output frequency control unit
According to claim 5, when the voice command is input by the occupant within a predetermined time, the output frequency is controlled to be smaller than that when the voice command is input by the occupant for more than the predetermined time. The vehicle information processing device described.
前記乗員が当該車両用情報処理装置を利用した実績を検知する利用実績検知部をさらに備え、
前記乗員の利用実績値に応じて、前記エージェント機能によるコミュニケーション情報の出力頻度を制御する請求項1記載の車両用情報処理装置。
Further equipped with a usage record detection unit that detects the record of the occupant using the vehicle information processing device.
The vehicle information processing device according to claim 1, wherein the output frequency of communication information by the agent function is controlled according to the usage record value of the occupant.
前記出力頻度制御部は、前記乗員の利用実績値が小さい場合に、利用実績値が大きい場合に比べて、前記出力頻度を大きく制御する請求項7に記載の車両用情報処理装置。 The information processing device for a vehicle according to claim 7, wherein the output frequency control unit controls the output frequency more when the actual usage value of the occupant is smaller than when the actual usage value is large. 前記エージェント機能によるコミュニケーション情報は、音声、画像又は発光パターンのいずれかを媒体とする情報であり、
前記出力部は、
前記エージェント機能によるコミュニケーション情報が音声を媒体とする場合には、当該コミュニケーション情報を、音声出力部から聴覚的に出力し、
前記エージェント機能によるコミュニケーション情報が画像を媒体とする場合には、当該コミュニケーション情報を、表示部から視覚的に出力し、
前記エージェント機能によるコミュニケーション情報が発光パターンを媒体とする場合には、当該コミュニケーション情報を、発光部から視覚的に出力する請求項1〜8のいずれか一項に記載の車両用情報処理装置。
The communication information by the agent function is information that uses any of voice, image, and light emission pattern as a medium.
The output unit
When the communication information by the agent function uses voice as a medium, the communication information is audibly output from the voice output unit.
When the communication information by the agent function uses an image as a medium, the communication information is visually output from the display unit.
The vehicle information processing device according to any one of claims 1 to 8, wherein when the communication information by the agent function uses a light emitting pattern as a medium, the communication information is visually output from the light emitting unit.
プログラムにより動作するコンピュータを用いてユーザに対するコミュニケーション情報を処理する方法であって、ユーザに対するコミュニケーションを、エージェント機能を用いて行う情報処理方法において、
前記コンピュータは、
前記エージェント機能により前記コミュニケーション情報を出力し、
前記エージェント機能によるコミュニケーション情報が出力された後の、前記ユーザの所定の状態を検知し、
前記検知されたユーザの所定の状態に応じて、前記エージェント機能によるコミュニケーション情報の出力頻度を制御する情報処理方法。
In an information processing method in which communication information for a user is processed using a computer operated by a program and communication with the user is performed using an agent function.
The computer
The communication information is output by the agent function, and the communication information is output.
After the communication information by the agent function is output, the predetermined state of the user is detected.
An information processing method that controls the output frequency of communication information by the agent function according to a predetermined state of the detected user.
JP2019167061A 2019-09-13 2019-09-13 Information processing device and method Active JP7263187B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2019167061A JP7263187B2 (en) 2019-09-13 2019-09-13 Information processing device and method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2019167061A JP7263187B2 (en) 2019-09-13 2019-09-13 Information processing device and method

Publications (2)

Publication Number Publication Date
JP2021043852A true JP2021043852A (en) 2021-03-18
JP7263187B2 JP7263187B2 (en) 2023-04-24

Family

ID=74861712

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019167061A Active JP7263187B2 (en) 2019-09-13 2019-09-13 Information processing device and method

Country Status (1)

Country Link
JP (1) JP7263187B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023100606A1 (en) * 2021-11-30 2023-06-08 パナソニックIpマネジメント株式会社 Vehicle

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0644491A (en) * 1992-07-23 1994-02-18 Aisin Aw Co Ltd Route guiding device for vehicle
JPH0761257A (en) * 1993-08-26 1995-03-07 Nissan Motor Co Ltd Display device for vehicle
US20040239509A1 (en) * 2003-06-02 2004-12-02 Branislav Kisacanin Target awareness determination system and method
JP2005055367A (en) * 2003-08-06 2005-03-03 Honda Motor Co Ltd Navigation system for vehicle
JP2013186728A (en) * 2012-03-08 2013-09-19 Mitsubishi Motors Corp Warning system
JP2017167046A (en) * 2016-03-17 2017-09-21 ヤフー株式会社 Route guide device, route guide system, route guide method and route guide program
JP2017204252A (en) * 2016-05-14 2017-11-16 株式会社ユピテル System and program
JP2018124791A (en) * 2017-01-31 2018-08-09 本田技研工業株式会社 Information service system
JP2019114118A (en) * 2017-12-25 2019-07-11 日本電産コパル株式会社 Warning device, vehicle, warning method, and program

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0644491A (en) * 1992-07-23 1994-02-18 Aisin Aw Co Ltd Route guiding device for vehicle
JPH0761257A (en) * 1993-08-26 1995-03-07 Nissan Motor Co Ltd Display device for vehicle
US20040239509A1 (en) * 2003-06-02 2004-12-02 Branislav Kisacanin Target awareness determination system and method
JP2005055367A (en) * 2003-08-06 2005-03-03 Honda Motor Co Ltd Navigation system for vehicle
JP2013186728A (en) * 2012-03-08 2013-09-19 Mitsubishi Motors Corp Warning system
JP2017167046A (en) * 2016-03-17 2017-09-21 ヤフー株式会社 Route guide device, route guide system, route guide method and route guide program
JP2017204252A (en) * 2016-05-14 2017-11-16 株式会社ユピテル System and program
JP2018124791A (en) * 2017-01-31 2018-08-09 本田技研工業株式会社 Information service system
JP2019114118A (en) * 2017-12-25 2019-07-11 日本電産コパル株式会社 Warning device, vehicle, warning method, and program

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023100606A1 (en) * 2021-11-30 2023-06-08 パナソニックIpマネジメント株式会社 Vehicle
JP2023081202A (en) * 2021-11-30 2023-06-09 パナソニックIpマネジメント株式会社 vehicle

Also Published As

Publication number Publication date
JP7263187B2 (en) 2023-04-24

Similar Documents

Publication Publication Date Title
JP4380541B2 (en) Vehicle agent device
JP3619380B2 (en) In-vehicle input / output device
CN105719645B (en) Voice recognition apparatus, vehicle including the same, and method of controlling voice recognition apparatus
JP4419758B2 (en) Automotive user hospitality system
CN107886045B (en) Facility satisfaction calculation device
US11176948B2 (en) Agent device, agent presentation method, and storage medium
JP7068986B2 (en) Agent system, agent control method, and program
CN110968048B (en) Agent device, agent control method, and storage medium
JP7133029B2 (en) Agent device, agent control method, and program
CN111007968A (en) Agent device, agent presentation method, and storage medium
JP7107157B2 (en) Operation support method and operation support device
JP7263187B2 (en) Information processing device and method
JP4666202B2 (en) Automobile equipment remote control system
CN108417061B (en) Method and device for detecting the signal state of at least one signaling device
JP2020149106A (en) Agent device, agent system, server device, method for controlling agent device, and program
JP6387287B2 (en) Unknown matter resolution processing system
JP2020144274A (en) Agent device, control method of agent device, and program
CN111667823B (en) Agent device, method for controlling agent device, and storage medium
JP7340943B2 (en) Agent device, agent device control method, and program
CN111752235A (en) Server device, agent device, information providing method, and storage medium
CN111754288A (en) Server device, information providing system, information providing method, and storage medium
CN111731320A (en) Agent system, agent server, control method thereof, and storage medium
JP2019169845A (en) Terminal device, group communication system, and group communication method
JP7280072B2 (en) Notification control device and notification control method
WO2024079942A1 (en) Information processing apparatus, control method, program, and storage medium

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220510

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20230117

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230207

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230227

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230314

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230412

R150 Certificate of patent or registration of utility model

Ref document number: 7263187

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150