JP2020029210A - Driving control adjustment device and driving control adjustment method - Google Patents

Driving control adjustment device and driving control adjustment method Download PDF

Info

Publication number
JP2020029210A
JP2020029210A JP2018156590A JP2018156590A JP2020029210A JP 2020029210 A JP2020029210 A JP 2020029210A JP 2018156590 A JP2018156590 A JP 2018156590A JP 2018156590 A JP2018156590 A JP 2018156590A JP 2020029210 A JP2020029210 A JP 2020029210A
Authority
JP
Japan
Prior art keywords
unit
state
occupant
control
operation control
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2018156590A
Other languages
Japanese (ja)
Other versions
JP6645543B1 (en
Inventor
佐久間 淳
Atsushi Sakuma
淳 佐久間
栄造 北村
Eizo Kitamura
栄造 北村
加藤 重之
Shigeyuki Kato
重之 加藤
泰秀 與茂
Yasuhide Yomo
泰秀 與茂
一希 笠井
Kazuki KASAI
一希 笠井
晴香 谷口
Haruka Taniguchi
晴香 谷口
知柔 今林
Tomonari Imabayashi
知柔 今林
慎 江上
Shin Egami
慎 江上
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Omron Corp
Original Assignee
Omron Corp
Omron Tateisi Electronics Co
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Omron Corp, Omron Tateisi Electronics Co filed Critical Omron Corp
Priority to JP2018156590A priority Critical patent/JP6645543B1/en
Priority to PCT/JP2019/031792 priority patent/WO2020039993A1/en
Application granted granted Critical
Publication of JP6645543B1 publication Critical patent/JP6645543B1/en
Publication of JP2020029210A publication Critical patent/JP2020029210A/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B62LAND VEHICLES FOR TRAVELLING OTHERWISE THAN ON RAILS
    • B62DMOTOR VEHICLES; TRAILERS
    • B62D6/00Arrangements for automatically controlling steering depending on driving conditions sensed and responded to, e.g. control circuits
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems

Abstract

To support comfortable driving control for a plurality of passengers and loads.SOLUTION: A driving control adjustment device 100 is used in a driving control system DC which executes at least one driving control selected from driving support and automatic driving of a moving body such as a vehicle CR. The driving control adjustment device 100 comprises: an information acquisition unit 10 which acquires information about a plurality of bodies mounted on the moving body; a state determination unit 20 which determines the states of the plurality of mounted bodies on the basis of the information acquired by the information acquisition unit 10; a selection unit 30 which selects from the plurality of mounted bodies; and an adjustment unit 40 which adjusts the control amount of the driving control so as to change the state of the mounted body selected by the selection unit 30.SELECTED DRAWING: Figure 1

Description

本発明は、移動体の自動運転などの運転制御を実行する運転制御システムに用いられる運転制御調整装置および運転制御調整方法に関する。   The present invention relates to an operation control adjustment device and an operation control adjustment method used in an operation control system that performs operation control such as automatic operation of a moving object.

従来から、車両の乗員などの感覚や嗜好などに適合させて車両の制御を行う技術が提案されている。例えば、特許文献1は、ユーザの嗜好に基づいて運転支援システムの動作をカスタマイズすることを目的とした、ユーザプロファイルに基づくコネクティッド・カーの自動パラメータチューニングシステムを開示する。このシステムは、車両は、無線ネットワークを介して、無線メッセージを受信し、運転支援システムの制御パラメータを変更する機能を有する。無線メッセージは、運転支援システムの動作についての、車両の利用予約をしたユーザの嗜好に基づいて、運転支援システムの動作をどのように変更するかを記述した最適化設定値データを含む。変更ステップでは、最適化設定値データに基づいて、運転支援システムの動作がユーザの嗜好に一致するように、運転支援システムの制御パラメータを変更する。   2. Description of the Related Art Conventionally, there has been proposed a technique of controlling a vehicle by adapting to a sense and a preference of an occupant of the vehicle. For example, Patent Literature 1 discloses an automatic parameter tuning system for a connected car based on a user profile for the purpose of customizing the operation of a driving support system based on user preferences. In this system, the vehicle has a function of receiving a wireless message via a wireless network and changing a control parameter of the driving assistance system. The wireless message includes optimization setting value data describing how to change the operation of the driving support system based on the preference of the user who has reserved the use of the vehicle with respect to the operation of the driving support system. In the changing step, the control parameters of the driving support system are changed based on the optimization set value data so that the operation of the driving support system matches the user's preference.

また、特許文献2は、乗員の感覚に合った走行制御が可能な走行制御装置を開示する。この走行制御装置は、運転者の運転操作を要さずに走行可能な自動運転または運転者の運転操作を補助する自動運転を制御する。走行制御装置は、乗員センサが検出した乗員の状態に応じて、自動運転における車体挙動量の制限を緩和する。   Further, Patent Literature 2 discloses a travel control device capable of performing travel control according to the occupant's feeling. This traveling control device controls automatic driving capable of traveling without requiring driving operation of the driver or automatic driving assisting driving operation of the driver. The travel control device relaxes the restriction on the vehicle body behavior amount in automatic driving according to the state of the occupant detected by the occupant sensor.

特開2017−206239号公報JP 2017-206239 A 特開2018−039460号公報JP 2018-039460 A

近年、自動運転や運転支援のシステムが車両に採用されてきており、今後益々増加するものと考えられる。さらに、そのようなシステムにより運転される車両に複数人で乗り合い乗車するケースも増加していくものと推測されている。このような複数の人が一緒に乗り合わす車両などにおいては、各人がそれぞれ運転のしかたなどに対する嗜好や感覚を有しているのが通常であるから、従来技術のように主に運転者の嗜好や感覚に合わすだけでは不十分である。たとえば、運転者の嗜好に合った運転制御を行っても、同乗者には緊張を与えるような場合もある。   In recent years, systems for automatic driving and driving assistance have been adopted for vehicles, and are expected to increase in the future. Further, it is estimated that the number of cases where a plurality of people ride and ride on a vehicle driven by such a system will increase. In a vehicle or the like in which a plurality of people ride together, it is normal that each person has a preference or a sense of how to drive. It is not enough just to match tastes and sensations. For example, even if the driving control is performed in accordance with the driver's preference, the passenger may be nervous.

本発明は、かかる事情を鑑みて考案されたものであり、複数人で乗り合い乗車する車両などの移動体において、乗車している複数の人を対象にして快適な運転制御を行えるようにする運転制御調整装置および運転制御調整方法を提供するものである。また、本発明は、複数の人だけでなく、複数種類の積載物に対しても適切な運転制御を行えるようにする運転制御調整装置および運転制御調整方法を提供する。   The present invention has been devised in view of the above circumstances, and is a driving method that enables comfortable driving control for a plurality of occupants in a moving body such as a vehicle that is occupied by a plurality of people. A control adjustment device and an operation control adjustment method are provided. Further, the present invention provides an operation control adjustment device and an operation control adjustment method that enable appropriate operation control not only for a plurality of persons but also for a plurality of types of loads.

上記課題を解決するために、移動体の運転支援および自動運転の少なくとも一方の運転制御を実行する運転制御システムに用いられる運転制御調整装置であって、移動体の複数の被搭載体の情報を取得する情報取得部と、情報取得部が取得した情報に基づいて、複数の被搭載体の状態を判定する状態判定部と、複数の被搭載体の中から選定する選定部と、選定部が選定した被搭載体の状態を変更するように運転制御の制御量を調整する調整部と、を備える運転制御調整装置が提供される。
これによれば、乗員や積載物の複数の被搭載体の中から選定し、それに適した制御量に変更することで、適切に移動体の運転制御を調整する運転制御調整装置を提供することができる。
In order to solve the above-described problem, an operation control adjustment device used in an operation control system that performs at least one of driving support and automatic driving of a moving object is provided, and information on a plurality of mounted objects of the moving object is stored. An information acquisition unit to be acquired, a state determination unit that determines a state of the plurality of mounted objects based on the information acquired by the information acquisition unit, a selection unit that selects from among the plurality of mounted objects, and a selection unit. An operation control adjustment device including: an adjustment unit that adjusts a control amount of operation control so as to change a state of a selected mounted body.
According to this, it is possible to provide an operation control adjustment device that appropriately adjusts the operation control of a moving body by selecting from among a plurality of mounted bodies of occupants and loads, and changing the control amount to an appropriate control amount. Can be.

さらに、被搭載体は、移動体の乗員であることを特徴としてもよい。
これによれば、複数の乗員の中から選定し、その乗員に適するように制御量を変更することで、快適な運転制御を行うことができる。
Further, the mounted object may be an occupant of a moving object.
According to this, a comfortable driving control can be performed by selecting from a plurality of occupants and changing the control amount so as to be suitable for the occupant.

さらに、情報取得部は、複数の乗員の生体信号を取得し、状態判定部は、情報取得部が取得した複数の乗員の生体信号の状態を判定し、選定部は、状態判定部が判定した複数の乗員の中から最も悪い状態の乗員を選定し、調整部は、選定部が選定した最も悪い状態の乗員の状態を良くするように制御量を調整することを特徴としてもよい。
これによれば、状態を判定した複数の乗員の中から最も悪い状態の乗員を選定し、その乗員の状態を良くするように制御量を調整することで、快適な運転制御を行うことができる。
Further, the information acquisition unit acquires the biological signals of a plurality of occupants, the state determination unit determines the state of the biological signals of the plurality of occupants acquired by the information acquisition unit, and the selection unit determines the state determination unit. The worst occupant may be selected from the plurality of occupants, and the adjustment unit may adjust the control amount so as to improve the state of the worst occupant selected by the selection unit.
According to this, it is possible to perform comfortable driving control by selecting the occupant in the worst state from among the plurality of occupants whose states have been determined, and adjusting the control amount so as to improve the state of the occupant. .

さらに、情報取得部は、少なくとも複数の乗員の顔画像を撮像する撮像装置を含み、状態判定部は、撮像装置が撮像した顔画像に基づいて推定年齢を出力し、選定部は、状態判定部が出力した推定年齢に基づいて、最も小さいまたは大きい推定年齢の乗員を選定し、調整部は、選定部が選定した最も小さいまたは大きい推定年齢の乗員の状態を少なくとも悪くしないように制御量を調整することを特徴としてもよい。
これによれば、状態を判定した最高齢や最年少などの状態が変化し易い乗員に適するように制御量を調整することで、快適な運転制御を行うことができる。
Further, the information acquisition unit includes an imaging device that captures at least a plurality of occupant face images, the state determination unit outputs an estimated age based on the face image captured by the imaging device, and the selection unit includes a state determination unit Based on the estimated age output by the occupant, the occupant with the smallest or the largest estimated age is selected, and the adjustment unit adjusts the control amount so that the state of the occupant with the smallest or the largest estimated age selected by the selection unit does not deteriorate at least. It may be characterized in that
According to this, comfortable driving control can be performed by adjusting the control amount so as to be suitable for an occupant whose state is easily changed, such as the oldest or the youngest, whose state has been determined.

さらに、使用者からの入力を受け付ける外部入力部をさらに有し、選定部は、外部入力部で指示された一の移動体の乗員を選定し、調整部は、選定部が選定した乗員の状態を少なくとも悪くしないように制御量を調整することを特徴としてもよい。
これによれば、特定の乗員に適するように制御量を調整することで、快適な運転制御を行うことができる。
The selection unit further includes an external input unit that receives an input from the user, the selection unit selects an occupant of the one mobile unit specified by the external input unit, and the adjustment unit determines a state of the occupant selected by the selection unit. May be characterized by adjusting the control amount so as not to worsen at least.
According to this, a comfortable driving control can be performed by adjusting the control amount so as to be suitable for a specific occupant.

さらに、情報取得部は、複数の乗員の生体信号を取得し、状態判定部は、情報取得部が取得した複数の乗員の生体信号の状態を判定し、選定部は、移動体の乗員の全員を選定し、調整部は、選定部が選定した移動体の乗員全員の状態の平均を少なくとも悪くしないように制御量を調整することを特徴としてもよい。
これによれば、乗員全員に適するように制御量を調整することで、快適な運転制御を行うことができる。
Further, the information acquisition unit acquires the biosignals of the plurality of occupants, the state determination unit determines the states of the biosignals of the plurality of occupants acquired by the information acquisition unit, and the selection unit includes all of the occupants of the moving body. May be selected, and the adjustment unit may adjust the control amount so that at least the average of the states of all the occupants of the moving object selected by the selection unit is not deteriorated.
According to this, comfortable driving control can be performed by adjusting the control amount so as to be suitable for all the occupants.

さらに、被搭載体は、移動体に積載された複数種類の積載物であることを特徴としてもよい。
これによれば、複数種類の積載物の中から選定し、その積載物に適するように制御量を変更することで、適切な運転制御を行うことができる。
Further, the mounted object may be a plurality of types of loads loaded on the moving body.
According to this, it is possible to perform appropriate operation control by selecting from a plurality of types of loads and changing the control amount so as to be suitable for the load.

さらに、情報取得部は、複数種類の積載物とその積載物の加速度の情報を取得し、状態判定部は、情報取得部が取得した加速度情報がそれぞれの種類の積載物に対して許容される度合いを判定し、選定部は、状態判定部が判定した複数種類の積載物の中から最も許容度合の小さい状態の種類の積載物を選定し、調整部は、選定部が選定した最も許容度合の小さい状態の種類の積載物の状態を少なくとも悪くしないように制御量を調整することを特徴としてもよい。
これによれば、状態を判定した複数種類の積載物の中から最も許容度合の小さい状態の種類の積載物を選定し、その積載物の状態を少なくとも悪くしないように制御量を調整することで、適切な運転制御を行うことができる。
Further, the information acquisition unit acquires information on a plurality of types of loads and accelerations of the loads, and the state determination unit allows the acceleration information obtained by the information acquisition unit to be permitted for each type of loads. The degree is determined, and the selection unit selects the load of the state having the smallest allowable level from the plurality of types of loads determined by the state determination unit, and the adjustment unit determines the maximum allowable level selected by the selection unit. The control amount may be adjusted so that the state of the load of the type having a small state is not deteriorated at least.
According to this, the load of the type of the state having the smallest allowable degree is selected from the plurality of types of loads whose states have been determined, and the control amount is adjusted so that the state of the load is not deteriorated at least. , And appropriate operation control can be performed.

上記課題を解決するために、移動体の運転支援および自動運転の少なくとも一方の運転制御を実行する運転制御システムに用いられる運転制御調整方法であって、移動体の複数の被搭載体の情報を取得し、取得した情報に基づいて、複数の被搭載体の状態を判定し、状態を判定した複数の被搭載体の中から選定し、選定した被搭載体の状態を変更するように運転制御の制御量を調整する、運転制御調整方法が提供される。
これによれば、乗員や積載物の複数の被搭載体の中から選定し、それに適した制御量に変更することで、適切に移動体の運転制御を調整する運転制御調整方法を提供することができる。
In order to solve the above-mentioned problem, there is provided an operation control adjustment method used in an operation control system that performs at least one of driving support and automatic operation of a moving body, and includes information on a plurality of mounted bodies of the moving body. Obtain and determine the state of a plurality of mounted objects based on the obtained information, select from among the plurality of mounted objects whose states have been determined, and control the operation so as to change the state of the selected mounted object. An operation control adjustment method for adjusting the control amount of the operation control is provided.
According to this, it is possible to provide an operation control adjustment method for appropriately adjusting the operation control of the moving body by selecting from a plurality of mounted bodies of the occupant and the load and changing the control amount to an appropriate control amount. Can be.

以上説明したように、本発明によれば、複数人で乗り合い乗車する車両などの移動体において、乗車している複数の人を対象にして快適な運転制御を行えるようにする運転制御調整装置および運転制御調整方法を提供することができる。また、本発明によれば、複数の人だけでなく、複数種類の積載物に対しても適切な運転制御を行えるようにする運転制御調整装置および運転制御調整方法を提供することができる。   As described above, according to the present invention, in a moving object such as a vehicle in which a plurality of people ride and ride, a driving control adjustment device that enables comfortable driving control for a plurality of occupants is provided. An operation control adjustment method can be provided. Further, according to the present invention, it is possible to provide an operation control adjustment device and an operation control adjustment method that can perform appropriate operation control not only for a plurality of persons but also for a plurality of types of loads.

本発明に係る第一実施例の運転制御調整装置のブロック構成図。FIG. 1 is a block configuration diagram of an operation control adjustment device according to a first embodiment of the present invention. 本発明に係る第一実施例の状態判定部のブロック構成図。FIG. 2 is a block diagram of a state determination unit according to the first embodiment of the present invention. 本発明に係る第一実施例の選定部のブロック構成図。FIG. 3 is a block diagram of a selection unit according to the first embodiment of the present invention. 本発明に係る第一実施例の調整部のブロック構成図。FIG. 2 is a block diagram of an adjustment unit according to the first embodiment of the present invention. 本発明に係る第一実施例の運転制御調整装置の全体処理のフローチャート。4 is a flowchart of the overall processing of the operation control adjustment device of the first embodiment according to the present invention. 本発明に係る第一実施例の運転制御調整装置の最悪状態の乗員に対する快適制御の処理のフローチャート。5 is a flowchart of a process of comfort control for a worst-case occupant of the driving control apparatus according to the first embodiment of the present invention. 本発明に係る第一実施例の運転制御調整装置の複数人のなかからのリアルタイムに乗員を選定する快適制御の処理のフローチャート。9 is a flowchart of comfort control processing for selecting an occupant in real time from a plurality of persons in the operation control adjustment device according to the first embodiment of the present invention. 本発明に係る第一実施例の運転制御調整装置の座席指定の乗員に対する快適制御の処理のフローチャート。5 is a flowchart of a process of comfort control for an occupant with a designated seat by the driving control apparatus according to the first embodiment of the present invention. 本発明に係る第一実施例の運転制御調整装置の初期入力により選定された乗員に対する快適制御の処理のフローチャート。6 is a flowchart of a comfort control process for the occupant selected by the initial input of the operation control adjustment device of the first embodiment according to the present invention. 本発明に係る第一実施例の運転制御調整装置の積載物に対する処理のフローチャート(その1)。5 is a flowchart (part 1) of a process for a load by the operation control and adjustment device according to the first embodiment of the present invention. 本発明に係る第一実施例の運転制御調整装置の積載物に対する処理のフローチャート(その2)。9 is a flowchart (part 2) of a process for a load by the operation control and adjustment device according to the first embodiment of the present invention.

以下では、図面を参照しながら、本発明に係る各実施例について説明する。   Hereinafter, embodiments of the present invention will be described with reference to the drawings.

<第一実施例>
図1を参照し、本実施例における運転制御調整装置100を説明する。運転制御調整装置100は、移動体の一つである車両CRに設置される。車両CRは、電車や列車などの客車であってもよいが、本実施例では、数人の乗車定員の比較的小型車からバスなどの大型車を含む自動車を例に説明する。移動体は、複数人が同時に乗車する乗り物であれば、特に限定されず、エレベータのようなものであってもよい。また、小型車であっても、個人所有の車であってもよいし、シェアカーのように複数の人が共有する車であってもよい。車両CRには、複数の乗員(本図では3名)と積載物(本図では2個)が被搭載体として搭載されている。ここでは、乗員について中心的に説明し、モノである積載物については後述する。
<First embodiment>
With reference to FIG. 1, an operation control adjustment device 100 in the present embodiment will be described. The driving control adjustment device 100 is installed in a vehicle CR that is one of the moving objects. The vehicle CR may be a passenger car such as a train or a train. However, in the present embodiment, a description will be given of an example of a car including a relatively small car having a capacity of several people to a large car such as a bus. The moving body is not particularly limited as long as it is a vehicle on which a plurality of people ride at the same time, and may be an elevator. In addition, it may be a small car, a privately owned car, or a car shared by a plurality of people, such as a share car. In the vehicle CR, a plurality of occupants (three in this figure) and a load (two in this figure) are mounted as mounted bodies. Here, the occupant will be mainly described, and the load as a thing will be described later.

車両CRは、車両CRの運転支援や自動運転の制御を行う運転制御システムDCを備える。運転制御システムDCは、運転支援や自動運転を行うために、加速・操舵・制動の主制御系統に関連するセンサだけでなく、多数のセンサを備えている。たとえば、車両のセンサ(本図では車両センサ1〜4)は、加速度センサ、車速センサ、操舵角センサ、振動センサ、ヨーレートセンサ、ジャイロスコープ、車間距離センサ、カメラ、LIDAR、位置センサ(GPS:Global Positioning System)、道路標識センサ、車載ネットワークなどであり、多数の情報源から目的とする物理量などの情報を取得する。   The vehicle CR includes a driving control system DC that performs driving support and automatic driving control of the vehicle CR. The operation control system DC includes many sensors in addition to sensors related to a main control system for acceleration, steering, and braking in order to perform driving support and automatic driving. For example, vehicle sensors (vehicle sensors 1 to 4 in this figure) include an acceleration sensor, a vehicle speed sensor, a steering angle sensor, a vibration sensor, a yaw rate sensor, a gyroscope, an inter-vehicle distance sensor, a camera, a LIDAR, and a position sensor (GPS: Global). Positioning System), a road sign sensor, an in-vehicle network, and the like, and acquire information such as target physical quantities from many information sources.

また、運転制御システムDCは、実際に運転支援や自動運転の制御を行う多数のECU(Electronic Control Unit)を備える(本図ではECU1〜3)。たとえば、主制御系統に関連するものとして、オートクルーズECU、エンジン制御ECU、ステアリング制御ECU、ブレーキ制御ECUなどがある。それぞれのECUには、モータやソレノイドなどから構成され、動作を発生させるアクチュエータ(本図ではアクチュエータ1〜3)が対応して備えられている。たとえば、エンジン制御ECUにはエンジン、ステアリング制御ECUにはステアリング、ブレーキ制御ECUにはブレーキが対応している。たとえば、ステアリング制御ECUは、車両センサの一つである操舵角センサが検出した操舵角などに応じて、アクチュエータとしてのステアリングを制御する。運転制御システムDCには自動運転ECUが備えられる。自動運転ECUは、その他のECUに対して各制御量などを指令することによって、協働して自動運転を実現する。   Further, the operation control system DC includes a number of ECUs (Electronic Control Units) that actually perform driving support and automatic driving control (ECUs 1 to 3 in this figure). For example, those related to the main control system include an auto cruise ECU, an engine control ECU, a steering control ECU, a brake control ECU, and the like. Each ECU is provided with an actuator (actuator 1 to 3 in this figure) corresponding to a motor, a solenoid, and the like, which generates an operation. For example, the engine control ECU corresponds to the engine, the steering control ECU corresponds to the steering, and the brake control ECU corresponds to the brake. For example, the steering control ECU controls steering as an actuator in accordance with a steering angle detected by a steering angle sensor that is one of vehicle sensors. The operation control system DC includes an automatic operation ECU. The automatic driving ECUs cooperate to realize automatic driving by instructing the other ECUs on various control amounts and the like.

なお、運転支援や自動運転の自動化レベルは様々な態様があり、それに応じて、ECUとアクチュエータの組み合わせも様々に考えられる。たとえば、自動運転の一つと考えられる自動車線維持支援システムでは、車両CRが車線を逸脱しそうな場合にステアリング制御ECUはステアリングを車線から逸脱しないように制御する。一方、運転支援の一つと考えられる車線逸脱防止支援システムでは、車両CRが車線を逸脱しそうな場合に運転者に警告を発し、その警告に対応して運転者がステアリングを制御することを支援する。車両センサ1〜4、ECU1〜3、およびアクチュエータ1〜3の組み合わせは、固定的な関係ではなく、自動化のレベルや車両CRの状態に応じ変化するものである。より自律的な自動運転が行われる場合には、自動運転ECUが車両に設けられ、車両各部からのセンサ情報や走行ルート情報に基づき、速度・ブレーキ量・操舵量などの各制御量を逐次総合的に計算して、これら制御量をエンジン制御ECU、ステアリング制御ECU、ブレーキ制御ECUに対して指示する。   It should be noted that there are various modes of the driving support and the automation level of the automatic driving, and accordingly, various combinations of the ECU and the actuator are conceivable. For example, in a lane keeping assist system that is considered to be one of automatic driving, when the vehicle CR is likely to deviate from the lane, the steering control ECU controls the steering so as not to deviate from the lane. On the other hand, the lane departure prevention support system, which is considered as one of driving assistance, issues a warning to the driver when the vehicle CR is likely to deviate from the lane, and assists the driver in controlling the steering in response to the warning. . The combination of the vehicle sensors 1-4, the ECUs 1-3, and the actuators 1-3 is not a fixed relation but changes according to the level of automation and the state of the vehicle CR. When more autonomous automatic driving is performed, an automatic driving ECU is provided in the vehicle, and based on sensor information and traveling route information from various parts of the vehicle, each control amount such as speed, brake amount, steering amount, etc. is sequentially integrated. These control amounts are instructed to the engine control ECU, the steering control ECU, and the brake control ECU.

運転制御調整装置100は、運転制御システムDC内に、ECU1〜3や車両センサ1〜4と、CAN(Car Area Network)などの通信バスを介して接続されて備えられる。運転制御調整装置100は、上述したような車両CRの運転支援および自動運転の少なくとも一方の運転制御を実行する運転制御システムDCに用いられる。運転制御調整装置100は、運転制御システムDCがアクチュエータ1〜3の制御を行う際の制御量を後述するように調整し、運転制御システムDCを支援するものである。   The operation control adjustment device 100 is provided in the operation control system DC by being connected to the ECUs 1 to 3 and the vehicle sensors 1 to 4 via a communication bus such as CAN (Car Area Network). The driving control adjustment device 100 is used in a driving control system DC that executes at least one of driving support and automatic driving of the vehicle CR as described above. The operation control adjustment device 100 adjusts a control amount when the operation control system DC controls the actuators 1 to 3 as described later, and supports the operation control system DC.

運転制御調整装置100は、情報取得部10と、状態判定部20と、選定部30と、調整部40とを備える。情報取得部10は、車両CRの複数の乗員1〜3のそれぞれの生体信号の情報を取得する。生体信号は、バイタルサイン、反射、随意運動を少なくとも含むものとする。バイタルサインとは、生物として生きている証拠であり、反射とは、生物の無意識の反応であり、随意運動とは、生物の意志や意図に基づく運動や発声である。なお、乗員の生体信号といった場合、人間だけでなく、飼い主と共に生活する犬や猫などのペットを含んでもよい。家畜や競走馬などの生物は、後述する積載物の扱いであってもよい。   The operation control adjustment device 100 includes an information acquisition unit 10, a state determination unit 20, a selection unit 30, and an adjustment unit 40. The information acquisition unit 10 acquires information on the biological signal of each of the occupants 1 to 3 of the vehicle CR. The biological signal includes at least vital signs, reflection, and voluntary movement. Vital signs are proof of living as a living thing, reflex is an unconscious reaction of the living thing, and voluntary movement is movement and vocalization based on the will and intention of the living thing. In the case of an occupant's biological signal, it may include not only humans but also pets such as dogs and cats living with their owners. Creatures such as livestock and racehorses may be handled as cargo to be described later.

バイタルサインは、血圧、脈拍数、呼吸速度、体温、発汗、脳波、瞳孔反射(対光反射)、膀胱内尿量、動脈血酸素飽和度(SpO)、意識レベル(意識スケール:GCS(Glasgow Coma Scale)やJCS(Japan Coma Scale)等)などである。反射は、化学的反射、物理的反射、電気的反射である。化学的反射は、たとえば、呼吸数が減少し血中酸素濃度(酸素飽和度)が下がるような反射である。物理的反射は、たとえば、目に強い光を受けると瞼を閉じたり、膝蓋腱が刺激を受けると筋が緊張するような反射である。電気的反射は、たとえば、低周波の電気刺激を与えると筋肉が反応して収縮するような反応である。 Vital signs include blood pressure, pulse rate, respiratory rate, body temperature, sweating, brain waves, pupil reflex (light reflex), urinary bladder volume, arterial oxygen saturation (SpO 2 ), consciousness level (consciousness scale: GCS (Glasgow Coma) Scale), JCS (Japan Coma Scale), and the like. The reflection is a chemical reflection, a physical reflection, or an electric reflection. The chemical reflex is, for example, a reflex in which the respiratory rate decreases and the blood oxygen concentration (oxygen saturation) decreases. Physical reflexes are, for example, reflexes that close the eyelids when exposed to intense light in the eyes or that cause the muscles to be tense when the patella tendon is stimulated. The electrical reflex is, for example, a reaction in which a muscle responds and contracts when a low-frequency electrical stimulus is applied.

これらを測る測定器10(情報取得部)は、乗員が座る座席の座面、背もたれ、ヘッドレスト、肘掛けなどに設けられ、直接的または間接的にこれらを測定できるものであってもよいし、乗員に可視光/非可視光の波長の電磁波を照射し、その反射光を撮像することのできる撮像装置であってもよい。座席に測定器10を設置する場合は、測定器10は、座席毎に設置されることが好ましい。   The measuring device 10 (information acquisition unit) for measuring these may be provided on a seat surface, a backrest, a headrest, an armrest, or the like of a seat on which an occupant sits, and may directly or indirectly measure them. An imaging device that can irradiate an electromagnetic wave of visible light / invisible light with a wavelength and image the reflected light. When the measuring device 10 is installed on a seat, the measuring device 10 is preferably installed for each seat.

たとえば、心拍のデータを取得するには、心拍センサ11として、ミリ波レーダや振動センサ等が用いられる。呼吸のデータを取得するには、呼吸センサ11(図示せず)として、ミリ波レーダや振動センサ等が用いられる。脈波のデータを取得するには、脈波センサ11(図示せず)として、ミリ波レーダや振動センサ等が用いられる。発汗のデータを取得するには、発汗センサ11(図示せず)として、湿度センサ(静電容量)やインピーダンスセンサ等が用いられる。体温のデータを取得するには、体温センサ11(図示せず)として、サーモグラフィを備えた撮像装置等が用いられる。瞳孔やまぶたの動きのデータを取得するには、カメラ12が用いられる。カメラ12は、瞳孔の大きさ、瞬目の回数、視線などにより、目の動きのデータを取得すると共に、頭の揺れ、目/眉間/唇/口角などから形成される表情、顔色なども乗員の状態のデータとして取得する。音声のデータを取得するには、音声マイク11(図示せず)が用いられる。音声マイク11は、周波数として捉えて、その声色等のデータを取得できると共に、音声認識技術を組み合わせて、発声したことの意味をデータとして取得することもできる。膀胱内尿量のデータを取得するには、膀胱内尿量測定センサ11(図示せず)として、超音波を使った機器が用いられる。動脈血酸素飽和度のデータを取得するには、パルスオキシメータ等が用いられる。意識レベルのデータを取得するには、スピーカから問いかけをして、その反応を集音して検出してもよい。これらの測定器10は、あくまで例であり、目的とするデータを取得できれば、その取得方法はとくに限定されない。   For example, in order to acquire heart rate data, a millimeter wave radar, a vibration sensor, or the like is used as the heart rate sensor 11. To acquire respiration data, a millimeter wave radar, a vibration sensor, or the like is used as the respiration sensor 11 (not shown). To acquire pulse wave data, a millimeter wave radar, a vibration sensor, or the like is used as the pulse wave sensor 11 (not shown). In order to acquire perspiration data, a humidity sensor (capacitance), an impedance sensor, or the like is used as the perspiration sensor 11 (not shown). To acquire body temperature data, an imaging device equipped with thermography or the like is used as the body temperature sensor 11 (not shown). The camera 12 is used to acquire pupil and eyelid movement data. The camera 12 obtains eye movement data based on the size of the pupil, the number of blinks, the line of sight, and the like, and the occupant also obtains information such as the shaking of the head, the facial expression formed from the eyes / interline / lips / mouth corner, and the like. As state data. To acquire audio data, an audio microphone 11 (not shown) is used. The voice microphone 11 can acquire data such as its timbre by capturing the frequency as a frequency, and can also acquire the meaning of utterance as data by combining voice recognition technology. In order to acquire the data of the urinary bladder volume, a device using ultrasonic waves is used as the urinary bladder volume measurement sensor 11 (not shown). A pulse oximeter or the like is used to obtain arterial blood oxygen saturation data. To obtain consciousness level data, a question may be asked from a speaker, and the response may be collected and detected. These measuring devices 10 are merely examples, and the acquisition method is not particularly limited as long as the desired data can be acquired.

状態判定部20は、情報取得部10が取得した生体情報に基づいて、複数の乗員1〜3のそれぞれの状態を判定する。図2を参照して、状態判定部20を説明する。なお、備える測定器10は、心拍センサ11とカメラ12を例として、また車両センサ1〜4はステアリングの操舵角やモーメントの強さを検出するセンサを例として説明する。   The state determination unit 20 determines the state of each of the plurality of occupants 1 to 3 based on the biological information acquired by the information acquisition unit 10. The state determination unit 20 will be described with reference to FIG. The measuring device 10 will be described using a heart rate sensor 11 and a camera 12 as an example, and the vehicle sensors 1 to 4 will be described using a sensor that detects the steering angle of a steering and the strength of a moment as an example.

状態判定部20は、カメラ12から画像データを受信し、記憶する画像記憶部21と、画像記憶部21が記憶する画像データを取り出し、顔画像の特徴量を抽出する顔画像特徴量抽出部22と、抽出した特徴量を解析する特徴量解析部23とを備える。また、状態判定部20は、さらに、心拍センサ11から心拍データを受信し、記憶する心拍データ記憶部24と、心拍データ記憶部24が記憶する心拍データを取り出し、心拍データの解析を行う心拍データ解析部25とを備える。また、状態判定部20は、さらに、特徴量解析部23および心拍データ解析部25が行った解析結果に基づき、カメラ12と心拍センサ11で検出した各乗員の状態を判定する第一状態判定部26を備える。なお、状態判定部20は、さらに、モノである積載物からの信号を受信する無線信号受信部27と、加速度データ解析部28と、第二状態判定部29とを備えるが、積載物に関する構成については後述する。   The state determination unit 20 receives image data from the camera 12 and stores the image data. The image storage unit 21 extracts the image data stored in the image storage unit 21 and extracts a feature amount of the face image. And a feature amount analyzing unit 23 for analyzing the extracted feature amount. The state determination unit 20 further receives heart rate data from the heart rate sensor 11, stores the heart rate data storage unit 24, extracts the heart rate data stored in the heart rate data storage unit 24, and analyzes the heart rate data. An analysis unit 25 is provided. The state determination unit 20 further determines a state of each occupant detected by the camera 12 and the heart rate sensor 11 based on the analysis result performed by the feature amount analysis unit 23 and the heart rate data analysis unit 25. 26. The state determination unit 20 further includes a wireless signal reception unit 27 that receives a signal from a load that is a thing, an acceleration data analysis unit 28, and a second state determination unit 29. Will be described later.

画像記憶部21と心拍データ記憶部24は、メモリから構成され、画像データと心拍データを時系列的に記憶する。顔画像特徴量抽出部22は、画像記憶部21に記憶された画像データの顔の部分における特徴量を抽出する。たとえば、顔画像特徴量抽出部22は、顔画像から眉や目の端点や輪郭点、鼻と口の周囲の特徴点を抽出する。特徴量解析部23は、顔画像特徴量抽出部22が抽出した特徴点の間の距離や、これら特徴点で包囲される領域の画素の特徴の分布を解析し、乗員の属性や表情を解析する。また、特徴量解析部23は、2時点の間でこれらの特徴点を比較することで経時的な表情の変化を解析する。心拍データ解析部25は、心拍データ記憶部24で記憶されている心拍データを取り出し、心拍の間隔や強さ、およびその経時的な変化を解析する。   The image storage unit 21 and the heartbeat data storage unit 24 are configured by a memory, and store the image data and the heartbeat data in a time-series manner. The face image feature value extraction unit 22 extracts a feature value of a face portion of the image data stored in the image storage unit 21. For example, the face image feature amount extraction unit 22 extracts feature points around eyebrows and eyes, contour points, and nose and mouth from the face image. The feature analysis unit 23 analyzes the distance between the feature points extracted by the face image feature extraction unit 22 and the distribution of the feature of the pixel in the area surrounded by these feature points, and analyzes the attributes and facial expressions of the occupant. I do. In addition, the feature amount analysis unit 23 analyzes the change of the facial expression over time by comparing these feature points between two time points. The heart rate data analysis unit 25 extracts the heart rate data stored in the heart rate data storage unit 24, and analyzes the intervals and strengths of the heartbeats and their changes over time.

第一状態判定部26は、特徴量解析部23が行った顔画像の特徴量解析の結果、心拍データ解析部25が行った心拍データの解析結果、およびステアリングのセンサからの操舵角や操舵トルクのデータに基づき、総合的に解析して各乗員の状態を判定する。たとえば、ある乗員の顔画像から緊張している表情が読み取れ、心拍データからも心拍が速くなっているような場合、その乗員は、緊張状態にあると判定する。乗員の一人である運転者は、顔画像からは緊張の表情とは読み取れないが、心拍データから心拍が速くなっていることが検知され、さらに自動運転によってステアリングのセンサが運転者による反力を強く検知するような場合には総合的に緊張していると判定する。   The first state determination unit 26 determines the result of the feature amount analysis of the face image performed by the feature amount analysis unit 23, the analysis result of the heart rate data performed by the heart rate data analysis unit 25, and the steering angle and steering torque from the steering sensor. Based on the above data, a comprehensive analysis is performed to determine the state of each occupant. For example, if a nervous expression can be read from a face image of a certain occupant and the heart rate is faster than the heart rate data, the occupant is determined to be in a nervous state. The driver, one of the occupants, cannot recognize the expression of tension from the face image, but it is detected from the heart rate data that the heart rate is faster, and the steering sensor detects the reaction force by the driver by automatic driving. When strong detection is performed, it is determined that the user is nervous overall.

第一状態判定部26は、測定器10によって測定されるこれらの生体信号を取得し、リラックスしているのか、満足しているのか、不快に思っているのか、緊張しているのか、興奮しているのか、恐れているのか、車酔いをしているのか、体調はどのような状態か、意識がどの程度はっきりしているのか等について判定を行う。第一状態判定部26は、各乗員個別にこれらの生体信号を継続的に取得することで、各乗員の状態を正確に判定できる。なお、上述した第一状態判定部26の判定は、一例であり、種々の生体信号から得られる情報を総合的に判定する。   The first state determination unit 26 acquires these biological signals measured by the measuring device 10 and is excited whether the user is relaxed, satisfied, uncomfortable, nervous, or excited. It is determined whether the person is afraid, afraid, has a motor sickness, is in a state of physical condition, and how clear the consciousness is. The first state determination unit 26 can accurately determine the state of each occupant by continuously acquiring these biological signals individually for each occupant. The above-described determination by the first state determination unit 26 is an example, and comprehensively determines information obtained from various biological signals.

選定部30は、状態判定部20が判定した複数の乗員1〜3の中から主制御系統の制御量を決定するに当たり焦点を当てる乗員を選定し、そのデータを出力する。どのような乗員を選定するかは、様々な考え方があり得る。たとえば、乗員1〜3の中で最も悪い状態の乗員を選定してもよいし、最高齢や最年少などの状態が変わりやすい乗員を選定してもよい。なお、最も悪い状態とは、生体信号から得られる健康状態やストレス状態などを数値化し、その絶対値や変化量の大小などから悪い状態を定義できる。また、年齢は、カメラ12で撮像した顔画像から年齢が推定できるのでその推定年齢を使用して、乗員を選択してもよい。   The selecting unit 30 selects an occupant to be focused on when determining the control amount of the main control system from the plurality of occupants 1 to 3 determined by the state determining unit 20, and outputs the data. There are various ways to select a crew member. For example, the occupant in the worst state among the occupants 1 to 3 may be selected, or the occupant whose state such as the oldest or the youngest is likely to change may be selected. Note that the worst state can be defined as a health state or a stress state obtained from a biological signal by a numerical value, and a bad state can be defined based on the absolute value or the magnitude of change. Since the age can be estimated from the face image captured by the camera 12, the occupant may be selected using the estimated age.

図3に示すように、選定部30は、選択出力部31と、出力対象決定部32と、を備える。選択出力部31は、焦点を当てる乗員の過去のデータやリアルタイムのデータを出力する。たとえば、心拍データのピーク値や現在の状態を示すデータである。選択出力部31は、アナログデータを出力するのであれば、アナログスイッチやマルチプレクサが用いられる。出力対象決定部32は、焦点を当てる乗員を決定し、その乗員のデータや状態を出力するように選択出力部31を制御する。たとえば、最悪状態の乗員が決定される場合には、その乗員のデータや状態を出力するように選択出力部31を制御する。   As illustrated in FIG. 3, the selection unit 30 includes a selection output unit 31 and an output target determination unit 32. The selection output unit 31 outputs past data and real-time data of a focused occupant. For example, it is the peak value of the heart rate data or data indicating the current state. If the selection output unit 31 outputs analog data, an analog switch or a multiplexer is used. The output target determination unit 32 determines the occupant to be focused on, and controls the selection output unit 31 so as to output data and status of the occupant. For example, if the occupant in the worst state is determined, the selection output unit 31 is controlled to output the data and state of the occupant.

また、選定部30は、運転制御調整装置100が外部入力部50を備える場合に、外部入力解析部33をさらに備える。外部入力部50は、タッチパネルから構成され、使用者からの入力を受け付ける。外部入力部50は、たとえば車両CRが備える座席を1つまたは2以上を選定できるようになっており、焦点を当てるべき乗員や積載物が予め分かっている場合など、使用者がタッチパネルを操作することにより焦点を当てる乗員等を選定できるようにしてもよい。その場合、乗員の場合、座席に座る乗員とその座席に座った乗員の生体信号から得られる情報は関連されているものとする。また、積載物の場合は、積載する際に登録または積載したものに対して電磁波を照射したり撮像したりすることにより登録された積載物の種類が表示され、使用者がタッチパネルを操作することにより、焦点を当てる積載物を選定できるようにしてもよい。   When the operation control adjustment device 100 includes the external input unit 50, the selection unit 30 further includes an external input analysis unit 33. The external input unit 50 includes a touch panel and receives an input from a user. The external input unit 50 can select, for example, one or more seats provided in the vehicle CR, and the user operates the touch panel when the occupant to be focused on or the load is known in advance. Thus, the occupant or the like to be focused may be selected. In this case, in the case of an occupant, it is assumed that the information obtained from the biological signal of the occupant sitting on the seat and the occupant sitting on the seat is related. In the case of a load, the type of the registered load is displayed by irradiating or capturing an electromagnetic wave on the registered or loaded object when loading, and the user operates the touch panel. Thus, the load to be focused on may be selected.

外部入力解析部33は、外部入力部50でどの乗員や積載物がいくつ選定されたのかなどを解析して、出力対象決定部32に入力する。出力対象決定部32は、外部入力部50で座席が指定された場合には、その座席に対応するセンサデータや状態を出力するように選択出力部31を制御する。選定部30は、外部入力部50で指示された一人の乗員または一つの積載物を選定し、調整部40に出力する。なお、外部入力部50で入力が無かった場合、外部入力解析部33は、適宜デフォルト値を有していること好ましい。そのデフォルト値は、最も悪い状態の乗員を選定することであってもよい。   The external input analysis unit 33 analyzes which occupant or load is selected by the external input unit 50, and inputs the analysis result to the output target determination unit 32. When a seat is designated by the external input unit 50, the output target determination unit 32 controls the selection output unit 31 to output sensor data and a state corresponding to the seat. The selection unit 30 selects one occupant or one load designated by the external input unit 50 and outputs the selected one to the adjustment unit 40. When there is no input in the external input unit 50, it is preferable that the external input analysis unit 33 appropriately has a default value. The default value may be to select the worst occupant.

また、外部入力部50において複数の乗員や積載物が選定された場合(たとえば、乗員全員が選定された場合)、外部入力解析部33は出力対象決定部32に対して選定された複数の乗員等を出力する。その場合出力対象決定部32は、焦点を当てられた乗員全員または積載物全部のデータや状態を出力するように選択出力部31を制御する。   When a plurality of occupants and loads are selected in the external input unit 50 (for example, when all the occupants are selected), the external input analysis unit 33 outputs the plurality of occupants selected to the output target determination unit 32. Etc. are output. In this case, the output target determination unit 32 controls the selection output unit 31 so as to output data and status of all the focused occupants or the entire load.

図4に示すように、調整部40は、焦点を当てる乗員のデータや状態が入力されてその要因を推定する要因推定部41と、要因に関連する制御量に対する調整量を算出する調整量算出部42とを備える。要因推定部41は、通信バスに接続され、車両センサ1〜4やECU1〜3と通信を行い、車両の状況や主制御系統の制御量を取得する。要因推定部41は、そのような車両の状況等と焦点を当てた乗員の状態との関係に基づき、車両CRのどのような動きが乗員の状態に影響を与えているのか、その関係の要因を分析する。分析の方法は、相関分析、因果関係分析、人工知能による学習などであってよいし、また、状態と要因の関係性を予めテーブルとして記憶しておいてもよく、特に限定されない。   As illustrated in FIG. 4, the adjustment unit 40 includes a factor estimation unit 41 that receives data and a state of a focused occupant and estimates a factor thereof, and an adjustment amount calculation that calculates an adjustment amount for a control amount related to the factor. And a unit 42. The factor estimating unit 41 is connected to the communication bus, communicates with the vehicle sensors 1 to 4 and the ECUs 1 to 3, and acquires the status of the vehicle and the control amount of the main control system. The factor estimating unit 41 determines, based on the relationship between the vehicle status and the like and the focused occupant status, what kind of movement of the vehicle CR affects the occupant status and the factors of the relationship. To analyze. The analysis method may be correlation analysis, causal relationship analysis, learning by artificial intelligence, or the like, and the relationship between the state and the factor may be stored in a table in advance, and is not particularly limited.

調整量算出部42は、要因推定部41が推定した要因に関連する制御量に対する調整量を算出する。たとえば、要因推定部41が、車両センサの加速度センサ、車速センサ、操舵角センサからの情報とストレス値との間に相関は見られないが、車間距離センサとストレス値との間には相関が大きい場合、焦点を当てた乗員は車間距離が小さいとストレスを感じていると推測する。この場合、調整量算出部42は、車間距離が小さくなってきたときには、早め制動をかけて車間が詰まらないように制御する。このような調整量は、状態に応じて予めテーブルとして記憶しておいてもよいし、状態に応じて、少しずつ変化させて、試行錯誤してもよい。   The adjustment amount calculation unit 42 calculates an adjustment amount for the control amount related to the factor estimated by the factor estimation unit 41. For example, the factor estimating unit 41 does not find a correlation between the information from the acceleration sensor, the vehicle speed sensor, and the steering angle sensor of the vehicle sensor and the stress value, but shows a correlation between the inter-vehicle distance sensor and the stress value. If it is large, it is presumed that the focused occupant feels stress when the inter-vehicle distance is small. In this case, when the inter-vehicle distance becomes smaller, the adjustment amount calculator 42 performs early braking so as to control the inter-vehicle distance so as not to be blocked. Such an adjustment amount may be stored in advance as a table according to the state, or may be changed little by little according to the state, and trial and error may be performed.

調整部40は、上述したように、選定した乗員1〜3の状態を変更するように運転制御の制御量を調整する。たとえば、調整部40は、選定部30が選定した最も悪い状態の乗員の状態を良くするように制御量を調整する。乗員の状態を良くするとは、数値化したストレス状態等の数値が改善する方向にすることである。または、調整部40は、選定部30が選定した最高齢または最年少と推定された乗員の状態を少なくとも悪くしないように制御量を調整する。また、出力対象決定部32から複数の焦点を当てた乗員のデータや状態を受けた場合、調整部40は、その複数の焦点を当てた乗員全員の状態の平均を少なくとも悪くしないように制御量を調整する。たとえば、調整部40は、要因推定部41が推定する寄与率の大きい要因に関連して制御量を調整するなどして、焦点を当てた乗員全体のストレス値などの総量を最小化するように調整する。   The adjusting unit 40 adjusts the control amount of the operation control so as to change the state of the selected occupants 1 to 3 as described above. For example, the adjustment unit 40 adjusts the control amount so as to improve the state of the occupant in the worst state selected by the selection unit 30. To improve the condition of the occupant means to improve the numerical value such as the numerical stress state. Alternatively, the adjustment unit 40 adjusts the control amount so that at least the state of the occupant estimated to be the oldest or youngest selected by the selection unit 30 is not deteriorated. Further, when receiving data and states of a plurality of focused occupants from the output target determination unit 32, the adjustment unit 40 controls the control amount so that at least the average of the states of all the plurality of focused occupants does not deteriorate. To adjust. For example, the adjusting unit 40 adjusts the control amount in relation to the factor having a large contribution rate estimated by the factor estimating unit 41, and minimizes the total amount such as the stress value of the focused occupant as a whole. adjust.

調整部40が行う運転制御の制御量の調整とは、たとえば、車間距離を変更する、加速/減速の大きさを変更する、進行方向横方向の加速度の大きさを変更する、ヨーレートを変更する、上下方向の加速度の大きさを変更する、などである。たとえば、焦点を当てた乗員は車間距離が小さいとストレスを感じていると要因推定部41が推測した場合、調整量算出部42は、制御量である車間距離の値を現在よりも大きい値に調整する。そして、この調整された制御量をオートクルーズECUに対して出力する。逆に車間距離が大きいと(割り込みが多くて)ストレスを感じていると推測した場合は、調整量算出部42は、車間距離を小さくするように制御量を調整する。   The adjustment of the control amount of the operation control performed by the adjustment unit 40 includes, for example, changing the inter-vehicle distance, changing the magnitude of acceleration / deceleration, changing the magnitude of acceleration in the traveling direction, and changing the yaw rate. And the magnitude of the vertical acceleration is changed. For example, when the factor estimating unit 41 estimates that the focused occupant feels stress that the inter-vehicle distance is small, the adjustment amount calculating unit 42 sets the value of the inter-vehicle distance that is the control amount to a value larger than the current value. adjust. Then, the adjusted control amount is output to the auto cruise ECU. On the other hand, when it is estimated that the inter-vehicle distance is large (there are many interrupts) and stress is felt, the adjustment amount calculation unit 42 adjusts the control amount so as to reduce the inter-vehicle distance.

自動運転の場合は、制御量の調整はより複合的である。たとえば、自動運転では、前方や周辺を監視するレーザレーダやカメラなどの車両センサからの情報から道路の白線や周辺を走行する車両を検出し、走行軌跡を求めて、走行軌跡上のポイントから次のポイントに移動するための走行速度、操舵角を計算する。これら一連の自動運転制御において、運転制御調整装置100は、焦点を当てた乗員が緊張を感じないような他車との距離、横方向の加速度、前後方向の加速度、ヨーレート、走行速度などの値やこれらを変数とした関数を車両状態の制約条件として、自動運転ECUに与える。自動運転ECUは、これらの制約条件を満足するように制御パラメータを調整して演算を行い、各ECUの制御対象であるアクチュエータの目標操作量を計算して各ECUに指令を与える。たとえば、車間距離と前後方向の加速度の車両状態を制御の対象とした場合であって、焦点当てた乗員が好ましく感じる車間距離が5m以上、前後方向の加速度が1G未満の場合は、走行速度、ブレーキ制動力、制動距離と前後方向の加速度の関係式において、現在の走行速度で前後方向の加速度が1Gを制御パラメータとした場合のブレーキ制動力と制動距離を計算する。自動運転ECUは、このブレーキ制動力が発生できるブレーキ操作量を目標操作量として、計算した制動距離を5mに加算した値よりも現在の車間距離が小さくなる直前に、ブレーキ制御ECUに対して与える。このように制御することによって、焦点を当てた乗員が好ましく感じる車間距離が5m以上、前後方向の加速度が1G未満を保ちながら自動運転が行われる。   In the case of automatic operation, the adjustment of the control amount is more complex. For example, in autonomous driving, a vehicle traveling on a white line or around the road is detected from information from vehicle sensors such as a laser radar or a camera that monitors the front or around the vehicle, and a traveling locus is determined. Calculate the running speed and steering angle to move to the point. In these series of automatic driving control, the driving control adjustment device 100 calculates values such as a distance from another vehicle, a lateral acceleration, a longitudinal acceleration, a yaw rate, and a traveling speed so that the focused occupant does not feel tension. And a function using these as variables are given to the automatic driving ECU as constraints on the vehicle state. The automatic driving ECU adjusts control parameters so as to satisfy these constraints, performs calculations, calculates a target operation amount of an actuator to be controlled by each ECU, and gives a command to each ECU. For example, when the inter-vehicle distance and the vehicle state of the acceleration in the front-rear direction are to be controlled, and the inter-vehicle distance that the focused occupant preferably feels is 5 m or more and the acceleration in the front-rear direction is less than 1G, In the relational expression between the brake braking force, the braking distance, and the acceleration in the front-rear direction, the brake braking force and the braking distance when the acceleration in the front-rear direction at the current traveling speed is 1 G as the control parameter are calculated. The automatic driving ECU sets the brake operation amount capable of generating the brake braking force as a target operation amount and gives the brake control ECU to the brake control ECU immediately before the current inter-vehicle distance becomes smaller than a value obtained by adding the calculated braking distance to 5 m. . By performing such control, the automatic driving is performed while the inter-vehicle distance that the occupant focused on preferably feels is 5 m or more and the acceleration in the front-rear direction is less than 1 G.

また、焦点を当てた乗員は加速/減速の際の加速度が大きいとストレスを感じていると要因推定部41が推測した場合、調整量算出部42は、加速/減速の際の加速度が小さくなるように(加速/減速が緩やかになるように)加速度の許容最大値を設定して、その値を制御量としてエンジン制御ECUやブレーキ制御ECUに出力する。エンジン制御ECUやブレーキ制御ECUは、加速/減速時の加速度が許容最大値の制御量を超えないように、スロットル開度やブレーキ操作量を制御する。また、焦点を当てた乗員は進行方向横方向の加速度の大きさにストレスを感じていると要因推定部41が推測した場合、調整量算出部42は、現在の横方向の加速度に所定ゲイン(1より小さい)を乗じた値に調整するか、あるいは許容最大値に調整し、その調整された制御量を自動運転ECUに出力する。自動運転ECUは、カメラで検知した前方の走行経路の曲率から許容できる走行速度を計算し、その走行速度以下になるようにエンジン制御ECUとブレーキ制御ECUに対して指令を与える。また、焦点を当てた乗員は上下方向の加速度が大きいとストレスを感じていると要因推定部41が推測した場合、調整量算出部42は、現在の上下方向の加速度に所定ゲイン(1より小さい)を乗じた値に調整するか、あるいは許容最大値に調整し、その調整された制御量を自動運転ECUに出力する。自動運転ECUは、サスペンションの減衰率を小さくするように関連するECUに指令を与える。また、人工知能の技術を用い、焦点を当てた乗員がその状態を引き起こしている要因(車両の挙動)を推定して、その要因の制御量を調整できるようにしてもよい。   When the factor estimating unit 41 estimates that the focused occupant feels stress that the acceleration during acceleration / deceleration is large, the adjustment amount calculation unit 42 decreases the acceleration during acceleration / deceleration. Thus, the allowable maximum value of the acceleration is set (so that the acceleration / deceleration becomes gentle), and the value is output to the engine control ECU and the brake control ECU as a control amount. The engine control ECU and the brake control ECU control the throttle opening and the brake operation amount such that the acceleration during acceleration / deceleration does not exceed the control amount of the maximum allowable value. If the factor estimating unit 41 estimates that the focused occupant is stressed by the magnitude of the acceleration in the lateral direction in the traveling direction, the adjustment amount calculating unit 42 sets the current lateral acceleration to a predetermined gain ( (Smaller than 1), or to an allowable maximum value, and output the adjusted control amount to the automatic driving ECU. The automatic driving ECU calculates an allowable running speed from the curvature of the front running path detected by the camera, and gives a command to the engine control ECU and the brake control ECU so that the running speed becomes equal to or lower than the running speed. When the factor estimation unit 41 estimates that the focused occupant feels stress that the acceleration in the vertical direction is large, the adjustment amount calculation unit 42 determines that the current acceleration in the vertical direction has a predetermined gain (less than 1). ), Or to the maximum allowable value, and outputs the adjusted control amount to the automatic driving ECU. The automatic driving ECU gives a command to the related ECU to reduce the damping rate of the suspension. In addition, using a technique of artificial intelligence, a focused occupant may be able to estimate a factor (behavior of the vehicle) causing the state and adjust a control amount of the factor.

このように、状態を判定したまたは指定された複数の乗員の中から選定し、その乗員に適するように制御量を調整して変更することで、適切に移動体の運転制御を調整する運転制御調整装置100を提供することができ、快適な運転制御を供することができる。また、状態を判定した複数の乗員の中から最も悪い状態の乗員を選定し、その乗員の状態を良くするように制御量を調整することで、特定の人に取って快適な運転制御を行うことができる。また、最高齢や最年少などの状態が変化し易い乗員に適するように制御量を調整することで、特定の人に取って快適な運転制御を行うことができる。また、焦点を当てるべき乗員が予め分かっている場合など事前に特定の乗員等を選定することで、その乗員に適するように制御量を調整することで、快適な運転制御を行うことができる。さらに、複数の焦点を当てた乗員全員に適するように制御量を調整することで、乗員の総体にとって快適な運転制御を行うことができる。   As described above, the operation control that appropriately adjusts the operation control of the moving body by selecting from the plurality of occupants whose status has been determined or designated and adjusting and changing the control amount so as to be suitable for the occupant. The adjusting device 100 can be provided, and comfortable driving control can be provided. Also, by selecting the occupant in the worst state from among the plurality of occupants whose states have been determined and adjusting the control amount so as to improve the state of the occupant, a comfortable driving control for a specific person is performed. be able to. Further, by adjusting the control amount so as to be suitable for an occupant whose state is easily changed, such as the oldest or the youngest, it is possible to perform comfortable driving control for a specific person. Moreover, by selecting a specific occupant or the like in advance when the occupant to be focused on is known in advance, and adjusting the control amount so as to be suitable for the occupant, comfortable driving control can be performed. Furthermore, by adjusting the control amount so as to be suitable for all of the occupants with a plurality of focuses, it is possible to perform comfortable driving control for the entire occupant.

<被搭載体が積載物(モノ)の場合>
車両CRには、乗員以外にもモノである積載物が搭載される場合がある。図1では、複数の種類の積載物1、2が車両CRに搭載されている。積載物1、2にはそれぞれ加速度センサ1、2が取り付けられており、付加されている加速度を測定し、自己の識別子(たとえば、積載物固有の番号、通信識別子のようなMACアドレスなど)と共に測定した加速度の情報を無線送信する。加速度センサ1、2は、たとえば、衝撃センサや振動センサであってもよく、積載物1、2の種類により適宜選択される。また、識別子と実際の積載物の種類との関係を予め登録し、搭載する積載物1、2の種類を認識してもよい。また、積載物1、2は、自己を識別するための標識をRFID(Radio Frequency Identifier)や二次元コードとして備え、リーダやカメラで搭載する積載物1、2の種類を認識してもよい。外部入力部50であるタッチパネルを備える場合には、積載物1、2の種類がタッチパネルに表示されることが好ましく、これにより焦点を当てるべき積載物を選定しやすくなる。
<When the mounted object is a load (thing)>
The vehicle CR may be loaded with a load that is a thing other than the occupant. In FIG. 1, a plurality of types of loads 1 and 2 are mounted on a vehicle CR. Each of the loads 1 and 2 has an acceleration sensor 1 or 2 attached thereto. The acceleration sensor 1 or 2 measures the added acceleration, and together with its own identifier (for example, a MAC address such as a unique number of the load or a communication identifier). The information of the measured acceleration is wirelessly transmitted. The acceleration sensors 1 and 2 may be, for example, impact sensors or vibration sensors, and are appropriately selected depending on the types of the loads 1 and 2. Alternatively, the relationship between the identifier and the actual type of the load may be registered in advance, and the types of the loads 1 and 2 to be mounted may be recognized. Further, the payloads 1 and 2 may include a sign for identifying themselves as an RFID (Radio Frequency Identifier) or a two-dimensional code, and may recognize the type of the payloads 1 and 2 mounted on a reader or a camera. When a touch panel as the external input unit 50 is provided, it is preferable that the types of the loads 1 and 2 are displayed on the touch panel, thereby making it easier to select a load to be focused.

図2に示すように、状態判定部20は、積載物1、2の加速度センサ11からの信号を受信する無線信号受信部27と、加速度データ解析部28と、第二状態判定部29とを備える。積載物1、2と無線信号受信部27と間の通信は、数メートルから十数メートル程度の近距離無線通信である。加速度データ解析部28は、加速度センサ11からきた加速度データについての強さ、長さや頻度を解析する。   As illustrated in FIG. 2, the state determination unit 20 includes a wireless signal reception unit 27 that receives signals from the acceleration sensors 11 of the loads 1 and 2, an acceleration data analysis unit 28, and a second state determination unit 29. Prepare. Communication between the payloads 1 and 2 and the wireless signal receiving unit 27 is short-range wireless communication of about several meters to about several tens of meters. The acceleration data analysis unit 28 analyzes the strength, length, and frequency of the acceleration data from the acceleration sensor 11.

第二状態判定部29は、加速度データ解析部28が行った加速度データの解析結果に基づき各積載物の状態を判定する。具体的には、第二状態判定部29は、加速度センサ11が取得した加速度データの情報がそれぞれの種類の積載物1,2に対して許容される度合いを判定する。たとえば、積載物1が袋詰めのセメントや堅牢な機械部品である場合加速度に対する許容度は大きいが、積載物2が豆腐や精密機器である場合加速度に対する許容度は小さい。車両CRが同時に堅牢な機械部品と精密機器を搭載している場合両者には同じ加速度が付加されることが想定されるが、精密機器の方が、負荷される加速度に対して許容度は小さい。第二状態判定部29は、このような積載物1、2毎の許容される度合いとしての状態を判定する。   The second state determination unit 29 determines the state of each load based on the analysis result of the acceleration data performed by the acceleration data analysis unit 28. Specifically, the second state determination unit 29 determines the degree to which the information of the acceleration data acquired by the acceleration sensor 11 is allowed for each type of the load 1 and 2. For example, when the load 1 is bagged cement or a rigid machine component, the tolerance for acceleration is large, but when the load 2 is tofu or precision equipment, the tolerance for acceleration is small. When the vehicle CR is equipped with robust mechanical parts and precision equipment at the same time, it is assumed that the same acceleration is applied to both, but the precision equipment has a smaller tolerance for the loaded acceleration. . The second state determination unit 29 determines a state as an allowable degree for each of the loads 1 and 2.

選定部30は、状態判定部20が判定した複数の種類の積載物1、2の中から主制御系統の制御量を決定するに当たり焦点を当てる積載物を選定し、そのデータを出力する。選定部30は、モノである積載物に対しては、通常許容度の最も小さい積載物を焦点を当てる積載物として選定する。   The selection unit 30 selects a load to be focused on when determining the control amount of the main control system from the plurality of types of loads 1 and 2 determined by the state determination unit 20, and outputs the data. The selection unit 30 generally selects the load having the smallest tolerance as the load to be focused on, as the load that is an object.

調整部40は、選定した積載物1、2の状態を変更するように運転制御の制御量を調整する。具体的には、調整部40は、選定部30が選定した最も許容度合の小さい状態の種類の積載物の状態を少なくともこれ以上悪くしないように制御量を調整する。要因推定部41は、車両の状況等と焦点を当てた積載物の状態との関係に基づき、車両CRのどのような動きが積載物の状態に影響を与えているのか、その関係の要因を分析する。たとえば、積載物1が所定の周波数の振動が累積的に所定の時間以上になる場合に積載物の品質に影響を与えるような場合、調整部40は、積載物1に対してそのような振動がこれ以上積載物1に付加されないように制御量を調整する。調整部40が行う運転制御の制御量の調整とは、積載物に対しては、たとえば、加速/減速の大きさを変更する、進行方向横方向の加速度の大きさを変更する、ヨーレートを変更する、上下方向の加速度の大きさを変更する、などである。   The adjustment unit 40 adjusts the control amount of the operation control so as to change the state of the selected loads 1 and 2. Specifically, the adjusting unit 40 adjusts the control amount so that the state of the load of the type having the smallest allowable degree selected by the selecting unit 30 is not deteriorated at least any more. The factor estimating unit 41 determines what kind of movement of the vehicle CR affects the state of the load, based on the relationship between the state of the vehicle and the like and the state of the focused load, and determines the factor of the relation. analyse. For example, if the load 1 has a predetermined frequency of vibration that is cumulatively equal to or longer than a predetermined time, which affects the quality of the load, the adjustment unit 40 may control the load 1 for such vibration. Is adjusted so that is not added to the load 1 any more. The adjustment of the control amount of the operation control performed by the adjustment unit 40 refers to, for example, changing the magnitude of the acceleration / deceleration, changing the magnitude of the acceleration in the traveling direction, changing the yaw rate for the load. Or changing the magnitude of the vertical acceleration.

このように、複数種類の積載物の中から選定し、その積載物に適するように制御量を変更することで、適切な運転制御を行うことができる。また、状態を判定した複数種類の積載物の中から最も許容度合の小さい状態の種類の積載物を選定し、その積載物の状態を少なくとも悪くしないように制御量を調整することで、適切な運転制御を行うことができる。   As described above, by selecting from a plurality of types of loads and changing the control amount so as to be suitable for the load, appropriate operation control can be performed. In addition, by selecting a load of the type of the state having the smallest allowable degree from the plurality of types of loads determined in the state and adjusting the control amount so as not to deteriorate the state of the load at least, an appropriate Operation control can be performed.

<被搭載体が乗員と積載物の場合>
上記では、複数の乗員が搭載される場合と複数の種類の積載物が搭載される場合とで別々に述べたが、車両CRに乗員と積載物の両方が搭載される場合も同様である。図1および図2に示すように、情報取得部10は、乗員のための心拍センサ11やカメラ12および積載物のための加速度センサ11を備え、心拍データ記憶部24、画像記憶部21、無線信号受信部27は、それぞれの被搭載体(乗員と積載物)に関するデータを同時に取得する。
<When the mounted object is an occupant and a load>
In the above description, the case where a plurality of occupants are mounted and the case where a plurality of types of loads are mounted are separately described, but the same applies to a case where both the occupants and the loads are mounted on the vehicle CR. As shown in FIGS. 1 and 2, the information acquisition unit 10 includes a heart rate sensor 11 and a camera 12 for an occupant and an acceleration sensor 11 for a load, a heart rate data storage unit 24, an image storage unit 21, The signal receiving unit 27 simultaneously acquires data on each of the mounted bodies (occupants and the load).

状態判定部20は、第一状態判定部26が複数の乗員1〜3の状態を判定し、第二状態判定部29が複数の種類の積載物1、2の状態を判定し、それぞれが選定部30に出力する。図3に示すように、選定部30では、出力対象決定部32が焦点を当てる乗員または積載物のデータや状態を出力するように選択出力部31を制御する。出力対象決定部32は、第一状態判定部26が種々の生体信号から得られる情報を総合的に判定した結果、および、第二状態判定部29が積載物に対する許容度を判定した結果に基づいて、焦点を当てる乗員または積載物を決定する。   In the state determination unit 20, the first state determination unit 26 determines the state of the plurality of occupants 1 to 3, the second state determination unit 29 determines the state of the plurality of types of loads 1, 2, and each of them is selected. Output to the unit 30. As illustrated in FIG. 3, the selection unit 30 controls the selection output unit 31 so that the output target determination unit 32 outputs data or a state of a focused occupant or load. The output target determination unit 32 is based on the result of the first state determination unit 26 comprehensively determining information obtained from various biological signals and the result of the second state determination unit 29 determining the tolerance for the load. To determine which crew or load to focus on.

たとえば、最悪状態の乗員と品質に影響を与えるまでに許容度の小さい積載物が搭載されている場合、出力対象決定部32は、最悪状態の乗員を焦点を当てるべき対象として選択してもよい。また、最高齢の乗員と許容度の小さい高価な積載物がある場合、その乗員に健康上の問題がなければ、出力対象決定部32は、当該積載物を焦点を当てるべき対象として選択してもよい。どのような場合に乗員を選定し、どのような場合に積載物を選定するかは、様々な考え方があり得る。   For example, if a worst-case occupant and a load with a small tolerance before affecting the quality are mounted, the output target determination unit 32 may select the worst-case occupant as a target to be focused. . In addition, when there is the oldest occupant and an expensive cargo with a small tolerance, and the occupant does not have a health problem, the output target determination unit 32 selects the cargo as an object to be focused. Is also good. There are various ways of thinking when to select an occupant and when to select a load.

このように、運転制御調整装置100は、車両CRなどの移動体の複数の被搭載体である乗員や積載物の情報を取得する情報取得部10(測定器10)と、その情報に基づいて、複数の乗員や積載物の状態を判定する状態判定部20と、その乗員や積載物の中から選定する選定部30と、選定した乗員や積載物の状態を変更するように運転制御の制御量を調整する調整部40と、を備える。これによれば、複数の被搭載体の中から選定し、それに適した制御量に変更することで、適切に移動体の運転制御を調整する運転制御調整装置100を提供することができる。   As described above, the operation control adjustment device 100 is based on the information acquisition unit 10 (measurement device 10) that acquires information on the occupants and the load, which are a plurality of mounted objects of a moving object such as the vehicle CR, and the like. A state determination unit 20 that determines the state of a plurality of occupants and the load, a selection unit 30 that selects from the occupants and the load, and control of operation control to change the state of the selected occupant and the load. An adjustment unit 40 for adjusting the amount. According to this, it is possible to provide the operation control adjustment device 100 that appropriately adjusts the operation control of the moving object by selecting from a plurality of mounted objects and changing the control amount to an appropriate control amount.

<運転制御調整方法について>
上述したことは、移動体の運転支援および自動運転の少なくとも一方の運転制御を実行する運転制御システムDCに用いられる運転制御調整方法でもある。以下に、図5乃至図11を参照し、運転制御調整装置100における制御の方法(運転制御調整方法)について説明する。
<About operation control adjustment method>
The above is also an operation control adjustment method used in the operation control system DC that executes at least one of the driving support and the automatic operation of the moving body. Hereinafter, a control method (operation control adjustment method) in the operation control adjustment device 100 will be described with reference to FIGS. 5 to 11.

図5は、運転制御調整装置100の全体処理を示すフローチャートである。なお、フローチャートにおけるSはステップを意味する。運転制御調整装置100は、運転支援または自動運転に設定されると開始する。運転制御調整装置100は、S100において、外部入力部50で使用者から入力があったか否かを検査する。外部入力部50で入力が無かった場合、運転制御調整装置100は、S200において、最悪状態の乗員に対する快適制御を行う。外部入力部50で入力があった場合、外部入力解析部33は、S102において、外部入力部50からの入力を解析する。快適制御とは、乗員の状態がより快適になるように車両の挙動を制御することである。   FIG. 5 is a flowchart illustrating the overall processing of the operation control adjustment device 100. Note that S in the flowchart means a step. The operation control and adjustment device 100 starts when driving assistance or automatic operation is set. In S100, the operation control adjustment device 100 checks whether or not an input has been made by the user through the external input unit 50. If there is no input from the external input unit 50, the driving control adjustment device 100 performs comfortable control for the occupant in the worst state in S200. When there is an input from the external input unit 50, the external input analysis unit 33 analyzes the input from the external input unit 50 in S102. Comfort control is to control the behavior of the vehicle so that the condition of the occupant becomes more comfortable.

外部入力解析部33は、S104において、外部入力部50で入力された焦点を当てるべき対象が乗員か否かを検査する。焦点を当てるべき対象がモノである積載物であった場合、運転制御調整装置100は、S400において、モノに対する快適制御を行う。焦点を当てるべき対象が人である乗員であった場合、運転制御調整装置100は、S106において、車両CRの座席の指定があるか否かを検査する。座席の指定がない場合、運転制御調整装置100は、S200において、乗員ではあるが特定はされなかったのでデフォルト値として最悪状態の乗員に対する快適制御を行う。座席の指定があった場合、運転制御調整装置100は、S300において、指定された乗員に対する快適制御を行う。   In step S104, the external input analysis unit 33 checks whether or not the target to be focused input by the external input unit 50 is an occupant. If the target to be focused on is a load that is a thing, the operation control adjustment device 100 performs comfortable control on the thing in S400. When the target to be focused on is a human occupant, the driving control adjustment device 100 checks in S106 whether the seat of the vehicle CR is designated. When the seat is not specified, the driving control adjustment device 100 performs comfort control for the worst-state occupant as a default value in S200 because the occupant is not specified. When a seat is designated, the driving control adjustment device 100 performs comfortable control for the designated occupant in S300.

図6を参照し、S100において外部入力部50で入力が無かった場合、および、S106において座席の指定がなかった場合の、S200における最悪状態の乗員に対する快適制御の処理を説明する。状態判定部20の画像記憶部21および心拍データ記憶部24は、S201において、測定器10であるカメラ12と心拍センサ11から画像データおよび心拍データを読み込む。そして、状態判定部20は、S202における顔画像特徴量抽出部22/特徴量解析部23および心拍データ解析部25の解析を経て、S204において、第一状態判定部26により顔画像と心拍データから各乗員の状態を判定する。そして、選定部30は、S206において、最悪状態の乗員がどの乗員なのかを決定する。   With reference to FIG. 6, a description will be given of the process of comfort control for the occupant in the worst state in S200 when there is no input from the external input unit 50 in S100 and when no seat is specified in S106. In step S201, the image storage unit 21 and the heart rate data storage unit 24 of the state determination unit 20 read the image data and the heart rate data from the camera 12 and the heart rate sensor 11 that are the measuring devices 10. Then, the state determination unit 20 performs the analysis of the face image feature amount extraction unit 22 / feature amount analysis unit 23 and the heartbeat data analysis unit 25 in S202, and in S204, the first state determination unit 26 converts the face image and the heartbeat data. The state of each occupant is determined. Then, in S206, the selection unit 30 determines which occupant is the worst occupant.

選定部30の出力対象決定部32は、S208において、最悪状態の乗員が許容できる状態を超えているか否かを検査する。なお、ここで許容できる状態とは、たとえば、ストレス値の100が通常の状態だとすると、200以上であれば許容できる状態ではないが、200未満ならば許容できる状態であるとするような場合をいう。許容できる状態以上ではない場合、測定器10は、S201において、次の時点の画像データおよび心拍データを読み込む。乗員のいずれもが許容できる状態にある場合には、運転制御調整装置100は、制御量の調整は行わない。   In S208, the output target determination unit 32 of the selection unit 30 checks whether or not the worst occupant has exceeded the allowable state. Here, the acceptable state refers to, for example, a case where, if the stress value 100 is a normal state, if the stress value is 200 or more, the state is not an acceptable state, but if the stress value is less than 200, the state is an acceptable state. . If the state is not higher than the allowable state, the measuring device 10 reads the image data and the heart rate data at the next time point in S201. When any of the occupants is in an acceptable state, the operation control adjustment device 100 does not adjust the control amount.

乗員のいずれかが許容できる状態以上である場合、運転制御調整装置100は、S210において、運転支援または自動運転中か否かを検査する。運転支援または自動運転中ではない場合、制御量の調整をすることができないので、処理を終了する。運転支援または自動運転中であった場合、調整部40の要因推定部41は、S212において、取得した状態等からそのような状態になった要因を推定する。そして、調整量算出部42は、S214において推定された要因を制御対象に設定し、S216において、その時点での当該制御対象に対する制御量に所定のゲインを乗じた値を制御量として調整し、設定する。そして、調整部40は、S218において、通信バスを介して、制御対象に関連するECUにその制御量を出力する。その後、S208に戻り、S208〜S218を繰り返す。ECUは、調整部40から与えられた制御量となるように制御を行う。そして再度乗員の状態が判定され、未だ許容状態でなければ、調整部40は、さらに現在の制御量に再度所定のゲインを乗じた値を次の目標となる制御量としてECUに出力する。乗員の状態が許容状態となるまで、制御量は何度も所定のゲインが乗じられる。換言すれば、徐々に制御量を変化させて、乗員の状態を許容状態にすることができる。   If any one of the occupants is in an acceptable state or higher, the driving control and adjusting apparatus 100 checks in S210 whether driving assistance or automatic driving is being performed. When the driving support or the automatic driving is not being performed, the control amount cannot be adjusted, and thus the process ends. When driving assistance or automatic driving is being performed, the factor estimating unit 41 of the adjusting unit 40 estimates a factor that has caused such a state from the acquired state or the like in S212. Then, the adjustment amount calculation unit 42 sets the factor estimated in S214 as a control target, and in S216, adjusts a value obtained by multiplying a control amount for the control target at that time by a predetermined gain as a control amount, Set. Then, in S218, the adjustment unit 40 outputs the control amount to the ECU related to the control target via the communication bus. After that, the process returns to S208, and S208 to S218 are repeated. The ECU performs control such that the control amount provided by the adjustment unit 40 is obtained. Then, the state of the occupant is determined again. If the occupant state is not yet an allowable state, the adjusting unit 40 outputs a value obtained by multiplying the current control amount by a predetermined gain again to the ECU as a next target control amount. The control amount is multiplied by a predetermined gain many times until the state of the occupant becomes an allowable state. In other words, by gradually changing the control amount, the state of the occupant can be set to the allowable state.

図7は、図6のS202〜S206をより詳細に説明する例に関するフローチャートである。状態判定部20は、S250において、測定器10からのデータを読み込むなど調整を開始するための条件を整える。第一状態判定部26は、S252において、ステアリングから得たデータである運転者がステアリング操作を行う反力について、そのピーク値、平均、回数の点から解析を行う。そして、第一状態判定部26は、S254において、その反力から運転者の状態を推定する。たとえば、運転者が自動操舵の方向に対して逆方向に反力を強くかけているような場合には、第一状態判定部26は、運転者は緊張していると推定する。   FIG. 7 is a flowchart related to an example for explaining S202 to S206 in FIG. 6 in more detail. In step S250, the state determination unit 20 prepares conditions for starting adjustment, such as reading data from the measuring device 10. In step S252, the first state determination unit 26 analyzes the reaction force, which is the data obtained from the steering, for the driver to perform the steering operation, in terms of the peak value, the average, and the number of times. Then, in S254, the first state determination unit 26 estimates the state of the driver from the reaction force. For example, when the driver is applying a strong reaction force in a direction opposite to the direction of the automatic steering, the first state determination unit 26 estimates that the driver is nervous.

また、第一状態判定部26は、並行してS268において、カメラ12から得た顔画像について瞬きの観点から解析を行う。そして、第一状態判定部26は、S270において、その瞬きの状況から運転者を含む乗員の状態を推定する。たとえば、乗員の一人が頻繁に瞬きを行っているような場合には、第一状態判定部26は、その乗員は緊張していると推定する。   In addition, in S268, the first state determination unit 26 analyzes the face image obtained from the camera 12 from the viewpoint of blinking. Then, in S270, the first state determination unit 26 estimates the state of the occupant including the driver from the state of the blink. For example, when one of the occupants blinks frequently, the first state determination unit 26 estimates that the occupant is nervous.

また、第一状態判定部26は、並行してS272において、カメラ12から得た顔画像について表情の観点から解析を行う。そして、第一状態判定部26は、S274において、その表情から運転者を含む乗員の状態を推定する。たとえば、乗員の一人がこわばった表情をしているような場合には、第一状態判定部26は、その乗員は緊張しているかと推定する。   In addition, in step S272, the first state determination unit 26 analyzes the face image obtained from the camera 12 from the viewpoint of facial expressions. Then, in S274, the first state determination unit 26 estimates the state of the occupant including the driver from the expression. For example, when one of the occupants has a stiff expression, the first state determination unit 26 estimates that the occupant is nervous.

また、第一状態判定部26は、並行してS276において、心拍センサ11から得た心拍データについて解析を行う。そして、第一状態判定部26は、S278において、その心拍データから運転者を含む乗員の状態を推定する。たとえば、乗員の一人の心拍が速くて強いような場合には、第一状態判定部26は、その乗員は緊張していると推定する。   In addition, the first state determination unit 26 analyzes the heart rate data obtained from the heart rate sensor 11 in S276 in parallel. Then, in S278, the first state determination unit 26 estimates the state of the occupant including the driver from the heartbeat data. For example, when one of the occupants has a fast and strong heartbeat, the first state determination unit 26 estimates that the occupant is nervous.

そして、第一状態判定部26は、S256において、ステアリングに対する反力、瞬きの状況、表情、心拍データから推定したそれぞれの状態について、重み付けを行い総合的な運転者を含む乗員の状態を判定する。たとえば、ステアリングの反力と緊張している状況との相関関係が非常に強いことが分かっている場合には、ステアリングの反力に基づいて推定した状態を最も高い係数で、逆に表情と緊張している状況との相関関係はあまり強くないことが分かっている場合には、表情に基づいて推定した状態を低い係数で重み付け計算を行い、乗員は緊張している状態にあるか否かを総合的に判定する。第一状態判定部26は、S258において、総合的な判定によるストレス値が所定のストレス閾値以上か否か検査する。第一状態判定部26は、乗員全員がストレス閾値未満であれば上記処理を繰り返す。   Then, in S256, the first state determination unit 26 weights the respective states estimated from the reaction force against the steering, the state of blinking, the expression, and the heart rate data to determine the state of the occupant including the comprehensive driver. . For example, if it is known that the correlation between the steering reaction force and the nervous situation is very strong, the state estimated based on the steering reaction force is the highest coefficient, and conversely, the expression and the tension are changed. If it is known that the correlation with the situation is not very strong, the state estimated based on the facial expression is weighted with a low coefficient to determine whether the occupant is in a nervous state. Judge comprehensively. In step S258, the first state determination unit 26 checks whether the stress value obtained by the comprehensive determination is equal to or greater than a predetermined stress threshold. The first state determination unit 26 repeats the above processing if all the occupants are less than the stress threshold.

選定部30は、乗員のいずれかのストレス値がストレス閾値以上であれば、S260において、最も高いストレス値を示す乗員に焦点を当てるため選定する。そして、調整部40は、S262において、焦点を当てられた乗員の状態に基づいて、上述したように制御量を調整し、設定する。なお、制御量の設定は、クラウド上のデータと照合し、焦点を当てる乗員の好みの乗り味を設定してもよい。調整部40は、S264において、通信バスを介して、制御対象に関連するECUにその制御量を出力する。運転制御調整装置100は、S266において、自動運転状態が解除されるなど終了条件が満たされる場合は処理を終了し、終了条件が満たされない場合は上記処理を繰り返す。   If any of the stress values of the occupant is equal to or greater than the stress threshold value, the selecting unit 30 selects in S260 to focus on the occupant exhibiting the highest stress value. Then, in S262, the adjustment unit 40 adjusts and sets the control amount as described above, based on the state of the focused occupant. The setting of the control amount may be performed by collating with the data on the cloud and setting a desired riding taste of the occupant to be focused. In step S264, the adjustment unit 40 outputs the control amount to the ECU related to the control target via the communication bus. In S266, the operation control adjustment device 100 ends the process when the termination condition is satisfied, such as when the automatic driving state is released, and repeats the above process when the termination condition is not satisfied.

図8を参照し、S106において外部入力部50で焦点を当てるべき人が座る座席が指定された場合のS300におけるその乗員に対する快適制御について説明する。状態判定部20の画像記憶部21および心拍データ記憶部24は、S301において、測定器10であるカメラ12と心拍センサ11から、指定された座席に座る乗員の画像データおよび心拍データを読み込む。そして、状態判定部20は、S302における顔画像特徴量抽出部22/特徴量解析部23および心拍データ解析部25の解析を経て、S304において、第一状態判定部26により顔画像と心拍データからその乗員の状態を判定する。   With reference to FIG. 8, a description will be given of the comfort control for the occupant in S300 when a seat where a person to be focused is designated by the external input unit 50 in S106 is specified. In step S301, the image storage unit 21 and the heart rate data storage unit 24 of the state determination unit 20 read the image data and the heart rate data of the occupant sitting on the designated seat from the camera 12 and the heart rate sensor 11 that are the measuring devices 10. Then, the state determination unit 20 performs the analysis of the face image feature amount extraction unit 22 / feature amount analysis unit 23 and the heartbeat data analysis unit 25 in S302, and in S304, the first state determination unit 26 converts the face image and the heartbeat data. The state of the occupant is determined.

選定部30の出力対象決定部32は、S306において、その座席の乗員が許容できる状態を超えているか否かを検査する。許容できる状態以上ではない場合、測定器10は、S301において、次の時点の画像データおよび心拍データを読み込む。その乗員が許容できる状態にある場合には、運転制御調整装置100は、制御量の調整は行わない。   In S306, the output target determination unit 32 of the selection unit 30 checks whether or not the occupant of the seat has exceeded an allowable state. If the state is not higher than the allowable state, the measuring device 10 reads the image data and the heart rate data at the next time point in S301. When the occupant is in an acceptable state, the operation control adjustment device 100 does not adjust the control amount.

乗員のいずれかが許容ない状態である場合、運転制御調整装置100は、S308において、運転支援または自動運転中か否かを検査する。運転支援または自動運転中ではない場合、制御量の調整をすることができないので、処理を終了する。運転支援または自動運転中であった場合、調整部40の要因推定部41は、S310において、取得した状態等からそのような状態になった要因を推定する。以降の処理のS312〜S316は、上述したS214〜218と同じなので、説明を省略する。   If any one of the occupants is in an unacceptable state, the driving control adjustment device 100 checks in S308 whether driving assistance or automatic driving is being performed. When the driving support or the automatic driving is not being performed, the control amount cannot be adjusted, and thus the process ends. When driving assistance or automatic driving is being performed, the factor estimating unit 41 of the adjusting unit 40 estimates a factor that has caused such a state from the acquired state or the like in S310. Steps S312 to S316 in the subsequent processing are the same as steps S214 to S218 described above, and a description thereof will be omitted.

図9は、図8のS302〜S304をより詳細に説明する例に関するフローチャートである。状態判定部20は、S350において、測定器10からのデータを読み込むなど調整を開始するための条件を整える。運転制御調整装置100が外部入力部50から入力があると検知すると、選定部30は、S351において、外部入力部50で指定された座席に座る焦点を当てるべき乗員を選定する。   FIG. 9 is a flowchart related to an example for explaining S302 to S304 in FIG. 8 in more detail. In step S350, the state determination unit 20 prepares conditions for starting adjustment such as reading data from the measuring device 10. When the operation control adjustment device 100 detects that there is an input from the external input unit 50, the selection unit 30 selects an occupant to be focused on the seat designated by the external input unit 50 in S351.

第一状態判定部26は、S352において、ステアリングから得たデータである運転者がステアリング操作を行う反力について、そのピーク値、平均、回数の点から解析を行う。そして、第一状態判定部26は、S354において、その反力から運転者の状態を推定する。たとえば、運転者が自動操舵の方向に対して逆方向に反力を強くかけているような場合には、第一状態判定部26は、運転者は緊張していると推定する。この後の処理のS356〜S378は、S256〜S278(S260を除く)と同じなので、説明を省略する。   In step S352, the first state determination unit 26 analyzes the reaction force, which is the data obtained from the steering, for performing the steering operation by the driver from the points of the peak value, the average, and the number of times. Then, in S354, the first state determination unit 26 estimates the driver's state from the reaction force. For example, when the driver is applying a strong reaction force in a direction opposite to the direction of the automatic steering, the first state determination unit 26 estimates that the driver is nervous. Steps S356 to S378 in the subsequent processing are the same as steps S256 to S278 (excluding S260), and a description thereof will be omitted.

図10を参照し、S104において焦点を当てるべき対象がモノである積載物であった場合の、S400における積載物(モノ)に対する快適制御について説明する。無線信号受信部27は、S401において、積載物の識別子とその積載物に付された加速度センサ11において測定された加速度の情報を無線で読み込む。加速度データ解析部28は、加速度センサ11からきた加速度データについての強さ、長さや頻度を解析し、第二状態判定部29は、S402において、加速度データ解析部28が行った加速度データの解析結果に基づき、それぞれの積載物に許される加速度以上の加速度が付加されているか否かを判定する。   With reference to FIG. 10, comfort control for a load (thing) in S400 when the target to be focused on in S104 is a load that is a thing will be described. In step S401, the wireless signal receiving unit 27 wirelessly reads information on the identifier of the load and the acceleration measured by the acceleration sensor 11 attached to the load. The acceleration data analysis unit 28 analyzes the strength, length, and frequency of the acceleration data from the acceleration sensor 11, and the second state determination unit 29 performs the analysis of the acceleration data performed by the acceleration data analysis unit 28 in S402. Then, it is determined whether or not an acceleration equal to or greater than the acceleration allowed for each load is applied.

積載物について許容される加速度がどの程度なのかは、積載物の識別子をクラウド上のデータと照合して設定してもよいし、積載物をカメラ12で撮像した画像に基づいて、画像認識により積載物の種類を判別することで設定してもよい。許容状態未満であれば、加速度の情報を読み込むことを繰り返す。   How much acceleration is allowed for the load may be set by comparing the identifier of the load with data on the cloud, or by image recognition based on an image of the load captured by the camera 12. The setting may be made by determining the type of the load. If less than the allowable state, reading of the acceleration information is repeated.

許容状態以上の加速度が付加されている積載物があれば、S404において、運転支援または自動運転中か否かを検査する。運転支援または自動運転中ではない場合、処理は終了される。運転支援または自動運転中であった場合、調整部40の要因推定部41は、S406において、許容状態以上の加速度が付加されている積載物について、その状態等からそのような状態になった要因を推定する。たとえば、進行方向の加速度の大きさが許容できる状態を超えてしまったのか、上下方向の加速度の大きさが許容できる状態を超えてしまったのか、進行方向横方向の加速度の大きさが許容できる状態を超えてしまったのかなどを推定する。   If there is a load to which the acceleration equal to or higher than the allowable state is added, it is checked in S404 whether driving assistance or automatic driving is being performed. If it is not during driving assistance or automatic driving, the process is terminated. In the case of driving assistance or automatic driving, the factor estimating unit 41 of the adjusting unit 40 determines in S406 that the loaded object to which the acceleration equal to or more than the allowable state has been added from the state or the like to the loaded state. Is estimated. For example, whether the magnitude of the acceleration in the traveling direction has exceeded the allowable state, whether the magnitude of the vertical acceleration has exceeded the allowable state, or the magnitude of the lateral acceleration in the traveling direction is acceptable. Estimate whether the state has been exceeded.

そして、調整量算出部42は、S408において推定された要因を制御対象に設定し、S410において、その時点での当該制御対象に対する制御量に所定のゲインを乗じた値を制御量として調整し、設定する。たとえば、許容状態以上の加速度を検出した積載物にとって、車両前後方向の加速度が許容できない加速度であると推定された場合、調整量算出部42は、加速度の許容最大値を設定して、その値を制御量としてエンジン制御ECUやブレーキ制御ECUに出力する。そして、調整部40は、S412において、通信バスを介して、制御対象に関連するECUにその制御量を出力する。エンジン制御ECUやブレーキ制御ECUは、加速/減速時の加速度が許容最大値の制御量を超えないように、スロットル開度やブレーキ操作量などを制御する。その後、S402に戻り、S401〜S402を繰り返す。   Then, the adjustment amount calculation unit 42 sets the factor estimated in S408 as a control target, and in S410, adjusts a value obtained by multiplying the control amount for the control target at that time by a predetermined gain as a control amount, Set. For example, when it is estimated that the acceleration in the vehicle longitudinal direction is an unacceptable acceleration for a load that has detected an acceleration equal to or higher than the allowable state, the adjustment amount calculation unit 42 sets an allowable maximum value of the acceleration, Is output to the engine control ECU and the brake control ECU as a control amount. Then, in S412, the adjustment unit 40 outputs the control amount to the ECU related to the control target via the communication bus. The engine control ECU and the brake control ECU control the throttle opening, the brake operation amount, and the like so that the acceleration during acceleration / deceleration does not exceed the control amount of the allowable maximum value. After that, the process returns to S402, and S401 to S402 are repeated.

図11は、外部入力部50で特定の積載物を指定する例を示す。選定部30は、S450において、外部入力部50で入力があることを検出する。選定部30は、S452において、外部入力部50で指定された積載物を選定する。選定された積載物に対して、調整部40は、S454において、たとえばクラウド上のデータと照合してその積載物にとって最適な値を取得し、制御量として設定する。要因推定部41は、S456において、車両センサ群からリアルタイムの加速度データを取得して、加減速データによる進行方向の加速度、ステアリングのデータによる横方向の加速度、凸凹道走行による上下方向の加速度などの外乱について判定を行う。   FIG. 11 shows an example in which a specific load is specified by the external input unit 50. In step S450, the selection unit 30 detects that there is an input from the external input unit 50. The selection unit 30 selects the load specified by the external input unit 50 in S452. In step S454, the adjustment unit 40 obtains an optimum value for the selected load by comparing it with, for example, data on the cloud, and sets the value as a control amount. In S456, the factor estimating unit 41 acquires real-time acceleration data from the vehicle sensor group, and calculates the acceleration in the traveling direction based on the acceleration / deceleration data, the lateral acceleration based on the steering data, the vertical acceleration based on the uneven road running, and the like. Judgment is made for disturbance.

第二状態判定部29は、このような外乱要因を加味したうえで、S458において、加速度データ解析部28が行った加速度データの解析結果に基づき、それぞれの積載物に許される加速度以上の加速度が付加されているか否かを判定する。許容状態以上の加速度が付加されている積載物があれば、調整部40は、S460において、通信バスを介して、制御対象に関連するECUにその制御量を出力する。許容状態未満であれば、S454に戻り、S454〜S458を繰り返す。   The second state determination unit 29 takes into account such a disturbance factor, and in S458, based on the analysis result of the acceleration data performed by the acceleration data analysis unit 28, the acceleration equal to or higher than the acceleration allowed for each load. It is determined whether or not it has been added. If there is a load to which the acceleration equal to or higher than the allowable state is added, the adjustment unit 40 outputs the control amount to the ECU related to the control target via the communication bus in S460. If it is less than the allowable state, the process returns to S454, and S454 to S458 are repeated.

上述したように、運転制御調整方法は、車両CRなどの移動体の運転支援および自動運転の少なくとも一方の運転制御を実行する運転制御システムに用いられる方法であって、移動体の複数の乗員や積載物などの被搭載体の情報を取得し、取得した情報に基づいて、複数の被搭載体の状態を判定し、状態を判定したまたは指定した複数の被搭載体の中から選定し、選定した被搭載体の状態を変更するように運転制御の制御量を調整する方法である。このように、複数の被搭載体の中から選定し、それに適した制御量に変更することで、適切に移動体の運転制御を調整する運転制御調整方法を提供することができる。   As described above, the driving control adjustment method is a method used in a driving control system that performs at least one of driving support and automatic driving of a mobile body such as a vehicle CR, and includes a plurality of occupants of the mobile body. Acquires information on the mounted object such as a load, determines the state of the plurality of mounted objects based on the obtained information, and selects and selects from among the determined or specified multiple mounted objects. This is a method of adjusting the control amount of the operation control so as to change the state of the mounted body. As described above, by selecting from a plurality of mounted objects and changing the control amount to an appropriate control amount, it is possible to provide an operation control adjustment method for appropriately adjusting the operation control of the moving object.

なお、本発明は、例示した実施例に限定するものではなく、特許請求の範囲の各項に記載された内容から逸脱しない範囲の構成による実施が可能である。すなわち、本発明は、主に特定の実施形態に関して特に図示され、かつ説明されているが、本発明の技術的思想および目的の範囲から逸脱することなく、以上述べた実施形態に対し、数量、その他の詳細な構成において、当業者が様々な変形を加えることができるものである。   It should be noted that the present invention is not limited to the illustrated embodiment, and can be implemented with a configuration that does not deviate from the contents described in the claims. That is, the present invention has been particularly shown and described with particular reference to particular embodiments thereof, but without departing from the spirit and purpose of the invention, Those skilled in the art can make various modifications in other detailed configurations.

100 運転制御調整装置
10 測定器(情報取得部)
11 センサ
12 カメラ(撮像装置)
20 状態判定部
21 画像記憶部
22 顔画像特徴量抽出部
23 特徴量解析部
24 心拍データ記憶部
25 心拍データ解析部
26 第一状態判定部
27 無線信号受信部
28 加速度データ解析部
29 第二状態判定部
30 選定部
31 選択出力部
32 出力対象決定部
33 外部入力解析部
40 調整部
50 外部入力部
CR 車両(移動体)
DC 運転制御システム
100 operation control adjustment device 10 measuring device (information acquisition unit)
11 sensor 12 camera (imaging device)
Reference Signs List 20 state determination unit 21 image storage unit 22 face image feature amount extraction unit 23 feature amount analysis unit 24 heart rate data storage unit 25 heart rate data analysis unit 26 first state determination unit 27 wireless signal reception unit 28 acceleration data analysis unit 29 second state Judgment unit 30 Selection unit 31 Selection output unit 32 Output target determination unit 33 External input analysis unit 40 Adjustment unit 50 External input unit CR Vehicle (mobile)
DC operation control system

上記課題を解決するために、移動体の運転支援および自動運転の少なくとも一方の運転制御を実行する運転制御システムに用いられる運転制御調整装置であって、移動体に積載された複数種類の積載物と該積載物の加速度の情報を取得する情報取得部と、情報取得部が取得した加速度の情報がそれぞれの種類の積載物に対して許容される度合いを判定する状態判定部と、状態判定部が判定した複数種類の積載物の中から最も許容度合の小さい状態の種類の積載物を選定する選定部と、選定部が選定した最も許容度合の小さい状態の種類の積載物の状態を少なくとも悪くしないように運転制御の制御量を調整する調整部と、を備える運転制御調整装置が提供される。
これによれば、状態を判定した複数種類の積載物の中から最も許容度合の小さい状態の種類の積載物を選定し、その積載物の状態を少なくとも悪くしないように制御量を調整することで、適切に移動体の運転制御を調整する運転制御調整装置を提供することができる。
In order to solve the above-mentioned problem, an operation control adjustment device used in an operation control system that performs at least one of driving support and automatic operation of a moving body , and includes a plurality of types of loads loaded on the moving body An information acquisition unit that acquires information on the acceleration of the load , a state determination unit that determines a degree to which the information on the acceleration acquired by the information acquisition unit is allowed for each type of load, and a state determination unit. A selection unit that selects the type of the load having the smallest allowable degree from the plurality of types of the load determined by the above, and the state of the type of the load having the minimum allowable degree selected by the selection unit is at least poor. An operation control adjustment device including: an adjustment unit that adjusts a control amount of operation control so as not to perform the operation control.
According to this, the load of the type of the state having the smallest allowable degree is selected from the plurality of types of loads whose states have been determined, and the control amount is adjusted so that the state of the load is not deteriorated at least. Accordingly, it is possible to provide an operation control adjustment device that appropriately adjusts the operation control of the moving body.

上記課題を解決するために、移動体の運転支援および自動運転の少なくとも一方の運転制御を実行する運転制御システムに用いられる運転制御調整装置であって、移動体の1人以上の乗員の生体信号および移動体に積載された1つ以上の種類の積載物と該積載物の加速度の情報を取得する情報取得部と、情報取得部が取得した生体信号の状態を判定および加速度の情報がそれぞれの種類の積載物に対して許容される度合いを判定する状態判定部と、状態判定部が判定した1人以上の乗員の中から最も悪い状態の乗員または1つ以上の種類の積載物の中から最も許容度合の小さい状態の種類の積載物を選定する選定部と、選定部が選定した最も悪い状態の乗員または最も許容度合の小さい状態の種類の積載物を少なくとも悪くしないように運転制御の制御量を調整する調整部と、を備える運転制御調整装置が提供される。An object of the present invention is to provide a driving control system used in a driving control system that performs at least one of driving support and automatic driving of a moving body, wherein a biological signal of at least one occupant of the moving body is provided. And an information acquisition unit for acquiring information of one or more types of loads and an acceleration of the load loaded on the moving object, and determining the state of the biological signal acquired by the information acquisition unit and determining the information of the acceleration. A state determination unit that determines the degree of acceptability for the type of load, and a state determination unit that determines the worst state occupant or one or more types of load among the one or more occupants determined by the state determination unit. A selection unit that selects the load of the type with the least permissive degree, and operation so that the occupant in the worst state selected by the selection unit or the load of the type with the least permissive degree is not deteriorated at least. Operation control adjustment device is provided with an adjustment unit for adjusting the control amount of the control, the.
これによれば、状態を判定した乗員と積載物の中から最も悪い状態の乗員または最も許容度合の小さい状態の種類の積載物を選定し、これらの状態を少なくとも悪くしないように運転制御の制御量を調整することで、適切に移動体の運転制御を調整する運転制御調整装置を提供することができる。According to this, an occupant in the worst state or a load of the type of the state having the smallest allowable degree is selected from the occupant and the load which have determined the state, and control of the operation control is performed so that these states are at least not deteriorated. By adjusting the amount, an operation control adjustment device that appropriately adjusts the operation control of the moving object can be provided.

上記課題を解決するために、移動体の運転支援および自動運転の少なくとも一方の運転制御を実行する運転制御システムに用いられる運転制御調整方法であって、移動体に積載された複数種類の積載物と該積載物の加速度の情報を取得し、取得した加速度の情報がそれぞれの種類の積載物に対して許容される度合いを判定し、状態を判定した複数種類の積載物の中から最も許容度合の小さい状態の種類の積載物を選定し、選定した最も許容度合の小さい状態の種類の積載物の状態を少なくとも悪くしないように運転制御の制御量を調整する、運転制御調整方法が提供される。
これによれば、状態を判定した複数種類の積載物の中から最も許容度合の小さい状態の種類の積載物を選定し、その積載物の状態を少なくとも悪くしないように制御量を調整することで、適切に移動体の運転制御を調整する運転制御調整方法を提供することができる。
In order to solve the above-mentioned problem, an operation control adjustment method used in an operation control system that performs at least one of driving support and automatic operation of a moving body is provided, and a plurality of types of loads loaded on the moving body are provided. And the information on the acceleration of the load is obtained, the degree of the obtained information on the acceleration is permitted for each type of load, and the allowable degree is determined from the plurality of types of the loads determined in the state. The operation control adjustment method is provided for selecting a load of a type with a small state of the load and adjusting a control amount of the operation control so as to at least not deteriorate the state of the load of the type of the state with the smallest allowable degree. .
According to this, the load of the type of the state having the smallest allowable degree is selected from the plurality of types of loads whose states have been determined, and the control amount is adjusted so that the state of the load is not deteriorated at least. In addition, it is possible to provide an operation control adjustment method for appropriately adjusting the operation control of the moving body.

Claims (9)

移動体の運転支援および自動運転の少なくとも一方の運転制御を実行する運転制御システムに用いられる運転制御調整装置であって、
前記移動体の複数の被搭載体の情報を取得する情報取得部と、
前記情報取得部が取得した情報に基づいて、前記複数の被搭載体の状態を判定する状態判定部と、
前記複数の被搭載体の中から選定する選定部と、
前記選定部が選定した前記被搭載体の状態を変更するように運転制御の制御量を調整する調整部と、
を備える運転制御調整装置。
A driving control adjustment device used in a driving control system that performs at least one driving control of driving support and automatic driving of a moving body,
An information acquisition unit that acquires information on a plurality of mounted bodies of the moving body,
Based on the information acquired by the information acquisition unit, a state determination unit that determines the state of the plurality of mounted objects,
A selection unit that selects from the plurality of mounted bodies,
An adjustment unit that adjusts a control amount of operation control so as to change a state of the mounted body selected by the selection unit,
An operation control adjustment device comprising:
前記被搭載体は、前記移動体の乗員であることを特徴とする請求項1に記載の運転制御調整装置。   The operation control adjustment device according to claim 1, wherein the mounted body is an occupant of the moving body. 前記情報取得部は、前記複数の乗員の生体信号を取得し、
前記状態判定部は、前記情報取得部が取得した前記複数の乗員の生体信号の状態を判定し、
前記選定部は、前記状態判定部が判定した前記複数の乗員の中から最も悪い状態の乗員を選定し、
前記調整部は、前記選定部が選定した前記最も悪い状態の乗員の状態を良くするように制御量を調整する、
ことを特徴とする請求項2に記載の運転制御調整装置。
The information acquisition unit acquires the biological signals of the plurality of occupants,
The state determination unit determines the state of the biological signal of the plurality of occupants acquired by the information acquisition unit,
The selecting unit selects the worst occupant from the plurality of occupants determined by the state determination unit,
The adjustment unit adjusts the control amount so as to improve the state of the worst occupant selected by the selection unit.
The operation control adjustment device according to claim 2, wherein:
前記情報取得部は、少なくとも前記複数の乗員の顔画像を撮像する撮像装置を含み、
前記状態判定部は、前記撮像装置が撮像した顔画像に基づいて推定年齢を出力し、
前記選定部は、前記状態判定部が出力した推定年齢に基づいて、最も小さいまたは大きい推定年齢の乗員を選定し、
前記調整部は、前記選定部が選定した前記最も小さいまたは大きい推定年齢の乗員の状態を少なくとも悪くしないように制御量を調整する、
ことを特徴とする請求項2に記載の運転制御調整装置。
The information acquisition unit includes an imaging device that captures at least a face image of the plurality of occupants,
The state determination unit outputs an estimated age based on the face image captured by the imaging device,
The selection unit, based on the estimated age output by the state determination unit, to select a passenger with the smallest or the largest estimated age,
The adjusting unit adjusts the control amount so that the state of the occupant of the smallest or large estimated age selected by the selecting unit is not deteriorated at least.
The operation control adjustment device according to claim 2, wherein:
使用者からの入力を受け付ける外部入力部をさらに有し、
前記選定部は、前記外部入力部で指示された一の前記移動体の乗員を選定し、
前記調整部は、前記選定部が選定した乗員の状態を少なくとも悪くしないように制御量を調整する、
ことを特徴とする請求項2に記載の運転制御調整装置。
Further comprising an external input unit for receiving input from the user,
The selecting unit selects an occupant of one of the moving objects specified by the external input unit,
The adjustment unit adjusts the control amount so as not to worsen the state of the occupant selected by the selection unit at least.
The operation control adjustment device according to claim 2, wherein:
前記情報取得部は、前記複数の乗員の生体信号を取得し、
前記状態判定部は、前記情報取得部が取得した前記複数の乗員の生体信号の状態を判定し、
前記選定部は、前記移動体の乗員の全員を選定し、
前記調整部は、前記選定部が選定した前記移動体の乗員全員の状態の平均を少なくとも悪くしないように制御量を調整する、
ことを特徴とする請求項2に記載の運転制御調整装置。
The information acquisition unit acquires the biological signals of the plurality of occupants,
The state determination unit determines the state of the biological signal of the plurality of occupants acquired by the information acquisition unit,
The selecting unit selects all the occupants of the moving body,
The adjustment unit adjusts the control amount so that at least the average of the states of all the occupants of the moving object selected by the selection unit is not deteriorated.
The operation control adjustment device according to claim 2, wherein:
前記被搭載体は、前記移動体に積載された複数種類の積載物であることを特徴とする請求項1に記載の運転制御調整装置。   The operation control adjustment device according to claim 1, wherein the mounted body is a plurality of types of loads mounted on the moving body. 前記情報取得部は、前記複数種類の積載物と該積載物の加速度の情報を取得し、
前記状態判定部は、前記情報取得部が取得した加速度情報がそれぞれの種類の積載物に対して許容される度合いを判定し、
前記選定部は、前記状態判定部が判定した前記複数種類の積載物の中から最も許容度合の小さい状態の種類の積載物を選定し、
前記調整部は、前記選定部が選定した前記最も許容度合の小さい状態の種類の積載物の状態を少なくとも悪くしないように制御量を調整する、
ことを特徴とする請求項7に記載の運転制御調整装置。
The information acquisition unit acquires information on the plurality of types of loads and acceleration of the loads,
The state determination unit determines the degree to which the acceleration information acquired by the information acquisition unit is allowed for each type of load,
The selecting unit selects a load of the type of the state having the smallest allowable degree from the plurality of types of the loads determined by the state determination unit,
The adjusting unit adjusts the control amount so as not to deteriorate at least the state of the load of the type of the state having the smallest allowable degree selected by the selecting unit.
The operation control adjustment device according to claim 7, wherein:
移動体の運転支援および自動運転の少なくとも一方の運転制御を実行する運転制御システムに用いられる運転制御調整方法であって、
前記移動体の複数の被搭載体の情報を取得し、
取得した情報に基づいて、前記複数の被搭載体の状態を判定し、
状態を判定した前記複数の被搭載体の中から選定し、
選定した前記被搭載体の状態を変更するように運転制御の制御量を調整する、
運転制御調整方法。
A driving control adjustment method used in a driving control system that performs at least one driving control of driving support and automatic driving of a moving body,
Obtaining information of a plurality of mounted objects of the moving body,
Based on the acquired information, determine the state of the plurality of mounted objects,
Select from the plurality of mounted bodies whose status has been determined,
Adjusting the control amount of the operation control so as to change the state of the selected mounted body,
Operation control adjustment method.
JP2018156590A 2018-08-23 2018-08-23 Operation control adjustment device and operation control adjustment method Active JP6645543B1 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2018156590A JP6645543B1 (en) 2018-08-23 2018-08-23 Operation control adjustment device and operation control adjustment method
PCT/JP2019/031792 WO2020039993A1 (en) 2018-08-23 2019-08-13 Driving control adjustment device and driving control adjustment method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2018156590A JP6645543B1 (en) 2018-08-23 2018-08-23 Operation control adjustment device and operation control adjustment method

Publications (2)

Publication Number Publication Date
JP6645543B1 JP6645543B1 (en) 2020-02-14
JP2020029210A true JP2020029210A (en) 2020-02-27

Family

ID=69568068

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018156590A Active JP6645543B1 (en) 2018-08-23 2018-08-23 Operation control adjustment device and operation control adjustment method

Country Status (2)

Country Link
JP (1) JP6645543B1 (en)
WO (1) WO2020039993A1 (en)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022123998A1 (en) * 2020-12-09 2022-06-16 株式会社デンソー Vehicle assistance device and vehicle assistance method
WO2023209847A1 (en) * 2022-04-27 2023-11-02 三菱電機株式会社 Input/output device
DE102023124752A1 (en) 2022-09-20 2024-03-21 Subaru Corporation INFORMATION PROCESSING DEVICE AND VEHICLE
JP7461756B2 (en) 2020-02-25 2024-04-04 日野自動車株式会社 Vehicle control device and vehicle control method

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016018474A (en) * 2014-07-10 2016-02-01 大日本印刷株式会社 Vehicle control system, vehicle control program and vehicle information provision server
JP2016052881A (en) * 2014-09-03 2016-04-14 株式会社デンソー Travel control system for vehicle
JP2017204015A (en) * 2016-05-09 2017-11-16 株式会社東海理化電機製作所 Driving assistance device
JP2017220096A (en) * 2016-06-09 2017-12-14 株式会社デンソー Driving support system for vehicle
JP2018008575A (en) * 2016-07-12 2018-01-18 株式会社デンソー Vehicle control device
JP2018026109A (en) * 2016-08-10 2018-02-15 トヨタ自動車株式会社 Personalized medical emergency autopilot system based on portable medical device data
JP2018106490A (en) * 2016-12-27 2018-07-05 トヨタ自動車株式会社 Automatic driving device

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016018474A (en) * 2014-07-10 2016-02-01 大日本印刷株式会社 Vehicle control system, vehicle control program and vehicle information provision server
JP2016052881A (en) * 2014-09-03 2016-04-14 株式会社デンソー Travel control system for vehicle
JP2017204015A (en) * 2016-05-09 2017-11-16 株式会社東海理化電機製作所 Driving assistance device
JP2017220096A (en) * 2016-06-09 2017-12-14 株式会社デンソー Driving support system for vehicle
JP2018008575A (en) * 2016-07-12 2018-01-18 株式会社デンソー Vehicle control device
JP2018026109A (en) * 2016-08-10 2018-02-15 トヨタ自動車株式会社 Personalized medical emergency autopilot system based on portable medical device data
JP2018106490A (en) * 2016-12-27 2018-07-05 トヨタ自動車株式会社 Automatic driving device

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7461756B2 (en) 2020-02-25 2024-04-04 日野自動車株式会社 Vehicle control device and vehicle control method
WO2022123998A1 (en) * 2020-12-09 2022-06-16 株式会社デンソー Vehicle assistance device and vehicle assistance method
JP7439738B2 (en) 2020-12-09 2024-02-28 株式会社デンソー Vehicle support device and vehicle support method
WO2023209847A1 (en) * 2022-04-27 2023-11-02 三菱電機株式会社 Input/output device
DE102023124752A1 (en) 2022-09-20 2024-03-21 Subaru Corporation INFORMATION PROCESSING DEVICE AND VEHICLE

Also Published As

Publication number Publication date
JP6645543B1 (en) 2020-02-14
WO2020039993A1 (en) 2020-02-27

Similar Documents

Publication Publication Date Title
WO2020039993A1 (en) Driving control adjustment device and driving control adjustment method
US10867218B2 (en) Biometric sensor fusion to classify vehicle passenger state
US20210009149A1 (en) Distractedness sensing system
DE102018207069B4 (en) Method and control unit for operating an autonomous vehicle
JP6575934B2 (en) Vehicle driving support system and vehicle driving support method
CN106462027B (en) Method for controlling a vehicle system in a motor vehicle
CN107531236A (en) Wagon control based on occupant
CN109263645A (en) For adjusting the method and system and motor vehicle of the operating parameter of motor vehicle
WO2021145131A1 (en) Information processing device, information processing system, information processing method, and information processing program
CN115151469A (en) Passenger state modulation system of passenger vehicle based on prediction and preemptive control
US20210154430A1 (en) Systems and methods for predicting and preventing motion sickness
US20220242417A1 (en) Operational Assistance Method for a Vehicle, Control Unit, and Vehicle
CN113795416A (en) Method for predicting and mitigating interference caused by motion sickness
CN110155072A (en) Carsickness-proof method and device for preventing car sickness
CN113491519A (en) Digital assistant based on emotion-cognitive load
JP6575933B2 (en) Vehicle driving support system
JP2016137871A (en) Vehicular occupant feeling correspondence control device
WO2020039994A1 (en) Car sharing system, driving control adjustment device, and vehicle preference matching method
JP2020103462A (en) Emotion estimation device, environment providing system, vehicle, emotion estimation method, and information processing program
JP6648788B1 (en) Operation control adjustment device and operation control adjustment method
JP2019207544A (en) Travel control device, travel control method, and travel control program
JP7443908B2 (en) Control device, information processing system, and control method
EP3435291A1 (en) Emotion determination system, system, and program
CN112829755A (en) System and method for recognizing state of passenger through pressure distribution of foot position of passenger
WO2022230629A1 (en) Electronic device, control method for electronic device, and program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20180905

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A711

Effective date: 20190311

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190730

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190813

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20191210

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20191223

R150 Certificate of patent or registration of utility model

Ref document number: 6645543

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150