WO2019131485A1 - 記憶装置及び興奮抑制装置 - Google Patents

記憶装置及び興奮抑制装置 Download PDF

Info

Publication number
WO2019131485A1
WO2019131485A1 PCT/JP2018/047182 JP2018047182W WO2019131485A1 WO 2019131485 A1 WO2019131485 A1 WO 2019131485A1 JP 2018047182 W JP2018047182 W JP 2018047182W WO 2019131485 A1 WO2019131485 A1 WO 2019131485A1
Authority
WO
WIPO (PCT)
Prior art keywords
excitement
degree
level
feature amount
driver
Prior art date
Application number
PCT/JP2018/047182
Other languages
English (en)
French (fr)
Inventor
靖之 野田
山崎　博司
Original Assignee
パイオニア株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by パイオニア株式会社 filed Critical パイオニア株式会社
Priority to JP2019561633A priority Critical patent/JP6963632B2/ja
Priority to EP18894933.3A priority patent/EP3716013A4/en
Priority to US16/958,574 priority patent/US11430230B2/en
Publication of WO2019131485A1 publication Critical patent/WO2019131485A1/ja

Links

Images

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • A61B5/1126—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb using a particular sensing technique
    • A61B5/1128—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb using a particular sensing technique using image analysis
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/16—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/165—Evaluating the state of mind, e.g. depression, anxiety
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/16—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/18—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state for vehicle drivers or machine operators
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/68—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
    • A61B5/6887—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient mounted on external non-worn devices, e.g. non-medical devices
    • A61B5/6893—Cars
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/72—Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7235—Details of waveform analysis
    • A61B5/7264—Classification of physiological signals or data, e.g. using neural networks, statistical classifiers, expert systems or fuzzy systems
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B60W40/09—Driving style or behaviour
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W60/00—Drive control systems specially adapted for autonomous road vehicles
    • B60W60/005—Handover processes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/59—Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • G06V20/597—Recognising the driver's state or behaviour, e.g. attention or drowsiness
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2503/00—Evaluating a particular growth phase or type of persons or animals
    • A61B2503/20—Workers
    • A61B2503/22—Motor vehicles operators, e.g. drivers, pilots, captains
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B60W2040/0872—Driver physiology
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2420/00—Indexing codes relating to the type of sensors based on the principle of their operation
    • B60W2420/40—Photo, light or radio wave sensitive means, e.g. infrared sensors
    • B60W2420/403—Image sensing, e.g. optical camera
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2420/00—Indexing codes relating to the type of sensors based on the principle of their operation
    • B60W2420/54—Audio sensitive means, e.g. ultrasound
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00—Input parameters relating to occupants
    • B60W2540/223—Posture, e.g. hand, foot, or seat position, turned or inclined
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/01—Indexing scheme relating to G06F3/01
    • G06F2203/011—Emotion or mood input determined on the basis of sensed human body parameters such as pulse, heart rate or beat, temperature of skin, facial expressions, iris, voice pitch, brain activity patterns
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/16—Anti-collision systems

Definitions

  • the present invention relates to a storage device, for example, a storage device capable of storing information on the degree of excitement of a user, and an excitement suppression apparatus using the same.
  • Patent Document 1 it is determined whether the user moves the body according to the music by comparing the beat information of the music with the detection result of the user's motion, and whether the information of the music and the body are moved.
  • Patent No. 6055659 gazette
  • a driver responsible for steering the mobile object is not in an excessively excited state. Therefore, it is preferable that the driver's excited state can be determined.
  • the terminal device described in Patent Document 1 it is only determined whether the user is moving according to the music at the time of music reproduction, and the result is stored. Therefore, depending on the terminal device described in Patent Document 1 and the information acquired thereby, it may be difficult to accurately determine whether the user is currently excited or not. .
  • the present invention has been made in view of the above-described points, and provides, for example, a storage device and an excitement level suppression device for assisting the driver's driving by the driver of the moving body effectively adjusting the excitation state.
  • the purpose is to
  • the invention according to claim 1 is characterized in that a feature amount detection unit for detecting a feature amount related to the behavior of a passenger of a moving body, and an excitement degree for acquiring excitement degree information indicating the excitement degree of the occupant at the time of detecting the feature amount.
  • a first corresponding feature amount which is a feature amount corresponding to a first excitement degree of the excitement degree is calculated based on an acquisition unit, the feature amount and the excitement degree information, and the first corresponding feature amount is calculated
  • a feature amount storage unit that stores the first excitement level in association with the first excitement degree.
  • the invention according to claim 4 acquires a feature amount detection unit that detects a feature amount related to the behavior of the occupant of the moving body, and excitation degree information indicating the degree of excitement of the occupant when the feature amount is detected.
  • a first corresponding feature amount which is a feature amount corresponding to the first excitement degree of the excitement degree is calculated based on the excitement degree acquiring unit, the feature amount and the excitement degree information, and the first corresponding feature amount
  • a feature amount storage unit for storing the first excitement level in association with the first excitement degree, and a feature amount detected by the feature amount detection unit in a predetermined time zone and a first feature amount stored in the feature amount storage unit;
  • An excitation suppression unit that performs an operation of suppressing the degree of excitement of the driver when it is determined that the degree of excitement of the driver in the predetermined time zone and the determined degree of excitement exceeds a predetermined threshold;
  • an excitation suppression device characterized by having.
  • an excitation level suppression apparatus 10 according to a first embodiment of the present invention will be described with reference to the attached drawings.
  • the case where the excitement level adjusting device 10 is mounted on the automobile M will be described as an example.
  • FIG. 1 is a view showing an example of a front seat portion of an automobile M as a mobile body to which a degree of excitement adjustment device 10 is attached.
  • FIG. 1 shows, as an example of attachment, the case where the excitement adjustment device 10 is attached to the center console portion of the front seat of the automobile M.
  • the upper body camera 11 as a passenger photographing unit is a camera capable of photographing the upper body of the passenger of the automobile M.
  • the upper body camera 11 is provided, for example, on the dashboard DB, and is oriented so as to enable photographing of the driver who is in the driver's seat.
  • the upper body camera 11 may be disposed at a position where a situation such as an operation of the upper body of the passenger can be photographed.
  • the upper body camera 11 may be provided on the rearview mirror RM, or may be provided on the upper end of the windshield FG or a ceiling near the upper end.
  • the upper body camera 11 is communicably connected to the excitement level adjustment device 10, and can transmit a signal of a photographed image to the excitement level adjustment device 10.
  • the lower body camera 13 is a camera capable of capturing the lower body of a passenger of a car, for example, a foot.
  • the lower body camera is provided, for example, on the surface of the dashboard DB and on the side of the steering wheel H, and is oriented so as to be able to capture the driver's foot.
  • the lower body camera 13 is communicably connected to the excitement level adjustment apparatus 10, and can transmit a signal of a photographed image to the excitement level adjustment apparatus 10.
  • the microphone 15 is a microphone device that receives the sound in the car, and is disposed, for example, on the dashboard DB.
  • the microphone 15 may be provided anywhere, such as a room mirror RM or a steering wheel, as long as it can receive in-vehicle sounds.
  • the microphone 15 is communicably connected to the excitement level adjustment device 10, and can transmit a signal of the collected sound to the excitement level adjustment device 10.
  • the upper body camera 11, the lower body camera 13, and the microphone 15 are used as a feature amount detection unit for detecting a feature amount related to the action of the passenger.
  • the GPS receiver 17 is a device that receives a signal (GPS signal) from a Global Positioning System (GPS) satellite.
  • GPS Global Positioning System
  • the GPS receiver 17 is, for example, disposed on the dashboard DB.
  • the GPS receiver 17 may be disposed anywhere as long as it can receive GPS signals.
  • the GPS receiver 17 is communicably connected to the excitement adjustment device 10, and can transmit the received GPS signal to the excitement adjustment device 10.
  • the touch panel 19 is, for example, a touch panel monitor in which a display 19A such as a liquid crystal display capable of displaying an image and a touch pad 19B are combined.
  • the touch panel 19 is disposed, for example, on the dashboard DB.
  • the touch panel 19 may be disposed in a place which is visible to the driver and can be reached by the driver.
  • the touch panel 19 may be attached to the center console CC in the dashboard DB.
  • the display 19A is communicably connected to the excitement level adjustment device 10, and can perform screen display based on the control of the excitement level adjustment device 10. Further, the touch panel 19B can transmit a signal representing an input operation from the user to the touch panel 19B to the excitement level adjustment device 10.
  • the speaker 21 is provided, for example, on the indoor side of the A pillar P or the door DR.
  • the speaker 21 is communicably connected to the excitement level adjustment 10, and can emit sounds such as music and voice based on the control of the excitement level adjustment device 10.
  • FIG. 2 shows the configuration of the excitement level adjustment device 10.
  • the excitement level adjustment apparatus 10 includes a mass storage device 33, a control unit 35, an input unit 37, an output unit 39, a data communication unit 41, and a content reading unit 43 via the system bus 31. It is a device that cooperates.
  • the large capacity storage device 33 is constituted by, for example, a hard disk drive, a solid state drive (SSD), a flash memory or the like, and stores various programs such as an operating system and software for a terminal.
  • the various programs may be acquired from, for example, another server apparatus or the like via a network, or may be recorded in a recording medium and read via various drive apparatuses. That is, various programs stored in the mass storage device 33 (including a program for executing processing in the excitation level adjustment apparatus 10 described later) can be transmitted via a network, and can be read by a computer. It is possible to record and transfer to a recording medium.
  • the control unit 35 includes a central processing unit (CPU) 35A, a read only memory (ROM) 35B, a random access memory (RAM) 35C, and the like, and functions as a computer. Then, the CPU 35A implements various functions by reading and executing various programs stored in the ROM 35B and the mass storage device 33.
  • CPU central processing unit
  • ROM read only memory
  • RAM random access memory
  • the input unit 37 is an interface unit that communicably connects the excitement adjustment device 10 and the touch pad 19B.
  • the excitement level adjustment device 10 can receive, via the input unit 37, a signal indicating an input operation on the touch pad 19B.
  • the input unit 37 can also be an interface unit that communicably connects the excitement adjustment device 10 and the microphone 15. In this case, the excitement adjustment device 10 can receive an audio input signal related to the user's voice input operation from the microphone 15 via the input unit 37.
  • the output unit 39 is communicably connected to the display 19A and the speaker 21.
  • the output unit 39 transmits an image or an image signal to the display 19A for display, or transmits an audio signal to the speaker 21 to output sound. It is possible.
  • the data collection unit 41 is an interface unit that communicably connects the excitement adjustment device 10 with the upper body camera 11, the lower body camera 13 and the microphone 15.
  • the excitement level adjustment device 10 receives video signals from the upper body camera 11 and the lower body camera 13 via the data collection unit 41.
  • the excitement level adjustment device 10 receives an audio signal from the microphone 15 via the data collection unit 41. From the video signal and the audio signal received via the data collection unit 41, the control unit 35 determines the movement amount of each part of the driver's body in the operation of the driver of the vehicle on which the excitement adjustment device 10 is mounted. Motion feature quantities can be calculated.
  • the control unit 35 can calculate the operation feature amount based on the magnitude of the operation of the passenger of the vehicle M.
  • the motion feature amount is, for example, the maximum movement amount of each part of the body set in advance is 1, and the movement amount of each part of the body detected is normalized so as to be a value between 0 and 1. is there.
  • image processing is performed to calculate the motion feature amount using only the movement amounts of the head, hands, and feet of the driver of the vehicle M.
  • the control unit 35 can calculate the voice feature amount based on the magnitude and the like of the voice of the passenger of the automobile M.
  • the voice feature amount is, for example, the maximum voice set in advance as 1 and the input voice is normalized so as to be a value between 0 and 1. In the present embodiment, as an example, it is assumed that the voice feature amount is calculated using only the voice of the driver of the automobile M extracted as the input voice.
  • the calculated voice feature amount and motion feature amount are stored in the excitation degree database (excitation degree storage DB) 33A in the mass storage device 33.
  • the data collection unit 41 is also an interface that communicably connects the excitement adjustment device 10 and the travel control device VC of the vehicle M on which the excitement adjustment device 10 is mounted.
  • the traveling control device VC is a device that manages traveling control of the automobile M. In the present embodiment, the traveling control device VC determines whether the vehicle M is to be manually controlled or to be automatically controlled at any one of levels 1 to 5.
  • the traveling control device VC has data of control information as to whether the vehicle M is currently traveling by manual operation control or automatic operation control is performed at any of the automatic operation levels of levels 1 to 5 It can be transmitted to the degree of excitement adjustment device 10 via the collection unit 41.
  • the state of manual operation control is referred to as an automatic operation level 0.
  • the traveling control device VC can transmit the schedule to the excitement level adjustment device 10 via the data collection unit 41.
  • the content reading unit 43 may be, for example, an optical disk reading device (such as an optical disk drive) itself such as a CD (Compact Disc), a DVD or a BD (Blu-ray Disc), or may be communicably connected thereto. Good. Also, it may be an interface with digital media, such as a USB terminal or a wireless communication device such as a Wi-Fi communication device or a Bluetooth communication device. That is, the excitement level adjustment device 10 can acquire content data from the outside via the content reading unit 43.
  • an optical disk reading device such as an optical disk drive
  • CD Compact Disc
  • DVD DVD
  • BD Blu-ray Disc
  • the control unit 35 reproduces the content data read from the outside via the content reading unit, and causes the display 19A to display a video or an image of the content (hereinafter simply referred to as a video) via the output unit 39. It is possible. Further, the control unit 35 can reproduce content data read from the outside via the content reading unit, and cause the speaker 21 to generate a sound including the sound and sound of the content.
  • the excitement level adjustment device 10 when functioning as a excitement level storage device receives an input of an estimated excitement degree which is an evaluation by the driver of the degree of excitement of the driver of the vehicle M while reproducing the content and reproducing the content. Get this.
  • the evaluation excitation level by the driver hereinafter, also referred to as a user
  • the actual excitation level which is the driver's actual excitation level are set to three levels 1 to 3.
  • the autonomous driving level in the following description is, for example, an autonomous driving level defined by the Japanese government or the United States Department of Transportation Road Traffic Safety Administration (NHTSA).
  • the excitement level adjusting device 10 at the time of functioning as a excitement level storage device acquires the driver's behavior feature quantity during reproduction of the content and the driver's evaluation excitement level when the behavior feature quantity is detected.
  • the excitement level adjustment device 10 counts the detected driver's behavior feature quantity for each level of evaluation excitement level when the behavior feature quantity is detected.
  • the excitation level adjustment device 10 calculates the feature quantity corresponding to each of the excitation level, such as the average value of the action feature quantity in each of the excitation level Calculate the reference value as.
  • the excitement level adjustment device 10 associates and stores each of the levels of excitement level and the feature corresponding to each of the levels of excitement level.
  • the determination can also be performed using a predetermined reference value.
  • the reference value calculated by aggregating the behavior feature amount for each level of evaluation excitement of the driver of the car M the driver's driver's behavior in which the driver's behavior of the car M is taken into consideration It is possible to estimate or determine the level of actual excitement. That is, by using the calculated reference value, it is possible to more accurately determine the level of excitement level of the driver from the behavior characteristic amount of the driver of the automobile M.
  • the degree of excitement adjustment device 10 can provide a reference value of the feature amount that contributes to the accurate determination of the level of the degree of excitement of the driver.
  • FIG. 3 is a diagram showing an excitement level storage routine R1 as an example of the operation routine.
  • the excitation degree storage routine R1 is repeatedly executed, for example, when the excitation degree adjustment device 10 is powered on.
  • step S1 When the excitement level storage routine R1 is started, the control unit 35 first determines whether the reproduction of the content has been started (step S1). If it is determined in step S1 that the reproduction of the content is not started (step S1: NO), the routine R1 ends.
  • playback of content is started by the control unit 35 when the driver or the like performs playback operation of content via the touch pad 19B.
  • the content read from the content reading unit 43 may be reproduced, or the content stored in the large-capacity storage device 33 may be reproduced.
  • step S1 When it is determined in step S1 that the reproduction of the content is started (step S1: YES), the control unit 35 acquires an action feature amount including the driver's action feature amount and the voice feature amount (step S2). For example, the control unit 35 detects and acquires the driver's behavior feature amount from the image obtained from the upper body camera 11 and the lower body camera 13 and the sound obtained from the microphone 15. In step S1, the control unit 35 functions as a feature amount detection unit.
  • the motion feature amount relating to the driver's motion described above performs, for example, motion capture of the motion of each part of the driver's body from the images obtained from the upper body camera 11 and the lower body camera 13 It may be calculated and obtained by
  • step S3 the control unit 35 acquires an automatic driving level (step S3).
  • the automatic driving level can be acquired from the traveling control device VC via the data collection unit 41 as described above.
  • step S3 the control unit 35 determines whether the reproduction of the content is completed (step S4).
  • step S4 when it is determined that the reproduction of the content is not completed (step S4: NO), the control unit 35 repeatedly executes step S4.
  • step S4 when it is determined that the reproduction of the content is completed (step S4: YES), the control unit 35 waits for the input of the evaluation excitation level from the driver (step S5).
  • the display 19A may display a choice of the level of the evaluation excitation level to prompt the driver to input the evaluation excitation level to the touch pad 19B.
  • the control unit 35 functions as an excitement level acquisition unit.
  • step S6 the control unit 35 determines whether the evaluation excitation level is input. This determination may be made based on whether or not the selection of the level of the evaluation excitation level has been performed via the touch pad 19B. If it is determined in step S6 that the evaluation excitation level is not input (step S6: NO), the control unit 35 executes step S5 again and waits for the input of the evaluation excitation level.
  • step S6 when it is determined that the evaluation excitation level is input (step S6: YES), the control unit 35 excites the content being reproduced and the acquired evaluation excitation level, the automatic driving level, and the action feature amount The degree data is accumulated in the excitement degree database 33A (step S7).
  • step S7 the control unit 35 functions as a feature amount storage unit.
  • FIG. 4 shows an excitement level data table T1, which is an example of the excitement level data accumulated in the excitement level database 33A.
  • a data ID is attached to each excitement level data, and the content and the automatic driving level when the content is reproduced, the evaluation excitement level, and each feature value It is arranged from the left in this order.
  • automatic driving levels 3 and higher are not distinguished. This is because, for example, at the level 3 or higher of automatic driving, it is considered that the driver's degree of freedom does not change, and there is no difference in tendency in the behavior feature amount.
  • step S7 ends, the control unit 35 tabulates the degree-of-excitation data stored in the degree-of-excitation database 33A after the degree-of-excitation data is added in step S6. Then, a reference value of the feature amount that can be used as a judgment standard of the above-mentioned actual excitation level is calculated, and this is stored in the excitation level database 33A (step S8).
  • the reference value that can be used as the determination criterion of the actual excitement level may be an average value for each part of the behavioral feature associated with the same evaluation excitation level.
  • the reference value corresponding to level 1 of the evaluation excitement level is linked to data ID1, ID3, ID7,... Which are data having the same evaluation excitation level in the excitation level data table T1 shown in FIG. You may obtain
  • FIG. 5 shows a reference value table T2 which is an example of reference value data stored in the excitement level database 33A.
  • the reference values of the feature quantities of the parts of the body and the reference values of the voice feature quantities are associated with each of the excitation level, ie, linked to each of the excitation level Is saved.
  • each feature serving as a reference of determination that the driver is any of the excitation levels for each level of excitation level Store the reference value of the quantity.
  • the excitation level adjustment device 10 functioning as the above-described excitation level storage device can provide a reference value that contributes to accurately determining the actual excitation level in consideration of the tendency of the driver's behavior. is there.
  • the driver's feature amounts calculated from the video signal obtained from the upper body camera 11 and the lower body camera 13 and the audio signal obtained from the microphone 15 Determine a set of reference feature quantities that most closely approximate. Then, it may be determined that the actual level of excitement of the driver is the level of excitement linked to the set of reference feature amounts.
  • the driver must manually perform all operations related to the driving of the vehicle, so the driver can not take his hand off the steering wheel, and near the accelerator and the brake. You can't take your feet off.
  • the automatic driving level is 3 or more, the driver can move his hands relatively freely because the steering and acceleration / deceleration are automated.
  • the feature amount is totaled for each situation having the same level of excitement and the same automatic driving level.
  • the reference value of each feature may be calculated and stored.
  • FIG. 6 shows a reference value table T3 which is an example of reference value data stored in the excitement level database 33A.
  • reference feature quantities may be stored by associating each combination of the excitement level and the automatic driving level.
  • the excitement adjustment device 10 determines the excitement using the reference value, and when it is determined that the excitement exceeds the predetermined threshold, the excitement adjustment device 10 performs the suppression operation to suppress the driver's excitement. It may function. At this time, the excitement level adjustment device 10 can acquire the behavioral feature amount in a predetermined time zone of the driver, and determine the driver's excitement level based on the behavioral feature amount and the reference value.
  • the excitement degree adjustment device 10 when functioning as a excitement degree determination device acquires behavior feature quantities of each part of the driver's body of the vehicle M and driving control information of the vehicle M when the behavior feature quantities are acquired.
  • the operation control information includes an automatic operation level. Then, the level of the driver's excitement level is determined based on the acquired action feature amount and the driving control information.
  • the level of the autonomous driving depends on the level of the driving control of the automobile M depending on the level. Therefore, it can be said that the level of automatic driving is also the degree of dependence information on the degree of dependence on the driving control of the automobile M.
  • the excitement level adjustment device 10 may correct the behavior feature amount based on the automatic driving level and determine the excitement level level using the value after the correction. That is, the correction coefficient for the action feature amount may be set individually for each automatic driving level.
  • the correction of the action feature amount may be made individually for each action feature amount of each part of the driver's body. That is, the correction coefficient for the action feature amount may be individually set for each action feature amount of each part of the driver's body.
  • the freedom of movement of each part of the driver's body differs depending on the situation of automatic driving. For example, when the steering can not be performed manually, the freedom of movement of the upper body is low. Also, for example, when acceleration and deceleration must be performed manually, the lower body has less freedom of movement. Therefore, the degree of excitement can be determined by taking into account the degrees of freedom of each part of the driver's body by performing correction of the behavior feature amount based on the automatic driving level for each part of the driver's body. It can be possible.
  • the excitation degree adjustment apparatus 10 may change the reference value for excitation degree determination which is a reference value used for determination of the level of excitation level based on an automatic driving level, without correct
  • the excitement level adjustment device 10 may determine the level of excitement level to be lower as the automatic driving level becomes higher. For example, when determining the level of excitement level, the excitement level adjustment device 10 may make the value after correction of the behavioral feature amount smaller as the automatic driving level becomes higher. In addition, when determining the level of excitement level, the excitement level adjustment device 10 may increase the reference value used to determine the level of excitement level as the automatic driving level increases.
  • the higher the level of automatic driving the more freedom the driver's body moves. Therefore, it is possible to appropriately determine the level of excitement by making it easier to determine the level of excitement to be higher as the level of automatic driving decreases, that is, as the degree of dependence on the driver increases.
  • FIG. 7 is a diagram showing an excitement level determination routine R2 as an example of the operation routine.
  • the excitement level determination routine R2 is repeatedly executed, for example, when the power to the excitement level adjustment device 10 is turned on.
  • the control unit 35 When the excitement level storage routine R2 is started, the control unit 35 first detects and acquires an action feature amount including a driver's action feature amount and a voice feature amount (step S1). In step S1, the control unit 35 functions as a feature amount detection unit.
  • the control unit 35 acquires the driver's action characteristic amount from the image obtained from the upper body camera 11 and the lower body camera 13 and the sound obtained from the microphone 15.
  • the motion feature amount relating to the driver's motion described above performs, for example, motion capture of the motion of each part of the driver's body from the images obtained from the upper body camera 11 and the lower body camera 13 It may be calculated and obtained by
  • step S2 the control unit 35 acquires an automatic driving level (step S2).
  • the automatic driving level can be acquired from the traveling control device VC via the data collection unit 41 as described above.
  • step S2 the control unit 35 functions as a traveling control information acquisition unit.
  • step S3 the control unit 35 corrects each of the behavior feature amounts acquired in step S1 based on the automatic driving level (step S3). For example, this correction may be performed by applying a large coefficient to each of the behavior feature amounts as the level of automatic driving increases. In other words, as the driver performs more operations for traveling the vehicle M, that is, as the degree of dependence on the driver in the traveling control of the vehicle M increases, a larger coefficient is applied to each of the behavior feature quantities. Good.
  • different correction values may be set for each of the behavior feature amounts. For example, when the automatic driving level is 1 or 2, when the steering is automated, the action value of the hand is multiplied by 0.7 as the correction value, and the other action characteristics are not corrected, and the acceleration / deceleration is In the case of being automated, it is possible to apply 0.8 as a correction value to the foot and not to correct other behavioral feature quantities. In addition, when the automatic driving level is 3 or more, 0.5 may be applied as a correction value to all the motion feature amounts, and the voice feature amount may not be corrected.
  • step S3 the control unit 35 determines the driver's degree of excitement using the correction value acquired in step S3 (step S4).
  • step S4 the control unit 35 functions as an excitement level determination unit.
  • the determination of the degree of excitement may be made based on a preset reference value. Further, the determination of the degree of excitement may be performed based on the reference value of the action feature quantity calculated and stored by the degree-of-excitation adjustment device 10 by the function as the above-described degree-of-excitation storage device.
  • the excitation level adjustment device 10 that functions as the above-described excitation level determination device, it is possible to determine the excitation level in consideration of the difference in the automation level. Specifically, for example, the determination of the driver's degree of excitement based on the behavior characteristic amount can be performed in consideration of the driver's physical degree of freedom that differs depending on the automation level. Therefore, it is possible to accurately determine the driver's degree of excitement.
  • each of the behavior feature amounts is corrected in step S3, but each of the behavior feature amounts may not be corrected.
  • a reference value preset for determination of the level of excitement may be corrected by the automatic driving level of the automobile M, or the automatic driving control such as acceleration / deceleration automatic control or steering automatic control. .
  • the degree of excitement adjustment device 10 determines the degree of excitement of the driver based on the acquired action characteristic amount. Then, the excitation level adjustment device 10 determines whether the determined excitation level exceeds the excitation level threshold determined based on the current automatic driving level of the automobile M, and determines that the excitation level threshold is exceeded. , To suppress the degree of excitement of the driver.
  • the operation of suppressing the degree of excitement may be, for example, an operation of reducing the degree of excitement of the driver via the display 19A or the speaker 21, that is, reproducing the video content or the sound or audio content in which the driver settles down.
  • the excitement adjustment device 10 may set the excitement threshold lower as the automatic driving level is lower, that is, as the travel control of the automobile M is more dependent on the driver. In addition, it is judged whether the average value of the driver's action feature amount exceeds a predetermined threshold, or one or more of the individual action feature amounts are determined for each action feature amount. It may be done whether or not it exceeds the threshold set in.
  • the driver's excitement is properly controlled according to the level of automatic driving, that is, according to the degree of dependence of the traveling control of the automobile M on the driver. By doing this, it is possible to bring the driver into an appropriate state for steering.
  • FIG. 8 is a diagram showing an excitement level suppression routine R3 as an example of the operation routine.
  • the excitation degree suppression routine R3 is repeatedly executed, for example, when the excitation degree adjustment device 10 is powered on.
  • the control unit 35 first acquires, as the excitement degree, an action feature amount including the driver's motion feature amount and the voice feature amount (step S1). For example, the control unit 35 acquires the driver's action characteristic amount from the image obtained from the upper body camera 11 and the lower body camera 13 and the sound obtained from the microphone 15. In step S1, the control unit 35 functions as an excitement level acquisition unit.
  • the motion feature amount relating to the driver's motion described above performs, for example, motion capture of the motion of each part of the driver's body from the images obtained from the upper body camera 11 and the lower body camera 13 It may be calculated and obtained by
  • step S2 the control unit 35 acquires an automatic driving level (step S2).
  • the automatic driving level can be acquired from the traveling control device VC via the data collection unit 41 as described above.
  • step S2 the control unit 35 functions as a traveling control information acquisition unit.
  • step S2 the control unit 35 determines whether the degree of excitement acquired in step S1 exceeds the degree-of-excitation threshold determined corresponding to the automatic driving level (step S3).
  • step S3 the control unit 35 functions as an excitement level determination unit. In this determination, it is determined that the excitement level exceeds the excitement level threshold when the average of the action feature quantities of each part of the body acquired in step S1 exceeds the feature quantity threshold determined corresponding to the automatic driving level. You may.
  • one or more of the action feature quantities of each part of the body acquired in step S1 are feature quantity threshold values determined for each of the action feature quantities of each part of the body corresponding to the automatic driving level. It may be determined that the degree of excitement exceeds the threshold of excitement level.
  • step S3 it is determined that the degree of excitement does not exceed the threshold (step S3: NO), and then the routine ends. If it is determined in step S3 that the degree of excitement exceeds the threshold (step S3: YES), the control unit 35 executes an excitement degree suppressing operation to suppress the degree of excitement of the driver (step S4). In step S4, the control unit 35 functions as an excitation suppression unit.
  • this excitement level suppression operation may be, for example, an operation of lowering the driver's excitement level, that is, reproducing the content that calms the driver via the display 19A or the speaker 21, or It may be an operation of reproducing content with a low degree of excitement stored in the degree storage device.
  • step S3 it is determined whether the excitation level exceeds the excitation level threshold value using the feature amount threshold value determined by the automatic driving level.
  • the feature amount threshold may be determined not only by the automatic driving level but also by the mode of automatic driving control. For example, when the steering control is automatic, the driver does not need to operate the steering wheel, and the degree of freedom of the hand movement is high, so the threshold for the feature related to the hand movement may be increased or eliminated. . Also, for example, when acceleration / deceleration control is automatic, there is no need for the driver to operate the accelerator or the brake, and the freedom of movement of the foot is high, so the threshold for the feature related to the movement of the foot is high. It may or may not be done.
  • the excitation adjustment device 10 when functioning as an excitation suppression device is a transition of the traveling control mode having a different degree of dependence on the driver, for example, a traveling control mode emitted from the traveling control device VC when there is a transition of the automatic driving level.
  • Transition information (hereinafter, also simply referred to as mode transition information) is acquired.
  • the mode transition information includes, for example, information on the current traveling control mode and the traveling control mode after transition. That is, the mode shift information is information on the shift of the traveling control mode.
  • the excitement level adjustment device 10 receives the mode transition information, that is, acquires the mode transition information, it determines whether the traveling control mode after the transition has a higher dependence on the driver than the traveling control mode before the transition. Specifically, for example, it is determined whether the post-transition automatic driving level is lower than the pre-transition automatic driving level.
  • the excitement level adjustment device 10 executes an operation to suppress the driver's degree of excitement.
  • the operation of suppressing the degree of excitement may be, for example, an operation of reducing the degree of excitement of the driver via the display 19A or the speaker 21, that is, reproducing the video content or the sound or audio content in which the driver settles down.
  • the degree of excitement adjustment device 10 acquires the current degree of excitement of the driver, and determines whether or not the driving control mode after transition, for example, the degree of excitement threshold determined based on the automatic driving level is exceeded. If it is determined that the threshold value is exceeded, an operation to suppress the driver's degree of excitement may be performed. The driver's excitement level may be calculated based on the driver's behavior feature quantity.
  • the degree of excitement adjustment device 10 when the acquired driver's degree of excitement exceeds the above-mentioned degree of excitement threshold, the degree of excitement adjustment device 10 has a greater effect of suppressing the degree of excitement as the difference between the degree of excitement and the degree of excitement threshold is larger. An operation may be performed. In addition, as the time until the transition of the traveling control mode is shorter, the excitement adjustment device 10 may perform an operation in which the effect of suppressing the excitement is larger.
  • the suppression effect of the excitement level may be larger as the tune of the music to be reproduced is milder, specifically, as the pitch of the music to be reproduced is later.
  • the driving control mode controls the driver's excitement when the driving control mode shifts to a mode with a higher degree of dependency on the driver. It is possible to bring the person into the proper state for maneuvering.
  • FIG. 9 is a diagram showing an excitement level suppression routine R4 as an example of the operation routine.
  • the excitation degree suppression routine R4 is repeatedly executed, for example, when the excitation degree adjustment device 10 is powered on.
  • the control unit 35 When the excitement level suppression routine R4 is started, the control unit 35 first waits for the arrival of mode transition information (step S1).
  • the mode transition information is issued from the traveling control device VC when the traveling control device VC determines that the traveling control mode is shifted. This determination may be made, for example, based on whether or not the traveling control device VC acquires position information from the GPS receiver 17 and the automatic driving level permitted differs between the current point and the point to be reached soon.
  • step S1 the control unit 35 determines whether mode transition information has arrived and has been received (step S2). In steps S1 and S2, the control unit 35 functions as a mode transition information acquisition unit. In step S2, when it is determined that the mode transition information is not received yet (step S2: NO), the control unit 35 continues executing step S1 and waits for the arrival of the mode transition information.
  • step S3 the control unit 35 determines whether or not the traveling control mode shifts to a mode with a high degree of dependence on the driver (Ste S3).
  • the traveling control mode may shift to a mode in which the degree of dependence on the driver is high, by setting the automatic driving level after the transition to be lower than the current driving level before the transition.
  • step S3 it is determined that the vehicle does not shift to the travel control mode highly dependent on the driver (step S3: NO), that is, the current control mode does not change dependency on the driver or does not change to the driver. If it is determined that the degree of dependence is low, the routine R4 ends.
  • step S3 When it is determined in step S3 that the driving control mode is highly dependent on the driver (step S3: YES), the control unit 35 determines the current excitation level according to the traveling control mode after the transition. It is determined whether the threshold is exceeded (step S4).
  • step S4 the control unit 35 acquires the action feature amount of each part of the body based on the information from the upper body camera 11, the lower body camera 13 or the microphone 15. Then, when the average of the acquired action feature amounts of each part exceeds the travel control mode, for example, the feature amount threshold determined corresponding to the automatic driving level, it is determined that the excitement level exceeds the excitement level threshold You may.
  • step S4 one or more of the acquired action feature amounts of each part of the body are determined for each of the action feature amounts of each part of the body corresponding to the traveling control mode, for example, the automatic driving level. If the feature amount threshold is exceeded, it may be determined that the excitement level exceeds the excitement level threshold.
  • step S4 When it is determined in step S4 that the degree of excitement exceeds the threshold (step S4: YES), the control unit 35 executes an excitement degree suppressing operation to suppress the degree of excitement of the driver (step S5).
  • the control unit 35 functions as an excitation suppression unit.
  • this excitement level suppression operation may be, for example, an operation of reproducing content that lowers the driver's excitement level via the display 19A or the speaker 21.
  • step S5 When step S5 is completed or it is determined that the degree of excitement exceeds the threshold in step S4 (step S4: NO), the control unit 35 determines whether the timing of the transition of the driving control mode has come. It determines (step S6). This determination may be performed, for example, by the control unit 35 inquiring the traveling control device VC of the timing of transition of the operation control mode.
  • step S6 when it is determined that the control mode transition timing has come (step S6: NO), the control unit 35 ends the excitement level suppression operation, and the routine ends.
  • step S6 when it is determined that the control mode transition timing has not yet arrived (step S6: NO), the control unit 35 executes step S4 again, and the excitation degree still exceeds the threshold value Continue the excitement suppression operation.
  • the difference between the excitation degree and the excitation degree threshold or the time until the transition of the traveling control mode is not taken into consideration, but these may be taken into consideration.
  • FIG. 10 shows the excitement degree suppression routine R5 in consideration of the difference between the excitement degree and the excitement degree threshold or the time until the transition of the traveling control mode.
  • the excitement degree suppression routine R5 is different from the excitement degree suppression routine R4 only in part of the processing, so only the different portions will be described.
  • step S4 determines whether the time until the transition of the traveling control mode is less than a predetermined time (Step S4-1).
  • step S4-1 If it is determined in step S4-1 that the traveling control mode is to be shifted to a predetermined time or more (step S4-1: YES), the control unit 35 determines that the driver's current degree of excitement and the traveling control mode after transition. It is determined whether or not the difference from the excitation level threshold determined by the above is greater than or equal to a predetermined value (step S4-2).
  • step S4-2 If it is determined in step S4-2 that the difference between the current degree of excitement and the degree of excitement threshold is equal to or less than the predetermined value (step S4-2: NO), the control unit 35 executes a normal excitement degree suppressing operation. (Step S5-1).
  • step S4-1 it is determined that the time until the transition of the traveling control mode is less than the predetermined time (step S4-1: YES), or the difference between the current degree of excitement and the degree of excitement in step S4-2 Is determined to be equal to or greater than a predetermined value (step S4-2: YES), the control unit 35 executes a special excitement degree suppression operation (step S5-2).
  • This special excitement level suppression operation is an operation that is more effective in suppressing (reducing) the driver's excitation level than the normal excitation level suppression operation. For example, in the special excitement level suppression operation, music having a gentler tone than the normal excitation level suppression operation may be reproduced.
  • the excitement level adjustment device 10 when functioning as a content selection device reproduces content such as video or audio, acquires the driver's action characteristic amount during reproduction of the content, and uses this as information of the content. Save linked content information and store it.
  • the excitement level adjustment device 10 when functioning as a content selection device follows the one content when reproducing the one content based on the stored content information and the action feature amount linked thereto. Select the next content that is the content to be played back.
  • the selection of the content is performed by selecting the content of the one content being reproduced and the content of the manner of excitement similar to the manner of the user and the manner of excitement (hereinafter simply referred to as the manner of excitement level).
  • the manner of excitement level the degree of coincidence of the user's action feature amount between one content and another content is high, it is determined that the user's manner of excitement is similar between the one content and the other content.
  • the excitement level suppression device 10 compares the behavioral feature associated with the one content currently being reproduced with the behavioral feature associated with the other content. Choose from For example, on the basis of comparison between the behavioral feature associated with the one content being reproduced and the behavioral feature associated with the other content, the excitement level suppression device 10 Choose from Specifically, for example, it is performed by selecting, from among the other contents, the content linked to the behavior feature quantity having a high degree of coincidence with the behavior feature quantity linked to the content 1 being reproduced.
  • the evaluation of the degree of coincidence of the behavioral feature quantity is identical to the case where the sum of differences of the characteristic quantities is small by comparing the behavioral characteristic quantities linked with one content and the other content for each part of the body. It may be performed by evaluating it as a high degree.
  • the evaluation of the matching degree of the behavioral feature amount is the ratio of the behavioral feature amount for each part of the body (for example, the feature amount of the head: the feature amount of the hand: the feature amount of the foot) It may be performed by evaluating that the degree of coincidence is high when the degree of approximation of the value of the ratio is high as compared with the action feature amount for each part of the body linked to the other content.
  • the excitement level suppression device 10 functioning as the above-described content selection device, the content to be reproduced next to the content currently being reproduced is similar to the content currently being reproduced and the content having the excitement of the user By doing this, it is possible to reproduce content without impairing the excitement of the user. In addition, when the content for suppressing the excitement level is being reproduced, it is possible to continuously reproduce the content for suppressing the excitement level.
  • FIG. 11 is a diagram showing an excitement level accumulation routine R6 as an example of an operation routine for accumulating the manner of excitement of the user.
  • the excitation level storage routine R6 is repeatedly executed, for example, when the excitation level adjustment device 10 is powered on.
  • step S1 the control unit 35 first determines whether the reproduction of the content has been started. If it is determined in step S1 that the reproduction of the content is not started (step S1: NO), the routine R6 ends.
  • step S1 when it is determined that the reproduction of the content is started (step S1: YES), the control unit 35 detects and acquires an action feature amount including the driver's action feature amount and the voice feature amount (step S2).
  • step S2 the control unit 35 functions as a feature amount detection unit. For example, the control unit 35 acquires the driver's action characteristic amount from the image obtained from the upper body camera 11 and the lower body camera 13 and the sound obtained from the microphone 15.
  • the motion feature amount relating to the driver's motion described above performs, for example, motion capture of the motion of each part of the driver's body from the images obtained from the upper body camera 11 and the lower body camera 13 It may be calculated and obtained by
  • step S2 ends, the control unit 35 determines whether the reproduction of the content has ended (step S3). In step S3, when it is determined that the reproduction of the content is not completed (step S3: NO), the control unit 35 repeatedly executes step S3.
  • step S3 when it is determined that the reproduction of the content is ended (step S4: YES), the control unit 35 stores the reproduced content and the action feature amount in the excitement degree database 33A as the excitement degree data (Step S4).
  • step S4 the control unit 35 functions as a storage unit.
  • the data accumulated in the excitement degree database 33A may be, for example, one obtained by removing the automatic driving level and the evaluation excitement degree in the excitement degree data table T1 shown in FIG. 4 in the above description.
  • the excitement level accumulation routine R6 accumulates the information including the content and the behavioral feature associated with the content.
  • FIG. 12 is a diagram showing a content reproduction routine R7 for reproducing while selecting the content having the same manner of excitement as the content being reproduced by the user as the next content.
  • the content reproduction routine R7 may be started, for example, when a content reproduction operation is received from the user through the touch pad 19B or the like.
  • step S1 the control unit 35 starts reproduction of the content
  • step S1 the control unit 35 functions as a content reproduction unit.
  • step S2 the control unit 35 selects content having a manner of excitement similar to the content being reproduced by the user (step S2).
  • step S2 the control unit 35 functions as a content selection unit.
  • control unit 35 first refers to the data stored in the excitation degree database 33A by the above-described excitation degree accumulation routine R6, and reads out the action feature quantity linked to the content being reproduced. Then, the content linked to the action feature amount having the highest degree of coincidence with the read action feature amount is selected as the next reproduction content to be reproduced next.
  • control unit 35 determines whether a reproduction end operation has been received from the user (step S3). This determination may be made based on, for example, whether or not the reproduction end operation of the content is accepted from the user through the touch pad 19B or the like.
  • step S3 If it is determined in step S3 that the reproduction end operation has been received (step S3: YES), the routine R7 ends.
  • step S3 When it is determined in step S3 that the reproduction end operation has not been received (step S3: NO), the control unit 35 determines whether the content currently being reproduced has ended (step S4). If it is determined in step S4 that the content currently being reproduced is not finished (step S4: NO), the control unit 35 executes step S4 again.
  • step S4 If it is determined in step S4 that the content currently being reproduced has ended (step S4: YES), the control unit 35 reproduces the next content selected in step S2 (step S5). After the end of step S5, the control unit 35 executes step S2 again.
  • the excitement level adjustment device 10 it is possible to effectively adjust the driver's excitement level, and thereby it is possible to support the driver's driving.
  • the configuration, the routine, the format of the data, and the like of the excitation level adjustment device 10 in the above-described embodiment are merely examples, and can be appropriately selected or changed according to the application and the like.

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Molecular Biology (AREA)
  • Pathology (AREA)
  • Biophysics (AREA)
  • Biomedical Technology (AREA)
  • Surgery (AREA)
  • Veterinary Medicine (AREA)
  • Public Health (AREA)
  • Medical Informatics (AREA)
  • General Health & Medical Sciences (AREA)
  • Animal Behavior & Ethology (AREA)
  • Mechanical Engineering (AREA)
  • Transportation (AREA)
  • Automation & Control Theory (AREA)
  • Mathematical Physics (AREA)
  • Psychiatry (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • General Physics & Mathematics (AREA)
  • Psychology (AREA)
  • Social Psychology (AREA)
  • Physiology (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Engineering & Computer Science (AREA)
  • Artificial Intelligence (AREA)
  • Child & Adolescent Psychology (AREA)
  • Developmental Disabilities (AREA)
  • Educational Technology (AREA)
  • Hospice & Palliative Care (AREA)
  • Multimedia (AREA)
  • Evolutionary Computation (AREA)
  • Signal Processing (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Radiology & Medical Imaging (AREA)
  • Dentistry (AREA)
  • Oral & Maxillofacial Surgery (AREA)

Abstract

本発明の記憶装置は、移動体の乗員の行動に関する特徴量を検出する特徴量検出部と、前記特徴量を検出した際の前記乗員の興奮度を示す興奮度情報を取得する興奮度取得部と、前記特徴量及び前記興奮度情報に基づいて、前記興奮度のうちの第１興奮度に対応する特徴量である第１対応特徴量を算出し、前記第１対応特徴量を、前記第１興奮度と関連付けて記憶する特徴量記憶部と、を含むことを特徴とする。

Description

記憶装置及び興奮抑制装置
　本発明は、記憶装置に関し、例えば、ユーザの興奮度に関する情報を記憶可能な記憶装置及びこれを用いた興奮抑制装置に関する。
　従来、楽曲のビート情報とユーザの動作の検出結果とを比較して、ユーザが楽曲に合わせて身体を動かしているか否かを判定し、当該楽曲の情報と当該身体を動かしているか否かの判定結果を示す情報とを関連付けて記憶する端末装置が提案されている。（特許文献１）。
特許第６０５５６５９号公報
　例えば、自動車等の移動体においては、当該移動体を操縦する責任を持つ運転者が、過度な興奮状態でないことが望ましい。そのため、当該運転者の興奮状態を判定可能であることが好ましい。しかし、上記特許文献１に記載されている端末装置においては、楽曲の再生時にユーザが楽曲に合わせて動いているか否かを判定し、その結果を記憶しているのみである。従って、特許文献１に記載されている端末装置及びこれによって取得される情報によっては、ユーザが現在興奮状態であるか否かを正確に判定することは困難であることが問題の一例として挙げられる。
　本発明は、上述の点に鑑みてなされたものであり、例えば、移動体の運転者が興奮状態を効果的に調整することで運転者の運転を支援する記憶装置及び興奮度抑制装置を提供することを目的とする。
　請求項１に記載の発明は、移動体の乗員の行動に関する特徴量を検出する特徴量検出部と、前記特徴量を検出した際の前記乗員の興奮度を示す興奮度情報を取得する興奮度取得部と、前記特徴量及び前記興奮度情報に基づいて、前記興奮度のうちの第１興奮度に対応する特徴量である第１対応特徴量を算出し、前記第１対応特徴量を、前記第１興奮度と関連付けて記憶する特徴量記憶部と、を備えることを特徴とする記憶装置である。
　また、請求項４に記載の発明は、移動体の乗員の行動に関する特徴量を検出する特徴量検出部と、前記特徴量を検出した際の前記乗員の興奮度を示す興奮度情報を取得する興奮度取得部と、前記特徴量及び前記興奮度情報に基づいて、前記興奮度のうちの第１興奮度に対応する特徴量である第１対応特徴量を算出し、前記第１対応特徴量を、前記第１興奮度と関連付けて記憶する特徴量記憶部と、所定時間帯において前記特徴量検出部が検出した特徴量及び前記特徴量記憶部に記憶された第１特徴量に基づいて、前記所定時間帯の前記運転者の興奮度を判定し、当該判定された興奮度が所定の閾値を超えたと判定されると、前記運転者の興奮度を抑制する抑制動作を行う興奮抑制部と、を有することを特徴とする興奮抑制装置である。
本発明の実施例１である興奮度調整装置を搭載した自動車の前席部分の斜視図である。 本発明の実施例１である興奮度調整装置の構成の一例を示すブロック図である。 本発明の実施例１である興奮度調整装置の動作ルーチンのフロー図である 興奮度データテーブルの一例を示す図である。 基準値テーブルの一例である。 基準値テーブルの一例である。 本発明の実施例１である興奮度調整装置の動作ルーチンのフロー図である。 本発明の実施例１である興奮度調整装置の動作ルーチンのフロー図である。 本発明の実施例１である興奮度調整装置の動作ルーチンのフロー図である。 本発明の実施例１である興奮度調整装置の動作ルーチンのフロー図である。 本発明の実施例１である興奮度調整装置の動作ルーチンのフロー図である。 本発明の実施例１である興奮度調整装置の動作ルーチンのフロー図である。
　以下においては、本発明の好適な実施例について説明する。しかし、これらを適宜改変し、組み合わせてもよい。また、以下の説明及び添付図面において、実質的に同一又は等価な部分には同一の参照符を付して説明する。また、以下の説明において、映像とは動画及び静止画を含むものとして説明する。
　以下に、本発明の実施例１である興奮度抑制装置１０について、添付の図面を参照して説明する。実施例１おいては、興奮度調整装置１０を自動車Ｍに搭載する際を例に説明する。
　図１は、興奮度調整装置１０が取り付けられた移動体としての自動車Ｍの前席部分の一例を示す図である。図１では、取り付け例として、自動車Ｍの前席のセンターコンソール部分に興奮度調整装置１０が取り付けられている場合を示す。
　搭乗者撮影部としての上半身カメラ１１は、自動車Ｍの搭乗者の上半身を撮影可能なカメラである。上半身カメラ１１は、例えば、ダッシュボードＤＢ上に設けられており、運転席にいる運転者を撮影可能に配向されている。なお、上半身カメラ１１は、搭乗者の上半身の動作等の状況が撮影できる位置に配されていればよい。例えば、上半身カメラ１１は、ルームミラーＲＭに設けられているかまたはフロントガラスＦＧの上端または当該上端付近の天井部に設けられていてもよい。
　上半身カメラ１１は、興奮度調整装置１０と通信可能に接続されており、撮影した映像の信号を興奮度調整装置１０に送信することが可能である。
　下半身カメラ１３は、自動車の搭乗者の下半身、例えば足部を撮影可能なカメラである。下半身カメラは、例えば、ダッシュボードＤＢの表面でかつハンドルＨの側方に設けられ、運転者の足下を撮影可能に配向されている。下半身カメラ１３は、興奮度調整装置１０と通信可能に接続されており、撮影した映像の信号を興奮度調整装置１０に送信することが可能である。
　マイク１５は、車内の音を受音するマイク装置であり、例えば、ダッシュボードＤＢ上に配されている。マイク１５は、車内の音を受音可能であれば、ルームミラーＲＭまたはハンドル等、どこに設けられていてもよい。マイク１５は、興奮度調整装置１０と通信可能に接続されており、当該収集した音の信号を興奮度調整装置１０に送信することが可能である。
　なお、上半身カメラ１１、下半身カメラ１３、及びマイク１５を、搭乗者の行動に関する特徴量を検出するための特徴量検出部とする。
　ＧＰＳ受信機１７は、ＧＰＳ（Global Positioning System）衛星からの信号（ＧＰＳ信号）を受信する装置である。ＧＰＳ受信機１７は、例えば、ダッシュボードＤＢ上に配されている。なお、ＧＰＳ受信機１７は、ＧＰＳ信号が受信できればどこに配されていてもよい。ＧＰＳ受信機１７は、興奮度調整装置１０と通信可能に接続されており、受信したＧＰＳ信号を興奮度調整装置１０に送信することが可能である。
　タッチパネル１９は、例えば、映像を表示可能な液晶ディスプレイ等のディスプレイ１９Ａとタッチパッド１９Ｂとが組み合わされたタッチパネルモニターである。タッチパネル１９は、例えば、ダッシュボードＤＢ上に配されている。タッチパネル１９は、運転者から視認できかつ運転者の手が届く場所に配されていればよい。例えば、タッチパネル１９は、ダッシュボードＤＢ内のセンターコンソールＣＣに取り付けられていてもよい。
　ディスプレイ１９Ａは、興奮度調整装置１０と通信可能に接続されており、興奮度調整装置１０の制御に基づいて画面表示を行うことが可能である。また、タッチパネル１９Ｂは、ユーザからの受け付けたタッチパネル１９Ｂへの入力操作を表す信号を興奮度調整装置１０に送信することが可能である。
　スピーカー２１は、例えば、ＡピラーＰまたはドアＤＲの室内側に設けられている。スピーカー２１は、興奮度調整１０と通信可能に接続されており、興奮度調整装置１０の制御に基づいて音楽や音声等の音を発することが可能である。
　［１．システムの構成及び動作］
　図２に興奮度調整装置１０の構成を示す。例えば、興奮度調整装置１０は、システムバス３１を介して、大容量記憶装置３３と、制御部３５と、入力部３７と、出力部３９と、データ通信部４１と、コンテンツ読込部４３とが協働する装置である。
　大容量記憶装置３３は、例えば、ハードディスク装置、ＳＳＤ（solid state drive）、フラッシュメモリ等により構成されており、オペレーティングシステムや、端末用のソフトウェア等の各種プログラムを記憶する。
なお、各種プログラムは、例えば、他のサーバ装置等からネットワークを介して取得されるようにしてもよいし、記録媒体に記録されて各種ドライブ装置を介して読み込まれるようにしてもよい。すなわち、大容量記憶装置３３に記憶される各種プログラム（後述する興奮度調整装置１０における処理を実行するためのプログラムを含む）は、ネットワークを介して伝送可能であるし、また、コンピュータ読み取り可能な記録媒体に記録して譲渡することが可能である。
　制御部３５は、ＣＰＵ（Central Processing Unit）３５Ａ、ＲＯＭ（Read Only Memory）３５Ｂ、ＲＡＭ（Random Access Memory）３５Ｃ等により構成され、コンピュータとして機能する。そして、ＣＰＵ３５Ａが、ＲＯＭ３５Ｂや大容量記憶装置３３に記憶された各種プログラムを読み出し実行することにより各種機能を実現する。
　入力部３７は、興奮度調整装置１０とタッチパッド１９Ｂとを通信可能に接続するインタフェース部である。興奮度調整装置１０は、入力部３７を介して、タッチパッド１９Ｂへの入力操作を示す信号を受信することが可能である。また、入力部３７は、興奮度調整装置１０とマイク１５とを通信可能に接続するインタフェース部ともなり得る。この場合、興奮度調整装置１０は、入力部３７を介して、マイク１５から、ユーザの音声入力操作に関する音声入力信号を受信することが可能である。
　出力部３９は、ディスプレイ１９Ａ及びスピーカー２１と通信可能に接続されており、ディスプレイ１９Ａに映像または画像信号を送信して表示をさせたり、スピーカー２１に音声信号を送信して、音を出力させたりすることが可能である。
　データ収集部４１は、興奮度調整装置１０と、上半身カメラ１１、下半身カメラ１３及びマイク１５と、を通信可能に接続するインタフェース部である。興奮度調整装置１０は、データ収集部４１を介して、上半身カメラ１１及び下半身カメラ１３から、映像信号を受信する。
　また、興奮度調整装置１０は、データ収集部４１を介してマイク１５から音声信号を受信する。制御部３５は、このデータ収集部４１を介して受信した映像信号及び音声信号から、興奮度調整装置１０が搭載された自動車の運転者の動作における当該運転者の身体の各部の移動量等の動作特徴量を算出可能である。
　例えば、制御部３５は、上半身カメラ１１、下半身カメラ１３からの映像信号に基づいて、自動車Ｍの搭乗者の動作の大小に基づいた動作特徴量を算出可能である。この動作特徴量は、例えば、予め設定された身体の各部の最大移動量を１として、検出された当該身体の各部の移動量を０から１の間の値となるように正規化したものである。なお、本実施例では、一例として、画像処理を行って、自動車Ｍの運転者の頭部、手部及び足部の移動量のみを用いて動作特徴量を算出するものとする。
　例えば、制御部３５は、マイク１５からの音声入力に基づいて、自動車Ｍの搭乗者の音声の大小等に基づいた音声特徴量を算出可能である。この音声特徴量は、例えば、予め設定された最大音声を１として、入力された音声を０から１の間の値となるように正規化したものである。なお、本実施例では、一例として、自動車Ｍの運転者の音声のみを抽出したものを入力された音声として用いて、音声特徴量を算出するものとする。
　当該算出された音声特徴量及び動作特徴量は、大容量記憶装置３３内にある興奮度データベース（興奮度記憶ＤＢ）３３Ａに保存される。
　また、データ収集部４１は、興奮度調整装置１０と興奮度調整装置１０が搭載されている自動車Ｍの走行制御装置ＶＣとを通信可能に接続するインタフェースにもなっている。走行制御装置ＶＣは、自動車Ｍの走行制御を司る装置である。走行制御装置ＶＣは、本実施例においては、自動車Ｍを手動運転制御するか、レベル１乃至５の何れかのレベルで自動運転制御するかを決定する。
　また、本実施例において、走行制御装置ＶＣは、現在自動車Ｍが手動運転制御によって走行しているか、レベル１乃至５の何れかの自動運転レベルで自動運転制御されているかの制御情報を、データ収集部４１を介して興奮度調整装置１０に送信可能である。なお、手動運転制御の状態を、自動運転レベル０とする。
　また、走行制御装置ＶＣは、自動車Ｍの運転制御モードを変更する予定がある場合に、当該予定を、データ収集部４１を介して興奮度調整装置１０に送信可能である。
　コンテンツ読込部４３は、例えば、ＣＤ（Compact Disc）、ＤＶＤまたはＢＤ（Blu-ray Disc）等の光ディスクの読込装置（光ディスクドライブ等）自体でも良いし、またはこれらと通信可能に接続されていてもよい。また、例えば、ＵＳＢ端子、またはＷｉ-Ｆｉ通信装置もしくはブルートゥース通信装置等の無線通信装置等、デジタルメディアとのインタフェースであってもよい。すなわち、興奮度調整装置１０は、コンテンツ読込部４３を介して外部からコンテンツデータを取得することが可能である。
　制御部３５は、コンテンツ読込部を介して外部から読み込まれたコンテンツデータを再生し、出力部３９を介してディスプレイ１９Ａに当該コンテンツの映像または画像（以下、単に映像と称する）を表示させることが可能である。また、制御部３５は、コンテンツ読込部を介して外部から読み込まれたコンテンツデータを再生し、スピーカー２１に当該コンテンツの音声及び音響を含む音を生成させることが可能である。
　［興奮度記憶装置としての動作］
　以下、興奮度調整装置１０が興奮度記憶装置として機能する際の動作について説明する。興奮度記憶装置として機能する際の興奮度調整装置１０は、コンテンツを再生して当該コンテンツの再生中における自動車Ｍの運転者の興奮度の当該運転者による評価である評価興奮度の入力を受け付けてこれを取得する。以下の説明において、運転者（以下、ユーザともいう）による評価興奮度及び運転者の実際の興奮度である実際興奮度は、１から３の３つのレベルとする。また、以下の説明における自動運転レベルは、例えば、日本政府または米国運輸省道路交通安全局(NHTSA)によって定義されている自動運転レベルである。
　興奮度記憶装置として機能する際の興奮度調整装置１０は、コンテンツの再生中の運転者の行動特徴量及び当該行動特徴量が検出された際の運転者の評価興奮度を取得する。興奮度調整装置１０は、検出された運転者の行動特徴量を当該行動特徴量が検出された際の評価興奮度のレベル毎に集計する。そして、興奮度調整装置１０は、当該評価興奮度のレベル毎に集計された特徴値から、興奮度のレベルの各々における行動特徴量の平均値等、興奮度のレベルの各々に対応する特徴量としての基準値を算出する。興奮度調整装置１０は、興奮度のレベルの各々と当該興奮度のレベルの各々に対応する特徴量を関連付けて記憶する。
　自動車Ｍの運転者の行動特徴量から当該運転者の実際の興奮度の実際興奮度のレベルを判定する場合、予め決められた基準値を用いて判定することも可能である。しかし、自動車Ｍの運転者の評価興奮度のレベル毎に行動特徴量を集計して算出された基準値を用いることで、自動車Ｍの運転者の行動の個人的な特徴を加味した運転者の実際興奮度のレベルを推定または判定することが可能となる。すなわち、当該算出された基準値を用いることで、自動車Ｍの運転者の行動特徴量から、より正確に当該運転者の興奮度のレベルを判定することが可能となる。
　興奮度調整装置１０は、運転者の興奮度のレベルの正確な判定に資する特徴量の基準値を提供可能である。
　［興奮度記憶装置としての動作のための動作ルーチンの一例］
　以下に、興奮度記憶装置として機能する際の興奮度調整装置１０の動作ルーチンの一例について説明する。
　図３は、動作ルーチンの一例としての興奮度記憶ルーチンＲ１を示す図である。興奮度記憶ルーチンＲ１は、例えば、興奮度調整装置１０の電源が入ると繰り返し実行される。
　興奮度記憶ルーチンＲ１が開始されると、制御部３５は、まずコンテンツの再生が開始されたか否かを判定する（ステップＳ１）。ステップＳ１において、コンテンツの再生が開始されていないと判定される（ステップＳ１：ＮＯ）と、ルーチンＲ１は終了する。
　例えばコンテンツの再生は、運転者等がタッチパッド１９Ｂを介して、コンテンツの再生操作を行うと、制御部３５によって開始される。なお、コンテンツの再生においては、コンテンツ読込部４３から読み込まれたコンテンツを再生しても良いし、大容量記憶装置３３に保存されているコンテンツを再生してもよい。
　ステップＳ１において、コンテンツの再生が開始されたと判定されると（ステップＳ１：ＹＥＳ）、制御部３５は、運転者の動作特徴量及び音声特徴量を含む行動特徴量を取得する（ステップＳ２）。例えば、制御部３５は、上半身カメラ１１及び下半身カメラ１３から得られた映像及びマイク１５から得られた音声から、運転者の行動特徴量を検出して取得する。このステップＳ１において、制御部３５は、特徴量検出部として機能する。
　この行動特徴量の取得において、上記説明した運転者の動作に関する動作特徴量は、例えば、上半身カメラ１１及び下半身カメラ１３から得られた映像から、運転者の身体の各部の動作をモーションキャプチャすることで算出して取得されてもよい。
　ステップＳ２が終了すると、制御部３５は、自動運転レベルを取得する（ステップＳ３）。この自動運転レベルは、上述したように、走行制御装置ＶＣからデータ収集部４１を介して取得可能である。
　ステップＳ３が終了すると、制御部３５は、コンテンツの再生が終了したか否かを判定する（ステップＳ４）。ステップＳ４において、コンテンツの再生が終了していないと判定される（ステップＳ４：ＮＯ）と、制御部３５は、繰り返しステップＳ４を実行する。
　ステップＳ４において、コンテンツの再生が終了していると判定される（ステップＳ４：ＹＥＳ）と、制御部３５は、運転者からの評価興奮度の入力を待機する（ステップＳ５）。この評価興奮度の入力の待機においては、ディスプレイ１９Ａに、評価興奮度のレベルの選択肢を表示して、タッチパッド１９Ｂへの評価興奮度の入力を運転者に促してもよい。このステップＳ５において、制御部３５は、興奮度取得部として機能する。
　ステップＳ５を実行した後、制御部３５は、評価興奮度が入力されたか否かを判定する（ステップＳ６）。この判定は、タッチパッド１９Ｂを介して、評価興奮度のレベルの選択が行われたか否かによってなされ得る。ステップＳ６において評価興奮度が入力されていないと判定される（ステップＳ６：ＮＯ）と、制御部３５は再度ステップＳ５を実行して評価興奮度の入力を待機する。
　ステップＳ６において、評価興奮度が入力されたと判定される（ステップＳ６：ＹＥＳ）と、制御部３５は、再生されていたコンテンツ並びに取得された評価興奮度、自動運転レベル及び行動特徴量を、興奮度データとして興奮度データベース３３Ａに蓄積する（ステップＳ７）。このステップＳ７において、制御部３５は、特徴量記憶部として機能する。
　図４に、興奮度データベース３３Ａに蓄積された興奮度データの一例である興奮度データテーブルＴ１を示す。図４に示された興奮度データテーブルＴ１では、一例として、各興奮度データにデータＩＤが付され、コンテンツ並びに当該コンテンツが再生されている際の自動運転レベル、評価興奮度及び各特徴量がこの順に左から配列されている。なお、興奮度データテーブルＴ１においては、自動運転レベル３以上は区別していない。これは、例えば、自動運転レベル３以上では、運転者の身体の自由度が変わらず、行動特徴量に傾向の差が出ないと考えられるからである。
　ステップＳ７が終了すると、制御部３５は、ステップＳ６において興奮度データが追加された後の興奮度データベース３３Ａに保存されている興奮度データを集計する。そして、上記した実際興奮度の判断基準とすることができる特徴量の基準値を算出し、これを興奮度データベース３３Ａに保存する（ステップＳ８）。
　実際興奮度の判断基準とし得る基準値は、同一の評価興奮度に紐付けられた行動特徴量の部位毎の平均値としてもよい。例えば、評価興奮度のレベル１に対応する基準値は、図４に示す興奮度データテーブルＴ１において、同一の評価興奮度を持つデータであるデータＩＤ１、ＩＤ３、ＩＤ７・・・に紐付けられた各特徴量の平均値を算出することで求められてもよい。
　図５に、興奮度データベース３３Ａに保存された基準値データの一例である基準値テーブルＴ２を示す。基準値テーブルＴ２に示すように、興奮度のレベルの各々に対応して、すなわち興奮度のレベルの各々に紐付けられて、身体の各部の特徴量の基準値及び声の特徴量の基準値が保存されている。
　このように、上記した興奮度記憶装置としての機能する興奮度調整装置１０においては、興奮度のレベル毎に、運転者が当該興奮度の各々の何れかであるという判定の基準となる各特徴量の基準値を記憶する。このような基準値を用いることで、運転者の行動の癖を考慮して、当該運転者特徴量から実際の興奮度を正確に判定すること容易となる。すなわち、上記説明した興奮度記憶装置として機能する興奮度調整装置１０は、運転者の行動の癖を考慮して実際の興奮度を正確に判定することに資する基準値を提供することが可能である。
　これらの基準値を使って、興奮度を判定する場合、例えば、上半身カメラ１１及び下半身カメラ１３から得られた映像信号及びマイク１５から得られた音声信号から算出された運転者の各特徴量と最も近似する基準特徴量のセットを決定する。そして、当該運転者の実際の興奮度のレベルが、当該基準特徴量のセットに紐付けられた興奮度のレベルであると判定してもよい。
　上記説明においては、興奮度のレベルのみで区分して、興奮度のレベル毎に各特徴量の基準値を算出することとした。しかし、自動運転レベルによって、運転者の身体の自由度が異なる場合がある。
　例えば、自動運転レベル０の際には、運転者は手動で自動車の走行に関わる全ての操作をしなければならないため、運転者はハンドルから手を離すことが余りできず、かつアクセル及びブレーキ付近から足を離すこともできない。その一方、自動運転レベルが３以上の際には、操舵及び加減速が自動化されているため、運転者は比較的自由に手を動かすことができる。
　このような自動運転レベルの違いによる身体の自由度を加味した特徴量の基準値を算出するために、同一の興奮度のレベルかつ同一の自動運転レベルである状況毎に特徴量を集計して各特徴量の基準値を算出して保存することとしてもよい。
　図６に、興奮度データベース３３Ａに保存された基準値データの一例である基準値テーブルＴ３を示す。基準値テーブルＴ３に示すように、興奮度レベル及び自動運転レベルの組み合わせ毎に紐付けて基準特徴量が保存されることとしてもよい。
　このように、興奮度の判断基準となる基準値を自動運転レベルによってさらに細分化することで、さらに正確な判定に資する基準値を提供することが可能である。
　なお、興奮度調整装置１０は、上記基準値を用いて興奮度を判定し、当該興奮度が所定の閾値と超えたと判定すると、運転者の興奮度を抑制する抑制動作を行う興奮抑制装置として機能してもよい。この際、興奮度調整装置１０は、運転者の所定時間帯における行動特徴量を取得して、その行動特徴量と上記基準値とに基づいて、運転者の興奮度を判定し得る。
　［興奮度判定装置としての動作］
　以下、興奮度調整装置１０が興奮度判定装置として機能する際の動作について説明する。以下の説明においては、行動特徴量が大きければ大きいほど興奮度が高いとして説明する。興奮度判定装置として機能する際の興奮度調整装置１０は、自動車Ｍの運転者の身体の各部の行動特徴量及び当該行動特徴量が取得された際の自動車Ｍの運転制御情報を取得する。運転制御情報には、自動運転レベルを含む。そして、当該取得された行動特徴量及び運転制御情報に基づいて運転者の興奮度のレベルを判定する。
　自動運転レベルは、そのレベルによって自動車Ｍの走行制御の運転者に対する依存度が変わる。そのため、自動運転レベルは、自動車Ｍの走行制御の運転者に対する依存度に関する依存度情報ともいえる。
　運転者は、自動運転のレベルによって身体の動作の自由度が異なることが予測される。そのため、行動特徴量による興奮度の判定に自動運転レベルを加味することで、運転者の興奮度を正確に判定することが可能となり得る。
　興奮度調整装置１０は、興奮度のレベルを判定する際に、自動運転レベルに基づいて行動特徴量を補正して当該補正後の値を用いて興奮度レベルを判定してもよい。すなわち、行動特徴量に対する補正係数は、自動運転レベル毎に個別に設定されていてもよい。
　また、この行動特徴量の補正は、運転者の身体の各部の行動特徴量毎に個別になされてもよい。すなわち、行動特徴量に対する補正係数は、運転者の身体の各部の行動特徴量毎に個別に設定されていてもよい。
　運転者の身体の各部の動きの自由度は、自動運転の状況によって異なる。例えば、操舵を手動で行わないと行けない場合には、上半身の動きの自由度は低い。また、例えば、加減速を手動で行わなければならないときは、下半身の動きの自由度が低い。よって、自動運転レベルに基づいた行動特徴量の補正を運転者の身体の各部毎に行うことで、運転者の身体の各部の自由度を加味して、興奮度のレベルの判定を行うことが可能となり得る。
　なお、興奮度調整装置１０は、行動特徴量を補正せずに、興奮度のレベルの判定に用いる基準値である興奮度判定用基準値を自動運転レベルに基づいて変化させてもよい。
　また、興奮度調整装置１０は、自動運転レベルが高くなるほど興奮度のレベルを低く判定するようにしてもよい。例えば、興奮度調整装置１０は、興奮度のレベルの判定の際に、自動運転レベルが高くなるほど、行動特徴量の補正後の値が小さくなるようにしてもよい。また、興奮度調整装置１０は、興奮度のレベルの判定の際に、自動運転レベルが高くなるほど、興奮度のレベルの判定に用いる基準値を大きくすることとしてもよい。
　通常は、自動運転レベルが高くなるほど運転者の身体の動作の自由度が上がる。従って、自動運転レベルが低くなるほど、すなわち運転者に対する依存度が高くなるほど興奮度のレベルが高く判定されやすくすることで、興奮度のレベルを適切に判定可能となり得る。
　［興奮度判定装置としての動作のための動作ルーチンの一例］
　以下に、興奮度判定装置として機能する際の興奮度調整装置１０の動作ルーチンの一例について説明する。
　図７は、動作ルーチンの一例としての興奮度判定ルーチンＲ２を示す図である。興奮度判定ルーチンＲ２は、例えば、興奮度調整装置１０の電源が入ると繰り返し実行される。
　興奮度記憶ルーチンＲ２が開始されると、制御部３５は、まず、運転者の動作特徴量及び音声特徴量を含む行動特徴量を検出して取得する（ステップＳ１）。このステップＳ１において、制御部３５は、特徴量検出部として機能する。
　例えば、制御部３５は、上半身カメラ１１及び下半身カメラ１３から得られた映像及びマイク１５から得られた音声から、運転者の行動特徴量を取得する。この行動特徴量の取得において、上記説明した運転者の動作に関する動作特徴量は、例えば、上半身カメラ１１及び下半身カメラ１３から得られた映像から、運転者の身体の各部の動作をモーションキャプチャすることで算出して取得されてもよい。
　ステップＳ１が終了すると、制御部３５は、自動運転レベルを取得する（ステップＳ２）。この自動運転レベルは、上述したように、走行制御装置ＶＣからデータ収集部４１を介して取得可能である。このステップＳ２において、制御部３５は、走行制御情報取得部として機能する。
　ステップＳ２が終了すると、制御部３５は、自動運転レベルに基づいてステップＳ１において取得した行動特徴量の各々を補正する（ステップＳ３）。例えば、この補正は、自動運転レベルが高くなるほど大きな係数を行動特徴量の各々にかけることで行われてもよい。言い換えれば、自動車Ｍの走行のために運転者が行う操作が多いほど、すなわち、自動車Ｍの走行制御のうち運転者に依存する度合いが高いほど大きな係数を行動特徴量の各々にかけることとしてもよい。
　上述のように、行動特徴量の各々に異なる補正値が設定されていてもよい。例えば、自動運転レベルが１または２である場合、操舵が自動化されている際には手の行動特徴量に補正値として０．７をかけて他の行動特徴量は補正せず、加減速が自動化されている場合には、足に補正値として０．８をかけて他の行動特徴量は補正しないこととしてもよい。また、自動運転レベルが３以上の場合には、全ての動作特徴量に補正値として０．５をかけて、音声特徴量は補正しないこととしてもよい。
　ステップＳ３が終了すると、制御部３５は、ステップＳ３において取得された補正値を用いて運転者の興奮度を判定する（ステップＳ４）。このステップＳ４において、制御部３５は、興奮度判定部として機能する。この興奮度の判定は、予め設定されている基準値に基づいてなされてもよい。また、この興奮度の判定は、上記した興奮度記憶装置としての機能によって興奮度調整装置１０によって算出されて保存される行動特徴量の基準値に基づいて行われてもよい。
　このように、上記した興奮度判定装置として機能する興奮度調整装置１０によれば、自動化レベルの差異を加味して、興奮度の判定を行うことができる。具体的には、例えば、行動特徴量に基づく運転者の興奮度の判定を、自動化レベルによって異なる運転者の身体的自由度を加味して行うことができる。このため、運転者の興奮度を精度よく判定することが可能となる。
　なお、上述の興奮度判定ルーチンＲ２の説明においては、ステップＳ３において、行動特徴量の各々を補正することとしたが、行動特徴量の各々を補正しなくともよい。この場合、興奮度のレベルの判定のために予め設定されている基準値を、自動車Ｍの自動運転レベル、または加減速自動制御もしくは操舵自動制御等の自動運転制御の態様によって補正してもよい。
　［興奮度抑制装置としての動作（パターン１）］
　以下に、興奮度抑制装置として機能する際の興奮度調整装置１０の動作の一例について説明する。以下の説明においては、行動特徴量が大きければ大きいほど興奮度が高いとして説明する。興奮度抑制装置として機能する際の興奮度調整装置１０は、自動車Ｍの運転者の身体の各部の行動特徴量及び当該行動特徴量が取得された際の自動車Ｍの自動運転レベルを取得する。
　興奮度調整装置１０は、当該取得された行動特徴量に基づいて運転者の興奮度を判定する。そして、興奮度調整装置１０は、判定された興奮度が、現在の自動車Ｍの自動運転レベルに基づいて定められる興奮度閾値を超えるか否かを判定し、当該興奮度閾値を超えると判定すると、運転者の興奮度を抑制する動作を実行する。
　この興奮度を抑制する動作は、例えば、ディスプレイ１９Ａまたはスピーカー２１を介して、運転者の興奮度が下がる、すなわち運転者が落ち着く映像コンテンツまたは音声もしくは音響コンテンツを再生する動作であってもよい。
　興奮度調整装置１０は、自動運転レベルが低いほど、すなわち自動車Ｍの走行制御の運転者への依存度が高いほど、興奮度閾値を低く設定することとしてもよい。また、興奮度閾値を超えたか否かの判定は、運転者の行動特徴量の平均値が所定の閾値を超えたか否か、または個々の行動特徴量の１または複数が個々の行動特徴量ごとに設定された閾値を超えたか否かでなされてもよい。
　上記した興奮度抑制装置として機能する興奮度調整装置１０によれば、自動運転レベルに応じて、すなわち自動車Ｍの走行制御の運転者への依存度に応じて適切に運転者の興奮度をコントロールすることで、運転者を操縦に適切な状態に至らしめることが可能である。
　［興奮度抑制装置としての動作（パターン１）のための動作ルーチンの一例］
　以下に、興奮度抑制装置として機能する際の興奮度調整装置１０の動作ルーチンの一例について説明する。図８は、動作ルーチンの一例としての興奮度抑制ルーチンＲ３を示す図である。興奮度抑制ルーチンＲ３は、例えば、興奮度調整装置１０の電源が入ると繰り返し実行される。
　興奮度抑制ルーチンＲ３が開始されると、制御部３５は、まず、興奮度として、運転者の動作特徴量及び音声特徴量を含む行動特徴量を取得する（ステップＳ１）。例えば、制御部３５は、上半身カメラ１１及び下半身カメラ１３から得られた映像及びマイク１５から得られた音声から、運転者の行動特徴量を取得する。ステップＳ１において、制御部３５は、興奮度取得部として機能する。
　この行動特徴量の取得において、上記説明した運転者の動作に関する動作特徴量は、例えば、上半身カメラ１１及び下半身カメラ１３から得られた映像から、運転者の身体の各部の動作をモーションキャプチャすることで算出して取得されてもよい。
　ステップＳ１が終了すると、制御部３５は、自動運転レベルを取得する（ステップＳ２）。この自動運転レベルは、上述したように、走行制御装置ＶＣからデータ収集部４１を介して取得可能である。このステップＳ２において、制御部３５は、走行制御情報取得部として機能する。
　ステップＳ２が終了すると、制御部３５は、ステップＳ１において取得された興奮度が、自動運転レベル対応して定められた興奮度閾値を超えるか否かを判定する（ステップＳ３）。このステップＳ３において、制御部３５は、興奮度判定部として機能する。この判定においては、ステップＳ１において取得された身体の各部の行動特徴量の平均が、自動運転レベルに対応して定められる特徴量閾値を超えた場合に、興奮度が興奮度閾値を超えたと判断しても良い。
　また、この判定においては、ステップＳ１において取得された身体の各部の行動特徴量の１または複数が、自動運転レベルに対応して身体の各部の行動特徴量の各々に対して定められる特徴量閾値を超えた場合に、興奮度が興奮度閾値を超えたと判断してもよい。
　ステップＳ３において、興奮度が閾値を超えていないと判定される（ステップＳ３：ＮＯ）その後ルーチンは終了する。ステップＳ３において、興奮度が閾値を超えたと判定される（ステップＳ３：ＹＥＳ）と、制御部３５は、運転者の興奮度を抑制する興奮度抑制動作を実行する（ステップＳ４）。このステップＳ４において、制御部３５は、興奮抑制部として機能する。この興奮度抑制動作は、上述したように、例えば、ディスプレイ１９Ａまたはスピーカー２１を介して、運転者の興奮度を下げる、すなわち運転者を落ち着かせるコンテンツを再生する動作であってもよいし、興奮度記憶装置に記憶されている興奮度の低いコンテンツを再生する動作であってもよい。
　上述の興奮度抑制ルーチンＲ３の説明においては、ステップＳ３において、自動運転レベルによって定められる特徴量閾値を用いて興奮度が興奮度閾値を超えたか否かを判定することとした。
　しかし、自動運転レベルのみならず、自動運転制御の態様によって特徴量閾値が定められていてもよい。例えば、操縦制御が自動になっている場合は、運転者はハンドル操作をする必要が無く手の動作の自由度が高いので、手の動作に関する特徴量に対する閾値を高くするかまたは無くしてもよい。また、例えば、加減速制御が自動になっている場合には、運転者はアクセルまたはブレーキの操作をする必要が無く足の動作の自由度が高いので、足の動作に関する特徴量に対する閾値を高くするかまたは無くしてもよい。
　［興奮度抑制装置としての動作（パターン２）］
　以下に、興奮度抑制装置として機能する際の興奮度調整装置１０の動作の一例について説明する。以下の説明においては、行動特徴量が大きければ大きいほど興奮度が高いとして説明する。
　興奮度抑制装置として機能する際の興奮度調整装置１０は、運転者への依存度の異なる走行制御モードの移行、例えば自動運転レベルの移行がある場合に走行制御装置ＶＣから発せられる走行制御モード移行情報（以下、単にモード移行情報とも称する）を取得する。モード移行情報は、例えば、現在の走行制御モード及び移行後の走行制御モードの情報を含む。すなわち、モード移行情報は、走行制御モードの移行に関する情報である。
　興奮度調整装置１０は、モード移行情報を受信、すなわち取得すると、移行後の走行制御モードが移行前の走行制御モードよりも運転者への依存度が高いか否かを判定する。具体的には、例えば、移行後の自動運転レベルが移行前の自動運転レベルよりも低いレベルか否かを判定する。
　興奮度調整装置１０は、移行後の走行制御モードが移行前の走行制御モードよりも運転者への依存度が高いと判定すると、運転者の興奮度を抑制する動作を実行する。この興奮度を抑制する動作は、例えば、ディスプレイ１９Ａまたはスピーカー２１を介して、運転者の興奮度が下がる、すなわち運転者が落ち着く映像コンテンツまたは音声もしくは音響コンテンツを再生する動作であってもよい。
　興奮度調整装置１０は、運転者の現在の興奮度を取得して、移行後の運転制御モード、例えば自動運転レベルに基づいて定められる興奮度閾値を超えるか否かを判定し、当該興奮度閾値を超えると判定すると、運転者の興奮度を抑制する動作を実行することとしてもよい。運転者の興奮度は、運転者の行動特徴量に基づいて算出されてもよい。
　また、興奮度調整装置１０は、取得された運転者の興奮度が上記興奮度閾値を超えている際に、当該興奮度と興奮度閾値との差が大きいほど、興奮度の抑制効果が大きい動作を行うこととしてもよい。また、興奮度調整装置１０は、走行制御モードの移行までの時間が短いほど、興奮度の抑制効果が大きい動作を行うこととしてもよい。
　興奮度の抑制効果は、再生する楽曲の曲調が穏やかなほど、具体的には、再生する楽曲のピッチが遅いほど大きいとしてもよい。
　上記した興奮度抑制装置として機能する興奮度調整装置１０によれば、走行制御モードが運転者への依存度がより高いモードに移行する際に、運転者の興奮度をコントロールすることで、運転者を操縦に適切な状態に至らしめることが可能である。
　［興奮度抑制装置としての動作（パターン２）のための動作ルーチンの一例］
　以下に、興奮度抑制装置として機能する際の興奮度調整装置１０の動作ルーチンの一例について説明する。図９は、動作ルーチンの一例としての興奮度抑制ルーチンＲ４を示す図である。興奮度抑制ルーチンＲ４は、例えば、興奮度調整装置１０の電源が入ると繰り返し実行される。
　興奮度抑制ルーチンＲ４が開始されると、制御部３５は、まず、モード移行情報の到来を待機する（ステップＳ１）。モード移行情報は、走行制御モードが移行すると走行制御装置ＶＣが判定すると、走行制御装置ＶＣから発せられる。この判定は、例えば、走行制御装置ＶＣがＧＰＳ受信機１７から位置情報を取得し、現在の地点と近々到達する地点とで許容される自動運転レベルが異なるか否かでなされても良い。
　ステップＳ１が終了すると、制御部３５は、モード移行情報が到来して受信したか否かを判定する（ステップＳ２）。このステップＳ１及びＳ２において、制御部３５は、モード移行情報取得部として機能する。ステップＳ２において、モード移行情報が未だに受信されていないと判定される（ステップＳ２：ＮＯ）と、制御部３５は、ステップＳ１を継続して実行し、モード移行情報の到来を待機する。
　ステップＳ２において、モード移行情報が受信されたと判定される（ステップＳ２：ＹＥＳ）と、制御部３５は、運転者への依存度が高いモードに走行制御モードが移行するか否かを判定する（ステップＳ３）。この判定においては、例えば、移行後の自動運転レベルが移行前の現在の運転レベルよりも低いことをして、走行制御モードが運転者への依存度が高いモードに移行することとしてもよい。
　ステップＳ３において、運転者への依存度が高い走行制御モードに移行しないと判定される（ステップＳ３：ＮＯ）、すなわち現在の制御モードと運転者への依存度が変わらないかまたは運転者への依存度が低くなると判定されると、ルーチンＲ４は終了する。
　ステップＳ３において、運転者への依存度が高い走行制御モードに移行すると判定される（ステップＳ３：ＹＥＳ）と、制御部３５は、現在の興奮度が当該移行後の走行制御モードによって定まる興奮度閾値を超えているか否かを判定する（ステップＳ４）。
　ステップＳ４においては、例えば、制御部３５は上半身カメラ１１、下半身カメラ１３またはマイク１５からの情報に基づいて身体の各部の行動特徴量を取得する。そして、当該取得した各部の行動特徴量の平均が、走行制御モード、例えば自動運転レベルに対応して定められる特徴量閾値を超えている場合に、興奮度が興奮度閾値を超えていると判断しても良い。
　また、ステップＳ４においては、上記取得された身体の各部の行動特徴量の１または複数が、走行制御モード、例えば自動運転レベルに対応して身体の各部の行動特徴量の各々に対して定められる特徴量閾値を超えている場合に、興奮度が興奮度閾値を超えていると判断してもよい。
　ステップＳ４において、興奮度が閾値を超えると判定される（ステップＳ４：ＹＥＳ）と、制御部３５は、運転者の興奮度を抑制する興奮度抑制動作を実行する（ステップＳ５）。このステップＳ３乃至５において、制御部３５は、興奮抑制部として機能する。この興奮度抑制動作は、上述したように、例えば、ディスプレイ１９Ａまたはスピーカー２１を介して、運転者の興奮度を下げるコンテンツを再生する動作であってもよい。
　ステップＳ５が終了するかまたはステップＳ４において、興奮度が閾値を超えていると判定される（ステップＳ４：ＮＯ）と、制御部３５は、運転制御モードの移行のタイミングが到来したか否かを判定する（ステップＳ６）。この判定は、例えば、制御部３５が走行制御装置ＶＣに運転制御モードの移行のタイミングを問い合わせることで行われもよい。
　ステップＳ６において、制御モード移行のタイミングが到来したと判定される（ステップＳ６：ＮＯ）と、制御部３５は、興奮度抑制動作を終了して、ルーチンが終了する。ステップＳ６において、制御モード移行のタイミングがまだ到来していないと判定される（ステップＳ６：ＮＯ）と、制御部３５は、再度ステップＳ４を実行して、興奮度が未だ閾値を超えている場合には、興奮度抑制動作を継続する。
　上記興奮度抑制ルーチンＲ４においては、当該興奮度と興奮度閾値との差または走行制御モードの移行までの時間を考慮していないが、これらを考慮することしてもよい。
　図１０は、当該興奮度と興奮度閾値との差または走行制御モードの移行までの時間を考慮した場合の興奮度抑制ルーチンＲ５を示している。興奮度抑制ルーチンＲ５は、興奮度抑制ルーチンＲ４と処理が一部異なるのみであるので、異なる部分についてのみ説明する。
　興奮度抑制ルーチンＲ５においては、ステップＳ４において興奮度が閾値と超えていると判定される（ステップＳ４：ＹＥＳ）と、制御部３５が走行制御モードの移行までの時間が所定時間未満かを判定する（ステップＳ４－１）。
　ステップＳ４－１において、走行制御モードの移行まで所定時間以上であると判定される（ステップＳ４－１：ＹＥＳ）と、制御部３５は、運転者の現在の興奮度と移行後の走行制御モードによって定まる興奮度閾値との差が所定値以上か否かを判定する（ステップＳ４－２）。
　ステップＳ４－２において、現在の興奮度と興奮度閾値との差が所定値以下であると判定される（ステップＳ４－２：ＮＯ）と、制御部３５は通常の興奮度抑制動作を実行する（ステップＳ５－１）される。ステップＳ４－１において、走行制御モードの移行までの時間が所定時間未満であると判定される（ステップＳ４－１：ＹＥＳ）かまたはステップＳ４－２において現在の興奮度と興奮度閾値との差が所定値以上であると判定される（ステップＳ４－２：ＹＥＳ）と、制御部３５は、特別の興奮度抑制動作を実行する（ステップＳ５－２）。
　この特別の興奮度抑制動作は、通常の興奮度抑制動作よりも運転者の興奮度を抑制させる（低下させる）効果の高い動作である。例えば、特別の興奮度抑制動作においては、通常の興奮度抑制動作よりもさらに穏やかな曲調の音楽を再生することとしてもよい。
　［コンテンツ選択装置としての動作］
　以下に、コンテンツ選択装置として機能する際の興奮度調整装置１０の動作の一例について説明する。
　コンテンツ選択装置として機能する際の興奮度調整装置１０は、映像または音声等のコンテンツを再生し、当該コンテンツの再生中の運転者の行動特徴量を取得して、これを当該コンテンツの情報であるコンテンツ情報と紐付けて保存して蓄積する。
　コンテンツ選択装置として機能する際の興奮度調整装置１０は、上記保存されたコンテンツ情報及びこれに紐付けられた行動特徴量に基づいて、１のコンテンツを再生した際に当該１のコンテンツの次に再生するコンテンツである次コンテンツを選択する。
　例えば、このコンテンツの選択は、当該再生している１のコンテンツとユーザのノリ方、興奮の仕方（以下、単に興奮度の仕方という）に近い興奮の仕方のコンテンツを選択することで行う。以下の説明においては、１のコンテンツと他のコンテンツとでユーザの行動特徴量の一致度が高い場合に、当該１のコンテンツと他のコンテンツとでユーザの興奮の仕方が近いと判断することとする。
　従って、興奮度抑制装置１０は、現在再生している１のコンテンツに紐付けられている行動特徴量と他のコンテンツに紐付けられている行動特徴量との比較に基づいて、他のコンテンツの中から選択する。例えば、興奮度抑制装置１０は、当該再生している１のコンテンツに紐付けられている行動特徴量と他のコンテンツに紐付けられている行動特徴量との比較に基づいて、他のコンテンツの中から選択する。具体的には、例えば、他のコンテンツの中から当該再生している１のコンテンツに紐付けられた行動特徴量と一致度の高い行動特徴量に紐付けられたコンテンツを選択することで行う。
　この行動特徴量の一致度の評価は、１のコンテンツと他のコンテンツとで、紐付けられている行動特徴量を身体の部位毎に比較して、特徴量の差の合計が少ない場合に一致度が高いと評価することで行われてもよい。
　また、この行動特徴量の一致度の評価は、１のコンテンツに紐付けられた身体の部位毎の行動特徴量（例えば、頭の特徴量：手の特徴量：足の特徴量）の比を、他のコンテンツに紐付けられた身体の部位毎の行動特徴量と比較して、当該比の値の近似度が高い場合に一致度が高いとして評価することで行われてもよい。
　このように、上述したコンテンツ選択装置として機能する興奮度抑制装置１０によれば、現在再生しているコンテンツの次に再生するコンテンツを、現在再生しているコンテンツとユーザの興奮の仕方の近いコンテンツにすることで、ユーザの興奮を損ねることなく、コンテンツの再生を行うことが可能である。また、興奮度を抑制させるためのコンテンツが再生中である場合には、続けて興奮度を抑制させるためのコンテンツを再生することが可能である。
　［コンテンツ選択装置としての動作のための動作ルーチンの一例］
　以下に、興奮度記憶装置として機能する際の興奮度調整装置１０の動作ルーチンの一例について説明する。
　図１１は、ユーザの興奮の仕方を蓄積するための動作ルーチンの一例としての興奮度蓄積ルーチンＲ６を示す図である。興奮度蓄積ルーチンＲ６は、例えば、興奮度調整装置１０の電源が入ると繰り返し実行される。
　興奮度蓄積ルーチンＲ６が開始されると、制御部３５は、まずコンテンツの再生が開始されたか否かを判定する（ステップＳ１）。ステップＳ１において、コンテンツの再生が開始されていないと判定される（ステップＳ１：ＮＯ）と、ルーチンＲ６は終了する。
　ステップＳ１において、コンテンツの再生が開始されたと判定されると（ステップＳ１：ＹＥＳ）、制御部３５は、運転者の動作特徴量及び音声特徴量を含む行動特徴量を検出して取得する（ステップＳ２）。このステップＳ２において、制御部３５は、特徴量検出部として機能する。例えば、制御部３５は、上半身カメラ１１及び下半身カメラ１３から得られた映像及びマイク１５から得られた音声から、運転者の行動特徴量を取得する。
　この行動特徴量の取得において、上記説明した運転者の動作に関する動作特徴量は、例えば、上半身カメラ１１及び下半身カメラ１３から得られた映像から、運転者の身体の各部の動作をモーションキャプチャすることで算出して取得されてもよい。
　ステップＳ２が終了すると、制御部３５は、コンテンツの再生が終了したか否かを判定する（ステップＳ３）。ステップＳ３において、コンテンツの再生が終了していないと判定される（ステップＳ３：ＮＯ）と、制御部３５は、繰り返しステップＳ３を実行する。
　ステップＳ３において、コンテンツの再生が終了していると判定される（ステップＳ４：ＹＥＳ）と、制御部３５は、再生されていたコンテンツ並びに行動特徴量を、興奮度データとして興奮度データベース３３Ａに蓄積する（ステップＳ４）。このステップＳ４において、制御部３５は、記憶部として機能する。
　ここで、興奮度データベース３３Ａに蓄積されるデータは、例えば、上述の説明において図４に示した興奮度データテーブルＴ１のうちの自動運転レベルと評価興奮度を除いたものであってもよい。
　このように、興奮度蓄積ルーチンＲ６によって、コンテンツと当該コンテンツに紐付けられた行動特徴量を含む情報が蓄積される。
　図１２は、ユーザが再生中のコンテンツと同様の興奮の仕方をするコンテンツを次コンテンツとして選択しつつ再生するコンテンツ再生ルーチンＲ７を示す図である。コンテンツ再生ルーチンＲ７は、例えば、タッチパッド１９Ｂ等を通してユーザからコンテンツの再生操作を受け付けた際に開始することとしてもよい。
　コンテンツ再生ルーチンが開始されると、まず、制御部３５は、コンテンツの再生を開始する（ステップＳ１）。このステップＳ１において、制御部３５は、コンテンツ再生部として機能する。ステップＳ１が終了すると、制御部３５は、ユーザの興奮の仕方が再生中のコンテンツに近い興奮の仕方のコンテンツを選択する（ステップＳ２）。このステップＳ２において、制御部３５は、コンテンツ選択部として機能する。
　例えば、この選択において、制御部３５は、まず、上記した興奮度蓄積ルーチンＲ６によって興奮度データベース３３Ａ内に保存されたデータを参照し、再生中のコンテンツに紐付けられた行動特徴量を読み出す。そして、当該読み出された行動特徴量と最も一致度が高い行動特徴量に紐付けられているコンテンツを次に再生する次再生コンテンツとして選択する。
　ステップＳ２の終了後、制御部３５は、ユーザから再生終了操作を受け付けたかを判定する（ステップＳ３）。この判定は、例えば、タッチパッド１９Ｂ等を通してユーザからコンテンツの再生終了操作を受け付けたか否かで判定してもよい。
　ステップＳ３において、再生終了操作を受け付けたと判定される（ステップＳ３：ＹＥＳ）と、ルーチンＲ７は終了する。
　ステップＳ３において、再生終了操作が受け付けられていない判定される（ステップＳ３：ＮＯ）と、制御部３５は、現在再生されているコンテンツが終了したかを判定する（ステップＳ４）。ステップＳ４において、現在再生されているコンテンツが終了していないと判定される（ステップＳ４：ＮＯ）と、制御部３５はステップＳ４を再度実行する。
　ステップＳ４において、現在再生されているコンテンツが終了したと判定される（ステップＳ４：ＹＥＳ）と、制御部３５は、ステップＳ２において選択された次コンテンツを再生する（ステップＳ５）。ステップＳ５の終了後、制御部３５は、再度ステップＳ２を実行する。
　上記実施例１で説明した興奮度調整装置１０によれば、運転者の興奮度を効果的に調整することが可能となり、それによって運転者の運転を支援することが可能である。
　上述した実施例における興奮度調整装置１０の構成、ルーチン、またはデータの形式等は、例示に過ぎず、用途等に応じて、適宜選択または変更することができる。
１０　興奮度調整装置
３１　システムバス
３３　大容量記憶装置
３５　制御部

Claims (4)

  1. 　移動体の乗員の行動に関する特徴量を検出する特徴量検出部と、
    　前記特徴量を検出した際の前記乗員の興奮度を示す興奮度情報を取得する興奮度取得部と、
    　前記特徴量及び前記興奮度情報に基づいて、前記興奮度のうちの第１興奮度に対応する特徴量である第１対応特徴量を算出し、前記第１対応特徴量を、前記第１興奮度と関連付けて記憶する特徴量記憶部と、
    　を備えることを特徴とする記憶装置。
  2. 　前記特徴量が検出された際の移動体の自動運転レベルを示す自動運転レベル情報を取得する自動運転レベル取得部を有し、前記特徴量記憶部は、前記特徴量、前記興奮度情報及び前記自動運転レベル情報に基づいて、前記第１興奮度及び前記自動運転レベルのうちの第１自動運転レベルに対応する特徴量である第２対応特徴量を算出し、前記第２対応特徴量を、前記第１興奮度及び前記第１自動運転レベルと関連付けて記憶することを特徴とする請求項１の記憶装置。
  3. 　前記特徴量検出部は、所定のコンテンツの再生中に前記特徴量を検出することを特徴とする請求項１または２に記載の記憶装置。
  4. 　移動体の乗員の行動に関する特徴量を検出する特徴量検出部と、
    　前記特徴量を検出した際の前記乗員の興奮度を示す興奮度情報を取得する興奮度取得部と、
    　前記特徴量及び前記興奮度情報に基づいて、前記興奮度のうちの第１興奮度に対応する特徴量である第１対応特徴量を算出し、前記第１対応特徴量を、前記第１興奮度と関連付けて記憶する特徴量記憶部と、
    　所定時間帯において前記特徴量検出部が検出した特徴量及び前記特徴量記憶部に記憶された第１特徴量に基づいて、前記所定時間帯の前記運転者の興奮度を判定し、当該判定された興奮度が所定の閾値を超えたと判定されると、前記運転者の興奮度を抑制する抑制動作を行う興奮抑制部と。
    　を備えることを特徴とする興奮抑制装置。
PCT/JP2018/047182 2017-12-27 2018-12-21 記憶装置及び興奮抑制装置 WO2019131485A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2019561633A JP6963632B2 (ja) 2017-12-27 2018-12-21 記憶装置及び興奮抑制装置
EP18894933.3A EP3716013A4 (en) 2017-12-27 2018-12-21 STORAGE DEVICE AND EXCITATION SUPPRESSION DEVICE
US16/958,574 US11430230B2 (en) 2017-12-27 2018-12-21 Storage device and excitement suppression device

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2017251698 2017-12-27
JP2017-251698 2017-12-27

Publications (1)

Publication Number Publication Date
WO2019131485A1 true WO2019131485A1 (ja) 2019-07-04

Family

ID=67067296

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2018/047182 WO2019131485A1 (ja) 2017-12-27 2018-12-21 記憶装置及び興奮抑制装置

Country Status (4)

Country Link
US (1) US11430230B2 (ja)
EP (1) EP3716013A4 (ja)
JP (1) JP6963632B2 (ja)
WO (1) WO2019131485A1 (ja)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS6055659B2 (ja) 1978-03-24 1985-12-06 三菱レイヨン株式会社 折板屋根用採光部材の取付け構造
JP2009018047A (ja) * 2007-07-12 2009-01-29 Toyota Motor Corp 心理状態推定装置
JP2010167014A (ja) * 2009-01-21 2010-08-05 Kddi Corp 感情推定方法および装置
JP2015153048A (ja) * 2014-02-12 2015-08-24 株式会社デンソー 運転支援装置
JP2015231828A (ja) * 2014-05-16 2015-12-24 株式会社リコー 表示装置、移動体
JP2016045705A (ja) * 2014-08-22 2016-04-04 トヨタ自動車株式会社 車載装置、車載装置の制御方法及び車載装置の制御プログラム

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE10152852A1 (de) 2001-10-25 2003-05-22 Daimler Chrysler Ag System zur Bestimmung und Beeinflussung der emotionalen Verfassung des Fahrers eines Kraftfahrzeugs
JP5408201B2 (ja) * 2011-08-10 2014-02-05 株式会社デンソー 車両制御装置、および車両制御プログラム
US8823530B2 (en) * 2011-11-17 2014-09-02 GM Global Technology Operations LLC System and method for auto-correcting an autonomous driving system
US9149236B2 (en) * 2013-02-04 2015-10-06 Intel Corporation Assessment and management of emotional state of a vehicle operator
US10137902B2 (en) 2015-02-12 2018-11-27 Harman International Industries, Incorporated Adaptive interactive voice system
DE102016207447A1 (de) * 2016-04-29 2017-11-02 Bayerische Motoren Werke Aktiengesellschaft Verfahren zur Insassenassistenz für ein Fahrzeug und Vorrichtung hierfür
US20190143989A1 (en) * 2016-05-11 2019-05-16 Sony Corporation Image processing device, image processing method, and movable body
US10611379B2 (en) * 2016-08-16 2020-04-07 Toyota Jidosha Kabushiki Kaisha Integrative cognition of driver behavior
US20180053102A1 (en) * 2016-08-16 2018-02-22 Toyota Jidosha Kabushiki Kaisha Individualized Adaptation of Driver Action Prediction Models
JP6612707B2 (ja) * 2016-09-30 2019-11-27 本田技研工業株式会社 情報提供装置
CN113056390A (zh) * 2018-06-26 2021-06-29 伊泰·卡茨 情境驾驶员监控系统

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS6055659B2 (ja) 1978-03-24 1985-12-06 三菱レイヨン株式会社 折板屋根用採光部材の取付け構造
JP2009018047A (ja) * 2007-07-12 2009-01-29 Toyota Motor Corp 心理状態推定装置
JP2010167014A (ja) * 2009-01-21 2010-08-05 Kddi Corp 感情推定方法および装置
JP2015153048A (ja) * 2014-02-12 2015-08-24 株式会社デンソー 運転支援装置
JP2015231828A (ja) * 2014-05-16 2015-12-24 株式会社リコー 表示装置、移動体
JP2016045705A (ja) * 2014-08-22 2016-04-04 トヨタ自動車株式会社 車載装置、車載装置の制御方法及び車載装置の制御プログラム

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP3716013A4

Also Published As

Publication number Publication date
US11430230B2 (en) 2022-08-30
EP3716013A1 (en) 2020-09-30
US20210064895A1 (en) 2021-03-04
JPWO2019131485A1 (ja) 2021-01-28
JP6963632B2 (ja) 2021-11-10
EP3716013A4 (en) 2021-09-29

Similar Documents

Publication Publication Date Title
US7505839B2 (en) Vehicular data recording device
JP4941752B2 (ja) 運転支援装置および方法、並びに、プログラム
JP2010282344A (ja) 運転情報記録装置
JP2018040574A (ja) コンテンツ利用支援装置、コンテンツ利用支援方法及びコンテンツ利用支援プログラム
WO2019131485A1 (ja) 記憶装置及び興奮抑制装置
JP2011091667A (ja) ドライブレコーダ、記録方法、データ処理装置、データ処理方法及びプログラム
JP5106756B2 (ja) 記録装置および車両事故記録方法
JP2019116214A (ja) 興奮度判定装置
JP2019116215A (ja) 興奮抑制装置
JP2019116216A (ja) 興奮抑制装置
JP2019117545A (ja) コンテンツ選択装置
JP6794710B2 (ja) 音環境調整装置および音環境調整方法
JP4829184B2 (ja) 車載装置および音声認識方法
US11668578B2 (en) Interaction device, interaction method, and storage medium storing program
JP2005223451A (ja) 再生装置、データ送受信システム及び再生方法
JP4042535B2 (ja) 車載情報提供装置
US20170330595A1 (en) Audio information correction system, audio information correction method, and audio information correction program
JP5452768B2 (ja) 車載情報制御装置及びナビゲーション装置
JP2022041259A (ja) 車両用記録制御装置、記録制御方法およびプログラム
JP7340481B2 (ja) コンテンツ再生システムおよびコンテンツ選択方法
JP2019153933A (ja) コンテンツ再生装置、コンテンツ再生方法
US20230114061A1 (en) Car sickness inhibition device, method, storage medium, and vehicle seat
WO2016098326A1 (ja) 音声再生装置、音声再生方法
JP2021099573A (ja) 車載装置、車載装置の制御方法及び制御プログラム
JP2023024535A (ja) 情報記録装置、情報記録方法及び情報記録用プログラム並びに記録媒体

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 18894933

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2019561633

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

ENP Entry into the national phase

Ref document number: 2018894933

Country of ref document: EP

Effective date: 20200626