JP2015067254A - On-vehicle equipment and vehicle mounted therewith - Google Patents
On-vehicle equipment and vehicle mounted therewith Download PDFInfo
- Publication number
- JP2015067254A JP2015067254A JP2013206073A JP2013206073A JP2015067254A JP 2015067254 A JP2015067254 A JP 2015067254A JP 2013206073 A JP2013206073 A JP 2013206073A JP 2013206073 A JP2013206073 A JP 2013206073A JP 2015067254 A JP2015067254 A JP 2015067254A
- Authority
- JP
- Japan
- Prior art keywords
- facial expression
- vehicle
- display unit
- unit
- icon
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Abstract
Description
本発明は、例えば、車内において映像単独、または音声とともに映像を再生する車載機器と、それを搭載した自動車に関するものである。 The present invention relates to, for example, an in-vehicle device that reproduces an image alone or together with sound in a vehicle, and an automobile equipped with the same.
車内の運転席前方に、カメラを設置し、運転者の顔を認識することで、エンジンの起動許可をだしたり、運転席の位置を設定したりするものが存在する(例えば下記特許文献1)。 There is a camera installed in front of the driver's seat in the car and recognizing the driver's face to give permission to start the engine or set the position of the driver's seat (for example, Patent Document 1 below). .
すなわち、メモリに登録した人物しかエンジンを起動できないようにすることで、盗難などが発生しないようにしたものである。 That is, only the person registered in the memory can start the engine, so that theft or the like does not occur.
また、登録した人物の運転席位置を自動調整するようにすることで、利便性を高めたものである。 In addition, convenience is enhanced by automatically adjusting the driver's seat position of the registered person.
上記従来例においては、運転席の状態をカメラで検出するもので、その点では、種々の効果を発揮するが、後席の状態を前席、例えば運転者に知らせる機能は設けられていない。 In the above conventional example, the state of the driver's seat is detected by the camera, and in this respect, various effects are exhibited. However, the function of notifying the front seat, for example, the driver, of the state of the rear seat is not provided.
つまり、運転中に、後席の実映像を確認するのは、安全運転の観点から好ましくない。 That is, it is not preferable from the viewpoint of safe driving to check the real image of the rear seat while driving.
そこで、本発明は、安全に後席の状況を確認することができるようにすることを目的とするものである。 Therefore, an object of the present invention is to make it possible to confirm the situation of the rear seat safely.
そしてこの目的を達成するために本発明は、車内の前席側に設置される第1の表示部と、車内の後席側に設置される第2の表示部と、前記第2の表示部に対応して設けられたカメラと、このカメラ、および前記第1、第2の表示部に接続された制御部と、この制御部に接続されたメモリ、映像再生部、電源部とを備え、前記制御部は、前記カメラで撮影した映像から顔表情認識動作を実行し、次に、前記顔表情認識動作で認識された特定表情に対するアイコンを作成し、その後、このアイコンを前記第1の表示部に出力させる構成とし、これにより所期の目的を達成するものである。 In order to achieve this object, the present invention provides a first display unit installed on the front seat side in the vehicle, a second display unit installed on the rear seat side in the vehicle, and the second display unit. A control unit connected to the camera and the first and second display units, a memory connected to the control unit, a video playback unit, and a power supply unit, The control unit executes a facial expression recognition operation from the video imaged by the camera, and then creates an icon for the specific facial expression recognized by the facial expression recognition operation, and then displays the icon for the first display. In this configuration, the intended purpose is achieved.
以上のように本発明は、車内の前席側に設置される第1の表示部と、車内の後席側に設置される第2の表示部と、前記第2の表示部に対応して設けられたカメラと、このカメラ、および前記第1、第2の表示部に接続された制御部と、この制御部に接続されたメモリ、映像再生部、電源部とを備え、前記制御部は、前記カメラで撮影した映像から顔表情認識動作を実行し、次に、前記顔表情認識動作で認識された特定表情に対するアイコンを作成し、その後、このアイコンを前記第1の表示部に出力させる構成としたので、安全に後席の状況を確認することができる。 As described above, the present invention corresponds to the first display unit installed on the front seat side in the vehicle, the second display unit installed on the rear seat side in the vehicle, and the second display unit. A control unit connected to the camera and the first and second display units; a memory connected to the control unit; a video playback unit; and a power source unit. The facial expression recognition operation is executed from the video photographed by the camera, and then an icon for the specific facial expression recognized by the facial expression recognition operation is created, and then the icon is output to the first display unit. Since it is configured, it is possible to check the status of the rear seat safely.
すなわち、本発明では、車内の後席側に設置される第2の表示部に対応して設けたカメラで撮影した映像から顔表情認識動作を実行し、次に、この顔表情認識動作で認識された特定表情に対するアイコンを作成し、その後、このアイコンを前席側の第1の表示部に出力させる構成としたので、例えば、運転者は、アイコン映像により、後席人物の顔表情も安全に確認することが出来、その結果として、安全運転に貢献できるものとなる。 That is, in the present invention, the facial expression recognition operation is executed from the video imaged by the camera provided corresponding to the second display unit installed on the rear seat side in the vehicle, and then recognized by this facial expression recognition operation. The icon for the specific facial expression is created and then the icon is output to the first display on the front seat side. For example, the driver can safely display the facial expression of the person in the back seat using the icon image. As a result, it can contribute to safe driving.
以下、本発明の一実施形態を、添付図面を用いて説明する。 Hereinafter, an embodiment of the present invention will be described with reference to the accompanying drawings.
(実施の形態1)
図1において、自動車の車内前席に設置された表示部1で、この前席側にはスピーカ2も配置されている。
(Embodiment 1)
In FIG. 1, a display unit 1 is installed in the front seat of an automobile, and a speaker 2 is also arranged on the front seat side.
また、自動車の車内後席にも、右側に表示部3、左側に表示部4が配置されている。 In addition, a display unit 3 on the right side and a display unit 4 on the left side are also arranged in the rear seat of the car.
さらに、表示部3に対応してスピーカ5、カメラ6、表示部4に対応してスピーカ7、カメラ8が配置されている。 Further, a speaker 5 and a camera 6 are arranged corresponding to the display unit 3, and a speaker 7 and a camera 8 are arranged corresponding to the display unit 4.
なお、右側の表示部3、スピーカ5、カメラ6は、右側前席の背面側の中部から上方にかけて配置されている。 The right display unit 3, the speaker 5, and the camera 6 are arranged from the middle to the upper side on the back side of the right front seat.
また、左側の表示部4、スピーカ7、カメラ8は、左側前席の背面側の中部から上方にかけて配置されている。 Further, the left display unit 4, the speaker 7, and the camera 8 are arranged from the middle to the upper side on the back side of the left front seat.
制御部9には、表示部1、スピーカ2、表示部3、4、スピーカ5、カメラ6、スピーカ7、カメラ8は接続されている。 A display unit 1, a speaker 2, display units 3 and 4, a speaker 5, a camera 6, a speaker 7 and a camera 8 are connected to the control unit 9.
この制御部9には、それ以外にも、表示部1でナビゲーションを行うためのGPS部10、メモリ11、再生部12、電源部13、操作部14が接続されている。 In addition to this, a GPS unit 10 for performing navigation on the display unit 1, a memory 11, a playback unit 12, a power supply unit 13, and an operation unit 14 are connected to the control unit 9.
操作部14は、各種設定を行うためのものであり、これは前席側と後席側の両方に設置されている。 The operation unit 14 is for performing various settings, and is installed on both the front seat side and the rear seat side.
また、再生部12は、映像を表示部1、3、4に出力するためのものであり、そのときの音声はスピーカ2、5、7から出力される。 The playback unit 12 is for outputting video to the display units 1, 3, 4, and the sound at that time is output from the speakers 2, 5, 7.
以上の構成において、運転席には、例えば母親が乗車し、また後席右側にはチャイルドシートが設置され、そこには子供が乗車している状態となっている。 In the above configuration, for example, a mother is in the driver's seat, and a child seat is installed on the right side of the rear seat, and a child is in there.
母親は、運転時にも後席の子供のことが気になるので、操作部14を操作して、子供見守りモードを起動する。 Since the mother is worried about the child in the backseat during driving, the mother operates the operation unit 14 to activate the child watching mode.
このときには、制御部9により、後席側のカメラ6、8を起動し、これによりチャイルドシートに保持状態となった子供の顔が認識され、また同時に子供の表情も検出される(図2のS1)。 At this time, the control unit 9 activates the cameras 6 and 8 on the rear seat side, thereby recognizing the child's face held in the child seat and simultaneously detecting the child's facial expression (S1 in FIG. 2). ).
なお、このような子供の顔を検出すること、およびその表情を検出する技術は、既に写真を写すデジタルカメラや監視カメラ等で広く知られた技術であるので、説明の煩雑化を避けるために、説明は省略する。 In addition, since the technique for detecting such a child's face and detecting its facial expression is a technique that has already been widely known for digital cameras and surveillance cameras that take pictures, in order to avoid complication of explanation The description is omitted.
次に、制御部9は、(図2のS1)で認識した子供の表情に対応するアイコンをメモリ11から読み出し(図2のS2)、母親が見ているカーナビ画面の一部に出力させる(図2のS3)。 Next, the control unit 9 reads out an icon corresponding to the child's facial expression recognized in (S1 in FIG. 2) from the memory 11 (S2 in FIG. 2), and outputs it to a part of the car navigation screen that the mother is viewing (S2 in FIG. 2). S3 in FIG.
つまり、母親は、表示部1に地図情報を表示させた状態で運転を行っているので、この地図の一部(例えば地図を邪魔しない右上)に、(図2のS2)で読み出されたアイコンが表示される。 That is, since the mother is driving in a state where the map information is displayed on the display unit 1, the map is read in (S2 in FIG. 2) in a part of this map (for example, the upper right that does not disturb the map). An icon is displayed.
例えば、ニコニコ顔に対応するアイコンが表示部1の一部に表出させられているとき(図2のS4)には、母親は、それを運転中に表示部1で確認することが出来るので、安心して運転に集中することが出来る。 For example, when the icon corresponding to the smiling face is displayed on a part of the display unit 1 (S4 in FIG. 2), the mother can check it on the display unit 1 while driving. You can concentrate on driving with confidence.
また、子供が泣いているときには、表示部1でそれを確認するまでもないことではあるが、このときには、(図2のS3)で、なき顔に対応するアイコンが表示部1の一部に表出させられることになる(図2のS5)。 Further, when the child is crying, it is not necessary to confirm it on the display unit 1, but at this time, an icon corresponding to a face without a face is displayed on a part of the display unit 1 (S 3 in FIG. 2). It will be expressed (S5 in FIG. 2).
母親は、子供が泣いていることに気をもむことになるのであるが、運転中であるので、直ちに対応することは出来ない。 The mother is worried that the child is crying, but because she is driving, she cannot respond immediately.
そこで、本実施形態では、制御部9により、再生部12を起動し、予め設定していた音楽や映像を、後席側の表示部3、4、スピーカ5、7から出力させる(図2のS6)。 Therefore, in the present embodiment, the control unit 9 activates the playback unit 12 to output preset music and video from the display units 3 and 4 and the speakers 5 and 7 on the rear seat side (see FIG. 2). S6).
つまり、音楽と映像によって子供をあやす行動を自動的に起動させるようにしたものである。 In other words, the action to cheat the child by music and video is automatically activated.
したがって、母親は、子供が泣いていることに対して「何の対応(あやす)」もしていないことに対する、気遣いをすることなく、運転に集中することが出来る。 Therefore, the mother can concentrate on driving without worrying about the fact that the child is not doing “no response” to the crying.
また、制御部9は、このように再生部12を起動したのちにも、(図2のS1、S2、S3)が繰り返され、少なくとも(図2のS3)で、なき顔に対応するアイコンが出力されている状態では、子供をあやすための音楽と映像が後席側の表示部3、4、スピーカ5、7から出力される。 Further, the controller 9 repeats (S1, S2, S3 in FIG. 2) even after starting the reproducing unit 12 in this way, and at least (S3 in FIG. 2), an icon corresponding to a face without a face is displayed. In the output state, music and video for comforting the child are output from the display units 3 and 4 and the speakers 5 and 7 on the rear seat side.
また、このような(図2のS3)で、ニコニコ顔のアイコンが出力されたときには、次には(図2のS4)で表示部1にニコニコ顔のアイコンが表示されることになる。 Further, when a smiley face icon is output in such a manner (S3 in FIG. 2), a smiley face icon is displayed on the display unit 1 next (S4 in FIG. 2).
したがって、母親は安心し、運転に集中することが出来る。 Therefore, the mother can feel safe and concentrate on driving.
また、前回のルーチンで後席側の表示部3、4、スピーカ5、7から、子供をあやす音声と映像が出力されているときには、この状態が継続されるように(図2のS7)から、(図2のS6)へと移行する。 In addition, when the voice and the image for the child are output from the display units 3 and 4 and the speakers 5 and 7 on the rear seat side in the previous routine, this state is continued (S7 in FIG. 2). (S6 in FIG. 2).
さらに、このように後席側の表示部3、4、スピーカ5、7から、子供をあやす音声と映像が出力されている状態で、(図2のS3)で、就寝顔のアイコンが出力されると、(図2のS8)で表示部1にニコニコ顔のアイコンが表示されることになる。 Further, the sleeping face icon is output in (S3 in FIG. 2) in the state in which the voice and the image for the child are output from the display units 3 and 4 and the speakers 5 and 7 on the rear seat side as described above. Then, a smiley face icon is displayed on the display unit 1 (S8 in FIG. 2).
したがって、母親は安心し、運転に集中することが出来る。 Therefore, the mother can feel safe and concentrate on driving.
また、このときには、次の(図2のS9)で、後席側の表示部3、4、スピーカ5、7から、子供をあやす音声と映像が出力されているか、否かの判断が行われる。 Further, at this time, in the next (S9 in FIG. 2), it is determined whether or not the voice and video for the child are output from the display units 3 and 4 and the speakers 5 and 7 on the rear seat side. .
そして、このときには子供をあやす音声と映像が出力されているので、子供をあやす音声と映像の出力を停止する(図2のS10)。 At this time, since the audio and video for children are output, the output of the audio and video for children is stopped (S10 in FIG. 2).
つまり、折角寝付いた子供を起こしてはいけないので、子供をあやす音声と映像の出力を停止するのである。 In other words, since the child who has fallen asleep must not be woken up, the output of the audio and video that confers the child is stopped.
以上のごとく、本実施形態では、車内の後席側に設置される表示部3、4に対応して設けたカメラ6、8で撮影した映像から顔表情認識動作を実行し、次に、この顔表情認識動作で認識された特定表情に対するアイコンを作成し、その後、このアイコンを前席側の表示部1に出力させる構成としたので、例えば、運転者は、アイコン映像により、後席人物の顔表情も安全に確認することが出来、その結果として、安全運転に貢献できるものとなる。 As described above, in the present embodiment, the facial expression recognition operation is performed from the images captured by the cameras 6 and 8 provided corresponding to the display units 3 and 4 installed on the rear seat side in the vehicle. Since the icon for the specific facial expression recognized by the facial expression recognition operation is created and then the icon is output to the display unit 1 on the front seat side, the driver can, for example, Facial expressions can also be confirmed safely, and as a result, it can contribute to safe driving.
また、前席側の表示部1で確認するのはアイコンであって、これは実映像を確認するよりは、特徴を瞬時に理解することが出来るので、それを注視する必要は無く、この点で安全運転に貢献できるものとなる。 Also, what is confirmed on the display unit 1 on the front seat side is an icon, which can be understood instantly rather than confirming the actual video, so there is no need to pay attention to it. This will contribute to safe driving.
以上のごとく本発明においては、車内の後席側に設置される第2の表示部に対応して設けたカメラで撮影した映像から顔表情認識動作を実行し、次に、この顔表情認識動作で認識された特定表情に対するアイコンを作成し、その後、このアイコンを前席側の第1の表示部に出力させる構成としたので、例えば、運転者は、アイコン映像により、後席人物の顔表情も安全に確認することが出来、その結果として、安全運転に貢献できるものとなる。 As described above, in the present invention, the facial expression recognition operation is executed from the video imaged by the camera provided corresponding to the second display unit installed on the rear seat side in the vehicle, and then the facial expression recognition operation is performed. The icon for the specific facial expression recognized in step S3 is created, and then the icon is output to the first display unit on the front seat side. Can be confirmed safely, and as a result, it can contribute to safe driving.
したがって、車載機器や、それを搭載した自動車としての活用が期待されるものとなる。 Therefore, utilization as an in-vehicle device or a car equipped with the same is expected.
1 表示部
2 スピーカ
3 表示部
4 表示部
5 スピーカ
6 カメラ
7 スピーカ
8 カメラ
9 制御部
10 GPS部
11 メモリ
12 再生部
13 電源部
14 操作部
DESCRIPTION OF SYMBOLS 1 Display part 2 Speaker 3 Display part 4 Display part 5 Speaker 6 Camera 7 Speaker 8 Camera 9 Control part 10 GPS part 11 Memory 12 Playback part 13 Power supply part 14 Operation part
Claims (4)
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013206073A JP2015067254A (en) | 2013-10-01 | 2013-10-01 | On-vehicle equipment and vehicle mounted therewith |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013206073A JP2015067254A (en) | 2013-10-01 | 2013-10-01 | On-vehicle equipment and vehicle mounted therewith |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2015067254A true JP2015067254A (en) | 2015-04-13 |
Family
ID=52834370
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2013206073A Pending JP2015067254A (en) | 2013-10-01 | 2013-10-01 | On-vehicle equipment and vehicle mounted therewith |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2015067254A (en) |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2017124915A (en) * | 2016-01-14 | 2017-07-20 | 株式会社日立ビルシステム | In-car information display device of elevator and elevator system |
CN107566896A (en) * | 2017-08-17 | 2018-01-09 | 上海擎感智能科技有限公司 | Multimedia messages recommend method and device, storage medium, terminal |
CN108133166A (en) * | 2016-11-30 | 2018-06-08 | 中兴通讯股份有限公司 | A kind of method and device of show staff's state |
JP6389346B1 (en) * | 2018-02-23 | 2018-09-12 | オムロン株式会社 | Information processing apparatus, information processing system, information processing method, and program |
WO2019058496A1 (en) * | 2017-09-22 | 2019-03-28 | 株式会社電通 | Expression recording system |
WO2019220851A1 (en) | 2018-05-16 | 2019-11-21 | 株式会社Jvcケンウッド | Video output device, video output method, and computer program |
JP2021086354A (en) * | 2019-11-27 | 2021-06-03 | Tis株式会社 | Information processing system, information processing method, and program |
US11386676B2 (en) | 2018-10-19 | 2022-07-12 | Shanghai Sensetime Intelligent Technology Co., Ltd | Passenger state analysis method and apparatus, vehicle, electronic device and storage medium |
-
2013
- 2013-10-01 JP JP2013206073A patent/JP2015067254A/en active Pending
Cited By (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2017124915A (en) * | 2016-01-14 | 2017-07-20 | 株式会社日立ビルシステム | In-car information display device of elevator and elevator system |
CN108133166A (en) * | 2016-11-30 | 2018-06-08 | 中兴通讯股份有限公司 | A kind of method and device of show staff's state |
CN108133166B (en) * | 2016-11-30 | 2023-03-14 | 中兴通讯股份有限公司 | Method and device for displaying personnel state |
CN107566896A (en) * | 2017-08-17 | 2018-01-09 | 上海擎感智能科技有限公司 | Multimedia messages recommend method and device, storage medium, terminal |
CN107566896B (en) * | 2017-08-17 | 2022-02-11 | 上海擎感智能科技有限公司 | Multimedia information recommendation method and device, storage medium and terminal |
WO2019058496A1 (en) * | 2017-09-22 | 2019-03-28 | 株式会社電通 | Expression recording system |
JP2019145036A (en) * | 2018-02-23 | 2019-08-29 | オムロン株式会社 | Information processing apparatus, information processing system, information processing method, and program |
WO2019163458A1 (en) * | 2018-02-23 | 2019-08-29 | オムロン株式会社 | Information processing device, information processing system, information processing method, and program |
JP6389346B1 (en) * | 2018-02-23 | 2018-09-12 | オムロン株式会社 | Information processing apparatus, information processing system, information processing method, and program |
WO2019220851A1 (en) | 2018-05-16 | 2019-11-21 | 株式会社Jvcケンウッド | Video output device, video output method, and computer program |
US11084424B2 (en) | 2018-05-16 | 2021-08-10 | Jvckenwood Corporation | Video image output apparatus, video image output method, and medium |
US11386676B2 (en) | 2018-10-19 | 2022-07-12 | Shanghai Sensetime Intelligent Technology Co., Ltd | Passenger state analysis method and apparatus, vehicle, electronic device and storage medium |
JP2021086354A (en) * | 2019-11-27 | 2021-06-03 | Tis株式会社 | Information processing system, information processing method, and program |
JP7123028B2 (en) | 2019-11-27 | 2022-08-22 | Tis株式会社 | Information processing system, information processing method, and program |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP2015067254A (en) | On-vehicle equipment and vehicle mounted therewith | |
US9886237B2 (en) | Text-reading device and text-reading method | |
US9811995B2 (en) | Baby on board reminder | |
TW201226245A (en) | Vehicle apparatus control system and method thereof | |
JP5082834B2 (en) | Aside look detection device and method, and program | |
CN106467062A (en) | Camera chain in vehicle | |
US11057575B2 (en) | In-vehicle device, program, and vehicle for creating composite images | |
WO2019220851A1 (en) | Video output device, video output method, and computer program | |
CN114332831A (en) | Intelligent visual monitoring system of automobile cabin | |
JP2015128915A (en) | Rear seat occupant monitor system, and rear seat occupant monitor method | |
JP2003025911A (en) | On-vehicle image display device | |
WO2021254141A1 (en) | Vehicle interaction method and vehicle | |
JP2008083184A (en) | Driving evaluation system | |
JP6002975B2 (en) | Vehicle video recording device, playback device, and program | |
JP5604722B2 (en) | Vehicle video recording device, playback device, and program | |
JP2016179723A (en) | On-vehicle apparatus | |
JP2019009598A (en) | Display controller, display control method, and display control program | |
JP2008080939A (en) | Approaching object warning device | |
JP2015115914A (en) | On-vehicle apparatus and automobile mounting the same | |
JP2016196217A (en) | Periphery monitoring device | |
US20220135049A1 (en) | Display control apparatus, display control method, and storage medium | |
US11921915B2 (en) | Head-mounted display system and manned device | |
JP5968277B2 (en) | Information processing apparatus and information processing method | |
JP2007233795A (en) | Monitoring device and method, recording medium, and program | |
JP2005077335A (en) | Control method of animation reproduction device |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
RD01 | Notification of change of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7421 Effective date: 20160519 |