JP4793118B2 - Smart entry system - Google Patents

Smart entry system Download PDF

Info

Publication number
JP4793118B2
JP4793118B2 JP2006170569A JP2006170569A JP4793118B2 JP 4793118 B2 JP4793118 B2 JP 4793118B2 JP 2006170569 A JP2006170569 A JP 2006170569A JP 2006170569 A JP2006170569 A JP 2006170569A JP 4793118 B2 JP4793118 B2 JP 4793118B2
Authority
JP
Japan
Prior art keywords
door
user
vehicle
electronic key
sight
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2006170569A
Other languages
Japanese (ja)
Other versions
JP2008002095A (en
Inventor
紘子 村上
広毅 岡田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toyota Motor Corp
Original Assignee
Toyota Motor Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toyota Motor Corp filed Critical Toyota Motor Corp
Priority to JP2006170569A priority Critical patent/JP4793118B2/en
Publication of JP2008002095A publication Critical patent/JP2008002095A/en
Application granted granted Critical
Publication of JP4793118B2 publication Critical patent/JP4793118B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Description

本発明はスマートエントリーシステムに係り、特に、電子キーを持つユーザーの視線、身振り手振りまたは音声といった身体表現によって、車両ドアを操作(アンロックや開放など)するスマートエントリーシステムに関するものである。   The present invention relates to a smart entry system, and more particularly to a smart entry system that operates (unlocks, opens, etc.) a vehicle door by a body expression such as a line of sight of a user having an electronic key, gesture gesture or voice.

従来、車両ドアのロックまたはアンロックを行うに当たり、ユーザーが携帯するワイヤレス型の電子キーに備えられているドアロックボタンまたはドアアンロックボタンを操作すると、ドアロックまたはドアアンロックを自動で行うことができるキーレスエントリーシステムが広く使用されている。   Conventionally, when locking or unlocking a vehicle door, when the user operates a door lock button or door unlock button provided on a wireless electronic key carried by the user, the door is automatically locked or unlocked. Keyless entry systems that can be used are widely used.

スマートエントリーシステムというキーレスエントリーシステムを発展させたシステムもよく知られている。このシステムは、電子キーを携帯したユーザーが車両に近づくと、車載の認証システムと電子キーとの間で複数回の無線通信が行われ、該車両の正規の電子キーであることの認証が行われる。正規の電子キーであると認証され、かつユーザーがドアハンドルに手をかけたことを検知されたときに、ドアのアンロックを行う。また、正規の電子キーを持ったユーザーが車両から降りてドアを閉め、ドアハンドル近くのボタンを押すことによりドアロックを行うようにしたものである。   A system that has developed a keyless entry system called the smart entry system is also well known. In this system, when a user carrying an electronic key approaches the vehicle, wireless communication is performed a plurality of times between the in-vehicle authentication system and the electronic key, and authentication of the vehicle's authorized electronic key is performed. Is called. The door is unlocked when it is authenticated that the electronic key is authorized and when it is detected that the user has touched the door handle. In addition, a user with a regular electronic key gets out of the vehicle, closes the door, and presses a button near the door handle to lock the door.

また、上述のドアをアンロックするためのユーザーの動作として、ドアハンドルに触れるのではなく、アンロックしたいドアの下部にあるセンサーにユーザーの足部を反応させる方法もまた提案されている(例えば、特許文献1参照)。この方法により、ユーザーが両手に荷物を持っている場合においてもドアをアンロックすることが可能になる。
特開2005−133529号公報
In addition, as a user's action for unlocking the door, there is also proposed a method in which the user's foot reacts to a sensor at the lower part of the door to be unlocked instead of touching the door handle (for example, , See Patent Document 1). This method makes it possible to unlock the door even when the user has luggage in both hands.
JP 2005-133529 A

しかしながら、上記の、アンロックを行いたいドアの下部にあるセンサーにユーザーの足部を反応させる方法は、ユーザーが離れた場所にあるドアを選んで操作することができる方法ではない。そのため、ユーザーが運転席に乗車するとき、同乗者のために運転席以外のドアを開けるためには、ユーザーが同乗者の乗り込むドアに移動して、そのドアの下部にユーザーの足部を反応させるという煩雑な動作が必要になるという問題が生じる。   However, the above-described method of causing the user's foot to react to the sensor at the lower part of the door to be unlocked is not a method in which the user can select and operate the door at a remote location. Therefore, when the user gets into the driver's seat, in order to open the door other than the driver's seat for the passenger, the user moves to the passenger's entrance door and reacts the user's foot to the lower part of the door This causes a problem that a complicated operation is required.

ユーザーによる上記の移動および動作に要する労力を軽減するために、電子キーに各ドアのアンロックやロックなどを操作するボタンまたはスイッチを配置する方法も考えられる。しかし、そのような方法では、電子キー上に多くのボタンまたはスイッチが必要となり、ユーザーの混乱や電子キーの大型化を引き起こしてしまうおそれがある。そもそも、スマートエントリーシステムによる車両乗り込み時には、ユーザーは電子キーを手に持っていないのが通常である。   In order to reduce the labor required for the above-mentioned movement and operation by the user, a method of arranging a button or a switch for operating unlocking or locking of each door on the electronic key is also conceivable. However, such a method requires many buttons or switches on the electronic key, which may cause confusion for the user and increase in the size of the electronic key. In the first place, the user usually does not hold the electronic key when entering the vehicle with the smart entry system.

本発明は上記の点に鑑みてなされたものであり、電子キーを持つユーザーの視線選択されたドアを操作することができるスマートエントリーシステムを提供することを目的とする。 The present invention has been made in view of the above, and an object thereof to provide the user's line of sight with the electronic key, a smart entry system capable of operating the selected door.

上記の課題を解決するために本発明では、次に述べる各手段を講じたことを特徴とするものである。   In order to solve the above-described problems, the present invention is characterized by the following measures.

請求項1の発明は、電子キーを携帯するユーザーの視線を検出する視線検出手段と、前記視線が車両の各ドアに対応する領域のいずれにあるかに基づいて前記ユーザーによって選択されたドアを判定する演算手段と、前記演算手段で判定されたドアを操作する操作手段とを有するとともに、前記演算手段での判定後に、前記ユーザーによる視線が前記領域から逸らされ変更されたことを前記視線検出手段が検出したとき、前記ドアの操作を中止することを特徴とするものである。 According to a first aspect of the present invention, there is provided line-of-sight detection means for detecting the line of sight of a user carrying an electronic key, and a door selected by the user based on which of the areas corresponding to the doors of the vehicle. and determining arithmetic unit, which has an operating means for operating the determined door by the computing means, after the determination in the operation means, the sight line detecting that sight by the user has been changed is diverted from the region When the means detects, the operation of the door is stopped.

請求項2の発明は、請求項1に記載された、前記ユーザーの位置を検出する位置検出手段とを有し、前記視線検出手段は、前記位置にいるユーザーの視線を検出することを特徴とするものである。 According to another aspect of the invention, as set forth in claim 1, and a position detecting means for detecting a position of said user, said visual axis detecting means, and characterized by detecting a line of sight of users in the location To do.

請求項3の発明は、請求項2に記載された、前記位置検出手段で検出したユーザー方向に、光を照射する照射手段を有することを特徴とするものである
請求項4の発明は、請求項1ないし3のいずれか1項に記載された、前記操作手段として、前記ドアをアンロックするアンロック手段および前記ドアを開放する開放手段の少なくとも一方を有することを特徴とするものである。
The invention according to claim 3, according to claim 2, the user direction detected by said position detecting means, is characterized in that it has a radiation means for irradiating light
The invention of claim 4 has at least one of the unlocking means for unlocking the door and the opening means for opening the door as the operation means described in any one of claims 1 to 3. It is characterized by.

請求項5の発明は、請求項4に記載された、前記ドア作動領域内の障害物を検出する障害物検出手段を有し、前記障害物検出手段で障害物を検出した場合には前記開放手段による前記ドアの開放を禁止することを特徴とするものである。 According to a fifth aspect of the present invention, there is provided the obstacle detection means for detecting an obstacle in the door operation area according to the fourth aspect , and when the obstacle detection means detects the obstacle, the opening is performed. The opening of the door by means is prohibited.

上述の如く本発明によれば、電子キーを持つユーザーの視線によって、車両ドアを操作(アンロックや開放など)することができる。その結果、操作を行いたいドアにユーザー自身が移動することなく、そのドアを操作することが可能となる。 As described above, according to the present invention , the vehicle door can be operated (unlocked, opened, etc.) by the line of sight of the user having the electronic key. As a result, the user can operate the door without moving to the door to be operated.

次に、本発明を実施するための最良の形態について図面と共に説明する。   Next, the best mode for carrying out the present invention will be described with reference to the drawings.

図1は、本発明のスマートエントリーシステムの第1実施例を示す構成図である。   FIG. 1 is a block diagram showing a first embodiment of the smart entry system of the present invention.

図1で示した構成図において、大略すると、電子キー12と、電子キー認証および位置検出装置13と、カメラ14と、照明装置19と、演算装置15と、音声出力装置20と、ドアアンロック装置16と、障害物検知センサー17と、ドア開放装置18とよりなる。   In the configuration diagram shown in FIG. 1, the electronic key 12, the electronic key authentication and position detection device 13, the camera 14, the illumination device 19, the arithmetic device 15, the audio output device 20, and the door unlock are roughly described. The device 16, an obstacle detection sensor 17, and a door opening device 18 are included.

電子キー12は、車両10の外にいるユーザー11によって携帯されている。現在、商品として実施されているスマートエントリーシステムは、電子キー12と車両10内の電子キー認証装置と複数回の無線通信を行うことにより認証を行い、認証後にユーザー11が車両10のドアハンドルに触れることにより、そのドアがアンロックされる。本実施例においても、この従来商品として実施されているスマートエントリーシステムの基本機能は装備されている。   The electronic key 12 is carried by the user 11 outside the vehicle 10. The smart entry system currently implemented as a product performs authentication by performing wireless communication with the electronic key 12 and the electronic key authentication device in the vehicle 10 a plurality of times, and after authentication, the user 11 is attached to the door handle of the vehicle 10. Touching it unlocks the door. Also in this embodiment, the basic functions of the smart entry system implemented as this conventional product are provided.

電子キー認証および位置検出装置13は車両10内に存在しており、上述した電子キー12の認証を行う。本実施例では、この認証機能に加えて、認証の際における複数回の無線通信で得られた電波強度および指向性の情報を用いて、車両10を基準にした電子キー12の存在位置の決定も併せて行う装置である。得られた車両10を基準にした電子キー12の位置情報は、下述するカメラ14、照明装置19および演算装置15に出力される。   The electronic key authentication and position detection device 13 exists in the vehicle 10 and authenticates the electronic key 12 described above. In the present embodiment, in addition to this authentication function, determination of the location of the electronic key 12 with reference to the vehicle 10 using information on radio wave intensity and directivity obtained by multiple times of wireless communication at the time of authentication. This is also a device that performs in combination. The obtained position information of the electronic key 12 with reference to the vehicle 10 is output to the camera 14, the lighting device 19, and the arithmetic device 15 described below.

本実施例におけるスマートエントリーシステムは、電子キー認証および位置検出装置13を除いては、車両10の駐車状態においては、電源オフまたは節電状態(スタンバイ状態)に設定されている。電子キー認証および位置検出装置13が、電子キー12の認証に成功したときに、スマートエントリーシステム全体の電源がオンになるようになっている。このようにすることにより、駐車中の車両10において無駄な電力の使用が回避され、バッテリー上がりなどの車両10のトラブルを未然に防止する。   The smart entry system in the present embodiment is set to a power-off state or a power-saving state (standby state) when the vehicle 10 is parked, except for the electronic key authentication and position detection device 13. When the electronic key authentication and position detecting device 13 succeeds in the authentication of the electronic key 12, the entire smart entry system is turned on. By doing in this way, use of useless electric power is avoided in the parked vehicle 10, and troubles of the vehicle 10 such as battery exhaustion are prevented in advance.

カメラ14は、車両10内に設置され、撮影方向を自在に変更することが可能である。そのため、車両10周囲にある被写体を撮影することができる。上述の電子キー認証および位置検出装置13で得られた車両10を基準にした電子キー12の位置情報から、カメラ14の撮影方向を電子キー12方向にする。またこのとき、電子キー12はユーザー11が携帯しているので、この撮影方向の決定により、カメラ14の被写体をユーザー11にすることができる。カメラ14は、特にユーザー11の視線を明確に捉えるために、ユーザー11の目に焦点を合わせることができるオートフォーカス機能を有する。ユーザー11の視線を捉えた画像情報は演算装置15に出力される。   The camera 14 is installed in the vehicle 10 and can change the shooting direction freely. Therefore, a subject around the vehicle 10 can be photographed. From the position information of the electronic key 12 based on the vehicle 10 obtained by the electronic key authentication and position detection device 13 described above, the shooting direction of the camera 14 is set to the direction of the electronic key 12. At this time, since the electronic key 12 is carried by the user 11, the subject of the camera 14 can be the user 11 by determining the shooting direction. The camera 14 has an autofocus function that can focus on the eyes of the user 11, particularly in order to clearly capture the line of sight of the user 11. Image information that captures the line of sight of the user 11 is output to the computing device 15.

また、このカメラ14内には、撮影のための補助装置として露出計が内蔵されている。夜間または暗闇条件下などで光量不足であったりして、ユーザー11の視線を捉えることが難しい場合は、その情報を照明装置19に出力する。   The camera 14 has a built-in exposure meter as an auxiliary device for photographing. If it is difficult to capture the line of sight of the user 11 due to insufficient light intensity at night or in dark conditions, the information is output to the lighting device 19.

照明装置19は、車両10内に設置され、照射方向を自在に変更することができ、車両11周囲を照明することが可能である。この照明装置19は、カメラ14からの光量不足を示す情報が入力された時に、上述の電子キー認証および位置検出装置13で得られた車両10を基準にした電子キー12の位置方向に、カメラ14の撮影に適した波長の光線を照射する。電子キー12は、ユーザー11の目の位置より低い位置に携帯されていることが普通であると考えられる。そのため、照明装置19の照射方向は、電子キー12位置より少し高い位置に設定することにより、カメラ14がユーザー11の視線を精度良く捉えることができるようになる。   The illuminating device 19 is installed in the vehicle 10, can change the irradiation direction freely, and can illuminate the periphery of the vehicle 11. The illumination device 19 is configured such that when information indicating an insufficient amount of light from the camera 14 is input, the camera 19 moves in the position direction of the electronic key 12 based on the vehicle 10 obtained by the electronic key authentication and position detection device 13 described above. 14 is irradiated with a light beam having a wavelength suitable for photographing. It is considered that the electronic key 12 is usually carried at a position lower than the eye position of the user 11. For this reason, the irradiation direction of the illumination device 19 is set to a position slightly higher than the position of the electronic key 12 so that the camera 14 can accurately capture the line of sight of the user 11.

演算装置15は、車両10内に設置され、電子キー認証および位置検出装置13から得られた車両10を基準にしたユーザー11の位置情報と、カメラ14から得られたユーザー11の視線を捉えた画像情報とを入力する。この入力された2つの情報から、ユーザー11の視線の先が車両10上のどの部位にあるのかを演算する。下述の図2にて示すとおりに、車両10上はいくつかの領域に分けて定義されており、それぞれの領域と操作を行うドアとが対応している。ユーザー11の視線の先がいずれの領域にあるか、つまりどのドアを操作するのかということを出力情報とする。   The arithmetic device 15 is installed in the vehicle 10 and captures the position information of the user 11 based on the vehicle 10 obtained from the electronic key authentication and position detection device 13 and the line of sight of the user 11 obtained from the camera 14. Enter image information. From this two pieces of input information, it is calculated which part on the vehicle 10 the point of view of the user 11 is. As shown in FIG. 2 described below, the vehicle 10 is defined by being divided into several areas, and each area corresponds to a door to be operated. The output information is in which area the line of sight of the user 11 is located, that is, which door is operated.

前記出力情報が決定したとき、演算装置15は、音声出力装置20を用いてユーザー11にドア操作準備完了の合図を送る。音声出力装置20から発せられる人工音声の「運転席のドアを開きますがよろしいですか?」といった確認メッセージや「ピピッ」というような電子報知音により、そのドアのアンロックおよび開放を行って良いかユーザー11に確認を問いかける。この人工音声または電子報知音による確認から所定時間以内(例えば1秒以内)に、ユーザー11が視線を送っていた車両10上の領域から視線を逸らした場合、ドア操作準備完了の合図を否定する意思と判断する。その場合は、処理はその場で中断され、開きたいドアのハンドルにユーザー11が触れることにより前記ドアのアンロックを行う、従来型のスマートエントリーシステムに移行する。ユーザー11の視線が、前記合図後も逸らされなかった場合は、そのドアの操作を肯定する意思と判断し、演算装置15は、上述したどのドアを操作するのかという情報をドアアンロック装置16に出力する。   When the output information is determined, the arithmetic device 15 sends a signal indicating that the door operation preparation is complete to the user 11 using the audio output device 20. The door may be unlocked and opened by a confirmation message such as “Do you want to open the driver's door?” Or an electronic alarm sound such as “Pipipi”, which is an artificial voice emitted from the audio output device 20. Or ask user 11 for confirmation. If the user 11 turns away from the area on the vehicle 10 where the user 11 has sent his / her line of sight within a predetermined time (for example, within 1 second) from the confirmation by the artificial voice or electronic notification sound, a signal indicating that the door operation preparation is complete is denied. Judgment is made. In that case, the process is interrupted on the spot, and the user 11 moves to a conventional smart entry system that unlocks the door by touching the handle of the door to be opened. When the line of sight of the user 11 is not deviated even after the signal, it is determined that the operation of the door is affirmed, and the arithmetic device 15 provides information on which door is operated as described above to the door unlock device 16. Output to.

ドアアンロック装置16は、車両10の前部の運転者側ドア上、前部の助手席側ドア上、後部の運転席側ドア上、後部の助手席側ドア上又はハッチバック上若しくはトランクドア上に設置されている。ドアアンロック装置16は、演算装置15で求められたユーザー11の視線の先が車両10上のどの領域にあるかという情報を入力し、上述の領域に対応したドアをアンロックする。上述の領域と開放するドアの関係については下述する。また、ドアアンロック装置16は、アンロックしたドアの情報を障害物感知センサー17に出力する。   The door unlock device 16 is provided on the front driver side door of the vehicle 10, on the front passenger side door, on the rear driver side door, on the rear passenger side door, on the hatchback, or on the trunk door. Is installed. The door unlocking device 16 inputs information on which region on the vehicle 10 the line of sight of the user 11 obtained by the computing device 15 is located, and unlocks the door corresponding to the above region. The relationship between the above area and the door to be opened will be described below. Further, the door unlocking device 16 outputs information on the unlocked door to the obstacle detection sensor 17.

障害物検知センサー17は、車両10内に設置され、各々のドア、ハッチバックまたはトランクドアの作動領域内の障害物を検出するセンサーである。ドアアンロック装置16によってアンロックされたドアについての情報を入力し、そのアンロックされたドアの作動領域内に障害物が存在するかを検出する。障害物がある時にドアの開放動作を行うと、その障害物と各ドアとの衝突は避けられず、ドアに傷やへこみが生じる事態、障害物が子供の場合には子供が怪我をしてしまう最悪の事態も想定される。そのため、作動範囲内に障害物を検知しなかった場合に、ドア開放装置18にその情報を出力する。障害物を検知した場合は、そのことを音声出力装置20による人工音声などの手段でユーザー11に警告する。   The obstacle detection sensor 17 is a sensor that is installed in the vehicle 10 and detects an obstacle in the operation area of each door, hatchback, or trunk door. Information on the door unlocked by the door unlocking device 16 is input, and it is detected whether there is an obstacle in the operation area of the unlocked door. If the door is opened when there is an obstacle, the collision between the obstacle and each door is inevitable, and the door may be scratched or dented. If the obstacle is a child, the child may be injured. The worst situation is assumed. Therefore, when no obstacle is detected within the operating range, the information is output to the door opening device 18. When an obstacle is detected, the user 11 is warned of this by means such as artificial voice by the voice output device 20.

ドア開放装置18は、車両10内に設置され、各々のドア、ハッチバックまたはトランクドアを電動で開放する装置である。障害物検知センサー17によって前記ドアの作動領域内に障害物が無いという情報を入力したとき、前記ドアを開放する。   The door opening device 18 is a device which is installed in the vehicle 10 and electrically opens each door, hatchback or trunk door. When the obstacle detection sensor 17 inputs information indicating that there is no obstacle in the operation area of the door, the door is opened.

図2は、電子キー12を携帯するユーザー11の車両10上における視線の対象と、操作するドアとの関係を示す図である。   FIG. 2 is a diagram showing the relationship between the line-of-sight target on the vehicle 10 of the user 11 carrying the electronic key 12 and the door to be operated.

上述したとおり、電子キー認証および位置検出装置13から得られた車両10を基準にしたユーザー11位置情報と、カメラ14から得られたユーザー11の視線の情報から、ユーザー11の視線の先が車両10上のどの領域にあるのかを特定する。そして、その特定された領域から操作するドアを決定する。例えば、車両10の左側(右ハンドル車であれば助手席側)にユーザー11が存在した場合、その割り振りの一例を示したものが図2である。   As described above, based on the user 11 position information based on the vehicle 10 obtained from the electronic key authentication and position detection device 13 and the information on the line of sight of the user 11 obtained from the camera 14, the line of sight of the user 11 is the vehicle. 10 to specify which area is located. Then, the door to be operated is determined from the specified area. For example, FIG. 2 shows an example of the allocation when the user 11 is present on the left side of the vehicle 10 (the passenger seat side in the case of a right-hand drive vehicle).

車両10の左側前部ドアの上部をA領域として定め、ユーザー11がこのA領域に視線を送った場合は、運転席のドアの操作を行う。   When the upper part of the left front door of the vehicle 10 is defined as the A area and the user 11 sends a line of sight to the A area, the driver's door is operated.

車両10の左側前部ドアの下部をB領域として定め、ユーザー11がこのB領域に視線を送った場合は、助手席のドアの操作を行う。   When the lower part of the left front door of the vehicle 10 is defined as a B area and the user 11 sends a line of sight to the B area, the passenger's door is operated.

車両10の左側後部ドアの上部をC領域として定め、ユーザー11がこのC領域に視線を送った場合は、後部座席の運転席側のドアの操作を行う。   When the upper part of the left rear door of the vehicle 10 is defined as a C region, and the user 11 sends a line of sight to the C region, the door on the driver seat side of the rear seat is operated.

車両10の左側後部ドアの上部をD領域として定め、ユーザー11がこのD領域に視線を送った場合は、後部座席の助手席側のドアの操作を行う。   When the upper part of the left rear door of the vehicle 10 is defined as a D region and the user 11 sends a line of sight to the D region, the door on the passenger seat side of the rear seat is operated.

車両10のCおよびD領域より後部をE領域として定め、ユーザー11がこのE領域に視線を送った場合は、ハッチバックまたはトランクドアの操作を行う。   When the rear part of the vehicle 10 from the C and D areas is defined as the E area, and the user 11 sends a line of sight to the E area, the hatchback or the trunk door is operated.

車両10のAおよびB領域より前部をF領域として定め、ユーザー11がこのF領域に視線を送った場合は、上述の全てのドアの操作を行う。   When the front portion of the vehicle 10 from the A and B regions is defined as the F region, and the user 11 sends a line of sight to the F region, all the doors described above are operated.

ここでのドアの上部とはドアのウィンド領域を指し、ドアの下部とはドアのパネル領域を指すものとする。このように、ユーザー11が存在する側のドアを上下に領域分割することで、ユーザー11が存在する側のドアと、ユーザー11が存在しない反対側のドアとを特定し操作することが可能となる。   The upper part of the door here refers to the window area of the door, and the lower part of the door refers to the panel area of the door. As described above, by dividing the door on the side where the user 11 is present in the vertical direction, the door on the side where the user 11 exists and the door on the opposite side where the user 11 does not exist can be identified and operated. Become.

ユーザー11の視線の対象が、各領域の境界部分と判定された場合は、ユーザー11の意図しないドアの操作が行われることを防ぐためにいずれのドアの操作も行わない。そして、音声出力装置20によってその旨をユーザー11に通知し、再度明確な位置に視線を送るように促す。   When the line of sight of the user 11 is determined to be a boundary portion of each region, no door operation is performed in order to prevent an unintended door operation of the user 11 from being performed. Then, the audio output device 20 notifies the user 11 to that effect, and prompts the user to send the line of sight to a clear position again.

また、ユーザー11が車両10外の運転席側に立って視線を送る場合は、領域Aと領域Bの位置は逆転する。同様に、領域Cと領域Dの位置もまた逆転する。このようにすることにより、ユーザー11が車両10外の運転席側もしくは助手席側のいずれの位置に立っていたとしても、ドアの下部領域に視線を送った場合はユーザー11のいる側のドアを操作することになり、また、ドアの上部領域に視線を送った場合はユーザー11のいる側の反対側のドアを操作することになる。そのためユーザー11は、視線を送る際に迷うことのなく直感的にドアを選び、操作することができる。   Further, when the user 11 stands on the driver's seat side outside the vehicle 10 and sends a line of sight, the positions of the area A and the area B are reversed. Similarly, the positions of region C and region D are also reversed. In this way, even if the user 11 is standing on either the driver seat side or the passenger seat side outside the vehicle 10, if the gaze is sent to the lower area of the door, the door on the side where the user 11 is located In addition, when a line of sight is sent to the upper area of the door, the door on the side opposite to the side where the user 11 is present is operated. Therefore, the user 11 can select and operate the door intuitively without getting lost when sending the line of sight.

図3は本発明の第1実施例における、処理動作を説明するフローチャートであり、以下、これについて説明する。なお、ここでは図1および図2で説明した、電子キー12を携帯するユーザー11が車両10のドアを操作しようとしているものとして説明する。
である。
FIG. 3 is a flowchart for explaining the processing operation in the first embodiment of the present invention, which will be described below. Here, the description will be made assuming that the user 11 carrying the electronic key 12 described with reference to FIGS. 1 and 2 is about to operate the door of the vehicle 10.
It is.

(Step31)車両10は、ドアが閉まりキーによるロックがなされ、駐車状態にある。また、スマートエントリーシステムは、電子キー認証および位置検出装置13を除いて電源オフもしくは節電状態(スタンバイ状態)にある。   (Step 31) The vehicle 10 is in the parking state with the door closed and locked by the key. The smart entry system is in a power-off state or a power-saving state (standby state) except for the electronic key authentication and position detection device 13.

(Step32)電子キー認証および位置検出装置13により、車両10の近傍に登録された認証可能な電子キー12が検知できれば、Step33に進む。検知できなければ、認証可能な電子キー12を検知できるまで、Step32を繰り返す。   (Step 32) If the electronic key authentication and position detection device 13 can detect the authenticable electronic key 12 registered in the vicinity of the vehicle 10, the process proceeds to Step 33. If not detected, Step 32 is repeated until the authenticable electronic key 12 is detected.

(Step33)スマートエントリーシステム全体の電源がオンになる。   (Step 33) The entire smart entry system is turned on.

(Step34)電子キー認証および位置検出装置13で得られた電子キー12の位置情報から、電子キー12を携帯するユーザー11の視線をカメラ14により検出する。そのときに、カメラ14によるユーザー11の視線検出に十分な明るさがあるならば、Step36に進む。十分な明るさが確保できていなければ、Step35に進む。   (Step 34) From the position information of the electronic key 12 obtained by the electronic key authentication and position detection device 13, the camera 14 detects the line of sight of the user 11 carrying the electronic key 12. At that time, if there is sufficient brightness for the user 14 to detect the line of sight of the user 11, the process proceeds to Step 36. If sufficient brightness cannot be secured, the process proceeds to Step 35.

(Step35)照明装置19によりユーザー11の頭部を照射し、ユーザー11の視線の検出感度を上げる。Step36に進む。   (Step 35) The illumination device 19 irradiates the head of the user 11 to increase the line-of-sight detection sensitivity of the user 11. Proceed to Step 36.

(Step36)カメラ14による撮影により、ユーザー11の視線の検出に成功したならばStep38に進む。光量不足であったり、ユーザー11がサングラスを着用していたりするような理由で、検出に失敗したならば、Step37に進む。   (Step 36) If the user's 11 line of sight has been successfully detected by photographing with the camera 14, the process proceeds to Step 38. If the detection fails due to insufficient light amount or the user 11 wearing sunglasses, the process proceeds to Step 37.

(Step37)ユーザー11の視線を検出できない状態なので、従来型のスマートエントリーシステムに移行する。電子キー12を携帯したユーザー11は、アンロックを行いたいドアのハンドルに触れることにより、アンロック動作を行うことができる。本発明の本実施例に係る処理を終了する。   (Step 37) Since the line of sight of the user 11 cannot be detected, the process shifts to the conventional smart entry system. The user 11 carrying the electronic key 12 can perform an unlocking operation by touching the handle of the door to be unlocked. The process according to this embodiment of the present invention is terminated.

(Step38)電子キー認証および位置検出装置13で得られたユーザーと、カメラ14で得られたユーザー11の視線の情報から、演算装置15による演算を行い、ユーザー11がどのドアを操作しようとしているのかを判定する。前記判定により、ユーザー11の所定のドア操作の準備が完了した旨を、音声出力装置20からの人工音声又は電子報知音を用いてユーザー11に通知する。   (Step 38) From the information obtained by the electronic key authentication and position detection device 13 and the line of sight of the user 11 obtained by the camera 14, the computation device 15 performs computation, and the user 11 is about to operate which door. It is determined whether. Based on the determination, the user 11 is notified that the preparation for the predetermined door operation of the user 11 is completed using the artificial voice or the electronic notification sound from the voice output device 20.

(Step39)Step38での通知から所定時間以内(例えば1秒以内)に、ユーザー11が視線を送っていた車両10上の領域から視線を逸らした場合、ドア操作準備完了の合図を否定する意思と判断し、Step40に進む。ユーザー11の視線が、前記合図後も逸らされなかった場合は、そのドアの操作を肯定する意思と判断し、Step41に進む。   (Step 39) In the case where the user 11 deviates from the area on the vehicle 10 from which the user 11 was sending his gaze within a predetermined time (for example, within 1 second) from the notification at Step 38, the intention of denying the door operation preparation completion signal is denied. Judge and proceed to Step 40. If the line of sight of the user 11 is not deviated even after the signal, it is determined that the user wants to affirm the operation of the door, and the process proceeds to Step 41.

(Step40)ユーザー11の視線によるドア操作を中止する旨を、音声出力装置20からの人工音声によりユーザー11に告知して、Step37に進む。   (Step 40) The user 11 is notified by the artificial voice from the audio output device 20 that the door operation by the line of sight of the user 11 is stopped, and the process proceeds to Step 37.

(Step41)ドアアンロック装置16により、所定のドアをアンロックする。   (Step 41) The door unlock device 16 unlocks the predetermined door.

(Step42)障害物感知センサー17が、Step41でアンロックされたドアの作動領域内に障害物があるかどうかを検出する。障害物が検出されなければ、Step45へ進む、障害物が検出されればStep43へ進む。   (Step 42) The obstacle detection sensor 17 detects whether there is an obstacle in the operation area of the door unlocked at Step 41. If no obstacle is detected, the process proceeds to Step 45. If an obstacle is detected, the process proceeds to Step 43.

(Step43)ドア開放装置18によるドアの自動開放は、障害物が存在するためにできない旨をユーザー11に通知する。   (Step 43) The user 11 is notified that the automatic opening of the door by the door opening device 18 cannot be performed because an obstacle exists.

(Step44)ユーザー11による手動操作によるドアの開放へ移行し、本発明の本実施例に係る処理を終了させる。   (Step 44) The process shifts to opening the door by manual operation by the user 11, and the process according to the present embodiment of the present invention is terminated.

(Step45)ドア開放装置18は、Step41でアンロックされたドアを自動開放する。本発明の本実施例に係る処理を終了させる。   (Step 45) The door opening device 18 automatically opens the door unlocked in Step 41. The process according to this embodiment of the present invention is terminated.

本実施例の効果として、電子キー12を持つユーザー11の視線によってユーザー11が選択したドアをアンロックおよび開放するスマートエントリーシステムを提供することが可能となる。   As an effect of the present embodiment, it is possible to provide a smart entry system that unlocks and opens the door selected by the user 11 according to the line of sight of the user 11 having the electronic key 12.

本実施例では、電子キー12を携帯したユーザー11が車両10に乗り込もうとするときのシステムについて説明した。また、同様のシステムで、電子キー12を携帯したユーザー11が車両10から降りるときに、ユーザー11の視線により自動でドアの閉鎖およびドアのロックを行うシステムにすることも可能である。   In the present embodiment, the system when the user 11 carrying the electronic key 12 tries to get into the vehicle 10 has been described. Further, with the same system, when the user 11 carrying the electronic key 12 gets out of the vehicle 10, it is possible to automatically close the door and lock the door according to the line of sight of the user 11.

具体的には、例えば、電子キー12を携帯したユーザー11が運転席ドアから降車し、同乗者が助手席ドアから降車する。そのとき、同乗者は両手に荷物がいっぱいの状態であり、自身で助手席ドアを閉鎖することができない。このとき、車両10外にいる電子キー12を携帯したユーザー11は、運転席側ドアの上部であるウィンド部分に視線を向けることによって、開放状態の助手席ドアを自動的に閉鎖することができるようなシステムを構築することも可能である。   Specifically, for example, the user 11 carrying the electronic key 12 gets off the driver's seat door, and the passenger gets off the passenger seat door. At that time, the passenger is full of luggage in both hands and cannot close the passenger seat door himself. At this time, the user 11 who carries the electronic key 12 outside the vehicle 10 can automatically close the opened passenger seat door by directing his / her line of sight to the window portion which is the upper portion of the driver side door. It is also possible to construct such a system.

本実施例では、カメラ14と照明装置19によってユーザー11の視線を検出する方法を示した。ここで、カメラ14を赤外線カメラにし、照明装置19を赤外線照射装置にすることにより、完全な暗闇状態でも確実にユーザー11の視線を捉えることが可能になる。   In the present embodiment, a method of detecting the line of sight of the user 11 by the camera 14 and the illumination device 19 has been shown. Here, by using the camera 14 as an infrared camera and the illumination device 19 as an infrared irradiation device, it is possible to reliably capture the line of sight of the user 11 even in complete darkness.

本実施例は、ユーザー11が車両10に乗り込むために、電子キー12のボタンを押したり、ドアハンドルを引いてドアを開放したりするような力を使う過程が極力少なくなっているのが大きな特徴である。そのため、運動能力に支障がある障害者が苦無く運転できる障害者に優しい車両を開発する上で、このスマートエントリーシステムは非常に重要な構成の1つになると考えられる。   In this embodiment, in order for the user 11 to get into the vehicle 10, the process of using a force that pushes the button of the electronic key 12 or pulls the door handle to open the door is greatly reduced. It is a feature. For this reason, this smart entry system is considered to be one of the most important components in developing a vehicle that is easy on the handicapped so that a handicapped person who has a problem in athletic ability can drive comfortably.

また、本実施例では、ユーザー11が車両10のドアを開けるために、車両10に全く触れる必要がない。このことは、特に冬場の乾燥した時期に多く見られる、ユーザー11と車両10との間の流れる静電気が発生し得ないことを示す。本実施例によるスマートエントリーシステムは、静電気による不快な刺激にユーザー11を晒させないという効果もある。   In this embodiment, the user 11 does not need to touch the vehicle 10 in order to open the door of the vehicle 10. This indicates that static electricity flowing between the user 11 and the vehicle 10, which is often seen especially in the dry season of winter, cannot be generated. The smart entry system according to the present embodiment also has an effect that the user 11 is not exposed to an unpleasant stimulus caused by static electricity.

本実施例の変形例として、ユーザー11の視線ではなく、ユーザー11の(手の)指さす方向を検出することにより、同様なシステムを構築することもまた可能である。   As a modification of the present embodiment, it is also possible to construct a similar system by detecting not the line of sight of the user 11 but the pointing direction of the user 11 (hand).

図4は、本発明のスマートエントリーシステムの第2実施例を示す構成図である。   FIG. 4 is a block diagram showing a second embodiment of the smart entry system of the present invention.

図4で示した構成図において、大略すると、電子キー12と、電子キー認証および位置検出装置13と、カメラ14と、照明装置19と、演算装置15と、記憶装置21と、音声出力装置20と、ドアアンロック装置16と、障害物検知センサー17と、ドア開放装置18とよりなる。   In the configuration diagram shown in FIG. 4, roughly speaking, the electronic key 12, the electronic key authentication and position detection device 13, the camera 14, the illumination device 19, the arithmetic device 15, the storage device 21, and the audio output device 20. The door unlocking device 16, the obstacle detection sensor 17, and the door opening device 18.

本実施例は上述の実施例1と重複する箇所が多いため、その重複する部分に関しては簡略な記述にとどめるか、その旨を明記の上で省略する。   Since this embodiment has many portions that overlap with the above-described first embodiment, the overlapping portions are simply described or omitted for the sake of clarity.

電子キー12は、車両10の外にいるユーザー11によって携帯されている。   The electronic key 12 is carried by the user 11 outside the vehicle 10.

電子キー認証および位置検出装置13は車両10内に存在しており、上述した電子キー12の認証を行う。本実施例では、この認証機能に加えて、認証の際における複数回の無線通信で得られた電波強度および指向性の情報を用いて、車両10を基準にした電子キー12の存在位置の決定も併せて行う装置である。得られた車両10を基準にした電子キー12の位置情報は、下述するカメラ14および照明装置19に出力される。   The electronic key authentication and position detection device 13 exists in the vehicle 10 and authenticates the electronic key 12 described above. In the present embodiment, in addition to this authentication function, determination of the location of the electronic key 12 with reference to the vehicle 10 using information on radio wave intensity and directivity obtained by multiple times of wireless communication at the time of authentication. This is also a device that performs in combination. The obtained position information of the electronic key 12 based on the vehicle 10 is output to the camera 14 and the lighting device 19 described below.

本実施例におけるスマートエントリーシステムは、電子キー認証および位置検出装置13を除いては、車両10の駐車状態においては、電源オフまたは節電状態(スタンバイ状態)に設定されている。電子キー認証および位置検出装置13が、電子キー12の認証に成功したときに、スマートエントリーシステム全体の電源がオンになるようになっている。   The smart entry system in the present embodiment is set to a power-off state or a power-saving state (standby state) when the vehicle 10 is parked, except for the electronic key authentication and position detection device 13. When the electronic key authentication and position detecting device 13 succeeds in the authentication of the electronic key 12, the entire smart entry system is turned on.

カメラ14は、車両10内に設置され、撮影方向を自在に変更することが可能である。そのため、車両10周囲にある被写体を撮影することができる。上述の電子キー認証および位置検出装置13で得られた車両10を基準にした電子キー12の位置情報から、カメラ14の撮影方向を電子キー12方向にする。またこのとき、電子キー12はユーザー11が携帯しているので、この撮影方向の決定により、カメラ14の被写体をユーザー11にすることができる。ユーザー11の行っている身振り手振りを捉えた画像情報は演算装置15に出力される。   The camera 14 is installed in the vehicle 10 and can change the shooting direction freely. Therefore, a subject around the vehicle 10 can be photographed. From the position information of the electronic key 12 based on the vehicle 10 obtained by the electronic key authentication and position detection device 13 described above, the shooting direction of the camera 14 is set to the direction of the electronic key 12. At this time, since the electronic key 12 is carried by the user 11, the subject of the camera 14 can be the user 11 by determining the shooting direction. Image information that captures the gesture gesture performed by the user 11 is output to the arithmetic unit 15.

また、このカメラ14内には、撮影のための補助装置として露出計が内蔵されている。夜間または暗闇条件下などで光量不足であったりして、ユーザー11の身振り手振りを捉えることが難しい場合は、その情報を照明装置19に出力する。   The camera 14 has a built-in exposure meter as an auxiliary device for photographing. When it is difficult to capture the gesture of the user 11 due to insufficient light quantity at night or in dark conditions, the information is output to the lighting device 19.

照明装置19は、車両10内に設置され、照射方向を自在に変更することができ、車両11周囲を照明することが可能である。この照明装置19は、カメラ14からの光量不足を示す情報が入力された時に、上述の電子キー認証および位置検出装置13で得られた車両10を基準にした電子キー12の位置方向に、カメラ14の撮影に適した波長の光線を照射する。   The illuminating device 19 is installed in the vehicle 10, can change the irradiation direction freely, and can illuminate the periphery of the vehicle 11. The illumination device 19 is configured such that when information indicating an insufficient amount of light from the camera 14 is input, the camera 19 moves in the position direction of the electronic key 12 based on the vehicle 10 obtained by the electronic key authentication and position detection device 13 described above. 14 is irradiated with a light beam having a wavelength suitable for photographing.

演算装置15は、車両10内に設置され、カメラ14から得られたユーザー11の身振り手振りを捉えた画像情報を入力する。この画像情報から、ユーザー11がどのような身振り手振りを行っているかを演算により画像解析する。   The computing device 15 is installed in the vehicle 10 and inputs image information obtained by capturing the gesture of the user 11 obtained from the camera 14. From this image information, what kind of gesture gesture the user 11 is performing is image-analyzed by calculation.

記憶装置22には、予めいくつかの身振り手振りの画像解析パターンが記憶されている。例えば、じゃんけんの「グー」、「チョキ」、「パー」の手振りや、両腕でバッテンを作る身振りや、両腕でマルを作る身振りといったような画像解析パターンが記憶されている。   The storage device 22 stores several gesture analysis image analysis patterns in advance. For example, image analysis patterns such as hand gestures of Janken's “Goo”, “Choki”, “Par”, gestures that make batten with both arms, and gestures that make circles with both arms are stored.

また、上述したそれぞれの身振りおよび手振りには、車両10上のどのドアを操作するかという対応が定義されている。「グー」の手振りのときは運転席のドアを操作する、あるいは、「チョキ」の手振りのときは、助手席のドアを操作するといった具合に定義されている。   Each of the above-mentioned gestures and hand gestures defines a correspondence as to which door on the vehicle 10 is operated. It is defined as operating the door of the driver's seat when “Goo” is waving, or operating the door of the passenger seat when waving “Choki”.

演算装置15は記憶装置21と協働して、カメラ14で得られた画像情報が、上述の予め記憶された身振りおよび手振りのどれに該当するかを演算し、車両10上のどのドアを操作すべきかを判定する。そして、どのドアを操作するのかということを出力情報とする。   The arithmetic device 15 cooperates with the storage device 21 to calculate which of the above-mentioned pre-stored gestures and hand gestures the image information obtained by the camera 14 is, and operates which door on the vehicle 10 Determine what to do. Then, which door is to be operated is output information.

前記出力情報が決定したとき、演算装置15は、音声出力装置20を用いてユーザー11にドア操作準備完了の確認を送る。音声出力装置20から発せられる人工音声「運転席のドアを開きますがよろしいですか?」または「ピピッ」というような電子報知音などにより、そのドアのアンロックおよび開放を行って良いかユーザー11に確認を問いかける。この人工音声や電子報知音による確認から所定時間以内(例えば2秒以内)に、ユーザー11が上述したじゃんけんの「パー」の手振りや、両腕でバッテンを作る身振りを上述装置によって検知した場合は、前記確認を否定する意思と判断する。その場合は、処理はその場で中断され、開きたいドアのハンドルにユーザー11が触れることにより前記ドアのアンロックを行う、従来型のスマートエントリーシステムに移行する。ユーザー11によって、前記確認を否定する意思として判断される身振り手振りが検知されなかった場合は、そのドアの操作を肯定する意思と判断し、演算装置15は、上述したどのドアを操作するのかという情報をドアアンロック装置16に出力する。   When the output information is determined, the arithmetic device 15 sends a confirmation of the door operation preparation completion to the user 11 using the audio output device 20. Can the user 11 unlock or open the door with an electronic sound such as “Do you want to open the door of the driver's seat?” Or “Pipipi” generated by the voice output device 20? Ask for confirmation. When the user 11 detects the above-mentioned Janken's “par” hand gesture or gesture of making a batten with both arms within a predetermined time (for example, within 2 seconds) from the confirmation by the artificial voice or electronic notification sound, , It is determined to deny the confirmation. In that case, the process is interrupted on the spot, and the user 11 moves to a conventional smart entry system that unlocks the door by touching the handle of the door to be opened. If the gesture gesture determined as an intention to deny the confirmation is not detected by the user 11, it is determined that the operation of the door is affirmed, and the arithmetic unit 15 determines which door described above to operate. Information is output to the door unlock device 16.

この処理以降の、ドアアンロック装置16、障害物感知センサー17、ドア開放装置18についての各処理過程は、実施例1に準じるものであるため、本欄での記載は省略する。   Since the processing steps for the door unlocking device 16, the obstacle detection sensor 17, and the door opening device 18 after this processing are the same as those in the first embodiment, description in this section is omitted.

本実施例の効果として、電子キー12を持つユーザー11の身振り手振りによってユーザー11が選択した車両10のドアをアンロックおよび開放するスマートエントリーシステムを提供することが可能となる。   As an effect of the present embodiment, it is possible to provide a smart entry system that unlocks and opens the door of the vehicle 10 selected by the user 11 by gesture of the user 11 having the electronic key 12.

また、本実施例では、実施例1で述べたユーザー11の視線よりも、ユーザー11の行う身振り手振りの方が、ユーザー11の労力は大きくなってしまう反面、検出は身振り手振りの方が易しく、夜間などの暗闇条件での操作においてより精度の高いスマートエントリーシステムを構築することが可能となる。   Further, in this embodiment, the gesture of the user 11 performed by the user 11 is more labor-intensive than the line of sight of the user 11 described in the first embodiment, but the detection by the gesture of the user is easier. It becomes possible to construct a smart entry system with higher accuracy in operation under dark conditions such as at night.

図5は本発明のスマートエントリーシステムの第3実施例を示す、構成図である。   FIG. 5 is a block diagram showing a third embodiment of the smart entry system of the present invention.

図5で示した構成図において、大略すると、電子キー12と、電子キー認証および位置検出装置13と、カメラ14と、照明装置19と、演算装置15と、記憶装置21と、音声出力装置20と、ドアアンロック装置16と、障害物検知センサー17と、ドア開放装置18とよりなる。   In the configuration diagram shown in FIG. 5, roughly speaking, the electronic key 12, the electronic key authentication and position detection device 13, the camera 14, the illumination device 19, the arithmetic device 15, the storage device 21, and the audio output device 20. The door unlocking device 16, the obstacle detection sensor 17, and the door opening device 18.

本実施例は上述の実施例1と重複する箇所が多いため、その重複する部分に関しては簡略な記述にとどめるか、その旨を明記の上で省略する。   Since this embodiment has many portions that overlap with the above-described first embodiment, the overlapping portions are simply described or omitted for the sake of clarity.

電子キー12は、車両10の外にいるユーザー11によって携帯されている。   The electronic key 12 is carried by the user 11 outside the vehicle 10.

電子キー認証および位置検出装置13は車両10内に存在しており、上述した電子キー12の認証を行う。本実施例では、この認証機能に加えて、認証の際における複数回の無線通信で得られた電波強度および指向性の情報を用いて、車両10を基準にした電子キー12の存在位置の決定も併せて行う装置である。得られた車両10を基準にした電子キー12の位置情報は、下述する音声検出装置21に出力される。   The electronic key authentication and position detection device 13 exists in the vehicle 10 and authenticates the electronic key 12 described above. In the present embodiment, in addition to this authentication function, determination of the location of the electronic key 12 with reference to the vehicle 10 using information on radio wave intensity and directivity obtained by multiple times of wireless communication at the time of authentication. This is also a device that performs in combination. The obtained position information of the electronic key 12 based on the vehicle 10 is output to the voice detection device 21 described below.

本実施例におけるスマートエントリーシステムは、電子キー認証および位置検出装置13を除いては、車両10の駐車状態においては、電源オフまたは節電状態(スタンバイ状態)に設定されている。電子キー認証および位置検出装置13が、電子キー12の認証に成功したときに、スマートエントリーシステム全体の電源がオンになるようになっている。   The smart entry system in the present embodiment is set to a power-off state or a power-saving state (standby state) when the vehicle 10 is parked, except for the electronic key authentication and position detection device 13. When the electronic key authentication and position detecting device 13 succeeds in the authentication of the electronic key 12, the entire smart entry system is turned on.

音声検出装置21は、車両10内に設置され、音声入力の指向性を自在に変更することが可能である。そのため、車両10周囲からの音声を効率的にかつ感度良く入力することができる。電子キー12はユーザー11が携帯しているので、この指向性の設定により、音声検出装置21の指向性をユーザー11に向けることができる。また、電子キー12は、ユーザー11の口の位置より低い位置に携帯されていることが普通であると考えられる。そのため、音声検出装置21の音声入力の指向性は、電子キー12位置より少し高い位置に設定することにより、ユーザー11の発する音声をより感度良く捉えることができるようになる。   The voice detection device 21 is installed in the vehicle 10 and can freely change the directivity of voice input. Therefore, it is possible to input sound from around the vehicle 10 efficiently and with high sensitivity. Since the user 11 carries the electronic key 12, the directivity of the voice detection device 21 can be directed to the user 11 by setting the directivity. Further, it is considered that the electronic key 12 is usually carried at a position lower than the position of the mouth of the user 11. Therefore, by setting the directivity of the voice input of the voice detection device 21 to a position slightly higher than the position of the electronic key 12, it is possible to capture the voice emitted by the user 11 with higher sensitivity.

音声検出装置21に入力された音声情報は、演算装置15に出力される。   The voice information input to the voice detection device 21 is output to the arithmetic device 15.

演算装置15は、車両10内に設置され、運勢入力装置21から得られたユーザー11の発した音声情報を入力する。この音声情報から、ユーザー11がどのような言葉を発したのか音声解析する。   The computing device 15 is installed in the vehicle 10 and inputs voice information issued by the user 11 obtained from the fortune input device 21. From this voice information, voice analysis is performed on what words the user 11 has spoken.

記憶装置22には、予め、いくつかの言葉の音声パターンが記憶されている。例えば、「運転席」、「助手席」、「ハッチバック」、「だめ」などの言葉についての音声パターンが記憶されている。この予め記憶された言葉の音声パターンは、電子キー12を持っているユーザー12ならば誰の音声でも認識する共通設定と、予めオーナーとなるユーザー12の音声を登録しておいてオーナーの音声しか認識しないオーナー設定を選ぶことができるようにする。   The storage device 22 stores voice patterns of several words in advance. For example, voice patterns for words such as “driver's seat”, “passenger seat”, “hatchback”, “no” are stored. The voice pattern of the words stored in advance is a common setting for recognizing the voice of any user 12 who has the electronic key 12 and the voice of the owner 12 registered in advance. Make it possible to select owner settings that are not recognized.

また、上述の記憶された言葉には、当然として車両10上のどのドアを操作するかという対応が定義されており、「助手席」という言葉は助手席のドアを操作することを意味する。   Further, the stored words are naturally defined as corresponding to which door on the vehicle 10 is operated, and the word “passenger seat” means that the door of the passenger seat is operated.

演算装置15は記憶装置21と協働して、音声検出装置21で得られた音声情報が、上述の予め記憶された言葉のどれに該当するかを演算解析し、車両10上のどのドアを操作すべきかを判定する。そして、どのドアを操作するのかということを出力情報とする。   The arithmetic device 15 cooperates with the storage device 21 to perform arithmetical analysis on which of the above-mentioned words stored in the voice information obtained by the voice detection device 21, and which door on the vehicle 10 is selected. Determine whether to operate. Then, which door is to be operated is output information.

前記出力情報が決定したとき、演算装置15は、音声出力装置20を用いてユーザー11にドア操作準備完了の確認を送る。音声出力装置20から発せられる人工音声「運転席のドアを開きますがよろしいですか?」または「ピピッ」というような電子報知音などにより、そのドアのアンロックおよび開放を行って良いかユーザー11に確認を問いかける。この人工音声や電子報知音による確認から所定時間以内(例えば3秒以内)に、ユーザー11が発した「だめ」という言葉が上述装置によって検知した場合は、前記確認を否定する意思と判断する。その場合は、処理はその場で中断され、開きたいドアのハンドルにユーザー11が触れることにより前記ドアのアンロックを行う、従来型のスマートエントリーシステムに移行する。ユーザー11によって、前記確認を否定する意思として判断される身振り手振りが検知されなかった場合は、そのドアの操作を肯定する意思と判断し、演算装置15は、上述したどのドアを操作するのかという情報をドアアンロック装置16に出力する。   When the output information is determined, the arithmetic device 15 sends a confirmation of the door operation preparation completion to the user 11 using the audio output device 20. Can the user 11 unlock or open the door with an electronic sound such as “Do you want to open the door of the driver's seat?” Or “Pipipi” generated by the voice output device 20? Ask for confirmation. When the above device detects the word “no” issued by the user 11 within a predetermined time (for example, within 3 seconds) from the confirmation by the artificial voice or the electronic notification sound, it is determined that the intention is denied. In that case, the process is interrupted on the spot, and the user 11 moves to a conventional smart entry system that unlocks the door by touching the handle of the door to be opened. If the gesture gesture determined as an intention to deny the confirmation is not detected by the user 11, it is determined that the operation of the door is affirmed, and the arithmetic unit 15 determines which door described above to operate. Information is output to the door unlock device 16.

この処理以降の、ドアアンロック装置16、障害物感知センサー17、ドア開放装置18についての各処理過程は、実施例1に準じるものであるため、本欄での記載は省略する。   Since the processing steps for the door unlocking device 16, the obstacle detection sensor 17, and the door opening device 18 after this processing are the same as those in the first embodiment, description in this section is omitted.

本実施例の効果として、電子キー12を持つユーザー11の発する音声によってユーザー11が選択した車両10のドアをアンロックおよび開放するスマートエントリーシステムを提供することが可能となる。   As an effect of the present embodiment, it is possible to provide a smart entry system that unlocks and opens the door of the vehicle 10 selected by the user 11 by the sound emitted by the user 11 having the electronic key 12.

また、記憶装置15に予めユーザーなどの特定の人物の音声を登録しておき、その特定の人物の音声のみを認識する設定にすることにより、より誤作動の少ないスマートエントリーシステムを構築することができる。   In addition, by registering the voice of a specific person such as a user in the storage device 15 in advance and setting to recognize only the voice of the specific person, a smart entry system with fewer malfunctions can be constructed. it can.

電子キー12を持ったユーザー11が、開きたいドアのハンドルに触れることによって、自動的にアンロックする従来のスマートエントリーシステムの機能をオフにし、上述した特定の人物の音声のみを認識する本実施例で説明したスマートエントリーシステムの機能のみをオンにする。そうすることにより、電子キー12を持っていても、予め登録された特定の人物の音声を入力しなければ、車両10のドアが開かないという、非常にセキュリティー性の高いスマートエントリーシステムを構築することもまた可能となる。   This implementation turns off the function of the conventional smart entry system that automatically unlocks the user 11 holding the electronic key 12 by touching the handle of the door to be opened, and recognizes only the voice of the specific person described above. Turn on only the smart entry system functionality described in the example. By doing so, even if the electronic key 12 is held, a highly secure smart entry system is constructed in which the door of the vehicle 10 cannot be opened unless the voice of a specific person registered in advance is input. It is also possible.

本発明の第1実施例を示す、構成図である。It is a block diagram which shows 1st Example of this invention. 車両上におけるユーザーの視線の対象と、操作するドアとの関係を示す図である。It is a figure which shows the relationship between the object of the user's eyes | visual_axis on a vehicle, and the door to operate. 本発明の第1実施例における処理動作を説明するフローチャートである。It is a flowchart explaining the processing operation in 1st Example of this invention. 本発明の第2実施例を示す、構成図である。It is a block diagram which shows 2nd Example of this invention. 本発明の第3実施例を示す、構成図である。It is a block diagram which shows 3rd Example of this invention.

符号の説明Explanation of symbols

10 車両
11 ユーザー
12 電子キー
13 電子キー認証および位置検出装置
14 カメラ
15 演算装置
16 ドアアンロック装置
17 障害物感知センサー
18 ドア開放装置
19 照明装置
20 音声出力装置
21 音声検出装置
22 記憶装置
DESCRIPTION OF SYMBOLS 10 Vehicle 11 User 12 Electronic key 13 Electronic key authentication and position detection device 14 Camera 15 Calculation device 16 Door unlock device 17 Obstacle detection sensor 18 Door opening device 19 Illumination device 20 Audio output device 21 Audio detection device 22 Storage device

Claims (5)

電子キーを携帯するユーザーの視線を検出する視線検出手段と、
前記視線が車両の各ドアに対応する領域のいずれにあるかに基づいて前記ユーザーによって選択されたドアを判定する演算手段と、
前記演算手段で判定されたドアを操作する操作手段とを有するとともに、
前記演算手段での判定後に、前記ユーザーによる視線が前記領域から逸らされ変更されたことを前記視線検出手段が検出したとき、前記ドアの操作を中止することを特徴とするスマートエントリーシステム。
Gaze detection means for detecting the gaze of the user carrying the electronic key;
Computing means for determining a door selected by the user based on which of the regions corresponding to each door of the vehicle the line of sight is ;
And operating means for operating the door determined by the calculating means ,
A smart entry system that stops the operation of the door when the line-of-sight detecting means detects that the line of sight of the user has deviated from the area and changed after the determination by the computing means.
前記ユーザーの位置を検出する位置検出手段とを有し、
前記視線検出手段は、前記位置にいる前記ユーザーの視線を検出することを特徴とする請求項1に記載のスマートエントリーシステム。
Position detecting means for detecting the position of the user,
The smart entry system according to claim 1 , wherein the line-of-sight detection means detects the line of sight of the user at the position.
前記位置検出手段で検出したユーザー方向に、光を照射する照射手段を有することを特徴とする請求項2に記載のスマートエントリーシステム。 The smart entry system according to claim 2 , further comprising an irradiation unit that irradiates light in a user direction detected by the position detection unit. 前記操作手段として、前記ドアをアンロックするアンロック手段および前記ドアを開放する開放手段の少なくとも一方を有することを特徴とする請求項1ないし3のいずれか1項に記載のスマートエントリーシステム。 The smart entry system according to any one of claims 1 to 3 , wherein the operation means includes at least one of unlocking means for unlocking the door and opening means for opening the door. 前記ドア作動領域内の障害物を検出する障害物検出手段を有し、
前記障害物検出手段で障害物を検出した場合には前記開放手段による前記ドアの開放を禁止することを特徴とする請求項4に記載のスマートエントリーシステム。
An obstacle detection means for detecting an obstacle in the door operating region;
5. The smart entry system according to claim 4 , wherein when the obstacle is detected by the obstacle detection means, the opening means prohibits the opening of the door.
JP2006170569A 2006-06-20 2006-06-20 Smart entry system Expired - Fee Related JP4793118B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2006170569A JP4793118B2 (en) 2006-06-20 2006-06-20 Smart entry system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2006170569A JP4793118B2 (en) 2006-06-20 2006-06-20 Smart entry system

Publications (2)

Publication Number Publication Date
JP2008002095A JP2008002095A (en) 2008-01-10
JP4793118B2 true JP4793118B2 (en) 2011-10-12

Family

ID=39006701

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2006170569A Expired - Fee Related JP4793118B2 (en) 2006-06-20 2006-06-20 Smart entry system

Country Status (1)

Country Link
JP (1) JP4793118B2 (en)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101512394B1 (en) * 2013-08-12 2015-04-16 현대오트론 주식회사 Hands free liftgate opening system and method using the rear view camera of a vehicle
CN104619943A (en) * 2012-09-12 2015-05-13 日产自动车株式会社 Control device for opening/closing element of vehicle
CN109177922A (en) * 2018-08-31 2019-01-11 北京七鑫易维信息技术有限公司 Vehicle starting method, device, equipment and storage medium
US11518341B2 (en) 2017-03-13 2022-12-06 Continental Automotive Gmbh Method for controlling a locking element of a vehicle

Families Citing this family (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5206955B2 (en) * 2008-09-03 2013-06-12 株式会社デンソー Vehicle door control system
FR2936545B1 (en) * 2008-10-01 2017-03-10 Valeo Securite Habitacle DEVICE FOR AUTOMATICALLY UNLOCKING AN AUTOMATIC VEHICLE OPENING.
FR2936546B1 (en) * 2008-10-01 2017-03-10 Valeo Securite Habitacle DEVICE FOR AUTOMATICALLY UNLOCKING AN AUTOMATIC VEHICLE OPENING.
JP5464010B2 (en) * 2010-03-30 2014-04-09 株式会社デンソー Vehicle control device and vehicle security system
JP5630318B2 (en) * 2011-02-21 2014-11-26 株式会社デンソー Smart entry system
JP2015507708A (en) * 2011-12-09 2015-03-12 フレクストロニクス オートモティブ インコーポレイテッドFlextronics Automotive Inc. Automotive module camera and automated entrance image processing system
DE102012222175A1 (en) * 2012-12-04 2014-06-18 Robert Bosch Gmbh Method and device for opening a door of a vehicle
KR101428883B1 (en) * 2012-12-18 2014-08-08 현대오트론 주식회사 Trunk control system with FOB key
CN104919473B (en) * 2013-01-22 2017-08-08 三菱电机株式会社 Reading device and entry and exit control system
KR101484202B1 (en) * 2013-03-29 2015-01-21 현대자동차 주식회사 Vehicle having gesture detection system
KR101636297B1 (en) * 2013-12-04 2016-07-20 주식회사 유라코퍼레이션 Trunk auto open system and method for controlling movement thereof
US9834978B2 (en) 2014-04-04 2017-12-05 Ford Global Technologies, Llc Power door system for a motor vehicle
WO2015155875A1 (en) * 2014-04-10 2015-10-15 三菱電機株式会社 Mobile device, vehicle remote control system, vehicle remote control method, and program
GB2525383B (en) * 2014-04-11 2017-06-14 Jaguar Land Rover Ltd Feature control system
JP6611469B2 (en) * 2014-07-31 2019-11-27 株式会社ユーシン Vehicle opening / closing body control device, vehicle opening / closing body control method, and program
JP6616965B2 (en) * 2014-07-31 2019-12-04 株式会社ユーシン Vehicle opening / closing body control device, vehicle opening / closing body control method, and program
CN104616372A (en) * 2014-12-01 2015-05-13 南京泰锐斯通信科技有限公司 Method and apparatus for controlling automobile lock
US10166995B2 (en) * 2016-01-08 2019-01-01 Ford Global Technologies, Llc System and method for feature activation via gesture recognition and voice command
JP6955887B2 (en) * 2017-04-12 2021-10-27 日本発條株式会社 Parking device and how to control the parking device
US20190126889A1 (en) * 2017-11-02 2019-05-02 Aptiv Technologies Limited Hands-free access method
JP2019121183A (en) * 2018-01-05 2019-07-22 株式会社ミツバ Operated body control apparatus, and operated body control method
JP7338784B2 (en) * 2020-03-09 2023-09-05 日本電気株式会社 VEHICLE, UNLOCK DEVICE, METHOD, AND PROGRAM
EP4310280A1 (en) * 2021-04-20 2024-01-24 NEC Corporation Information processing device, vehicle control system, information processing method, and non-transitory computer-readable medium

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002188345A (en) * 2000-12-20 2002-07-05 Fuji Electric Co Ltd Non-contact electronic lock system
JP2004270347A (en) * 2003-03-10 2004-09-30 Nissan Motor Co Ltd Keyless entry device
JP2004278225A (en) * 2003-03-18 2004-10-07 Nissan Motor Co Ltd Control device for vehicular opening/closing body
JP2005315024A (en) * 2004-04-30 2005-11-10 Fujitsu Ten Ltd Vehicle controller

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104619943A (en) * 2012-09-12 2015-05-13 日产自动车株式会社 Control device for opening/closing element of vehicle
KR101512394B1 (en) * 2013-08-12 2015-04-16 현대오트론 주식회사 Hands free liftgate opening system and method using the rear view camera of a vehicle
US11518341B2 (en) 2017-03-13 2022-12-06 Continental Automotive Gmbh Method for controlling a locking element of a vehicle
CN109177922A (en) * 2018-08-31 2019-01-11 北京七鑫易维信息技术有限公司 Vehicle starting method, device, equipment and storage medium

Also Published As

Publication number Publication date
JP2008002095A (en) 2008-01-10

Similar Documents

Publication Publication Date Title
JP4793118B2 (en) Smart entry system
JP5895201B2 (en) Vehicle opening / closing body control device
US11766993B2 (en) Automatic power door opening on sustained presence
US7388473B2 (en) Control system and method using biometric information
EP2787157B1 (en) Automatic door operating device for vehicle
KR100887688B1 (en) Door control device by the hand shape
US20110242303A1 (en) Method of automatically unlocking an opening member of a motor vehicle for a hands-free system, and device for implementing the method
JP6182483B2 (en) Portable machine and control system
MX2011003475A (en) Device for automatically unlocking an openable panel of a motor vehicle.
EP3023943B1 (en) Controller, control method, and computer-readable recording medium
JP2003138817A (en) Keyless entry system for vehicle, person identifying method, and person identifying system
KR101512394B1 (en) Hands free liftgate opening system and method using the rear view camera of a vehicle
WO2018052003A1 (en) Iris authentication device
JP2015175089A (en) Control device and control system
CN113421358A (en) Vehicle lock control system, vehicle lock control method and vehicle
KR101663096B1 (en) Anti-theft Device for Vehicles
JP5206955B2 (en) Vehicle door control system
JP3889458B2 (en) Keyless entry system
CN113494229B (en) Vehicle control device, vehicle control method, and recording medium
JP2015151714A (en) smart entry system
JP2014136879A (en) Door opening/closing device
EP3349191A1 (en) Method and system for automatically activating a closing element of a closable opening of a vehicle
KR102463713B1 (en) Apparatus for controlling sliding door of a vehicle and method thereof
JP4654235B2 (en) Personal authentication device
JP2023108747A (en) smart entry system

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20090122

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20110513

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20110517

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110601

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20110628

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20110711

R151 Written notification of patent or utility model registration

Ref document number: 4793118

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140805

Year of fee payment: 3

LAPS Cancellation because of no payment of annual fees