JP7215743B2 - Car engine start control system using face recognition information and car engine start control method using the same - Google Patents

Car engine start control system using face recognition information and car engine start control method using the same Download PDF

Info

Publication number
JP7215743B2
JP7215743B2 JP2020081877A JP2020081877A JP7215743B2 JP 7215743 B2 JP7215743 B2 JP 7215743B2 JP 2020081877 A JP2020081877 A JP 2020081877A JP 2020081877 A JP2020081877 A JP 2020081877A JP 7215743 B2 JP7215743 B2 JP 7215743B2
Authority
JP
Japan
Prior art keywords
information
face recognition
black box
car
recognition information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2020081877A
Other languages
Japanese (ja)
Other versions
JP2020138730A (en
Inventor
ソプ ソン、ミョン
Original Assignee
エスティーシー コーポレーション カンパニー リミテッド
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by エスティーシー コーポレーション カンパニー リミテッド filed Critical エスティーシー コーポレーション カンパニー リミテッド
Priority to JP2020081877A priority Critical patent/JP7215743B2/en
Publication of JP2020138730A publication Critical patent/JP2020138730A/en
Application granted granted Critical
Publication of JP7215743B2 publication Critical patent/JP7215743B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02TCLIMATE CHANGE MITIGATION TECHNOLOGIES RELATED TO TRANSPORTATION
    • Y02T10/00Road transport of goods or passengers
    • Y02T10/10Internal combustion engine [ICE] based vehicles
    • Y02T10/40Engine management systems

Description

本発明は、顔認識情報を利用して車のドアを開けてエンジンを始動させ、車のキーを持ち歩かなくてもよいようにすることに関するものである。 The present invention relates to using facial recognition information to open a car door and start the engine without having to carry the car key.

一般的に車のキーはリモコンキーで、車に固有番号を設定し、固有番号を認証してドアを開閉する方法が広く使用されている。上記のようなリモコンキーは、キーを常に持ち歩かなければならない。 In general, the car key is a remote control key, and a method of setting a unique number to the car and authenticating the unique number to open and close the door is widely used. Remote control keys such as those described above must always be carried around.

本発明に関連した従来の技術は、大韓民国の登録特許第10-1469862号(2014. 12. 08. 公告)に掲示されている。図1は従来の携帯電話と連動した車の使用者認証装置の構成図である。上記の図1は従来の携帯電話と連動した車の使用者認証装置の、据置据置スタンド(207)と制御装置(225)の構成を示したブロック図である。 Prior art related to the present invention is disclosed in Korean Patent No. 10-1469862 (published on 2014.12.08). FIG. 1 is a configuration diagram of a conventional car user authentication device linked with a mobile phone. FIG. 1 above is a block diagram showing the configuration of a stationary stand (207) and a control device (225) of a conventional vehicle user authentication device linked with a mobile phone.

据置スタンド(207)と制御装置(225)にそれぞれマイコンが設置されており、据置スタンド(207)は、携帯電話(201)と接続されているコネクタ2(217)、携帯電話の接続チェック(216)、タイマー(215)、メモリー制御部(214)、キーボード制御部(213)、パスワードを入力し電源ボタンと始動ボタンを押すことができるキーボード(238)、初期に車のエンジンを始動させることができるよう制御する始動制御部(209)、電源制御部(211)、装備制御装置(225)と接続するコネクタ3(223)、電源部(221)、緊急ボタン制御部(218)、ハンズフリー(220)及び全てのことをコントロールするマイコン(224)で構成されている。 A stationary stand (207) and a control device (225) are each provided with a microcomputer. ), a timer (215), a memory controller (214), a keyboard controller (213), a keyboard (238) that can enter a password and press the power button and the start button, and can start the car engine at the beginning. Start control unit (209), power control unit (211), connector 3 (223) connected to equipment control device (225), power supply unit (221), emergency button control unit (218), hands-free ( 220) and a microcomputer (224) that controls everything.

装備制御装置(225)は、コネクタ4~7、マイコン1~4、車のキーを利用する場合、始動装置の作動を制御しながらエンジンを始動させた後に持続的にマイコン(227)の指示により始動装置を制御する始動制御装置(228)、ハザードランプ制御装置(231)、GPS位置追跡装置制御装置(234)、その他の装備制御装置(237)で構成されている。 The equipment control device (225) controls the operation of the starting device when using connectors 4-7, microcomputers 1-4, and a car key. It consists of a starting control device (228) that controls the starting device, a hazard lamp control device (231), a GPS position tracking device control device (234), and other equipment control devices (237).

コネクタ2(217)は携帯電話(201)と接続してデータを有/無線で送・受信し、制御部(204)は受信した携帯電話番号(万一、セキュリティのためにセキュリティチップ(205)が装着されている場合には、セキュリティコード)と据置スタンド(207)自体に保存されているメモリー制御部(214)に設定されているコードを組み合わせて認証コードを生成(222)し、携帯電話(201)から受信した認証コードと比較(222)して一致すれば制御装置(225)を作動させるよう命令する作動キーを生成(222)し、制御装置(225)の個別のマイコン1~4はコネクタ4~7によりコネクタ3(223)と接続し、制御装置(225)の個別のマイコン1~4は作動キーが生成されているのか否かを有/無線でチェックし、生成されていなければ車の運行が不可能なよう始動装置が作動しないよう(228)にしたり、ハザードランプが点滅(231)し続けるようにしたり、GPSにより車追跡装置を作動(234)させるなどの機能の中から一部または全部を遂行して正常な運行ができなくし、反対に生成されていれば車が正常に作動するよう指示し、据置スタンド(207)の携帯電話の接続チェック(216)は携帯電話(201)が接続され続けているのかをチェックしてマイコン(224)に情報を提供し、タイマー(215)はエンジンが始動し続けた時間をチェックして、一定期間エンジンが始動しない場合にはハザードランプが短時間に数回点滅した後に消え(231)、GPSも自動で作動(234)し、最初に受信されるコードが正常ならば即時にGPSの作動を中止(234)し、盗難コードのような非常コードが認識されるとGPSが作動(234)し続けながらハザードランプが周期的に点滅(2321)するようにし、ハンズフリー(220)は有/無線のハンズフリーを使えるようにし、キーボード制御部(213)はキーボード(238)を制御して車のキーを使わずに据置スタンド(207)でエンジンを始動させる場合に利用する。 Connector 2 (217) is connected to mobile phone (201) to transmit/receive data by wire/wireless, and control unit (204) receives mobile phone number (for security, security chip (205) is attached, the security code) and the code set in the memory control unit (214) stored in the stand (207) itself are combined to generate an authentication code (222), and the mobile phone Compare (222) with the authentication code received from (201), and if they match, generate (222) an activation key for commanding the control device (225) to operate, and individual microcomputers 1 to 4 of the control device (225) is connected to connector 3 (223) through connectors 4-7, and individual microcomputers 1-4 of the control device (225) check by wire/wireless whether or not an operation key has been generated, Among the functions such as disabling the starting device (228) so that the car cannot be operated, keeping the hazard lamps flashing (231), and activating the vehicle tracking device by GPS (234). If it is generated, it instructs the car to operate normally, and the mobile phone connection check (216) of the stationary stand (207) checks the mobile phone connection (216). (201) checks whether the connection continues and provides information to the microcomputer (224), and the timer (215) checks how long the engine has continued to start, and if the engine does not start for a certain period of time, The hazard lamp flashes several times in a short period of time and then goes off (231), the GPS automatically operates (234), and if the first received code is normal, the GPS operation is immediately stopped (234), and the theft code is displayed. When an emergency code such as is recognized, the GPS continues to operate (234) and the hazard lamps flash periodically (2321), and the hands-free (220) enables wired/wireless hands-free, The keyboard control unit (213) controls the keyboard (238) and is used to start the engine from the stationary stand (207) without using the car key.

キーボード(238)はパスワードを入力する数字ボタンと電源をONにさせる電源ボタン及びエンジンを始動させる始動ボタンで構成されており、キーボード(238)のパスワードと電源ボタンが押されるとマイコン(207)はメモリー制御部(214)に保存されているパスワードを確認し、一致すると電源制御部(211)を通じて車の電源をONにし、始動ボタンが押されるとマイコン(224)が始動制御部(209)を通じてエンジンを始動させる。 The keyboard (238) consists of number buttons for entering a password, a power button for turning on the power, and a start button for starting the engine. The password stored in the memory control unit (214) is checked, and if it matches, the power of the car is turned on through the power control unit (211). Start the engine.

大韓民国特許第10-1469862号Korean Patent No. 10-1469862

上記のように構成された従来の携帯電話を利用した使用者認証方法は、本人であることを実証できないという問題点がある。 The conventional user authentication method using a mobile phone configured as described above has a problem that it is impossible to verify the identity of the user.

また、上記のような従来の使用者認証方法は構成が複雑で、別途のマイコンを設置しなければならないため過多に費用がかかるという問題点がある。 In addition, the conventional user authentication method as described above has a problem that the configuration is complicated and a separate microcomputer needs to be installed, resulting in an excessive cost.

上記のような従来の技術の問題点を解決するための、本発明の顔認識情報を利用した車のエンジン始動制御システム及びこれを利用した車のエンジン始動制御方法は、顔認識情報を利用して車のドアを開閉し、エンジンを始動させるようにしたものである。 In order to solve the problems of the prior art as described above, the car engine start control system using face recognition information and the car engine start control method using the same according to the present invention use face recognition information. to open and close the car door and start the engine.

また、本発明のもうひとつの目的は、車に設置されているブラックボックスを利用して具現することで、冬場に遠隔から車のエンジンを始動させて温める(予熱する)ことである。 Another object of the present invention is to remotely start and warm (preheat) the car engine in winter by using a black box installed in the car.

上記のような目的を持つ本発明の顔認識情報を利用した車のエンジン始動制御システムはブラックボックスのモジュール固有情報を保存しており、ドライバーを撮影し、撮影されたドライバーの映像から顔認識情報を抽出し、抽出された顔認識情報を保存し、上記の顔認識情報を車に設置されているブラックボックスのモジュールに送信するカメラが設置されたスマート端末機と、車に設置されドライバーが所持するスマート端末機の番号情報と、ドライバーの顔認識情報を保存しており、保存されているスマート端末機から受信された顔認識情報と、スマート端末機の番号情報を受信したスマート端末機の番号情報と、顔認識情報を比較し、一致すれば車のドアのロッキングモジュールを制御して車のドアを開け、登録ドライバーが乗ってブレーキペダルを踏むとブレーキペダル情報を受信して、車の始動キーをONにするよう制御するブラックボックスのモジュールで構成されていることを特徴とする。 The vehicle engine start control system using face recognition information of the present invention, which has the above-mentioned purpose, stores module-specific information of the black box, photographs the driver, and extracts the face recognition information from the photographed image of the driver. , saves the extracted face recognition information, and transmits the above face recognition information to a black box module installed in the car, and a smart terminal installed in the car and carried by the driver. The smart terminal number information and the face recognition information of the driver are stored, and the face recognition information received from the stored smart terminal and the number of the smart terminal that received the smart terminal number information If the information matches face recognition information, it controls the locking module of the car door to open the car door, and when the registered driver steps on the brake pedal, receives the brake pedal information and starts the car. It is characterized by being composed of a black box module that controls to turn on the key.

上記のように構成された本発明の顔認識情報を利用した車のエンジン始動制御システム及びこれを利用した車のエンジン始動制御方法は、顔認識情報を利用して正当なドライバーであることを確認することができる。 The car engine start control system using face recognition information and the car engine start control method using the same according to the present invention configured as described above use face recognition information to confirm that the driver is a valid driver. can do.

また、本発明のもうひとつの効果は、車のキーが必要なく、車のキーを持つ必要がないということである。 Also, another advantage of the present invention is that there is no need for a car key and no need to have a car key.

さらに、冬場には家から駐車場に駐車している車のエンジンを始動させ事前にエンジンを温める(予熱する)ことができる。 Furthermore, in winter, the engine of the car parked in the parking lot can be started from the house and the engine can be warmed (preheated) in advance.

従来の携帯電話と連動した車の使用者認証装置の構成図Configuration diagram of a vehicle user authentication device linked with a conventional mobile phone 本発明の顔認識情報を利用した車のエンジン始動制御システムの第1実施例 の構成図FIG. 1 is a configuration diagram of a first embodiment of a car engine start control system using face recognition information according to the present invention; 本発明の顔認識情報を利用した車のエンジン始動制御システムの第2実施例 の構成図FIG. 2 is a configuration diagram of a second embodiment of a car engine start control system using face recognition information according to the present invention; 本発明の顔認識情報を利用した車のエンジン始動制御システムの第3実施例 の構成図FIG. 3 is a configuration diagram of a third embodiment of a vehicle engine start control system using face recognition information according to the present invention; 本発明の顔認識情報を利用した車のエンジン始動制御方法の第1実施例の制 御フロー図1 is a control flow diagram of a first embodiment of a vehicle engine start control method using face recognition information according to the present invention; FIG. 本発明の顔認識情報を利用した車のエンジン始動制御方法の第2実施例の制 御フロー図FIG. 4 is a control flow diagram of the second embodiment of the vehicle engine start control method using face recognition information of the present invention. 本発明の顔認識情報を利用した車のエンジン始動制御方法の第3実施例の制 御フロー図FIG. 3 is a control flow diagram of the third embodiment of the vehicle engine start control method using face recognition information of the present invention. 本発明に適用される車のブラックボックスのモジュールの詳細構成図Detailed block diagram of a car black box module applied to the present invention

上記のような目的を持つ本発明の顔認識情報を利用した車のエンジン始動制御システム及びこれを利用した車のエンジン始動制御方法を、図2ないし図5を基に説明すると次の通りである。 A car engine start control system using face recognition information and a car engine start control method using the same according to the present invention having the above objects will be described with reference to FIGS. 2 to 5 as follows. .

図2は、本発明の顔認識情報を利用した車のエンジン始動制御システムの第1実施例の構成図である。上記の図2の本発明の顔認識情報を利用した車のエンジン始動制御システムの第1実施例は、ブラックボックスのモジュール固有情報を保存しており、ドライバーを撮影し、撮影されたドライバーの映像から顔認識情報を抽出し、抽出された顔認識情報を保存して、上記の顔認識情報を車に設置されているブラックボックスのモジュールで送信するカメラが設置されているスマート端末機(10)と、車に設置されドライバーが所持するスマート端末機の番号情報と、ドライバーの顔認識情報を保存しており、スマート端末機から受信された顔認識情報とスマート端末機の番号情報を受信し、受信されたスマート端末機の番号情報と顔認識情報と、保存されているスマート端末機の番号情報と、顔認識情報を比較して一致すれば、車のドアのロッキングモジュールを制御して車のドアを開け、ドライバーが乗ってブレーキペダルを踏むとブレーキペダル情報を受信して車の始動キーをONにするよう制御するブラックボックスのモジュール(20)及びスマート端末機と、ブラックボックスのモジュールをネットワークに接続するインターネット網または無線通信網(30)で構成されていることを特徴とする。 FIG. 2 is a configuration diagram of a first embodiment of a vehicle engine start control system using face recognition information according to the present invention. The first embodiment of the car engine start control system using face recognition information of the present invention in Fig. 2 above stores the module specific information of the black box, captures the driver, and captures the captured video of the driver. A smart terminal (10) equipped with a camera that extracts face recognition information from a car, stores the extracted face recognition information, and transmits the above face recognition information using a black box module installed in a car. and saves the number information of the smart terminal installed in the car and owned by the driver and the face recognition information of the driver, receives the face recognition information received from the smart terminal and the number information of the smart terminal, The received smart terminal number information and face recognition information are compared with the stored smart terminal number information and face recognition information. When the door is opened and the driver gets in and depresses the brake pedal, the black box module (20) that receives brake pedal information and turns on the car's start key, the smart terminal, and the black box module are networked. It is characterized by comprising an Internet network or a wireless communication network (30) connected to the Internet.

上記のブラックボックスのモジュール(20)はドアのオープン情報、始動キーONの結果情報をスマート端末機にフィードバック(feed back)して提供し、スマート端末機はドアのオープン情報、始動キーONの結果情報を表示部を通じて表出することもできる。 The black box module 20 feeds back the door open information and the start key ON result information to the smart terminal, and the smart terminal feeds back the door open information and the start key ON result. Information can also be displayed through the display.

上記のブラックボックスのモジュールは、従来に車に搭載され前方・後方を撮影するモジュールの場合には本発明を追加で搭載したり、新しく設置されるブラックボックスのモジュールに本機能を取り付けて構成したり、また別途のモジュールを設置して運用することもできる。 The above-mentioned black box module is configured by adding the present invention to a module that is conventionally installed in a car and photographing the front and rear, or by installing this function in a newly installed black box module. Alternatively, a separate module can be installed and operated.

図3は、本発明の顔認識情報を利用した車のエンジン始動制御システムの第2実施例の構成図である。上記の図3の本発明の顔認識情報を利用した車のエンジン始動制御システムの第2実施例は、登録ドライバーの顔認識情報を保存しており、車のブラックボックスのモジュールのカメラ(21-1)が撮影したドライバーの映像情報から顔認識情報を抽出し、抽出された顔認識情報が保存されている顔認識情報と一致すればドアのロッキングモジュールを制御して車のドアを開け、ドライバーが乗ってブレーキペダルを踏むとブレーキペダル情報をECUから受信して車の始動キーをONにするよう制御するブラックボックスのモジュール(20-1)で構成されていることを特徴とする。 FIG. 3 is a configuration diagram of a second embodiment of a car engine start control system using face recognition information according to the present invention. The second embodiment of the car engine start control system using face recognition information of the present invention in FIG. 1) extracts face recognition information from the captured video information of the driver, and if the extracted face recognition information matches the stored face recognition information, controls the door locking module to open the car door and the driver It consists of a black box module (20-1) that receives brake pedal information from the ECU and turns on the start key of the car when the brake pedal is stepped on.

上記のブラックボックスのモジュールのカメラが運転しようとする者の顔の映像を撮影するのは、ブラックボックスのモジュールがECUから、エンジンの回転数情報が0であったり始動キーがOFF状態であることを確認して撮影したものであることを示す。 The camera of the black box module above takes a video of the face of the person trying to drive because the black box module is from the ECU, the engine speed information is 0, and the start key is in the OFF state. to indicate that it was taken.

確認方法は、ブラックボックスのモジュールが運転しようとする者の顔の映像を撮影・受信するとECUに確認情報を送信してフィードバックを受けて確認したり、ECUから周期的に始動キーの情報またはエンジンの回転数情報を受信して確認する。 The confirmation method is that when the black box module shoots and receives a video of the person's face trying to drive, it sends confirmation information to the ECU and receives feedback for confirmation, or periodically receives information on the start key or the engine from the ECU. Receives and confirms rpm information.

図4は、本発明の顔認識情報を利用した車のエンジン始動制御システムの第3実施例の構成図である。上記の図4の本発明の顔認識情報を利用した車のエンジン始動制御システムの第3実施例は、ブラックボックスのモジュール固有情報を保存しており、ドライバーを撮影し、撮影されたドライバーの映像から顔認識情報を抽出し、抽出された顔認識情報を保存して上記の顔認識情報と「予熱」という文字情報を車に設置されているブラックボックスのモジュールに送信するカメラが設置されているスマート端末機(10-3)と、車に設置されドライバーが所持するスマート端末機の番号情報と、ドライバーの顔認識情報を保存しており、スマート端末機から受信した顔認識情報、「予熱」の文字情報、スマート端末機の番号情報を受信し、受信したスマート端末機の番号情報、顔認識情報、保存されているスマート端末機の番号情報、顔認識情報を比較して一致すれば車の始動キーをONにして予熱するよう制御するブラックボックスのモジュール(20-3)及びスマート端末機と、ブラックボックスのモジュールをネットワークで接続するインターネット網、または無線通信網(30-3)で構成されていることを特徴とする。 FIG. 4 is a configuration diagram of a third embodiment of a car engine start control system using face recognition information according to the present invention. The third embodiment of the car engine start control system using face recognition information of the present invention in Fig. 4 above stores the module specific information of the black box, captures the driver, and captures the captured video of the driver. A camera is installed that extracts face recognition information from the car, saves the extracted face recognition information, and sends the above face recognition information and the character information "preheat" to the black box module installed in the car. The smart terminal (10-3), the number information of the smart terminal installed in the car and owned by the driver, and the face recognition information of the driver are stored, and the face recognition information received from the smart terminal, "preheat" character information, smart terminal number information, and compare the received smart terminal number information, face recognition information, stored smart terminal number information, and face recognition information. It is composed of a black box module (20-3) that controls preheating by turning on the start key, a smart terminal, and the Internet network or wireless communication network (30-3) that connects the black box module with a network. It is characterized by

上記のブラックボックスのモジュールは、始動キーONの結果情報をスマート端末機に送信し、スマート端末機は受信した始動キーONの結果情報を表示部を通じて提供することもできる。 The black box module may transmit the start key ON result information to the smart terminal, and the smart terminal may provide the received start key ON result information through the display unit.

図5は、本発明の顔認識情報を利用した車のエンジン始動制御方法の第1実施例の制御フロー図である。上記の図5の本発明の顔認識情報を利用した車のエンジン始動制御方法の第1実施例は、ブラックボックスのモジュールの固有番号情報をスマート端末機に登録・保存する段階(S11)と、登録するためにカメラが撮影したドライバーの顔の映像から顔認識情報を抽出してブラックボックスのモジュールに保存する段階(S12)と、登録ドライバーのスマート端末機の電話番号情報をブラックボックスのモジュールに保存する段階(S13)と、スマート端末機が車を運転しようとするドライバーの顔を撮影し、撮影された顔の映像から顔認識情報を抽出して、自らの端末機番号の情報と抽出された顔認識情報を車のブラックボックスのモジュールに送信する段階(S14)と、ブラックボックスのモジュールが受信したスマート端末機の番号情報及び顔認識情報と、保存されているスマート端末機の番号情報及び顔認識情報を比較する段階(S15)と、一致すればブラックボックスのモジュールがドアのロッキングモジュールを制御してドアを開ける段階(S16)と、ブラックボックスのモジュールがブレーキペダル情報をECUから受信する段階(S17)と、ブラックボックスのモジュールが始動キーをONにして車のエンジンを始動させる段階(S18)で構成されていることを特徴とする。 FIG. 5 is a control flow diagram of the first embodiment of the vehicle engine start control method using face recognition information of the present invention. The first embodiment of the car engine start control method using face recognition information of the present invention shown in FIG. Extracting face recognition information from the driver's face image captured by the camera for registration and storing it in the black box module (S12), and transferring the phone number information of the smart terminal of the registered driver to the black box module. In the storing step (S13), the smart terminal captures the face of the driver who is about to drive the car, extracts face recognition information from the captured face image, and extracts the information of its own terminal number. transmitting the received face recognition information to the black box module of the vehicle (S14); The step of comparing the face recognition information (S15), the step of the black box module controlling the door locking module to open the door if they match (S16), and the black box module receiving the brake pedal information from the ECU. It is characterized by comprising a step (S17) and a step (S18) in which the black box module turns on the start key to start the car engine.

また、上記の本発明の顔認識情報を利用した車のエンジン始動制御方法の第1実施例は、S18段階以降にブラックボックスのモジュールが始動キーONの結果情報をスマート端末機に送信する段階と、受信した始動キーONの結果情報を表示部を通じて提供する段階が追加され得る。 In addition, the first embodiment of the car engine start control method using face recognition information according to the present invention includes the step of sending the start key ON result information from the black box module to the smart terminal after step S18. , the step of providing the received start key ON result information through the display unit may be added.

図6は、本発明の顔認識情報を利用した車のエンジン始動制御方法の第2実施例の制御フロー図である。上記の図6の本発明の顔認識情報を利用した車のエンジン始動制御方法の第2実施例は、カメラが撮影した顔の映像から顔認識情報を抽出してブラックボックスのモジュールに保存する段階(S21)と、カメラが設置されている車のブラックボックスのモジュールが車を運転しようとするドライバーの顔を撮影し、撮影された顔の映像から顔認識情報を抽出する段階(S22)と、ブラックボックスのモジュールが抽出した顔認識情報と保存されている顔認識情報を比較する段階(S23)と、一致すればブラックボックスのモジュールがドアのロッキングモジュールを制御してドアを開ける段階(S24)と、ブラックボックスのモジュールがブレーキペダル情報をECUから受信する段階(S25)と、ブラックボックスのモジュールが始動キーをONにして車のエンジンを始動させる段階(S26)、及びブラックボックスのモジュールに保存されている顔認識情報を新しく抽出した顔認識情報でアップデートして保存する段階(S27)で構成されていることを特徴とする。 FIG. 6 is a control flow diagram of a second embodiment of the vehicle engine start control method using face recognition information of the present invention. The second embodiment of the car engine start control method using face recognition information of the present invention shown in FIG. 6 is the step of extracting face recognition information from the face image captured by the camera and storing it in the black box module. (S21), a black box module of a car equipped with a camera captures the face of a driver who is about to drive a car, and extracts face recognition information from the captured face image (S22); Comparing the face recognition information extracted by the black box module with the stored face recognition information (S23), and if they match, the black box module controls the door locking module to open the door (S24). Then, the black box module receives the brake pedal information from the ECU (S25), the black box module turns on the start key to start the car engine (S26), and stores it in the black box module It is characterized by comprising a step (S27) of updating the existing face recognition information with newly extracted face recognition information and storing the same.

上記で車が停止状態の情報は、車のエンジンの回転数情報が0であったり、始動キーがOFF状態の情報で、上記のようなエンジンの回転数が0の情報及び始動キーがOFFの情報を受信した状態で車のブラックボックスのモジュールのカメラが運転しようとする者の顔を撮影・送信すると、撮影された顔の映像から顔認識情報が抽出される。 The above information that the car is in a stopped state is the information that the engine speed information of the car is 0 or the start key is OFF. After receiving the information, the camera in the black box module of the car captures and transmits the face of the person trying to drive, and the face recognition information is extracted from the captured image of the face.

また、上記のS25段階でのブレーキペダル情報は、 ドライバーがブレーキペダルを踏んでいる状態の情報である。 Also, the brake pedal information at the above step S25 is information in the state where the driver is stepping on the brake pedal.

図7は、本発明の顔認識情報を利用した車のエンジン始動制御方法の第3実施例の制御フロー図である。上記の図7の本発明の顔認識情報を利用した車のエンジン始動制御方法の第3実施例は、ブラックボックスのモジュールの固有番号情報をスマート端末機に登録・保存する段階(S31)と、登録するためにカメラがドライバーを撮影した顔の映像から顔認識情報を抽出してブラックボックスのモジュールに保存する段階(S32)と、登録ドライバーのスマート端末機の電話番号情報をブラックボックスのモジュールに保存する段階(S33)と、スマート端末機が 車を運転しようとするドライバーの顔を撮影し、撮影された顔の映像から顔認識情報を抽出し、自らの端末機番号の情報、「予熱」情報、抽出された顔認識情報を車のブラックボックスのモジュールに送信する段階(S34)と、ブラックボックスのモジュールが受信したスマート端末機の番号情報及び顔認識情報と、保存されているスマート端末機の番号情報及び顔認識情報を比較する段階(S35)と、一致すればブラックボックスのモジュールが始動キーをONにして車を予熱させる段階(S36)で構成されていることを特徴とする。 FIG. 7 is a control flow diagram of the third embodiment of the vehicle engine start control method using face recognition information of the present invention. The third embodiment of the car engine start control method using face recognition information of the present invention shown in FIG. 7 includes the step of registering and storing the unique number information of the module of the black box in the smart terminal (S31); In order to register, the camera extracts face recognition information from the face image of the driver and stores it in the black box module (S32), and the phone number information of the smart terminal of the registered driver is stored in the black box module. In the step of saving (S33), the smart terminal captures the face of the driver who is about to drive the car, extracts face recognition information from the captured face image, and stores its own terminal number information as 'preheating'. transmitting information and extracted face recognition information to a black box module of the vehicle (S34); and the step of comparing the number information and face recognition information (S35), and if they match, the black box module turns on the start key to preheat the car (S36).

また、上記の本発明の顔認識情報を利用した車のエンジン始動制御方法の第3実施例は、S36段階以降にブラックボックスのモジュールが始動キーONの結果情報をスマート端末機に送信する段階と、受信された始動キーONの結果情報を表示部を通じて提供する段階が追加され得る。 In addition, the third embodiment of the car engine start control method using face recognition information according to the present invention includes the step of sending the start key ON result information from the black box module to the smart terminal after step S36. , the step of providing the received start key ON result information through the display unit may be added.

図8は、本発明に適用される車のブラックボックスのモジュールの詳細な構成図である。上記の図8の本発明に適用されるブラックボックスのモジュールは、車が前方と後方を撮影して制御部に送信するカメラ部(21)と、上記のカメラ部から受信した前方及び後方の撮影映像情報を受信し、撮影時間情報と共に保存してドライバーの顔認識情報を保存しているメモリー部(22)と、制御部に時間情報を提供するGPS受信部(23)と、車のブレーキペダルを踏んだのか否かのようなブレーキペダル情報、アクセル情報及び始動キーのON/OFF情報、エンジンの回転数情報を基にエンジン、自動変速機のABSを制御し、ブレーキペダルの状態情報、始動キーの状態情報をブラックボックスのモジュールに送信するECU(25)と、カメラから受信したドライバーの顔の撮影情報から顔認識情報を抽出する顔認識情報抽出部(27)と、抽出された顔認識情報とメモリー部に保存されている顔認識情報を比較して一致するか否かを判断する比較判断部(29)と、カメラが撮影した映像情報及び比較判断部の判断結果情報を表出する表示部(24)と、上記のカメラを制御して前方及び後方を撮影するよう制御して撮影された映像情報と、GPS受信機から受信した時間情報をマッチさせてメモリー部に保存するよう制御し、停止状態でカメラが運転しようとする者を撮影する場合には、撮影された顔の映像情報を受信し、受信された顔の映像情報を顔認識情報の抽出部に送信して顔認識情報を抽出するよう制御し、抽出された顔認識情報を比較判断部に送信してメモリー部に保存されている顔認識情報と比較して一致するか否かを判断するよう制御し、一致すればドアのロッキングモジュールを制御してドアを開けてするよう制御し、ブレーキペダル情報をECUから受信して、ドライバーがブレーキを踏んだと判断されれば始動キーをONにするよう制御するメイン制御部(26)で構成されていることを特徴とする。 FIG. 8 is a detailed configuration diagram of a car black box module applied to the present invention. The module of the black box applied to the present invention shown in FIG. A memory unit (22) that receives video information and stores it together with shooting time information to store face recognition information of the driver, a GPS receiver (23) that provides time information to the control unit, and a brake pedal of the vehicle. Based on the brake pedal information such as whether or not the is stepped on, accelerator information and start key ON/OFF information, engine speed information, the engine and automatic transmission ABS are controlled, brake pedal status information, starting An ECU (25) that transmits key state information to the module of the black box, a face recognition information extractor (27) that extracts face recognition information from the photographing information of the driver's face received from the camera, and the extracted face recognition A comparing/determining unit (29) that compares the information with the face recognition information stored in the memory unit and determines whether or not they match, and displays the image information captured by the camera and the determination result information of the comparing/determining unit. Control the display unit (24) and the above-mentioned camera to control the camera to shoot the front and rear, match the image information taken and the time information received from the GPS receiver, and control to store in the memory unit. On the other hand, when the camera takes a picture of a person who is going to drive in a stopped state, it receives the image information of the photographed face and transmits the received image information of the face to the face recognition information extraction unit for face recognition. control to extract information, transmit the extracted face recognition information to a comparison determination unit, compare it with the face recognition information stored in the memory unit, and control to determine whether or not there is a match; Main control that controls the door locking module to open the door, receives brake pedal information from the ECU, and turns on the start key if it is determined that the driver has stepped on the brake. It is characterized by comprising a part (26).

また、 上記のブラックボックスのモジュールはメモリー部に顔認識情報のようなスマート端末機の番号情報を保存し、スマート端末機から番号情報を受信すると一致するか否かの比較・認証を追加することができる。 In addition, the above black box module stores smart terminal number information such as face recognition information in the memory section, and when receiving number information from the smart terminal, compares whether it matches or not and adds authentication. can be done.

10:スマート端末機
20:車のブラックボックスのモジュール
21:カメラ部
23:GPS受信部
25:ECU
26:メイン制御部
10: smart terminal
20: Car black box module
21: Camera section
23: GPS receiver
25: ECUs
26: Main control unit

Claims (2)

顔認識情報を利用した車のエンジン始動制御システムであって、
何れかのスマート端末機から、そのスマート端末機の番号情報と顔認識情報とを受信すると、受信した番号情報及び顔認識情報を、予め記憶している番号情報及び顔認識情報比較し、両者が一致すれば車のドアのロッキングモジュールを制御してドアのロック
除し、ドライバーがドアを開けて車に乗り込み、ブレーキペダルを踏むとブレーキペダル情報をECUから受信して、始スイッチをONにしてエンジンを始動させると共に、ドアが開いたこと及び始動スイッチがONとなったことのうちの少なくとも何れかを示す情報を前記スマート端末機に送信するよう車を制御する車載のブラックボックスのモジュール(10);
車を運転しようとするドライバーの顔カメラで撮影し、撮影されたの映像から顔認識情報を抽出し、自機の番号情報と抽出された顔認識情報前記ブラックボックスのモジュールに送信すると共に、前記ブラックボックスのモジュールから受信した情報を表示
部に表示するスマート端末機(20);及び、
前記ブラックボックスのモジュールと何れかのスマート端末機とを接続するインターネット網または無線通信網(30)
で構成されていることを特徴とする車のエンジン始動制御システム。
A car engine start control system using face recognition information,
When the number information and face recognition information of the smart terminal are received from any smart terminal, the received number information and face recognition information are compared with the pre-stored number information and face recognition information. , if the two match, it controls the locking module of the car door to unlock the door .
When the driver opens the door, gets into the car, and depresses the brake pedal , the brake pedal information is received from the ECU , the start switch is turned ON, and the engine is started. an in-vehicle black box module (10) for controlling the car to send information to the smart terminal indicating at least one of the activation switch being turned on ;
A camera captures the face of a driver trying to drive a car, extracts face recognition information from the captured image of the face , and transmits the number information of the vehicle itself and the extracted face recognition information to the black box module. and display the information received from the module of the black box
a smart terminal (20) to be displayed on the part ; and
Internet network or wireless communication network (30) connecting the black box module and any smart terminal
A vehicle engine start control system comprising:
車載のブラックボックスのモジュール(10)とスマート端末機(20)とがインターネット網または無線通信網(30)で接続されるシステムによる車のエンジン始動制御方法であって、
マート端末機が、車を運転しようとするドライバーの顔をカメラで撮影し、撮影された顔の映像から顔認識情報を抽出し、自機の番号情報と抽出された顔認識情報と前記ブラックボックスのモジュールに送信する段階(S14);
前記ブラックボックスのモジュールが、何れかのスマート端末機から、そのスマート端末機の番号情報顔認識情報とを受信すると、受信した番号情報及び顔認識情報を、予め記憶している番号情報及び顔認識情報比較する段階(S15);
両者が一致すれば、前記ブラックボックスのモジュールがドアのロッキングモジュールを制御してドアのロック解除する段階(S16);
ドライバーがドアを開けて車に乗り込み、ブレーキペダルを踏むことで、前記ブラックボックスのモジュールがブレーキペダル情報をECUから受信する段階(S17)
前記ブラックボックスのモジュールが、ブレーキペダル情報を受信すると、始動スイッチをONにしてエンジンを始動させる段階(S18)
前記ブラックボックスのモジュールがドアが開いたこと及び始動スイッチがONとなったことのうちの少なくとも何れかを示す情報を前記スマート端末機に送信する段階;及び、
前記スマート端末機が前記ブラックボックスのモジュールから受信した情報表示部に表示する段階
で構成されていることを特徴とする車のエンジン始動制御方法。
A vehicle engine start control method using a system in which a black box module (10) and a smart terminal (20) mounted on the vehicle are connected via an Internet network or a wireless communication network (30) ,
A smart terminal captures the face of a driver who is about to drive a car with a camera, extracts facial recognition information from the captured image of the face , and combines the number information of the device with the extracted facial recognition information . sending to the module of the black box (S14 );
When the black box module receives the smart terminal's number information and face recognition information from any smart terminal , the received number information and face recognition information are stored in the pre-stored number information. and comparing with face recognition information (S15);
If the two match , the black box module controls the door locking module to unlock the door (S16);
The driver opens the door, gets into the car, and depresses the brake pedal so that the black box module receives the brake pedal information from the ECU (S17) ;
When the black box module receives the brake pedal information, turning on the start switch to start the engine (S18) ;
the black box module sending information indicating at least one of the opening of the door and the turning on of the start switch to the smart terminal ; and
A car engine start control method, wherein the smart terminal displays information received from the black box module on a display unit .
JP2020081877A 2020-05-07 2020-05-07 Car engine start control system using face recognition information and car engine start control method using the same Active JP7215743B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2020081877A JP7215743B2 (en) 2020-05-07 2020-05-07 Car engine start control system using face recognition information and car engine start control method using the same

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2020081877A JP7215743B2 (en) 2020-05-07 2020-05-07 Car engine start control system using face recognition information and car engine start control method using the same

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2019037750A Division JP6799100B2 (en) 2019-03-01 2019-03-01 Car preheating control system using face recognition information and car preheating control method using it

Publications (2)

Publication Number Publication Date
JP2020138730A JP2020138730A (en) 2020-09-03
JP7215743B2 true JP7215743B2 (en) 2023-01-31

Family

ID=72279819

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2020081877A Active JP7215743B2 (en) 2020-05-07 2020-05-07 Car engine start control system using face recognition information and car engine start control method using the same

Country Status (1)

Country Link
JP (1) JP7215743B2 (en)

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006290303A (en) 2005-04-14 2006-10-26 Matsushita Electric Ind Co Ltd Engine start system, and engine stall identification method
JP2006291935A (en) 2005-04-14 2006-10-26 Matsushita Electric Ind Co Ltd Engine starting system
JP2011250389A (en) 2010-04-28 2011-12-08 Tokai Rika Co Ltd Mobile phone with electronic key function
JP2014145200A (en) 2013-01-29 2014-08-14 Denso Corp Locking/unlocking right granting system, authentication device, mobile terminal, and program
JP2015131509A (en) 2014-01-09 2015-07-23 株式会社東海理化電機製作所 Smart system
US20160368455A1 (en) 2014-02-07 2016-12-22 Gwang Woo Kim Electronic key device capable of wirelessly controlling lock system and transmitting control authentication of lock system, system therefor, and method therefor
JP2018115463A (en) 2017-01-18 2018-07-26 株式会社東海理化電機製作所 Electronic key system, electronic control device and receiver

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006290303A (en) 2005-04-14 2006-10-26 Matsushita Electric Ind Co Ltd Engine start system, and engine stall identification method
JP2006291935A (en) 2005-04-14 2006-10-26 Matsushita Electric Ind Co Ltd Engine starting system
JP2011250389A (en) 2010-04-28 2011-12-08 Tokai Rika Co Ltd Mobile phone with electronic key function
JP2014145200A (en) 2013-01-29 2014-08-14 Denso Corp Locking/unlocking right granting system, authentication device, mobile terminal, and program
JP2015131509A (en) 2014-01-09 2015-07-23 株式会社東海理化電機製作所 Smart system
US20160368455A1 (en) 2014-02-07 2016-12-22 Gwang Woo Kim Electronic key device capable of wirelessly controlling lock system and transmitting control authentication of lock system, system therefor, and method therefor
JP2018115463A (en) 2017-01-18 2018-07-26 株式会社東海理化電機製作所 Electronic key system, electronic control device and receiver

Also Published As

Publication number Publication date
JP2020138730A (en) 2020-09-03

Similar Documents

Publication Publication Date Title
KR102005040B1 (en) Vehicle quick starting Control System by Using Face Perception Data and Smart Terminal and Method thereof
KR101962750B1 (en) Vehicle starting Control System by Using Face Perception Data and Method thereof
US9580044B2 (en) Method and system for enabling an authorized vehicle driveaway
WO2018000999A1 (en) On-board system and control method for vehicle facility
US20140070917A1 (en) Apparatus and method for registering users and managing biometric data thereof in a vehicle
CN108357462B (en) Vehicle unlocking method and vehicle
US20150217726A1 (en) Method and Apparatus for Biometric Vehicle Activation
US20110215899A1 (en) Method and system for authorizing a vehicle driveaway
JP6799100B2 (en) Car preheating control system using face recognition information and car preheating control method using it
GB2402794A (en) Biometric user identification at a remote control with user prsets
JP2017223068A (en) Authentication method and authentication device
CN108564074A (en) A kind of timesharing car rental method for managing security and system based on FACEID
JP4323146B2 (en) Lighting system
JP7215743B2 (en) Car engine start control system using face recognition information and car engine start control method using the same
US10836352B2 (en) Vehicle starting control system by using face perception data and method thereof
CN112389368B (en) Vehicle backup unlocking method
KR20120115644A (en) Device and method for driver recognition using smart key
JP2008222009A (en) Communication system between vehicle and building
JP2003281099A (en) System and method for authenticating biological information image
CN109109816B (en) Remote unlocking method, device and system for automobile oil way anti-theft lock and storage medium
KR102592207B1 (en) Apparatus and system for facial recognition control, method for vehicle access using thereof
JP3565923B2 (en) Engine starter
JP2018129047A (en) Method and device for performing electronic remittance for paying parking fee
KR20120055083A (en) Setting system convenient device of vehicle
JP4723194B2 (en) Vehicle use restriction system, vehicle side communication device, and external communication device

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210217

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20211104

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20211124

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220224

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220517

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20220817

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220818

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20221220

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230112

R150 Certificate of patent or registration of utility model

Ref document number: 7215743

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150