JP6751173B2 - 自動車用モジュールカメラおよび自動化入口用画像処理システム - Google Patents

自動車用モジュールカメラおよび自動化入口用画像処理システム Download PDF

Info

Publication number
JP6751173B2
JP6751173B2 JP2019006796A JP2019006796A JP6751173B2 JP 6751173 B2 JP6751173 B2 JP 6751173B2 JP 2019006796 A JP2019006796 A JP 2019006796A JP 2019006796 A JP2019006796 A JP 2019006796A JP 6751173 B2 JP6751173 B2 JP 6751173B2
Authority
JP
Japan
Prior art keywords
user
camera
detected
vehicle
entrance
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2019006796A
Other languages
English (en)
Other versions
JP2019090313A (ja
JP2019090313A5 (ja
Inventor
ポンピリアン トフィユスク,
ポンピリアン トフィユスク,
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Flextronics Global Services Canada IncServices Globaux Flextronics Canada Inc
Original Assignee
Flextronics Global Services Canada IncServices Globaux Flextronics Canada Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Flextronics Global Services Canada IncServices Globaux Flextronics Canada Inc filed Critical Flextronics Global Services Canada IncServices Globaux Flextronics Canada Inc
Publication of JP2019090313A publication Critical patent/JP2019090313A/ja
Publication of JP2019090313A5 publication Critical patent/JP2019090313A5/ja
Application granted granted Critical
Publication of JP6751173B2 publication Critical patent/JP6751173B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07CTIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C9/00Individual registration on entry or exit
    • G07C9/00174Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys
    • EFIXED CONSTRUCTIONS
    • E05LOCKS; KEYS; WINDOW OR DOOR FITTINGS; SAFES
    • E05FDEVICES FOR MOVING WINGS INTO OPEN OR CLOSED POSITION; CHECKS FOR WINGS; WING FITTINGS NOT OTHERWISE PROVIDED FOR, CONCERNED WITH THE FUNCTIONING OF THE WING
    • E05F15/00Power-operated mechanisms for wings
    • E05F15/70Power-operated mechanisms for wings with automatic actuation
    • E05F15/77Power-operated mechanisms for wings with automatic actuation using wireless control
    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07CTIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C5/00Registering or indicating the working of vehicles
    • G07C5/08Registering or indicating performance data other than driving, working, idle, or waiting time, with or without registering driving, working, idle or waiting time
    • G07C5/0841Registering performance data
    • G07C5/085Registering performance data using electronic data carriers
    • G07C5/0866Registering performance data using electronic data carriers the electronic data carrier being a digital video recorder in combination with video camera
    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07CTIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C9/00Individual registration on entry or exit
    • G07C9/00174Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys
    • G07C9/00563Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys using personal physical data of the operator, e.g. finger prints, retinal images, voicepatterns
    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07CTIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C9/00Individual registration on entry or exit
    • G07C9/00174Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys
    • G07C9/00309Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys operated with bidirectional data transmission between data carrier and locks

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Lock And Its Accessories (AREA)
  • Image Analysis (AREA)
  • Power-Operated Mechanisms For Wings (AREA)
  • User Interface Of Digital Computer (AREA)

Description

本出願は、自動車用電子機器に関する。
自動車は、自動パワーリフトゲート、スライドドア、およびドア等の多数の入口を有している。運転者は自動車のリフトゲートまたはトランクに近づくことはできるが、物を持っていたりあるいは寒さにより、入口を開錠してオープンするためにこれらのキーを手に取ることができない可能性がある。
本発明の1つの目的は、ユーザーがキーを取り出すこと、あるいは手動で作動させる装置を用いることなしに、ドア,ゲートまたはその他の装置を作動させるシステムおよび方法を提供することである
以下に、ユーザーがキーを取り出すこと、あるいは手動で作動させる装置を用いることなしに、自動車の入口を作動させるシステムおよび方法を記載する。1つの実施形態においては、自動車用モジュールカメラを用いた解決法(modular automotive camera solution, MACS)のモジュールが、画像処理システムと共に、自動化された乗り込み入口(automated portal entry)のために用いられる。このMACSモジュールは、たとえばこれが自動車の後方画像カメラとして組み込まれ、受動的な乗り込みシステムおよびパワーリフトゲートモジュール(PLGM)と共に用いられて動作する場合、ユーザーの存在を認識してリフトゲートのオープンを制御するのに使用することができる。このMACSモジュールは、リフトゲートのモータ制御機構の一部として、連続動作センサとしてのカメラモジュールを有する。このカメラモジュールは、CMOS(complementary metal-oxide-semiconductor)センサを用いたカメラであり、NTSC(National Television System Committee)のアナログコンポジットビデオ信号およびLVDS(low voltage differential signaling)のデジタルビデオ出力の両方を出力するように構成されてよい。画像処理モジュールは、画像処理を行い、これらのPLGMおよびMACSのモジュールと通信する。このシステムは、LIN(local interconnect network)通信用に構成されている。
自動化された乗り込み入口システムの1つの実施形態を示す図である。 自動車用モジュールカメラを用いた解決法(MACS)の1つの実施形態を示す図である。 画像処理エンジン(IPE)モジュールの1つの実施形態を示す図である。 MACSモジュールおよびIPEモジュール用の他の回路と接続されたパワーマネージメント回路の1つの実施形態を示す図である。 MACSモジュールおよびIPEモジュール用の他の回路と接続されたパワーマネージメント回路の1つの実施形態を示す図である。 イネーブル回路およびMACSモジュールおよびIPEモジュール用の他の回路と接続されたLINの1つの実施形態を示す図である。 MACSモジュールおよびIPEモジュール用の他の回路と接続されたマイクロコントローラ回路の1つの実施形態を示す図である。 図6のマイクロコントローラ回路と図8の画像センサとを相互接続する回路の1つの実施形態を示す図である。 MACSモジュールおよびIPEモジュール用の他の回路と接続された画像センサの1つの実施形態を示す図である。 MACSモジュールおよびIPEモジュール用の他の回路と接続されたシリアライザの1つの実施形態を示す図である。 IPEモジュールと一体化されたMACSモジュールを有する自動化された乗り込み入口システムの1つの実施形態を示す図である。 IPEモジュールと一体化されたパワーリフトゲートモジュールを有する自動化された乗り込み入口システムの1つの実施形態を示す図である。
なお、図および自動化された乗り込み入口のためのシステムの実施形態の説明では、理解し易いように要素を単純化して示してあり、また分かり易くするために実際の自動車のシステムにある他の多数の要素が削除されている。当業者であれば、本発明を実装するために好ましい、および/または必要な他の要素および/またはステップを認識することができるであろう。しかしながら、そのような要素およびステップは従来良く知られており、また本発明のより良い理解を助けるものではないので、このような要素およびステップの説明はここでは省略する。
ここで説明する実施形態は自動化された自動車乗り込みの入口システムに関して限定するものではない。ここで教示されることに基づいて、ここに記載された主旨あるいは範囲から逸脱することなく、他の電子装置、モジュールおよびアプリケーションを用いることもできる。この自動化された自動車乗り込みの入口システムは、請求項に記載の主旨および範囲で、種々のアプリケーションおよび使用のために変形実施することができる。ここに説明する実施形態および変形例、および/または図示する実施形態および変形例は、単なる例示であり、本発明の主旨および範囲を限定するものではない。ここでは特定の実施形態について説明するが、ここでの記載内容は、自動化された自動車乗り込みの入口システムの全ての実施形態に適用することができる。
以下に、ユーザーがキーを取り出すこと、あるいは手動で作動させる装置を用いることを必要としない、自動化された自動車乗り込みの入口システムの方法を記載する。図1は、自動化された乗り込み入口システムの1つの実施形態を示す図である。この自動化された乗り込み入口システム10は、通信バス(COMM)を介して画像処理エンジン(IPE)20と通信するMACSモジュール15を含む。この通信バスはLIN(local interconnect network)バスまたは配線で入力されるものであってよい。IPE20は、CAN(controller area network)を介してパワーリフトゲートモジュール(PLGM)25および無線周波数(RF)ハブ30と通信している。
動作的には、このRFハブ30は、キーフォブ35または他の同様な装置を検出して認識し、イネーブルまたはウェークアップ信号をIPE20に送信する。このIPE20は、同様にイネーブル信号またはウェークアップ信号をMACSモジュール15に送信する。このMACSモジュール15は、画像またはビデオ情報をIPE20に送信する。この情報は、アナログであってもデジタルであってもよい。たとえば、このアナログ信号はNTSC(National Television System Committee)のコンポジットビデオ信号であってよい。IPE20は、人が車の背後に立っているかどうかを判断する画像処理アルゴリズムを用いている。たとえば、このアルゴリズムは、光、輪郭、または色のグラデーション変化に基づいていてよい。このアルゴリズムは、自動車の傍に立っているかまたは通り過ぎるかを充分に安定して区別する。もしこのIPE20が、人が自動車の背後に立っていると判断した場合、このIPE20は、リフトゲートをオープンするためにPLGM25にオープン信号を送信する。
図2は、MACSモジュール100の1つの実施形態を示す。MACSモジュール100は、マイクロコントローラ140に接続されたパワーマネージメントモジュール120と、画像センサ125と、(もし利用可能な場合は)シリアライザ130とを含む。このマイクロコントローラ(MCU)140は、さらにLIN(local interconnect network)トランシーバ150および画像センサ125に接続されてよく、この画像センサは次にシリアライザ130に接続されてよい。
MACSモジュール100は、バッテリ電圧155および受動的乗り込みシステム195からのイネーブル信号160を入力として受信する。パワーマネージメントモジュール120は、バッテリ電圧155を所要の電圧に変換してMCU140,画像センサ125,および(もし利用可能な場合は)シリアライザ130に供給する。画像センサ125は、CMOS(complementary metal-oxide-semiconductor)センサを用いたカメラである。イネーブル信号160は、本人確認が認証あるいは検証された場合(たとえばキーフォブが検出された場合)、パワーマネージメントモジュール120およびMCU140に送られる。MACSモジュール100は、画像センサ125からアナログNTSC(National Television System Committee)コンポジット信号185を出力し、および/またはデジタルビデオ信号180をLVDS(low voltage differential signaling)でシリアライザ130に出力する。LINトランシーバ150は、LINバス170を介してこの自動車における他の車載電子部品またはモジュール、たとえば受動的乗り込みシステム/モジュールおよびパワーリフトゲートモジュール(PLGM)190と通信するように構成されている。
通常MACSモジュール100は、ユーザーの存在を認識して、たとえばリフトゲートのオープンを制御するように構成されている。このMACSモジュール100は、この自動車における後方視野カメラモジュールとして搭載され、受動的乗り込みシステムおよびPLGMと連動して動作する。このMACSモジュール100は、リフトゲートのモータ制御機構の一部として、連続動作センサとしてのカメラモジュールを有する。このMACSモジュールは、自動車後方視野カメラとして最小限の構成で用いられてよく、あるいはバードビュー(bird eye view)、死角検出等の運転者をアシストする画像処理用の上位モジュールと連携して用いられてよい。
図3は、画像処理エンジン(IPE)モジュール200の1つの実施形態であり、このIPEモジュールは、DSP(digital signal processor)215および(もし利用可能な場合は)デシリアライザ220に接続されたパワーマネージメントモジュール210を含む。DSP215は、さらにLIN(local interconnect network)トランシーバ230およびデシリアライザ220に接続されてよい。このLINトランシーバ230は、LIN/CAN(controller area network)のバス245を介してこの自動車における他の車載電子部品またはモジュール、たとえば受動的乗り込みシステム/モジュールおよびPLGM190と通信するように構成されている。
IPE200は、入力としてバッテリ電圧240およびビデオ情報信号250を受信する。パワーマネージメントモジュール210は、バッテリ電圧240を所要の電圧に変換してDSP215,および(もし利用可能な場合は)デシリアライザ220に供給する。このビデオ信号250は、デシリアライザ220に受信され、このデシリアライザは、さらにこのビデオ情報信号250を解析のためにDSP215に送信する。
IPE200は画像処理を行い、PLGM190およびMACSモジュール100双方と通信を行う。このIPE200は、ビデオ情報信号250を受信し、DSP215における画像処理アルゴリズムに基づいて、車の後ろに人が立っているか否かを判断する。このアルゴリズムは、光、輪郭、または色のグラデーション変化に基づいていてよい。このアルゴリズムは、人が立っていることと通過していることとを区別する。人が立っていることの肯定的な判定が行われた場合、このIPE200は、LINトランシーバ230を介し、LIN/CANバス245を経由してPLGM190に送信してリフトゲートをオープンさせる。
操作上は、人が適切な識別物、すなわちキーフォブまたは他の同様な識別物を持っており、またMACSモジュールの後方視野カメラの視野に入っていることが必要である。受動的乗り込みシステム195は、キーフォブを検出および/または認証し、イネーブル信号160をPLGM190,IPE200,およびMACSモジュール100に送信する。IPE200は、MACSモジュール100の後方視野カメラ/画像センサ125によって捉えられた画像を読み、リフトゲートがオープンされるべきか否かを判断する。1つの実施形態においては、人が所定の仕草の身振りをする必要があり、たとえば、後方視野カメラ(これはナンバープレートの上の、ナンバープレートの照明バー(light bar)の下に位置している)の前で膝を揺らすと、検出アルゴリズムの信頼性または安定性を向上あるいは確実にする。この判断は、リフトゲートを制御するPLGM190に送信される。
図4A〜9は、MACSモジュール100の1つの実施形態を示す。パワーマネージメントシステム120は、たとえばスイッチング電源回路300、およびたとえば低ドロップアウト線形レギュレータ回路305を含んでよく、これらの実施形態が図4Aおよび4Bに示されている。このスイッチング電源回路300は、バッテリ電圧をマイクロコントローラ、シリアライザ130,および画像センサ125のアナログ回路と内部回路の電源に必要な3.3Vに変換するように構成されている。低ドロップアウト線形レギュレータ回路305は、この3.3Vを画像センサ125のデジタルコアの電源に必要な1.5Vに変換する。
図5は、イネーブル回路410およびLIN回路420の1つの実施形態を示す。イネーブル回路410は、デジタル入力インターフェースであり、外部からの配線接続による入力に基づいてカメラモジュールを起動することができる。後方視野カメラのアプリケーションの場合は、この入力はバックライト信号であってよい。LIN回路420は、LINトランシーバの集積回路(IC)425を含み、この集積回路は、LINバス170のMCU140とのインターフェースとなる。このLIN回路420は、バスリクエスト信号によりMACSモジュールを起動するのに用いられてよく、またMCU140の再起動(re-flashing)に用いられてよい。これはまた画像センサ125のレジスタのリモートアップデートおよびまたはリアルタイムアップデートに用いられてよい。たとえば、バードビューのアプリケーションにおいて、4つのカメラが用いられた場合、各カメラの画像センサのパラメータは、特定の光条件の関数として制御される必要がある。もしIPE200がMACSモジュール100/カメラのパラメータを制御/および調整する必要がある場合は、この回路をリフトゲート制御のアプリケーションにも適用することができる。
図6は、マイクロコントローラ回路140の1つの実施形態を示し、図7はこの図6のマイクロコントローラ140および図8の画像センサ700を相互接続する回路600の1つの実施形態を示す。マイクロコントローラ回路140は、画像センサ700にあるレジスタを、パワーオンリセットの後にPCバスを介してアップデートする。この回路は、図4Aに示す電圧分割抵抗ネットワークR1,R2を介して自動車バッテリの電圧をモニターする。この回路はまた、回路600および図9に示すようなシリアライザ回路130のシリアライザIC805を介して、(すなわち出力ピン8および20を介して)画像センサ700の電源オン/オフの制御を行う。このマイクロコントローラ回路140は、図5に示すLIN回路420を介してこの自動車における他のモジュールと通信する。
図8は、画像センサ700の1つの実施形態を示し、この画像センサは、たとえばOminivision(登録商標)OV07955、自動車用ビデオグラフィクスアレイ(VGA)センサであってよい。この画像センサ700は、アナログビデオ信号(すなわちNTSCまたはPAL)および8ビットデジタルビデオ信号の両方を出力する。たとえば、アナログビデオ信号は図9におけるNTSC信号185である。
図9はシリアライザIC805を含むシリアライザ回路130の1つの実施形態を示す。このシリアライザIC805は、パラレルデジタルビデオ出力を、垂直同期信号(VSYNC)、水平同期信号(HSYNC)およびピクセルクロック情報と共に処理し、2線式の差動シリアル信号を出力する。この信号はIPE200に送信され、運転者が自動車の後ろにいることを検出するのに用いられる。
図10は、IPEモジュールと一体化されたMACSモジュールを有する自動化された乗り込み入口システム1000の1つの実施形態を示すこの自動化された乗り込み入口システム1000は、部分的にリフトゲート1005に配置され、駆動システム1015,MACSモジュール1020,およびPLGM1010を含み、これらは上記で説明したように相互接続されている。MACSモジュール1020は、IPEサブモジュール1030およびMACSサブモジュール1025を含む。自動化された乗り込み入口システム1000は、上記で説明した実施形態のいずれかのように機能あるいは動作する。
図11は、IPEモジュールと一体化されたパワーリフトゲートモジュール(PLGM)を有する自動化された乗り込み入口システム1100の1つの実施形態を示す図である。この自動化された乗り込み入口システム1100は、部分的にリフトゲート1105に配置され、PLGM1110,駆動システム1115,およびMACSモジュール1120を含み、これらは上記で説明したように相互接続されている。このPLGMモジュール1110は、PLGMサブモジュール1125およびIPEサブモジュール1130を含む。自動化された乗り込み入口システム1100は、上記で説明した実施形態のいずれかのように機能あるいは動作する。もう1つの実施形態においては、このIPEは、後部ゾーンのモジュール電子回路パッケージの一部であってよい。
ここで、自動化された乗り込み入口のためのシステムの一般的な説明を行う。このシステムはカメラまたは画像システムを含み、入口およびこの入口をオープンする機械的または電気機械的システムと一緒に配置されている。画像処理エンジン/モジュールは、何時入口をオープンするか判断するように構成されている。この判断は、ユーザーを検出したことの判断、ユーザーの仕草の判断、およびキーフォブの判断を含む。ユーザーを検出したことの判断およびユーザーの仕草の判断は、カメラから受信した画像に基づいており、キーフォブの判断は、無線周波数等の検出に基づいている。このキーフォブは、ユーザー,自動車または双方に関連付けられる。
以上で説明したように、ここで説明した方法は特定の機能を実行する特定の(複数の)要素に限定されるものでなく、提示した方法のいくつかのステップは、必ずしもここに示したような順序で起こる必要はない。たとえば、或る場合には2つ以上の方法ステップが異なる順序または同時に行われてよい。さらに、ここで説明した方法の或るステップは、(あからさまには随意的とは記載されていないが)随意的なものであってよく、したがって省略されてもよい。ここで開示された方法のこのような変形実施例および他の変形実施例は、とりわけここで説明した自動車用モジュールカメラを用いた解決法(MACS)についての記載を参照してすぐに理解できるものであり、これらは本発明の全範囲内に入ると認められるものである。
上記で説明した特徴および部品は特定の組み合わせにおけるものであるが、各々の特徴または要素は他の特徴および要素無しで単独で使用されてよく、あるいは他の特徴および要素と組み合わせた様々な組み合わせで使用されてよく、あるいは他の特徴および要素と組み合せずに使用されてよい。
(関連出願のクロスリファレンスの記載)
本出願は、2012年12月9日に出願された米国仮出願番号61/568,828に基づく優先権を主張し、当該米国出願に記載された全ての記載内容を援用する。

Claims (15)

  1. 自動化された自動車の乗り込みの入口のためのシステムであって、
    前記入口と一緒に配置された連続動作センサであるカメラと、
    前記入口をオープンするように構成された機械システムと、
    キーフォブを検出して認証するように構成された無線周波数(RF)ハブと、
    前記カメラ、前記機械システム、及び前記無線周波数(RF)ハブに接続され通信可能なディジタルシグナルプロセッサを備える画像処理エンジンと、を備え、
    前記ディジタルシグナルプロセッサは、
    前記無線周波数(RF)ハブを用いて前記キーフォブを検出し、
    前記キーフォブが検出された状態において、前記カメラから受信した画像に基づいて、ユーザが自動車の傍らに立っていて通り過ぎる者ではないことを検出し、
    前記ユーザが前記自動車の傍らに立っていることが検出された状態において、前記カメラから受信した前記画像に基づいて、前記ユーザが所定の仕草していることを検出し、
    前記ユーザが前記自動車の傍らに立っていることが検出され、前記ユーザが前記所定の仕草していることが検出された状態において、前記入口をオープンするために前記機械システムを制御する、ように構成されている、
    システム。
  2. 前記画像処理エンジンは、パワーマネージメント部と、ローカルインターコネクトネットッワーク/コントロールエリアネットワークのトランシーバと、デシリアライザと、を更に含む、請求項1に記載のシステム。
  3. 前記画像処理エンジンは、ユーザに関係するキーフォブの検出を検証するように構成されている、請求項1に記載のシステム。
  4. 前記画像処理エンジンは、前記カメラの1つまたはパワーリフトゲートモジュールの1つと一体化されている、請求項1に記載のシステム。
  5. 自動車の入口を自動的に作動させるための方法であって、
    無線周波数(RF)ハブを用いてキーフォブを検出して検証するステップと、
    前記キーフォブが検出された状態において、カメラから受信した画像に基づいて、ユーザが自動車の傍らに立っていて通り過ぎる者ではないことを検出するステップと、
    前記ユーザが検出され、前記ユーザが前記自動車の傍らに立っていて通り過ぎる者ではないことが検出された状態で、前記ユーザが所定の仕草していることを検出するステップと、
    前記ユーザが前記自動車の傍らに立っていることが検出され、前記ユーザが前記所定の仕草していることが検出された状態において、前記入口をオープンするステップと、を備える、方法。
  6. 前記ユーザが前記自動車の傍らに立っていることを検出し、前記ユーザが前記所定の仕草していることを検出することは、前記入口と一緒に配置されたカメラから受信した画像に基づいて行われる、請求項5に記載の方法。
  7. 画像処理エンジンは、前記カメラ、前記入口、及び前記無線周波数(RF)ハブと接続され通信可能なディジタルシグナルプロセッサを備え、
    前記ディジタルシグナルプロセッサは、前記無線周波数(RF)ハブを用いて前記キーフォブを検出し、前記カメラから受信した前記画像を用いて前記ユーザが前記自動車の傍らに立っていることを検出し、前記カメラから受信した前記画像に基づいて、前記ユーザが前記所定の仕草していることを検出し、前記入口をオープンすることを制御する、請求項6に記載の方法。
  8. 前記カメラは連続動作センサであり、光または色のグラデーション変化に基づいて前記カメラにより受信された前記画像を処理する、請求項7に記載の方法。
  9. 自動車の入口に配置されたカメラシステムと、
    前記入口をオープンするように構成された電気機械システムと、
    キーフォブを検出して認証するように構成された無線周波数(RF)ハブと、
    前記カメラシステム、前記電気機械システム、及び前記無線周波数(RF)ハブに接続され通信可能なディジタルシグナルプロセッサを備える画像処理エンジンと、を備え、
    前記ディジタルシグナルプロセッサは、
    前記無線周波数(RF)ハブを用いて前記キーフォブを検出し、
    前記キーフォブが検出された状態において、前記カメラシステムから受信した画像に基づいて、ユーザが前記自動車の傍らに立っていて通り過ぎる者ではないことを検出し、
    前記ユーザが前記自動車の傍らに立っていることが検出された状態において、前記カメラシステムから受信した前記画像に基づいて、前記ユーザが所定の仕草していることを検出し、
    前記ユーザが前記自動車の傍らに立っていることが検出され、前記ユーザが前記所定の仕草していることが検出された状態において、前記入口をオープンするために前記電気機械システムを制御する、自動車。
  10. 前記画像処理エンジンは、前記カメラシステムと一体化され、前記画像処理エンジンは、パワーマネージメント部と、ローカルインターコネクトネットッワーク/コントロールエリアネットワークのトランシーバと、前記ディジタルシグナルプロセッサと、デシリアライザと、を含む、請求項9に記載の自動車。
  11. 前記カメラシステムのカメラは連続動作センサであり、光または色のグラデーション変化に基づいて前記カメラシステムにより受信された前記画像を処理する、請求項9に記載の自動車。
  12. 前記画像処理エンジンは、前記カメラシステムの1つまたは前記電気機械システムのパワーリフトゲートの1つと一体化されている、請求項9に記載の自動車。
  13. 自動化された自動車の乗り込みの入口のためのシステムであって、
    前記入口と一緒に配置され、連続動作センサである画像システムと、
    前記入口をオープンするように構成された電気機械システムと、
    キーフォブを検出して認証するように構成された無線周波数(RF)ハブと、
    前記画像システム、前記電気機械システム、及び前記無線周波数(RF)ハブに接続され通信可能な処理モジュールと、を備え、
    前記処理モジュールは、
    前記キーフォブを検出して、認証して、検証し、
    前記キーフォブが検出され認証され検証された状態において、前記画像システムから受信した画像に基づいて、ユーザが自動車の傍らに立っていて通り過ぎる者ではないことを検出し、
    前記ユーザが前記自動車の傍らに立っていることが検出された状態において、前記画像システムから受信した前記画像に基づいて、前記ユーザが所定の仕草していることを検出し、
    前記ユーザが前記自動車の傍らに立っていることが検出され、前記ユーザが前記所定の仕草していることが検出された状態において、前記入口のオープンするために前記電気機械システムを制御する、システム。
  14. 前記処理モジュールは、パワーマネージメント部と、ローカルインターコネクトネットッワーク/コントロールエリアネットワークのトランシーバと、ディジタルシグナルプロセッサと、デシリアライザと、を更に含む、請求項13に記載のシステム。
  15. 前記所定の仕草の検出は、前記画像システムからの画像に基づく、請求項13に記載のシステム。
JP2019006796A 2011-12-09 2019-01-18 自動車用モジュールカメラおよび自動化入口用画像処理システム Active JP6751173B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US201161568828P 2011-12-09 2011-12-09
US61/568,828 2011-12-09

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2014545056A Division JP2015507708A (ja) 2011-12-09 2012-12-10 自動車用モジュールカメラおよび自動化入口用画像処理システム

Publications (3)

Publication Number Publication Date
JP2019090313A JP2019090313A (ja) 2019-06-13
JP2019090313A5 JP2019090313A5 (ja) 2019-08-29
JP6751173B2 true JP6751173B2 (ja) 2020-09-02

Family

ID=48573465

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2014545056A Pending JP2015507708A (ja) 2011-12-09 2012-12-10 自動車用モジュールカメラおよび自動化入口用画像処理システム
JP2019006796A Active JP6751173B2 (ja) 2011-12-09 2019-01-18 自動車用モジュールカメラおよび自動化入口用画像処理システム

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP2014545056A Pending JP2015507708A (ja) 2011-12-09 2012-12-10 自動車用モジュールカメラおよび自動化入口用画像処理システム

Country Status (6)

Country Link
US (1) US20150005985A1 (ja)
EP (1) EP2788226B1 (ja)
JP (2) JP2015507708A (ja)
CN (1) CN104039597A (ja)
CA (1) CA2858634C (ja)
WO (1) WO2013082725A1 (ja)

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103729899B (zh) * 2014-01-15 2017-04-12 西安艾润物联网技术服务有限责任公司 用于停车场控制系统的嵌入式主板及停车场控制系统
US9495869B2 (en) 2014-10-03 2016-11-15 International Business Machines Corporation Assistance to law enforcement through ambient vigilance
JP6281474B2 (ja) 2014-11-19 2018-02-21 株式会社Jvcケンウッド 制御装置、制御方法、および制御プログラム
CN105346508A (zh) * 2015-11-05 2016-02-24 重庆熠美实业发展有限公司 基于无钥匙进入系统的解锁方法
AT15742U1 (de) * 2016-11-08 2018-05-15 Ifn Holding Ag Verschlusselement für eine Gebäudeöffnung
US10491494B2 (en) * 2017-11-23 2019-11-26 Harman International Industries, Incorporated Captive portal detection
JP7068443B2 (ja) * 2018-04-06 2022-05-16 ローム株式会社 受信デバイス、伝送システム、自動車
US11572039B2 (en) 2020-01-15 2023-02-07 Volvo Car Corporation Confirmed automated access to portions of vehicles
CN114120484A (zh) * 2020-08-31 2022-03-01 比亚迪股份有限公司 一种面部识别系统及车辆
CN117082107B (zh) * 2023-10-16 2024-02-06 北京茵沃汽车科技有限公司 通讯调试设备、通讯调试方法

Family Cites Families (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR2707030B1 (ja) * 1993-06-21 1995-07-28 Valeo Electronique
US6292575B1 (en) * 1998-07-20 2001-09-18 Lau Technologies Real-time facial recognition and verification system
US6720874B2 (en) * 2000-09-29 2004-04-13 Ids Systems, Inc. Portal intrusion detection apparatus and method
JP2002180744A (ja) * 2000-12-13 2002-06-26 Mazda Motor Corp 車両の開閉体制御装置
US6498970B2 (en) * 2001-04-17 2002-12-24 Koninklijke Phillips Electronics N.V. Automatic access to an automobile via biometrics
US20040207511A1 (en) * 2003-04-21 2004-10-21 Technology Advancement Group, Inc. System and method for securely activating a mechanism
JP2005120787A (ja) * 2003-10-20 2005-05-12 Denso Corp 車載機器制御装置
JP2005315024A (ja) * 2004-04-30 2005-11-10 Fujitsu Ten Ltd 車両制御装置
DE102004041709C5 (de) * 2004-08-28 2009-11-12 Bayerische Motoren Werke Aktiengesellschaft Fahrzeug mit automatisch öffnender Klappe
JP2006274677A (ja) * 2005-03-29 2006-10-12 Tokai Rika Co Ltd ドア制御装置
JP2006328932A (ja) * 2005-04-28 2006-12-07 Denso Corp 車両ドア制御システム
JP2007324679A (ja) * 2006-05-30 2007-12-13 Nec Electronics Corp シリアル通信用ボーレートジェネレータ
JP4793118B2 (ja) * 2006-06-20 2011-10-12 トヨタ自動車株式会社 スマートエントリーシステム
CN1904303A (zh) * 2006-06-28 2007-01-31 王正键 计算机控制的汽车门安全系统及其工作方法
US7643800B2 (en) * 2007-01-30 2010-01-05 Broadcom Corporation Transmit power management for a communication device and method for use therewith
DE102007023140A1 (de) 2007-05-16 2008-10-02 Audi Ag Verfahren zur Erkennung und/oder Identifizierung eines Fahrers eines Kraftfahrzeugs und/oder einer Person im Bereich eines Kraftfahrzeugs sowie zugehöriges Kraftfahrzeug
JP2009024454A (ja) * 2007-07-23 2009-02-05 Denso Corp 車両ドア制御装置
FR2920172B1 (fr) * 2007-08-21 2009-12-04 Valeo Securite Habitacle Procede de deverrouillage automatique d'un ouvrant de vehicule automobile pour systeme mains-libre et dispositif pour la mise en oeuvre du procede
FR2936545B1 (fr) * 2008-10-01 2017-03-10 Valeo Securite Habitacle Dispositif de deverrouillage automatique d'un ouvrant de vehicule automatique.
JP4957696B2 (ja) 2008-10-02 2012-06-20 ソニー株式会社 半導体集積回路、自発光表示パネルモジュール、電子機器及び電源線駆動方法
JP5402365B2 (ja) * 2009-08-04 2014-01-29 大日本印刷株式会社 キーレスエントリー装置
DE102009044389B4 (de) * 2009-11-02 2024-06-06 Witte-Velbert Gmbh & Co. Kg Tür- oder Heckklappenöffnungseinrichtung
DE102010021108B4 (de) * 2010-05-20 2012-09-13 Volkswagen Ag Verfahren und Vorrichtung zur automatischen Betätigung eines Schließelements eines Fahrzeugs
US20120053794A1 (en) * 2010-08-25 2012-03-01 Gm Global Technology Operations, Inc. Individualizable convenience system for drivers
US8836784B2 (en) * 2010-10-27 2014-09-16 Intellectual Ventures Fund 83 Llc Automotive imaging system for recording exception events
DE102011111600A1 (de) 2011-08-25 2013-02-28 Audi Ag n einer Klappe eines Fahrzeugs und zugehöriges Fahrzeug

Also Published As

Publication number Publication date
JP2019090313A (ja) 2019-06-13
CA2858634C (en) 2021-01-12
CA2858634A1 (en) 2013-06-13
CN104039597A (zh) 2014-09-10
EP2788226A1 (en) 2014-10-15
EP2788226B1 (en) 2021-02-24
US20150005985A1 (en) 2015-01-01
WO2013082725A1 (en) 2013-06-13
JP2015507708A (ja) 2015-03-12
EP2788226A4 (en) 2015-08-19

Similar Documents

Publication Publication Date Title
JP6751173B2 (ja) 自動車用モジュールカメラおよび自動化入口用画像処理システム
US9694764B2 (en) Vehicle electromechanical systems triggering based on image recognition and radio frequency
US9951549B2 (en) Vehicle power systems activation based on structured light detection
EP2928729B1 (en) Vehicle electromechanical systems triggering based on image recognition and radio frequency
US10166995B2 (en) System and method for feature activation via gesture recognition and voice command
CN206954155U (zh) 一种自动控制汽车尾门的装置
US11511756B2 (en) Passenger authentication system for a vehicle
CN108357462B (zh) 车辆解锁的方法及车辆
JP2019090313A5 (ja)
CN109243024B (zh) 一种基于人脸识别的汽车解锁方法
CN106394492A (zh) 车用动态人脸识别安全控制系统及其控制方法
KR101962728B1 (ko) 자동차 트렁크 및 도어 제어 장치
CN107953854A (zh) 一种基于人脸识别的智能车载辅助系统及方法
CN113696853B (zh) 一种基于物联网的智能汽车中央控制系统
CA2894424C (en) Vehicle electromechanical systems triggering based on image recognition and radio frequency
CN110312640B (zh) 车辆监视设备
KR101947040B1 (ko) 테일 게이트 작동 시스템 및 그 방법
JP2009234318A (ja) 車両環境制御システム及び乗車意思検出装置
CN209534994U (zh) 智能车门锁控制装置及包括其的汽车
US20240013600A1 (en) Authentication device and vehicle having the same
CN113859173A (zh) 一种汽车侧门自动开启关闭控制系统
KR100458862B1 (ko) 파킹 자동점검 시스템
CN207550146U (zh) 一种基于人脸识别和汽车钥匙的汽车进入和启动系统
CN219257510U (zh) 汽车尾门的控制装置、汽车尾门及汽车
US20190172273A1 (en) System and method for identifying vehicle operation mode

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190215

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190716

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20200226

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20200228

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200427

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20200715

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20200813

R150 Certificate of patent or registration of utility model

Ref document number: 6751173

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250