WO2017203729A1 - 画像情報照合システム - Google Patents

画像情報照合システム Download PDF

Info

Publication number
WO2017203729A1
WO2017203729A1 PCT/JP2016/075954 JP2016075954W WO2017203729A1 WO 2017203729 A1 WO2017203729 A1 WO 2017203729A1 JP 2016075954 W JP2016075954 W JP 2016075954W WO 2017203729 A1 WO2017203729 A1 WO 2017203729A1
Authority
WO
WIPO (PCT)
Prior art keywords
image information
data
collation
vehicle
storage unit
Prior art date
Application number
PCT/JP2016/075954
Other languages
English (en)
French (fr)
Inventor
幹雄 一瀬
Original Assignee
三井金属アクト株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 三井金属アクト株式会社 filed Critical 三井金属アクト株式会社
Priority to US16/067,048 priority Critical patent/US10796170B2/en
Publication of WO2017203729A1 publication Critical patent/WO2017203729A1/ja

Links

Images

Classifications

    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00Burglar, theft or intruder alarms
    • G08B13/18Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19639Details of the system layout
    • G08B13/19647Systems specially adapted for intrusion detection in or around a vehicle
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R11/00Arrangements for holding or mounting articles, not otherwise provided for
    • B60R11/04Mounting of cameras operative during drive; Arrangement of controls thereof relative to the vehicle
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/22Matching criteria, e.g. proximity measures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/70Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/74Image or video pattern matching; Proximity measures in feature spaces
    • G06V10/75Organisation of the matching processes, e.g. simultaneous or sequential comparisons of image or video features; Coarse-fine approaches, e.g. multi-scale approaches; using context analysis; Selection of dictionaries
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/58Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/103Static body considered as a whole, e.g. static pedestrian or occupant recognition

Definitions

  • the present invention relates to an image information collating system, and more particularly to a collating system using image information obtained from an onboard camera.
  • a system has also been developed that substitutes an on-vehicle camera for vehicle keys (remote control keys, keyless entry transmitters).
  • vehicle keys remote control keys, keyless entry transmitters.
  • JP-A-2006-168553 a person approaching the vehicle is photographed by the on-vehicle camera, and the image information is compared with image information registered in advance in the vehicle and biometric authentication technology, and an image obtained by the on-vehicle camera It discloses that the use of the vehicle is permitted when the information matches the registered image information.
  • Japanese Patent Laid-Open No. 2006-182234 discloses that when an on-vehicle camera is installed on a door mirror and the door mirror is stored by stopping or parking etc, the on-vehicle camera can face the inside of the vehicle and monitor the inside of the vehicle with the camera. There is.
  • Japanese Patent Application Laid-Open No. 2003-058980 the license plate of the host vehicle is monitored by an on-vehicle camera, and when the license plate of the host vehicle is tampered with, detection is made by image (character) recognition technology and notification to the outside A system is disclosed.
  • JP 2011-105058 A discloses that one on-vehicle camera is used for multipurpose applications.
  • In-vehicle cameras are also used as drive recorders that record the traveling state of a vehicle.
  • the on-vehicle camera is used for driving assistance and accident prevention, substitution of a transmitter for owner authentication, crime prevention and surveillance of the own vehicle, etc. Remained in the category of convenience for persons with disabilities.
  • the drive recorder which has recently been increasing in installation rate, exhibits excellent image reproduction (image storage) performance for checking the driving condition in the event of a vehicle accident, but the onboard camera of the drive recorder shoots on a daily basis Most of the image information outside the vehicle is discarded and deleted by overwrite recording and the like without being used.
  • the image information to be discarded or erased without being used includes useful and highly public information, unique unique information, and the like. Therefore, based on the dramatic improvement of image processing capability, rapid development of image analysis technology (biometric technology, character recognition technology), increase in capacity of recording media, speeding up of wireless data communication, etc. It has been desired to develop a system capable of extracting and effectively utilizing useful and highly public information, unique information and other valuable information from the image information in a short time, preferably in real time.
  • An object of the present invention is to provide an image information collating system capable of effectively utilizing image information obtained from an onboard camera for purposes other than the convenience of the vehicle itself on which the onboard camera is mounted.
  • the image information collating system comprises a collating data storage unit in which collating data is stored; An on-vehicle camera for photographing the situation outside the vehicle, a data comparison unit for collating the image information obtained from the on-vehicle camera with the verification data stored in the verification data storage unit by biometrics, character recognition or image recognition And notification means for notifying the comparison result by the comparison unit.
  • the present invention it is possible to obtain specific image information from the situation outside the vehicle photographed by the on-vehicle camera, and to collate the image information with the matching data registered by biometrics, character recognition or image recognition. it can. For this reason, enormous information obtained from the on-vehicle camera can be effectively used.
  • FIG. 1 shows a block diagram of the image information collating system 1.
  • the image information collating system 1 has one or more in-vehicle cameras A, B, C. Image data taken by the on-vehicle cameras A, B, and C is taken into the data storage unit 11 mounted on the vehicle.
  • the on-vehicle cameras A, B, and C are cameras for shooting outside the vehicle.
  • In-vehicle cameras A, B and C are mainly used separately, such as in-vehicle cameras used for automatic brake systems and automatic driving systems of vehicles, in-vehicle cameras for back monitors, and in-vehicle cameras for obstacle detection when opening and closing doors. It is desirable to use it as a camera having a purpose, and it may be a general-purpose camera. Alternatively, an infrared camera may be used that enables shooting in the dark at night.
  • the on-vehicle camera A, B, C continuously shoots the situation outside the vehicle regardless of whether the vehicle is running or stopped, and the image information is stored in the data storage unit 11 as authentication data under the control of the on-vehicle control unit 10. It is input and memorized.
  • the installation positions of the on-vehicle cameras A, B, and C are not particularly limited, and may be a door mirror, a side surface of the vehicle, or the like other than the vehicle front and the vehicle rear.
  • the image information stored in the data storage unit 11, that is, the authentication data, is analyzed by the authentication information processing unit 12 by biometric authentication, character recognition or image recognition technology.
  • the image information to be analyzed is not limited to the one while the vehicle is stopped, and the image information taken during traveling may be the target of data analysis according to its definition.
  • the authentication data has a considerably smaller capacity than the original image information from the on-vehicle cameras A, B, and C.
  • the present invention can utilize any type of biometric, character recognition or image recognition technology.
  • the authentication step that is, the authentication method or the work procedure may differ greatly.
  • data analysis performed by the authentication information processing unit 12 generally means feature point generation such as "eyes”, “nose”, “mouth end” and the like.
  • Verification data is registered in the verification data storage unit 13 of the image information verification system 1.
  • the authentication data generated by the authentication information processing unit 12 is compared with the verification data registered in the verification data storage unit 13 by the data comparison unit 14 and is biometrically authenticated. Although it is desirable to register the verification data in advance, post-registration is also possible as described later.
  • the original image information from the in-vehicle cameras A, B, C can be directly compared with the data for verification, in which case the generation of the data for authentication can be omitted.
  • collation data storage unit 13 what kind of collation data is registered in the collation data storage unit 13 is a major feature.
  • data of a person who is at risk of pressure sore due to dementia (hereinafter, referred to as a pressure sore danger person) is an example of preferable data for matching.
  • the user travels the living area of the dangerous person well, or the image data of the dangerous person is verified in the biometric data in the verification data storage unit 13 of the vehicle having a parking space in the same living area. If registered as data for use, there is a high possibility that the on-vehicle camera A, B, C of the vehicle can safely protect the bearded person.
  • the verification data of the dangerous person is digitized by an offer from a family and registered in the verification data storage unit 13.
  • digital photo data of the person can be used.
  • the living information of the person is linked to such verification data, and registered in the related information storage unit 15.
  • the living information is the address, name, contact information, notification level, etc. of the person.
  • the notification level is a parameter that defines the necessity of notification when a match is found by biometrics. When the notification level is set low (for example, level 1), the notification level is set high only by continuously recording information such as the location where the person is found and the discovery time in the related information storage unit 15. When it is (for example, level 2), emergency contact etc. will be made immediately by discovery.
  • the notification level can be changed by communication from a family member (preferably, operation from a communication terminal).
  • the image information collating system 1 is preferably mounted on a vehicle of a public organization (police vehicle) or a taxi vehicle closely attached to the area. It is also desirable to mount it on vehicles such as By mounting on these vehicles, a great public benefit effect can be expected.
  • the verification data can be read and registered directly from a storage medium such as a CDROM or USB memory via the storage medium interface 16 or registered by data communication via the communication device 17 such as the Internet or a dedicated wireless circuit. .
  • the verification result indicates that they match.
  • the parties registered in advance are notified together with the information such as the date and time and the place.
  • Information on the persons concerned is registered in the related information storage unit 15.
  • the related information storage unit 15 has an address storage unit 15 'that stores the e-mail address of the related party, and the e-mail address of the related party is stored in advance in the address storage unit 15'.
  • the collation data storage unit 13 for recording the collation data of the searchee is like an external crime prevention center.
  • the image information from the on-vehicle cameras A, B and C can be transmitted to the outside crime prevention center via the communication device 17 with high definition image quality as appropriate. It is also possible to perform biometric authentication at the crime prevention center based on the transmitted image information.
  • verification data to be registered in the verification data storage unit 13 examples include verification data for wanted criminals and fugitives, verification data for stolen vehicles, license plates of vehicles that may be related to crime, The data for collation of an infant, an infant, a schoolchild, etc. can be illustrated. Data for reconciliation of wanted criminals, fugitives and vehicles that may be related to a crime will usually be provided by law enforcement agencies. In this case, the parties concerned include not only family members and parents but also law enforcement officials.
  • the license plate of the vehicle can be collated by character recognition, collated by image recognition, or both of them can be used in combination.
  • the license plates of the front and rear vehicles (when the back camera is mounted) traveling in the same direction as the vehicle equipped with the on-vehicle camera but also the license plates of vehicles traveling in the opposite direction can be checked.
  • the storage capacity of the recording medium has dramatically increased, and even when the data storage unit 11 is installed in a vehicle, it is possible to save a considerably long time of image recording.
  • the data storage unit 11 is arranged at the disaster prevention center, it can be recorded virtually infinitely. For this reason, even when the verification data is registered afterward, the verification data registered after the verification is compared at high speed with the stored image information and biometric authentication technology, and valuable data with high utility value can be quickly identified. You can expect to get to.
  • the collation result can be notified not only to the outside but also to the vehicle itself (for example, a police vehicle) on which the on-vehicle cameras A, B, and C are mounted.
  • the image information collating system 1 includes the receiver 18 mounted on the vehicle, and when the image information obtained by the on-vehicle cameras A, B and C matches the collation data, the collation result is notified to the receiver 18 Be done.
  • the receiving unit 18 may be a device such as a display unit, a light, a speaker, or a buzzer installed in a car, which generates a display, a sound, a voice or the like that can be recognized by the driver or the passenger.
  • the image information obtained from the on-vehicle camera is automatically checked It is checked against the data.
  • an on-vehicle camera A, B, or C is equipped with an infrared camera capable of photographing in a dark place, the image information obtained from the on-vehicle camera is automatically compared with the verification data even at night or in a dark place. It is collated.
  • SYMBOLS 1 Image information collation system, 10 ... Vehicle-mounted control part, 11 ... Data storage part, 12 ... Authentication information processing part, 13 ... Data storage part for collation, 14 ... Data comparison part, 15 ... Related information storage part, 16 ... Recording Medium interface 17 communication device 18 reception unit A, B, C in-vehicle camera

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Multimedia (AREA)
  • Data Mining & Analysis (AREA)
  • Artificial Intelligence (AREA)
  • Evolutionary Computation (AREA)
  • Computing Systems (AREA)
  • Evolutionary Biology (AREA)
  • Software Systems (AREA)
  • General Health & Medical Sciences (AREA)
  • Databases & Information Systems (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Medical Informatics (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Mechanical Engineering (AREA)
  • Alarm Systems (AREA)
  • Traffic Control Systems (AREA)
  • Image Processing (AREA)
  • Image Analysis (AREA)

Abstract

車載カメラから得られる画像情報を、車載カメラが搭載される車両自体の便宜以外の目的に有効活用することができる画像情報照合システムを提供する。 画像情報照合システム1は、照合用データが記憶される照合用データ記憶部13と、車外状況を撮影する車載カメラA,B,Cと、車載カメラA,B,Cから得られた画像情報を、生体認証、文字認識または画像認識によって、照合用データ記憶部13に記憶された照合用データと照合するデータ比較部14と、データ比較部14による照合結果を通知する通知手段17と、を有する。

Description

画像情報照合システム
 本発明は、画像情報照合システムに関し、特に、車載カメラから得られる画像情報を用いた照合システムに関する。
 近年の車両には多種多様なカメラが搭載され、その画像情報は自動ブレーキシステムや、自動運転システム等に利用され、あるいは車両ドアを開ける際にドア周辺に支障となる障害物が存在しないかを検知する安全システムに利用されている(特開2007-153193号公報)。これらに利用される車載カメラは運転者の死角となる可能性のある車両の様々な部位に設置され、その画像情報は主に、運転補助や事故削減を目的としたシステムに利用されている。
 車載カメラを車両のキー(リモコンキー、キーレスエントリの発信器)の代用にするシステムも開発されている。特開2006-168553号公報には、車両に接近する人を車載カメラで撮影し、その画像情報を予め車両に登録された画像情報と生体認証技術により比較照合し、車載カメラで得られた画像情報が登録された画像情報と一致したときは当該車両の使用を許可することを開示している。
 車載カメラを防犯用や監視用に用いるシステムも提案されている。特開2006-182234号公報には、ドアミラーに車載カメラを設置し、停車または駐車等によりドアミラーを格納させると、車載カメラが車内を向き、車内をカメラで監視できるようにすることが開示されている。特開2003-058980号公報には、自車両のナンバープレートを車載カメラで監視して、自車両のナンバープレートに不正が行われたときは画像(文字)認識技術により検知して外部に通報するシステムが開示されている。
 特開2011-105058号公報には、1つの車載カメラを多目的用途に利用することが開示されている。
 車載カメラは車両の走行状態を記録するドライブレコーダーにも利用されている。
 上記特許文献に開示された発明では、車載カメラは、運転補助や事故防止、所有者認証用の発信器の代用、自車両の防犯や監視等に利用されているが、その利用は、車両所有者の利便性の範疇に留まっていた。
 また、近年搭載率が激増しているドライブレコーダーは、車両事故発生の際に、走行状態の確認に優れた映像再生(画像保存)性能を発揮するが、ドライブレコーダーの車載カメラが日常的に撮影している車外の画像情報の殆どは、利用されることなく、上書き録画等により破棄、消去されている。
 しかしながら、利用されることなく破棄、消去される画像情報には、有益で公共性の高い情報、唯一無二の貴重な情報等が含まれていることが当然予想される。このため、画像処理能力の飛躍的な向上、画像解析技術(生体認証技術、文字認識技術)の急激な発展、記録媒体の大容量化、無線データ通信の高速化等を踏まえ、車載カメラで撮影した画像情報から有益で公共性の高い情報、唯一無二の貴重な情報等を短時間で、好ましくはリアルタイムで抽出して有効活用できるシステム開発が望まれてきた。
 本発明は車載カメラから得られる画像情報を、車載カメラが搭載される車両自体の便宜以外の目的に有効活用することができる画像情報照合システムを提供することを目的とする。
 本発明の画像情報照合システムは、照合用データが記憶される照合用データ記憶部と、
 車外状況を撮影する車載カメラと、車載カメラから得られた画像情報を、生体認証、文字認識または画像認識によって、照合用データ記憶部に記憶された照合用データと照合するデータ比較部と、データ比較部による照合結果を通知する通知手段と、を有する。
 本発明によれば、車載カメラで撮影された車外の状況から特定の画像情報を得て、この画像情報を、生体認証、文字認識または画像認識によって、登録された照合用データと照合することができる。このため、車載カメラから得られる莫大な情報を有効活用することができる。
本発明による画像情報照合システムのブロック図である。
 本発明による画像情報照合システムの実施形態について、図を参照して説明する。図1は、画像情報照合システム1のブロック図を示している。画像情報照合システム1は1台若しくは複数の車載カメラA、B、Cを有している。車両に搭載されるデータ記憶部11には、車載カメラA、B、Cで撮影された画像情報が取り込まれるようになっている。
 車載カメラA、B、Cは車外撮影用のカメラである。車載カメラA、B、Cは、車両の自動ブレーキシステムや自動運転システムに使用される車載カメラ、バックモニター用車載カメラ、ドア開閉時の障害物検知用の車載カメラ等のように、別に主たる利用目的を備えたカメラと兼用して利用することが望ましく、汎用のカメラであってよい。あるいは、夜間、暗所での撮影を可能にする赤外線カメラを用いてもよい。車載カメラA、B、Cにより、車外の状況は車両の走行中、停止中を問わず継続的に撮影され、その画像情報は車載制御部10の制御によって、データ記憶部11に認証用データとして入力され記憶される。車載カメラA,B,Cの設置位置は特に限定されず、車両前部、車両後部の他、ドアミラー、車両の側面などであってもよい。
 データ記憶部11に記憶された画像情報、すなわち認証用データは、認証情報処理部12により、生体認証、文字認識または画像認識技術によって解析される。解析される画像情報は、車両停止中のものに限らず、走行中に撮影した画像情報もその精細度に応じてデータ解析の対象となり得る。一般的に、認証用データは、車載カメラA、B、Cからの元画像情報より相当に容量が小さくなる。
 本願発明は、あらゆる種類の生体認証、文字認識または画像認識技術を利用することができる。このため、生体認証、文字認識または画像認識技術の種類によっては、認証のステップ、つまり、認証方法や作業手順に大きな違いが出る。しかし、認証情報処理部12が行うデータ解析は、例えば生体認証の場合、一般的には「目」「鼻」「口端」等の特徴点生成等を意味する。以下、生体認証を用いた例を説明する。
 画像情報照合システム1の照合用データ記憶部13には照合用データが登録される。認証情報処理部12が生成した認証用データは、データ比較部14により照合用データ記憶部13に登録された照合用データと比較され、生体認証される。照合用データは予め登録することが望ましいが、後述するように、事後登録も可能である。生体認証技術の種類によっては、車載カメラA、B、Cからの元画像情報と照合用データとを直接比較することができ、その場合、認証用データの生成を省略することができる。
 本発明では、照合用データ記憶部13にどのような照合用データを登録するかが大きな特徴となる。例えば、認知症により徘徊の危険がある人物(以下、徘徊危険者という)のデータが好ましい照合用データの一例である。徘徊危険者を対象とした場合、徘徊危険者の生活圏をよく走行したり、同生活圏に駐車スペースがある車両の照合用データ記憶部13に、徘徊危険者の画像情報を生体認証の照合用データとして登録すれば、当該車両の車載カメラA、B、Cにより徘徊危険者を無事保護できる可能性が高くなる。
 徘徊危険者の照合用データは、家族からの申し出によりデータ化され照合用データ記憶部13に登録されるのが望ましい。通常は、当該人物のデジタル写真データを使用できる。このような照合用データには、当該人物の生活情報が紐付けされ、関連情報記憶部15に登録される。生活情報とは、当該人物の住所、氏名、連絡先、通知レベル等である。通知レベルとは、生体認証により照合一致者が発見された際の通知の要否を規定するパラメータである。通知レベルが低く設定されたときは(例えば、レベル1)、当該人物の発見場所、発見時間等の情報を関連情報記憶部15に継続的に記録するだけに留め、通知レベルが高く設定されたときは(例えば、レベル2)、発見により直ちに緊急連絡等を行う。通知レベルは家族からの連絡(好適には通信端末から操作)により変更可能である。
 上記認知症ケースでは、画像情報照合システム1を搭載する車両の台数が多くなるほど徘徊危険者を発見できる可能性が高くなる。従って、個人データの保護を考慮し、画像情報照合システム1は、公的機関の車両(警察車両)や、その地域に密着したタクシー車両に搭載することが望ましく、徘徊との関連性において介護施設の車両等に搭載することも望ましい。これらの車両に搭載することで大きな公益的効果が期待できる。
 照合用データは、記録媒体インターフェース16を介してCDROM、USBメモリ等の記憶メディアから直接データを読み込み登録するか、インターネット、専用無線回線等の通信装置17を介してデータ通信により登録することができる。
 上記のように、認証情報処理部12が生成した認証用データが、照合用データ記憶部13に登録された照合用データと一致した場合(生体認証された場合)には、一致したという照合結果が、通信装置17(通知手段)を介して、予め登録された関係者に、日時や場所等の情報と共に通報される。関係者に関する情報は関連情報記憶部15に登録される。関連情報記憶部15は関係者の電子メールアドレスを記憶するアドレス記憶部15’を有しており、関係者の電子メールアドレスが予めアドレス記憶部15’に記憶される。
 以上の実施形態においては、画像情報照合システム1のほぼ全ての機能が車両に搭載されているが、被捜索者の照合用データを記録する照合用データ記憶部13は、外部の防犯センターのような部門に設置し、データのクラウド管理を行うこともできる。また、データ通信の高速化(1Gbps、高速光ケーブル相当)により、車載カメラA,B,Cからの画像情報は適宜、通信装置17を介して外部の防犯センターに高精細画質で送信可能であり、送信された画像情報に基づいて、防犯センターにおいて生体認証を行うことも可能である。これらの問題は、画像処理能力等のハードウエア上の問題およびデータ管理のセキュリティ的問題として扱われる事柄である。
 照合用データ記憶部13に登録する照合用データの他例としては、指名手配犯、逃亡犯の照合用データや、盗難車両、犯罪に関連する可能性のある車両のナンバープレートの照合用データや、幼児、学童の照合用データ等を例示できる。指名手配犯、逃亡犯の照合用データ、犯罪に関連する可能性のある車両の照合用データは、通常捜査当局から提供されることになる。この場合、関係者とは、家族、保護者等に加えて、捜査当局者も含まれることになる。車両のナンバープレートについては、文字認識で照合することもできるし、画像認識で照合することもできるし、両者を併用することもできる。車載カメラの搭載車両と同じ方向に走行する前方および後方の車両(バックカメラが搭載されている場合)のナンバープレートだけでなく、反対方向に走行する車両のナンバープレートを照合することもできる。また、車両自体の型式(車種)、色を照合用データとして登録することもできる。この方法は、車両自体の型式と色の少なくともいずれかが判明しているが、車両ナンバーが不明の場合に特に有用である。ナンバープレートと車両の型式、色を全て照合データとして登録し、これらの一部または全てを照合に用いることも可能である。
 例えば、地方、過疎地における幼児、学童の位置情報の確認は携帯用GPSに頼ることが多いが、万一、携帯用GPSが使用不能になった場合には、定点カメラの映像から特定の人物を人海戦術で探すことになり、迅速な対応が難しくなる。本システムを用いれば、予め照合用データが登録されていれば、常時照合が行われ、継続的に位置情報の確認及び保存が可能となり、関係者からの要請に応じて即座に的確な情報を提供できる。
 照合用データはデータ記憶部11に事後登録することも可能である。記録媒体の記憶容量は飛躍的に増大しており、データ記憶部11を車両に設置した場合であっても、相当な長時間の画像記録を保存可能となる。また、データ記憶部11を防災センターに配置した場合には、事実上無限に記録できることになる。このため、照合用データを事後登録したときにおいても、事後登録された照合用データを、保存された画像情報と生体認証技術で高速で比較照合し、有用で公益性の高い貴重なデータを速やかに入手することが期待できる。
 照合結果は外部に通報するだけでなく、車載カメラA,B,Cが搭載されている車両自体(例えば警察車両)に通知することもできる。この場合、画像情報照合システム1は車両に搭載された受信部18を備え、車載カメラA,B,Cで得られた画像情報が照合用データと一致したとき、受信部18に照合結果が通知される。受信部18は車内に設置された表示部、ライト、スピーカー、ブザーなど、運転者または同乗者が認識できる表示、音、音声などを発生させる装置であればよい。車両の走行中は、運転者や同乗者が車外の人や車を正確に目視確認できない可能性があるが、その場合であっても、車載カメラから得られた画像情報が自動的に照合用データと照合される。車載カメラA,B,Cとして暗所撮影が可能な赤外線カメラなどが搭載されている場合は、夜間や暗所であっても、車載カメラから得られた画像情報が自動的に照合用データと照合される。
1…画像情報照合システム、10…車載制御部、11…データ記憶部、12…認証情報処理部、13…照合用データ記憶部、14…データ比較部、15…関連情報記憶部、16…記録媒体インターフェース、17…通信装置、18…受信部、A、B、C…車載カメラ

Claims (11)

  1.  照合用データが記憶される照合用データ記憶部と、
     車外状況を撮影する車載カメラと、
     前記車載カメラから得られた画像情報を、生体認証、文字認識または画像認識によって、前記照合用データ記憶部に記憶された前記照合用データと照合するデータ比較部と、
     前記データ比較部による照合結果を通知する通知手段と、を有する画像情報照合システム。
  2.  前記照合結果が通知されるアドレスが記憶されるアドレス記憶部を有し、
     前記通知手段は、前記画像情報が前記照合用データと一致したとき、前記アドレス記憶部に記憶された前記アドレスに前記照合結果を通知する、請求項1に記載の画像情報照合システム。
  3.  前記車載カメラと同じ車両に搭載され、前記データ比較部による照合結果を受信する受信部を有し、
     前記通知手段は、前記画像情報が前記照合用データと一致したとき、前記受信部に前記照合結果を通知する、請求項1に記載の画像情報照合システム。
  4.  前記照合結果の通知の要否を規定する通知レベルを記憶する関連情報記憶部を有し、前記通知手段は、前記通知レベルが通知要に対応するレベルである場合に前記照合結果を通知する、請求項1から3のいずれか1項に記載の画像情報照合システム。
  5.  前記通知レベルが通報不要に対応するレベルである場合に、前記関連情報記憶部は前記照合結果を継続的に記録する、請求項4に記載の画像情報照合システム。
  6.  前記車載カメラから得られた画像情報を認証用データとして記憶するデータ記憶部を備え、前記データ比較部は、前記データ記憶部に記憶された前記認証用データを、生体認証、文字認識または画像認識によって、前記照合用データ記憶部に新規に登録された照合用データと照合する、請求項1から5のいずれか1項に記載の画像情報照合システム。
  7.  前記照合用データは、徘徊者の画像情報である、請求項1から6のいずれか1項に記載の画像情報照合システム。
  8.  前記照合用データは、捜査当局から提供された画像情報である、請求項1から6のいずれか1項に記載の画像情報照合システム。
  9.  前記照合用データは、幼児または学童の画像情報である、請求項1から6のいずれか1項に記載の画像情報照合システム。
  10.  前記照合用データは、車両のナンバープレートの文字情報または画像情報である、請求項1から6のいずれか1項に記載の画像情報照合システム。
  11.  前記照合用データは、車両の画像情報である、請求項1から6のいずれか1項に記載の画像情報照合システム。
     
PCT/JP2016/075954 2016-05-27 2016-09-05 画像情報照合システム WO2017203729A1 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US16/067,048 US10796170B2 (en) 2016-05-27 2016-09-05 Image information comparison system

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2016105712A JP6583688B2 (ja) 2016-05-27 2016-05-27 画像情報認証システム
JP2016-105712 2016-05-27

Publications (1)

Publication Number Publication Date
WO2017203729A1 true WO2017203729A1 (ja) 2017-11-30

Family

ID=60412208

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2016/075954 WO2017203729A1 (ja) 2016-05-27 2016-09-05 画像情報照合システム

Country Status (3)

Country Link
US (1) US10796170B2 (ja)
JP (1) JP6583688B2 (ja)
WO (1) WO2017203729A1 (ja)

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7210872B2 (ja) * 2017-07-19 2023-01-24 富士フイルムビジネスイノベーション株式会社 画像処理装置及び画像処理プログラム
US10880293B2 (en) * 2017-08-25 2020-12-29 Ford Global Technologies, Llc Authentication of vehicle-to-vehicle communications
JP7111531B2 (ja) * 2018-07-02 2022-08-02 矢崎エナジーシステム株式会社 救済システム
JP7182121B2 (ja) * 2018-07-03 2022-12-02 矢崎エナジーシステム株式会社 画像収集システム
JP6929823B2 (ja) * 2018-11-16 2021-09-01 株式会社東芝 読取システム、読取方法、プログラム、記憶媒体、及び移動体
JP7151449B2 (ja) 2018-12-14 2022-10-12 トヨタ自動車株式会社 情報処理システム、プログラム、及び情報処理方法
JP6946605B2 (ja) * 2018-12-27 2021-10-06 三井金属アクト株式会社 ドア自動開閉システム
JP7141979B2 (ja) * 2019-04-24 2022-09-26 京セラ株式会社 徘徊者連れ帰りシステム、サーバー及びプログラム
JP7363838B2 (ja) * 2021-03-02 2023-10-18 トヨタ自動車株式会社 異常挙動通知装置、異常挙動通知システム、異常挙動通知方法、およびプログラム
WO2023203739A1 (ja) * 2022-04-22 2023-10-26 三菱電機株式会社 乗員状態通知装置、乗員検知装置、および、乗員状態通知方法

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11296785A (ja) * 1998-04-14 1999-10-29 Matsushita Electric Ind Co Ltd 車両ナンバー認識システム
JP2013042402A (ja) * 2011-08-18 2013-02-28 Seiko Epson Corp 車載カメラ制御装置、車載カメラ制御システム及び車載カメラシステム
WO2013099489A1 (ja) * 2011-12-28 2013-07-04 日産自動車株式会社 監視システム

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7167796B2 (en) * 2000-03-09 2007-01-23 Donnelly Corporation Vehicle navigation system for use with a telematics system
JP2001266131A (ja) * 2000-03-23 2001-09-28 Minolta Co Ltd 監視システム
JP2003162611A (ja) * 2001-07-24 2003-06-06 M Soft:Kk 携帯情報機器による地域社会活性化方法
JP4119106B2 (ja) 2001-08-10 2008-07-16 松下電器産業株式会社 車載機
US20030041329A1 (en) * 2001-08-24 2003-02-27 Kevin Bassett Automobile camera system
US7369685B2 (en) * 2002-04-05 2008-05-06 Identix Corporation Vision-based operating method and system
CA2525690C (en) * 2002-07-05 2014-12-02 Aspectus Ltd. A method and system for effectively performing event detection in a large number of concurrent image sequences
JP2006059185A (ja) * 2004-08-20 2006-03-02 Rise Corp データ管理システム及び方法
JP4161963B2 (ja) 2004-12-16 2008-10-08 トヨタ自動車株式会社 画像情報認証システム
JP2006182234A (ja) 2004-12-28 2006-07-13 Nissan Motor Co Ltd 車載カメラシステム、撮影方法及びドアミラー
JP2007153193A (ja) 2005-12-07 2007-06-21 Nissan Motor Co Ltd 車両用ドア開閉制御装置
US20070139182A1 (en) * 2005-12-19 2007-06-21 O'connor Jay D Emergency communications for the mobile environment
JP2008140128A (ja) * 2006-12-01 2008-06-19 Denso Corp 車両検出装置
JP5360491B2 (ja) 2009-11-13 2013-12-04 アイシン精機株式会社 多機能カメラシステム
US8989699B2 (en) * 2010-07-27 2015-03-24 Ford Global Technologies, Llc Methods and apparatus for selective emergency alert notification and response
US20140347440A1 (en) * 2013-05-23 2014-11-27 Sylvester Hatcher Omnidirectional Vehicle Camera System
AU2016262874A1 (en) * 2015-05-21 2017-12-07 Facewatch Limited Systems, methods, and devices for information sharing and matching

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11296785A (ja) * 1998-04-14 1999-10-29 Matsushita Electric Ind Co Ltd 車両ナンバー認識システム
JP2013042402A (ja) * 2011-08-18 2013-02-28 Seiko Epson Corp 車載カメラ制御装置、車載カメラ制御システム及び車載カメラシステム
WO2013099489A1 (ja) * 2011-12-28 2013-07-04 日産自動車株式会社 監視システム

Also Published As

Publication number Publication date
US20190073543A1 (en) 2019-03-07
JP6583688B2 (ja) 2019-10-02
US10796170B2 (en) 2020-10-06
JP2017211888A (ja) 2017-11-30

Similar Documents

Publication Publication Date Title
WO2017203729A1 (ja) 画像情報照合システム
US9679210B2 (en) Using passive driver identification and other input for providing real-time alerts or actions
US11210873B2 (en) Safety for vehicle users
US10654448B2 (en) Vehicle security system
CN105459954B (zh) 一种汽车报警方法及装置
US9162606B2 (en) Multi-vehicle surveillance system
US20170076396A1 (en) Monitoring system and method
CN111532239A (zh) 用于车辆保护的方法和系统
JP2007094935A (ja) 情報処理装置および情報処理方法、情報処理システム、プログラム、並びに、記録媒体
WO2005050583A1 (fr) Systeme d'alarme pour protection d'automobiles avec identification de visage et fonction de communication sans fil
US11590898B2 (en) Smart vault with security system affix to rear or front of license plate location outside any vehicle to enable remote access to cars
US20180070060A1 (en) In-car digital video system with integrated alpr
CN111409550A (zh) 车辆监控方法、车载终端及计算机可读存储介质
CN113205056B (zh) 一种基于公共安全问题的主动图像识别预警系统及其处理方法
JP2007186144A (ja) 車両の盗難防止システム
JP3853764B2 (ja) 車両盗難対応装置,車両盗難対応システム,方法およびプログラム
Bhojane et al. Face recognition based car ignition and security system
US20220212631A1 (en) Monitoring system, monitoring center device, mounting device, monitoring method, processing method, and program
CN105957346A (zh) 一种车辆驾驶联网安全控制方法
WO2015172498A1 (zh) 隐蔽式人脸识别监控装置
JP2007107377A (ja) 車載機器制御システム及び車載機器制御装置
TWI397028B (zh) Vehicle internal safety warning method and its system
FR2837444A1 (fr) Systeme de controle pour la surveillance a bord d'un vehicule, base sur la reprise d'images biometriques
CN201281872Y (zh) 用于运输装置的视频监控系统
US10093236B2 (en) Apparatus and method for safeguarding vehicles

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 16903208

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 16903208

Country of ref document: EP

Kind code of ref document: A1