JP2020010319A - 車両制御システム用非可逆データ圧縮器 - Google Patents

車両制御システム用非可逆データ圧縮器 Download PDF

Info

Publication number
JP2020010319A
JP2020010319A JP2019100303A JP2019100303A JP2020010319A JP 2020010319 A JP2020010319 A JP 2020010319A JP 2019100303 A JP2019100303 A JP 2019100303A JP 2019100303 A JP2019100303 A JP 2019100303A JP 2020010319 A JP2020010319 A JP 2020010319A
Authority
JP
Japan
Prior art keywords
manifold
vehicle
data
data compressor
distance
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2019100303A
Other languages
English (en)
Other versions
JP7326028B2 (ja
Inventor
マルチェッロ カリオーニ
Carioni Marcello
マルチェッロ カリオーニ
パトリーニ ジョルジオ
Patrini Giorgio
パトリーニ ジョルジオ
ウェリング マックス
Welling Max
ウェリング マックス
フォーレ パトリック
Forre Patrick
フォーレ パトリック
ゲーネヴァイン ティム
Genewein Tim
ゲーネヴァイン ティム
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Robert Bosch GmbH
Original Assignee
Robert Bosch GmbH
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Robert Bosch GmbH filed Critical Robert Bosch GmbH
Publication of JP2020010319A publication Critical patent/JP2020010319A/ja
Application granted granted Critical
Publication of JP7326028B2 publication Critical patent/JP7326028B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F8/00Arrangements for software engineering
    • G06F8/60Software deployment
    • G06F8/65Updates
    • HELECTRICITY
    • H03ELECTRONIC CIRCUITRY
    • H03MCODING; DECODING; CODE CONVERSION IN GENERAL
    • H03M7/00Conversion of a code where information is represented by a given sequence or number of digits to a code where the same, similar or subset of information is represented by a different sequence or number of digits
    • H03M7/30Compression; Expansion; Suppression of unnecessary data, e.g. redundancy reduction
    • H03M7/3059Digital compression and data reduction techniques where the original information is represented by a subset or similar information, e.g. lossy compression
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F17/00Digital computing or data processing equipment or methods, specially adapted for specific functions
    • G06F17/10Complex mathematical operations
    • G06F17/11Complex mathematical operations for solving equations, e.g. nonlinear equations, general mathematical optimization problems
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W10/00Conjoint control of vehicle sub-units of different type or different function
    • B60W10/04Conjoint control of vehicle sub-units of different type or different function including control of propulsion units
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W10/00Conjoint control of vehicle sub-units of different type or different function
    • B60W10/18Conjoint control of vehicle sub-units of different type or different function including control of braking systems
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W10/00Conjoint control of vehicle sub-units of different type or different function
    • B60W10/20Conjoint control of vehicle sub-units of different type or different function including control of steering systems
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/08Active safety systems predicting or avoiding probable or impending collision or attempting to minimise its consequences
    • B60W30/09Taking automatic action to avoid collision, e.g. braking and steering
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/02Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/0098Details of control systems ensuring comfort, safety or stability not otherwise provided for
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/21Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
    • G06F18/213Feature extraction, e.g. by transforming the feature space; Summarisation; Mappings, e.g. subspace methods
    • G06F18/2137Feature extraction, e.g. by transforming the feature space; Summarisation; Mappings, e.g. subspace methods based on criteria of topology preservation, e.g. multidimensional scaling or self-organising maps
    • G06F18/21375Feature extraction, e.g. by transforming the feature space; Summarisation; Mappings, e.g. subspace methods based on criteria of topology preservation, e.g. multidimensional scaling or self-organising maps involving differential geometry, e.g. embedding of pattern manifold
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N20/00Machine learning
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/04Architecture, e.g. interconnection topology
    • G06N3/045Combinations of networks
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/70Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/77Processing image or video features in feature spaces; using data integration or data reduction, e.g. principal component analysis [PCA] or independent component analysis [ICA] or self-organising maps [SOM]; Blind source separation
    • G06V10/7715Feature extraction, e.g. by transforming the feature space, e.g. multi-dimensional scaling [MDS]; Mappings, e.g. subspace methods
    • HELECTRICITY
    • H03ELECTRONIC CIRCUITRY
    • H03MCODING; DECODING; CODE CONVERSION IN GENERAL
    • H03M7/00Conversion of a code where information is represented by a given sequence or number of digits to a code where the same, similar or subset of information is represented by a different sequence or number of digits
    • H03M7/30Compression; Expansion; Suppression of unnecessary data, e.g. redundancy reduction
    • H03M7/3082Vector coding
    • HELECTRICITY
    • H03ELECTRONIC CIRCUITRY
    • H03MCODING; DECODING; CODE CONVERSION IN GENERAL
    • H03M7/00Conversion of a code where information is represented by a given sequence or number of digits to a code where the same, similar or subset of information is represented by a different sequence or number of digits
    • H03M7/30Compression; Expansion; Suppression of unnecessary data, e.g. redundancy reduction
    • H03M7/60General implementation details not specific to a particular type of compression
    • H03M7/6017Methods or arrangements to increase the throughput
    • HELECTRICITY
    • H03ELECTRONIC CIRCUITRY
    • H03MCODING; DECODING; CODE CONVERSION IN GENERAL
    • H03M7/00Conversion of a code where information is represented by a given sequence or number of digits to a code where the same, similar or subset of information is represented by a different sequence or number of digits
    • H03M7/30Compression; Expansion; Suppression of unnecessary data, e.g. redundancy reduction
    • H03M7/70Type of the data to be coded, other than image and sound
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/182Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a pixel
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/91Entropy coding, e.g. variable length coding [VLC] or arithmetic coding
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/143Alarm means
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2420/00Indexing codes relating to the type of sensors based on the principle of their operation
    • B60W2420/40Photo, light or radio wave sensitive means, e.g. infrared sensors
    • B60W2420/403Image sensing, e.g. optical camera
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60YINDEXING SCHEME RELATING TO ASPECTS CROSS-CUTTING VEHICLE TECHNOLOGY
    • B60Y2400/00Special features of vehicle units
    • B60Y2400/81Braking systems
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems
    • G08G1/165Anti-collision systems for passive traffic, e.g. including static obstacles, trees
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems
    • G08G1/166Anti-collision systems for active traffic, e.g. moving vehicles, pedestrians, bikes

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)
  • Mechanical Engineering (AREA)
  • Transportation (AREA)
  • Software Systems (AREA)
  • Mathematical Physics (AREA)
  • Data Mining & Analysis (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Multimedia (AREA)
  • Evolutionary Computation (AREA)
  • Artificial Intelligence (AREA)
  • Signal Processing (AREA)
  • Combustion & Propulsion (AREA)
  • Chemical & Material Sciences (AREA)
  • Computing Systems (AREA)
  • Databases & Information Systems (AREA)
  • Pure & Applied Mathematics (AREA)
  • Mathematical Optimization (AREA)
  • Mathematical Analysis (AREA)
  • Computational Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Medical Informatics (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Operations Research (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Algebra (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Molecular Biology (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Evolutionary Biology (AREA)
  • Biophysics (AREA)
  • Computational Linguistics (AREA)
  • Computer Security & Cryptography (AREA)
  • Biomedical Technology (AREA)
  • Image Analysis (AREA)

Abstract

【課題】物理的測定データ用の非可逆データ圧縮器を提供する。【解決手段】非可逆データ圧縮器1は、パラメータ化されたマッピングネットワーク2を有し、このマッピングネットワーク2は、空間X内にある測定データ点xに適用されると、より低い次元の多様体Zにおける点zを形成し、Zにおける点zを出力として供給するように設定されている。多様体Zは、超曲面上の任意の2点間に完全連続パスだけを許容する連続超曲面であり、マッピングネットワーク2のパラメータθは、目的に向かってトレーニング可能であり、この目的は、多様体Zにおいて、与えられた距離測度に従って、与えられた先行の分布PZと分布PQとの間の距離を最小化することを含む。分布PQは、マッピングネットワーク2を使用して、物理的測定データ3から成る与えられたトレーニング集合PDを、空間Xから多様体Zにマッピングすることによって多様体Zに誘導される。【選択図】図1

Description

本発明は、少なくとも部分的に自動化された車両によって、物体の存在又は状況について評価されるべき物理的測定データに特に適した非可逆データ圧縮器に関する。
背景技術
車両を運転する際、人間のドライバは、自身の目を使用して多量の情報を捕捉して、目に見えた物体の分類を行う。例えば、ドライバは、車線境界線、交通標識、他の車両及び歩行者を認識し、車両の手動制御について適切な行動を開始する。
交通において、少なくとも部分的に自動的に移動する車両について、車両の周囲環境からセンサによって捕捉された物理的測定データから物体及び状況を分類する機能が必要である。
欧州特許第1752362号明細書(EP1752362B1)には、テープに従って車線境界線を分類し、この境界線を横断する可能性と、また、そのような横断に関連付けられた潜在的な危険とを評価する、車両用の車線維持アシスタンスシステムが開示されている。
米国特許第8682821号明細書(US8,682,821B2)には、特定のタイプの物体又は人間以外の動物が周囲環境を移動しているかを分類するために、車両の周囲環境に由来するレーダデータを評価する方法が開示されている。この分類のために、機械学習が使用されている。
欧州特許第1752362号明細書 米国特許第8682821号明細書
発明の開示
本発明は、物理的測定データ用の非可逆データ圧縮器を提供する。この非可逆データ圧縮器は、パラメータ化されたマッピングネットワークを有しており、このマッピングネットワークは、空間X内にある物理的測定データのデータ点xに適用されると、空間Xより低い次元数を有するリーマン多様体Zにおける点zを形成し、かつ、データ点xを入力として受け取ったことに応答して、Zにおける点zを出力として供給するように設定されている。
例えば、物理的トレーニングデータが、ピクセル単位の与えられた幅及び高さと、ピクセル当たりの与えられたビット数の色深度とを有するカメラから得られる複数の画像から成る場合、これらの画像は、この幅、高さ及び色深度を有する、考えられるあらゆる画像から成る空間X内にある。従って、Xにおける1つのデータ点は、そのような1つの画像に対応する。一見したところ、Zにおける点zへのこのようなデータ点xのマッピングが、どのようにデータ圧縮を構成するからは明らかでないかもしれない。しかしながら、この圧縮は、空間Xから多様体Zへのマッピング時に次元数が低減することによってもたらされる。
多様体Zは、超曲面上の任意の2点間に完全連続パスだけを許容する連続超曲面である。例えば、3次元空間における通常の球の表面は、自由度として角座標及び方位角を有しており、2次元である。
マッピングネットワークのパラメータθは、目的に向かってトレーニング可能であり又はトレーニングされ、この目的は、多様体Zにおいて、与えられた距離測度に従って、与えられた先行の分布Pと分布Pとの間の距離を最小化することを含み、この分布Pは、マッピングネットワークを使用して、物理的測定データから成る与えられた集合Pを、空間Xから多様体Zにマッピングすることによって多様体Zに誘導される。この距離測度は、分布間の距離と個々の点間の距離との両方に対してwell-definedである。
少なくとも部分的に自動的な車両に関連する分類問題は、教師あり学習問題である。即ち、学習プロセスは、「グラウンドトゥルース」に固定されていなければならい。即ち、これは、分類システムに既知になっていなければならず、例えば、どの交通標識を認識しなければならず、これが何を意味するのか、又は、種々の車線マークのどのタイプが、どのような結果を有するかが既知になっていなければならない。このことを目的として(画像のような)トレーニングデータには、例えば、画像内に実際に見える物体が手動でラベル付けされる。機械学習分類システムは、次に、トレーニング画像の集合全体にわたり、実際に存在する物体が正しく認識されるようにトレーニングされる。しかしながら、ラベルありトレーニングデータは、不足しがちでコストのかかる資源である。
発明者は、提供される非可逆データ圧縮器でもって物理的測定データを圧縮することによって、これらを、後続の教師ありトレーニングに対してより扱いやすい形式にすることができることを発見した。特にデータの次元数は、大幅に低減され、これによって、教師ありトレーニングは、物理的測定データに直接的に実行されるトレーニングよりも少ない手数でラベル付けされるトレーニングデータでもって実行することができる。
同時に、連続超曲面と、マッピングネットワークのパラメータθについてのトレーニング目的とを組み合わせることによって、大幅に低い次元数に圧縮したのにもかかわらず、より低次元の多様体Zにマッピングした場合に、高次元の空間Xにおける複数のデータ点x間に存在する意味的類似性が維持される。例えば、Xにおけるいくつかの画像が、類似の物体を示す場合には、これらの画像は、多様体Zにおける類似した位置にマッピングされる。非可逆圧縮は、必然的に何らかの情報を廃棄することになるが、交通において車両を制御するという究極の目的にとって、物体及び状況の意味論的意味は重要である。従って、意味的類似性を維持することは有利であり、これによって、非可逆データ圧縮は、その大きさを低減するための情報の単なる選別ではなく、単に大きさを低減するだけで後続の分類をより扱い易くするのである。むしろ、このデータ圧縮は、データにおける規則性を強調することによってデータをすでに強化するのであって、即ち、このデータ圧縮は、実際には、そうでなければ、分類だけで実行されることになる作業の一部を成す前処理になる。
このことは有利である。何故ならば、マッピングネットワークのトレーニングそれ自体は、教師なしに行われ、即ち、ラベルなしトレーニングデータに実行されるからである。従って、非可逆データ圧縮器をトレーニングするために、多くのラベルなしデータを使用することができる。圧縮データは、一方では、大幅に低い次元数の圧縮データであり、また、他方では、規則性及び類似性について前処理されるために、物体及び状況を認識する分類器に必要な、トレーニングのためのラベルありデータが少なくなる。
Zが連続超曲面であることと、距離測度が、分布間の距離及び個別の点間の距離の両方についてwell-definedであることとを組み合わせることによって、マッピングネットワークのトレーニングが容易になる。特に勾配降下法又は目的関数が微分可能であることを必要とする他の方法を使用することができる。
さらに圧縮は、ノイズのような、データの無関係な変更を抑止することができるので、トレーニングのロバストネスが改善される。
マッピングネットワークのパラメータθそれ自体は、一見すると、これがどのようにして取得されたかについての標示を示さない、現在のアプリケーションの格納日付についての単なる数の集合であるが、与えられたマッピングネットワークが、上述の目的に向かってトレーニングされたか否かを検証することができる統計的な手法を利用することができることに注意されたい。換言すれば、この目的に向かったトレーニングによって、マッピングネットワークのパラメータθに一意の「指紋」が残される。従って、「目的に向かってトレーニング可能であり又はトレーニングされる」という特徴は、非可逆データ圧縮器を取得する方法の単なる特徴ではなく、完成した非可逆データ圧縮器の特徴とみなすことができる。
特に有利な1つの実施形態においては、多様体Zが、超球面又は超楕円体である。これらの超曲面は、比較的単純であり、これにより、これらの超曲面上へのマッピングによって意味的類似性を維持することは容易である。同時に、これらの超曲面を定義する式によって、そもそも許容されるこれらの超曲面上の点間のパスも固定される。即ち、これらの式によって、パスが超曲面を逸脱するか又は貫通することが禁止される。
特に有利な1つの実施形態においては、マッピングネットワークのトレーニングを目的とした距離測度には、ワッサーシュタイン(Wasserstein)距離が含まれる。このようにして、マッピングネットワークは、多様体Zにおいて、誘導された分布Pを与えられた先行の分布Pに(又は与えられた先行の分布Pを誘導された分布Pに)最小のコストで変換する「最適輸送問題」が解決される。
この点において注意しなければならないのは、物理的測定データPから生成されたこれらの値だけが分布Pの台を成しているとしても、この分布Pが、これらの値には制限されないことである。むしろ、分布Pは、物理的測定データから成る集合Pから明らかになる主な特徴を維持する、Zの無限個の点を有する。
同様に、物理的測定データから成る元の集合Pも、この実際の集合Pをはるかに上回って拡がる分布を表すと考えることができる。Zにマッピングした後の意味的類似性及び空間Xにおける点x間の距離の維持は、台集合Pについてだけでなく、すべての分布についても有効である。
特に有利な他の1つの実施形態においては、マッピングネットワークが、少なくとも1つのニューラルネットワークを有する。このようなネットワークは、データ集合の次元数を劇的に低減する極めて良好なツールである。
マッピングネットワークの一部としてのニューラルネットワークは、また、他の目的にも使用することができる。即ち、これは、マッピングネットワークのトレーニングに対するハードウェアアクセラレーションとして使用することができる固定層で拡張することができる。後述の非可逆データ圧縮器を製造する方法の考察において明らかになるように、この方法の1つの実施形態においては、指数関数の計算、行列の乗算、行列の要素単位の除算、及び、フロベニウス積の演算を含めた反復式の計算に依拠するシンクホーン(Sinkhorn)アルゴリズムが使用される。これらの演算のそれぞれは、ニューラルネットワークの一層として実現することができ、これによって、演算速度を増大させるためにニューラルネットワークの大規模な並行性を利用することができる。従って、固定の回数の間、一連の演算にわたって反復されるループは、このニューラルネットワークにおいて、個別の演算がスタックされているサンドイッチ構造の反復として実現することができる。
従って、特に有利な1つの実施形態においては、ニューラルネットワークが、同一のサンドイッチ構造の少なくとも2つのインスタンスを有し、このサンドイッチ構造は、複数の異なる層を有し、それぞれの層は、指数関数の計算、行列の乗算、行列の要素単位の除算、又は、フロベニウス積の演算のうちの少なくとも1つを実行するように設定されている。
非可逆データ圧縮器のトレーニングは、ラベルなしデータに実行することができるが、このことは、物理的測定データと、これらのデータから抽出される特徴とについての利用可能な先験的情報が、マッピングネットワークによって使用することができないことを意味しない。むしろ、このような先験的情報は、与えられた先行のPに組み込むことができる。例えば、物体の固定の集合が最後に認識される場合、この固定の集合における、異なる物体の個数に対応して、異なるクラスタの個数を含むように先行のPを選択することができる。このようにして非可逆圧縮は、後続の分類のために、ある程度、物理的測定データを事前に離散化する。また、測定範囲の物理的な限界を、先行のPの選択に反映することも可能である。
従って、特に有利な他の1つの実施形態においては、与えられた先行のPが、多様体Zにおける少なくとも2つの異なるクラスタを有する。
上述したように、非可逆データ圧縮器の主たる存在理由は、車両の周囲環境における物体及び状況の検出を容易にすることである。従って、論理的延長として、本発明により、車両の周囲環境における物体又は状況を分類するシステムも提供される。
このシステムは、上述の少なくとも1つの非可逆データ圧縮器を有する。この非可逆データ圧縮器は、車両の周囲環境の少なくとも一部から物理的測定データを取得するように構成されている少なくとも1つのセンサと通信を行うように接続されている。
このシステムは、さらに分類モジュールを有しており、この分類モジュールは、非可逆データ圧縮器と通信を行うように接続されており、かつ、非可逆データ圧縮器の出力が、車両の周囲環境に少なくとも1つの物体の存在を示すか又は少なくとも1つの状況を示すかを分類するように構成されている。
上述したように、非可逆データ圧縮器と、分類モジュールとは、圧縮によって、生データの前処理及び強化が行われ、これによって、空間Xよりも低い次元数有するという、多様体Zの単なる効果を越えて、分類を容易にするという点において協力して動作する。非可逆データ圧縮器は、多くのラベルなしのトレーニングデータ、わずかなラベルありデータを使用して、又は、ラベルありデータなしに取得することができる。分類モジュールのトレーニングは、分類が物理的測定データに直接、行われる場合に必要とされるよりもはるかに小さい、ラベルありトレーニングデータの集合によって実現することができる。
特に有利な1つの実施形態においては、分類モジュールが、車両の更なるシステムに接続されている共有メディアバスネットワークを介して、非可逆データ圧縮器と通信を行うように接続されており、また、非可逆データ圧縮器は、専用の広帯域コネクションを介してセンサと通信を行うように接続されている。このようにして車両内の種々異なる領域からの物理的測定データの収集が、利用可能な伝送帯域幅を過剰に大量に消費することなく、容易に行われる。
特に今日のほとんどの車両には、CANバス、又は、極めて多くの車両システムが接続されている他のバスシステムが装備されている。このバスによって、すべての構成要素は、互いに通信することができ、通信を行う任意の2つの車両システム間の専用のケーブルから成る、以前に使用されてツリーと比べて格段に配線が節約される。しかしながら、この節約によって、バスが共有メディアになるという代償が生じ、即ち、与えられた任意の一時点においては、ただ1つの構成要素だけが、このバス上で送信することができ、これによって、すべての構成要素は、利用可能な帯域幅を共有する。車両の全環境を調査する場合、例えば、車両のさまざまな個所に取り付けられたカメラのセットによって、極めて大量の生データが生成される。例えば、1Mビット/sの総帯域幅を有する「高速」CANバスを介してこれらのデータを押し込むことは実践的にはなり得ない。しかしながら、データが、センサの近傍で非可逆的に圧縮される場合、圧縮されたその変化形態は、CANバスを介して転送するのに十分小さくなる。例えば、非可逆データ圧縮器は、物理的測定データを収集するセンサモジュールの一部であってよい。
このようにして、少なくとも部分的に自動的な移動に関する新たな機能による、既存の車両のアップグレードが容易になる。例えば、専用のケーブルを使用して、自動的な移動用の中央制御ユニットに複数のカメラを接続することは、これらのケーブルを通すための物理的な空間が残っていないために、困難になると考えられる。
他の有利な1つの実施形態においては、上記のシステムが、さらに判定モジュールを有し、この判定モジュールは、分類モジュールと通信を行うように接続されており、かつ、分類モジュールの出力に基づいて、車両、車両のドライバ又は他のエンティティに対する不利な結果を回避するために、車両の軌道を変更する必要があるか又は自動運転機能を少なくとも部分的に停止する必要があるかを判定するように構成されている。
このシステムは、さらに、動作モジュールを有し、この動作モジュールは、判定モジュールと通信を行うように接続されており、かつ、上記の判定がイエスであることに応じて、車両のパワートレイン、制動システム及び/又は操舵システムを動作させ、及び/又は、車両のドライバが物理的に知覚可能な警報を送出するように、車両の警報装置を動作させ、及び/又は、車両の自動運転機能の少なくとも部分的な停止が行われるように構成されている。
このようにして、ラベルありトレーニングデータから成る与えられた集合を利用することができる場合、車両の全体的な動作安全性を高めることができ、又は、全体的な動作安全性の与えられたレベルが規定される場合、このレベルは、より少ないラベルありトレーニングデータによって実現することができる。
交通標識の分類の他に、他の重要な1つの使用例は、自動車にとって無害なもの又は危険なものとして、道路表面上の小さな物体を分類することである。例えば、レンガは、乗り越えるのが危険であるのに対し、一片の紙は無害である。これによって、危険な物体が検出された場合には、緊急制動システムを起動することができる。
車両システムにおける使用は、非可逆データ圧縮器の主な使用例であるが、非可逆データ圧縮器と、特に他の分類器とのその組み合わせには、多くの他の用途がある。幾つかの例は、以下の通りである。
・例えば、法執行機関の指紋データベース用の、特定のタイプの特徴を保持するために調整された画像圧縮;
・自動診断システムにおける糖尿病網膜症又は他の眼疾患の画像ベースの検出(健康と不健康とに画像を分類)。この使用例においては、ラベルありの「グラウンドトゥルース」の取得は、眼科医によって行われなければならず、従って、特にコストがかかる;
・低品質部品の生産ラインからの自動な廃棄を誘発することが可能な、自動品質管理における欠陥又は低品質部品の、画像ベースの分類;
・誰が話しているかを分類するための会話サンプルの圧縮;及び
・動作中に記録されたセンサ信号を正常、メンテナンス要、欠陥に分類することにより、誤動作している装置/機械/器具/生産ラインを自動的に検出し、付加的な負荷を回避するための、修理及びメンテナンス又は動作の低減の誘発。
本発明によって、非可逆データ圧縮器を製造する方法も提供される。
この方法には、第1のステップにおいて、先行の分布Pと、物理的測定データ集合Pのマッピングによって多様体Z上に誘導された分布Pとの間の距離を最小化するために目的関数を設定することが含まれている。目的関数は、上記の距離と、ランダムに生成されたラベルがPにおけるデータ点xに属する確率を指定する二重確率行列Pのエントロピとの重み付き和である。
第2のステップにおいては、最適行列Pを見つけるために二重確率行列Pについて目的関数を最小化する。
第3ステップにおいては、マッピングネットワークの最適パラメータθを見つけるためにマッピングネットワークのパラメータθについて目的関数を最小化する。
最後に、所定の終了条件が満たされない限り、方法は分岐して第2のステップに戻る。
重み付き和におけるエントロピの作用は、解をより扱い易いようにするために問題を何らかの形で緩和することである。例えば、ワッサーシュタイン距離が、距離測度として使用される場合、目的関数を最小化する、マッピングネットワークの最適パラメータθを見つけることは、困難になり、計算にコストがかかる。特に上記の緩和によって、問題が秩序立てられる。
最適化Pと、マッピングネットワークのパラメータθの最適化との間の交替は、最終的に得られる解が、よりバランスの取れたものになるという他の効果を有する。ただ1つの目的に対してただ1つの最適化だけが存在する場合、目的関数の部分を成さない特性が、悪化するという傾向がある。上記の交替によってこの傾向が低減される。
特に有利な1つの実施形態においては、目的関数が、二重確率行列Pと、コスト行列Cとのフロベニウス・ドット積を有し、このコスト行列Cによって、Pにおけるデータ点xと、多様体Z上の対応する特徴zとのすべての組み合わせに対してコスト値が割り当てられる。このフロベニウス・ドット積は、近似線形時間シンクホーンアルゴズム(nearly linear-time Sinkhorn algorithm)を使用して解くのに特に適している。従って、有利には、シンクホーンアルゴリズムによって、Pについての最小化が行われる。
特に有利な1つの実施形態においては、コスト値が、データ点xがマッピングされた、多様体Zにおける点と、特徴zとの間のユークリッド絶対距離又は測地絶対距離に対応する。このようにして、選択された多様体Zと、選択された、Zにおける先行の分布Pとにこの距離を有機的に適合させることができる。
d次元空間内の多様体
Figure 2020010319
を考察する。入力空間における点は、Xに台を有する分布x〜p(x)から得られる。Xにおけるサンプル{x}、i=1、…、mから成る有限集合が与えられたとすると、目標は、k≪dなる次元kのより低次の多様体Zにおける潜在変数zを学習することである。最適輸送を離散的に定式化することにより、経験的なサンプルからの2つの分布をマッチングさせるという目的が得られる。興味の対象は、入力空間における点の表現として、1つのそのような分布を学習することである。パラメータθの組によってパラメータ化されたニューラルネットワークの形態の関数族{fθ:X→Z}を考察する。
Figure 2020010319
をk次元リーマン多様体となるように選択する。即ち、その形は選択した先行の分布Pによって指定される。それぞれfθに対し、周辺
Figure 2020010319
を有する、潜在空間Zにおける輸送問題を定義し、δはクロネッカのデルタであり、これは、
Figure 2020010319
及び
Figure 2020010319
が、サンプル{x}、i=1、…、mと、対応する特徴{z}、i=1、…、mとによって与えられる経験周辺分布であることを意味する。
この例においては、モデルパラメータに依存するコスト行列Cを定義する。例えば、これはユークリッド距離
C(θ)i,j = ||fθ(x)−z||
によって定義可能である。
この距離の選択は任意であり、かつ、取り扱っている特定の潜在空間に適合させるべきである(例えば、多様体Z上の測地距離を使用してもよい)。p(z|x)及びPのマッチングは、ワッサーシュタイン距離を最小化することによって実現することができる。これには、計算コストがかかるため、その代わりに学習問題
Figure 2020010319
を形成するエントロピ緩和ワッサーシュタイン距離を最小化する。ここで<>は、フロベニウス・ドット積であり、Hはエントロピであり、λは、近似品質(λ=0に対し、Wλは、ワッサーシュタイン距離に対応する)を定義する自由なパラメータであり、Pは、(ランダムに生成される)ラベルがデータ点に属する確率を指定する行列である(即ち、P内の成分は、正でなければならず、行及び列の合計は1でなければならず、即ち、換言すれば、Pは、二重確率行列から成る集合内になければならない)。
最終的な目標は、最適関数fθを学習することである。エントロピ正則化(λ=0)することなく、最小化するものを見つけることは困難であり、計算コストがかかることになる。その代わりに、輸送問題の正則化された変化形(λ>1)で作業を行えば、Pについてのマッチング問題を解くために、モデルパラメータθ上の確率勾配降下法と、近似線形時間シンクホーンアルゴリズムとを交替することができる。
シンクホーンアルゴリズムは、反復形であり、急速に収束する傾向があるため、このアルゴリズムのL個の反復をアンロールし、層としてニューラルネットワークに加えることができる。このことが意味するのは、内的最小演算が、これらの層によって実行され(L個のシンクホーン反復)、θについての外的最小演算が、確率的勾配降下法を介して実行されることである。
従って、特に有利な他の1つの実施形態においては、マッピングネットワークのパラメータθに対する確率的勾配降下法により、マッピングネットワークのパラメータθについての最小化が実行される。
上記の非可逆データ圧縮器及びシステムは、少なくとも部分的にコンピュータによって実現されていてよい。特に、先行のデータ圧縮器又は先行の車両システムを、これが本発明による機能を有するように、ソフトウェアによってアップグレードすることができる。従って、このようなソフトウェアは、それ自体で市販可能な製品である。従って、本発明はまた、コンピュータによって及び/又は制御ユニットによって実行されると、コンピュータ及び/又は制御ユニットを、本発明によって規定される非可逆データ圧縮器に及び/又はシステムにアップグレードする、機械可読命令を有するコンピュータプログラムにも関する。本発明はまた、このコンピュータプログラムを備えた、非一時的機械可読記憶媒体又はダウンロード製品にも関する。
以下においては、好ましい実施形態の説明と組み合わせ、図面を使用して本発明のさらなる改善を詳述する。
非可逆データ圧縮器1の実施例である。 非可逆データ圧縮器1のマッピングネットワーク2内の例示的なニューラルネットワーク2aである。 意味的類似性を維持することの利点の説明図である。 車両50における例示的な分類システム51である。 方法100の実施例を示す図である。
図1には、非可逆データ圧縮器1の例示的な1つの実施例が示されている。複数のパラメータθから成る組によってパラメータ化されたマッピングモジュール2は、空間Xの部分集合であるトレーニング集合Pに由来するデータ点xを、より低次元の多様体Z上の点zにマッピングする。すべての物理的測定データ3は、空間X内にある。多様体Zは、与えられた先行のPによって定義される。図1に示した例において、多様体Zは、球面であり、先行のPは、この球面の表面にわたって分散された点のランダムな分布である。
集合Pのデータ点xをマッピングした結果であるすべての点zは、集合z(P)を成す。しかしながら、このマッピングによって誘導される分布Pには、具体的な集合z(P)に加えてさらに多くの(中空の円として描画した)点が含まれている。
図2には、マッピングネットワーク2における例示的なニューラルネットワーク2aが示されている。データ点xのデータ点zへの実際のマッピングは、破線の輪郭で描画した層20aから20eによって実行される。これらの層20aから20eは、複数のパラメータθから成る組によってパラメータ化される。
さらに、ニューラルネットワーク2aには、層のサンドイッチから成る2つのインスタンス21a及び21bが含まれている。これらのサンドイッチ内の層は、固定されており(即ち、それらの層はパラメータθに依存しない)、従って、実線の輪郭によって描画されている。第1のサンドイッチ21aは、層22a、23a及び24aから成る。第2のサンドイッチ21bは、層22b、23b及び24bから成る。同一の陰影付けで示されているように層22bは、層22aと同一の機能を実行し、層23bは、層23aと同一の機能を実行し、層24bは、層24aと同一の機能を実行する。層のサンドイッチ21a及び21bの組み合わせは、Zに誘導された分布Pと、先行の分布Pとの間のエントロピ緩和ワッサーシュタイン距離に対する測度であるエラー信号Eを計算するために使用される。
ニューラルネットワーク2aをトレーニングしている間に、パラメータθが調整されて、エラー信号Eが最小にされる。
図3aには、物理的測定データ3から成る例示的な集合Pが手書きの数字xの形態で示されている。図3bから3dには、より低次元の多様体への、データ点xのさまざまなマッピングが示されている。
図3bは、より低次元の帯状の多様体Yへの第1のマッピングが示されている。この多様体には、参照符号Zの代わりにYが割り当てられている。何故ならば、多様体Yは、この多様体Yにおける任意の2点間に完全連続パスだけが許容されるという条件を満たさないからである。むしろ、一方の点から他方の点までのパスは、帯を逸脱する領域に繋がる可能性がある。この多様体Yへのマッピングは、種々の数字に関連する点が、荒く混在して出現するので、よい振る舞いをする(well-behaved)ものではない。
図3cには、球面状のより低次元の多様体Zへの第2のマッピングが示されている。ここでは、多様体Zにおける複数の点間に、この多様体Zを逸脱する不連続パスは存在しない。従って、表面は滑らかである。しかしながら、種々の数字に関連する点zが、依然として混在している。
図3dにおいては、同一の多様体Zが使用されている。さらに、誘導された分布Pを、与えられた先行の分布Pにマッチングさせるべきであるという目的で、マッピングが行われている。従って、点zは、これらの点が関連する数字に応じて、多様体Zにクラスタとして、即ち、かたまりとなって出現する。さらに、元の空間Xにおける距離は、多様体Zへのマッピング後も維持されており、意味的類似性は、多様体Z上の「近さ」の形で維持されているように見える。最も「7」に類似している数字「1」のインスタンスは、「1」に最も類似している数字「7」の対応するインスタンスの極めて近くに位置している。
図4には、車両50の周囲環境における物体又は状況を分類するためのシステム51が装備された例示的な車両50が示されている。車両50には、車両50の周囲環境の異なる部分53aから53dを監視する4つのカメラセンサ52aから52dが装備されている。それぞれのセンサ52aから52dは、それぞれ専用の広帯域コネクション56aから56dを介して、対応する非可逆データ圧縮器1aから1dに接続されており、このコネクション56aから56dを介して物理的測定データ3を受け取る。
車両50には、共有メディアバスネットワーク55としてのCANバスが装備されている。非可逆データ圧縮器1aから1dは、このネットワーク55に接続されており、分類モジュール54に圧縮データを転送するためにネットワーク55を使用する。分類モジュール54は、ネットワーク55を介して、判定モジュール57に分類の結果を転送する。判定モジュール57が、車両50の軌道50aを変更する必要がある、又は、少なくとも部分的に自動運転機能を無効にする必要がある、と判定した場合、動作モジュール58への通知が行われる。動作モジュール58は、次に、これを実行するために、パワートレイン59a、制動システム59b、及び/又は、操舵システム59cを動作させる。動作モジュール58はまた、車両50のドライバが物理的に知覚可能な警報59eを送出するために、車両50の警報装置59dを動作させてもよい。
分類モジュール54、判定モジュール57及び動作モジュール58は、車両50内の異なる個所に描画されているが、これは、このような配置でなければならないという意味で制限しているわけではない。むしろ、これらのモジュールを組み合わせて、例えば単一の制御ユニットに組み合わせることもできる。図4における例示的な配置は、車両50に共有メディアバスネットワーク55を設けることにより、コンポーネントの配置に関して高い自由度が得られることを示すための実例である。
図5には、非可逆データ圧縮器1を製造する方法100の1つの実施例が示されている。この製造の主な態様は、非可逆データ圧縮器1におけるマッピングネットワーク2のトレーニングである。
第1のステップ110においては、先行の分布Pと、物理的測定データ集合Pのマッピングによって多様体Zに誘導された分布Pとの間の距離を最小化するために、目的関数を設定する。この目的関数は、以下においては、選択的な手法によって最小化される。
ステップ120においては、最適行列Pを見つけるために二重確率行列Pについて目的関数が最小化される。
ステップ130においては、マッピングネットワークの最適パラメータθを見つけるために、マッピングネットワークのパラメータθについて目的関数が最小化される。
続く菱形140aにおいては、所定の終了条件が満たされたか否かが判定される。このような終了条件は、例えば、目的関数の絶対値に対する閾値、又は、1つの反復から次の反復までの目的関数の値の相対的な変化に対する閾値について、式で表すことができる。終了条件が満たされた場合(論理値1)、方法100は終了する。終了条件が満たされなかった場合(論理値0)、ステップ140において、方法100は、分岐して、ステップ120によるPについての最小化に戻る。
特に有利な1つの実施形態においては、目的関数が、二重確率行列Pと、コスト行列Cとのフロベニウス・ドット積を有し、このコスト行列Cによって、Pにおけるデータ点xと、多様体Z上の対応する特徴 とのすべての組み合わせに対してコスト値が割り当てられる。このフロベニウス・ドット積は、近似線形時間シンクホーンアルゴズム(nearly linear-time Sinkhorn algorithm)を使用して解くのに特に適している。従って、有利には、シンクホーンアルゴリズムによって、Pについての最小化が行われる。

Claims (15)

  1. 物理的測定データ(3)用の非可逆データ圧縮器(1)であって、
    前記非可逆データ圧縮器(1)は、パラメータ化されたマッピングネットワーク(2)を有しており、前記マッピングネットワーク(2)は、空間X内にある前記物理的測定データ(3)のデータ点xに適用されると、前記空間Xより低い次元数を有するリーマン多様体Zにおける点zを形成し、かつ、データ点xを入力として受け取ったことに応答して、Zにおける点zを出力として供給するように設定されており、
    ・前記多様体Zは、超曲面上の任意の2点間に完全連続パスだけを許容する連続超曲面であり、
    ・前記マッピングネットワーク(2)のパラメータθは、目的に向かってトレーニング可能であり又はトレーニングされ、前記目的は、前記多様体Zにおいて、与えられた距離測度に従って、与えられた先行の分布Pと分布Pとの間の距離を最小化することを含み、前記分布Pは、前記マッピングネットワーク(2)を使用して、物理的測定データ(3)から成る与えられた集合Pを、空間Xから多様体Zにマッピングすることによって多様体Z上に誘導され、
    ・前記距離測度は、分布間の距離と個々の点間の距離との両方に対してwell-definedである、
    物理的測定データ(3)用の非可逆データ圧縮器(1)。
  2. 前記多様体Zは、超球面又は超楕円体である、請求項1に記載のデータ圧縮器(1)。
  3. 前記距離測度には、ワッサーシュタイン距離が含まれる、請求項1又は2に記載のデータ圧縮器(1)。
  4. 前記マッピングネットワーク(2)は、少なくとも1つのニューラルネットワーク(2a)を有する、請求項1乃至3のいずれか一項に記載のデータ圧縮器(1)。
  5. 前記ニューラルネットワーク(2a)は、同一のサンドイッチ構造の少なくとも2つのインスタンス(21a、21b)を有し、
    前記サンドイッチ構造(21a、21b)は、複数の異なる層(22a、23a、24a;22b、23b、24b)を有し、それぞれの前記層(22a、23a、24a;22b、23b、24b)は、指数関数の計算、行列の乗算、行列の要素単位の除算、又は、フロベニウス積の演算のうちの少なくとも1つを実行するように設定されている、請求項4に記載のデータ圧縮器(1)。
  6. 与えられた前記先行のPは、前記多様体Zにおける少なくとも2つの異なるクラスタを有する、請求項1乃至5のいずれか一項に記載のデータ圧縮器(1)。
  7. 車両(50)の周囲環境における物体又は状況を分類するシステム(51)であって、
    ・前記車両(50)の前記環境の少なくとも一部(53aから53d)から物理的測定データ(3)を取得するように構成されている少なくとも1つのセンサ(52aから52d)と通信を行うように接続されている、請求項1乃至6のいずれか一項に記載の少なくとも1つの非可逆データ圧縮器(1、1aから1d)と、
    ・前記非可逆データ圧縮器(1)と通信を行うように接続されており、かつ、前記非可逆データ圧縮器(1)の出力が、前記車両(50)の前記周囲環境に少なくとも1つの物体の存在を示すか又は少なくとも1つの状況を示すかを分類するように構成されている分類モジュール(54)と、
    を有する、車両(50)の周囲環境における物体又は状況を分類するシステム(51)。
  8. 前記分類モジュール(54)は、前記車両(50)の更なるシステムに接続されている共有メディアバスネットワーク(55)を介して、前記非可逆データ圧縮器(1aから1d)と通信を行うように接続されており、前記非可逆データ圧縮器(1aから1d)は、専用の広帯域コネクション(56aから56d)を介してセンサ(52aから52d)と通信を行うように接続されている、請求項7に記載のシステム(51)。
  9. 前記システム(51)は、さらに、
    ・前記分類モジュール(54)と通信を行うように接続されており、かつ、前記分類モジュール(54)の出力に基づいて、前記車両(50)、前記車両(50)のドライバ又は他のエンティティに対する不利な結果を回避するために、前記車両(50)の軌道(50a)を変更する必要があるか又は自動運転機能を少なくとも部分的に停止する必要があるかを判定するように構成されている判定モジュール(57)と、
    ・前記判定モジュール(57)と通信を行うように接続されており、かつ、前記判定がイエスであることに応じて、前記車両(50)のパワートレイン(59a)、制動システム(59b)及び/又は操舵システム(59c)を動作させ、及び/又は、前記車両(50)のドライバが物理的に知覚可能な警報(59e)を送出するように前記車両(50)の警報装置(59d)を動作させ、及び/又は、前記車両(50)の自動運転機能の少なくとも部分的な停止が行われるように設定されている動作モジュール(58)と、を有する、請求項7又は8に記載のシステム(51)。
  10. 請求項1乃至6のいずれか一項に記載の非可逆データ圧縮器(1)を製造する方法(100)において、
    ・前記先行の分布Pと、前記物理的測定データ(3)の集合Pのマッピングによって多様体Zに誘導された前記分布Pとの間の前記距離を最小化するために目的関数を設定するステップ(110)を有し、前記目的関数は、前記距離と、ランダムに生成されたラベルが、Pにおけるデータ点xに属する確率を指定する二重確率行列Pのエントロピとの重み付き和であり、さらに
    ・最適行列Pを見つけるために前記二重確率行列Pについて前記目的関数を最小化するステップ(120)と、
    ・前記マッピングネットワークの最適パラメータθを見つけるために前記マッピングネットワークの前記パラメータθについて前記目的関数を最小化するステップ(130)と、
    ・所定の終了条件(140a)が満たされない限り、分岐してPについての前記最小化のステップ(120)に戻るステップ(140)と、
    を有する、前記非可逆データ圧縮器(1)を製造する方法(100)。
  11. 前記目的関数は、前記二重確率行列Pと、コスト行列Cとのフロベニウス・ドット積を有し、前記コスト行列Cによって、Pにおけるデータ点xと、多様体Z上の対応する特徴zとのすべての組み合わせに対してコスト値が割り当てられる、請求項10に記載の方法(100)。
  12. 前記コスト値は、前記データ点xがマッピングされた、多様体Zにおける点と、前記特徴zとの間のユークリッド絶対距離又は測地絶対距離に対応する、請求項11に記載の方法(100)。
  13. シンクホーンアルゴリズムを用いて、Pについての前記最小化のステップ(120)を実行する、請求項11又は12に記載の方法(100)。
  14. 前記マッピングネットワーク(2)の前記パラメータθに対する確率的勾配降下法によって、前記マッピングネットワーク(2)の前記パラメータθについての前記最小化のステップ(130)を実行する、請求項10乃至13のいずれか一項に記載の方法(100)。
  15. 機械可読命令を含むコンピュータプログラムであって、
    前記コンピュータプログラムは、コンピュータによって及び/又はコントロールユニットによって実行されると、前記コンピュータ及び/又は前記コントロールユニットを、請求項1乃至6のいずれか一項に記載の非可逆データ圧縮器(1)に及び/又は請求項7乃至9のいずれか一項に記載のシステム(51)にアップグレードし、及び/又は、前記コンピュータ及び/又は前記コントロールユニットに、請求項10乃至14のいずれか一項に記載の方法(100)を実行させる、コンピュータプログラム。
JP2019100303A 2018-05-30 2019-05-29 車両制御システム用非可逆データ圧縮器 Active JP7326028B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
EP18175062.1A EP3575986B1 (en) 2018-05-30 2018-05-30 A lossy data compressor for vehicle control systems
EP18175062.1 2018-05-30

Publications (2)

Publication Number Publication Date
JP2020010319A true JP2020010319A (ja) 2020-01-16
JP7326028B2 JP7326028B2 (ja) 2023-08-15

Family

ID=62683086

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019100303A Active JP7326028B2 (ja) 2018-05-30 2019-05-29 車両制御システム用非可逆データ圧縮器

Country Status (5)

Country Link
US (1) US11150657B2 (ja)
EP (1) EP3575986B1 (ja)
JP (1) JP7326028B2 (ja)
KR (1) KR102659923B1 (ja)
CN (1) CN110557636A (ja)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102021204790A1 (de) 2021-05-11 2022-11-17 Robert Bosch Gesellschaft mit beschränkter Haftung Quantitative Bewertung von Modellen zur Beschreibung realer Szenerien
EP4125005A1 (de) 2021-07-26 2023-02-01 Robert Bosch GmbH Kontrastives representation learning für messdaten
CN116934431B (zh) * 2023-09-19 2023-12-05 贵昌集团有限公司 一种电子商务数据智能管理系统

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008310796A (ja) * 2007-06-15 2008-12-25 Mitsubishi Electric Research Laboratories Inc コンピュータにより実施される、訓練データから分類器を構築し、前記分類器を用いてテストデータ中の移動物体を検出する方法
JP2016505950A (ja) * 2012-12-07 2016-02-25 リアルネットワークス,インコーポレーテッド 最良の写真を検出及び選択する方法及びシステム
JP2016115346A (ja) * 2014-12-11 2016-06-23 三菱電機株式会社 信号を再構成する方法および装置
JP2017538999A (ja) * 2014-12-17 2017-12-28 ノキア テクノロジーズ オーユー ニューラルネットワークによるオブジェクト検出

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8024084B2 (en) * 1995-06-07 2011-09-20 Automotive Technologies International, Inc. Vehicle diagnostic techniques
US6167155A (en) * 1997-07-28 2000-12-26 Physical Optics Corporation Method of isomorphic singular manifold projection and still/video imagery compression
US6615158B2 (en) * 2001-06-25 2003-09-02 National Instruments Corporation System and method for analyzing a surface by mapping sample points onto the surface and sampling the surface at the mapped points
WO2004061702A1 (en) * 2002-12-26 2004-07-22 The Trustees Of Columbia University In The City Of New York Ordered data compression system and methods
DE102005037273A1 (de) 2005-08-08 2007-02-15 Robert Bosch Gmbh Spurassistenzsystem für Fahrzeuge
US7724961B2 (en) * 2006-09-08 2010-05-25 Mitsubishi Electric Research Laboratories, Inc. Method for classifying data using an analytic manifold
US7907784B2 (en) * 2007-07-09 2011-03-15 The United States Of America As Represented By The Secretary Of The Commerce Selectively lossy, lossless, and/or error robust data compression method
US9202140B2 (en) * 2008-09-05 2015-12-01 Siemens Medical Solutions Usa, Inc. Quotient appearance manifold mapping for image classification
US8682821B2 (en) * 2011-08-08 2014-03-25 Robert Bosch Gmbh Method for detection of movement of a specific type of object or animal based on radar signals
WO2013192214A2 (en) * 2012-06-19 2013-12-27 Telogis, Inc. System for processing fleet vehicle operation information
JP6282193B2 (ja) * 2014-07-28 2018-02-21 クラリオン株式会社 物体検出装置
EP3159853B1 (en) * 2015-10-23 2019-03-27 Harman International Industries, Incorporated Systems and methods for advanced driver assistance analytics
US11237546B2 (en) * 2016-06-15 2022-02-01 Strong Force loT Portfolio 2016, LLC Method and system of modifying a data collection trajectory for vehicles
CN107622272A (zh) * 2016-07-13 2018-01-23 华为技术有限公司 一种图像分类方法及装置
US10776659B2 (en) * 2016-08-26 2020-09-15 Goodrich Corporation Systems and methods for compressing data
US10650621B1 (en) * 2016-09-13 2020-05-12 Iocurrents, Inc. Interfacing with a vehicular controller area network

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008310796A (ja) * 2007-06-15 2008-12-25 Mitsubishi Electric Research Laboratories Inc コンピュータにより実施される、訓練データから分類器を構築し、前記分類器を用いてテストデータ中の移動物体を検出する方法
JP2016505950A (ja) * 2012-12-07 2016-02-25 リアルネットワークス,インコーポレーテッド 最良の写真を検出及び選択する方法及びシステム
JP2016115346A (ja) * 2014-12-11 2016-06-23 三菱電機株式会社 信号を再構成する方法および装置
JP2017538999A (ja) * 2014-12-17 2017-12-28 ノキア テクノロジーズ オーユー ニューラルネットワークによるオブジェクト検出

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
GUILLE D. CANAS, LORENZO A. ROSASCO: "Learning Probability Measures with respect to Optimal Transport Metrics[online]", ADVANCES IN NEURAL INFORMATION PROCESSING SYSTEMS, NIPS 2012, JPN7023000582, 5 September 2012 (2012-09-05), ISSN: 0004988262 *

Also Published As

Publication number Publication date
KR102659923B1 (ko) 2024-04-24
US11150657B2 (en) 2021-10-19
US20190369619A1 (en) 2019-12-05
JP7326028B2 (ja) 2023-08-15
EP3575986A1 (en) 2019-12-04
KR20190136955A (ko) 2019-12-10
CN110557636A (zh) 2019-12-10
EP3575986B1 (en) 2024-07-10

Similar Documents

Publication Publication Date Title
US20220092351A1 (en) Image classification method, neural network training method, and apparatus
AU2019101133A4 (en) Fast vehicle detection using augmented dataset based on RetinaNet
CN107533669B (zh) 滤波器特异性作为用于神经网络的训练准则
Roychowdhury et al. Machine learning models for road surface and friction estimation using front-camera images
JP7402796B2 (ja) 3次元視線ベクトルを用いた車両乗員関与を決定するための方法、コンピューティングデバイス、コンピューティングシステム、コンピュータプログラム、および車両
KR102595399B1 (ko) 미지의 클래스들의 검출 및 미지의 클래스들에 대한 분류기들의 초기화
DE102020113280A1 (de) Automatische erzeugung von grundwahrheitsdaten zum trainieren oder umzutrainieren eines oder mehrerer modelle für maschinelles lernen
WO2019101720A1 (en) Methods for scene classification of an image in a driving support system
JP2020010319A (ja) 車両制御システム用非可逆データ圧縮器
CN110689043A (zh) 一种基于多重注意力机制的车辆细粒度识别方法及装置
US11250300B2 (en) Detecting plugging of ground-engaging tools of an agricultural implement from imagery of a field using a machine-learned classification model
Dai et al. Learning to localize detected objects
KR20180036709A (ko) 미디어 분류
CN104408469A (zh) 基于图像深度学习的烟火识别方法及系统
KR20180048930A (ko) 분류를 위한 강제된 희소성
CN112529146B (zh) 神经网络模型训练的方法和装置
US20200074190A1 (en) Lane and object detection systems and methods
US11270425B2 (en) Coordinate estimation on n-spheres with spherical regression
KR101907883B1 (ko) 객체 검출 및 분류 방법
CN116052026B (zh) 一种无人机航拍图像目标检测方法、系统及存储介质
CN104657717A (zh) 一种基于分层核稀疏表示的行人检测方法
CN113283404B (zh) 行人属性识别方法、装置、电子设备及存储介质
KR20210067815A (ko) 사용자의 건강 상태를 측정하기 위한 방법 및 이를 위한 장치
CN115376125A (zh) 一种基于多模态数据融合的目标检测方法以及基于目标检测模型的在体果实采摘方法
Liu et al. Recognition of pyralidae insects using intelligent monitoring autonomous robot vehicle in natural farm scene

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190905

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220202

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20230127

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230214

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230512

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230725

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230802

R150 Certificate of patent or registration of utility model

Ref document number: 7326028

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150