JP6923021B2 - 評価方法、トレーニングデータセット、エミュレータ作成方法、分類方法、試験方法、車両制御装置、および車両 - Google Patents
評価方法、トレーニングデータセット、エミュレータ作成方法、分類方法、試験方法、車両制御装置、および車両 Download PDFInfo
- Publication number
- JP6923021B2 JP6923021B2 JP2020023570A JP2020023570A JP6923021B2 JP 6923021 B2 JP6923021 B2 JP 6923021B2 JP 2020023570 A JP2020023570 A JP 2020023570A JP 2020023570 A JP2020023570 A JP 2020023570A JP 6923021 B2 JP6923021 B2 JP 6923021B2
- Authority
- JP
- Japan
- Prior art keywords
- image data
- rank
- data unit
- visibility
- data units
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 118
- 238000012549 training Methods 0.000 title claims description 58
- 238000011156 evaluation Methods 0.000 title claims description 55
- 238000010998 test method Methods 0.000 title claims description 13
- 230000000007 visual effect Effects 0.000 claims description 53
- 230000002829 reductive effect Effects 0.000 claims description 45
- 210000002569 neuron Anatomy 0.000 claims description 29
- 238000012545 processing Methods 0.000 claims description 14
- 230000000694 effects Effects 0.000 claims description 12
- 230000009471 action Effects 0.000 claims description 11
- 230000007423 decrease Effects 0.000 claims description 10
- 238000004364 calculation method Methods 0.000 claims description 8
- 238000010200 validation analysis Methods 0.000 claims description 8
- 238000004891 communication Methods 0.000 claims description 6
- 230000008859 change Effects 0.000 claims description 4
- 238000013473 artificial intelligence Methods 0.000 description 45
- 238000012360 testing method Methods 0.000 description 22
- 238000013459 approach Methods 0.000 description 11
- 206010028980 Neoplasm Diseases 0.000 description 8
- 201000011510 cancer Diseases 0.000 description 8
- 238000012795 verification Methods 0.000 description 7
- 238000006243 chemical reaction Methods 0.000 description 6
- 230000008569 process Effects 0.000 description 6
- 230000015556 catabolic process Effects 0.000 description 5
- 238000006731 degradation reaction Methods 0.000 description 5
- 230000008901 benefit Effects 0.000 description 4
- 230000001976 improved effect Effects 0.000 description 4
- 210000004072 lung Anatomy 0.000 description 4
- 230000004044 response Effects 0.000 description 4
- 238000011109 contamination Methods 0.000 description 3
- 230000003247 decreasing effect Effects 0.000 description 3
- 238000003745 diagnosis Methods 0.000 description 3
- 238000010586 diagram Methods 0.000 description 3
- 238000007667 floating Methods 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 230000004313 glare Effects 0.000 description 3
- 230000009467 reduction Effects 0.000 description 3
- 230000009466 transformation Effects 0.000 description 3
- 230000004393 visual impairment Effects 0.000 description 3
- 201000004569 Blindness Diseases 0.000 description 2
- 206010058467 Lung neoplasm malignant Diseases 0.000 description 2
- 230000001419 dependent effect Effects 0.000 description 2
- 230000006866 deterioration Effects 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 230000004438 eyesight Effects 0.000 description 2
- 230000006872 improvement Effects 0.000 description 2
- 238000012804 iterative process Methods 0.000 description 2
- 201000005202 lung cancer Diseases 0.000 description 2
- 208000020816 lung neoplasm Diseases 0.000 description 2
- 238000012423 maintenance Methods 0.000 description 2
- 206010047571 Visual impairment Diseases 0.000 description 1
- 230000001133 acceleration Effects 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 239000000969 carrier Substances 0.000 description 1
- 238000004140 cleaning Methods 0.000 description 1
- 230000000593 degrading effect Effects 0.000 description 1
- 230000003292 diminished effect Effects 0.000 description 1
- 201000010099 disease Diseases 0.000 description 1
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 description 1
- 239000003814 drug Substances 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000002349 favourable effect Effects 0.000 description 1
- 238000002372 labelling Methods 0.000 description 1
- 208000018769 loss of vision Diseases 0.000 description 1
- 231100000864 loss of vision Toxicity 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000001537 neural effect Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000036961 partial effect Effects 0.000 description 1
- 230000001737 promoting effect Effects 0.000 description 1
- 230000001681 protective effect Effects 0.000 description 1
- 230000010076 replication Effects 0.000 description 1
- 238000013349 risk mitigation Methods 0.000 description 1
- 238000004092 self-diagnosis Methods 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 239000000126 substance Substances 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
- 208000029257 vision disease Diseases 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30168—Image quality inspection
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Quality & Reliability (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Multimedia (AREA)
- Image Analysis (AREA)
- Traffic Control Systems (AREA)
- Image Processing (AREA)
Description
−可視性低下のない画像データユニット、
−1つの画像データユニットの一部のみに影響する可視性低下を伴う画像データユニット、
−含まれるすべての画像情報に影響する可視性低下を伴う画像データユニット、
の中の少なくとも2つの集まりを含んでもよい。
肯定的な結果を提供する。したがって、画像データユニットP*)および関連付けられた推定ランクパラメータR*をトレーニングデータセット10に追加することができる。代替的に、または追加的に、検証の肯定結果が保存されてもよい。
Claims (14)
- トレーニングデータセット(10)を作成するためのコンピュータで実行される評価方法(AM)であって、トレーニングデータセット(10)は、エミュレータ(16)を作成するため、または、コンピュータ実行分類方法(CM)を構成するため、AIメソッドまたはAIソフトウェアモジュール(9)の入力およびグラウンドトゥルースとして機能するように設計され、
車両(1、1’)の環境(3)に関する画像データユニット(P1、P2、P3、P4)のメインセット(M)を収集すること、そこにおいて、画像データユニット(P1、P2、P3、P4)の少なくとも1部は、少なくとも1つの視界低下の影響(5、6、7、8)に基づいて可視性低下の対象となる画像情報を含み、
画像データユニット(P1、P2、P3、P4)の複数のサブセット(S1、S2、S3、S4)を定義し、それぞれのサブセット(S1、S2、S3)の画像データユニットの相対的な比較(P1/P2、P3/P4、P3/P2)の比較結果(C1、C2、C3)を収集すること、そこにおいて、比較結果(C1、C2、C3)は、それぞれのサブセ
ット(S1、S2、S3)に関連付けられ、サブセット(S1、S2、S3)の画像データユニット(P1/P2、P3/P4、P3/P2)間の可視性または可視性低下の相対的な順序を示し、
複数のサブセット(S1、S2、S3)とそれぞれの比較結果(C1、C2、C3)を処理すること、そこにおいて、処理されるサブセット(S1、S2、S3)内の画像データユニット(P1、P2、P3、P4)に対して、絶対的な可視性ランク順序(15)が確立され、
画像データユニット(P1、P2、P3、P4)にランクパラメータ(R1、R2、R3)を関連付けること、そこにおいて、ランクパラメータ(R1、R2、R3)は、処理されるサブセット(S1、S2、S3)の複数の比較結果(C1、C2、C3)に基づいて計算され、および、ランクパラメータ(R1、R2、R3)は、絶対的な可視性ランク順序(15)内のランクを定義し、
処理されるサブセット(S1、S2、S3)の画像データユニット(P1、P2、P3、P4)と、関連付けられたランクパラメータ(R1、R2、R3)とを含むトレーニングデータセット(10)を出力すること、の各ステップを備えるコンピュータ実行評価方法。 - 比較結果(C1、C2、C3)の収集は、
サブセット(S1、S2、S3)を選択し、含まれている画像データユニット(P1、P2、P3、P4)を表示すること、
サブセット(S1、S2、S3)の比較結果(C1、C2、C3)を特定する入力パラメータを収集すること、の各ステップを含み、各ステップは複数回実行される、請求項1に記載のコンピュータ実行評価方法。 - サブセット(S1、S2、S3)の定義およびサブセットの処理、および/または、ランクパラメータ(R1、R2、R3)の計算は、事前定義されたランク順序評価基準が満たされる(QM)まで、繰り返し実行される、請求項1または2に記載のコンピュータ実行評価方法。
- サブセット(S1、S2、S3)の定義は、
メインセット(M)の画像データユニット(P1、P2、P3、P4)が、既存のいくつのサブセット(S1、S2、S3)に含まれるかを示す、サブセットカウントパラメータを計算すること、
画像データユニット(P1)のサブセットカウントパラメータが事前定義されたカウント閾値を下回っている場合、選択された画像データユニット(P1)とメインセット(M)からの別の画像データユニット(P4)とで新しいサブセットを定義すること、
新しいサブセットを処理すること、を含む請求項1乃至3のいずれか1項に記載のコンピュータ実行評価方法。 - サブセット(S1、S2、S3、S4)の定義は、
最初の画像データユニット(P1)を選択すること、
メインセット(M)の複数の画像データユニット(P1、P2、P3、P4)のすでに計算されたランクパラメータ(R1、R2、R3、R4)を分析すること、
絶対ランク順序(15)内で少なくとも1つのターゲット範囲(T1、T2)を特定すること、
ランクパラメータ(R4)がターゲット範囲(T1、T2)にある、少なくとも1つの別の画像データユニット(P4)を選択すること、
選択された画像データユニット(P1、P4)を含む新しいサブセット(S*)を定義し、その新しいサブセット(S*)を処理すること、の各ステップを含み、各ステップは少なくとも1回実行される、請求項1乃至4のいずれか1項に記載のコンピュータ実行評価方法。 - ランクパラメータ(Ri)の計算が、Elo格付け方法(ELO)を使用することによって実行される、請求項1乃至5のいずれか1項に記載のコンピュータ実行評価方法。
- コンピュータで実行されるエミュレータ作成方法であって、
トレーニングデータセット(10)を、コンピュータで実行されるAIメソッド又はAIソフトウェアモジュールへ入力として与えること、
トレーニングデータセット(10)は、画像データユニット(P1、P2、P3、P4)と、関連付けられたランクパラメータ(R1、R2、R3、R4)とを含み、
トレーニングデータセット(10)は、請求項1乃至6のいずれか1項に記載のコンピュータ実行評価方法(AM)によって作成され、
トレーニングデータセット(10)は、AIメソッドまたはAIソフトウェアモジュール(9)のグラウンドトゥルースとして定義され、
AIメソッドまたはAIソフトウェアモジュール(9)は、画像データユニット(P1、P2、P3、P4)に含まれる画像情報を分析して、画像情報から各画像データユニット(P1、P2、P3、P4)の関連付けられるランクパラメータ(R1、R2、R3、R4)への帰属を提供するフィルタルール(16)を確立するように構成され、それにより、フィルタルール(16)は、グラウンドトゥルースに従って、画像データユニット(P1、P2、P3、P4)に含まれる画像情報の可視性低下の評価をエミュレートし、
フィルタルール(16)を保存または送信し、あるいは、AIソフトウェアモジュール(9)を保存または送信し、あるいは、フィルタルール(16)に基づいて分類ソフトウェアモジュールを構成し、あるいは、フィルタルール(16)に基づいてコンピュータ処理される分類装置を構成すること、の各ステップを備えるコンピュータ実行エミュレータ作成方法。 - AIメソッドまたはAIソフトウェアモジュール(9)は、トレーニングされたニューロンネットワークを含むフィルタルール(16)を含む、請求項7に記載のコンピュータ実行エミュレータ作成方法。
- 画像データユニット(P*)に含まれる画像情報に基づいて、推定ランクパラメータ(R*)を割り当てるように設定されたフィルタルール(16)を含むコンピュータで実行される分類方法(CM)であって、
フィルタルール(16)は、請求項7に記載のコンピュータ実行エミュレータ作成方法(EM)によって作成された、または、そのフィルタルールに基づいて構成されたフィルタルールであり、
車両(1、1’)の環境に関する画像データユニット(P*)を収集すること、そこにおいて、画像データユニット(P*)に含まれる画像情報は、少なくとも1つの視界低下の影響(5、6、7、8)に基づく可視性低下の対象となっており、
フィルタルール(16)を画像データユニット(P*)に適用すること、
フィルタルール(16)によって画像データユニット(P*)に帰属される推定ランクパラメータ(R*)を出力すること、そこにおいて、推定ランクパラメータ(R*)は、最小値(MIN)と最大値(MAX)の間の絶対的な可視性ランク順序(15)内のランクを示し、その結果、推定ランク(R*)は可視性の低下の程度を表す、コンピュータ実行分類方法。 - 物理的なデータキャリアに保存され、または、通信インターフェースを介して送信される分類ソフトウェアプロダクトであって、請求項9に記載のコンピュータ実行分類方法(CM)を実行するための命令を含む、分類ソフトウェアプロダクト。
- 車両(1、1’)の環境(3)に関する画像データユニット(P*)を収集する視覚センサ(2、2’)、および/または画像データユニット(P*)を取得する視覚データインターフェース(18)を備える、コンピュータ化された分類装置であって、
分類装置(4)は、新しい画像データユニット(P*)を受信すると、推定ランクパラメータ(R*)を出力するように適合され、
コンピュータ化された分類装置(4)は、請求項9に記載のコンピュータ実行分類方法(CM)を実行するように設計された分類部を備える、コンピュータ化された分類装置。 - 請求項9に記載のコンピュータ実行分類方法を評価または改善するためのコンピュータで実行される試験方法であって、
車両(1、1’)の環境に関する新しい画像データユニット(P*)が、トレーニングデータセット(10)内の未処理の画像データユニットのセットから収集または取得され、
新しい画像データユニット(P*)が、請求項9に記載のコンピュータ実行分類方法(CM)によって評価され、そこにおいて、推定ランクパラメータ(R*)が新しい画像データユニット(P*)に関連付けられており、
新しい画像データユニット(P*)と、トレーニングデータセット(10)から選択される少なくとも1つの別の処理される画像データユニット(Pi)を含む新しいサブセット(S*)が作成され、
推定ランクパラメータ(R*)、および別の画像データユニット(Pi)に関連付けられている既知のランクパラメータ(Ri)に基づいて、推定比較結果(C’)が確立され、
画像データユニット(P*、P3)が、推定比較結果(C’)の検証のために少なくとも1回表示され、
検証比較結果(C*)を特定する入力パラメータが収集され、
推定比較結果(C’)が検証比較結果(C*)と等しい場合、新しい画像データユニット(P*)および関連付けられた推定ランクパラメータ(R*)がトレーニングデータセット(10)に追加され、および/または、検証の肯定的な結果が保存され、および/または、推定比較結果(C*)が検証比較結果(C’)から外れている場合、検証の否定的な結果が保存される、コンピュータ実行試験方法。 - 特に自動車(1’)に適合される車両制御装置であって、
車両(1’)の環境に関する画像データユニット(P*)を収集するための視覚センサ(2’)、および/または、画像データユニット(P*)を取得するための視覚データインターフェース(18)、および
視覚センサ(2’)から受信した、および/または視覚データインターフェース(18)を介して収集された画像データユニット(P*)に基づいて、車両制御アクションを実行するように設計された車両制御部(17)を備え、
車両制御装置(13)は、請求項11に記載のコンピュータ化された分類装置(4)を含み、
車両制御装置(13)は、少なくとも1つの新しく収集された画像データユニット(P*)について、コンピュータ化された分類装置(4)によって出力される少なくとも1つの推定ランクパラメータ(R*)に基づいて、視界低下安全パラメータ(Z*)が計算されるように設計されており、
車両制御部(17)は、視界低下安全パラメータ(Z*)が安全閾値と比較して不十分である場合、または不十分であるとき、車両制御アクションを一時停止または変更するように設計される、車両制御装置。 - 請求項13に記載の車両制御装置(13)を備える車両。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
EP19157941 | 2019-02-19 | ||
EP19157941.6A EP3699810B1 (en) | 2019-02-19 | 2019-02-19 | Classification technique for assessing a visibility degradation in image data units |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2020135887A JP2020135887A (ja) | 2020-08-31 |
JP6923021B2 true JP6923021B2 (ja) | 2021-08-18 |
Family
ID=65494002
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020023570A Active JP6923021B2 (ja) | 2019-02-19 | 2020-02-14 | 評価方法、トレーニングデータセット、エミュレータ作成方法、分類方法、試験方法、車両制御装置、および車両 |
Country Status (2)
Country | Link |
---|---|
EP (1) | EP3699810B1 (ja) |
JP (1) | JP6923021B2 (ja) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112835341B (zh) * | 2020-12-31 | 2022-02-01 | 北京国家新能源汽车技术创新中心有限公司 | 一种自动驾驶域控制器的实车测试评估方法 |
US20220309810A1 (en) * | 2021-03-26 | 2022-09-29 | Howard University | Method for the detection, segmentation and morphological mapping on neural cell images of the whole brain |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4793571B2 (ja) * | 2006-08-23 | 2011-10-12 | 社団法人北海道開発技術センター | 走行支援システム及び走行支援方法 |
DE102010002310A1 (de) * | 2010-02-24 | 2011-08-25 | Audi Ag, 85057 | Verfahren und Vorrichtung zur Freisichtprüfung einer Kamera für ein automobiles Umfeld |
-
2019
- 2019-02-19 EP EP19157941.6A patent/EP3699810B1/en active Active
-
2020
- 2020-02-14 JP JP2020023570A patent/JP6923021B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
EP3699810B1 (en) | 2021-04-28 |
JP2020135887A (ja) | 2020-08-31 |
EP3699810A1 (en) | 2020-08-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Kläs et al. | Uncertainty in machine learning applications: A practice-driven classification of uncertainty | |
Roesener et al. | A scenario-based assessment approach for automated driving by using time series classification of human-driving behaviour | |
US10235629B2 (en) | Sensor data confidence estimation based on statistical analysis | |
CN110390248A (zh) | 用于操作技术系统的方法、设备、产品和计算机程序 | |
CN108319907A (zh) | 一种车辆识别方法、装置和存储介质 | |
CN108885700A (zh) | 数据集半自动标记 | |
KR102481817B1 (ko) | 전달 학습을 통한 운전자의 시선 응시영역 추정 방법 | |
JP6923021B2 (ja) | 評価方法、トレーニングデータセット、エミュレータ作成方法、分類方法、試験方法、車両制御装置、および車両 | |
CN111738337B (zh) | 一种混行交通环境下的驾驶人分心状态检测识别方法 | |
KR20220026804A (ko) | 역강화학습 기반 배달 수단 탐지 장치 및 방법 | |
CN111914665A (zh) | 一种人脸遮挡检测方法、装置、设备及存储介质 | |
JP7434829B2 (ja) | モデル生成装置、推定装置、モデル生成方法、及びモデル生成プログラム | |
CN109886198B (zh) | 一种信息处理方法、装置及存储介质 | |
Ferreira et al. | Simood: Evolutionary testing simulation with out-of-distribution images | |
Aydin et al. | Identification of test scenarios for autonomous vehicles using fatal accident data | |
CN117437615A (zh) | 雾天交通标志检测方法、装置、存储介质和电子设备 | |
Klingelschmitt et al. | Probabilistic, discriminative maneuver estimation in generic traffic scenes using pairwise probability coupling | |
US12091051B2 (en) | Generating unknown-unsafe scenarios, improving automated vehicles, and computer system | |
US20220189148A1 (en) | Determination of the image components relevant to decision-making for an image classifier through modification in latent space | |
DE102022110766A1 (de) | Verbessertes maschinelles lernen | |
Aldawsari et al. | Real‐Time Instance Segmentation Models for Identification of Vehicle Parts | |
CN108510350A (zh) | 融合多平台征信数据的征信分析方法、装置及终端 | |
Yusuf et al. | Automotive parts assessment: applying real-time instance-segmentation models to identify vehicle parts | |
CN112149790A (zh) | 用于检查人工神经网络的鲁棒性的方法和设备 | |
CN116324904A (zh) | 用于注释传感器数据的方法和系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200214 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20210317 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210323 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210514 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20210629 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20210712 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6923021 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |