JP7200371B2 - 車両速度を決定する方法及び装置 - Google Patents

車両速度を決定する方法及び装置 Download PDF

Info

Publication number
JP7200371B2
JP7200371B2 JP2021523762A JP2021523762A JP7200371B2 JP 7200371 B2 JP7200371 B2 JP 7200371B2 JP 2021523762 A JP2021523762 A JP 2021523762A JP 2021523762 A JP2021523762 A JP 2021523762A JP 7200371 B2 JP7200371 B2 JP 7200371B2
Authority
JP
Japan
Prior art keywords
vehicle
motion
different
intentions
lane
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2021523762A
Other languages
English (en)
Other versions
JP2022506404A (ja
Inventor
ドゥ,ミンボ
タオ,ヨンシアン
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huawei Technologies Co Ltd
Original Assignee
Huawei Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Technologies Co Ltd filed Critical Huawei Technologies Co Ltd
Publication of JP2022506404A publication Critical patent/JP2022506404A/ja
Application granted granted Critical
Publication of JP7200371B2 publication Critical patent/JP7200371B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/10Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to vehicle motion
    • B60W40/105Speed
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W60/00Drive control systems specially adapted for autonomous road vehicles
    • B60W60/001Planning or execution of driving tasks
    • B60W60/0027Planning or execution of driving tasks using trajectory prediction for other traffic participants
    • B60W60/00276Planning or execution of driving tasks using trajectory prediction for other traffic participants for two or more other traffic participants
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units, or advanced driver assistance systems for ensuring comfort, stability and safety or drive control systems for propelling or retarding the vehicle
    • B60W30/14Adaptive cruise control
    • B60W30/143Speed control
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/02Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
    • B60W40/04Traffic conditions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W60/00Drive control systems specially adapted for autonomous road vehicles
    • B60W60/001Planning or execution of driving tasks
    • B60W60/0027Planning or execution of driving tasks using trajectory prediction for other traffic participants
    • B60W60/00274Planning or execution of driving tasks using trajectory prediction for other traffic participants considering possible movement changes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/29Graphical models, e.g. Bayesian networks
    • G06F18/295Markov models or related models, e.g. semi-Markov models; Markov random fields; Networks embedding Markov models
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/70Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/84Arrangements for image or video recognition or understanding using pattern recognition or machine learning using probabilistic graphical models from image or video features, e.g. Markov models or Bayesian networks
    • G06V10/85Markov-related models; Markov random fields
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/58Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems
    • G08G1/166Anti-collision systems for active traffic, e.g. moving vehicles, pedestrians, bikes
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2552/00Input parameters relating to infrastructure
    • B60W2552/53Road markings, e.g. lane marker or crosswalk
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2554/00Input parameters relating to objects
    • B60W2554/40Dynamic objects, e.g. animals, windblown objects
    • B60W2554/402Type
    • B60W2554/4029Pedestrians
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2554/00Input parameters relating to objects
    • B60W2554/40Dynamic objects, e.g. animals, windblown objects
    • B60W2554/404Characteristics
    • B60W2554/4041Position
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2554/00Input parameters relating to objects
    • B60W2554/40Dynamic objects, e.g. animals, windblown objects
    • B60W2554/404Characteristics
    • B60W2554/4045Intention, e.g. lane change or imminent movement
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2720/00Output or target parameters relating to overall vehicle dynamics
    • B60W2720/10Longitudinal speed

Description

本出願は、2019年7月17日に中国国家知識産権局に出願され、「METHOD AND APPARATUS FOR DETERMINING VEHICLE SPEED」と題された中国特許出願第201910646083.4号に対する優先権を主張するものであり、該出願はその全体を参照により本明細書に組み込まれる。
[技術分野]
本出願は車両技術の分野に関し、詳細には車両速度を決定する方法及び装置に関する。
自動運転技術等では、車両と周囲の歩行者などの対象との間の衝突を回避するために、車両速度は周囲の対象の運動状態に基づいて決定される必要がある。周囲の対象の運動状態が周囲の対象の主観的な動作意図により影響されるため、車両は、周囲の対象の有りうる動作意図を予測して、予測を通じて学習できる有りうる動作意図に対応する周囲の対象の運動状態に基づいて車両速度を決定することがある。しかしながら、現在、周囲の対象の動作意図の予測中、周囲の対象と車両との間の衝突のリスクにより引き起こされる影響は通常無視される。結果的に、決定された車両速度は十分に適切でなく、車両が移動するとき安全性リスクがあり得る。
本出願の実施形態は、車両速度を決定する方法及び装置を提供し、それにより、車両は、周囲の対象の動作意図の確率再分布、異なる動作意図を有する周囲の対象の運動状態変化、及び異なる移動速度制御動作下の車両の運動状態変化に基づいて、車両の移動速度を決定することができる。このようにして、発生する可能性がより低い、周囲の対象と車両との間の高いリスクは無視されない。したがって、決定された移動速度はより適切であり、車両の移動中の潜在的な安全性リスクが低減される。
第1の態様によれば、本出願の一実施形態は、車両速度を決定する方法を提供する。当該方法は、具体的に、最初、車両の周囲の対象を観測することにより、車両の周囲の対象の観測情報を取得するステップと、周囲の対象の観測情報に基づいて、周囲の対象の異なる動作意図の確率分布を計算するステップと、車両が車両の現在の位置から異なる動作意図に対応するリスクエリアに移動するため移動時間に基づいて、確率分布に対する再分布計算を実行して、異なる動作意図の確率再分布を取得するステップであり、異なる動作意図に対応するリスクエリアは、車両が移動する車線内、異なる動作意図を有する周囲の対象が通るエリアである、ステップと、車両が異なる動作意図に対応するリスクエリアに移動するため移動時間に基づいて、異なる動作意図を有する周囲の対象の運動状態変化を予測するステップと、最後、異なる動作意図の確率再分布、異なる動作意図を有する周囲の対象の運動状態変化、及び異なる移動速度制御動作下の車両の運動状態変化に基づいて、車両の移動速度を決定するステップと、を含んでもよい。
本出願のこの実施形態で提供される方法によれば、車両の移動過程において、車両の周囲の対象の複数の有りうる動作意図に対して、動作意図の確率分布が周囲の対象の観測情報に基づいて計算され得ることが習得できる。次いで、異なる動作意図の確率再分布が、車両が現在の位置から異なる動作意図に対応するリスクエリアに移動するため移動時間に基づいて計算される。さらに、異なる動作意図を有する周囲の対象の運動状態変化が、車両が異なる動作意図に対応するリスクエリアに移動するため移動時間に基づいて予測される。最後、車両の移動速度が、異なる動作意図の確率再分布、異なる動作意図を有する周囲の対象の運動状態変化、及び異なる移動速度制御動作下の車両の運動状態変化に基づいて決定される。このようにして、車両の移動速度を決定する間、周囲の対象の各有りうる動作意図が考慮される。また、各動作意図に対応し、かつ車両の各加速度の制御下である、周囲の対象と車両との間の衝突のリスク度がさらに考慮される。このようにして、発生する可能性がより低い、周囲の対象と車両との間の高いリスクは無視されない。したがって、決定された移動速度は現在の運転環境により適切であり、車両の移動中の潜在的な安全性リスクが低減される。
第1の態様の可能な一実装を参照し、周囲の対象の観測情報に基づいて、周囲の対象の異なる動作意図の確率分布を計算するステップは、特定の実施の間に以下の動作、すなわち、車両が移動する車線に基づく座標系において、周囲の対象の観測情報に基づいて、周囲の対象と車線との間の相対的な位置関係、及び周囲の対象と車線との間の相対的な運動関係を確立するステップと、周囲の対象と車線との間の相対的な位置関係、及び周囲の対象と車線との間の相対的な運動関係に基づいて、周囲の対象の異なる動作意図の確率分布を計算するステップと、を含んでもよい。このようにして、周囲の対象の異なる動作意図の確率分布は、座標系の変換を通じてより便利かつ正確に計算することができる。これは、その後の適切な車両速度の決定のための正確なデータを提供する。
第1の態様の別の可能な実装を参照し、当該方法は、車両の観測情報を取得するステップと、車両が移動する車線に基づく座標系において、車両の観測情報及び周囲の対象の観測情報に基づいて、車両と車線との間の相対的な位置関係及び車両と車線との間の相対的な運動状態、並びに周囲の対象と車線との間の相対的な位置関係及び周囲の対象と車線との間の相対的な運動状態を確立するステップと、周囲の対象と車線との間の相対的な位置関係及び周囲の対象と車線との間の相対的な運動状態に基づいて、異なる動作意図に対応するリスクエリアを決定するステップと、車両と車線との間の相対的な位置関係及び車両と車線との間の相対的な運動状態、並びに異なる動作意図に対応するリスクエリアに基づいて、車両が車両の現在の位置から異なる動作意図に対応するリスクエリアに移動するため移動時間を計算するステップと、をさらに含んでもよい。このようにして、車両の移動速度の決定の間、周囲の対象の各有りうる動作意図が考慮される。また、各動作意図に対応し、かつ車両の各加速度の制御下である、周囲の対象と車両との間の衝突のリスク度がさらに考慮される。このようにして、発生する可能性がより低い、周囲の対象と車両との間の高いリスクは無視されない。したがって、決定された移動速度は現在の運転環境により適切であり、車両の移動中の潜在的な安全性リスクが低減される。
第1の態様のさらに別の可能な実装を参照し、車両が異なる動作意図に対応するリスクエリアに移動するため移動時間に基づいて、確率分布に対する再分布計算を実行して、異なる動作意図の確率再分布を取得するステップは、特定の実施の間に以下の動作、すなわち、確率分布に対する粒子処理を実行するステップであり、異なる動作意図に対応する粒子の数量が、異なる動作意図の確率分布を表すために使用される、ステップと、計算を通じて取得され、車両が異なる動作意図に対応するリスクエリアに移動するために必要とされる移動時間に基づいて、異なる動作意図に対応する粒子の重みを調整して、異なる動作意図の確率再分布を取得するステップと、を含んでもよい。この場合、さらなる周囲の対象をカバーし、各周囲の対象の全ての有りうる動作意図の発生確率を計算するために、粒子の概念が導入され得る。粒子処理及び計算を通じて、各動作意図のリスク度は、車両が動作意図に対応するリスクエリアに移動するために必要とされる移動時間に基づいて決定することができる。言い換えれば、異なる動作意図の確率再分布が取得される。これは、その後の車両の速度の正確な決定と、自動運転などのインテリジェントな運転技術を使用する車両の安全性及び信頼性の改善のための、不可欠なデータ基礎を提供する。
第1の態様のさらに別の可能な実装を参照し、車両が異なる動作意図に対応するリスクエリアに移動するため移動時間に基づいて、異なる動作意図を有する周囲の対象の運動状態変化を予測するステップは、特定の実施の間に以下の動作、すなわち、車両が異なる動作意図に対応するリスクエリアに移動するため移動時間に基づいて、異なる動作意図を有する周囲の対象が動作意図を変える確率を決定するステップと、異なる動作意図を有する周囲の対象が動作意図を変える確率、及びランダム確率に基づいて、異なる動作意図を有する周囲の対象の運動状態変化を予測するステップと、を含んでもよい。
第1の態様のさらなる可能な実装を参照し、異なる動作意図の確率再分布と、異なる動作意図を有する周囲の対象の運動状態変化と、異なる移動速度制御動作下の車両の運動状態変化に基づいて、車両の移動速度を決定するステップは、特定の実施の間に以下の動作、すなわち、異なる動作意図の確率再分布、異なる動作意図を有する周囲の対象の運動状態変化、及び異なる移動速度制御動作下の車両の運動状態変化に基づいて、異なる移動速度制御動作下でもたらす車両の移動効果を推定するステップと、異なる移動速度制御動作下でもたらす車両の移動効果に基づいて、異なる移動速度制御動作から目標移動速度制御動作を選択するステップと、目標移動速度制御動作に基づいて車両の移動速度を決定するステップと、を含んでもよい。このようにして、車両速度の決定の間、周囲の対象の各有りうる動作意図が考慮される。また、各動作意図に対応し、かつ車両の各加速度の制御下である、周囲の対象と車両との間の衝突のリスク度がさらに考慮される。このようにして、発生する可能性がより低い、周囲の対象と車両との間の高いリスクは無視されない。したがって、決定された移動速度は現在の運転環境により適切であり、車両の移動中の潜在的な安全性リスクが低減される。
第2の態様によれば、本出願の一実施形態は、車両速度を決定する装置を提供する。当該装置は、第1の取得ユニット、第1の計算ユニット、第2の計算ユニット、予測ユニット、及び第1の決定ユニットを含む。第1の取得ユニットは、車両の周囲の対象の観測情報を取得するように構成される。第1の計算ユニットは、周囲の対象の観測情報に基づいて、周囲の対象の異なる動作意図の確率分布を計算するように構成される。第2の計算ユニットは、車両が車両の現在の位置から異なる動作意図に対応するリスクエリアに移動するため移動時間に基づいて、確率分布に対する再分布計算を実行して、異なる動作意図の確率再分布を取得するように構成され、異なる動作意図に対応するリスクエリアは、車両が移動する車線内、異なる動作意図を有する周囲の対象が通るエリアである。予測ユニットは、車両が異なる動作意図に対応するリスクエリアに移動するため移動時間に基づいて、異なる動作意図を有する周囲の対象の運動状態変化を予測するように構成される。第1の決定ユニットは、異なる動作意図の確率再分布、異なる動作意図を有する周囲の対象の運動状態変化、及び異なる移動速度制御動作下の車両の運動状態変化に基づいて、車両の移動速度を決定するように構成される。
第2の態様の可能な一実装を参照し、第1の計算ユニットは、確立サブユニット及び計算サブユニットを含んでもよい。確立サブユニットは、車両が移動する車線に基づく座標系において、周囲の対象の観測情報に基づいて、周囲の対象と車線との間の相対的な位置関係、及び周囲の対象と車線との間の相対的な運動関係を確立するように構成される。計算サブユニットは、周囲の対象と車線との間の相対的な位置関係、及び周囲の対象と車線との間の相対的な運動関係に基づいて、周囲の対象の異なる動作意図の確率分布を計算するように構成される。
第2の態様の別の可能な実装を参照し、当該装置は、第2の取得ユニット、確立ユニット、第2の決定ユニット、及び第3の計算ユニットをさらに含んでもよい。第2の取得ユニットは、車両の観測情報を取得するように構成される。確立ユニットは、車両が移動する車線に基づく座標系において、車両の観測情報及び周囲の対象の観測情報に基づいて、車両と車線との間の相対的な位置関係及び車両と車線との間の相対的な運動状態、並びに周囲の対象と車線との間の相対的な位置関係及び周囲の対象と車線との間の相対的な運動状態を確立するように構成される。第2の決定ユニットは、周囲の対象と車線との間の相対的な位置関係及び周囲の対象と車線との間の相対的な運動状態に基づいて、異なる動作意図に対応するリスクエリアを決定するように構成される。第3の計算ユニットは、車両と車線との間の相対的な位置関係及び車両と車線との間の相対的な運動状態、並びに異なる動作意図に対応するリスクエリアに基づいて、車両が車両の現在の位置から異なる動作意図に対応するリスクエリアに移動するため移動時間を計算するように構成される。
第2の態様のさらに別の可能な実装を参照し、第2の計算ユニットは、処理サブユニット及び調整サブユニットを含んでもよい。処理サブユニットは、確率分布に対する粒子処理を実行するように構成され、異なる動作意図に対応する粒子の数量が、異なる動作意図の確率分布を表すために使用される。調整サブユニットは、計算を通じて取得され、車両が異なる動作意図に対応するリスクエリアに移動するために必要とされる移動時間に基づいて、異なる動作意図に対応する粒子の重みを調整して、異なる動作意図の確率再分布を取得するように構成される。
第2の態様のさらに別の可能な実装を参照し、予測ユニットは、第1の決定サブユニット及び予測サブユニットを含んでもよい。第1の決定サブユニットは、車両が異なる動作意図に対応するリスクエリアに移動するため移動時間に基づいて、異なる動作意図を有する周囲の対象が動作意図を変える確率を決定するように構成される。予測サブユニットは、異なる動作意図を有する周囲の対象が動作意図を変える確率、及びランダム確率に基づいて、異なる動作意図を有する周囲の対象の運動状態変化を予測するように構成される。
第2の態様のさらなる可能な実装を参照し、第1の決定ユニットは、推定サブユニット、選択サブユニット、及び第2の決定サブユニットを含んでもよい。推定サブユニットは、異なる動作意図の確率再分布、異なる動作意図を有する周囲の対象の運動状態変化、及び異なる移動速度制御動作下の車両の運動状態変化に基づいて、異なる移動速度制御動作下でもたらす車両の移動効果を推定するように構成される。選択サブユニットは、異なる移動速度制御動作下でもたらす車両の移動効果に基づいて、異なる移動速度制御動作から目標移動速度制御動作を選択するように構成される。第2の決定サブユニットは、目標移動速度制御動作に基づいて車両の移動速度を決定するように構成される。
第2の態様で提供される装置は、第1の態様で提供される方法に対応することが理解され得る。したがって、第2の態様の実装、及び第2の態様の実装により達成され得る技術的効果については、第1の態様の実装の関連する説明を参照する。
第3の態様によれば、本出願の一実施形態は、車両をさらに提供する。車両は、センサ、プロセッサ、及び車両速度コントローラを含む。センサは、車両の周囲の対象の観測情報を取得し、観測情報をプロセッサに送信するように構成される。プロセッサは、第1の態様の任意の実装における方法に従って車両の移動速度を決定し、移動速度を車両速度コントローラに送信するように構成される。速度コントローラは、車両の決定された移動速度で移動するよう車両を制御するように構成される。
第4の態様によれば、本出願の一実施形態は、車両をさらに提供する。車両は、プロセッサ及びメモリを含む。メモリは命令を記憶し、プロセッサが命令を実行したとき、車両は、第1の態様の実装のいずれか1つに従う方法を実行する。
第5の態様によれば、本出願の一実施形態は、コンピュータプログラムプロダクトをさらに提供する。コンピュータプログラムプロダクトがコンピュータ上で実行されたとき、コンピュータは、第1の態様の実装のいずれか1つに従う方法を実行可能にされる。
第6の態様によれば、本出願の一実施形態は、コンピュータ読取可能記憶媒体をさらに提供する。コンピュータ読取可能記憶媒体は命令を記憶する。命令がコンピュータ又はプロセッサ上で実行されたとき、コンピュータ又はプロセッサは、第1の態様の実装のいずれか1つに従う方法を実行可能にされる。
本出願の実施形態における技術的解決策をより明確に説明するために、以下では、実施形態を説明するための添付図面について簡潔に説明する。確かに、以下の説明の添付図面は、本出願に記載されるいくつかの実施形態を単に示しており、当業者は、これら添付図面から他の図面を導き出し得る。
本出願の一実施形態による、アプリケーションシナリオに関連する道路交通シナリオの概略図である。 本出願の一実施形態による、自動運転技術等を使用する車両のハードウェアアーキテクチャの概略図である。 本出願の一実施形態による、自動運転技術等を使用する車両システムの概略アーキテクチャ図である。 本出願の一実施形態による、自動運転技術等を使用する車両の概略構造図である。 本出願の一実施形態による、車両速度を決定する方法の概略フローチャートである。 本出願の一実施形態による、歩行者の意図の概略図である。 本出願の一実施形態による、車両周囲の対象-車線モデルの概略図である。 本出願の一実施形態による粒子化表現の概略図である。 本出願の一実施形態による、リスクエリア及び移動時間を決定する概略図である。 本出願の一実施形態による、周囲の対象の相互作用運動モデルの一例の概略図である。 本出願の一実施形態による、車両速度を決定する装置の概略構造図である。 本出願の一実施形態による車両の概略構造図である。 本出願の一実施形態による別の車両の概略構造図である。
車両が車線内を移動するとき、車両速度を決定する際に周囲の歩行者又は動物などの周囲の対象(object)を考慮して、車両の周囲の対象との衝突などの交通事故を回避し、車両及び車両の周囲の対象の安全性を確保する必要がある。
現在、歩行者等の周囲の対象をより良く回避するために、車両の移動速度の決定中、周囲の対象の運動状態が主に周囲の対象の主観的な動作意図により影響されることを考慮し、車両は、周囲の対象の挙動特性を使用することにより周囲の対象の目標動作意図を予測することがある。例えば、車両は、周囲の対象の挙動特性に基づいて周囲の対象の様々な動作意図の発生確率を決定し、確率閾値を設定して、比較的高い発生確率を有する動作意図を目標動作意図として選択する。次いで、車両は、目標動作意図を有する周囲の対象の運動状態に基づいて車両速度を決定する。しかしながら、目標動作意図に加えて、周囲の対象は別の動作意図をさらに有する可能性があり、別の動作意図による周囲の対象と車両との間の衝突の比較的大きいリスクがある可能性がある。したがって、高い発生確率を有する目標動作意図のみが考慮され、予測を通じて得られる単一の目標動作意図に基づいて車両速度が決定される場合、低い発生確率を有するが衝突リスクを引き起こす可能性が高いいくつかの他の動作意図は無視される。この場合、周囲の対象が、高い衝突リスクを有する無視された動作意図で実際に動き、車両が、目標動作意図に基づいて決定された移動速度で移動すると、車両は、周囲の対象と衝突する可能性がかなりある。結果的に、安全性リスクが引き起こされる。
例えば、図1に示す道路交通シナリオの概略図を参照すると、車両101は、自動運転技術を使用することにより運転し、シナリオにおける車両101の周囲の対象は、歩行者102及び歩行者103を含む。車両101は、歩行者102の挙動特性及び歩行者103の挙動特性を使用することにより、歩行者102及び歩行者103のそれぞれの目標動作意図を予測すると仮定される。予測は、以下のとおりである。歩行者102の目標動作意図は、車線を迅速に横断すること又は車線を運転方向で斜めに横断することであり、歩行者103の目標動作意図は停止である。この場合、車両101の決定された車両速度は60km/hである。しかしながら、車両101が動作意図を予測するとき、車両101との衝突を引き起こす可能性のある歩行者102及び歩行者103の他の有りうる動作意図は考慮されない。したがって、予測を通じて得られる、車両101により近い歩行者103の目標動作意図は、発生する可能性がほとんどない、車線を迅速に横断する動作意図又は車線を運転方向で斜めに横断する動作意図を含まない。この場合、決定された車両速度は比較的大きい。しかしながら、歩行者103は、車線を迅速に横断し、あるいは車線を運転方向で斜めに横断する可能性がある。歩行者103の目標動作意図が不正確に予測されているため、車両101は、比較的高い衝突リスクを有する動作意図を無視する可能性が高い。この場合、車両101が比較的高速の60km/hで移動するとき、車両101は歩行者103にぶつかる可能性が高く、車両101及び歩行者103に関連する交通事故を引き起こす。
これに基づき、周囲の対象の動作意図が正確に又は包括的に予測されないため、決定された車両速度が不適切であるという問題を解決するために、本出願の実施形態において、適切な車両速度を決定する方法が提供される。車両及び車両の周囲の対象は、車両が決定された適切な速度で移動するならば、安全であり得る。車両速度を決定する具体的なプロセスは、周囲の対象の観測情報に基づいて、全ての動作意図の確率分布を計算し、車両が現在の位置から異なる動作意図に対応するリスクエリアに移動するため移動時間に基づいて、異なる動作意図の確率再分布を計算することと、次いで、車両が異なる動作意図に対応するリスクエリアに移動するため移動時間に基づいて、異なる動作意図を有する周囲の対象の運動状態変化を予測することと、最後に、異なる動作意図の確率再分布、異なる動作意図を有する周囲の対象の運動状態変化、及び異なる加速度下の車両の運動状態変化に基づいて、車両の移動速度を決定することを含んでもよい。このようにして、車両速度の決定の間、周囲の対象の各々の有りうる動作意図が考慮され、周囲の対象と、異なる加速度を使用することにより移動する車両との間の、各動作意図に対応する衝突のリスク度がさらに考慮される。このようにして、発生する可能性がより低い、周囲の対象と車両との間の高いリスクは無視されない。したがって、決定された移動速度は現在の運転環境により適切であり、車両の移動中の潜在的な安全性リスクが低減される。
一例として、図1に示すシナリオが依然として用いられる。車両101は、本出願の実施形態で提供される方法を使用することにより車両速度を決定すると仮定し、具体的な決定プロセスは、以下を含んでもよい。最初、歩行者102及び歩行者103の7つの動作意図(歩道に沿って前進すること、歩道に沿って後退すること、車線を真っすぐ横断すること、車線を運転方向で斜めに横断すること、車線を運転方向と対向する方向で斜めに横断すること、車線から離れること、及び停止を含む)の確率分布b102及びb103が、歩行者102の観測情報及び歩行者103の観測情報に基づいてそれぞれ予測される。b102は、歩行者102が各動作意図を有する確率P102i(i=1,2,...,7)を含み、b103は、歩行者103が各動作意図を有する確率P103i(i=1,2,...,7)を含む。次いで、各動作意図について、車両101が移動する車線内動作意図を有する歩行者102が通るエリアが、動作意図を有する歩行者102に対応するリスクエリアとして決定及び記録され、車両101が移動する車線内動作意図を有する歩行者103が通るエリアが、動作意図を有する歩行者103に対応するリスクエリアとして決定及び記録される。次いで、車両101が現在の位置から歩行者102に対応するリスクエリアに移動するために必要とされる移動時間T102iが計算され、車両101が現在の位置から歩行者103に対応するリスクエリアに移動するために必要とされる移動時間T103iが計算される。その後、移動時間T102iに基づいて確率分布b102に対する再分布計算を実行して、動作意図に対応する確率再分布b’102を取得することができ、移動時間T103iに基づいて確率分布b103に対する再分布計算を実行して、動作意図に対応する確率再分布b’103を取得する。さらに、異なる動作意図を有する歩行者102の運動状態変化及び異なる動作意図を有する歩行者103の運動状態変化を、それぞれ、移動時間T102i及び移動時間T103iに基づいてさらに予測することができる。最後、車両101は、確率再分布b’102及び確率再分布b’103、異なる動作意図を有する歩行者102の運動状態変化及び異なる動作意図を有する歩行者103の運動状態変化、並びに異なる加速度下の車両の運動状態変化に基づいて、車両の移動速度を30km/hとして決定することができる。このようにして、歩行者102及び歩行者103の動作意図の予測の間、様々な有りうる動作意図が考慮され、車両が各動作意図の下で異なる対処ストラテジを使用するとき発生し得る状況を参照して、比較的適切な車両速度が連帯的に決定される。したがって、車両101は、車線内を、比較的安全である30km/hの速度で移動する。これは、車両101の移動中に存在し得る安全性リスクを効果的に回避し、自動運転技術等の信頼性及び安全性を改善する。
本出願の実施形態において提供される車両速度を決定する方法が説明される前に、本出願の実施形態における車両のハードウェアアーキテクチャが最初に説明される。
図2は、本出願の一実施形態による、車両に適用されるシステムのハードウェアアーキテクチャの概略図である。車両200は、フロントビューカメラ201、レーダ202、全地球測位システム(英語:Global Positioning System、略称GPS)203、画像処理ユニット204、中央処理ユニット(英語:Central Processing Unit、略称CPU)205、及びコントローラ206を含む。フロントビューカメラ201は、道路シナリオの画像を収集するように構成され得る。レーダ202は、動的な周囲の対象又は静的な周囲の対象のデータを収集するように構成され得る。画像処理ユニット204は、車線ライン、車線縁石、他の車両、及び周囲の対象(例えば、歩行者、動物、又は木)を認識するように構成され得る。CPU205は、以下の動作、すなわち、フロントビューカメラ201からの画像データ、及びレーダ202からの周囲の対象の状態データを取得することと、画像プロセッサ204を起動して目標認識を実行し、CPU205の内部計算モジュールを起動して融合及び他の演算を実行することと、適切な目標車両速度を決定し、目標車両速度に基づいて判断制御命令を生成することと、判断制御命令をコントローラ206に送信することを実行することにより、車両200全体に対して全体的な制御を実行するように構成され得る。コントローラ206は、受信した判断制御命令に基づいて、現在の車線内で目標速度において移動するよう車両を制御するように構成され得る。
図2に示すハードウェアアーキテクチャの車両200については、本出願の一実施形態による対応するシステムアーキテクチャの概略図が図3に示されている。システムの観点から、車両200は、車載センサシステム210、車載コンピュータシステム220、及び車載制御実行システム230を含む。車載センサシステム210は、フロントビューカメラ201により収集されたデータ、レーダ202により収集されたデータ、及びGPS203による測位を通じて取得されたデータを取得するように構成され得る。車載コンピュータシステム220は、一般に2つのモジュール、すなわち、知覚データ処理モジュール221と判断及び計画モジュール222に分割される。知覚データ処理モジュール221は、車両200の周囲の対象(特に、周囲の歩行者)を検出し、周囲の対象の位置及び運動情報を出力するように構成され得る。判断及び計画モジュール222は、周囲の対象の現在の位置及び運動情報に基づいて周囲の対象の動作意図の分布を予測及び更新して、動作意図の分布に基づいて車両200の車両速度を判断及び計画するように構成され得る。車載制御実行システム230は、判断及び計画モジュール222により出力された判断制御命令を取得し、判断制御命令に示される車両速度で移動するよう車両200を制御するように構成され得る。本出願のこの実施形態で提供される車両速度を決定する方法は、主に車載コンピュータシステム220の判断及び計画モジュール222により実行されることに留意されたい。具体的な一実装については、図4に示す実施形態の関連する説明を参照する。
一例において、プロダクトの観点から、本出願のこの実施形態における車両200の対応する概略構造図が図4に示される。車両200は、センサレイヤ410、知覚レイヤ420、判断及び計画レイヤ430、及び車両制御レイヤ440を含む。データストリームが、前述の4つのレイヤに順次到着し、4つのレイヤにより順次処理される。センサレイヤ410は、単眼/双眼フロントビューカメラ201により収集されたデータ、ライダ(lidar)/ミリ波レーダ202により収集されたデータ、及びGPS203による測位を通じて取得されたデータをロードするように構成され得る。知覚レイヤ420は、以下の6つのモジュール、すなわち、車両/周囲の対象検出モジュール421、車線ライン検出モジュール422、交通標識検出モジュール423、自車両測位(ego vehicle positioning)モジュール424、動的/静的対象検出モジュール425、及び知覚及び融合モジュール426により得られたデータをロードするように構成され得る。判断及び計画レイヤ430は、歩行者意図分布予測及び更新モジュール431、速度判断及び計画モジュール432、及び経路計画モジュール433により得られたデータをロードするように構成され得る。車両制御レイヤ440は、判断及び計画レイヤ430により送られたデータに基づいて、車両200に対する水平及び垂直制御を実行するように構成され得る。図4のグレーボックス内のモジュールは、本出願のこの実施形態で提供される車両速度を決定する方法を実施するように構成されたモジュールであることに留意されたい。本出願のこの実施形態において、車両の決定された速度が安全で信頼できるかどうかは、判断及び計画レイヤ430内のグレーの2つのモジュール431及び432に主に依存する。
前述のシナリオは、本出願のこの実施形態で提供されるシナリオの単なる一例であり、本出願のこの実施形態は、このシナリオに限定されないことが理解され得る。
添付図面を参照し、以下では、実施形態を使用することにより、本出願の実施形態における車両速度を決定する方法の具体的な実装について詳細に説明する。
図5は、本出願の一実施形態による、車両速度を決定する方法の概略フローチャートである。本方法は、以下のステップ501~ステップ505を具体的に含むことができる。
ステップ501:車両の周囲の対象の観測情報を取得する。
ステップ502:周囲の対象の観測情報に基づいて、周囲の対象の異なる動作意図の確率分布を計算する。
車両の運転環境において、車両の周囲の対象は、交通に関与し得る対象、例えば、車両の周りの歩行者又は動物を含んでもよいことが理解され得る。本出願のこの実施形態において、車両の周囲の対象は、一例として、車両の周りの歩行者を用いることにより理解され、説明され得る。周囲の対象の観測情報は、周囲の対象の状態を反映することができる情報であり、周囲の対象の各動作意図の確率を予測するために使用することができる。
動作意図は、現在の車線に対する周囲の対象の意図であることが理解され得る。例えば、図6は、歩行者の複数の意図の概略図である。図6において、図解aは、動作意図g1:歩道に沿って前進することを示し、図解bは、動作意図g2:歩道に沿って後退することを示し、図解cは、動作意図g3:車線を真っすぐ横断することを示し、図解dは、動作意図g4:車線を運転方向で斜めに横断することを示し、図解eは、動作意図g5:車線から離れることを示し、図解fは、動作意図g6:車線を運転方向と対向する方向で斜めに横断することを示し、図解gは、動作意図g7:停止を示す。ある場合に、車両の周りに1つの周囲の対象のみ存在する場合、周囲の対象の動作意図は、この1つの周囲の対象のみの動作意図を意味する。例えば、車両の周囲の対象が歩行者Aであると仮定される。各歩行者が2つの有りうる動作意図、すなわち、待機と横断を有すると仮定すると、周囲の対象の動作意図は2つの動作意図、すなわち、Aが待機すること及びAが車線を横断することを含む。別の場合に、車両の周りに少なくとも2つの周囲の対象が存在する場合、周囲の対象の動作意図は、周囲の対象の各々に対応する動作意図の組み合わせを意味する。例えば、車両の周囲の対象が歩行者Aと歩行者Bを含むと仮定される。各歩行者が2つの有りうる動作意図、すなわち、待機と横断を有すると仮定すると、周囲の対象の動作意図は、2×2=4つの動作意図の組み合わせ、すなわち、{Aが待機する,Bが待機する}、{Aが待機する,Bが車線を横断する}、{Aが車線を横断する,Bが待機する}、{Aが車線を横断する,Bが車線を横断する}を含む。
特定の実施の間、車両の周囲の対象の取得された観測情報に基づいて、周囲の対象の各動作意図の確率が計算され得る。周囲の対象の各動作意図の発生確率を使用して、周囲の対象の異なる動作意図の確率分布を取得することができる。発生確率は、各周囲の対象が各動作意図を有する確率である。
一例において、ステップ502は、具体的に、車両が移動する車線に基づく座標系において、周囲の対象の観測情報に基づいて、周囲の対象と車線との間の相対的な位置関係、及び周囲の対象と車線との間の相対的な運動関係を確立することと、周囲の対象と車線との間の相対的な位置関係、及び周囲の対象と車線との間の相対的な運動関係に基づいて、周囲の対象の異なる動作意図の確率分布を計算することを含んでもよい。
車線座標系(すなわち、S-L座標系)において、経路の開始点を起点として使用し、かつ車両が車線内で移動すべき方向が、S軸の正方向として示され、S軸の正方向に垂直な左方向が、L軸の正方向であることが理解され得る。詳細については、図7を参照することができる。
いくつかの実装では、ステップ501及びステップ502において、周囲の対象の各動作意図の発生確率は、前の時点の周囲の対象の観測情報及び次の時点の周囲の対象の観測情報に基づいて具体的に予測されてもよい。具体的な実装には、以下を含んでもよい。S11:車両の周囲の対象の観測情報を取得する。S12:各周囲の対象が新しい周囲の対象であるかどうかを決定し、周囲の対象が新しい周囲の対象である場合はS13を実行し、周囲の対象が新しい周囲の対象でない場合はS14を実行する。S13:周囲の対象の各動作意図の発生確率を初期化する。S14:観測情報に基づいて、周囲の対象の各動作意図の発生確率を更新する。周囲の対象の各動作意図の発生確率が決定された後、各動作意図の発生確率に基づいて周囲の対象の異なる動作意図の確率分布が決定され得ることに留意されたい。
ステップ501(すなわち、S11)で得られる、車両の周囲の対象の観測情報は、具体的に、以下のプロセス、すなわち、図2、図3、又は図4のフロントビューカメラ201、レーダ202、又はGPS203が観測情報を収集することで得られてもよいことに留意されたい。観測情報は、別個の処理のために、図4の知覚レイヤ420の車両/周囲の対象検出モジュール421、自車両測位モジュール424、及び動的/静的対象検出モジュール425に送られる。次いで、3つの処理結果が、データ関連づけ融合及び追跡処理のために、知覚及び融合モジュール426に送られる。ステップ502(すなわち、S12~S14)は、具体的に、図2のCPU205(図3の車載コンピュータシステム220の判断及び計画モジュール222、又は図4の判断及び計画レイヤ430の歩行者意図分布予測及び更新モジュール431)により実施されてもよい。
一例において、S11は、具体的に、フィルタリング、マルチセンサデータの関連づけ及び融合、並びに車両の周りの環境の収集されたデータの追跡などの処理を実行することにより、矩形座標系における周囲の対象の第1の観測情報を取得することを含んでもよい。周囲の対象の第1の観測情報は、周囲の対象の位置、周囲の対象の運動速度、及び周囲の対象の運動向きを含んでもよい。交通に関与する周囲の対象ごとに、周囲の対象の第1の観測情報が取得される必要があることに留意されたい。後続の計算のためのデータ基礎を提供するために、車両位置、車両速度、車両加速度、及び車両進路を含む、自車両の第1の観測情報も取得される必要がある。
一例として、図1に示す交通シナリオが依然として用いられる。歩行者102の第1の観測情報は、S11を通じて取得されてもよく、Opedestrian102={位置:(xpedestrian102,ypedestrian102),運動速度:Vpedestrian102,運動向き:θpedestrian102}として表されてもよい。歩行者103の第1の観測情報は、Opedestrian103={位置:(xpedestrian103,ypedestrian103),運動速度:Vpedestrian103,運動向き:θpedestrian103}として表されてもよい。車両101の第1の観測情報は、Ovehicle101={位置:(xvehicle101,yvehicle101),速度:Vvehicle101,加速度:avehicle101,進路:θvehicle101}として表されてもよい。
特定の実施の間、車両の観点から、周囲の対象が、車両が移動すべき車線に入る可能性を有するかどうかを考慮するために、周囲の対象は、S-L座標系で観測される必要がある。この場合、第1の観測情報の位置は、矩形座標系から、第2の観測情報の位置として使用されるS-L座標系の位置に変換される必要がある。具体的な変換は、矩形座標系における元の位置を、車両が移動すべき車線の方向のマッピング点に垂直にマッピングすることと、運転車線の開始点とマッピング点との間の距離を取得し、その距離をS軸方向の値として使用することと、元の位置とマッピング点との間の距離を計算し、その距離をL軸方向の値として使用することを含んでもよい。図7を参照し、車両周囲の対象-車線モデル(object-lane model)を構成することができる。車両周囲の対象-車線モデルは、S-L座標系を参照座標系として使用し、車両と車線との間の相対的な位置関係、及び車両と車線との間の相対的な運動関係、並びに周囲の対象と車線との間の相対的な位置関係、及び周囲の対象と車線との間の相対的な運動関係を記述するために使用される。したがって、車両周囲の対象-道路モデルは、第2の観測情報を計算するために使用されてもよい。例えば、図7に示す歩行者及び車両については、歩行者の第1の観測情報は位置(xpedestrian,ypedestrian)を含み、車両の第1の観測情報は位置(xvehicle,yvehicle)を含むと仮定される。この場合、図7を参照し、歩行者位置が変換されたS-L座標系における位置は、(spedestrian,lpedestrian)であり、車両の位置が変換されたS-L座標系における位置は、(svehicle,lvehicle)である。
一例として、図1に示す交通シナリオが依然として用いられる。歩行者102の第2の観測情報は、S11を通じて取得されてもよく、Opedestrian102’={(spedestrian102,lpedestrian102),Vpedestrian102,θpedestrian102}として表されてもよい。歩行者103の第2の観測情報は、Opedestrian103’={(spedestrian103,lpedestrian103),Vpedestrian103,θpedestrian103}として表されてもよい。車両101の第2の観測情報は、Ovehicle101’={(svehicle101,lvehicle101),Vvehicle101,avehicle101,θvehicle101}として表されてもよい。
車両の周囲の対象の観測情報が前述の実装に従って取得された後、S12を実行して、各周囲の対象が新しい周囲の対象であるかどうかを決定してもよいことに留意されたい。新しい周囲の対象については、周囲の対象の各意図の発生確率がS13に従って初期化される。既存の周囲の対象については、周囲の対象の各意図の発生確率がS14に従って観測情報に基づいて更新される。S13及びS14の双方において、確率は、周囲の対象と車線と間の相対的な位置関係、及び周囲の対象と車線との間の相対的な運動関係に基づいて計算を通じて取得されることが理解され得る。
S12では、周囲の対象が新しい周囲の対象であるかどうかは、現在の時点で観測された周囲の対象が現在の時点の前に観測されたかどうかを決定することにより決定されてもよい。現在の時点で観測された周囲の対象が現在の時点の前に観測されていない場合、それは、周囲の対象が車両の周りに現れる新しい対象であることを示し、周囲の対象が新しい周囲の対象であると決定され得る。反対に、現在の時点で観測された周囲の対象が現在の時点の前にも観測されていた場合、それは、周囲の対象が現在の時点の前に存在していることを示し、周囲の対象が新しい周囲の対象でないと決定され得る。
S13では、新しい周囲の対象の発生確率が初期化される。周囲の対象が新たに観測されており、周囲の対象の動作意図の他のデータ基礎が存在しないため、発生確率は、周囲の対象の有りうる動作意図の数量に基づいて決定されてもよい。言い換えれば、各有りうる動作意図の発生確率は等しい。例えば、新しい周囲の対象Aが7つの有りうる動作意図を有すると仮定すると、7つの予測される動作意図の全ての発生確率は等しく、すなわち1/7である。
S14では、周囲の対象の各意図の発生確率が観測情報に基づいて更新される。具体的には、周囲の対象の各動作意図の発生確率は、現在の時点に最も近い時点における動作意図の発生確率、現在の時点における周囲の対象の位置及び現在の時点に最も近い時点における周囲の対象の位置、並びにS-L座標系におけるS方向及びL方向の動作意図の更新モデルの平均及び対応する分散に基づいて決定されてもよい。例えば、更新モデルは、ガウス運動モデルでもよい。
例えば、t=0のときの時点で歩行者102のみが観測可能であり、t=1のときの時点で歩行者102及び歩行者103が観測可能であると仮定される。
t=0のときの時点で、矩形座標系における歩行者102の観測情報は、
Figure 0007200371000001

として取得される。歩行者102がS12を通じて新しい周囲の対象として決定された場合、歩行者102の状態及び歩行者102の動作意図の発生確率の分布は初期化される必要がある。具体的な演算には、車両が移動すべき経路path={(x,y),(x,y),(x,y),...,(x,y)}を参照座標系として使用すること(nは、参照座標系に含まれる点の数量である)と、path上に投影された歩行者102の位置(xpedestrian102 t=0,ypedestrian102 t=0)の点(x,y)を計算することと、pathに沿って、pathの開始点(x,y)と投影点(x,y)との間の距離を計算することと、(xpedestrian102 t=0,ypedestrian102 t=0)と投影点(x,y)との間の距離lpedestrian102 t=0を計算することを含んでもよい。この場合、歩行者102の初期化された状態は、{spedestrian102 t=0,lpedestrian102 t=0,vpedestrian102 t=0,bpedestrian102 t=0}でもよく、bpedestrian102 t=0は、t=0のときの時点における歩行者102の複数の動作意図の発生確率の分布である。歩行者102が新しい周囲の対象であるため、
Figure 0007200371000002

が決定される。歩行者102の動作意図には、7つの動作意図、すなわちg1~g7が含まれ、全ての動作意図の確率は等しい(すなわち、1/7)。Ppedestrian102 t=0(g1)は、歩行者102が時点t=0において動作意図g1を有する確率を表し、Ppedestrian102 t=0(g2)は、歩行者102が時点t=0において動作意図g2を有する確率を表し、以下同様であることが理解され得る。詳細は本明細書で説明されない。
時点t=1において、矩形座標系における歩行者102の観測情報及び歩行者103の観測情報は、それぞれ、Opedestrian102 t=1={xpedestrian102 t=1,ypedestrian102 t=1,vpedestrian102 t=1,θpedestrian102 t=1}及びOpedestrian103 t=1={xpedestrian103 t=1,ypedestrian103 t=1,vpedestrian103 t=1,θpedestrian103 t=1}である。S12における決定の後、歩行者103が新しい周囲の対象であると決定された場合、歩行者103の状態及び歩行者103の動作意図の分布は初期化される必要があり、歩行者102が既存の周囲の対象であると決定された場合、歩行者102の各動作意図の発生確率は観測情報に基づいて更新される。歩行者103の状態及び意図の分布を初期化する処理については、時点t=0における歩行者102の初期化処理の説明を参照する。詳細は本明細書で再度説明されない。歩行者102の各動作意図を更新する処理は、具体的に以下のステップを含んでもよい。ステップ1:歩行者102の観測情報Opedestrian102 t=1={xpedestrian102 t=1,ypedestrian102 t=1,vpedestrian102 t=1,θpedestrian102 t=1}に基づいて、垂直投影及び距離計算を通じて、時点t=1でのS-L座標系における歩行者102の位置及び速度spedestrian102 t=1,lpedestrian102 t=1,vpedestrian102 t=1を取得する。ステップ2:ガウス運動モデルに従って、時点t=1における歩行者102の動作意図の分布bpedestrian102 t=1を更新する。具体的には、各動作意図の発生確率が更新される。ステップ2については、時点t=1における動作意図g1の発生確率が説明のため一例として用いられる。具体的には、更新後の時点t=1における動作意図g1の発生確率は、以下の式(1)に従って計算されてもよい:
Figure 0007200371000003

ここで、P g1及びP g1は、以下の式(2)に従って計算を通じて取得されてもよい:
Figure 0007200371000004

ここで、μ g1及びμ g1は、ガウス運動モデルを使用することによるS-L座標系におけるS方向及びL方向の歩行者102の動作意図g1の平均である。σ及びσは、ガウス運動モデルを使用することによるS-L座標系におけるS方向及びL方向の歩行者102の動作意図g1の標準偏差である。
時点t=1における歩行者102の動作意図g2~g7の発生確率を更新する方法は、時点t=1における動作意図g1の発生確率を更新する方法と同様であることが理解され得る。詳細は本明細書で再度説明されない。更新後、時点t=1において、歩行者102の動作意図の発生確率の分布は
Figure 0007200371000005

として表されてもよい。Ppedestrian102 t=1(g1)は、歩行者102が時点t=1において動作意図g1を有する確率を表し、Ppedestrian102 t=1(g2)は、歩行者102が時点t=1において動作意図g2を有する確率を表し、以下同様であることが理解され得る。詳細は本明細書で説明されない。
歩行者102の動作意図の発生確率の分布を計算する方法において、さらなる周囲の対象をカバーし、各周囲の対象の各有りうる動作意図の発生確率を包括的に計算するために、粒子の概念が導入されてもよいことに留意されたい。各動作意図の発生確率は、動作意図に含まれる粒子の数量により表される。具体的には、動作意図g1が大量の粒子を含む場合、それは、動作意図の発生確率が比較的高いことを示す。反対に、動作意図g1が少量の粒子を含む場合、それは、動作意図の発生確率が比較的低いことを示す。
例えば、前述の第1の実装におけるS13の対応する例では、動作意図の発生確率の分布は、時点t=0において
Figure 0007200371000006

として初期化される。この場合、発生確率の分布は、予め設定された数量の粒子(すなわち、全ての動作意図の数量の整数倍、例えば、700)を使用することにより表されてもよい。図8に示すように、各動作意図は、同数量の粒子を含む粒子集合に対応する。例えば、7つの動作意図を含む700個の粒子については、各動作意図の発生確率は1/7である。したがって、各動作意図は100個の同じ粒子の集合に対応し、各粒子の重みは1/700である。
700個の粒子のうち1つの状態は、
Figure 0007200371000007

として表されてもよく、jは、車両の第jの周囲の対象を表し、wは、粒子の重みを表す。粒子の集合は、{particle,particle,...,particle}として表されてもよく、mは、粒子の総数量、すなわち700である。例えば、車両と、車両の周囲の対象:歩行者1及び歩行者2について、各粒子の状態は、
Figure 0007200371000008

として表されてもよく、wiは、particleの重みを表し、重みは、粒子に対応する動作意図のリスク度を表すために使用される。具体的な説明については、以下のステップ503~ステップ505の関連する説明を参照する。
いくつかの他の実装では、ステップ501及びステップ502において、具体的に、周囲の対象の動作意図の確率分布は、訓練された機械学習モデルを使用することにより、現在の周囲の対象の観測情報に基づいて出力されてもよい。周囲の対象の観測情報は、前述の実装において具体的に処理された、周囲の対象の位置、運動速度、及び運動向きを含む観測情報でもよく、あるいは、周囲の対象を含む現在収集された画像でもよい。
この実装において、ある場合に、観測情報が、周囲の対象の位置、運動速度、及び運動向きを含む前述の処理された観測情報である場合、第1の機械学習モデルが、各動作意図の学習された発生確率に対応する大量の履歴観測情報及び各動作意図の対応する学習された発生確率に基づいて訓練され、予め構築されて、訓練された第1の機械学習モデルを取得してもよい。次いで、ステップ501で得られた周囲の対象の観測情報が訓練された第1の機械学習モデルに入力されてもよく、周囲の対象の各動作意図の発生確率が出力される。
別の場合に、観測情報が、周囲の対象を含む現在収集された画像である場合、第2の機械学習モデルが、各動作意図の学習された発生確率に対応する大量の履歴画像及び各動作意図の対応する学習された発生確率に基づいて訓練され、予め構築されて、訓練された第2の機械学習モデルを取得してもよい。次いで、ステップ501で得られた周囲の対象の観測情報(すなわち、周囲の対象を含む現在収集された画像)が訓練された第2の機械学習モデルに入力されてもよく、画像に含まれる周囲の対象の各動作意図の発生確率が出力される。
前述の2つの実装の双方において、周囲の対象の複数の動作意図のうち各々の発生確率は、周囲の対象の観測情報に基づいて予測できることが理解され得る。これは、車両の車両速度のその後の正確な決定のために不可欠なデータ基礎を提供し、したがって、自動運転技術などのインテリジェントな運転技術を使用する車両の安全性及び信頼性を改善する。
ステップ503:車両が車両の現在の位置から異なる動作意図に対応するリスクエリアに移動するため移動時間に基づいて、確率分布に対する再分布計算を実行して、異なる動作意図の確率再分布を取得し、異なる動作意図に対応するリスクエリアは、車両が移動する車線内、異なる動作意図を有する周囲の対象が通るエリアである。
ステップ504:車両が異なる動作意図に対応するリスクエリアに移動するため移動時間に基づいて、異なる動作意図を有する周囲の対象の運動状態変化を予測する。
決定された車両速度がより安全かつ信頼できることを確実にするために、車両の車両速度は、少なくとも、周囲の対象の動作意図の確率再分布及び異なる動作意図を有する周囲の対象の運動状態変化に基づいて決定される必要があることが理解され得る。周囲の対象の動作意図の確率再分布と周囲の対象の運動状態変化の双方が、車両が周囲の対象の異なる動作意図に対応するリスクエリアに移動するため移動時間に基づいて計算を通じて取得される必要がある。移動時間は、各動作意図のリスク度、すなわち、周りの対象が動作意図により動いたときの車両との衝突の可能性を量子化するために使用される。
動作意図の下での衝突までの時間は、車両が周囲の対象の各動作意図に対応するリスクエリアに移動するために必要とされる移動時間であることが理解され得る。例えば、図9に示すように、歩行者の動作意図g3(すなわち、車線を真っすぐ横断する)については、リスクエリアは、車両が移動する車線内、車線を真っすぐ横断する意図を有する歩行者が通るエリアAである。この場合、衝突までの対応する時間は、車両が現在の位置からエリアAに移動するために必要とされる移動時間ttcg3である。歩行者の動作意図g4(すなわち、車線を運転方向で斜めに横断すること)については、リスクエリアは、車両が移動する車線内、車線を運転方向で斜めに横断する意図を有する歩行者が通るエリアBである。この場合、衝突までの対応する時間は、車両が現在の位置からエリアBに移動するために必要とされる移動時間ttcg4である。
いくつかの実装において、ステップ503の前、本出願のこの実施形態では、車両が車両の現在の位置から異なる動作意図に対応するリスクエリアに移動するため移動時間は、ステップ501及び以下のS21~S24でさらに計算されてもよい。S21:車両の観測情報を取得する。S22:車両が移動する車線に基づく座標系において、車両の観測情報及び周囲の対象の観測情報に基づいて、車両と車線との間の相対的な位置関係及び車両と車線との間の相対的な運動状態、並びに周囲の対象と車線との間の相対的な位置関係及び周囲の対象と車線との間の相対的な運動状態を確立する。S23:周囲の対象と車線との間の相対的な位置関係、及び周囲の対象と車線との間の相対的な運動状態に基づいて、異なる動作意図に対応するリスクエリアを決定する。S24:車両と車線との間の相対的な位置関係、車両と車線との間の相対的な運動状態、及び異なる動作意図に対応するリスクエリアに基づいて、車両が車両の現在の位置から異なる動作意図に対応するリスクエリアに移動するため移動時間を計算する。S21の具体的な実装については、ステップ501における周囲の対象の観測情報の取得の関連する説明を参照する。S22の具体的な実装については、S11における座標系間の変換の関連する説明を参照する。
動作意図については、その動作意図の下での衝突までの時間が長い場合、それは、その動作意図の下で発生するリスクの確率が低い、すなわちリスク度が低いことを示すことが理解され得る。反対に、その動作意図の下での衝突までの時間が短い場合、それは、その動作意図の下で発生されるリスクの確率が比較的高い、すなわちリスク度が高いことを示す。例えば、図9の歩行者では、ttcg4は明らかにttcg3より大きく、歩行者が車線を真っすぐ横断する場合、歩行者が車両と衝突する高い確率があり、リスク度が高いことを示している。しかしながら、歩行者が車線を運転方向で斜めに横断する場合、車線を真っすぐに横断する動作意図の下での高い衝突確率と比較して、車両との衝突の可能性は低減され、リスク度が低減される。
一例において、衝突までの時間が決定された後、ステップ503は、以下のS31~S32を通じて具体的に実施されてもよい。S31:確率分布に対する粒子処理(particle processing)を実行し、異なる動作意図に対応する粒子の数量は、異なる動作意図の確率分布を表すために使用される。S32:計算を通じて取得され、車両が異なる動作意図に対応するリスクエリアに移動するために必要とされる移動時間に基づいて、異なる動作意図に対応する粒子の重みを調整して、異なる動作意図の確率再分布を取得する。
S31の詳細については、図8及び前述の実施形態の関連する説明を参照する。詳細は本明細書で再度説明されない。
S32における車両が異なる動作意図に対応するリスクエリアに移動するため移動時間の計算については、S21~S24の関連する部分の前述の説明を参照する。具体的な原理は、本明細書で再度説明されない。より明確な説明のために、以下では、一例を用いて、粒子処理の後に移動時間を計算する一例示的なプロセスについて説明する。例えば、車両と、車両の周りの歩行者1及び歩行者2について、
Figure 0007200371000009

が仮定される。同じ動作意図gpedestrian の下で、歩行者1のリスクエリアが決定され、車両が歩行者1の動作意図に対応するリスクエリアに移動するために必要とされる移動時間ttcpedestrian1 が計算され、歩行者2のリスクエリアが決定され、車両が歩行者2の動作意図に対応するリスクエリアに移動するために必要とされる移動時間ttcpedestrian2 が計算される。歩行者1及び歩行者2の衝突の可能性を最大限に低減するために、歩行者に対応する移動時間のうちより短い移動時間が粒子iの移動時間ttcとして選択され、すなわち、ttc=min(ttcpedestrian1 ,ttcpedestrian2 )である。
S32において、異なる動作意図に対応する粒子の重みは、計算を通じて取得され、かつ車両が異なる動作意図に対応するリスクエリアに移動するために必要とされる移動時間に基づいて、調整され、異なる動作意図の確率再分布を取得する。各粒子の移動時間(すなわち、衝突までの時間)は、特定の意図を有する周囲の対象の衝突のリスク度を表し、より短い移動時間は、より高いリスク度を示す。したがって、高いリスク度の動作意図への注意を高めるために、高いリスク度を有する粒子の重みが、以下の式(3)に従って移動時間に基づいて増加されてもよい:
Figure 0007200371000010

ここで、Wはリスク係数を表し、εは実効計算定数を表す。より小さい移動時間ttcは、計算を通じて得られる、粒子のリスク度を示す粒子のより大きい重みを示す。このようにして、粒子のリスク度を強調することができる。さらに、計算を収束できるようにするために、重みwnew1 に対して正規化処理がさらに実行されてもよい。具体的には、粒子iの重みwnew2 は、以下の式(4)に従って計算されてもよい:
Figure 0007200371000011
前述の説明によれば、各動作意図のリスク度は、車両が各動作意図に対応するリスクエリアに移動するために必要とされる移動時間に基づいて決定できることが理解され得る。言い換えれば、異なる動作意図の確率再分布を実現することができる。これは、車両の車両速度のその後の正確な決定に不可欠なデータ基礎を提供し、したがって、自動運転技術などのインテリジェントな運転技術を使用する車両の安全性及び信頼性を改善する。
一例において、ステップ504では、具体的に、異なる動作意図を有する周囲の対象の運動状態変化は、以下のS41及びS42を通じて予測されてもよい。S41:車両が異なる動作意図に対応するリスクエリアに移動するため移動時間に基づいて、異なる動作意図を有する周囲の対象が動作意図を変える確率を決定する。S42:異なる動作意図を有する周囲の対象が動作意図を変える確率、及びランダム確率に基づいて、異なる動作意図を有する周囲の対象の運動状態変化を予測する。
S41において、車両及び周囲の対象に関連する相互作用確率が、各動作意図の下での衝突までの時間ttcに基づいてさらに決定されてもよいことが理解され得る。ある場合に、周囲の対象のある動作意図の下での相互作用確率が過度に高い場合、その動作意図が、相互作用確率に基づいて目標意図に変更されてもよい。この目標意図は、調整後の周囲の対象の動作意図である。例えば、歩行者1の動作意図g1の下での衝突までの時間ttcに対応する相互作用確率がかなり高い場合、動作意図g2が、相互作用確率に基づいて歩行者1の目標意図として決定されてもよい。別の場合に、周囲の対象のある動作意図の下での相互作用確率が比較的低い場合、相互作用確率に基づいて、その動作意図が依然として目標意図であると決定されてもよい。この目標意図は、調整前の周囲の対象の動作意図である。例えば、歩行者1の動作意図g1の下での衝突までの時間ttcに対応する相互作用確率がかなり低い場合、動作意図g1が、相互作用確率に基づいて歩行者1の目標意図として決定されてもよい。
周囲の対象が特定の動作意図を有するときに周囲の対象と車両との間の衝突までの時間が比較的短い、すなわち、リスク度が比較的高い場合、周囲の対象は一般に慎重であることが理解され得る。反対に、周囲の対象が特定の動作意図を有するときに周囲の対象と車両との間の衝突まで時間が比較的長い、すなわち、リスク度が比較的低い場合、周囲の対象は一般的にリラックスしている。これを考慮して、衝突までの時間ttcに基づく計算を通じて取得される相互作用確率が導入され、それにより、歩行者の心理にマッチした運動状態を現実的にシミュレートすることができる。特定の実施の間、歩行者1と車両との間の衝突まで時間はttcpedestrian1 であり、歩行者2と車両との間の衝突までの時間はttcpedestrian2 であると仮定される。例えば、歩行者1及び車両に関連する相互作用確率は、
Figure 0007200371000012

でもよい。同様に、歩行者2及び車両に関連する相互作用確率は、
Figure 0007200371000013

でもよく、Winteractは、相互作用確率係数である。
特定の実施の間、S42において、周囲の対象の運動状態変化を決定するために、周囲の対象の状態予測モデルと計算された相互作用確率とに基づいて、周囲の対象の相互作用運動モデル又は周囲の対象の直線運動モデルを使用するかどうかが決定される。歩行者はランダムに振る舞い、歩行者及び車両に関連する相互作用確率もランダムである。したがって、ランダム確率Prandomが導入されて、初期期待値を計算するために使用されるよう想定されるモデルを決定する。具体的な決定プロセスには、以下のステップが含まれる。ステップ1:相互作用確率Pがランダム確率Prandomより大きいかどうかを決定する。相互作用確率Pがランダム確率Prandomより大きい場合にはステップ2を実行し、あるいは相互作用確率Pがランダム確率Prandomより大きくない場合にはステップ3を実行する。ステップ2:周囲の対象の相互作用運動モデルを使用することにより、異なる動作意図を有する周囲の対象の運動状態変化を予測する。ステップ3:周囲の対象の直線運動モデルを使用することにより、異なる動作意図を有する周囲の対象の運動状態変化を予測する。
説明の一例として、図10のシナリオを用いる。歩行者1の動作意図は、g3:車線を真っすぐ横断することであると仮定される。周囲の対象の相互作用運動モデルが使用されない場合、歩行者1は、車両の存在を無視して、図1における位置(2)に動く。周囲の対象の相互作用運動モデルが使用される場合、歩行者1は、安全のため車両を回避するために位置(1)に動く可能性がかなり高い。同様に、歩行者2と車両との間の衝突までの時間は比較的長く、歩行者2及び車両に関連する相互作用確率は比較的低いため、周囲の対象の直線運動モデルの使用において歩行者2が位置(4)に動く可能性は、周囲の対象の相互作用運動モデルの使用において歩行者2が位置(3)に動く可能性より大きい。
周囲の対象の直線運動モデルでは、周囲の対象の位置及び速度の観測情報の誤差が比較的大きい。したがって、周囲の対象の直線運動モデルにおいて、周囲の対象の運動状態は、比較的大きい分散を有するガウス分布に設定されてもよい。周囲の対象の直線運動モデルは、具体的に以下のように定義される:
Figure 0007200371000014
Δtは、予測された時間ステップを表し、通常は比較的小さい。例えば、Δtは、0.3秒に設定されてもよい。歩行者の動作意図は、Δt内で変わらないままである、すなわち、gpedestrian’=gpedestrianであると仮定される。さらに、f(gpedestrian)及びf(gpedestrian)は、それぞれ、S-L座標系におけるS方向及びL方向の異なる動作意図の運動向き成分を表す。言い換えれば、異なる動作意図を有する周囲の対象の運動向きは異なる。μpedestrian s及びμpedestrian lは、それぞれ、S方向及びL方向における周囲の対象の直線運動モデルの運動距離の平均を表し、σpedestrian s 及びσpedestrian l は、それぞれ、S方向及びL方向における周囲の対象の直線運動モデルの運動距離の分散を表し、μpedestrian v及びσpedestrian v は、それぞれ、S方向における周囲の対象の直線運動モデルの運動速度の平均と、L方向におけるの周囲の対象の直線運動モデルの運動速度の分散を表す。
周囲の対象の相互作用運動モデルの具体的な定義は、以下のとおりである:
Figure 0007200371000015

(vpedestrian,Δt,gpedestrian)及びf(vpedestrian,Δt,gpedestrian)は、それぞれ、異なる動作意図を有する歩行者が車両と相互作用するときのS-L座標系におけるS方向及びL方向の歩行者の運動変化関数を表す。
ステップ503及びステップ504は順次的でないことに留意されたい。ステップ503は、ステップ504の前又は後に実行されてもよく、あるいはステップ503及びステップ504は同時に実行されてもよい。具体的な方法は限定されない。
ステップ505:異なる動作意図の確率再分布、異なる動作意図を有する周囲の対象の運動状態変化、及び異なる移動速度制御動作下の車両の運動状態変化に基づいて、車両の移動速度を決定する。
車両の適切な車両速度は、3つのファクタ、すなわち、異なる動作意図の確率再分布、異なる動作意図を有する周囲の対象の運動状態変化、及び異なる移動速度制御動作下の車両の運動状態変化に基づいて決定されてもよいことが理解され得る。ある場合に、車両の加速度は、前述の3つのファクタに基づいて決定されてもよく、車両は、この加速度で移動するように制御される。別の場合に、車両の加速度は、前述の3つのファクタに基づいて決定されてもよく、それにより、車両が移動すべき移動速度は、車両の加速度及び現在の速度に基づいて決定され、車両は、決定された移動速度で移動するように制御される。
特定の実施の間、ステップ505は、以下のS51~S53を通じて具体的に実施されてもよい。S51:異なる動作意図の確率再分布、異なる動作意図を有する周囲の対象の運動状態変化、及び異なる移動速度制御動作下の車両の運動状態変化に基づいて、異なる移動速度制御動作下でもたらす車両の移動効果を推定する。S52:異なる移動速度制御動作下でもたらす車両の移動効果に基づいて、異なる移動速度制御動作から目標移動速度制御動作を選択する。S53:目標移動速度制御動作に基づいて車両の移動速度を決定する。
具体的には、S51において、車両状態予測モデルが確立されてもよく、車両状態予測モデルに基づいて、異なる移動速度制御下の車両の移動効果、すなわち、車両が異なる加速度で移動するときの車両の運動状態変化が予測されてもよい。
車両状態予測モデルでは、車両の位置及び速度などの状態パラメータの観測情報の誤差は比較的小さい。したがって、車両状態予測モデルにおいて、車両の運動状態は、比較的小さい分散を有するガウス分布に設定されてもよい。車両状態予測モデルは、具体的に以下のとおり定義される:
Figure 0007200371000016
μvehicle s及びμvehicle lは、それぞれ、S方向及びL方向における車両状態予測モデルの運動距離の平均を表し、σvehicle s 及びσvehicle l は、それぞれ、S方向及びL方向における車両状態予測モデルの運動距離の分散を表し、μvehicle v及びσvehicle v は、それぞれ、S方向における車両状態予測モデルの運動速度の平均と、L方向における車両状態予測モデルの運動速度の分散を表す。
周囲の対象の動作意図が明確でないことを考慮し、部分観測マルコフ決定過程(英語:Partially Observable Markov Decision Process、略称POMDP)が、最適な速度で判断及び計画を実行するために使用されてもよいことが理解され得る。POMDPは、部分観測の特徴を有することが理解され得る。具体的には、不確かな環境における観測不能な部分の動作意図が、一般的な数学的モデルを使用することにより判断及び計画が実行された後、予測される。数学的モデルは、一般に、状態集合S、動作集合A、状態遷移関数T、観測集合O、観測関数Z、報酬関数Rを含むことができる。図1に対応するシナリオを参照し、数学的モデルに含まれる内容は以下のとおり定義される。
状態空間Sは、環境内の動的エンティティ及び静的エンティティの全ての有りうる状態の集合であり、すなわち、車両、歩行者1(すなわち、前述の説明における歩行者102)、及び歩行者2(すなわち、前述の説明における歩行者103)である。
Figure 0007200371000017
動作空間Aは、自動運転又は無人車両により使用され得る加速動作の集合である。説明の容易さのため、抽出された共通の加速度範囲は、通常離散化され、あるいは対応するギアとして理解されてもよく、例えば、A={-3,-2,-1,0,0.5,1,2,3}である。言い換えれば、車両は、8つの異なる初期加速度で移動し得る。
状態遷移関数(T)は、POMDPの重要な部分である。この関数Tは、ある時間にわたる状態遷移過程を説明し、最適動作の選択のための判断根拠を提供する。車両については、状態遷移関数Tは、車両が、状態{svehicle,lvehicle,vvehicle}においてAの中の加速度aを使用した後、状態{svehicle’,lvehicle’,vvehicle’}に遷移することを示すことができる。歩行者1については、状態遷移関数Tは、歩行者1が現在の状態{spedestrian 1,lpedestrian 1,vpedestrian 1,gpedestrian 1}において動作意図gpedestrian 1の下で動いたとき、状態{spedestrian 1’,lpedestrian 1’,vpedestrian 1’,gpedestrian 1’}に遷移することを示す。
観測空間Oは、一般に状態空間に対応し、車両、歩行者1、及び歩行者2の観測情報セット、すなわち、
Figure 0007200371000018

を表す。Ovehicle={位置:(xvehicle,yvehicle),速度:Vvehicle,加速度:avehicle,進路:θvehicle}である。Opedestrian 1={位置:(xpedestrian 1,ypedestrian 1),運動速度:Vpedestrian 1,運動向き:θpedestrian 1}である。Opedestrian 2={位置:(xpedestrian 2,ypedestrian 2),運動速度:Vpedestrian 2,運動向き:θpedestrian 2}である。
観測関数Zは、加速度aを用いた後に車両、歩行者1、及び歩行者2が状態s’に遷移した後の観測関数zを取得する確率、すなわち、Z(z,s’,a)=P(z|s’,a)を表す。車両と歩行者の位置及び速度は、実際の位置及び速度に対するガウス分布にマッチすると仮定される。車両の位置及び速度の観測情報の誤差は比較的小さく、歩行者の位置及び速度の観測情報の誤差は比較的大きいため、車両のガウス分布の分散は歩行者のガウス分布の分散と異なる。車両のガウス運動モデルのガウス分布の分散は比較的小さく、歩行者の運動モデルのガウス分布の分散は比較的大きい。
報酬関数Rewardは、決定された加速度に関する定量的な評価を行うために使用される。評価は、衝突度、又は衝突度と交通障害度、又は衝突度と移動不快度、又は衝突度と交通障害度と移動不快度に基づいて実行されてもよい。衝突度は安全性を反映し、交通障害度は交通効率を反映し、移動不快度は快適さを反映することができる。あるいは、決定された加速度は、目的に基づいて評価されてもよいことに留意されたい。
例えば、決定された加速度が衝突度R_colのみに基づいて評価される場合、Reward=R_colである。別の例として、決定された加速度が衝突度R_col、交通障害度R_move、及び移動不快度R_actionに基づいて評価される場合、Reward=R_col+R_move+R_actionである。
POMDPにおけるいくつかの定義が説明された後、以下では、ステップ505におけるS51の一例示的な具体的な実装について説明する。
車両の全ての可能な加速度がトラバースされる(traversed)可能性があり、動的に変化する[svehicle’,lvehicle’,vvehicle’]は、対応して車両状態予測モデルを使用することにより予測され、[spedestrian’,lpedestrian’,vpedestrian’,gpedestrian’]と比較されて、車両が周囲の対象と衝突するかどうかを決定することが理解され得る。衝突が発生しない場合、加速度に対応する衝突度が0であると決定され、あるいは、衝突が発生する場合、車両が加速度を使用した後に得られる速度は、vvehicle’として決定され得る。言い換えれば、衝突度R_colは、初期期待値Rewardとして直接使用される。例えば、移動効果は、以下の式(5)に従って計算を通じて取得されてもよい:
Figure 0007200371000019

ここで、w1は指定された固定係数であり、vvehicle’は、現在の加速度が使用された後の、車両の衝突における速度を表し、cは定数である。
例えば、車両と歩行者が存在すると仮定される。動作集合Aの中の8つの初期加速度に対して、衝突が発生する3つの加速度が決定される。この場合、3つの加速度に対応する衝突度R_col1、R_col2、及びR_col3は計算を通じて別個に取得することができ、衝突が発生しない他の5つの加速度の各々に対応する衝突度は0である。
前述の方法で、異なる移動速度制御動作(すなわち、異なる加速度)の下での対応する移動効果が得られた後、S52における「異なる移動速度制御動作下でもたらす車両の移動効果に基づいて、異なる移動速度制御動作から目標移動速度制御動作を選択する」動作が実行されてもよい。動作意図の発生確率分布bは粒子化され(particlized)、粒子集合P={particle,particle,...,particle}が得られ、これは、発生確率分布bと重みwを有する粒子集合とに関連するマッピング関係b→Pを表すことが理解され得る。次いで、様々な動作意図に含まれる粒子の数量と粒子集合内の粒子の重みに基づいて、目標期待値が決定され得る。例えば、歩行者1の動作意図g1については、動作意図g1の発生確率は、
Figure 0007200371000020

として表されてもよく、ここで、kは、以下の条件:particle動作意図gpedestrian 1 =g1を満たし、wは、particleの重みを表す。
S51では、一例として、動作処理は以下のステップを含んでもよい。マッピング関係:現在の初期確率分布b→P={particle,particle,...,particle}に基づいて、N個のステップを予測し、ここで、予測された時間ステップはΔtであり、T=NΔtを得ることができる。加速度aについては、a∈A={-3,-2,-1,0,0.5,1,2,3}であり、N個のステップの移動効果は、
Figure 0007200371000021


であり、ここで、
Figure 0007200371000022

である。γは割引ファクタ(discount factor)であり、一般に1より小さい値である。予測されるステップの数量Nが増加するとき、現在の時点における判断への割引ファクタの影響はより小さく、割引ファクタは時系列減衰ファクタと同等である。各動作意図の発生確率は、累積される同じ動作意図の粒子により具体的に反映され、同じ動作意図の粒子の数量は、動作意図の発生確率を反映することに留意されたい。各動作意図の衝突のリスク度は、各粒子の重みwに具体的に反映される。
別の例において、各動作意図の衝突時間は相互作用確率にさらに反映されてもよく、調整された目標意図が相互作用確率に基づいて決定され、目標加速度を用いる車両の移動効果に対応する値が目標意図に基づいて計算される。したがって、N個のステップの目標期待値は、具体的に以下の式:
Figure 0007200371000023

に従って具体的に計算されてもよく、ここで、
Figure 0007200371000024

である。各動作意図の発生確率は、具体的に以下において反映される、すなわち、同じ動作意図に対応するある数量の粒子が累積され、同じ動作意図に対応する粒子の数量が動作意図の発生確率を反映することに留意されたい。各動作意図の下で発生する衝突のリスク度は、具体的に以下において反映される、すなわち、相互作用確率が衝突時間に基づいて計算され、各動作意図に対応する目標意図が決定され、Reward(particle,a)が目標意図に基づいて計算される。
さらに別の例において、車両速度を決定することに対してリスク度の重要性をより顕著に反映し、決定された車両速度の信頼性及び安全性を改善するために、前述の2つの例の方法をさらに組み合わせて、各動作意図に基づいて、目標加速度を使用して車両の移動効果に対応する値を計算してもよいことが理解され得る。同じ動作意図に対応する粒子を表す粒子重みは、車両速度に対するリスク度の影響を反映し、相互作用確率も、車両速度に対するリスク度の影響を反映する。例えば、N個のステップの移動効果に対応する値は、具体的に以下の式:
Figure 0007200371000025


に従って計算されてもよく、ここで、
Figure 0007200371000026

である。各動作意図の発生確率は、具体的に以下において反映される、すなわち、同じ動作意図に対応するある数量の粒子が累積され、同じ動作意図に対応する粒子の数量が動作意図の発生確率を反映することに留意されたい。各動作意図の下で発生する衝突のリスク度は、具体的に以下において反映される。すなわち、第1に、各動作意図に対応する各粒子の重みwが使用され、第2に、相互作用確率が衝突時間に基づいて計算され、各動作意図に対応する運動状態変化が決定され、Reward(particle,a)が各動作意図に対応する運動状態変化に基づいて計算される。
前述の例示的な計算方法によれば、Aにおける8つの初期加速度がトラバースされてもよいことが理解され得る。具体的には、各加速度が目標加速度として使用されて、目標加速度に対応する移動効果を取得する。最後に、8つの対応する移動効果を計算することができ、G(b-3)、G(b-2)、G(b-1)、G(b0)、G(b0.5)、G(b1)、G(b2)、及びG(b3)として表すことができる。移動効果は、様々な現在の動作意図の確率再分布に基づいて目標加速度aが使用された後に得られる報酬関数の値を示すために用いられることに留意されたい。移動効果に対応する、より小さい値は、不十分な安全性を示す。反対に、移動効果に対応する、より大きい値は、良好な安全性を示す。
これに基づいて、移動効果に対応する値の意味に従い、移動効果に対応する、より大きい値は、良好な安全性を示すことが理解され得る。この場合、S52において、移動効果に対応する最大値が、具体的に、移動効果に対応する複数の値から選択されてもよく、最大値に対応する加速度が、目標移動速度制御動作、すなわち目標加速度として決定される。
例えば、決定された8つの目標期待値:G(b-3)、G(b-2)、G(b-1)、G(b0)、G(b0.5)、G(b1)、G(b2)、及びG(b3)において、最大値はG(b2)であると仮定される。この場合、G(b2)に対応する対応初期加速度2が目標加速度として選択される。言い換えれば、目標移動速度制御動作a=2である。
S53では、ある場合、目標加速度はコントローラに直接送られてもよく、コントローラは、目標加速度で移動するよう車両を制御する。別の場合、車両の目標速度は、目標加速度及び現在の速度に基づいて計算されてもよい。例えば、目標速度は、v=v+a*Δtであり、ここで、aは目標加速度であり、vは現在の速度である。次いで、目標速度vがコントローラに送られ、コントローラは、目標速度vで移動するよう車両を制御する。
前述の実施において、移動効果に対応するReward値は衝突度R_colのみに基づいて決定され、あるいは、移動効果に対応するReward値は交通障害度R_move及び/又は移動不快度R_actionに基づいて決定されてもよいことに留意されたい。交通障害度R_moveは、車線速度制限と、車両が目標加速度を使用したときに達せられる車両速度とに基づいて決定され、さらに、初期期待値Rewardが、車両が目標加速度を使用したときに存在する交通障害度R_moveに基づいて決定される。この場合、Reward=R_col+R_moveであり、
Figure 0007200371000027

であり、ここで、w2は指定された固定係数であり、vvehicle’は、車両が目標初期加速度を使用したときに達せられる車両速度であり、vmaxは現在の車線の速度制限である。移動不快度R_actionは、目標加速度、及び目標加速度と車両の現在の車両速度との間の差に基づいて決定される。あるいは、初期期待値Rewardが、車両が目標加速度を使用したときに存在する移動不快度R_actionに基づいて決定される。この場合、Reward=R_col+R_actionであり、R_action=w*f(actioncurrent)+w*f(actioncurrent-actionlast)であり、ここで、w3及びw4は指定された固定係数であり、actioncurrentは、現在の目標加速度を表し、actionlastは、前の時点で使用された目標加速度を表し、f(actioncurrent)は、過度に高い加速度により引き起こされる移動の不快さを抑制するために、現在の目標加速度が使用されたときに生成される快適さのリターンを表し、f(actioncurrent-actionlast)は、現在の目標加速度変化に対して生成される快適さのリターンを表し、過度に大きい加速度変化により引き起こされる移動の不快さを抑制するために使用される。あるいは、初期期待報酬は、衝突度R_col、交通障害度R_move、及び移動不快度R_actionに基づいて決定されてもよいことに留意されたい。移動効果に対応するReward値を決定する各方法については、衝突度R_colのみに基づいて、移動効果に対応するReward値を決定する前述の実施を参照する。詳細は本明細書で再度説明されない。
いくつかの実装では、説明の一例として、初期期待値Rewardが衝突度R_colに基づいて決定される実装のみが用いられることに留意されたい。初期期待値が別のパラメータに基づいて決定される実装は、この実装と同様であり、詳細は本明細書で再度説明されない。
ステップ503及びステップ504の特定の実施は、具体的に、図2のCPU205(図3の車載コンピュータシステム220における判断及び計画モジュール222、又は図4の判断及び計画レイヤ430における歩行者意図分布予測及び更新モジュール431)により実現され得ることに留意されたい。ステップ505は、具体的に、図2のCPU205(図3の車載コンピュータシステム220の判断及び計画モジュール222における速度判断及び計画ユニット、又は図4の判断及び計画レイヤ430における速度判断及び計画モジュール432)により実現されてもよい。
本出願のこの実施形態で提供される車両速度を決定する方法による、自動運転等のシナリオでは、動作意図の確率分布は、周囲の対象の観測情報に基づいて計算されてもよく、異なる動作意図の確率再分布は、車両が現在の位置から異なる動作意図に対応するリスクエリアに移動するため移動時間に基づいて計算されることが習得できる。さらに、異なる動作意図を有する周囲の対象の運動状態変化は、車両が異なる動作意図に対応するリスクエリアに移動するため移動時間に基づいて予測される。最後に、車両の移動速度は、異なる動作意図の確率再分布、異なる動作意図を有する周囲の対象の運動状態変化、及び異なる移動速度制御動作下の車両の運動状態変化に基づいて決定される。
したがって、車両の移動過程において、車両の周囲の対象の複数の動作意図に対して、各動作意図の確率を、周囲の対象の観測情報に基づいて予測することができる。さらに、各動作意図に対応し、かつ車両の各加速度の制御下である、周囲の対象と車両と間の衝突のリスク度が予測される。次いで、各動作意図の確率と衝突のリスク度に基づいて、車両速度が決定される。このようにして、車両速度を決定する間、周囲の対象の各有りうる動作意図が考慮され、各動作意図に対応し、かつ車両の各加速度の制御下である、周囲の対象と車両と間の衝突のリスク度がさらに考慮される。このようにして、発生する可能性がより低い、周囲の対象と車両との間の高いリスクは無視されない。したがって、決定された移動速度は現在の運転環境により適切であり、車両の移動中の潜在的な安全性リスクが低減される。
さらに、本出願の一実施形態は、車両速度を決定する装置をさらに提供する。図11を参照し、装置1100は、第1の取得ユニット1101、第1の計算ユニット1102、第2の計算ユニット1103、予測ユニット1104、及び第1の決定ユニット1105を含む。
第1の取得ユニット1101は、車両の周囲の対象の観測情報を取得するように構成される。
第1の計算ユニット1102は、周囲の対象の観測情報に基づいて、周囲の対象の異なる動作意図の確率分布を計算するように構成される。
第2の計算ユニット1103は、車両が現在の位置から異なる動作意図に対応するリスクエリアに移動するため移動時間に基づいて確率分布に対する再分布計算を実行して、異なる動作意図の確率再分布を取得するように構成され、異なる動作意図に対応するリスクエリアは、車両が移動する車線内、異なる動作意図を有する周囲の対象が通るエリアである。
予測ユニット1104は、車両が異なる動作意図に対応するリスクエリアに移動するため移動時間に基づいて、異なる動作意図を有する周囲の対象の運動状態変化を予測するように構成される。
第1の決定ユニット1105は、異なる動作意図の確率再分布、異なる動作意図を有する周囲の対象の運動状態変化、及び異なる移動速度制御動作下の車両の運動状態変化に基づいて、車両の移動速度を決定するように構成される。
可能な一実装において、第1の計算ユニット1102は、確立サブユニット及び計算サブユニットを含んでもよい。確立サブユニットは、車両が移動する車線に基づく座標系において、周囲の対象の観測情報に基づいて、周囲の対象と車線と間の相対的な位置関係、及び周囲の対象と車線との間の相対的な運動関係を確立するように構成される。計算サブユニットは、周囲の対象と車線との間の相対的な位置関係、及び周囲の対象と車線との間の相対的な運動関係に基づいて、周囲の対象の異なる動作意図の確率分布を計算するように構成される。
別の可能な実装において、装置は、第2の取得ユニット、確立ユニット、第2の決定ユニット、及び第3の計算ユニットをさらに含んでもよい。
第2の取得ユニットは、車両の観測情報を取得するように構成される。確立ユニットは、車両が移動する車線に基づく座標系において、車両の観測情報及び周囲の対象の観測情報に基づいて、車両と車線との間の相対的な位置関係及び車両と車線との間の相対的な運動状態、並びに周囲の対象と車線と間の相対的な位置関係及び周囲の対象と車線との相対的な運動状態を確立するように構成される。第2の決定ユニットは、周囲の対象と車線との間の相対的な位置関係、及び周囲の対象と車線との間の相対的な運動状態に基づいて、異なる動作意図に対応するリスクエリアを決定するように構成される。第3の計算ユニットは、車両と車線との間の相対的な位置関係、車両と車線との間の相対的な運動状態、及び異なる動作意図に対応するリスクエリアに基づいて、車両が車両の現在の位置から異なる動作意図に対応するリスクエリアに移動するため移動時間を計算するように構成される。
さらに別の可能な実装において、第2の計算ユニット1103は、処理サブユニット及び調整サブユニットを含んでもよい。処理サブユニットは、確率分布に対する粒子処理を実行するように構成され、異なる動作意図に対応する粒子の数量は、異なる動作意図の確率分布を表すために使用される。調整サブユニットは、計算を通じて取得され、かつ車両が異なる動作意図に対応するリスクエリアに移動するために必要とされる移動時間に基づいて、異なる動作意図に対応する粒子の重みを調整して、異なる動作意図の確率再分布を取得するように構成される。
さらに別の可能な実装において、予測ユニット1104は、第1の決定サブユニット及び予測サブユニットを含んでもよい。第1の決定サブユニットは、車両が異なる動作意図に対応するリスクエリアに移動するため移動時間に基づいて、異なる動作意図を有する周囲の対象が動作意図を変える確率を決定するように構成される。予測サブユニットは、異なる動作意図を有する周囲の対象が動作意図を変える確率、及びランダム確率に基づいて、異なる動作意図を有する周囲の対象の運動状態変化を予測するように構成される。
さらなる可能な実装において、第1の決定ユニット1105は、推定サブユニット、選択サブユニット、及び第2の決定サブユニットを含んでもよい。推定サブユニットは、異なる動作意図の確率再分布、異なる動作意図を有する周囲の対象の運動状態変化、及び異なる移動速度制御動作下の車両の運動状態変化に基づいて、異なる移動速度制御動作下でもたらす車両の移動効果を推定するように構成される。選択サブユニットは、異なる移動速度制御動作下でもたらす車両の移動効果に基づいて、異なる移動速度制御動作から目標移動速度制御動作を選択するように構成される。第2の決定サブユニットは、目標移動速度制御動作に基づいて車両の移動速度を決定するように構成される。
装置1100は、図5に対応する実施形態におけるステップを実行するように構成されることに留意されたい。具体的には、取得ユニット1101は、具体的にステップ501を実行してもよく、第1の計算ユニット1102は、具体的にステップ502を実行してもよく、第2の計算ユニット1103は、具体的にステップ503を実行してもよく、予測ユニット1104は、具体的にステップ504を実行してもよく、第1の決定ユニット1105は、具体的にステップ505を実行してもよい。
装置1100は、本出願の実施形態で提供される車両速度を決定する方法に対応することが理解され得る。したがって、装置1100の実装、及び装置1100により達成され得る技術的効果については、本出願の実施形態における車両速度を決定する方法の実施の関連する説明を参照する。
さらに、本出願の一実施形態は、車両をさらに提供する。図12を参照し、車両1200は、センサ1201、プロセッサ1202、及び車両速度コントローラ1203を含む。
センサ1201は、車両の周囲の対象の観測情報を取得し、観測情報をプロセッサ、例えば、レーダ又はカメラに送信するように構成される。
プロセッサ1202は、第1の態様の実装のうちいずれか1つにおける方法に従って車両の移動速度を決定し、移動速度を車両速度コントローラに送信するように構成される。
車両速度コントローラ1203は、車両の決定された移動速度で移動するよう車両を制御するように構成される。
車両1200は、本出願の実施形態で提供される車両速度を決定する方法を実行することが理解され得る。したがって、車両1200の実装、及び車両1200により達成され得る技術的効果については、本出願の実施形態における車両速度を決定する方法の実施の関連する説明を参照する。
さらに、本出願の一実施形態は、車両をさらに提供する。図13を参照し、車両1300は、プロセッサ1301及びメモリ1302を含む。メモリ1302は、命令を記憶し、プロセッサ1301が命令を実行したとき、車両1300は、車両速度を決定する方法の実装のうちいずれか1つにおける方法を実行可能にされる。
車両1300は、本出願の実施形態で提供される車両速度を決定する方法を実行することが理解され得る。したがって、車両1300の実装、及び車両1300により達成され得る技術的効果については、本出願の実施形態における車両速度を決定する方法の実施の関連する説明を参照する。
さらに、本出願の一実施形態は、コンピュータプログラムプロダクトをさらに提供する。コンピュータプログラムプロダクトがコンピュータ上で実行されたとき、コンピュータは、車両速度を決定する方法の実装のうちいずれか1つにおける方法を実行する。
さらに、本出願の一実施形態は、コンピュータ読取可能記憶媒体をさらに提供する。コンピュータ読取可能記憶媒体は命令を記憶する。命令がコンピュータ又はプロセッサ上で実行されたとき、コンピュータ又はプロセッサは、車両速度を決定する方法の実装のうちいずれか1つにおける方法を実行可能にされる。
本出願の実施形態において言及される「第1のリスク度」のような用語における「第1」は、名称の識別のみに使用され、順序における1番目を示すものではない。この規則は、「第2」等にも適用可能である。
前述の実施の説明から、当業者は、前述の実施形態における方法の全部又は一部のステップが、ソフトウェアと汎用ハードウェアプラットフォームの組み合わせを使用することにより実施され得ることを明らかに理解し得る。このような理解に基づいて、本出願の技術的解決策は、ソフトウェアプロダクトの形態で実施されてもよい。ソフトウェアプロダクトは、記憶媒体、例えば、読取専用メモリ(英語:read-only memory、ROM)/RAM、磁気ディスク、又は光ディスクに記憶されてもよく、コンピュータデバイス(パーソナルコンピュータ、サーバ、又はルータなどのネットワーク通信デバイスであり得る)に、本出願の実施形態又は実施形態の一部の部分に記載される方法を実行するよう指示するためのいくつかの命令を含む。
本明細書の実施形態は全て、漸進的に記載されている。実施形態における同一又は同様の部分については、これらの実施形態を参照することができ、各実施形態は、他の実施形態との差に焦点を合わせている。特に、装置の実施形態は、基本的に方法の実施形態と同様であり、したがって簡潔に説明される。関連する部分については、本方法の実施形態における一部の説明を参照することができる。記載される装置の実施形態は、単なる一例である。別個の部分として記載されるモジュールは、物理的に別個でも又はそうでなくてもよく、モジュールとして表される部分は、物理的モジュールでも又はそうでなくてもよく、1つの位置に配置されてもよく、あるいは複数のネットワークユニット上に分散されてもよい。モジュールの一部又は全部は、実施形態の解決策の目的を達成するために、実際のニーズに基づいて選択されてもよい。当業者は、創造的努力なしに本発明の実施形態を理解し、実施し得る。
前述の説明は、本出願の単なる例示的な実装であり、本出願の保護範囲を制限することは意図されない。

Claims (13)

  1. 少なくとも1つのプロセッサにより実行される、車両速度を決定する方法であって、
    車両の周囲の対象の観測情報を取得するステップと、
    前記周囲の対象の前記観測情報に基づいて、前記周囲の対象の異なる動作意図の確率分布を計算するステップと、
    前記車両が前記車両の現在の位置から前記異なる動作意図に対応するリスクエリアに移動するための移動時間に基づいて、前記確率分布に対する再分布計算を実行して、前記異なる動作意図の確率再分布を取得するステップであり、前記異なる動作意図に対応する前記リスクエリアは、前記車両が移動する車線内で、前記異なる動作意図を有する前記周囲の対象が通るエリアである、ステップと、
    前記車両が前記異なる動作意図に対応する前記リスクエリアに移動するための前記移動時間に基づいて、前記異なる動作意図を有する前記周囲の対象の運動状態変化を予測するステップと、
    前記異なる動作意図の前記確率再分布、前記異なる動作意図を有する前記周囲の対象の前記運動状態変化、及び異なる移動速度制御動作下の前記車両の運動状態変化に基づいて、前記車両の移動速度を決定するステップと、
    を含む方法。
  2. 前記周囲の対象の前記観測情報に基づいて、前記周囲の対象の異なる動作意図の確率分布を計算するステップは、
    前記車両が移動する前記車線に基づく座標系において、前記周囲の対象の前記観測情報に基づいて、前記周囲の対象と前記車線との間の相対的な位置関係、及び前記周囲の対象と前記車線との間の相対的な運動関係を確立するステップと、
    前記周囲の対象と前記車線との間の前記相対的な位置関係、及び前記周囲の対象と前記車線との間の前記相対的な運動関係に基づいて、前記周囲の対象の前記異なる動作意図の前記確率分布を計算するステップと、
    を含む、請求項1に記載の方法。
  3. 前記車両の観測情報を取得するステップと、
    前記車両が移動する前記車線に基づく座標系において、前記車両の前記観測情報及び前記周囲の対象の前記観測情報に基づいて、前記車両と前記車線との間の相対的な位置関係及び前記車両と前記車線との間の相対的な運動状態、並びに前記周囲の対象と前記車線との間の相対的な位置関係及び前記周囲の対象と前記車線との間の相対的な運動状態を確立するステップと、
    前記周囲の対象と前記車線との間の前記相対的な位置関係及び前記周囲の対象と前記車線との間の前記相対的な運動状態に基づいて、前記異なる動作意図に対応する前記リスクエリアを決定するステップと、
    前記車両と前記車線との間の前記相対的な位置関係及び前記車両と前記車線との間の前記相対的な運動状態、並びに前記異なる動作意図に対応する前記リスクエリアに基づいて、前記車両が前記車両の前記現在の位置から前記異なる動作意図に対応する前記リスクエリアに移動するための前記移動時間を計算するステップと、
    をさらに含む請求項1に記載の方法。
  4. 前記車両が前記異なる動作意図に対応するリスクエリアに移動するための移動時間に基づいて、前記確率分布に対する再分布計算を実行して、前記異なる動作意図の確率再分布を取得するステップは、
    前記確率分布に対する粒子処理を実行するステップであり、前記異なる動作意図に対応する粒子の数量が、前記異なる動作意図の前記確率分布を表すために使用される、ステップと、
    計算を通じて取得され、前記車両が前記異なる動作意図に対応する前記リスクエリアに移動するための前記移動時間に基づいて、前記異なる動作意図に対応する前記粒子の重みを調整して、前記異なる動作意図の前記確率再分布を取得するステップと、
    を含む、請求項1乃至3のうちいずれか1項に記載の方法。
  5. 前記車両が前記異なる動作意図に対応する前記リスクエリアに移動するための前記移動時間に基づいて、前記異なる動作意図を有する前記周囲の対象の運動状態変化を予測するステップは、
    前記車両が前記異なる動作意図に対応する前記リスクエリアに移動するための前記移動時間に基づいて、前記異なる動作意図を有する前記周囲の対象が動作意図を変える確率を決定するステップと、
    前記異なる動作意図を有する前記周囲の対象が前記動作意図を変える確率、及びランダム確率に基づいて、前記異なる動作意図を有する前記周囲の対象の前記運動状態変化を予測するステップであり、前記運動状態変化を予測するために使用される状態予測モデルが、前記車両及び前記周囲の対象に関連する相互作用確率が前記ランダム確率より大きいかどうかに基づいて決定される、ステップと、
    を含む、請求項1乃至4のうちいずれか1項に記載の方法。
  6. 前記異なる動作意図の前記確率再分布と、前記異なる動作意図を有する前記周囲の対象の前記運動状態変化と、異なる移動速度制御動作下の前記車両の運動状態変化に基づいて、前記車両の移動速度を決定するステップは、
    前記異なる動作意図の前記確率再分布、前記異なる動作意図を有する前記周囲の対象の前記運動状態変化、及び前記異なる移動速度制御動作下の前記車両の前記運動状態変化に基づいて、前記異なる移動速度制御動作下でもたらす前記車両の移動効果を推定するステップと、
    前記異なる移動速度制御動作下でもたらす前記車両の前記移動効果に基づいて、前記異なる移動速度制御動作から目標移動速度制御動作を選択するステップと、
    前記目標移動速度制御動作に基づいて前記車両の前記移動速度を決定するステップと、
    を含む、請求項1乃至5のうちいずれか1項に記載の方法。
  7. 車両速度を決定する装置であって、
    車両の周囲の対象の観測情報を取得するように構成された第1の取得ユニットと、
    前記周囲の対象の前記観測情報に基づいて、前記周囲の対象の異なる動作意図の確率分布を計算するように構成された第1の計算ユニットと、
    前記車両が前記車両の現在の位置から前記異なる動作意図に対応するリスクエリアに移動するための移動時間に基づいて、前記確率分布に対する再分布計算を実行して、前記異なる動作意図の確率再分布を取得するように構成された第2の計算ユニットであり、前記異なる動作意図に対応する前記リスクエリアは、前記車両が移動する車線内で、前記異なる動作意図を有する前記周囲の対象が通るエリアである、第2の計算ユニットと、
    前記車両が前記異なる動作意図に対応する前記リスクエリアに移動するための前記移動時間に基づいて、前記異なる動作意図を有する前記周囲の対象の運動状態変化を予測するように構成された予測ユニットと、
    前記異なる動作意図の前記確率再分布、前記異なる動作意図を有する前記周囲の対象の前記運動状態変化、及び異なる移動速度制御動作下の前記車両の運動状態変化に基づいて、前記車両の移動速度を決定するように構成された第1の決定ユニットと、
    を含む装置。
  8. 前記第1の計算ユニットは、
    前記車両が移動する前記車線に基づく座標系において、前記周囲の対象の前記観測情報に基づいて、前記周囲の対象と前記車線との間の相対的な位置関係、及び前記周囲の対象と前記車線との間の相対的な運動関係を確立するように構成された確立サブユニットと、
    前記周囲の対象と前記車線との間の前記相対的な位置関係、及び前記周囲の対象と前記車線との間の前記相対的な運動関係に基づいて、前記周囲の対象の前記異なる動作意図の前記確率分布を計算するように構成された計算サブユニットと、
    を含む、請求項7に記載の装置。
  9. 当該装置は、
    前記車両の観測情報を取得するように構成された第2の取得ユニットと、
    前記車両が移動する前記車線に基づく座標系において、前記車両の前記観測情報及び前記周囲の対象の前記観測情報に基づいて、前記車両と前記車線との間の相対的な位置関係及び前記車両と前記車線との間の相対的な運動状態、並びに前記周囲の対象と前記車線との間の相対的な位置関係及び前記周囲の対象と前記車線との間の相対的な運動状態を確立するように構成された確立ユニットと、
    前記周囲の対象と前記車線との間の前記相対的な位置関係及び前記周囲の対象と前記車線との間の前記相対的な運動状態に基づいて、前記異なる動作意図に対応する前記リスクエリアを決定するように構成された第2の決定ユニットと、
    前記車両と前記車線との間の前記相対的な位置関係及び前記車両と前記車線との間の前記相対的な運動状態、並びに前記異なる動作意図に対応する前記リスクエリアに基づいて、前記車両が前記車両の前記現在の位置から前記異なる動作意図に対応する前記リスクエリアに移動するための前記移動時間を計算するように構成された第3の計算ユニットと、
    を含む、請求項7に記載の装置。
  10. 前記第2の計算ユニットは、
    前記確率分布に対する粒子処理を実行するように構成された処理サブユニットであり、前記異なる動作意図に対応する粒子の数量が、前記異なる動作意図の前記確率分布を表す、処理サブユニットと、
    計算を通じて取得され、前記車両が前記異なる動作意図に対応する前記リスクエリアに移動するための前記移動時間に基づいて、前記異なる動作意図に対応する前記粒子の重みを調整して、前記異なる動作意図の前記確率再分布を取得するように構成された調整サブユニットと、
    を含む、請求項7乃至9のうちいずれか1項に記載の装置。
  11. 前記予測ユニットは、
    前記車両が前記異なる動作意図に対応する前記リスクエリアに移動するための前記移動時間に基づいて、前記異なる動作意図を有する前記周囲の対象が動作意図を変える確率を決定するように構成された第1の決定サブユニットと、
    前記異なる動作意図を有する前記周囲の対象が前記動作意図を変える確率、及びランダム確率に基づいて、前記異なる動作意図を有する前記周囲の対象の前記運動状態変化を予測するように構成された予測サブユニットであり、前記運動状態変化を予測するために使用される状態予測モデルが、前記車両及び前記周囲の対象に関連する相互作用確率が前記ランダム確率より大きいかどうかに基づいて決定される、予測サブユニットと、
    を含む、請求項7乃至10のうちいずれか1項に記載の装置。
  12. 前記第1の決定ユニットは、
    前記異なる動作意図の前記確率再分布、前記異なる動作意図を有する前記周囲の対象の前記運動状態変化、及び前記異なる移動速度制御動作下の前記車両の前記運動状態変化に基づいて、前記異なる移動速度制御動作下でもたらす前記車両の移動効果を推定するように構成された推定サブユニットと、
    前記異なる移動速度制御動作下でもたらす前記車両の前記移動効果に基づいて、前記異なる移動速度制御動作から目標移動速度制御動作を選択するように構成された選択サブユニットと、
    前記目標移動速度制御動作に基づいて前記車両の前記移動速度を決定するように構成された第2の決定サブユニットと、
    を含む、請求項7乃至11のうちいずれか1項に記載の装置。
  13. 命令を含むコンピュータ読取可能記憶媒体であって、コンピューティングデバイスの少なくとも1つのプロセッサが前記命令を実行したとき、前記コンピューティングデバイスは請求項1乃至6のうちいずれか1項に記載の車両速度を決定する方法を実行する、コンピュータ読取可能記憶媒体。
JP2021523762A 2019-07-17 2020-07-17 車両速度を決定する方法及び装置 Active JP7200371B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CN201910646083.4 2019-07-17
CN201910646083.4A CN112242069B (zh) 2019-07-17 2019-07-17 一种确定车速的方法和装置
PCT/CN2020/102644 WO2021008605A1 (zh) 2019-07-17 2020-07-17 一种确定车速的方法和装置

Publications (2)

Publication Number Publication Date
JP2022506404A JP2022506404A (ja) 2022-01-17
JP7200371B2 true JP7200371B2 (ja) 2023-01-06

Family

ID=74167575

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2021523762A Active JP7200371B2 (ja) 2019-07-17 2020-07-17 車両速度を決定する方法及び装置

Country Status (6)

Country Link
US (1) US11273838B2 (ja)
EP (1) EP3882095A4 (ja)
JP (1) JP7200371B2 (ja)
CN (1) CN112242069B (ja)
MX (1) MX2021005934A (ja)
WO (1) WO2021008605A1 (ja)

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11630461B2 (en) * 2019-01-31 2023-04-18 Honda Motor Co., Ltd. Systems and methods for utilizing interacting gaussian mixture models for crowd navigation
US11597088B2 (en) 2019-01-31 2023-03-07 Honda Motor Co., Ltd. Systems and methods for fully coupled models for crowd navigation
CN112242069B (zh) * 2019-07-17 2021-10-01 华为技术有限公司 一种确定车速的方法和装置
US11787053B2 (en) * 2019-11-19 2023-10-17 Honda Motor Co., Ltd. Systems and methods for utilizing interacting Gaussian mixture models for crowd navigation
US20210300423A1 (en) * 2020-03-31 2021-09-30 Toyota Motor North America, Inc. Identifying roadway concerns and taking preemptive actions
US11290856B2 (en) 2020-03-31 2022-03-29 Toyota Motor North America, Inc. Establishing connections in transports
JP2022037421A (ja) * 2020-08-25 2022-03-09 株式会社Subaru 車両の走行制御装置
US11741274B1 (en) 2020-11-20 2023-08-29 Zoox, Inc. Perception error model for fast simulation and estimation of perception system reliability and/or for control system tuning
CN112966613A (zh) * 2021-03-10 2021-06-15 北京家人智能科技有限公司 汽车运行环境多级预警方法、装置、电子设备及存储介质
CN113299059B (zh) * 2021-04-08 2023-03-17 四川国蓝中天环境科技集团有限公司 一种数据驱动的道路交通管控决策支持方法
CN114590248B (zh) * 2022-02-23 2023-08-25 阿波罗智能技术(北京)有限公司 行驶策略的确定方法、装置、电子设备和自动驾驶车辆
US11904889B1 (en) * 2022-11-04 2024-02-20 Ghost Autonomy Inc. Velocity adjustments based on roadway scene comprehension

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005053384A (ja) 2003-08-06 2005-03-03 Daihatsu Motor Co Ltd 衝突回避装置
JP2010182236A (ja) 2009-02-09 2010-08-19 Toyota Motor Corp 移動領域予測装置
JP2012128739A (ja) 2010-12-16 2012-07-05 Toyota Central R&D Labs Inc 衝突危険判定装置及びプログラム
JP2016053846A (ja) 2014-09-03 2016-04-14 株式会社デンソーアイティーラボラトリ 自動運転支援システム、自動運転支援方法及び自動運転装置
JP2016139163A (ja) 2015-01-26 2016-08-04 株式会社日立製作所 車両走行制御装置

Family Cites Families (48)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007534041A (ja) * 2003-09-23 2007-11-22 ダイムラークライスラー・アクチェンゲゼルシャフト 車両用の車線変更運転認識方法及び装置
EP2085279B1 (en) * 2008-01-29 2011-05-25 Ford Global Technologies, LLC A system for collision course prediction
FR2996512B1 (fr) * 2012-10-05 2014-11-21 Renault Sa Procede d'evaluation du risque de collision a une intersection
EP2916307B1 (en) 2012-10-30 2021-05-19 Toyota Jidosha Kabushiki Kaisha Vehicle safety apparatus
DE102013212092B4 (de) 2013-06-25 2024-01-25 Robert Bosch Gmbh Verfahren und Vorrichtung zum Betreiben einer Fußgängerschutzeinrichtung eines Fahrzeugs, Fußgängerschutzeinrichtung
US9280899B2 (en) 2013-08-06 2016-03-08 GM Global Technology Operations LLC Dynamic safety shields for situation assessment and decision making in collision avoidance tasks
US9336436B1 (en) 2013-09-30 2016-05-10 Google Inc. Methods and systems for pedestrian avoidance
CN103640532B (zh) * 2013-11-29 2015-08-26 大连理工大学 基于驾驶员制动与加速意图辨识的行人防碰撞预警方法
CN103996312B (zh) * 2014-05-23 2015-12-09 北京理工大学 具有社会行为交互的无人驾驶汽车控制系统
US9187088B1 (en) * 2014-08-15 2015-11-17 Google Inc. Distribution decision trees
US9440647B1 (en) 2014-09-22 2016-09-13 Google Inc. Safely navigating crosswalks
EP3091370B1 (en) 2015-05-05 2021-01-06 Volvo Car Corporation Method and arrangement for determining safe vehicle trajectories
US11458970B2 (en) * 2015-06-29 2022-10-04 Hyundai Motor Company Cooperative adaptive cruise control system based on driving pattern of target vehicle
US9784592B2 (en) * 2015-07-17 2017-10-10 Honda Motor Co., Ltd. Turn predictions
US9934688B2 (en) * 2015-07-31 2018-04-03 Ford Global Technologies, Llc Vehicle trajectory determination
US10392009B2 (en) * 2015-08-12 2019-08-27 Hyundai Motor Company Automatic parking system and automatic parking method
US9604639B2 (en) 2015-08-28 2017-03-28 Delphi Technologies, Inc. Pedestrian-intent-detection for automated vehicles
US11066070B2 (en) * 2015-10-15 2021-07-20 Hyundai Motor Company Apparatus and method for controlling speed in cooperative adaptive cruise control system
KR102107726B1 (ko) * 2016-12-30 2020-05-07 현대자동차주식회사 협조 적응형 순항 제어 시스템의 속도 제어 장치 및 방법
US10152882B2 (en) * 2015-11-30 2018-12-11 Nissan North America, Inc. Host vehicle operation using remote vehicle intention prediction
CN106227204B (zh) 2016-07-08 2020-03-10 百度在线网络技术(北京)有限公司 车载装置及用于控制无人驾驶车辆的系统、方法和装置
CN106428000B (zh) * 2016-09-07 2018-12-21 清华大学 一种车辆速度控制装置和方法
CN106515725A (zh) * 2016-10-20 2017-03-22 深圳市元征科技股份有限公司 一种车辆防碰撞的方法及终端
US10699305B2 (en) * 2016-11-21 2020-06-30 Nio Usa, Inc. Smart refill assistant for electric vehicles
KR20190091366A (ko) * 2016-12-23 2019-08-05 모빌아이 비젼 테크놀로지스 엘티디. 부과된 책임 제약이 있는 항법 시스템
US10324469B2 (en) * 2017-03-28 2019-06-18 Mitsubishi Electric Research Laboratories, Inc. System and method for controlling motion of vehicle in shared environment
US10994729B2 (en) * 2017-03-29 2021-05-04 Mitsubishi Electric Research Laboratories, Inc. System and method for controlling lateral motion of vehicle
JP6852632B2 (ja) * 2017-09-19 2021-03-31 トヨタ自動車株式会社 車両制御装置
DE102017217056B4 (de) 2017-09-26 2023-10-12 Audi Ag Verfahren und Einrichtung zum Betreiben eines Fahrerassistenzsystems sowie Fahrerassistenzsystem und Kraftfahrzeug
US10657811B2 (en) * 2017-10-04 2020-05-19 Toyota Motor Engineering & Manufacturing North America, Inc. Travel lane identification without road curvature data
US10668922B2 (en) * 2017-10-04 2020-06-02 Toyota Motor Engineering & Manufacturing North America, Inc. Travel lane identification without road curvature data
US11048927B2 (en) * 2017-10-24 2021-06-29 Waymo Llc Pedestrian behavior predictions for autonomous vehicles
US10562538B2 (en) * 2017-11-22 2020-02-18 Uatc, Llc Object interaction prediction systems and methods for autonomous vehicles
CN108458745A (zh) * 2017-12-23 2018-08-28 天津国科嘉业医疗科技发展有限公司 一种基于智能检测设备的环境感知方法
CN109969172B (zh) * 2017-12-26 2020-12-01 华为技术有限公司 车辆控制方法、设备及计算机存储介质
CN108230676B (zh) 2018-01-23 2020-11-27 同济大学 一种基于轨迹数据的交叉口行人过街风险评估方法
US10569773B2 (en) * 2018-05-31 2020-02-25 Nissan North America, Inc. Predicting behaviors of oncoming vehicles
EP3803828B1 (en) * 2018-05-31 2022-03-30 Nissan North America, Inc. Probabilistic object tracking and prediction framework
US11091158B2 (en) * 2018-06-24 2021-08-17 Mitsubishi Electric Research Laboratories, Inc. System and method for controlling motion of vehicle with variable speed
US11260855B2 (en) * 2018-07-17 2022-03-01 Baidu Usa Llc Methods and systems to predict object movement for autonomous driving vehicles
US11001256B2 (en) * 2018-09-19 2021-05-11 Zoox, Inc. Collision prediction and avoidance for vehicles
GB2579020B (en) * 2018-11-14 2021-05-12 Jaguar Land Rover Ltd Vehicle control system and method
DE102018132813A1 (de) * 2018-12-19 2019-04-25 FEV Europe GmbH Fußgängersimulation
WO2020257366A1 (en) * 2019-06-17 2020-12-24 DeepMap Inc. Updating high definition maps based on lane closure and lane opening
CN112242069B (zh) * 2019-07-17 2021-10-01 华为技术有限公司 一种确定车速的方法和装置
US20210035442A1 (en) * 2019-07-31 2021-02-04 Nissan North America, Inc. Autonomous Vehicles and a Mobility Manager as a Traffic Monitor
CN110758382B (zh) * 2019-10-21 2021-04-20 南京航空航天大学 一种基于驾驶意图的周围车辆运动状态预测系统及方法
US20210197720A1 (en) * 2019-12-27 2021-07-01 Lyft, Inc. Systems and methods for incident detection using inference models

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005053384A (ja) 2003-08-06 2005-03-03 Daihatsu Motor Co Ltd 衝突回避装置
JP2010182236A (ja) 2009-02-09 2010-08-19 Toyota Motor Corp 移動領域予測装置
JP2012128739A (ja) 2010-12-16 2012-07-05 Toyota Central R&D Labs Inc 衝突危険判定装置及びプログラム
JP2016053846A (ja) 2014-09-03 2016-04-14 株式会社デンソーアイティーラボラトリ 自動運転支援システム、自動運転支援方法及び自動運転装置
JP2016139163A (ja) 2015-01-26 2016-08-04 株式会社日立製作所 車両走行制御装置

Also Published As

Publication number Publication date
US20210276572A1 (en) 2021-09-09
EP3882095A1 (en) 2021-09-22
EP3882095A4 (en) 2022-03-09
MX2021005934A (es) 2021-06-30
CN112242069B (zh) 2021-10-01
US11273838B2 (en) 2022-03-15
JP2022506404A (ja) 2022-01-17
WO2021008605A1 (zh) 2021-01-21
CN112242069A (zh) 2021-01-19

Similar Documents

Publication Publication Date Title
JP7200371B2 (ja) 車両速度を決定する方法及び装置
US11726477B2 (en) Methods and systems for trajectory forecasting with recurrent neural networks using inertial behavioral rollout
US20210114617A1 (en) Method for Using Lateral Motion to Optimize Trajectories for Autonomous Vehicles
CN108693878B (zh) 前进路线设定装置以及前进路线设定方法
US11645916B2 (en) Moving body behavior prediction device and moving body behavior prediction method
CN111123933B (zh) 车辆轨迹规划的方法、装置、智能驾驶域控制器和智能车
EP3745158B1 (en) Methods and systems for computer-based determining of presence of dynamic objects
US20180284785A1 (en) System and Method for Controlling Motion of Vehicle in Shared Environment
US11364899B2 (en) Driving assistance method and system
Kim et al. Cooperative autonomous driving: A mirror neuron inspired intention awareness and cooperative perception approach
US20220080961A1 (en) Control system and control method for sampling based planning of possible trajectories for motor vehicles
CN109109863B (zh) 智能设备及其控制方法、装置
Belbachir et al. Simulation-driven validation of advanced driving-assistance systems
Kim et al. Probabilistic threat assessment with environment description and rule-based multi-traffic prediction for integrated risk management system
US11400942B2 (en) Vehicle lane trajectory probability prediction utilizing kalman filtering with neural network derived noise
US10796571B2 (en) Method and device for detecting emergency vehicles in real time and planning driving routes to cope with situations to be expected to be occurred by the emergency vehicles
US11688082B2 (en) Coordinate gradient method for point cloud registration for autonomous vehicles
JP2021504222A (ja) 状態推定器
JP7125286B2 (ja) 行動予測装置及び自動運転装置
WO2022052856A1 (zh) 基于交通工具的数据处理方法、装置、计算机及存储介质
CN114228746A (zh) 一种预测车辆运动轨迹的方法及装置
Goswami Trajectory generation for lane-change maneuver of autonomous vehicles
Cho et al. Towards automated safety coverage and testing for autonomous vehicles with reinforcement learning
Schörner et al. Towards Multi-Modal Risk Assessment
Yoon et al. Trajectory Prediction Using Graph-Based Deep Learning for Longitudinal Control of Autonomous Vehicles: A Proactive Approach for Autonomous Driving in Urban Dynamic Traffic Environments

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210430

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210430

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220705

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20221004

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20221122

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20221221

R150 Certificate of patent or registration of utility model

Ref document number: 7200371

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150