JP7354172B2 - 情報提供装置、情報提供方法および情報提供プログラム - Google Patents
情報提供装置、情報提供方法および情報提供プログラム Download PDFInfo
- Publication number
- JP7354172B2 JP7354172B2 JP2021045191A JP2021045191A JP7354172B2 JP 7354172 B2 JP7354172 B2 JP 7354172B2 JP 2021045191 A JP2021045191 A JP 2021045191A JP 2021045191 A JP2021045191 A JP 2021045191A JP 7354172 B2 JP7354172 B2 JP 7354172B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- vehicle
- information
- road
- superimposed
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 44
- 230000000007 visual effect Effects 0.000 claims description 68
- 238000004364 calculation method Methods 0.000 claims description 36
- 208000020016 psychiatric disease Diseases 0.000 claims description 6
- 230000003190 augmentative effect Effects 0.000 claims description 4
- 238000012545 processing Methods 0.000 description 67
- 230000008569 process Effects 0.000 description 25
- 238000010586 diagram Methods 0.000 description 17
- 239000000284 extract Substances 0.000 description 11
- 238000004891 communication Methods 0.000 description 7
- 230000006870 function Effects 0.000 description 5
- 230000015654 memory Effects 0.000 description 5
- 238000005516 engineering process Methods 0.000 description 4
- 206010029216 Nervousness Diseases 0.000 description 3
- 238000010191 image analysis Methods 0.000 description 3
- 230000010365 information processing Effects 0.000 description 3
- 206010041349 Somnolence Diseases 0.000 description 2
- 230000036760 body temperature Effects 0.000 description 2
- 230000003292 diminished effect Effects 0.000 description 2
- 230000007613 environmental effect Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 241001573881 Corolla Species 0.000 description 1
- 241001465754 Metazoa Species 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000008921 facial expression Effects 0.000 description 1
- 230000008014 freezing Effects 0.000 description 1
- 238000007710 freezing Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000003909 pattern recognition Methods 0.000 description 1
- 238000007619 statistical method Methods 0.000 description 1
Images
Landscapes
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Traffic Control Systems (AREA)
Description
〔情報提供処理の概要〕
まず、図1および図2を参照して、本開示の例示的な実施形態について詳細に説明する。図1および図2は、実施形態に係る情報提供処理の一例を示す図である。情報提供処理は、情報提供装置が情報提供方法を実行することで行われる処理である。
まず、図1に示す情報提供処理について説明する。図1に示す情報提供処理は、車両Cを運転中の利用者が初めての道路を走行する場合に、いつも走行している他の道路の画像を表示することで、利用者が初めての道路でも安心していつも通りの運転を行えるようにできるものである。
次に、図2に示す情報提供処理について説明する。図2に示す情報提供処理は、車両Cを運転中の利用者が、例えば、スポーツカー等のような心理的障害の度合いが大きい(緊張感が高い)対象物の近くを走行する場合に、例えば、軽自動車等の心理的障害の度合いが小さい代替物に置き換えて表示することで、利用者の運転時における緊張感を和らげるものである。
次に、図3を参照して、情報提供装置100を含むシステムの構成例について説明する。
図3は、実施形態に係る情報提供システム1の一例を示す図である。図3に示されるように、情報提供システム1は、情報提供装置100および利用者端末500等の構成要素を含む。なお、図1や図2中では図示していないが、情報提供システム1は、複数台の情報提供装置100や、複数台の利用者端末500を含んでもよい。また、情報提供システム1は、情報提供装置100に関係するエンティティ(例えば、業者、エンドユーザ)の装置や、各種情報(道路特徴情報データベースや、走行済道路データベース、代替物データベース)を提供するサーバ、車載装置等の、他の構成要素を含んでもよい。
図3に示されるように、情報提供装置100は、通信部200と、記憶部300と、制御部400とを有する。なお、情報提供装置100は、情報提供装置100を利用する管理者等から各種操作を受け付ける入力部(例えば、キーボードやマウス等)や、各種情報を表示するための表示部(液晶ディスプレイ等)を有してもよい。
通信部200は、例えば、NIC(Network Interface Card)等によって実現される。通信部200は、有線または無線によりネットワーク網と接続される。通信部200は、利用者端末500に、ネットワークNを介して、通信可能に接続されてもよい。通信部200は、利用者端末500との間で、ネットワーク網を介して、情報の送受信を行うことができる。
記憶部300は、例えば、RAM(Random Access Memory)、フラッシュメモリ(Flash Memory)等の半導体メモリ素子、または、ハードディスク、光ディスク等の記憶装置によって実現される。図3に示されるように、記憶部300は、走行済道路データベース310と、代替物データベース320とを有する。
図4は、実施形態に係る走行済道路データベース310の一例を示す図である。走行済道路データベース310は、利用者が過去に走行した走行済道路に関する情報を記憶する。
図5は、実施形態に係る代替物データベース320の一例を示す図である。代替物データベース320は、代替物に関する情報を記憶する。図5の例では、代替物データベース320は、「物体ID」、「種別」、「心理スコア」等の項目を有する。
制御部400は、コントローラ(controller)であり、例えば、CPU(Central Processing Unit)、MPU(Micro Processing Unit)等のプロセッサによって、情報提供装置100内部の記憶装置に記憶されている各種プログラム(判定プログラムの一例に相当)がRAM等を作業領域として実行されることにより実現される。また、制御部400は、コントローラ(controller)であり、例えば、ASIC(Application Specific Integrated Circuit)、FPGA(Field Programmable Gate Array)、GPGPU(General Purpose Graphic Processing Unit)等の集積回路により実現されてもよい。
図6は、実施形態に係る第1処理部410の構成の一例を示す図である。第1処理部410は、図1に示した情報提供処理を行う処理部であり、例えば、走行中道路よりも難易度が高い等の所定の条件を満たした走行済道路に基づくコンテンツを提供することができる。
図7は、実施形態に係る第2処理部420の構成の一例を示す図である。第2処理部420は、図2に示した情報提供処理を行う処理部であり、視野画像から抽出される対象物の心理スコアよりも低い心理スコアの代替物を対象物に重畳した重畳画像を提供することで、運転中の利用者の緊張を和らげることができる。
次に、図8を参照して、実施形態に係る情報提供装置100の第1処理部410による処理の手順について説明する。図8は、実施形態に係る第1処理部410によって実行される処理の一例を示すフローチャートである。
次に、図9を参照して、実施形態に係る情報提供装置100の第2処理部420による処理の手順について説明する。図9は、実施形態に係る第2処理部420によって実行される処理の一例を示すフローチャートである。
また、上記実施形態において説明した各処理のうち、自動的に行われるものとして説明した処理の一部を手動的に行うこともできる。あるいは、手動的に行われるものとして説明した処理の全部または一部を公知の方法で自動的に行うこともできる。この他、上記文書中や図面中で示した処理手順、具体的名称、各種のデータやパラメータを含む情報については、特記する場合を除いて任意に変更することができる。例えば、各図に示した各種情報は、図示した情報に限られない。
また、上述してきた実施形態に係る情報提供装置100は、例えば図10に示すような構成のコンピュータ1000によって実現される。図10は、ハードウェア構成の一例を示す図である。コンピュータ1000は、出力装置1010、入力装置1020と接続され、演算装置1030、一次記憶装置1040、二次記憶装置1050、出力IF(Interface)1060、入力IF1070、ネットワークIF1080がバス1090により接続された形態を有する。
上述してきたように、実施形態に係る情報提供装置100は、取得部411と、選択部412と、提供部414とを備える。取得部411は、利用者が運転中の車両Cが走行している走行中道路の特徴に関する道路特徴情報を取得する。選択部412は、利用者が過去に走行した頻度が所定の閾値以上である走行済道路のうち、走行中道路の特徴と類似する走行済道路を選択する。提供部414は、選択部412によって選択された走行済道路に基づくコンテンツを提供する。また、道路特徴情報は、道路の状態に基づく運転の難易度に関する情報を含む。選択部412は、走行中道路よりも難易度が高い走行済道路を選択する。選択部412は、走行中道路の道路特徴情報を包含する道路特徴情報の走行済道路を選択する。車両Cは、利用者の視野にコンテンツを表示する表示部C100を有する。提供部414は、走行中道路と重なるように表示部C100に表示される走行済道路の画像を提供する。取得部411は、利用者の視野を示す視野画像をさらに取得する。提供部414は、視野画像における走行中道路に走行済道路を重畳させた画像を提供する。提供部414は、走行中道路または走行済道路のいずれか一方を透過させた画像を提供する。表示部C100は、AR(Augmented Reality)画像が表示可能である。提供部414は、画像として、AR画像を表示する。提供部414は、車両Cのウインドウ領域C100に表示される画像を提供する。このような構成により、利用者が安心して運転することができる。
また、上記実施形態において説明した各処理のうち、自動的に行われるものとして説明した処理の全部または一部を手動的に行うこともでき、あるいは、手動的に行われるものとして説明した処理の全部または一部を公知の方法で自動的に行うこともできる。この他、上記文書中や図面中で示した処理手順、具体的名称、各種のデータやパラメータを含む情報については、特記する場合を除いて任意に変更することができる。例えば、各図に示した各種情報は、図示した情報に限られない。
100 情報提供装置
200 通信部
300 記憶部
310 走行済道路データベース
320 代替物データベース
400 制御部
410 第1処理部
411、421 取得部
412 選択部
413、423 生成部
414、424 提供部
420 第2処理部
422 算出部
500 利用者端末
C 車両
N ネットワーク
Claims (10)
- 車両を運転中の利用者の視野を示す視野画像を取得する取得部と、
前記視野画像から抽出される対象物に対する運転時の心理的障害の強さを示す心理スコアを算出する算出部と、
前記算出部によって算出された前記心理スコアに基づいて、前記対象物の代替となる代替物を、前記視野画像における前記対象物に重畳した重畳画像を提供する提供部と、
を備え、
前記算出部は、
前記対象物の価値に基づいて前記心理スコアを算出すること
を特徴とする情報提供装置。 - 前記対象物は、
所定の種別の対象車両であり、
前記提供部は、
前記代替物として、前記対象車両とは前記種別が異なる代替車両を前記対象車両に重畳した前記重畳画像を提供すること
を特徴とする請求項1に記載の情報提供装置。 - 前記提供部は、
前記対象車両および前記代替車両の大きさが異なる場合、前記車両に近い側の端部が揃うように、前記代替車両を前記対象車両に重畳した前記重畳画像を提供すること
を特徴とする請求項2に記載の情報提供装置。 - 前記提供部は、
前記車両との距離が、前記対象車両よりも短くなるように前記代替車両を前記対象車両に重畳した前記重畳画像を提供すること
を特徴とする請求項2または3に記載の情報提供装置。 - 前記対象物は、
人であり、
前記提供部は、
前記対象物の前記人とは容姿が異なる前記人の前記代替物を前記対象物に重畳した前記重畳画像を提供すること
を特徴とする請求項1~4のいずれか1つに記載の情報提供装置。 - 前記取得部は、
前記利用者の運転中における生体情報をさらに取得し、
前記提供部は、
前記生体情報に応じた前記代替物を前記視野画像における前記対象物に重畳した前記重畳画像を提供すること
を特徴とする請求項1~5のいずれか1つに記載の情報提供装置。 - 前記提供部は、
前記重畳画像として、AR(Augmented Reality)画像を提供すること
を特徴とする請求項1~6のいずれか1つに記載の情報提供装置。 - 前記提供部は、
前記車両のウインドウ領域またはバックミラー領域に表示される前記AR画像を提供すること
を特徴とする請求項7に記載の情報提供装置。 - コンピュータが実行する情報提供方法であって、
車両を運転中の利用者の視野を示す視野画像を取得する取得工程と、
前記視野画像から抽出される対象物に対する運転時の心理的障害の強さを示す心理スコアを算出する算出工程と、
前記算出工程によって算出された前記心理スコアに基づいて、前記対象物の代替となる代替物を、前記視野画像における前記対象物に重畳した重畳画像を提供する提供工程と、
を含み、
前記算出工程は、
前記対象物の価値に基づいて前記心理スコアを算出すること
を特徴とする情報提供方法。 - 車両を運転中の利用者の視野を示す視野画像を取得する取得手順と、
前記視野画像から抽出される対象物に対する運転時の心理的障害の強さを示す心理スコアを算出する算出手順と、
前記算出手順によって算出された前記心理スコアに基づいて、前記対象物の代替となる代替物を、前記視野画像における前記対象物に重畳した重畳画像を提供する提供手順と、
をコンピュータに実行させ、
前記算出手順は、
前記対象物の価値に基づいて前記心理スコアを算出すること
を特徴とする情報提供プログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021045191A JP7354172B2 (ja) | 2021-03-18 | 2021-03-18 | 情報提供装置、情報提供方法および情報提供プログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021045191A JP7354172B2 (ja) | 2021-03-18 | 2021-03-18 | 情報提供装置、情報提供方法および情報提供プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2022144270A JP2022144270A (ja) | 2022-10-03 |
JP7354172B2 true JP7354172B2 (ja) | 2023-10-02 |
Family
ID=83454536
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021045191A Active JP7354172B2 (ja) | 2021-03-18 | 2021-03-18 | 情報提供装置、情報提供方法および情報提供プログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7354172B2 (ja) |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011150475A (ja) | 2010-01-20 | 2011-08-04 | Toyota Motor Corp | 周辺監視装置 |
JP2016159658A (ja) | 2015-02-26 | 2016-09-05 | 株式会社デンソー | 情報表示装置 |
JP2017068761A (ja) | 2015-10-01 | 2017-04-06 | 日産自動車株式会社 | 情報提示装置、走行支援システム、及び情報提示方法 |
WO2018230530A1 (ja) | 2017-06-16 | 2018-12-20 | 本田技研工業株式会社 | 車両制御システム、車両制御方法、およびプログラム |
JP2019121321A (ja) | 2018-01-11 | 2019-07-22 | 三菱自動車工業株式会社 | 運転支援装置 |
JP2019125190A (ja) | 2018-01-17 | 2019-07-25 | トヨタ自動車株式会社 | 車両用表示装置 |
-
2021
- 2021-03-18 JP JP2021045191A patent/JP7354172B2/ja active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011150475A (ja) | 2010-01-20 | 2011-08-04 | Toyota Motor Corp | 周辺監視装置 |
JP2016159658A (ja) | 2015-02-26 | 2016-09-05 | 株式会社デンソー | 情報表示装置 |
JP2017068761A (ja) | 2015-10-01 | 2017-04-06 | 日産自動車株式会社 | 情報提示装置、走行支援システム、及び情報提示方法 |
WO2018230530A1 (ja) | 2017-06-16 | 2018-12-20 | 本田技研工業株式会社 | 車両制御システム、車両制御方法、およびプログラム |
JP2019121321A (ja) | 2018-01-11 | 2019-07-22 | 三菱自動車工業株式会社 | 運転支援装置 |
JP2019125190A (ja) | 2018-01-17 | 2019-07-25 | トヨタ自動車株式会社 | 車両用表示装置 |
Also Published As
Publication number | Publication date |
---|---|
JP2022144270A (ja) | 2022-10-03 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20220164026A1 (en) | Methods and systems for using artificial intelligence to evaluate, correct, and monitor user attentiveness | |
US11067405B2 (en) | Cognitive state vehicle navigation based on image processing | |
US11292477B2 (en) | Vehicle manipulation using cognitive state engineering | |
US9976867B2 (en) | Navigation method based on a see-through head-mounted device | |
US20210097408A1 (en) | Systems and methods for using artificial intelligence to present geographically relevant user-specific recommendations based on user attentiveness | |
DE102015108416A1 (de) | Auf Benutzerverhaltensmustern basierende adaptive navigations-und standortbasierte Dienste | |
WO2020152678A1 (en) | Detection of cognitive state of a driver | |
KR20170107373A (ko) | 상황에 따라 차량의 운전자와 상호 작용을 제공하는 시스템 및 방법 | |
US20210284175A1 (en) | Non-Intrusive In-Vehicle Data Acquisition System By Sensing Actions Of Vehicle Occupants | |
WO2017021318A1 (de) | Vorrichtung, fahrzeug, verfahren und computerprogramm zur berechnung zumindest eines video- oder steuersignals | |
EP3875299A1 (en) | Attention-based notifications | |
JP2019043496A (ja) | 自動運転調整装置、自動運転調整システム、及び自動運転調整方法 | |
US20210077006A1 (en) | Cognitive state-based seamless stimuli | |
JP6513913B2 (ja) | 情報提示装置、方法及びプログラム | |
WO2021067380A1 (en) | Methods and systems for using artificial intelligence to evaluate, correct, and monitor user attentiveness | |
Bernhard et al. | The ups and downs of camera-monitor systems: The effect of camera position on rearward distance perception | |
JP7354172B2 (ja) | 情報提供装置、情報提供方法および情報提供プログラム | |
JP7393375B2 (ja) | 情報提供装置、情報提供方法および情報提供プログラム | |
WO2020208804A1 (ja) | 表示制御装置、表示制御方法、及び表示制御プログラム | |
US9495871B2 (en) | Display control device, display control method, non-transitory recording medium, and projection device | |
Sourelli et al. | User preferences, driving context or manoeuvre characteristics? Exploring parameters affecting the acceptability of automated overtaking | |
US20220144284A1 (en) | Systems and methods for limiting driver distraction | |
US20230168101A1 (en) | Navigation Directions Preview | |
JP2012128654A (ja) | 運転支援装置 | |
Peralta et al. | A methodology for generating driving styles for autonomous cars |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220617 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20230522 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230606 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230807 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230905 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230920 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7354172 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313111 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |