JP7209651B2 - 車両の画像提供システム、および車両の画像提供方法 - Google Patents
車両の画像提供システム、および車両の画像提供方法 Download PDFInfo
- Publication number
- JP7209651B2 JP7209651B2 JP2020007766A JP2020007766A JP7209651B2 JP 7209651 B2 JP7209651 B2 JP 7209651B2 JP 2020007766 A JP2020007766 A JP 2020007766A JP 2020007766 A JP2020007766 A JP 2020007766A JP 7209651 B2 JP7209651 B2 JP 7209651B2
- Authority
- JP
- Japan
- Prior art keywords
- vehicle
- image
- unit
- user
- display
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 12
- 238000003384 imaging method Methods 0.000 claims description 104
- 238000004891 communication Methods 0.000 claims description 83
- 238000001514 detection method Methods 0.000 claims description 29
- 230000005540 biological transmission Effects 0.000 claims description 27
- 238000012545 processing Methods 0.000 description 35
- 238000010586 diagram Methods 0.000 description 18
- 238000006243 chemical reaction Methods 0.000 description 13
- 238000000605 extraction Methods 0.000 description 6
- 230000008569 process Effects 0.000 description 6
- 238000012544 monitoring process Methods 0.000 description 5
- 230000001133 acceleration Effects 0.000 description 3
- 230000008859 change Effects 0.000 description 3
- 230000000295 complement effect Effects 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 230000007246 mechanism Effects 0.000 description 2
- 238000005070 sampling Methods 0.000 description 2
- 206010037660 Pyrexia Diseases 0.000 description 1
- 230000003190 augmentative effect Effects 0.000 description 1
- 238000002485 combustion reaction Methods 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 238000005401 electroluminescence Methods 0.000 description 1
- 230000002996 emotional effect Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 238000007499 fusion processing Methods 0.000 description 1
- 230000036541 health Effects 0.000 description 1
- 238000001093 holography Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 230000002194 synthesizing effect Effects 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60N—SEATS SPECIALLY ADAPTED FOR VEHICLES; VEHICLE PASSENGER ACCOMMODATION NOT OTHERWISE PROVIDED FOR
- B60N2/00—Seats specially adapted for vehicles; Arrangement or mounting of seats in vehicles
- B60N2/002—Seats provided with an occupancy detection means mounted therein or thereon
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
- B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
- B60R1/29—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area inside the vehicle, e.g. for viewing passengers or cargo
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/14—Systems for two-way working
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
- B60R2300/10—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
- B60R2300/20—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of display used
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/0141—Head-up displays characterised by optical features characterised by the informative content of the display
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0179—Display position adjusting means not related to the information to be displayed
- G02B2027/0181—Adaptation to the pilot/driver
Description
本願は、2017年6月16日に、日本に出願された特願2017-118918号に基づき優先権を主張し、その内容をここに援用する。
図1は、画像提供システム1の構成図である。画像提供システム1は、例えば、車両に搭載される車載画像提供装置100と、車両以外の場所に配置される画像提供装置300と、管理サーバ400とを備える。これらの構成要素は、ネットワークNWを介して互いに通信可能である。ネットワークNWは、インターネット、WAN(Wide Area Network)、LAN(Local Area Network)、公衆回線、プロバイダ装置、専用回線、無線基地局などを含む。
車載画像提供装置100は、例えば、通信部110と、撮像部120と、HMI(Human machine Interface)130と、在席検知部140と、接続状況検知部150と、送信許可部160と、記憶部170と、制御部180とを備える。
画像提供装置300は、例えば、通信部310と、撮像部320と、表示部330と、記憶部340と、HMI350と、制御部360とを備える。
管理サーバ400は、例えば、通信部410、415と、記憶部420、425と、制御部430と、データ保持部440とを備える。
図11は、車両200の自動運転のための構成を示す図である。車両200は、例えば、通信部110を含む車載画像提供装置100と、外界監視ユニット210と、ナビゲーション装置230と、推奨車線決定装置240と、自動運転制御ユニット250と、駆動力出力装置260と、ブレーキ装置262と、ステアリング装置264とを備える。
外界監視ユニット210と車載画像提供装置100の撮像部120は一部または全部が共用されてもよい。
ナビゲーション装置230のHMI232と車載画像提供装置100のHMI130は一部または全部が共用されてもよい。
Claims (9)
- 車両に搭載された撮像部と、
人物の仮想像を発生させる表示部と、
車両外の機器と通信接続する通信部と、
前記車両内の在席状態を検知する在席検知部と、
前記車両とは異なる位置に存在する前記車両外の機器の利用者が装着するヘッドマウントディスプレイ装置の視線センサによって検出された前記利用者の視線の動きに基づいて、前記撮像部の遠隔操作を行う制御部と、
前記車両外の機器と前記通信部との間の接続状況を検知する接続状況検知部と、
前記接続状況検知部が検知した接続状況に基づき、前記遠隔操作された前記撮像部により撮像された画像の送信を許可する送信許可部と、を備え、
前記表示部は、前記通信部の作動状態において、前記在席検知部が検知した前記車両内の在席状態に基づき、前記仮想像の表示態様を制御し、
前記通信部は、前記送信許可部が送信を許可するとき、前記撮像部によって撮像された画像を前記車両外の機器に送信する、
車両の画像提供システム。 - 前記表示部は、前記車両のミラーまたはウインドウに前記仮想像を発生させる、
請求項1に記載の車両の画像提供システム。 - 前記表示部は、前記在席検知部が検知した前記車両内の在席状態に基づき、前記車両内の空席に対応し前記仮想像を発生させる、
請求項1または2に記載の車両の画像提供システム。 - 前記表示部が表示する前記仮想像は、前記車両以外の場所で撮像されたリアルタイム像である、
請求項1から3のうちいずれか1項に記載の車両の画像提供システム。 - 前記表示部が表示する前記仮想像は、モデル像である、
請求項1から3のうちいずれか1項に記載の車両の画像提供システム。 - 前記表示部が表示する前記仮想像は、予め撮像されて記録された像である、
請求項1から3のうちいずれか1項に記載の車両の画像提供システム。 - 前記撮像部によって撮像された画像のデータの少なくとも一部に基づいてストリーミング画像が生成される、
請求項1から3のうちいずれか1項に記載の車両の画像提供システム。 - 前記表示部は、前記通信部の作動状態において、前記在席検知部が検知した前記車両内の在席状態に基づき、前記車両の利用者が前記車両内の空席を視認したときに前記仮想像であるモデル像が前記空席に存在していると感じるように前記モデル像を表示させ、
前記モデル像は、前記車両とは異なる場所の撮像部により撮像された前記車両の利用者とは異なる利用者の像である、
請求項1に記載の車両の画像提供システム。 - コンピュータが、
車両とは異なる位置に存在する前記車両外の機器の利用者が装着するヘッドマウントディスプレイ装置の視線センサによって検出された前記利用者の視線の動きに基づいて、車両に搭載された撮像部の遠隔操作を行い、
前記車両外の機器と車両外の機器と通信接続する通信部との間の接続状況を検知した接続状況に基づき、前記遠隔操作された前記撮像部により撮像された画像の送信を許可し、
人物の仮想像を発生させる表示部が、前記通信部の作動状態において、前記車両内の在席状態を検知する在席検知部が検知した前記車両内の在席状態に基づき、前記仮想像の表示態様を制御し、
前記通信部が、前記画像の送信が許可されたとき、前記撮像部によって撮像された画像を前記車両外の機器に送信する、
車両の画像提供方法。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017118918 | 2017-06-16 | ||
JP2017118918 | 2017-06-16 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019525460A Division JPWO2018230563A1 (ja) | 2017-06-16 | 2018-06-12 | 車両の画像提供システム、サーバーシステムおよび車両の画像提供方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2020080542A JP2020080542A (ja) | 2020-05-28 |
JP7209651B2 true JP7209651B2 (ja) | 2023-01-20 |
Family
ID=64660921
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019525460A Withdrawn JPWO2018230563A1 (ja) | 2017-06-16 | 2018-06-12 | 車両の画像提供システム、サーバーシステムおよび車両の画像提供方法 |
JP2020007766A Active JP7209651B2 (ja) | 2017-06-16 | 2020-01-21 | 車両の画像提供システム、および車両の画像提供方法 |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019525460A Withdrawn JPWO2018230563A1 (ja) | 2017-06-16 | 2018-06-12 | 車両の画像提供システム、サーバーシステムおよび車両の画像提供方法 |
Country Status (5)
Country | Link |
---|---|
US (1) | US11397322B2 (ja) |
JP (2) | JPWO2018230563A1 (ja) |
CN (1) | CN110741631A (ja) |
DE (1) | DE112018003025T5 (ja) |
WO (1) | WO2018230563A1 (ja) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11107281B2 (en) | 2018-05-18 | 2021-08-31 | Valeo Comfort And Driving Assistance | Shared environment for vehicle occupant and remote user |
JP7271251B2 (ja) * | 2019-03-22 | 2023-05-11 | 日産自動車株式会社 | 情報処理装置及び情報処理方法 |
US11924393B2 (en) | 2021-01-22 | 2024-03-05 | Valeo Comfort And Driving Assistance | Shared viewing of video among multiple users |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000244886A (ja) | 1999-01-20 | 2000-09-08 | Canon Inc | コンピュータ会議システム、コンピュータ処理装置、コンピュータ会議を行う方法、コンピュータ処理装置における処理方法、ビデオ会議システム、ビデオ会議を行う方法、ヘッドホン |
US20120293506A1 (en) | 2009-11-10 | 2012-11-22 | Selex Sistemi Integrati S.P.A. | Avatar-Based Virtual Collaborative Assistance |
JP2014225801A (ja) | 2013-05-16 | 2014-12-04 | 株式会社ニコン | 会議システム、会議方法およびプログラム |
US20170013188A1 (en) | 2014-09-19 | 2017-01-12 | Be Topnotch, Llc | Smart vehicle sun visor |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH08336128A (ja) * | 1995-04-05 | 1996-12-17 | Matsushita Electric Ind Co Ltd | 映像視聴装置 |
JP4076747B2 (ja) | 2001-08-24 | 2008-04-16 | アルパイン株式会社 | Tv電話システム及びtv電話接続方法 |
JP2007074081A (ja) * | 2005-09-05 | 2007-03-22 | Denso Corp | 車載用通信装置 |
JP2011075848A (ja) | 2009-09-30 | 2011-04-14 | Tokyo Metropolitan Government | 情報表示システム |
WO2012033095A1 (ja) * | 2010-09-06 | 2012-03-15 | 国立大学法人東京大学 | 車両システム |
US9426358B2 (en) | 2014-03-11 | 2016-08-23 | Nokia Technologies Oy | Display of video information |
CN106405836A (zh) | 2015-07-28 | 2017-02-15 | 本田技研工业株式会社 | 车辆显示装置以及车辆显示方法 |
-
2018
- 2018-06-12 US US16/620,914 patent/US11397322B2/en active Active
- 2018-06-12 DE DE112018003025.3T patent/DE112018003025T5/de active Pending
- 2018-06-12 WO PCT/JP2018/022435 patent/WO2018230563A1/ja active Application Filing
- 2018-06-12 JP JP2019525460A patent/JPWO2018230563A1/ja not_active Withdrawn
- 2018-06-12 CN CN201880038365.XA patent/CN110741631A/zh active Pending
-
2020
- 2020-01-21 JP JP2020007766A patent/JP7209651B2/ja active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000244886A (ja) | 1999-01-20 | 2000-09-08 | Canon Inc | コンピュータ会議システム、コンピュータ処理装置、コンピュータ会議を行う方法、コンピュータ処理装置における処理方法、ビデオ会議システム、ビデオ会議を行う方法、ヘッドホン |
US20120293506A1 (en) | 2009-11-10 | 2012-11-22 | Selex Sistemi Integrati S.P.A. | Avatar-Based Virtual Collaborative Assistance |
JP2014225801A (ja) | 2013-05-16 | 2014-12-04 | 株式会社ニコン | 会議システム、会議方法およびプログラム |
US20170013188A1 (en) | 2014-09-19 | 2017-01-12 | Be Topnotch, Llc | Smart vehicle sun visor |
Also Published As
Publication number | Publication date |
---|---|
DE112018003025T5 (de) | 2020-03-12 |
US20200159014A1 (en) | 2020-05-21 |
CN110741631A (zh) | 2020-01-31 |
WO2018230563A1 (ja) | 2018-12-20 |
JP2020080542A (ja) | 2020-05-28 |
US11397322B2 (en) | 2022-07-26 |
JPWO2018230563A1 (ja) | 2020-02-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108973993B (zh) | 车辆控制系统、车辆控制方法及存储介质 | |
CN110709271B (zh) | 车辆控制系统、车辆控制方法及存储介质 | |
CN108973682B (zh) | 车辆控制系统、车辆控制方法及存储介质 | |
JP7209651B2 (ja) | 車両の画像提供システム、および車両の画像提供方法 | |
CN108973988B (zh) | 车辆控制系统、车辆控制方法及存储介质 | |
CN110709272B (zh) | 车辆控制系统、车辆控制方法及存储介质 | |
CN108973857A (zh) | 车辆控制系统、车辆控制方法及存储介质 | |
CN111837175B (zh) | 图像显示系统、信息处理装置、信息处理方法、程序和移动体 | |
WO2019116784A1 (ja) | 情報処理装置、移動体、制御システム、情報処理方法及びプログラム | |
CN110603166A (zh) | 车辆控制系统、车辆控制方法及车辆控制程序 | |
JP7382327B2 (ja) | 情報処理装置、移動体、情報処理方法及びプログラム | |
CN108973989B (zh) | 车辆控制系统、车辆控制方法及存储介质 | |
US20180182261A1 (en) | Real Time Car Driving Simulator | |
WO2020129688A1 (ja) | 車両制御装置、車両制御方法、車両、情報処理装置、情報処理方法、及び、プログラム | |
WO2020116194A1 (ja) | 情報処理装置、情報処理方法、プログラム、移動体制御装置、及び、移動体 | |
KR20220083675A (ko) | 표시 시스템, 표시 장치, 표시 방법 및 이동 장치 | |
JP7127636B2 (ja) | 情報処理装置、情報処理方法および情報処理プログラム | |
JP2021018636A (ja) | 車両遠隔指示システム | |
WO2021131789A1 (ja) | 車両 | |
JP2022104107A (ja) | 車両遠隔操作システム及び車両遠隔操作方法 | |
WO2024009829A1 (ja) | 情報処理装置、情報処理方法および車両制御システム | |
WO2021256483A1 (ja) | 制御装置、投影システム、制御方法及びプログラム | |
WO2020116204A1 (ja) | 情報処理装置、情報処理方法、プログラム、移動体制御装置、及び、移動体 | |
KR20230091870A (ko) | 카메라 모듈, 정보 처리 시스템, 정보 처리 방법 및 정보 처리 장치 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210611 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20220613 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220614 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220815 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20221213 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230110 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7209651 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |